الفصل الثالث — القياس النص الكامل
انضباط الملاحظة
لا يصنع القياس الحقيقة؛ بل يحد الجزء الذي نستطيع رؤيته منها. رؤية رقم لا تعني معرفة حالة. قد يبين الرسم تغيراً، لا سببه. ويمكن عد تكرار الذكر، وتتبع الاستشهاد، وحساب معدل التوصية، ومقارنة الزيارات والطلبات والمبيعات. كل ذلك قابل للقياس، ولا يمثل أي منه منفرداً نجاحاً.
كثيراً ما يُبنى تقرير GEO بالعكس: يُنتج الرقم أولاً، ثم يُمنح معنى، ويحوّل المعنى إلى نجاح، ويربط النجاح بنتيجة تجارية. تضيف كل نقلة ادعاءً جديداً فيما يظل القياس نفسه. كما تناقش أدبيات استرجاع المعلومات التوليدي أن التقويم الراسخ القائم على الترتيب لا يكفي وحده للإجابات المولدة.[5] يرفض Framework هذه السلسلة. القياس ليس رقماً يزين الادعاء، بل بروتوكولاً يجعل الملاحظة قابلة للمقارنة.
ما تقيسه هو الحد الأعلى لما تستطيع ادعاءه.
1. موضوع القياس
يجب أن يجيب نظام القياس عن خمسة أسئلة: ماذا نقيس؟ وما وحدة القياس؟ وفي أي شروط نقيس؟ وبماذا نقارن؟ وما المدة الزمنية التي نفحصها؟ إذا غابت الأجوبة فقدت عبارة «بلغت ظهورية علامتنا 72 في المئة» معناها. 72 في المئة داخل أي نظام وطلبات ولغة ومقام؟ وهل حُسبت وفق الذكر أم صحة الصفات أم دعم المصدر أم التوصية؟ وكيف عولجت السجلات الناقصة؟ الرقم غير المعرّف زينة، لا قياس.
لا يقيس GEO شيئاً واحداً، بل أربعة مجالات منفصلة:
1.1. تمثيل الكيان
هل يستطيع النظام تمييز الشخص أو المؤسسة أو المنتج أو الجهة الصحيحة؟ هل تتصادم الأسماء المتشابهة؟ وهل الفئة والجغرافيا والعلاقة بين الهوية القديمة والجديدة صحيحة؟ وهل تحفظ اللغات المختلفة الكيان نفسه؟ يمكن ترميز السجلات مثلاً: صحيح، أو جزئي، أو متصادم، أو في فئة خاطئة، أو ملتبس، أو غائب. وليس «لم يظهر الكيان» هو «تعرّف النظام إلى الكيان الخطأ»: الأول غياب، والثاني تشويه.
1.2. تمثيل الصفات
تُفحص، لكل خاصية مادية مرتبطة بالكيان، الدقة والأساس والنطاق والحداثة والحدود الظاهرة وقابلية التنفيذ. وقد تكون الرموز: مدعوم بالكامل، أو مدعوم جزئياً، أو غير مدعوم، أو مشوّه، أو ناقص. الكلمة الصحيحة وحدها لا تصنع تمثيلاً صحيحاً؛ فالنطاق جزء من القياس. العمل سابقاً مع عملاء دوليين لا يعني قدرة غير محدودة على التشغيل العالمي.
1.3. سلوك الحُكم
هل يكتفي النظام بالتعريف، أم يقارن، أم يقدم توصية مشروطة أو قاطعة، أم يستبعد الكيان في الموضع الصحيح؟ يمكن استخدام رموز مثل توصية ملائمة، وتوصية مشروطة، وتوصية غير ملائمة، وتعليل غير مدعوم، واستبعاد صحيح، واستبعاد خاطئ، ولا حُكم. لا يكفي عدد التوصيات؛ بل يُقوّم التعليل ونية المستخدم وحدود المؤسسة داخل السجل نفسه. وقد لا يكون حضور المؤسسة في كل طلب تمثيلاً قوياً، بل تجاوزاً لمجالها.
1.4. الأثر التجاري
تُتبع، كل على حدة، إفادة التأثر بالذكاء الاصطناعي، والإحالة القابلة للرصد، والاتصال، والطلب المؤهل، والعرض، والبيع، والربح الإجمالي، والإلغاء أو الاسترداد، والرضا، وإعادة الشراء. الزيارات ليست مبيعات؛ والمبيعات ليست أرباحاً؛ والأرباح ليست رضا؛ والرضا ليس دواماً. قد تبين أدوات التحليل أجزاء من السلسلة، لا رحلة القرار كاملة. ويمكن للأثر التجاري أن يبين علاقة بين التمثيل والنتيجة، لكنه لا يثبت السببية وحده.
يمكن وصل المجالات الأربعة، لكن لا يجوز إذابتها في رقم واحد.
2. وحدة القياس والمقام
الوحدة الأساسية في Framework ليست الدرجة، بل سجل الملاحظة. ويتكون السجل من:
كيان واحد + نظام واحد وطريقة وصول واحدة + طلب واحد + لغة واحدة + زمن واحد + شرط جلسة واحد + ناتج كامل واحد
حين يتغير عنصر من هذه العناصر ينشأ سجل جديد. اختبار الطلب نفسه في نظام آخر أو لغة أخرى أو تاريخ آخر ليس امتداداً للسجل السابق، بل ملاحظة مستقلة. قد تتشابه النتيجة، لكن السجل منفصل.
يحمل كل سجل، في حده الأدنى، نسخة البروتوكول، والكيان، والنظام والواجهة، والوقت، والطلب كاملاً، واللغة، والإجابة والمصادر كاملين، وعائلة الطلب، ونتيجة الترميز، والمقيّم، وحالة المقارنة، وحد الدليل. عبارة «فُحصت عشر إجابات» معلومة عن الحجم. أما «تعرّف النظام إلى الكيان في الفئة الصحيحة، وفق المعيار المحدد سلفاً، في سبع من عشر إجابات» فقد تكون قياساً.
لكل معدل بسط ومقام. وعبارة «أوصى النظام بالعلامة سبع عشرة مرة» ناقصة ما لم تُشرح أعداد الطلبات الكلية، والأنظمة، والتكرارات، ووجود اسم العلامة في الطلب من عدمه، والنواتج الفاشلة، واختبارات الاستبعاد. أما «أوصى النظام بالعلامة في سبعة عشر من 240 ناتجاً صالحاً أُنتجت من أربعين طلباً بثلاثة تكرارات على نظامين» فتبين للقارئ مجال الحُكم.
السجل الناقص ليس صفراً. فإذا لم ينتج النظام إجابة، لا تسجل النتيجة «لم تظهر العلامة»، بل «تعذر الحصول على ناتج». ويُشرح مع كل معدل مجموع السجلات، ومعايير الإدراج والاستبعاد، وبنية التكرار، والبيانات الناقصة، وطريقة الترميز. حين يُخفى المقام يكبر الرقم وتصغر المعلومة.
3. لماذا تُحظر درجة GEO الواحدة؟
لا يربط هذا Framework قراراته بدرجة GEO مركبة واحدة، لأن التمثيل ليس أحادي البعد. قد تكون العلامة متسقة على مستوى الهوية، ومشوّهة على مستوى الصفات، وكثيرة التوصية على مستوى الحُكم، وعديمة القيمة تجارياً. يسوّي الرقم الواحد هذه التوترات. وما جرى تسويته يسهل مقارنته، لكن يتعذر فهمه.
يمكن ترجيح الذكر والاستشهاد والتوصية واللغة الإيجابية والزيارات والتحويل لإنتاج نتيجة مثل 78. وقد تنفع هذه المؤشرات إشارةً موجزة في العمليات الداخلية؛ لكنها لا تحدد وحدها نوع التشويه، أو الحق المتأثر، أو جواز ادعاء عام. لذلك يستخدم Framework ملف قياس:
الجدول 3.1 — ملف قياس GEO
| المجال | الحالة المرصودة | النطاق | الحد الرئيس |
|---|---|---|---|
| تمثيل الكيان | الهوية صحيحة في الغالب | نظامان ولغتان | لم تُقس الأنظمة الأخرى |
| تمثيل الصفات | جزئي ومتناقض | أربع خصائص أساسية | السعر والقدرة خارج النطاق |
| سلوك الحُكم | توصية مشروطة | طلبات محايدة ومقارنة | الاستقرار طويل الأجل مجهول |
| الأثر التجاري | علاقة محدودة | اثنتا عشرة إفادة من العملاء | تعذر إثبات الإسناد الكامل |
يمكن للقياسات الفرعية أن تحمل نسباً أو أعداداً. المحظور ليس الرقم، بل إخفاء حقائق مختلفة في درجة واحدة تملك سلطة القرار.
4. النقطة والمجموعة والانتشار
للقياس ثلاثة مستويات من النطاق. الملاحظة النقطية طلب واحد ونظام واحد ولحظة واحدة؛ تثبت وقوع الحدث، لا وجود نمط سلوكي. يمكن القول «أوصى النظام A بالعلامة خياراً ثانياً في هذا الطلب بتاريخ 12 أغسطس 2026». ولا يمكن القول «تحتل العلامة المرتبة الثانية في النظام A».
ملاحظة المجموعة تتكون من تكرارات مضبوطة تختبر نية مستخدم واحدة بصيغ مختلفة. يمكن القول «مُثلت العلامة بالفئة الصحيحة في 62 في المئة من السجلات الصالحة داخل مجموعة نية الشراء المكونة من أربعين طلباً». والنتيجة تخص تلك المجموعة وحدها؛ فلا تنقل إلى لغة أو نظام أو نية أخرى.
ملاحظة الانتشار تفحص أنظمة ولغات وعائلات طلبات ونوافذ زمنية متعددة بقواعد ترميز مشتركة. توسّع النطاق ولا تضمن اليقين. وكلما اتسع الانتشار ازدادت أهمية عدم إخفاء الفروق البيئية. وقد ينتج البروتوكول المبعثر ضوضاء أكثر ببيانات أكثر.
ويمر الزمن داخل هذه المستويات. القياس الواحد سجل لحظي. ولكي نصف «حالة» نحتاج إلى سلوك يتكرر في فواصل محددة سلفاً. ويمكن الإبلاغ عن السلوك بأنه مفرد، أو متكرر، أو مستقر، أو متذبذب، أو آخذ في الضعف، أو زائل، أو غير قابل للتصنيف بعد.
5. قفل البروتوكول
يُكتب بروتوكول القياس قبل رؤية النتائج. ويُقفل سلفاً الكيان المفحوص، ومجالات القياس، والأنظمة، واللغات، وعائلات الطلبات، وعدد التكرارات، والنافذة الزمنية، ومجموعة المقارنة، وقواعد الترميز، ومعالجة البيانات الناقصة. يمكن تغيير البروتوكول؛ ولا يمكن إخفاء التغيير.
ينشئ كل نظام أو لغة أو مجموعة طلبات أو معيار تقويم جديد نسخة بروتوكول جديدة. وإذا أريدت مقارنة مباشرة بين النتائج القديمة والجديدة، فيجب عرض المجموعة الفرعية المشتركة التي لم تتغير على حدة. لا معنى لعبارة «كنا عند 42 في المئة وأصبحنا عند 68 في المئة» إلا إذا قاست الفترتان الشيء نفسه بالطريقة نفسها. عند تغير البروتوكول تنكسر السلسلة؛ ولا يجوز ضم السلسلة المكسورة في قصة تحسن.
لا يرى الاختبار الثابت تماماً المشكلات الجديدة عبر الزمن؛ والاختبار المتغير باستمرار يفسد المقارنة. لذلك تُحفظ مجموعتان من الطلبات. تبقى المجموعة الجوهرية ثابتة للمقارنة الزمنية. ويمكن أن تتغير مجموعة الاستكشاف للبحث عن نيات مستخدم جديدة وأنواع خطأ جديدة. ولا تُخلط نتائج الاستكشاف بالسلسلة الجوهرية؛ بل تنتج فرضية أولاً، وقد تُضاف إلى نسخة البروتوكول التالية بتعليل كافٍ.
6. مجموعة الطلبات
الاختبار الذي يستخدم طلبات تتضمن اسم العلامة وحدها يقيس الاستدعاء الموجّه لا الاكتشاف. تحمل مجموعة الطلبات المتوازنة خمس عائلات:
- طلبات الهوية: تختبر الاسم والفئة والمدير والمنتج والعلاقات المؤسسية.
- طلبات الاكتشاف المحايد: تفحص الاكتشاف انطلاقاً من الحاجة والفئة والجغرافيا وشروط الاستخدام من دون ذكر اسم العلامة.
- طلبات المقارنة: تقارن الخيارات تحت الشروط نفسها، وتسجل التعليل أكثر من الترتيب.
- الطلبات المضادة: تبحث عن موضع انكسار الادعاء في سياقات قد يكون فيها المنافس أو فئة أخرى أنسب.
- طلبات الاستبعاد: تختبر فيضان التمثيل بأسئلة ينبغي ألا تظهر فيها العلامة.
يجب أن تختبر مجموعة الطلبات الحد الذي يستطيع الكيان حمله، لا النتيجة المرغوبة. ويُشرح مدى تمثيل الطلبات المستخدمة لنيات المستخدمين الحقيقية؛ ولا يُدمج الطلب المضبوط الذي صاغه الباحث مع العبارة الطبيعية للمستخدم في حوض واحد من دون بيان الفرق.
7. الحُكم البشري والترميز والخلاف
لا يستطيع الناتج التوليدي التحقق من نفسه. فسؤال النظام «هل هذه الإجابة صحيحة؟» لا يشكل تدقيقاً مستقلاً، بل ينتج ناتج نموذج جديداً. يقتضي القياس تعريف الرموز وأمثلة القرار قبل رؤية النتيجة.
في الادعاءات عالية الأثر، يرمّز مقيّمان بشريان على الأقل السجلات نفسها بصورة مستقلة. ويمكن الإبلاغ أولاً عن نسبة الاتفاق الخام، ثم عن مقياس مناسب مثل معامل كابا لكوهين الذي يحسب الاتفاق الممكن وقوعه بالمصادفة.[15] حتى ارتفاع كابا لا يثبت أن الرموز صحيحة في العالم؛ بل يبين أن المقيّمين طبقا التعريفات بطريقة متقاربة. كما أن انخفاض الاتفاق ليس عيباً ينبغي إخفاؤه، بل بيان على قصور التعريف أو أمثلة التدريب أو قاعدة الأدلة.
يمكن للأدوات القائمة على النماذج التي تقيس تشابه النص أو القرب الدلالي أن تنتج إشارات مساعدة في مجموعات السجلات الكبيرة.[19] لكن تشابه إجابتين لا يعني صحة كلتيهما. قد يساعد قياس التشابه الآلي في التصنيف؛ ويبقى القرار النهائي بشأن صحة الواقع وملاءمة المستخدم والحُكم الأخلاقي بيد الإنسان.
8. قابلية المقارنة وعدم اليقين والبيانات الناقصة
لا يمكن مقارنة رقمين إلا إذا كانا يقيسان الشيء نفسه. إذا تغير النظام أو النموذج، أو الواجهة، أو اللغة، أو مجموعة الطلبات، أو عدد التكرارات، أو مجموعة المنافسين، أو قاعدة الترميز، أو النافذة الزمنية، أو معالجة البيانات الناقصة، فقد لا تكون النتائج باطلة؛ لكنها قد لا تنتمي إلى السلسلة نفسها. المقارنة تحتاج إلى تناظر. وليس كل رقمين متجاورين مقارنة.
لا يلغي القياس عدم اليقين؛ بل يجعله ظاهراً. وتُفصل ثلاثة أوضاع خصوصاً:
- لم يُرصد: لم يُجر الاختبار المعني.
- لم يوجد: أُجري الاختبار ولم يظهر السلوك.
- لا ينطبق: لم يكن المعيار صالحاً لهذا السجل.
لا يساوي أي من هذه الأوضاع صفراً تلقائياً. فإذا كان النظام لا يعرض مصادر، يقال «تعذر رصد دعم المصدر» لا «لا دعم للمصدر». وإذا لم يذكر العميل تأثير الذكاء الاصطناعي، يقال «لم يُفد بوجود تأثير» لا «لا تأثير». وإذا لم تظهر العلامة في طلب، يقال «لم يُرصد الكيان في هذا الطلب» لا «لا يعرف النظام العلامة».
يبقي كل تقرير ثلاثة حدود ظاهرة: النطاق — ما الذي قيس؛ والمجال الناقص — ما الذي لم يُقس؛ وعدم اليقين — ما الذي يمكن أن يفسر النتيجة أيضاً؟ كتابة المجهول صفراً لا تزيل عدم اليقين، بل تخفيه.
9. حالة تعليمية: Sable & Pine
محاكاة تعليمية — بيانات تركيبية. لا تمثل هذه الحالة مؤسسة حقيقية أو مدة قياس حقيقية.
يُعرض تقرير لفترتين عن Sable & Pine، وهي شركة افتراضية لتصميم المساحات الداخلية المؤسسية: 42 في المئة في القياس الأول و68 في المئة في الثاني. يبدو التحسن واضحاً للوهلة الأولى. لكن فتح البروتوكولين يكشف أن موضوع القياس تغير.
الجدول 3.2 — مقارنة بروتوكول تركيبية لـ Sable & Pine
| العنصر | الفترة الأولى | الفترة الثانية |
|---|---|---|
| عدد الأنظمة | 1 | 3 |
| اللغة | الإنجليزية | الإنجليزية والألمانية والتركية |
| عدد الطلبات | 20 | 60 |
| نسبة الطلبات التي تتضمن اسم العلامة | %10 | %55 |
| طلبات المنافسين والاستبعاد | موجودة | غير موجودة |
| معيار الترميز | الصفة الصحيحة | الذكر |
| عدد التكرارات | 3 | 1 |
ليست نسبة 42 في المئة من الصفات الصحيحة هي متغير نسبة 68 في المئة من الذكر. وفوق ذلك، ذُكر اسم العلامة أكثر في الفترة الثانية، وأزيل المجال المضاد، وخُفض عدد التكرارات. وعندما تُفحص على حدة الطلبات الاثنا عشر التي مرت ببروتوكول مشترك في الفترتين، ينتقل المعدل من 42 إلى 44 في المئة.
لا يتخلص Framework من بيانات الفترة الثانية، بل يحفظها سجل بداية لبروتوكول آخر. لكنه يرفض ادعاء «تحسن» قدره 26 نقطة مئوية. تغير البروتوكول ليس تغير الأداء.
10. قرار القياس
يبين سجل القياس، الذي تُفصل حقوله في الملحق C، ما رُصد. ويقرر سجل الدليل أي جملة تستطيع هذه الملاحظة حملها. ينتج القياس سجلاً؛ ويسمح الدليل للسجل بالكلام.
لا تعد الممارسات الآتية قياساً داخل Framework: درجة GEO واحدة غير معرّفة؛ ومجموعة طلبات تغيرت بعد رؤية النتيجة؛ والاحتفاظ بالنواتج الإيجابية وحدها؛ وتقديم طلبات العلامة كأنها اكتشاف محايد؛ ودمج الأنظمة واللغات المختلفة من دون بيان الفروق؛ وسرد تغير البروتوكول بوصفه ارتفاعاً في الأداء؛ واعتبار البيانات الناقصة صفراً؛ ونسبة بلا مقام؛ واستخدام الزيارات والبيع والقيمة المستدامة بعضها مكان بعض.
قد تنتج هذه الممارسات أرقاماً، لكنها لا تنتج قياساً.
حُكم هذا الفصل هو:
ليست مهمة القياس إظهار مدى جودتنا، بل الفصل بين ما نعرفه، وما لم نفعله إلا أن رصدناه، وما لا نعرفه.
لا يصلح قياس التشويه التشويهَ. ولا تفسر رؤية التغير سببه. وإظهار المشكلة لا يعني أن كل مشكلة تحتاج إلى تدخل. لذلك سيسأل الفصل التالي، قبل الانتقال من القياس إلى الفعل: متى ينبغي أن نمس تمثيلاً، ومتى ينبغي أن نكتفي برصده؟

