المعيار المترجم ليس معيارًا موروثًا

الاختبار الموروث

حين يدعي نموذج جديد قدرة عربية، تكون الإيصالات مألوفة: حفنة من حزم التقييم الإنجليزية الشهيرة تُترجم آليًا إلى العربية، ثم تُقاس وتُعلن النتيجة إلى منزلتين عشريتين. الدقة الحسابية حقيقية، أما القياس فليس كذلك، أو لا يقيس ما يدعيه. الاختبار المترجم اختبار متحوّل، والتحول ليس محايدًا قط.

تعلمنا ذلك بالطريقة المكلفة مرتين؛ ولهذا لم يكن اثنان من إصداراتنا نماذج أصلًا.

ما الذي تحمله الترجمة؟

تسافر ثلاثة أشياء مع المعيار المترجم. الافتراضات: أسئلة كُتبت لثقافة تختبر توزيع معرفتها، فتقيس النسخة العربية الإلمام بطرائف مترجمة بقدر فهم اللغة. والبصمات: للترجمة الآلية عادات صياغة تتعرف إليها النماذج المدربة على نص مترجم آليًا، فترتفع الدرجات من دون أن ترتفع القدرة. والاتجاه: الحزمة المصممة بالإنجليزية تختبر العربية هدفًا لا مصدرًا، فتغيب فئات كاملة مثل التشكيل وتنوع اللهجات والغنى الصرفي عن الجدول.

النتيجة معيار لا يستطيع الفشل في المواضع التي تفشل فيها العربية فعلًا، ولذلك هو أسوأ من غياب المعيار: طمأنة مصنّعة على نطاق واسع.

اعترافان

احتاج سَديد إلى معيار للتشكيل، وكانت الخيارات العامة منحازة إلى النص الديني التراثي، ومتداخلة مع متون تدريب الجميع، وتضغط الأخطاء كلها في رقم يعامل الحركة المفقودة والنهاية الإعرابية المقلوبة سواء. لذلك وُجد SadeedDiac-25: سجلات منفصلة وصعوبة متدرجة وجمل يمكن للمراجع الدفاع عنها واحدةً واحدة.

احتاج مُترجِم إلى معيار ترجمة، وكانت المعايير النزيهة إما ضيقة أو موجودة داخل مجموعات التدريب. لذلك وُجد Tarjama-25: خمسة آلاف زوج من الجمل راجعها خبراء، ثنائي الاتجاه عمدًا؛ لأن نموذجًا يترجم إلى العربية ببراعة ويخرج منها بضعف يخفي لا تماثل لم تسأل عنه الحزم القديمة. كلّف بناء الاختبار جزءًا معتبرًا من بناء النموذج، وهو الجزء الذي منح أرقام النموذج معناها.

الكتابة من العربية لا إليها

البديل ليس غريبًا؛ إنه عمل فحسب. اكتب أصليًا: أسئلة تُتصور بالعربية على يد من يعيشون فيها، ثم تُترجم إلى الخارج إن أريدت المقارنة، فينعكس اتجاه الوراثة. وزّع السجلات: التراثي والفصيح الحديث واللهجات، لأن النموذج الذي يخدم المنطقة يلقاها كلها قبل الظهر. ضع بروتوكولًا للتلوث: وثّق المصادر، واعزل مادة غير مرئية، وقل ذلك صراحة. وانشر تصنيفًا للأخطاء؛ فالدرجة الواحدة بيان صحفي، أما التصنيف فأداة.

لا يتطلب شيء من ذلك مختبرًا حدوديًا؛ بل يتطلب الإيمان بأن اللغة تستحق الفحص بشروطها، وهذا بند ميزانية لا اختراق علمي.

اختبار الوراثة

لا تعني درجة القدرة أكثر مما يعنيه الاختبار وراءها. اسأل عن الاختبار أولًا.

خاتمة

@misc{chrouf2026inheritance,
  author = {Chrouf, Sara},
  title  = {A Benchmark Translated Is Not a Benchmark Inherited},
  year   = {2026},
  url    = {https://sarachrouf.com/ar/journal/a-benchmark-translated-is-not-a-benchmark-inherited}
}