«نظام ألفاديانا يكشف مفارقة الوكلاء الأذكياء: أطر التشغيل قد تهدم دقة النماذج الاستدلالية»

فحصت دراسة بحثية قادها تسعة عشر باحثا بنية الوكلاء البرمجيين، وطرحت نظام قياس جديدا يحمل اسم «ألفاديانا» (AlphaDiana)، لتقييم مهام الاستدلال القابلة للتحقق عبر واجهات معيارية تربط بين مجموعات البيانات وبيئات التنفيذ وأنظمة التهديف. تكشف نتائج هذا الفحص خللا في الفرضية السائدة التي تفترض أن إحاطة نموذج الاستدلال بإطار عمل وأدوات تشغيلية ترفع كفاءته تلقائيا؛ إذ أظهرت الاختبارات أن أطر التشغيل لا تضمن تحسين دقة التفكير المنطقي، بل قد تؤدي إلى نتيجة عكسية تفقد النموذج قدرته على حل مسائل كان ينجزها بمفرده.

يقوم الوكيل البرمجي في جوهره على ربط نموذج الاستدلال بإطار تشغيلي ينظم استدعاءات النموذج، وينفذ الأدوات، ويحمّل تعليمات المهارات، ويحتفظ بسجل المحادثات في الذاكرة. اختبر الباحثون ثلاثة نماذج مفتوحة المصدر وثلاثة أطر تشغيلية مفتوحة على خمسة اختبارات قياسية قائمة على الإجابات، مع اختبار نموذجين على بيئتين تفاعليتين. وجاءت المفاجأة المنهجية حين تبين أن المكاسب التي يحققها الوكيل في الإجابة عن أسئلة يعجز النموذج المجرد عن حلها، تضيع في كثير من الأحيان بسبب إخفاقه في أسئلة كان النموذج يحلها بدقة تامة دون الاستعانة بأي أداة خارجية.

لم تفلح التدخلات الجزئية في ضبط هذا التذبذب؛ إذ أثبتت التجربة أن تزويد الوكيل بتعليمات المهارات أو الاحتفاظ بسجل الذاكرة لا يقدم تحسينا موثوقا للدقة. يتيح نظام «ألفاديانا» التحكم المستقل في إعادة استخدام الملفات والاحتفاظ بالذاكرة، وإجراء تدخلات مجهرية على الأدوات والمهارات في ظروف متطابقة. وأظهرت النتائج أن الاعتماد على الذاكرة المتراكمة أو توجيهات المهارات لم يمنع الوكلاء من الانزلاق إلى مسارات استدلال خاطئة، ما يبرهن على أن مجرد حشو سياق العمل ببيانات سابقة لا يعوض قصور التحكم البرمجي في حلقة التنفيذ.

امتد الخلل المكتشف إلى اقتصاديات التشغيل واستهلاك الرموز، حيث رصد الباحثون مفارقة حسابية تستدعي إعادة النظر في معايير الكفاءة التقليدية. يربط النظام سجلات الموارد ومسارات التنفيذ بنجاح الإجابة الفعلي، ليتبين أن انخفاض اعتلاج الرموز (token entropy) قد يترافق مع إجابات خاطئة تماما، ما يعني أن يقين النموذج الإحصائي لا يعني صحة نتيجته. والأخطر من ذلك أن انخفاض عدد الرموز المستهلكة في محاولة التنفيذ الواحدة قد يخفي تكلفة باهظة؛ فعندما تتراجع الدقة الإجمالية، يرتفع معدل استهلاك الرموز اللازمة لكل إجابة صحيحة في نهاية المطاف.

تفرض هذه النتائج تحولا عمليا على فرق الهندسة المعمارية الرقمية ومطوري الحلول في مصارف الخليج وشركات التقنية في مصر والشام. فالاندفاع الإقليمي الراهن نحو بناء وكلاء رقميين لأتمتة العمليات الإدارية والاستشارات الفنية يعتمد غالبا على تكديس أطر الأتمتة الجاهزة وحقن تعليمات الذاكرة، انطلاقا من افتراض أن النموذج المسلح بالأدوات يتفوق حتما على النموذج الأساسي. تبيّن هذه الدراسة أن تلك الأطر قد ترفع فاتورة الحوسبة وتقلل دقة العمليات الفعلية؛ والمطلوب من مهندسي النظم هنا قياس كلفة الرمز لكل حل صحيح معتمد، بدلا من الاكتفاء بحساب متوسط استهلاك الرموز في الطلب الواحد، وإخضاع أي طبقة تشغيلية لاختبارات مقارنة تقيس دقة النموذج قبل إسناد الأدوات إليه وبعده.

يضع «ألفاديانا» أداة لتشخيص الأعطال ومقارنة الوكلاء في ظل سياسات مهام وموارد موحدة، رابطا حالة التنفيذ بسجلات التعقب الكاملة. والرسالة واضحة لكل من يبني أنظمة ذاتية التوجيه: التعقيد البرمجي في أطر التشغيل ليس ضمانة لجودة التفكير، والاستدلال الرصين يبدأ من اختبار الأثر الحقيقي لكل أداة ومهارة قبل دمجها في بيئة الإنتاج.