دراسة «تريس إم إل»: لماذا تعجز الوكلاء البرمجية عن مجاراة الخبراء في هندسة تعلم الآلة؟

تستطيع النماذج اللغوية الكبيرة كتابة مقاطع برمجية دقيقة عند مواجهة مسائل معزولة أو محدودة النطاق، لكنها تظل عاجزة عن إدارة دورة التطوير المستقلة والكاملة في مشاريع تعلم الآلة. هذا الإخفاق يتجلى بوضوح حين تواجه الوكلاء البرمجية بيئات عمل تتطلب ساعات متواصلة من التغذية الراجعة، وتعديل خطوط معالجة البيانات، وتجربة النماذج، وضبط إجراءات التحقق، حيث ينتهي بها المطاف في معظم المنافسات متأخرة عن أداء المتسابقين البشريين المتمرسين.

أوضحت ورقة بحثية جديدة بعنوان «تريس إم إل» أعدها باحثون بقيادة جياروي يان، أن مقاييس التقييم التقليدية القائمة على النتيجة النهائية فقط ترصد هذه الفجوة بين الإنسان والآلة دون أن تكشف أسبابها الحقيقية، لأنها تحكم على التسليم النهائي وتتجاهل مسار التطوير البرمجي بأكمله. ولمعالجة هذا القصور، طرح الباحثون بنية مقارنة تجمع وتوثق مسارات التطوير على مستوى النسخ والتعديلات البرمجية الدقيقة، محايدة بين عمل المطورين البشريين والوكلاء البرمجية في المنافسات نفسها عبر منصة «كاغل».

شملت قاعدة البيانات 4465 مسار تطوير بشري موزعة على 134 مسابقة، من بينها سبع منافسات جرى تشغيلها بالتوازي بواسطة هيكلين من الوكلاء البرمجية، مما أتاح تحليل 430 مسارًا بشريًا مقابل 207 مسارات للوكلاء. وقامت الدراسة بتوثيق كل نسخة برمجية مع درجتها المحققة، وطابعها الزمني، وتصنيف الإجراء المتخذ، والهدف منه، وحجم التعديل، وتأثيره المباشر على النتيجة.

تكمن الفجوة الجوهرية في قدرة المهندس البشري على المناورة الذهنية والعودة إلى تجارب سابقة، مقابل وقوع الوكلاء في حلقات تطوير ضيقة وعقيمة. يوضح التحليل أن الخبراء يتبعون مسارًا مرنًا يوازن بين هندسة البيانات، وضبط التحقق، وتبديل معماريات النماذج، ودمج التوقعات، مع امتلاك مرونة الرجوع إلى أفكار ومسارات تم استبعادها مسبقًا لإعادة اختبارها وتطويرها.

في المقابل، كشفت الدراسة أن الوكلاء البرمجية تحصر نفسها في أنماط ضيقة ومتكررة؛ فهيكل «كودكس» يستهلك خطواته في إعادة توزيع أوزان النماذج المدمجة وتعديل تفاصيل التسليم، بينما يقتصر هيكل «إم إل إيفولف» على إدخال تعديلات موضعية على النموذج القائم دون تغيير بنيوي. وكلا الهيكلين يفشل في تغيير الاتجاه بالوتيرة التي يتبعها البشر، ويعجز تمامًا عن إعادة فتح مسارات التطوير المهجورة.

وحين زود الباحثون النماذج بأمر توجيه تخطيطي مستخلص من ممارسات الخبراء البشريين، تحسنت سلوكيات الوكلاء في الجوانب المذكورة صراحة وارتفعت نتائجها، غير أن الهيكل العام للجهد المبذول ظل محكومًا بطبيعة الوكيل الضيقة. وأظهرت التجربة أن التوجيهات والأوامر النصية لا تسد إلا ذلك الجزء من الفجوة الذي يمكن اختزاله في تعليمات مباشرة، بينما تبقى مرونة التخطيط والاستكشاف خارج نطاق السيطرة الحالية.

يحمل هذا التحليل دلالة مباشرة لفرق البيانات والذكاء الاصطناعي في المنطقة، سواء في المراكز التقنية في الخليج أو في شركات البرمجيات في مصر والشام. الاعتماد على الوكلاء البرمجية الجاهزة لبناء نماذج تعلم الآلة دون إشراف هندسي مستمر يقود إلى مسارات مغلقة واستنزاف غير مجد لموارد الحوسبة في تجارب سطحية، مما يفرض على مديري الفرق التركيز على مهارات التخطيط والتحقق وتصميم خطوط المعالجة ككفاءة بشرية حاسمة لا تعوضها موجهات التوليد الآلي.