«وهم التبرير في معمارية الوكلاء: دراسة تكشف تلاعب مسوغات الاستدلال بنماذج التحقق دون زيادة دقة الإجابات»
استمع لهذا المقال
بصوت راشد (Rashed)
تكشف ورقة بحثية جديدة للباحثين جامنغ تشانغ وهونغتشيو وو منشورة عبر منصة «أركايف» تحت المعرف 2610.00018، عن مفارقة مقلقة في معمارية خطوط الإجابة عن الأسئلة متخصصة الأدوار، التي تعتمد على تقسيم العمل بين نموذج مستدل يولد الإجابة ومسوغاتها، ونموذج مدقق يتولى تقييم صحتها. تفترض المعمارية الشائعة في هندسة الأنظمة الذكية أن تمرير سلسلة تبريرات التفكير من المستدل إلى المدقق يمنح النظام دقة أعلى ويعزز موثوقية الحكم، غير أن الدراسة تؤكد أن هذه القناة الاتصالية تتحول عملياً إلى مساحة فشل غير متوقعة. أظهرت التجارب أن المسوغات السليمة تكاد لا تضيف أي تحسن ملموس على دقة الإجابات النهائية مقارنة بعدم تمرير أي مسوغات على الإطلاق، في حين تنجح المسوغات المشوهة في التلاعب بقرارات نماذج التحقق ودفعها نحو أحكام خاطئة تماماً.
اعتمد الباحثان أسلوباً تشخيصياً قائماً على التدخل في الرسائل، حيث تم تثبيت الأدلة النصية والإجابة المرشحة بالكامل، مع تغيير المسوغ المنقول فقط عبر الحدود الفاصلة بين المستدل والمدقق. أُجريت التجارب على 400 مثال مأخوذة من مجموعات بيانات الأسئلة متعددة القفزات المعقدة «MuSiQue» و«HotpotQA» و«2WikiMultiHopQA»، باستخدام نماذج «ديب سيك» (DeepSeek) في دوري التوليد والتحقق. وعند تطبيق تعليمات تحقق عمياء تركز على النتيجة، أحدثت إعادة الصياغة غير الضارة تغييراً طفيفاً في حكم الدعم تراوح بين صفر و2.5 بالمئة فقط، بينما قفز التغيير إلى ما بين 10 و22 بالمئة عند إدخال مسوغات مشوهة. والأخطر من ذلك أن التعليمات الصريحة التي طلبت من المدقق فحص مسوغات التفكير بوضوح ضخمت هذا التلاعب ليصل التأرجح في أحكام الدعم إلى ما بين 34 و55 بالمئة، ما يعني أن محاولة إجبار النموذج على مراجعة التبرير تجعله أكثر قابلية للانخداع بالمنطق الزائف.
تكشف التفاصيل الإحصائية للورقة أن الإجابات النهائية تأثرت بنسبة أقل تراوحت بين 2 و30 بالمئة، حيث تزامنت نسبة ضئيلة تراوحت بين 2.9 و35.3 بالمئة من تقلبات حكم الدعم مع تغيير الإجابة النهائية، وهو ما يوضح أن المدقق قد يقتنع تماماً بتبرير فاسد لدعم إجابة صائبة مصادفة دون أن يعي الخلل المنطقي. وأكدت عمليات التدقيق البشري هذه الفجوة الإدراكية الصادمة، إذ تبيّن أن 16 حالة من أصل 42 تحريفاً صالحاً شكلت حالات إفراط في الثقة بالتبريرات الفاسدة. والأكثر دلالة أن المحكمين البشريين رفضوا أو اعتبروا غير واضحة تسعة من كل عشرة مسوغات مشوهة قبلها النموذج الذكي واعتمدها، مما يثبت أن قدرة النماذج اللغوية على التحقق المنطقي من سلاسل التفكير تظل أدنى بكثير من تقدير الإنسان الطبيعي للخلل الاستدلالي.
يحمل هذا الكشف تداعيات هندسية ومالية مباشرة على المطورين وقادة التقنية في الخليج ومصر والأردن، وتحديداً في المؤسسات المصرفية والجهات الحكومية التي تسارع لبناء منظومات استرجاع معزز بالتوليد (RAG) وشبكات وكلاء ذكاء اصطناعي متعددة الأدوار لتدقيق العقود والامتثال التنظيمي والمعاملات المالية. إن الاعتقاد السائد محلياً بأن تمرير مسار التفكير الكامل بين الوكلاء يرفع الدقة يستنزف ميزانيات الحوسبة بلا طائل، لأن توليد ونقل آلاف الرموز الإضافية يرفع تكاليف الاستدلال وزمن الاستجابة دون أي عائد حقيقي على صحة القرارات. إذا كنت تقود فريقاً تقنياً يبني منظومة وكلاء للتحقق من المستندات الرسمية أو الفتاوى القانونية، فإن الحل الهندسي يفرض التعامل مع مسوغات التفكير كقناة رسائل غير موثوقة بذاتها بدلاً من معاملتها كدليل قاطع على سلامة المخرجات، مما يتطلب تقليص الاعتماد على التبريرات الإنشائية وفرض فحوصات حتمية على الحقائق والأرقام المجردة.
تخلص الباحثة والباحث في نهاية دراستهما إلى ضرورة إعادة تقييم تشارك المسوغات المنطقية باعتبارها آلية رسائل تحقق تخضع لقواعد التدقيق الأمني، لا مجرد مسار تلقائي لتحقيق دقة أعلى في الإجابات. إن بناء أنظمة وكلاء متماسكة للمؤسسات في المنطقة يتطلب اليوم التوقف عن افتراض أن فصاحة النموذج في شرح خطواته تعني سلامة استنتاجه، فالذكاء الاصطناعي قادر على صياغة مبررات تبدو متماسكة لغوياً لخداع نموذج آخر، بينما تسقط تلك المبررات فوراً أمام أبسط فحص بشري واعي.