تحدي برمجة الذكاء الاصطناعي الجديد يكشف نتائج صادمة: الفائز يحقق 7.5% فقط

كشف تحدي “K Prize” الجديد لبرمجة الذكاء الاصطناعي عن نتائجه الأولى، والتي أظهرت فجوة كبيرة بين أداء النماذج الحالية والمهام البرمجية الواقعية.

فاز المهندس البرازيلي إدواردو روشا دي أندرادي بالجائزة البالغة 50 ألف دولار، رغم تحقيق نسبة صحيحة لا تتجاوز 7.5% من إجمالي الأسئلة، مما يسلط الضوء على صعوبة التحدي المصمم لمحاكاة مشاكل البرمجة الحقيقية على منصة جيت هاب .

يختلف هذا التحدي عن نظيره التقليدي “SWE-Bench” الذي تصل فيه النماذج إلى 75% في الاختبارات الميسرة، حيث صمم “K Prize” ليكون نسخة “خالية من التلوث” بمعايير صارمة.

يعتمد على مشاكل برمجية جديدة تم الإبلاغ عنها بعد 12 مارس 2025 فقط، مع تشغيل دون اتصال بالإنترنت لضمان عدم تدريب النماذج مسبقًا على الأسئلة.

أكد أندي كونوينسكي، المؤسس المشارك لشركة Perplexity والمشرف على التحدي، أن الهدف هو كسر “فقاعة التقييم المفرط في التفاؤل” للنماذج الحالية، حيث تعتمد العديد من الاختبارات على مجموعات بيانات يمكن للنماذج التدرب عليها مسبقًا.

كما أعلن عن جائزة مليون دولار لأول نموذج مفتوح المصدر يحقق 90% في التحدي، مشيرًا إلى أن النتائج الحالية تثبت أن الذكاء الاصطناعي “ليس قريبًا من استبدال المبرمجين البشر” كما تروج بعض الشركات .

يأتي هذا التحدي في وقت تشهد فيه صناعة الذكاء الاصطناعي جدلاً حول موثوقية المقاييس الحالية، حيث حذر باحثون من جامعة برينستون من أن بعض النماذج قد تحقق نتائج مبالغًا فيها بسبب “التلوث” في بيانات التدريب أو التدخل البشري في تحسين النتائج خصيصًا للاختبارات .

النتائج الأولية لتحدي “K Prize” تقدم دليلاً عمليًا على أن التقدم في برمجة الذكاء الاصطناعي ما زال يواجه عقبات جوهرية في التعامل مع المشكلات غير المألوفة، رغم الانتشار الواسع لأدوات مثل “كوبايلوت” و”شات جي بي تي” للبرمجة.