ProgramGym تنشئ 1,648 بيئة تدريب قابلة للتحقق لوكلاء البرمجة
تصف مسودة arXiv المؤرخة في 9 أكتوبر بيئات لإعادة بناء البرامج من الصفر وسير عمل متعدد المراحل للوكلاء.
فترة الحدث / البيانات: 2026-10-09
نُشر: · آخر تحديث:
قدم باحثون من جامعة شيامن ومؤسسات أخرى إطار ProgramGym لتدريب وكلاء البرمجة على فحص سلوك برنامج وإعادة بنائه من الصفر. وفي المسودة التي أُرسلت إلى arXiv في 9 أكتوبر، تنشئ Program-Env بيئات تدريب تضم برامج مرجعية قابلة للتنفيذ ومساحات معزولة ووثائق استخدام واختبارات الصندوق الأسود. ويقول المؤلفون إنهم أعدوا 1,648 بيئة بلغات C وC++ وGo وRust. أما Program-Agent فيفصل التحليل والتنفيذ والمراجعة إلى أدوار مستقلة، مع فحوص للتجميع ونقاط استعادة بين الدورات.
في تقييم ProgramBench، أفاد المؤلفون بأن الضبط الدقيق للنموذج Qwen3.8-27B على مسارات التدريب الناتجة رفع نتيجة اجتياز الاختبارات من 34.87% إلى 42.84%. وسجل النموذج الأساسي 55.71% مع Program-Agent، بينما سجلت النسخة المضبوطة 56.25%. وتعرّف الورقة اجتياز الاختبارات بأنه متوسط حسابي لمعدلات الاجتياز لكل مهمة، لذا لا تعني الأرقام حل جميع المهام. وتخص النتائج مهام إعادة إنتاج البرامج التي أعدها الباحثون وإعداد الأدوات الموصوف، ولا تقيس القدرة العامة على البرمجة.
البيانات
عدد بيئات التدريب في ProgramGym
بيئات إعادة إنتاج البرامج التي أبلغت عنها الورقة.
| بيئات تدريب Program-Env | 1648 |
المنهجية
يحصي المؤلفون البيئات المنشأة للغات C وC++ وGo وRust.
آخر تحديث:
o
معدلات اجتياز الاختبارات لتركيبات النموذج وإطار الوكيل التي أبلغ عنها المؤلفون.
| Qwen3.8-27B مع Claude Code، قبل الضبط الدقيق على مسارات Program-Env | 34.87 |
| Qwen3.8-27B-SFT مع Claude Code، بعد الضبط الدقيق على مسارات Program-Env | 42.84 |
| Qwen3.8-27B مع Program-Agent، النموذج الأساسي نفسه | 55.71 |
| Qwen3.8-27B-SFT مع Program-Agent، النموذج المضبوط نفسه | 56.25 |
المنهجية
يعرّف ProgramBench هذا المقياس بأنه المتوسط الكلي لمعدلات اجتياز الاختبارات لكل مهمة. تثبت مقارنة Program-Env استخدام Claude Code؛ وتقارن نتيجة Program-Agent النموذج نفسه مع Claude Code أو Program-Agent. ولا يعني ذلك حل المهام بالكامل.
آخر تحديث:
الموضوعات والأماكن
اقتراحات الموضوعات
- علوم وتكنولوجيامقترح
- Preserved editorial category/topic; broad candidate onlyarxiv.org ↗
المراجع الجغرافية
تُعرض المراجع الجغرافية الواردة في المصدر فقط. فتح الخريطة الخارجية اختياري. تستخدم خرائط الأخبار الاختيارية OpenStreetMap. يرسل فتح الخريطة عنوان IP وعنوان هذا الموقع إلى مزود الخرائط؛ وتظل بيانات الموقع مقروءة كنص دون تحميل الخريطة.
- الصين · دور المكان: تغطية · نوع المكان: بلد أو منطقة · دقة الموقع: إقليميالدليل
- Explicit preserved editorial country/region; no city or national centroid inferredarxiv.org ↗