DSGym: إطار عمل لتدريب وكلاء علوم البيانات على أكثر من 90 مهمة علمية

نشرت Together AI إطار DSGym، وهو إطار موحّد لتدريب وتقييم وكلاء LLM الذين ينفذون مهام علوم البيانات. ويجمع أكثر من 90 مهمة في المعلوماتية الحيوية من الأدبيات العلمية و92 مسابقة Kaggle. وتم تدريب نموذج 4B على بيانات اصطناعية وحقق نتائج SOTA بين الحلول open-source. وتكمن المشكلة في أن benchmarks الحالية غير متوافقة ولا تتطلب تحليلاً فعلياً للبيانات.