فحص ارجع برای عملکرد مدلهای زبانی بزرگ (LLM) نشان داده است که بسیاری از معیارهای ارزیابی فعلی ممکن است در سنجش « قابلیتهاى واقعى » این مدلها دارای نقص باشند. این نقصها اغلب از عوامل جانبى در نحوهى طرح پرسشها و طراحی آزمونها سرچشمه مىگیرند، که بر نتايج تاثير مىگذارند. براى شناسايى و کنترل اين مؤلفههاى گمراهکننده با استفاده از اصول فنى اندازهگيرى، گروهى از پژوهشگران ابزاري جديد به نام BenchMIRT ارائه دادند. اين روش نوآورانه میتواند به توسعهدهندگان و کاربرانی که به تصمیمگیری دقیق مبتنی بر داده تکیه دارند، در فهم بهتر تفاوتهای واقعی میان مدلهای مختلف کمک کند.
الانفصال عن المعايير التقليدية؛ ماذا يقيس BenchMIRT؟
فريق Aidanix3 دقيقة4 سبتمبر 2026
بنچمارکهوش مصنوعیمدلهای زبانی بزرگتحلیل دادهBenchMIRTسنجش عملکرد

