كيف نعرض الأرقام؟
بنشمارك عربي يعرض بالعربية ترتيب نماذج الذكاء الاصطناعي كما تنشره Arena، دون تعديل على الأرقام ودون ترتيب خاص بنا.
من أين تأتي الأرقام؟
من Arena Leaderboard Dataset، وهي مجموعة بيانات مفتوحة تنشرها Arena (المعروفة سابقاً باسم LMArena) برخصة CC BY 4.0. أحدث بيانات معروضة هنا منشورة بين 9 نوفمبر 2026 و12 نوفمبر 2026.
كيف تُحسب النقاط؟
يكتب المستخدم طلباً في موقع Arena، فيجيب عنه نموذجان لا يظهر اسماهما. يختار المستخدم الإجابة الأفضل، ثم يُكشف الاسمان. من ملايين هذه المواجهات تُحسب لكل نموذج نقاط بنموذج إحصائي اسمه Bradley–Terry، وهو قريب من نظام Elo المستخدم في تصنيف لاعبي الشطرنج.
في لوحات النص وفهم الصور والبحث والمستندات نعرض النسخة التي تسميها Arena «التحكم في الأسلوب»، وهي النسخة التي يعرضها موقعها افتراضياً: تُعدَّل فيها النقاط حتى لا يفوز نموذج لمجرد أن إجاباته أطول أو أكثر تنسيقاً.
ما الذي غيّرناه؟
- ترجمنا أسماء الفئات وشرحناها بالعربية.
- قرّبنا النقاط وهامش الخطأ إلى أقرب عدد صحيح.
- هامش الخطأ المعروض هو نصف عرض نطاق الثقة 95% المنشور.
- صفحة «مفتوحة المصدر» هي الترتيب العام بعد استبعاد النماذج التي رخصتها Proprietary.
- الجمل التي تلخّص المتصدر تُولَّد آلياً من الأرقام نفسها.
ما الذي لا تقوله هذه الأرقام؟
- لا تقيس العربية. لا يوجد في بيانات Arena ترتيب خاص بالعربية، وأغلب التصويت على طلبات بالإنجليزية.
- لا تقيس الصحة. المصوّت يختار ما يعجبه، وقد تعجبه إجابة خاطئة مكتوبة بثقة.
- لا تحسب السعر ولا السرعة. نموذج في المركز العاشر قد يكون أنسب لك بعُشر التكلفة.
- الترتيب بين المتقاربين غير محسوم. إذا تداخل هامشا الخطأ فالنموذجان متعادلان عملياً.
الاستقلالية
بنشمارك عربي موقع مستقل، لا يتبع Arena ولا أي شركة من شركات النماذج، ولا يبيع الوصول إلى أي نموذج.