كيف تُصنع لوحة الترتيب
خمس لوحات، لكل منها مصدرها وترخيصها وتاريخ بياناتها مطبوعة فوقها. ثلاث منها من LMArena. واثنتان لا تستطيع صنعهما إلا WayJet، لأنهما تعتمدان على ما تتقاضاه WayJet وعلى سرعة استجابة النماذج على بوابة WayJet.
العام والبرمجة والرؤية: LMArena
هذه اللوحات الثلاث من LMArena، تُقرأ كل يوم من مجموعة بياناته العامة على Hugging Face وتُعرض بموجب ترخيصه CC BY 4.0. يرسل الناس مطالبة إلى نموذجين مجهولين ويصوّتون للإجابة الأفضل؛ وتتحول الأصوات إلى نتيجة.
- العام هو ساحة النص مع التحكم بالأسلوب، وهي ما يعرضه LMArena افتراضيًا: تقلّل من قيمة الإجابات التي تفوز بطولها أو تنسيقها وحدهما.
- البرمجة هي ساحة WebDev: تبني النماذج تطبيق ويب يعمل انطلاقًا من مطالبة، ويصوّت الناس على النتيجة.
- الرؤية هي ساحة الرؤية مع التحكم بالأسلوب: مطالبات تأتي مع صورة.
لكل نتيجة فاصل ثقة بنسبة 95%. عندما يتداخل فاصلا نموذجين، يمنحهما LMArena المرتبة نفسها وتعلّمهما اللوحة متعادلين (=) بدل ترتيبهما. ويقارن عمود التغيّر المرتبة باليوم المنشور السابق في LMArena.
تبقى على هذه اللوحات النماذج التي لا تبيعها WayJet. فاللوحة التي تعرض ما نبيعه فقط لن تكون ترتيبًا. والنماذج التي يمكنك استدعاؤها على WayJet لها رابط «جرّبه».
القيمة: النتيجة مقابل السعر
النماذج التي يمكنك استدعاؤها على WayJet فقط، مرتبة حسب:
القيمة = النتيجة العامة ÷ (0.75 × سعر الإدخال + 0.25 × سعر الإخراج)
الأسعار هي أسعار WayJet، بالدولار الأمريكي لكل مليون رمز، في يوم إنشاء الصفحة. يقارب ترجيح 3:1 مزيج أعمال المحادثة، حيث تكون المطالبات أطول من الإجابات. وعندما يعرض LMArena نموذجًا بعدة إعدادات (High وLow وThinking)، تُستخدم أفضل نتيجة عامة له. والنموذج الذي لا سعر رمز له (نموذج صور أو فيديو مثلًا) ليس على هذه اللوحة.
السرعة: مقيسة على WayJet
النماذج التي يمكنك استدعاؤها على WayJet فقط، مقيسة على طلبات حقيقية عبر بوابة WayJet خلال الأيام السبعة الأخيرة:
- سرعة الإخراج هي رموز الإخراج مقسومة على زمن الطلب كاملًا، فيُحسب أول رمز البطيء ضدها. تعرض اللوحة الوسيط.
- الزمن حتى أول رمز هو المدة التي انتظرها طلب البث حتى أول جزء من النص أو الاستدلال أو استدعاء الأداة. تعرض اللوحة الوسيط.
- زمن الطلب هو وسيط الزمن من الطلب حتى نهاية الإجابة.
لا تُحتسب إلا طلبات المحادثة الناجحة التي فيها 100 رمز إخراج على الأقل، ليكون الرقم للنموذج لا للشبكة، ويحتاج النموذج إلى 20 طلبًا كهذا على الأقل خلال الفترة ليظهر. تعرض اللوحة الوسيطات فقط: لا أعداد طلبات، ولا شيء عن أي عميل.
مطابقة الأسماء
يسمّي LMArena النماذج بطريقته («Claude Opus 5.5 (High)»). يُطابق كل اسم تلقائيًا مع نموذج من WayJet عندما يناسبه نموذج واحد بالضبط، ويراجع محرر الباقي. والنموذج الذي يعرضه LMArena ولا تبيعه WayJet يحتفظ بمكانه على اللوحة دون رابط.
التحديثات
تُحدَّث لوحات LMArena وأرقام السرعة كل يوم عند الساعة 06:00 (UTC+8). وتطبع كل لوحة تاريخ أرقامها. وإذا تعذّرت قراءة بيانات يوم ما، تبقى بيانات اليوم السابق.
ما ليس على اللوحات
نتائج اختبارات الأداء التي ينشرها المزوّدون عن نماذجهم يُستشهد بها في ملفات النماذج ولا تُرتّب هنا: فكل مزوّد يختبر بشروطه الخاصة، ولا يمكن مقارنة الأرقام. وستنضم اختبارات عامة أخرى متى سمحت شروطها بذلك.

