نموذج Reflection الأول، Beam، يحقق 30 على مؤشر الذكاء من Artificial Analysis، ليحتل المرتبة #2 بين نماذج الأوزان المفتوحة الأمريكية
Beam هو نموذج أوزان مفتوحة بـ501B إجمالي و23B معاملات نشطة، تم إصداره على @huggingface
مبروك للفريق @reflection_ai على الإصدار!
أبرز النقاط:
➤ الثاني بين نماذج الأوزان المفتوحة الأمريكية: يحقق Beam 30، متأخراً فقط عن Muse Spark Open من Meta (39) ومتقدماً على إصدار أمس NVIDIA Nemotron 3.5 Super VL (26). خارج الصين، لا يتفوق عليه سوى Muse Spark Open وK2 Horizon من الإمارات (31)
➤ كفء في استهلاك الرموز مقابل ذكائه: يستخدم Beam حوالي 26k رمز إخراج لكل مهمة في مؤشر الذكاء مقارنة بـK2 Horizon، الأكثر منه بنقطة، والذي يستخدم ضعف ذلك (~52k). النماذج المغلقة لا تزال تتصدر الحدود الفاصلة، حيث حقق GPT-6 Astra (max) 53 بنفس الميزانية (~27k)
➤ قوي في سير العمل الوكيلي، أضعف في الطرفية: يحقق Beam نسبة 48.5% على AutomationBench-AA، متقدماً بـ11 نقطة مئوية على K2 Horizon (37.2%) وعلى مستوى Qwen3.8 27B (48.2%). Terminal-Bench 4.0 هي نقطة ضعف، حيث يسجل Beam نسبة 3.0%، متأخراً عن Qwen3.8 27B (5.6%) وMuse Spark Open (8.1%)
➤ يعرف أكثر ويخمّن أكثر: على AA-Omniscience يجيب بشكل صحيح على 33% من الأسئلة، متقدماً بفارق كبير على K2 Horizon (18%) وQwen3.8 27B (16%). لكن معدل الهلوسة لديه هو 47%، مقابل 26% لـK2 Horizon و30% لـQwen3.8 27B، مما يمنح Beam نتيجة مؤشر صافية قدرها 1.5، متقدماً على كلا النموذجين (−3.0 و−10.0)
تفاصيل أخرى عن النموذج
نافذة السياق: 1M رمز
الوسائط: نص
المعاملات: 501B / 23B
