MarkTechPostتاريخ نشر المصدر

كوهير تطلق Rerank 5 مع تركيز على السياق على مستوى المقاطع ودرجات معايَرة

أصدرت Cohere AI Rerank 5، وهي عائلة جديدة من أدوات إعادة الترتيب في فئتي Pro وFast. تعد Cohere Rerank 5 نموذج استرجاع يعيد ترتيب نتائج البحث قبل وصولها إلى نموذج لغوي كبير.

أصدرت Cohere AI Rerank 5، وهي عائلة جديدة من أدوات إعادة الترتيب في فئتي Pro وFast. تعد Cohere Rerank 5 نموذج استرجاع يعيد ترتيب نتائج البحث قبل وصولها إلى نموذج لغوي كبير. يضيف 2 من ميزات المطورين: Context Focus، التي تعيد المقاطع ذات الصلة داخل كل مستند، ودرجات الملاءمة المعايَرة. بالنسبة لمنشئي RAG والوكلاء، الرسالة بسيطة: أرسل رموزاً أقل وأفضل إلى النموذج اللغوي.

الخلاصة السريعة

  • الحجم: عدد المعلمات غير مُفصح عنه. نافذة سياق 32K رمزاً. فئتان: rerank-v5.0-pro و rerank-v5.0-fast.
  • يعمل على: واجهة برمجة تطبيقات مستضافة، أو Model Vault، أو Microsoft Foundry، أو Amazon SageMaker، أو شبكة VPC خاصة أو داخل المنشأة. تقيس كوهير السرعة على معالج NVIDIA A100 واحد. لا أوزان مفتوحة ولا نسخ مكممة.
  • الأداء: تحتل Pro المرتبة الأولى على 39 من أصل 46 مجموعة بيانات مركبة في تقييم كوهير الخاص.
  • الأفضل: تحقق Pro درجة 82.2 على BRIGHT (RCP-nDCG@10)، بفارق 5.8 نقطة فوق Voyage AI Rerank 3.
  • الأسوأ: تأخير وسيط لدى Pro هو 11.7 ثانية لكل طلب يضم 96 مستنداً، مقابل 4.1 ثانية لـ Fast.

ما الجديد في Cohere Rerank 5؟

يتوفر Rerank 5 كنموذجين. تستهدف Pro جودة الترتيب في الاستعلامات كثيفة الاستدلال والمستندات الطويلة الخاصة بمجال معين. تستهدف Fast زمن تأخير منخفضاً وإنتاجية عالية للوكلاء التي تجري العديد من عمليات البحث.

يدعم كلا النموذجين أكثر من 100 لغة ونافذة سياق 32K. كما يعيدان ترتيب البيانات شبه المهيكلة مثل سجلات JSON والجداول وYAML. الترقية لا تتطلب إعادة الفهرسة. يغيّر المطورون model معلمةً ويحتفظون ببحثهم الحالي بالكلمات المفتاحية أو المتجهات أو الهجين.

كيف يعمل Context Focus؟

Context Focus ميزة اختيارية، معطلة افتراضياً. تُرجع استدعاء Rerank واحد درجات المستندات بالإضافة إلى نطاقات أحرف مُقيَّمة. يحمل كل نطاق start و end إزاحتين في النص الأصلي. يفعّلها المطورون عبر relevant_spans الحقل، بقيمة threshold و max_spans .

كوهير اختبرته على 30 مجموعة بيانات أسئلة وأجوبة. أدت إزالة نصف النص المسترجع إلى الحفاظ على 96% من جودة الإجابة. وأدت إزالة ثلاثة أرباعه إلى الحفاظ على 87%. وتقول Cohere إن الفرق يمكنها الوصول إلى سياق أقل بـ 10 أضعاف مقابل بعض التضحية بالجودة.

في اختبار وكيل بحث عبر 17 مجموعة بيانات، سجّل BM25 وحده دقة 46%. ورفع إضافة Rerank 5 Pro هذا إلى 49%. وقلّلت Context Focus عند العتبة الافتراضية 0.1 عدد التوكنات لكل مهمة بنسبة 19% وبلغت دقة 57%. وعند 0.4، انخفضت التوكنات بنسبة 34% وبلغت الدقة 58%. و بالمقارنة مع BM25 وحده، استخدمت المجموعة الكاملة توكنات أقل بنسبة 35%. وعلى 6 معايير بحث عميق، انخفضت التوكنات بنسبة 41% وارتفعت الدقة من 39% إلى 52%.

ماذا تغيّر درجات الصلة المعايَرة؟

تُقرأ درجات Rerank 5 كاحتمالات. فالدرجة 0.7 تعني احتمال 70% بأن تكون الوثيقة مفيدة.

قام فريق Cohere بقياس خطأ المعايرة المتوقع (ECE) مقابل مصححين بشريين عمياء ومقيّمي NIST TREC-DL. تسجل درجات Rerank 5 نحو 0.06 على كليهما. بينما تسجل Voyage AI Rerank 3 درجات 0.234 و0.307. ويسجل Rerank 4 Pro درجتي 0.384 و0.309. عمليًا، يمكن لفرق التطوير التصفية حسب العتبة بدلاً من top-k ثابت. ويمكن للوكيل أيضًا اكتشاف متى لم تعد أي نتيجة ذات صلة.

كيف يؤدي Rerank 5 على المعايير القياسية؟

جميع الدرجات أدناه مبلَّغ عنها ذاتيًا من Cohere باستخدام RCP-nDCG@10، وهو متغير مطوَّر من Cohere لمقياس nDCG. وقد شغّلت Cohere نماذج المنافسين بنفسها.

يتصدّر Pro المعايير الأربعة الرئيسية. فهو يسجل 92.2 على ViDoRe V3، و90.4 على BEIR، و82.2 على BRIGHT و87.3 على nanoMTEB. ويُظهر BRIGHT أكبر قفزة: 12.4 نقطة فوق Rerank 4 Pro.

يتفوّق Fast على Voyage AI Rerank 3 Lite وQwen3-Reranker-8B وRerank 4 Pro في جميع المعايير الـ 4. ويتعادل مع Voyage AI Rerank 3 على ViDoRe V3 بدرجة 90.6. ويتأخر عنه على BEIR، 88.1 مقابل 88.6.

على ملفات PDF المُحلَّلة، بمتوسط 47 مجموعة بيانات، يسجل Pro 89.9 وFast 88.5. ويسجل Voyage AI Rerank 3 درجة 88.4. ويتصدّر Pro على 14 من أصل 19 لغة غير الإنجليزية في المنظومة الداخلية لـ Cohere.

كيف يقارن Rerank 5 بأدوات إعادة الترتيب المنافسة؟

الميزةCohere Rerank 5 ProCohere Rerank 5 FastVoyage AI rerank-3Voyage AI rerank-3-liteQwen3-Reranker-8B
المعاملاتغير معلنغير معلنغير معلنغير معلن8B
نافذة السياق32K32K32,00032,00032K
اللغات100+100+غير معلنغير معلن100+
الترخيص / الوصولواجهة برمجية خاصة، VPC، داخل المؤسسةواجهة برمجية خاصة، VPC، داخل المؤسسةواجهة برمجية خاصةواجهة برمجية خاصةأوزان مفتوحة برخصة Apache 2.0
سعر واجهة البرمجة لكل 1M من الرموز$0.05$0.02$0.05$0.02استضافة ذاتية
استخراج المقاطعContext FocusContext Focusغير معلنغير معلنغير معلن
BRIGHT*82.277.576.469.469.8
ViDoRe V3*92.290.690.687.985.1
BEIR*90.488.188.686.183.8
nanoMTEB*87.385.183.980.782.1
ECE، حكام بشريون* (الأقل أفضل)0.0580.0580.2340.226غير معلن

*النتائج هي RCP-nDCG@10 أو ECE من منشور Rerank 5 من Cohere، وقِست بواسطة Cohere. لم يتم التحقق منها بشكل مستقل.

كيف يمكن للمطورين نشر Rerank 5؟

Rerank 5 متاح عمومًا عبر Cohere API و Model Vault. كما يعمل على Microsoft Foundry (Pro, وFast) وعلى Amazon SageMaker (, Pro). وهو متاح أيضًا لجميع مستخدمي North. تسعير واجهة البرمجة (API) هو $0.05 لكل 1M رمز لفئة Pro و$0.02 لفئة Fast. يدرج Model Vault $4.00 لكل ساعة مثيل ). وهو متاح أيضًا لجميع مستخدمي North. تسعير واجهة API هو 0.05 دولار لكل مليون رمز لـ Pro و0.02 دولار لـ Fast. يدرج Model Vault

4.00 دولارات لكل ساعة تشغيل للمثيل لكلا الفئتين على فئته المتوسطة (Medium)..

تشمل عمليات التكامل LangChain وHaystack وElasticsearch وWeaviate، وفقًا لوثائق التكامل الخاصة بـ Cohere

  • يتوفر Rerank 5 في Pro ($0.05) وFast ($0.02) لكل 1M رمز، وكلاهما بسياق 32K.
  • يحقق Pro نتيجة 82.2 على BRIGHT، بفارق 5.8 نقطة فوق Voyage AI Rerank 3.
  • يُرجع Context Focus المقاطع المقنّنة في استدعاء 1، مما يقلل رموز الوكيل بنسبة 35% إلى 41%.
  • تصل الدرجات المعايَرة إلى حوالي 0.06 ECE، لذا يعمل حد عتبة 1 عبر المجالات المختلفة.
  • جميع المعايير المرجعية مُبلَّغ عنها ذاتيًا وفق مقياس RCP-nDCG@10 الخاص بـ Cohere.


جميع المعايير القياسية مُبلَّغ عنها ذاتيًا وفق مقياس RCP-nDCG@10 الخاص بـ Cohere. اطلع علىالإعلان الرسمي سجل تغييرات Rerank 5 Rerank 5 وثيقة النتائج الكاملة. كل الفضل يعود للباحث المسؤول عن هذا المشروع. كما يمكنك متابعتنا بحرية على تويتر ولا تنسَ الانضمام إلى مجتمع ML الفرعي بـ 150k+ عضو والاشتراك في نشرتنا البريدية. مهلاً! هل أنت على تيليجرام؟ يمكنك الآن الانضمام إلينا على تيليجرام أيضًا.

هل تحتاج إلى شراكة معنا للترويج لمستودع GitHub الخاص بك أو صفحتك على Hugging Face أو إطلاق منتج أو ندوة عبر الإنترنت وغيرها؟ تواصل معنا

المقال Cohere تطلق Rerank 5 مع تركيز على السياق بمستوى المقاطع ودرجات معايَرة ظهر للمرة الأولى على MarkTechPost.

المصدر الأصلي

MarkTechPost

ملاحظات المحتوى

النشر الأصلي والحقوق تعود إلى المصدر.

ترجمة آلية · يُرجى الرجوع إلى الأصل