VoyageAI by MongoDB: voyage-4-large

VoyageAI by MongoDB: voyage-4-large هو نموذج تضمين من Voyage AI، وهو مزود تُوزَّع نماذجه تحت اسم VoyageAI by MongoDB. يقع في فئة التضمينات، أي أنه مبني لتحويل النص إلى متجهات بدلاً من توليد ردود المحادثة. إذا كنت تختار نموذجاً لخط أنابيب استرجاع أو تشابه، فهذا هو نوع النماذج التي تُقيّمها على جودة التضمين لا على القدرة الحوارية.

يقبل النموذج النص كوسيط إدخال وحيد له، ويعيد التضمينات كمخرج وحيد له. تبلغ سعة السياق 32,000 رمز، لذا يمكن للطلب الواحد أن يغطي مستنداً طويلاً نسبياً أو مجموعة من المقاطع الأقصر. يصفه المزود بأنه تضمين متعدد اللغات وعام الأغراض ومتقدم للغاية ومحسَّن لجودة الاسترجاع. يستخدم تعلّم Matryoshka والتدريب المدرك للتكميم، ويدعم التضمينات بأبعاد 2048 و1024 و512 و256. الحد الأقصى للمخرج مذكور كـ 28,800، وهو السقف على جانب مخرج التضمين في الطلب.

تشير هذه القدرات إلى مجموعة محددة من حالات الاستخدام. يُعدّ البحث الدلالي والاسترجاع عبر مجموعة مستندات الأنسب بشكل مباشر، لأن النموذج مضبوط لجودة الاسترجاع ويمكنه تضمين مقاطع طويلة ضمن سياق الـ 32,000 رمز. كما تُعدّ المجموعات متعددة اللغات هدفاً معقولاً، نظراً للتدريب متعدد اللغات. ولأن التضمينات يمكن بترها إلى أبعاد 2048 أو 1024 أو 512 أو 256، يمكنك الموازنة بين حجم المتجه والتخزين وسرعة البحث حسب مقدار الدقة التي يحتاجها فهرسك. ويُعدّ التجميع وإزالة التكرار وحساب درجات التشابه على النص تطبيقات طبيعية أخرى، وكذلك بناء فهرس متجهات يغذّي نموذج توليد منفصل.

تستدعي النموذج عبر واجهة API المتوافقة مع OpenAI الخاصة بـ api14 باستخدام معرّف النموذج "voyageai/voyage-4-large". ولأن نقطة النهاية تتبع تنسيق OpenAI، يمكنك توجيه عميل OpenAI موجود لديك إلى api14 وإرسال طلبات التضمين دون إعادة كتابة تكاملك. قائمة المعاملات المدعومة للنموذج فارغة، لذا لا توجد معاملات طلب إضافية لضبطها beyond ما يتطلبه استدعاء التضمين القياسي. تعامل مع معرّف النموذج باعتباره القيمة الوحيدة الخاصة بالنموذج التي تحتاج إلى تعيينها.

أحد القيود العملية التي يجب وضعها في الاعتبار هو أن هذا النموذج يتعامل فقط مع إدخال النص وينتج التضمينات فقط. لا يمكنه توليد نص أو الإجابة على أسئلة أو اتباع تعليمات، لذا فإن أي تطبيق يحتاج إلى رد مكتوب يتطلب نموذج توليد منفصلاً إلى جانبه. سياق الـ 32,000 رمز سخي لأعمال التضمين لكنه يظل محدوداً، لذا تحتاج المستندات الكبيرة جداً إلى التقسيم قبل التضمين. إذا كانت مهمتك توليداً لا استرجاعاً، فإن نموذج محادثة أو إكمال يكون الخيار الأنسب.