VoyageAI by MongoDB: voyage-4-lite

voyage-4-lite هو نموذج تضمين من Voyage AI، الشركة التي تقف خلف عائلة Voyage لنماذج الاسترجاع، والتي أصبحت الآن جزءا من MongoDB. وهو يقع في فئة التضمينات وليس في فئة المحادثة، مما يعني أنه لا يولد نصا. بدلا من ذلك، يحول النص إلى متجهات تخزنها وتقارنها. وهو مصمم كنموذج خفيف الوزن وعام الغرض، بُني لتحقيق زمن استجابة منخفض وتكلفة منخفضة بدلا من تحقيق أقصى دقة في أصعب مسائل الاسترجاع.

يقبل النموذج النص كمدخل ويعيد التضمينات كمخرج. طول السياق لديه هو 32,000 رمز، والحد الأقصى للمخرج هو 28,800، لذا يمكن تضمين المستندات الطويلة دون تقسيمها إلى العديد من الأجزاء الصغيرة. دربته Voyage AI باستخدام تعلم Matryoshka والتدريب المدرك للتكميم، وهذا ما يسمح لنموذج واحد بإنتاج تضمينات بأبعاد 2048 و1024 و512 و256. تختار البعد الذي يناسب ميزانية التخزين وزمن الاستجابة لديك، وتبقى المتجهات الأقصر قابلة للاستخدام بدلا من أن تنهار.

تشير هذه الخصائص إلى مجموعة استخدامات محددة إلى حد ما. البحث الدلالي عبر مجموعة مستندات، حيث تضمن الأجزاء مرة واحدة وتستعلم عنها بسؤال مضمن، هو الحالة الأساسية. وتدعم المتجهات نفسها التوليد المعزز بالاسترجاع، وإزالة التكرار والكشف عن التكرار شبه المطابق، والتجميع وتجميع الموضوعات، والتصنيف أو التوجيه عند مقارنة مدخل بأمثلة موسومة. ولأن النموذج يتعامل مع 32,000 رمز من السياق، يمكنك تضمين صفحات كاملة أو مقاطع طويلة مباشرة، وهو ما يناسب البحث في الشيفرة، وفرز تذاكر الدعم، وقواعد المعرفة الداخلية. وتهم خيارات الأبعاد الأقل عندما تخزن ملايين المتجهات وتريد إبقاء الفهرس صغيرا.

تستدعيه عبر واجهة api14 المتوافقة مع OpenAI باستخدام معرف النموذج "voyageai/voyage-4-lite". ولأن نقطة النهاية تتبع شكل تضمينات OpenAI، فإن العملاء والمكتبات الحاليين يعملون مع تغيير عنوان URL الأساسي ومعرف النموذج فقط. لا يكشف النموذج عن أي معاملات مدعومة إضافية، لذا تعتمد الطلبات على الحقول القياسية التي تقبلها نقطة نهاية التضمينات، مثل نص الإدخال ومعرف النموذج. لا يوجد أخذ عينات أو temperature أو إعداد أدوات لضبطه، لأن أيا من ذلك لا ينطبق على نموذج تضمين.

إذا كانت مهمتك توليد نص أو تلخيصا أو استدلالا، فهذا هو النموذج الخطأ وسيكون نموذج محادثة أنسب. كما يوصف voyage-4-lite بأنه خفيف الوزن وعام الغرض، لذا إذا كنت تحتاج إلى أقوى جودة استرجاع على مجموعات متخصصة أو تقنية للغاية، فإن نموذج تضمين Voyage أكبر هو الخيار الأرجح.