NVIDIA: Llama Nemotron Embed VL 1B V2 (free)

Llama Nemotron Embed VL 1B V2 هو نموذج تضمين من NVIDIA، موزع على api14 تحت معرف النموذج nvidia/llama-nemotron-embed-vl-1b-v2:free. ينتمي إلى فئة التضمينات، وهدفه المعلن هو الاسترجاع متعدد الوسائط للأسئلة والأجوبة. إنه نموذج من فئة 1B، مما يضعه بين الخيارات الأصغر في عائلة Nemotron، وهو متاح هنا في نسخة مجانية.

يقبل النموذج النص والصور كمدخلات وينتج التضمينات كمخرجات. يمكنه تضمين المستندات بثلاث صور: صورة فقط، أو نص فقط، أو صورة ونص معا. هذه المرونة هي جوهر تصميمه، لأن أنظمة الاسترجاع غالبا ما تحتاج إلى مطابقة سؤال نصي مع صورة صفحة، أو لقطة شاشة، أو رسم بياني، أو مقطع من النثر. نافذة السياق هي 131072 رمزا، والحد الأقصى للمخرجات هو 117964، لذا يمكن تضمين المستندات الطويلة دون تقسيمها إلى أجزاء كثيرة.

تتبع الاستخدامات العملية من الاسترجاع متعدد الوسائط. يمكن لفريق يبني نظام أسئلة وأجوبة على مستندات ممسوحة ضوئيا، أو ملفات PDF، أو صور منتجات، أو قواعد معرفة متعددة الوسائط أن يضمّن كل عنصر مرة واحدة ثم يشغّل بحث التشابه مقابل استعلام نصي. ولأن الصورة والنص يمكن تضمينهما معا، يمكن للفهرس نفسه أن يخدم الاستعلامات حول مخطط بياني والاستعلامات حول الفقرة المجاورة له، مما يتجنب الحفاظ على خطوط معالجة منفصلة للمحتوى البصري والنصي. كما يناسب إزالة التكرار، والتجميع، والتوصية على مجموعات تخلط لقطات الشاشة مع المواد المكتوبة.

لاستدعائه عبر api14، استخدم نقطة نهاية التضمينات المتوافقة مع OpenAI مع معرف النموذج nvidia/llama-nemotron-embed-vl-1b-v2:free. لا يسرد النموذج أي معاملات مدعومة، لذا يجب أن تعتمد الطلبات على الحقول القياسية التي تتطلبها نقطة النهاية بدلا من عناصر التحكم في أخذ العينات مثل temperature أو top_p، التي لا تنطبق على نماذج التضمين. أرسل مدخلاتك بالشكل المعتاد لطلب التضمينات واقرأ المتجه من الاستجابة.

أحد الأمور التي يجب أخذها في الاعتبار هو أن هذا نموذج تضمين، وليس نموذجا للمحادثة أو التوليد، لذا لن يجيب على الأسئلة أو يكتب نصا. إذا كانت مهمتك هي التوليد، أو الاستدلال، أو المحادثة، فإن نموذجا مختلفا هو الخيار الصحيح. يجدر أيضا التحقق من أن مجموعة أدوات الاسترجاع لديك قادرة على تخزين ومقارنة أبعاد المتجهات التي يعيدها النموذج، وأن مدخلاتك تتسع ضمن سياق 131072 رمزا.