VoyageAI by MongoDB: voyage-4

voyage-4, Voyage embedding ailesinin arkasındaki ve artık MongoDB'nin bir parçası olan Voyage AI şirketinin genel amaçlı embedding modelidir. api14 üzerinde voyageai/voyage-4 model id'si ile listelenir ve embeddings kategorisinde yer alır, yani sohbet yanıtları üretmek yerine metni vektörlere dönüştürmek için tasarlanmıştır. Bir erişim veya arama sistemi için embedding modeli seçiyorsanız, bu, diğer genel amaçlı embedding seçenekleriyle birlikte değerlendireceğiniz türden bir modeldir.

Model girdi olarak metin kabul eder ve çıktı olarak embedding döndürür. Genel amaçlı ve çok dilli olarak tanımlanır ve diğer AI uygulamalarının yanı sıra erişim ve arama için optimize edilmiştir. 2048, 1024, 512 ve 256 boyutlarında embeddingleri ve birden çok niceleme seçeneğini destekler; bu, indeksinize bağlı olarak vektör boyutunu depolama ve arama özellikleriyle değiş tokuş etmenizi sağlar. Bağlam uzunluğu 32000 token ve maksimum çıktı 28800'dir, böylece uzun belgeler birçok küçük parçaya bölünmeden embeddinglenebilir.

Bu yetenekler oldukça belirli bir kullanım kümesine işaret eder. Erişim ve arama başlıcalarıdır: bir belge koleksiyonunu indekslemek, sorguları embeddinglemek ve bunları vektör benzerliğine göre karşılaştırmak. Model çok dilli olduğu için, dilleri karıştıran koleksiyonlara ve sorgulara da uyar ve birkaç çıktı boyutu ile niceleme seçeneğini desteklediği için hem yüksek sadakatli bir indekse hem de daha küçük, daha kompakt bir indekse hizmet edebilir. Yaygın uygulamalar arasında erişimle güçlendirilmiş üretim ardışık düzenleri, kurum içi dokümantasyon üzerinde anlamsal arama, metnin yinelenenlerini kaldırma veya kümeleme ve üretilen metin yerine embeddingler üzerinde çalışan öneri veya sınıflandırma sistemleri bulunur.

Onu api14'ün OpenAI uyumlu API'si üzerinden voyageai/voyage-4 model id'sini kullanarak çağırırsınız, metin gönderir ve yanıtta embedding alırsınız. Modelin desteklenen parametreler listesi boştur, bu nedenle temperature veya top_p gibi örnekleme kontrollerini geçirmeyi beklememelisiniz; istek esasen girdi metni artı model id'sidir. Boyut ve niceleme seçimleri, burada açığa çıkarılan istek parametreleri değil, modelin embedding davranışının bir parçasıdır, bu nedenle belirli bir vektör boyutu etrafında yapı kurmadan önce bunların nasıl seçildiğine dair güncel API referansına bakın.

Akılda tutulması gereken bir şey, bunun bir sohbet veya tamamlama modeli değil, bir embedding modeli olduğudur. Göreviniz metin üretmek, özetlemek veya sohbet etmekse, bir metin üretim modeli doğru seçimdir ve voyage-4 yalnızca bir erişim ardışık düzeninde destekleyici bir bileşen olarak yararlı olur. Ayrıca yalnızca metin alır, bu nedenle diğer kiplerdeki girdiler kapsam dışıdır. Bu sınırlar içinde, embedding boyutları üzerinde kontrol isteyen arama ve erişim işleri için makul bir adaydır.