์ฟ ํค๋ฅผ ์ฌ์ฉํฉ๋๋ค. ์ฟ ํค์ ๋ธ๋ผ์ฐ์ ์ ์ฅ์๋ ๋ก๊ทธ์ธ ์ํ๋ฅผ ์ ์งํ๊ณ ํ๊ฒฝ์ค์ ์ ๊ธฐ์ตํฉ๋๋ค. ๋์ํ์๋ฉด ์ฌ์ดํธ ์ด์ฉ ๋ฐฉ์๋ ์ธก์ ํฉ๋๋ค. ์ธ์ ๋ ์ง ํ ์ ์์ต๋๋ค. ์์ธํ ๋ด์ฉ์ ์ฟ ํค ์ ์ฑ ์ ์ฐธ๊ณ ํ์ธ์.
Intfloat: E5-Base-v2
intfloat/e5-base-v2์ง๊ธ Intfloat: E5-Base-v2 ์ฌ์ฉํด ๋ณด๊ธฐ
์ ๊ฐ๊ฒฉ์ผ๋ก ์์ก์์ ์ฐจ๊ฐ๋ฉ๋๋ค. ์ ๊ณ์ ์ ๋ฌด๋ฃ ์ฌ์ฉ๋์ผ๋ก ์์ํฉ๋๋ค.
๊ฒฐ๊ณผ๊ฐ ์ฌ๊ธฐ์ ํ์๋ฉ๋๋ค.
์ค์
Intfloat: E5-Base-v2 ํ๋์ ๋ณด๊ธฐ
- ์ ๋ ฅ ๊ฐ๊ฒฉ์ด ์๋ฒ ๋ฉ ๋ชจ๋ธ 34๊ฐ์ ์ค์๊ฐ๋ณด๋ค 75% ๋ฎ์ต๋๋ค.
Intfloat: E5-Base-v2 ์๊ฐ
Intfloat: E5-Base-v2๋ Intfloat์ ์๋ฒ ๋ฉ ๋ชจ๋ธ๋ก, api14์ ๋ชจ๋ธ id intfloat/e5-base-v2๋ก ๋ฑ๋ก๋์ด ์์ต๋๋ค. ์ด ๋ชจ๋ธ์ embeddings ์นดํ ๊ณ ๋ฆฌ์ ์ํ๋ฉฐ, ์ด๋ ์ฑํ ์ด๋ ํ ์คํธ ์์ฑ ๋ชจ๋ธ์ด ์๋๋ผ๋ ๋ป์ ๋๋ค. ๋ต๋ณ์ ์์ฑํ๋ ๋์ , ํ ์คํธ๋ฅผ ์ ์ฅํ๊ณ ๋น๊ตํ๊ณ ๊ฒ์ํ ์ ์๋ ๋ฒกํฐ๋ก ๋ณํํฉ๋๋ค. ์ ๊ณต์๊ฐ ๊ธฐ๋กํ ์ถ์์ผ์ 2025-11-18์ ๋๋ค.
์ด ๋ชจ๋ธ์ ํ ์คํธ๋ฅผ ์ ์ผํ ์ ๋ ฅ์ผ๋ก ๋ฐ๊ณ ์๋ฒ ๋ฉ์ ์ ์ผํ ์ถ๋ ฅ์ผ๋ก ๋ฐํํฉ๋๋ค. ์์ด ๋ฌธ์ฅ๊ณผ ๋ฌธ๋จ์ 768์ฐจ์์ ๋ฐ์ง ๋ฒกํฐ ๊ณต๊ฐ์ผ๋ก ์ธ์ฝ๋ฉํ๋ฉฐ, ์ ๊ณต์๋ ๊ทธ ๊ฒฐ๊ณผ๋ฅผ ํจ์จ์ ์ด๊ณ ๊ณ ํ์ง์ ์๋ฏธ๋ก ์ ์๋ฒ ๋ฉ์ด๋ผ๊ณ ์ค๋ช ํฉ๋๋ค. ์ปจํ ์คํธ ์๋์ฐ๋ 512 ํ ํฐ์ด๋ฏ๋ก, ๊ฐ ์์ฒญ์๋ ๊ทธ ํ๋ ์์ ๋ค์ด๊ฐ๋ ๋จ์ผ ๊ตฌ์ ์ด๋ ์ฟผ๋ฆฌ๊ฐ ํฌํจ๋์ด์ผ ํฉ๋๋ค. ์ต๋ ์ถ๋ ฅ์ 460์ด๋ฉฐ, ์ค์ ๋ก๋ ํ ๋ฒ์ ํธ์ถ๋ก ๋ณด๋ผ ์ ์๋ ํ ์คํธ ๋จ์์ ํฌ๊ธฐ๋ฅผ ์ ํํฉ๋๋ค. ํต์ฌ ์์ฒญ ํ๋ ์ธ์ ์ถ๊ฐ๋ก ์ง์๋๋ ํ๋ผ๋ฏธํฐ๋ ์์ผ๋ฏ๋ก, ์์ฑ ๋ชจ๋ธ์์์ฒ๋ผ ์ํ๋ง ์คํ์ผ ์ต์ ์ผ๋ก ๋์์ ์กฐ์ ํ ์๋ ์์ต๋๋ค.
์ด๋ฌํ ํน์ฑ์ ์๋นํ ๊ตฌ์ฒด์ ์ธ ์ฉ๋ ์งํฉ์ ๊ฐ๋ฆฌํต๋๋ค. ์๋ฏธ๋ก ์ ๊ฒ์์ด ๊ฐ์ฅ ๋ช ํํ ์ฉ๋ก์ ๋๋ค. ๋ฌธ์๋ฅผ ํ ๋ฒ ์๋ฒ ๋ฉํ๊ณ , ์์ฒญ ์์ ์ ์ฌ์ฉ์ ์ฟผ๋ฆฌ๋ฅผ ์๋ฒ ๋ฉํ ๋ค์, ๋ฒกํฐ ์ ์ฌ๋๋ก ์์๋ฅผ ๋งค๊ธฐ๋ฉด ๋ฉ๋๋ค. ๊ฐ์ ๋ฉ์ปค๋์ฆ์ด ๋ ํ ์คํธ ์กฐ๊ฐ ์ฌ์ด์ ์ ์ฌ๋ ์ ์ ๊ณ์ฐ, ๊ฑฐ์ ๋์ผํ ๋ ์ฝ๋์ ์ค๋ณต ์ ๊ฑฐ, ๋ฌธ์ฅ์ด๋ ๋ฌธ๋จ์ ํด๋ฌ์คํฐ๋ง, ๊ทธ๋ฆฌ๊ณ ํ๋ณด ๊ตฌ์ ์ ์์ฑ ๋ชจ๋ธ์ ๋๊ธฐ๊ธฐ ์ ์ ๊ฐ์ ธ์ค๊ธฐ ์ํด ๊ฐ๊ฒฐํ ์์ด ์๋ฒ ๋ฉ์ด ํ์ํ RAG ํ์ดํ๋ผ์ธ์ ๊ฒ์ ๋จ๊ณ๋ฅผ ํฌ๊ดํฉ๋๋ค. ๋ฒกํฐ๊ฐ ๋ฐ์งํ์ด๊ณ 768์ฐจ์์ด๋ฏ๋ก, ํน๋ณํ ์ฒ๋ฆฌ ์์ด ํ์ค ๋ฒกํฐ ์ ์ฅ์์ ์ฝ์ฌ์ธ ์ ์ฌ๋ ๋๊ตฌ์์ ์๋ํฉ๋๋ค.
๋ชจ๋ธ id intfloat/e5-base-v2๋ฅผ ์ฌ์ฉํด api14์ OpenAI ํธํ API๋ฅผ ํตํด ํธ์ถํฉ๋๋ค. ์ธํฐํ์ด์ค๊ฐ OpenAI ์๋ฒ ๋ฉ ํํ๋ฅผ ๋ฐ๋ฅด๋ฏ๋ก, input ํ๋์ ํ ์คํธ๋ฅผ ๋ณด๋ด๊ณ ์๋ต์์ ๋ฒกํฐ๋ฅผ ์ฝ์ด์ค๋ฉด ๋ฉ๋๋ค. ๋ฐ๋ผ์ ๊ธฐ์กด OpenAI ํด๋ผ์ด์ธํธ ๋ผ์ด๋ธ๋ฌ๋ฆฌ์ ์๋ฒ ๋ฉ ํ์ดํ๋ผ์ธ์ ์ผ๋ฐ์ ์ผ๋ก base URL๊ณผ ๋ชจ๋ธ id๋ง ๋ฐ๊พธ๋ฉด ๋ฉ๋๋ค. ์ด ๋ชจ๋ธ์ ์ถ๊ฐ ํ๋ผ๋ฏธํฐ๋ฅผ ์ง์ํ์ง ์์ผ๋ฏ๋ก, ์์ฒญ์ ํ์ ์์๋ง ์ ์งํ๊ณ ์ฌ๊ธฐ์ ํจ๊ณผ๊ฐ ์๋ ํ๋ ์ต์ ์ ์ ๋ฌํ์ง ์๋๋ก ํ์ธ์.
๊ณํํ ๋ ๊ณ ๋ คํด์ผ ํ ์ฃผ์ ์ ์ฝ์ 512 ํ ํฐ ์ปจํ ์คํธ์ ๋๋ค. ๊ธด ๋ฌธ์๋ ์๋ฒ ๋ฉ ์ ์ ์ฒญํน์ด ํ์ํ๋ฉฐ, ์์ด ์ด์ธ์ ๊ฒ์ ์ ๊ณต์ ์ค๋ช ์ด ๋ค๋ฃจ๋ ๋ฒ์ ๋ฐ์ ๋๋ค. ์์ ์ด ํ ์คํธ๋ฅผ ํํํ๋ ๊ฒ์ด ์๋๋ผ ์์ฑํ๋ ๊ฒ์ด๋ผ๋ฉด ์ฑํ ๋๋ ์์ฑ ๋ชจ๋ธ์ด ์ฌ๋ฐ๋ฅธ ์ ํ์ ๋๋ค. E5-Base-v2๋ ๋ ํฐ ์์คํ ์ ๊ฒ์ ๋ฐ ์ ์ฌ๋ ๊ตฌ์ฑ ์์๋ก ์ทจ๊ธํ๋ ๊ฒ์ด ๊ฐ์ฅ ์ข์ต๋๋ค.
Intfloat: E5-Base-v2 API ํธ์ถ ๋ฐฉ๋ฒ
- ๋์๋ณด๋์์ API ํค๋ฅผ ๋ง๋์ธ์.
- ์ฌ์ฉํ๋ ์ธ์ด์ ๊ณต์ openai SDK๋ฅผ ์ค์นํ์ธ์.
- baseURL์ https://api14.com/api/v1๋ก, model์ "intfloat/e5-base-v2"๋ก ์ค์ ํ์ธ์.
import OpenAI from "openai";
const client = new OpenAI({
baseURL: "https://api14.com/api/v1",
apiKey: process.env.API14_API_KEY,
});
const result = await client.embeddings.create({
"model": "intfloat/e5-base-v2",
"input": [
"The quick brown fox",
"Lorem ipsum"
]
});
console.log(result.data.map((d) => d.embedding.length));
์ฌ์
- ์ปจํ ์คํธ ๊ธธ์ด
- 512
- ์ต๋ ์ถ๋ ฅ
- 460
- ์ ๋ ฅ
- text
- ์ถ๋ ฅ
- embeddings
api14 ์์ฒญ ์ ยท ์ต๊ทผ 7์ผ
Intfloat: E5-Base-v2: ์์ฃผ ๋ฌป๋ ์ง๋ฌธ
- Intfloat: E5-Base-v2 API ๋น์ฉ์ ์ผ๋ง์ธ๊ฐ์?
- Intfloat: E5-Base-v2์ ๊ฐ๊ฒฉ์ ์ ๋ ฅ US$0.02 / 100๋ง ํ ํฐ์ ๋๋ค. ์ฑ๊ณตํ ์์ฒญ์ ๋ํด์๋ง USD ์์ก์์ ์ฐจ๊ฐ๋๋ฉฐ, ์คํจํ ์์ฒญ์ ๋ฌด๋ฃ์ ๋๋ค.
- Intfloat: E5-Base-v2์ ์ปจํ ์คํธ ์๋์ฐ๋ ์ผ๋ง์ธ๊ฐ์?
- Intfloat: E5-Base-v2๋(์) ์์ฒญ๋น ์ต๋ 512 ํ ํฐ์ ์ฝ์ต๋๋ค, ํ๋กฌํํธ, ๋ํ ๊ธฐ๋ก, ๋ฌธ์๋ฅผ ๋ชจ๋ ํฉ์น ์์ ๋๋ค. ์๋ต๋น ์ต๋ 460๊ฐ์ ์ถ๋ ฅ ํ ํฐ์ ์์ฑํฉ๋๋ค.
- Intfloat: E5-Base-v2๋(์) ๋ฌด์์ ํ ์ ์๋์?
- Intfloat: E5-Base-v2๋(์) text ์ ๋ ฅ์ ๋ฐ์ embeddings ์ถ๋ ฅ์ ๋ฐํํฉ๋๋ค.
- ์ฝ๋์์ Intfloat: E5-Base-v2๋ฅผ(์) ์ด๋ป๊ฒ ํธ์ถํ๋์?
- ์ด๋ค OpenAI SDK๋ base URL์ https://api14.com/api/v1๋ก ์ง์ ํ๊ณ model์ "intfloat/e5-base-v2"๋ก ์ค์ ํ์ธ์, ๋ค๋ฅธ ์ฝ๋ ๋ณ๊ฒฝ์ ํ์ ์์ต๋๋ค. ์ด ํ์ด์ง์ ์ฝ๋ ํจ๋์์ ๋ฐ๋ก ์ธ ์ ์๋ ์์ ๋ฅผ ๋ณต์ฌํ์ธ์.
- Intfloat: E5-Base-v2์ ๋์์ ๋ฌด์์ธ๊ฐ์?
- ๋น์ทํ ๊ฐ๊ฒฉ๋์ ์๋ฒ ๋ฉ ๋ชจ๋ธ: Thenlper: GTE-Base, Sentence Transformers: paraphrase-MiniLM-L6-v2, Sentence Transformers: all-MiniLM-L12-v2. ๋ชจ๋ ๊ฐ์ API ํค๋ก ์คํ๋๋ฏ๋ก ๋ฌธ์์ด ํ๋๋ง ๋ฐ๊พธ๋ฉด ์ ํ๋ฉ๋๋ค.
Intfloat: E5-Base-v2 ์ปค๋ฎค๋ํฐ
์ ํ ํฝ์ด ์ปค๋ฎค๋ํฐ์๋ ์์ง ํ ํฝ์ด ์์ต๋๋ค. Intfloat: E5-Base-v2์ ๋ํ ์ฒซ ํ ํฝ์ ์ด์ด ๋ณด์ธ์.