์ฟ ํค๋ฅผ ์ฌ์ฉํฉ๋๋ค. ์ฟ ํค์ ๋ธ๋ผ์ฐ์ ์ ์ฅ์๋ ๋ก๊ทธ์ธ ์ํ๋ฅผ ์ ์งํ๊ณ ํ๊ฒฝ์ค์ ์ ๊ธฐ์ตํฉ๋๋ค. ๋์ํ์๋ฉด ์ฌ์ดํธ ์ด์ฉ ๋ฐฉ์๋ ์ธก์ ํฉ๋๋ค. ์ธ์ ๋ ์ง ํ ์ ์์ต๋๋ค. ์์ธํ ๋ด์ฉ์ ์ฟ ํค ์ ์ฑ ์ ์ฐธ๊ณ ํ์ธ์.
Sentence Transformers: paraphrase-MiniLM-L6-v2
sentence-transformers/paraphrase-minilm-l6-v2์ง๊ธ Sentence Transformers: paraphrase-MiniLM-L6-v2 ์ฌ์ฉํด ๋ณด๊ธฐ
์ ๊ฐ๊ฒฉ์ผ๋ก ์์ก์์ ์ฐจ๊ฐ๋ฉ๋๋ค. ์ ๊ณ์ ์ ๋ฌด๋ฃ ์ฌ์ฉ๋์ผ๋ก ์์ํฉ๋๋ค.
๊ฒฐ๊ณผ๊ฐ ์ฌ๊ธฐ์ ํ์๋ฉ๋๋ค.
์ค์
Sentence Transformers: paraphrase-MiniLM-L6-v2 ํ๋์ ๋ณด๊ธฐ
- ์ ๋ ฅ ๊ฐ๊ฒฉ์ด ์๋ฒ ๋ฉ ๋ชจ๋ธ 34๊ฐ์ ์ค์๊ฐ๋ณด๋ค 75% ๋ฎ์ต๋๋ค.
Sentence Transformers: paraphrase-MiniLM-L6-v2 ์๊ฐ
Sentence Transformers: paraphrase-MiniLM-L6-v2๋ Sentence Transformers์ ์๋ฒ ๋ฉ ๋ชจ๋ธ๋ก, api14์ embeddings ์นดํ ๊ณ ๋ฆฌ๋ก ๋ฑ๋ก๋์ด ์์ต๋๋ค. ํ ์คํธ๋ฅผ ์์ฑํ๋ ๊ฒ์ด ์๋๋ผ ํ ์คํธ๋ฅผ ๋ฒกํฐ๋ก ๋ฐ๊พธ๋ ๊ฒ์ ๋ชฉ์ ์ผ๋ก ํ๋ ์ํ MiniLM ๊ธฐ๋ฐ ๋ชจ๋ธ์ ๋๋ค. ๊ธฐ๋ก๋ ์ ๊ณต์ ๋ฆด๋ฆฌ์ค ๋ ์ง๋ 2025-11-18์ ๋๋ค.
์ด ๋ชจ๋ธ์ ํ ์คํธ๋ฅผ ์ ๋ ฅ์ผ๋ก ๋ฐ๊ณ ์๋ฒ ๋ฉ์ ์ถ๋ ฅ์ผ๋ก ๋ฐํํฉ๋๋ค. ๋ฌธ์ฅ๊ณผ ์งง์ ๋จ๋ฝ์ 384์ฐจ์์ ๋ฐ์ง ๋ฒกํฐ ๊ณต๊ฐ์ผ๋ก ๋ณํํ๋ฉฐ, ํจ๋ฌํ๋ ์ด์ฆ ํ์ง, ์๋ฏธ ์ ์ฌ๋ ์ ์ ์ฐ์ , ํด๋ฌ์คํฐ๋ง, ๊ฒฝ๋ ๊ฒ์์ ์ต์ ํ๋ ์๋ฏธ ์๋ฒ ๋ฉ์ ์์ฑํฉ๋๋ค. ์ปจํ ์คํธ ๊ธธ์ด๋ 512 ํ ํฐ์ด๊ณ ์ต๋ ์ถ๋ ฅ์ 460์ ๋๋ค. ๋ค๋ฅธ ์ ๋ ฅ ๋๋ ์ถ๋ ฅ ๋ชจ๋ฌ๋ฆฌํฐ๋ ์์ต๋๋ค. ์ด๋ฏธ์ง, ์ค๋์ค, ํ์ผ์ ๋ฐ์ง ์์ผ๋ฉฐ ์ฑํ ์์ฑ์ด๋ ์์ ํ์ ํ ์คํธ๋ฅผ ์์ฑํ์ง ์์ต๋๋ค.
์ด๋ฌํ ๊ธฐ๋ฅ์ ์๋นํ ํน์ ํ ์ฉ๋ ์งํฉ์ ๊ฐ๋ฆฌํต๋๋ค. ๋ฒกํฐ๊ฐ ํจ๋ฌํ๋ ์ด์ฆ๋ฅผ ์๋ก ๊ฐ๊น๊ฒ ๋ฐฐ์นํ๋๋ก ํ์ต๋์๊ธฐ ๋๋ฌธ์, ๋ ํ ์คํธ ์กฐ๊ฐ์ ๋น๊ตํ ๋ ๋จ์ด ์ค๋ณต์ด ์๋๋ผ ์๋ฏธ๋ฅผ ๋ฐ์ํ๋ ์ซ์๊ฐ ํ์ํ ์๋ฏธ ์ ์ฌ๋ ์ ์ ์ฐ์ ์ ์ ํฉํฉ๋๋ค. ํจ๋ฌํ๋ ์ด์ฆ ํ์ง, ๋ฌธ์ฅ์ด๋ ์งง์ ๋จ๋ฝ์ ์ฃผ์ ๋ณ๋ก ๊ทธ๋ฃนํํ๋ ํด๋ฌ์คํฐ๋ง, ์ฟผ๋ฆฌ์ ํ๋ณด ๊ตฌ์ ์งํฉ์ ์๋ฒ ๋ฉํ ๋ค ๊ฑฐ๋ฆฌ๋ก ๊ตฌ์ ์์๋ฅผ ๋งค๊ธฐ๋ ๊ฒฝ๋ ๊ฒ์์ ์๋ง์ต๋๋ค. ๊ฑฐ์ ๋์ผํ ํญ๋ชฉ์ ์ค๋ณต ์ ๊ฑฐ, ์ง์ ํฐ์ผ์ด๋ ํผ๋๋ฐฑ ๊ทธ๋ฃนํ, ์งง์ ๋ฌธ์์ ๋ํ ์์ ์๋ฏธ ๊ฒ์ ์ธ๋ฑ์ค ๊ตฌ์ถ์๋ ๋ชจ๋ ์์ฐ์ค๋ฝ๊ฒ ๋ง์ต๋๋ค. 512 ํ ํฐ ์ปจํ ์คํธ๋ ๊ฐ ์ ๋ ฅ์ด ๊ธด ๋ฌธ์๊ฐ ์๋๋ผ ๋ฌธ์ฅ์ด๋ ์งง์ ๋จ๋ฝ์ด์ด์ผ ํ๋ค๋ ๋ป์ ๋๋ค. ๋ ๊ธด ์๋ฃ๋ ์๋ฒ ๋ฉํ๊ธฐ ์ ์ ์ฒญํฌ๋ก ๋๋์ด์ผ ํฉ๋๋ค.
๋ชจ๋ธ id "sentence-transformers/paraphrase-minilm-l6-v2"๋ฅผ ์ฌ์ฉํด api14์ OpenAI ํธํ API๋ฅผ ํตํด ํธ์ถํฉ๋๋ค. ์๋ํฌ์ธํธ๊ฐ OpenAI embeddings ํํ๋ฅผ ๋ฐ๋ฅด๋ฏ๋ก ํ ์คํธ๋ฅผ input์ผ๋ก ๋ณด๋ด๊ณ ์๋ต์์ ๋ฒกํฐ๋ฅผ ์ฝ์ต๋๋ค. ์ด ๋ชจ๋ธ์ ์ง์๋๋ ํ๋ผ๋ฏธํฐ๋ฅผ ๋์ดํ์ง ์์ผ๋ฏ๋ก ์ค์ ํ ์ถ๊ฐ ์ํ๋ง ๋๋ ์์ฑ ์ต์ ์ด ์์ต๋๋ค. ์์ฒญ์ ๋ชจ๋ธ id์ ์ ๋ ฅ ํ ์คํธ๋ก ์ ์งํ์ธ์. ์ด ํ์ด์ง์ ์ค์๊ฐ ๊ฐ๊ฒฉ ํ๊ฐ ๋ชจ๋ ์ฒญ๊ตฌ ์ธ๋ถ ์ ๋ณด๋ฅผ ๋ค๋ฃน๋๋ค.
๊ณํํ ๋ ๊ณ ๋ คํด์ผ ํ ์ฃผ์ ์ ์ฝ์ 512 ํ ํฐ ์ปจํ ์คํธ์ ๋๋ค. ์ ๋ ฅ์ด ๊ธด ๋ฌธ์์ด๊ฑฐ๋ ๋ฒกํฐ๊ฐ ์๋๋ผ ์์ฑ๋ ํ ์คํธ๊ฐ ํ์ํ๋ค๋ฉด ์ด ๋ชจ๋ธ์ ์ฌ๋ฐ๋ฅธ ์ ํ์ด ์๋๋ฉฐ ํ ์คํธ ์์ฑ ๋ชจ๋ธ์ด ๋ ์ ํฉํฉ๋๋ค. ๋ฌธ์ฅ ์์ค ๋ฐ ์งง์ ๋จ๋ฝ ์๋ฒ ๋ฉ ์์ ์๋ ์๊ณ ์ง์ ์ ์ธ ์ ํ์ง์ ๋๋ค.
Sentence Transformers: paraphrase-MiniLM-L6-v2 API ํธ์ถ ๋ฐฉ๋ฒ
- ๋์๋ณด๋์์ API ํค๋ฅผ ๋ง๋์ธ์.
- ์ฌ์ฉํ๋ ์ธ์ด์ ๊ณต์ openai SDK๋ฅผ ์ค์นํ์ธ์.
- baseURL์ https://api14.com/api/v1๋ก, model์ "sentence-transformers/paraphrase-minilm-l6-v2"๋ก ์ค์ ํ์ธ์.
import OpenAI from "openai";
const client = new OpenAI({
baseURL: "https://api14.com/api/v1",
apiKey: process.env.API14_API_KEY,
});
const result = await client.embeddings.create({
"model": "sentence-transformers/paraphrase-minilm-l6-v2",
"input": [
"The quick brown fox",
"Lorem ipsum"
]
});
console.log(result.data.map((d) => d.embedding.length));
์ฌ์
- ์ปจํ ์คํธ ๊ธธ์ด
- 512
- ์ต๋ ์ถ๋ ฅ
- 460
- ์ ๋ ฅ
- text
- ์ถ๋ ฅ
- embeddings
api14 ์์ฒญ ์ ยท ์ต๊ทผ 7์ผ
Sentence Transformers: paraphrase-MiniLM-L6-v2: ์์ฃผ ๋ฌป๋ ์ง๋ฌธ
- Sentence Transformers: paraphrase-MiniLM-L6-v2 API ๋น์ฉ์ ์ผ๋ง์ธ๊ฐ์?
- Sentence Transformers: paraphrase-MiniLM-L6-v2์ ๊ฐ๊ฒฉ์ ์ ๋ ฅ US$0.02 / 100๋ง ํ ํฐ์ ๋๋ค. ์ฑ๊ณตํ ์์ฒญ์ ๋ํด์๋ง USD ์์ก์์ ์ฐจ๊ฐ๋๋ฉฐ, ์คํจํ ์์ฒญ์ ๋ฌด๋ฃ์ ๋๋ค.
- Sentence Transformers: paraphrase-MiniLM-L6-v2์ ์ปจํ ์คํธ ์๋์ฐ๋ ์ผ๋ง์ธ๊ฐ์?
- Sentence Transformers: paraphrase-MiniLM-L6-v2๋(์) ์์ฒญ๋น ์ต๋ 512 ํ ํฐ์ ์ฝ์ต๋๋ค, ํ๋กฌํํธ, ๋ํ ๊ธฐ๋ก, ๋ฌธ์๋ฅผ ๋ชจ๋ ํฉ์น ์์ ๋๋ค. ์๋ต๋น ์ต๋ 460๊ฐ์ ์ถ๋ ฅ ํ ํฐ์ ์์ฑํฉ๋๋ค.
- Sentence Transformers: paraphrase-MiniLM-L6-v2๋(์) ๋ฌด์์ ํ ์ ์๋์?
- Sentence Transformers: paraphrase-MiniLM-L6-v2๋(์) text ์ ๋ ฅ์ ๋ฐ์ embeddings ์ถ๋ ฅ์ ๋ฐํํฉ๋๋ค.
- ์ฝ๋์์ Sentence Transformers: paraphrase-MiniLM-L6-v2๋ฅผ(์) ์ด๋ป๊ฒ ํธ์ถํ๋์?
- ์ด๋ค OpenAI SDK๋ base URL์ https://api14.com/api/v1๋ก ์ง์ ํ๊ณ model์ "sentence-transformers/paraphrase-minilm-l6-v2"๋ก ์ค์ ํ์ธ์, ๋ค๋ฅธ ์ฝ๋ ๋ณ๊ฒฝ์ ํ์ ์์ต๋๋ค. ์ด ํ์ด์ง์ ์ฝ๋ ํจ๋์์ ๋ฐ๋ก ์ธ ์ ์๋ ์์ ๋ฅผ ๋ณต์ฌํ์ธ์.
- Sentence Transformers: paraphrase-MiniLM-L6-v2์ ๋์์ ๋ฌด์์ธ๊ฐ์?
- ๋น์ทํ ๊ฐ๊ฒฉ๋์ ์๋ฒ ๋ฉ ๋ชจ๋ธ: Thenlper: GTE-Base, Intfloat: E5-Base-v2, Sentence Transformers: all-MiniLM-L12-v2. ๋ชจ๋ ๊ฐ์ API ํค๋ก ์คํ๋๋ฏ๋ก ๋ฌธ์์ด ํ๋๋ง ๋ฐ๊พธ๋ฉด ์ ํ๋ฉ๋๋ค.
Sentence Transformers: paraphrase-MiniLM-L6-v2 ์ปค๋ฎค๋ํฐ
์ ํ ํฝ์ด ์ปค๋ฎค๋ํฐ์๋ ์์ง ํ ํฝ์ด ์์ต๋๋ค. Sentence Transformers: paraphrase-MiniLM-L6-v2์ ๋ํ ์ฒซ ํ ํฝ์ ์ด์ด ๋ณด์ธ์.