OpenAI Embeddings
OpenAI Embeddings ๋
ธ๋๋ OpenAI์ ๊ณ ์ฑ๋ฅ ์๋ฒ ๋ฉ ๋ชจ๋ธ(text-embedding-3 ์๋ฆฌ์ฆ ๋ฐ text-embedding-ada-002)์ ํธ์ถํ์ฌ ํ
์คํธ๋ฅผ ๋ฒกํฐ๋ก ๋ณํํ๋ ๋
ธ๋์
๋๋ค. ๋ค์ํ ํฌ๊ธฐ์ ์ฑ๋ฅ์ ๋ชจ๋ธ์ ์ ํํ ์ ์์ผ๋ฉฐ, ๊ฒ์, ์ ์ฌ๋ ๋น๊ต, ๋ถ๋ฅ, ํด๋ฌ์คํฐ๋ง ๋ฑ ๋ค์ํ AI ์ํฌํ๋ก์ฐ์ ํ์ฉํ ์ ์์ต๋๋ค.
์ฃผ์ ๊ธฐ๋ฅ
OpenAI๊ฐ ์ ๊ณตํ๋ ์ต์ ์๋ฒ ๋ฉ ๋ชจ๋ธ์ ํตํด ๊ณ ํ์ง ๋ฒกํฐ ์์ฑ
text-embedding-3-large,text-embedding-3-small,text-embedding-ada-002์ค ์ ํ ๊ฐ๋ฅ๋๋ ์ ๋ ฅ์ ์ฒ๋ฆฌํ๊ธฐ ์ํ Batch ์ค์ , ์๋ต ์ง์ฐ ์ ์ด, ์ฐจ์ ์ ์ค์ ๋ฑ ๋ค์ํ ํ๋ผ๋ฏธํฐ ์ง์
์ค๋ฐ๊ฟ ์ฒ๋ฆฌ ์ต์ ๋ฑ ๋ฐ์ดํฐ ์ ์ ์ ์ฐ์ฑ ํ๋ณด


์
๋ ฅ๊ฐ (Inputs)
Connect Credential
OpenAI API ์ธ์ฆ ์ ๋ณด (Credential์ ๋ฑ๋ก)
ํ์
Model Name
์ฌ์ฉํ ์๋ฒ ๋ฉ ๋ชจ๋ธ ์ด๋ฆ (์: text-embedding-3-large, text-embedding-ada-002)
ํ์
ํ๋ผ๋ฏธํฐ (Parameters)
Strip New Lines
๊ฐํ ๋ฌธ์ ์ ๊ฑฐ ์ฌ๋ถ (๊ธฐ๋ณธ๊ฐ: false)
Batch Size
ํ ๋ฒ์ ์ฒ๋ฆฌํ ํ ์คํธ ์ (์: 100)
Timeout
์๋ต ๋๊ธฐ ์๊ฐ ์ ํ (ms ๋จ์)
BasePath
OpenAI API ์ปค์คํ ์๋ํฌ์ธํธ (์ ํ, ์: ํ๋ก์ ์๋ฒ ์ฃผ์)
Dimensions
์ถ๋ ฅ ์๋ฒ ๋ฉ ๋ฒกํฐ ์ฐจ์ ์ (๋ชจ๋ธ์ ๋ฐ๋ผ ์ง์ ๋ฒ์ ์์ด)
์ถ๋ ฅ๊ฐ (Outputs)
OpenAIEmbeddings
์ ๋ ฅ ํ ์คํธ์ ๋ํ ์๋ฒ ๋ฉ ๋ฒกํฐ ๋ฐฐ์ด ๊ฒฐ๊ณผ
ํ์ฉ ์์
RAG ํ์ดํ๋ผ์ธ์์ ์ฌ์ฉ์ ์ง๋ฌธ๊ณผ ๋ฌธ์ ์๋ฒ ๋ฉ์ ์์ฑํด ์ ์ฌ๋ ๊ธฐ๋ฐ ๊ฒ์ ๊ตฌํ
์ ํ ์ค๋ช , ๋ฆฌ๋ทฐ ๋ฐ์ดํฐ๋ฅผ ์๋ฒ ๋ฉ ํ ํด๋ฌ์คํฐ๋ง์ ํตํ ์ธ์ฌ์ดํธ ๋์ถ
๋ค๊ตญ์ด ํ ์คํธ ๋ฐ์ดํฐ๋ฅผ ์๋ฒ ๋ฉ ํ ๋ถ๋ฅ ๋ชจ๋ธ์ ์ ๋ ฅ ๋ฐ์ดํฐ๋ก ํ์ฉ
๊ธฐ์กด ๊ฒ์ ์์คํ ์ ๋ฒกํฐ ํํฐ ๊ธฐ๋ฅ์ ์ถ๊ฐํ์ฌ ์ ํ๋ ํฅ์
์ฌ์ฉ ํ
text-embedding-3-large๋ ๊ฐ์ฅ ๋์ ํ์ง์ ๋ฒกํฐ๋ฅผ ์์ฑํ๋ฉฐ, ์ฑ๋ฅ์ด ์ค์ํ ๋ถ์์ด๋ ๊ณ ์ ๋ ๊ฒ์์ ์ ํฉํฉ๋๋ค.text-embedding-ada-002๋ ๋น ๋ฅด๊ณ ์ ๋ ดํ ๋น์ฉ์ผ๋ก ์ค์๊ฐ ์๋ฒ ๋ฉ ์ฒ๋ฆฌ์ ์ ํฉํฉ๋๋ค.Strip New Lines๋ฅผ ํ์ฑํํ๋ฉด ์ค๋ฐ๊ฟ์ ์ ๊ฑฐํด ์ผ๊ด๋ ๋ฒกํฐ ์์ฑ์ด ๊ฐ๋ฅํ๋ฉฐ, ํนํ ๋ฌธ์ฅ ๋จ์ ์๋ฒ ๋ฉ ์ ์ ์ฉํฉ๋๋ค.Dimensionsํ๋ผ๋ฏธํฐ๋text-embedding-3์๋ฆฌ์ฆ์์๋ง ์ฌ์ฉ ๊ฐ๋ฅํ๋ฉฐ, ์ถ๋ ฅ ์ฐจ์ ์๋ฅผ ์กฐ์ ํ์ฌ ๊ณต๊ฐ ์ต์ ํ๊ฐ ๊ฐ๋ฅํฉ๋๋ค.
์ฃผ์์ฌํญ
Model Name์ ๋ฐ๋์ OpenAI๊ฐ ๊ณต์ ์ง์ํ๋ ๋ชจ๋ธ๋ช ๋ง ์ ๋ ฅํด์ผ ํ๋ฉฐ, ์คํ ๋๋ ์ง์ ์ข ๋ฃ๋ ๋ชจ๋ธ์ ํธ์ถ ์คํจ ์์ธ์ด ๋ฉ๋๋ค.Dimensionsํ๋ผ๋ฏธํฐ๋text-embedding-3์์๋ง ์ฌ์ฉ ๊ฐ๋ฅํ๋ฉฐ,text-embedding-ada-002์์๋ ๋ฌด์๋ฉ๋๋ค.Batch Size๊ฐ ๋๋ฌด ํด ๊ฒฝ์ฐ OpenAI API ์์ฒญ ํฌ๊ธฐ ์ ํ(ํ ํฐ ๊ธฐ์ค)์ ์ด๊ณผํ์ฌ ์คํจํ ์ ์์ผ๋ฏ๋ก ์กฐ์ ์ด ํ์ํฉ๋๋ค.
OpenAI API ์ฌ์ฉ๋์ ๋ฐ๋ผ ์๊ธ์ด ๋ฐ์ํ๋ฏ๋ก ํธ๋ํฝ์ ๋ฐ๋ผ ๋น์ฉ ๊ณํ์ ์๋ฆฝํด์ผ ํฉ๋๋ค.
Last updated