ChatGoogleVertexAI
ChatGoogleVertexAI ๋ ธ๋๋ Google Cloud์ Vertex AI ํ๋ซํผ์ ํตํด Gemini ๋ชจ๋ธ์ ํธ์ถํ ์ ์๋ Chat Model ๋ ธ๋์ ๋๋ค. ๋ชจ๋ธ ๋ฐฐํฌ์ ๊ถํ ์ ์ด๊ฐ ํตํฉ๋ Vertex AI ํ๊ฒฝ์์ ๊ณ ์ฑ๋ฅ ๋ํํ LLM์ ์์ ์ ์ผ๋ก ์ด์ํ ์ ์์ต๋๋ค.
์ฃผ์ ๊ธฐ๋ฅ
Google Vertex AI๋ฅผ ํตํด Gemini ๊ณ์ด ๋ชจ๋ธ ํธ์ถ (์: gemini-1.5-pro)
Custom Model Name ์ง์ ์ผ๋ก ์ธ๋ถํ๋ ๋ชจ๋ธ ์ ์ด ๊ฐ๋ฅ
Streaming ์๋ต ๋ฐฉ์ ๋ฐ ๊ณ ๊ธ ์๋ต ์ ์ด ํ๋ผ๋ฏธํฐ ์ง์
Temperature, Top-P ์ค์ ๋ฑ ์๋ต ํ์ง ํ๋ ๊ธฐ๋ฅ ํฌํจ
์ด๋ฏธ์ง ์ ๋ก๋ ์ ๋ ฅ๋ ์ ํ์ ์ผ๋ก ํ์ฉ ๊ฐ๋ฅ


์
๋ ฅ๊ฐ (Inputs)
Connect Credential
Vertex AI์ ์ฐ๊ฒฐ๋ ์๋น์ค ๊ณ์ ํค ๋๋ API Key (Credential์ ๋ฑ๋ก)
ํ์
Model Name
์ฌ์ฉํ Vertex AI Gemini ๋ชจ๋ธ๋ช (์: gemini-1.5-pro)
ํ์
Temperature
์ฐฝ์์ฑ ์กฐ์ ๊ฐ (0.0 ~ 1.0, ๊ธฐ๋ณธ๊ฐ: 0.9)
์ ํ
Allow Image Uploads
์ด๋ฏธ์ง ์ ๋ ฅ ํ์ฉ ์ฌ๋ถ
์ ํ
ํ๋ผ๋ฏธํฐ (Parameters)
Custom Model Name
Vertex AI์ ๋ฐฐํฌ๋ ๋ชจ๋ธ ์๋ณ์ (์: gemini-1.5-pro-exp-0801)
Streaming
์คํธ๋ฆฌ๋ฐ ๋ฐฉ์ ์๋ต ์์ ์ฌ๋ถ (๊ธฐ๋ณธ๊ฐ: true)
Max Output Tokens
์ถ๋ ฅ ์ต๋ ํ ํฐ ์
Top Probability
Top-P ํ๋ฅ ์ํ๋ง ๊ฐ
Top Next Highest Probability Tokens
ํ๋ณด ํ ํฐ ์ ์ ํ (์: Top-K ์ญํ )
์ถ๋ ฅ๊ฐ (Outputs)
ChatGoogleVertexAI
Vertex AI๋ฅผ ํตํด ๋ฐํ๋ ์๋ต ๋๋ ์คํธ๋ฆฌ๋ฐ ๊ฐ์ฒด
ํ์ฉ ์์
๋ด๋ถ Google Cloud ์ธํ๋ผ ๋ด์์ ๋ณด์ ํต์ ๋ ํ๊ฒฝ์์ Gemini ๋ชจ๋ธ์ ์์ ์ ์ผ๋ก ์ด์
๋ชจ๋ธ ๋ฒ์ ๋ฐ ๋ฐฐํฌ ๋จ์ ๋ณ A/B ํ ์คํธ๋ฅผ ํตํ ๋ํ ์๋ต ์ฑ๋ฅ ์ต์ ํ
ํด๋ผ์ฐ๋ ๊ธฐ๋ฐ ์ ๋ฌด ์๋ํ ์์คํ ์ Vertex AI ๊ธฐ๋ฐ ์ธ์ด ๋ชจ๋ธ ๋ด์ฅ
๊ณ ๋ํ๋ ์ฌ๋ด ์ง์ ๊ฒ์ํ ์ฑ๋ด์์ Vertex AI ๊ธฐ๋ฐ ์ถ๋ก ์๋ต ์ ๊ณต
์ฌ์ฉ ํ
Custom Model Name์ ๋ช ํํ ์ง์ ํด์ผ ์ ํํ ๋ฐฐํฌ ๋ชจ๋ธ๋ก ์ฐ๊ฒฐ๋ฉ๋๋ค
Streaming ์๋ต์ ํ์ฑํํ๋ฉด ์ฌ์ฉ์ ์๋ต ์ฒด๊ฐ ์๋๊ฐ ํฌ๊ฒ ๊ฐ์ ๋ฉ๋๋ค
Top-P, Temperature ๊ฐ์ ํจ๊ป ์กฐ์ ํด ์๋ต ์ผ๊ด์ฑ๊ณผ ์ฐฝ์์ฑ์ ๊ท ํ์ ์กฐ์ ํ ์ ์์ต๋๋ค
์ฃผ์์ฌํญ
Vertex AI ์ฝ์์์ ๋ชจ๋ธ์ด ์ค์ ๋ฐฐํฌ๋์ด ์์ด์ผ ํ๋ฉฐ, API ํธ์ถ ๊ถํ์ด ์๋ ์๋น์ค ๊ณ์ ํค๋ฅผ ์ฌ์ฉํด์ผ ํฉ๋๋ค
Model Name๊ณผ Custom Model Name์ ๋ถ์ผ์น ์ ์ค๋ฅ ๋ฐ์ ๊ฐ๋ฅ
Gemini 1.5 ๊ณ์ด์ ๋น์ฉ์ด ๋๊ณ ์๋ต ์๊ฐ์ด ๊ธธ ์ ์์ผ๋ฏ๋ก ์ฌ์ ํ ์คํธ ๊ถ์ฅ
ํ ํฐ ์ ์ ํ๊ณผ ๋คํธ์ํฌ ์ฐ๊ฒฐ ์ํ์ ๋ฐ๋ผ ์์ธ ์ํฉ์ด ๋ฐ์ํ ์ ์์ต๋๋ค
Last updated