ChatGoogleVertexAI

ChatGoogleVertexAI ๋…ธ๋“œ๋Š” Google Cloud์˜ Vertex AI ํ”Œ๋žซํผ์„ ํ†ตํ•ด Gemini ๋ชจ๋ธ์„ ํ˜ธ์ถœํ•  ์ˆ˜ ์žˆ๋Š” Chat Model ๋…ธ๋“œ์ž…๋‹ˆ๋‹ค. ๋ชจ๋ธ ๋ฐฐํฌ์™€ ๊ถŒํ•œ ์ œ์–ด๊ฐ€ ํ†ตํ•ฉ๋œ Vertex AI ํ™˜๊ฒฝ์—์„œ ๊ณ ์„ฑ๋Šฅ ๋Œ€ํ™”ํ˜• LLM์„ ์•ˆ์ •์ ์œผ๋กœ ์šด์˜ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.


์ฃผ์š” ๊ธฐ๋Šฅ

  • Google Vertex AI๋ฅผ ํ†ตํ•ด Gemini ๊ณ„์—ด ๋ชจ๋ธ ํ˜ธ์ถœ (์˜ˆ: gemini-1.5-pro)

  • Custom Model Name ์ง€์ •์œผ๋กœ ์„ธ๋ถ„ํ™”๋œ ๋ชจ๋ธ ์ œ์–ด ๊ฐ€๋Šฅ

  • Streaming ์‘๋‹ต ๋ฐฉ์‹ ๋ฐ ๊ณ ๊ธ‰ ์‘๋‹ต ์ œ์–ด ํŒŒ๋ผ๋ฏธํ„ฐ ์ง€์›

  • Temperature, Top-P ์„ค์ • ๋“ฑ ์‘๋‹ต ํ’ˆ์งˆ ํŠœ๋‹ ๊ธฐ๋Šฅ ํฌํ•จ

  • ์ด๋ฏธ์ง€ ์—…๋กœ๋“œ ์ž…๋ ฅ๋„ ์„ ํƒ์ ์œผ๋กœ ํ—ˆ์šฉ ๊ฐ€๋Šฅ

WindyFlo ChatGoogleVertexAI
WindyFlo ChatGoogleVertexAI Parameters

์ž…๋ ฅ๊ฐ’ (Inputs)

ํ•ญ๋ชฉ
์„ค๋ช…
ํ•„์ˆ˜ ์—ฌ๋ถ€

Connect Credential

Vertex AI์— ์—ฐ๊ฒฐ๋œ ์„œ๋น„์Šค ๊ณ„์ • ํ‚ค ๋˜๋Š” API Key (Credential์— ๋“ฑ๋ก)

ํ•„์ˆ˜

Model Name

์‚ฌ์šฉํ•  Vertex AI Gemini ๋ชจ๋ธ๋ช… (์˜ˆ: gemini-1.5-pro)

ํ•„์ˆ˜

Temperature

์ฐฝ์˜์„ฑ ์กฐ์ ˆ ๊ฐ’ (0.0 ~ 1.0, ๊ธฐ๋ณธ๊ฐ’: 0.9)

์„ ํƒ

Allow Image Uploads

์ด๋ฏธ์ง€ ์ž…๋ ฅ ํ—ˆ์šฉ ์—ฌ๋ถ€

์„ ํƒ


ํŒŒ๋ผ๋ฏธํ„ฐ (Parameters)

ํ•ญ๋ชฉ
์„ค๋ช…

Custom Model Name

Vertex AI์— ๋ฐฐํฌ๋œ ๋ชจ๋ธ ์‹๋ณ„์ž (์˜ˆ: gemini-1.5-pro-exp-0801)

Streaming

์ŠคํŠธ๋ฆฌ๋ฐ ๋ฐฉ์‹ ์‘๋‹ต ์ˆ˜์‹  ์—ฌ๋ถ€ (๊ธฐ๋ณธ๊ฐ’: true)

Max Output Tokens

์ถœ๋ ฅ ์ตœ๋Œ€ ํ† ํฐ ์ˆ˜

Top Probability

Top-P ํ™•๋ฅ  ์ƒ˜ํ”Œ๋ง ๊ฐ’

Top Next Highest Probability Tokens

ํ›„๋ณด ํ† ํฐ ์ˆ˜ ์ œํ•œ (์˜ˆ: Top-K ์—ญํ• )


์ถœ๋ ฅ๊ฐ’ (Outputs)

์ถœ๋ ฅ ํ•ญ๋ชฉ
์„ค๋ช…

ChatGoogleVertexAI

Vertex AI๋ฅผ ํ†ตํ•ด ๋ฐ˜ํ™˜๋œ ์‘๋‹ต ๋˜๋Š” ์ŠคํŠธ๋ฆฌ๋ฐ ๊ฐ์ฒด


ํ™œ์šฉ ์˜ˆ์‹œ

  • ๋‚ด๋ถ€ Google Cloud ์ธํ”„๋ผ ๋‚ด์—์„œ ๋ณด์•ˆ ํ†ต์ œ๋œ ํ™˜๊ฒฝ์—์„œ Gemini ๋ชจ๋ธ์„ ์•ˆ์ •์ ์œผ๋กœ ์šด์˜

  • ๋ชจ๋ธ ๋ฒ„์ „ ๋ฐ ๋ฐฐํฌ ๋‹จ์œ„ ๋ณ„ A/B ํ…Œ์ŠคํŠธ๋ฅผ ํ†ตํ•œ ๋Œ€ํ™” ์‘๋‹ต ์„ฑ๋Šฅ ์ตœ์ ํ™”

  • ํด๋ผ์šฐ๋“œ ๊ธฐ๋ฐ˜ ์—…๋ฌด ์ž๋™ํ™” ์‹œ์Šคํ…œ์— Vertex AI ๊ธฐ๋ฐ˜ ์–ธ์–ด ๋ชจ๋ธ ๋‚ด์žฅ

  • ๊ณ ๋„ํ™”๋œ ์‚ฌ๋‚ด ์ง€์‹ ๊ฒ€์ƒ‰ํ˜• ์ฑ—๋ด‡์—์„œ Vertex AI ๊ธฐ๋ฐ˜ ์ถ”๋ก  ์‘๋‹ต ์ œ๊ณต


์‚ฌ์šฉ ํŒ

  • Custom Model Name์„ ๋ช…ํ™•ํžˆ ์ง€์ •ํ•ด์•ผ ์ •ํ™•ํ•œ ๋ฐฐํฌ ๋ชจ๋ธ๋กœ ์—ฐ๊ฒฐ๋ฉ๋‹ˆ๋‹ค

  • Streaming ์‘๋‹ต์„ ํ™œ์„ฑํ™”ํ•˜๋ฉด ์‚ฌ์šฉ์ž ์‘๋‹ต ์ฒด๊ฐ ์†๋„๊ฐ€ ํฌ๊ฒŒ ๊ฐœ์„ ๋ฉ๋‹ˆ๋‹ค

  • Top-P, Temperature ๊ฐ’์„ ํ•จ๊ป˜ ์กฐ์ ˆํ•ด ์‘๋‹ต ์ผ๊ด€์„ฑ๊ณผ ์ฐฝ์˜์„ฑ์˜ ๊ท ํ˜•์„ ์กฐ์ •ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค


์ฃผ์˜์‚ฌํ•ญ

  • Vertex AI ์ฝ˜์†”์—์„œ ๋ชจ๋ธ์ด ์‹ค์ œ ๋ฐฐํฌ๋˜์–ด ์žˆ์–ด์•ผ ํ•˜๋ฉฐ, API ํ˜ธ์ถœ ๊ถŒํ•œ์ด ์žˆ๋Š” ์„œ๋น„์Šค ๊ณ„์ • ํ‚ค๋ฅผ ์‚ฌ์šฉํ•ด์•ผ ํ•ฉ๋‹ˆ๋‹ค

  • Model Name๊ณผ Custom Model Name์˜ ๋ถˆ์ผ์น˜ ์‹œ ์˜ค๋ฅ˜ ๋ฐœ์ƒ ๊ฐ€๋Šฅ

  • Gemini 1.5 ๊ณ„์—ด์€ ๋น„์šฉ์ด ๋†’๊ณ  ์‘๋‹ต ์‹œ๊ฐ„์ด ๊ธธ ์ˆ˜ ์žˆ์œผ๋ฏ€๋กœ ์‚ฌ์ „ ํ…Œ์ŠคํŠธ ๊ถŒ์žฅ

  • ํ† ํฐ ์ˆ˜ ์ œํ•œ๊ณผ ๋„คํŠธ์›Œํฌ ์—ฐ๊ฒฐ ์ƒํƒœ์— ๋”ฐ๋ผ ์˜ˆ์™ธ ์ƒํ™ฉ์ด ๋ฐœ์ƒํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค

Last updated