Azure OpenAI
Azure OpenAI λ
Έλλ Microsoft Azure κ³μ μ ν΅ν΄ OpenAIμ ν
μ€νΈ μμ± λͺ¨λΈ(text-davinci-003 λ±)μ νΈμΆν μ μλ LLM λ
Έλμ
λλ€. OpenAIμ κΈ°λ₯μ Azure μΈνλΌμ ν΅ν©ν΄ 보μ, νμ₯μ±, κ·μ μ€μ μ건μ λ§μ‘±νλ©΄μλ λμΌν λͺ¨λΈ μ±λ₯μ μ 곡ν©λλ€.
μ£Όμ κΈ°λ₯
Azure κ³μ μΌλ‘ OpenAIμ
text-davinciλͺ¨λΈ κ³μ΄ μ¬μ© κ°λ₯Temperature,Top Probability,Frequency Penaltyλ± μΈλΆ μμ± μ μ΄ νλΌλ―Έν° μ 곡μΊμ λ° Timeout μ€μ μ ν΅ν΄ μμ μ μΈ μ΄μ κ°λ₯
Microsoft Azure μ μ± μ λ°λ₯Έ 보μμ± λ° μλΉμ€ λ 벨 보μ₯


μ
λ ₯κ° (Inputs)
Cache
λμΌ μ λ ₯μ λν μλ΅ μΊμ μ¬μ© μ¬λΆ
μ ν
Connect Credential
Azure OpenAI νΈμΆμ© μΈμ¦ μ 보 (Credentialμ λ±λ‘)
νμ
Model Name
μ¬μ©ν λͺ¨λΈ μ΄λ¦ (μ: text-davinci-003)
νμ
Temperature
μμ± ν μ€νΈμ μ°½μμ± μ‘°μ (κΈ°λ³Έκ°: 0.7, κΆμ₯ λ²μ: 0 ~ 1.0)
μ ν
νλΌλ―Έν° (Parameters)
Max Tokens
μ΅λ μμ± ν ν° μ (μ: 256, 512 λ±)
Top Probability
Top-p μνλ§ νλ₯ κ° (μ: 0.95)
Best Of
μ¬λ¬ μλ΅ μ€ μ΅μ κ²°κ³Ό μ ν (μ: 3)
Frequency Penalty
λ°λ³΅ λ¨μ΄ μ΅μ μ λ (-2.0 ~ 2.0)
Presence Penalty
μλ‘μ΄ μ£Όμ μ λ μ λ (-2.0 ~ 2.0)
Timeout
API μλ΅ μ ν μκ° (ms λ¨μ)
BasePath
Azureμμ μ 곡νλ API Endpoint κ²½λ‘ (μ: https://{resource-name}.openai.azure.com/)
μΆλ ₯κ° (Outputs)
AzureOpenAI
LLM μλ΅ ν μ€νΈ λλ JSON κ°μ²΄ (ν둬ννΈ κ²°κ³Ό ν¬ν¨)
νμ© μμ
보μμ΄ μ€μν κΈμ΅Β·κ³΅κ³΅κΈ°κ΄ νκ²½μμ GPT λͺ¨λΈμ νμ©ν μλ μλ΅ μμ€ν ꡬμΆ
Microsoft κΈ°λ° λ΄λΆ μμ€ν κ³Ό μ°λλλ LLM κΈ°λ₯ λ΄μ¬ν
λ€μν ν둬ννΈ μΈν μ ν΅ν΄ ν νλ¦Ώ κΈ°λ° μμ½, μ¬μμ±, λΆμ μλν
OpenAI λλΉ λ κ°λ ₯ν SLA λ° μ‘μΈμ€ μ μ΄κ° νμν μν°νλΌμ΄μ¦ νκ²½ μ μ©
μ¬μ© ν
BasePathλ Azure 리μμ€ λ°°ν¬ μ μλ μμ±λ Endpoint κ²½λ‘λ₯Ό μ νν μ λ ₯ν΄μΌ μ μ νΈμΆλ©λλ€.Temperatureλ 0.2~0.4λ‘ μ€μ νλ©΄ λ μΌκ΄λ μλ΅, 0.8 μ΄μμ΄λ©΄ λ μ°½μμ μΈ μλ΅μ μ λν μ μμ΅λλ€.Top ProbabilityμTemperatureλ λμμ μ¬μ©νμ§ μλ κ²μ κΆμ₯νλ©°, νλλ§ μ‘°μ ν΄ μ€ννλ κ²μ΄ μ’μ΅λλ€.Best Ofλ λΉμ©μ΄ μ¦κ°νλ―λ‘ νμ§ κ°μ μ΄ νμν κ³ μ μμ μμλ§ νμ©νμΈμ.
μ£Όμμ¬ν
Model Nameμ Azureμμ μ¬μ λ°°ν¬λ λͺ¨λΈλ§ μ§μλλ―λ‘, OpenAI 곡μ λͺ μΉκ³Ό λ€λ₯Ό μ μμ΅λλ€.Credential λ±λ‘ μ Azure OpenAI 리μμ€μ μ΄λ¦, ν€, λ°°ν¬λ λͺ¨λΈ IDλ₯Ό λͺ¨λ μ νν μ λ ₯ν΄μΌ ν©λλ€.
μμ²λΉ
Max Tokensκ° ν΄μλ‘ λΉμ© λ° μ§μ°μ΄ μ¦κ°νλ―λ‘ λͺ©μ μ λ§κ² μ μ μμ€ μ€μ μ΄ νμν©λλ€.API μλ΅ μ€λ₯κ° λ°μνλ κ²½μ°, Azure Resource Quota λλ μμ² μλ μ ν μ μ± μ μ κ²ν΄μΌ ν©λλ€.
Last updated