Text File

Text File ๋…ธ๋“œ๋Š” .txt ํ˜•์‹์˜ ํŒŒ์ผ์„ ์—…๋กœ๋“œํ•˜์—ฌ ํ…์ŠคํŠธ ๋ฐ์ดํ„ฐ๋ฅผ Document ๊ฐ์ฒด๋กœ ๋ณ€ํ™˜ํ•ฉ๋‹ˆ๋‹ค. ์‚ฌ๋‚ด ๋กœ๊ทธ, ์ธํ„ฐ๋ทฐ ์›๋ฌธ, ๋ฌธ์„œ ์ดˆ์•ˆ ๋“ฑ ๋‹ค์–‘ํ•œ ํ…์ŠคํŠธ ๊ธฐ๋ฐ˜ ๋ฆฌ์†Œ์Šค๋ฅผ ๊ฐ„ํŽธํ•˜๊ฒŒ AI ํŒŒ์ดํ”„๋ผ์ธ์— ํ™œ์šฉํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.


์ฃผ์š” ๊ธฐ๋Šฅ

  • ์—…๋กœ๋“œํ•œ .txt ํŒŒ์ผ์„ Document ๊ฐ์ฒด๋กœ ๋ณ€ํ™˜

  • Text Splitter์™€ ํ•จ๊ป˜ ์‚ฌ์šฉํ•˜์—ฌ chunk ๋‹จ์œ„ ๋ถ„ํ•  ๊ฐ€๋Šฅ

  • ๋ฌธ์„œ์— ์‚ฌ์šฉ์ž ์ง€์ • ๋ฉ”ํƒ€๋ฐ์ดํ„ฐ ์ถ”๊ฐ€ ๊ฐ€๋Šฅ

  • ํ•„์š”ํ•œ ๊ฒฝ์šฐ ๋ฉ”ํƒ€๋ฐ์ดํ„ฐ ํ•„๋“œ ์ œ๊ฑฐ ๊ธฐ๋Šฅ ์ œ๊ณต

WindyFlo Text File
WindyFlo Text File Parameters

์ž…๋ ฅ๊ฐ’ (Inputs)

ํ•ญ๋ชฉ
์„ค๋ช…
ํ•„์ˆ˜ ์—ฌ๋ถ€

Txt File

๋ถˆ๋Ÿฌ์˜ฌ .txt ํŒŒ์ผ (UTF-8 ์ธ์ฝ”๋”ฉ ๊ถŒ์žฅ)

ํ•„์ˆ˜

Text Splitter

ํ…์ŠคํŠธ ๋ถ„ํ•  ๊ธฐ์ค€ ์„ค์ •

์„ ํƒ


ํŒŒ๋ผ๋ฏธํ„ฐ (Parameters)

ํ•ญ๋ชฉ
์„ค๋ช…

Additional Metadata

๋ณ€ํ™˜๋œ ๋ฌธ์„œ์— ๋ถ€์—ฌํ•  ์‚ฌ์šฉ์ž ์ง€์ • ๋ฉ”ํƒ€๋ฐ์ดํ„ฐ

Omit Metadata Keys

๋ฌธ์„œ์— ํฌํ•จํ•˜์ง€ ์•Š์„ ๋ฉ”ํƒ€๋ฐ์ดํ„ฐ ํ‚ค ์ง€์ • (์‰ผํ‘œ ๊ตฌ๋ถ„)


์ถœ๋ ฅ๊ฐ’ (Outputs)

์ถœ๋ ฅ ํ•ญ๋ชฉ
์„ค๋ช…

Document

ํ…์ŠคํŠธ๊ฐ€ ํฌํ•จ๋œ Document ๊ฐ์ฒด ๋ฐฐ์—ด (metadata + pageContent)

Text

๋ชจ๋“  pageContent๋ฅผ ํ•˜๋‚˜๋กœ ํ•ฉ์นœ ํ…์ŠคํŠธ ๋ฌธ์ž์—ด


ํ™œ์šฉ ์˜ˆ์‹œ

  • ๊ณ ๊ฐ ์‘๋Œ€ ๋กœ๊ทธ๋ฅผ AI ์š”์•ฝ ํŒŒ์ดํ”„๋ผ์ธ์— ํˆฌ์ž…

  • ์ธํ„ฐ๋ทฐ ์ดˆ์•ˆ(txt)์„ LLM ๊ธฐ๋ฐ˜ ์ •์ œ ํŒŒ์ดํ”„๋ผ์ธ์— ์ž…๋ ฅ

  • ํ”„๋กœ์ ํŠธ ํšŒ์˜ ๊ธฐ๋ก(txt)์„ ๊ธฐ๋ฐ˜์œผ๋กœ ํšŒ์˜๋ก ์ž๋™ ์ƒ์„ฑ


์‚ฌ์šฉ ํŒ

  • ์—ฌ๋Ÿฌ ํŽ˜์ด์ง€ ๋˜๋Š” ๊ธด ํ…์ŠคํŠธ๋Š” Text Splitter ๋…ธ๋“œ์™€ ํ•จ๊ป˜ ์‚ฌ์šฉํ•˜๋ฉด ์„ฑ๋Šฅ ์ตœ์ ํ™”์— ์œ ๋ฆฌ

  • Additional Metadata์— ์ž‘์„ฑ์ผ์ž, ์—…๋กœ๋“œ์ž ๋“ฑ์˜ ์ •๋ณด๋ฅผ ๋ถ€์—ฌํ•˜๋ฉด ๊ด€๋ฆฌ๊ฐ€ ํŽธ๋ฆฌ

  • ๋ถ„์„ ๋Œ€์ƒ์ด ๋ช…ํ™•ํ•œ ๊ฒฝ์šฐ Omit Metadata Keys๋กœ ๋ถˆํ•„์š”ํ•œ ํ•ญ๋ชฉ ์ œ๊ฑฐ ๊ฐ€๋Šฅ


์ฃผ์˜์‚ฌํ•ญ

  • .txt ์™ธ ํŒŒ์ผ ํ˜•์‹์€ ํ—ˆ์šฉ๋˜์ง€ ์•Š์œผ๋ฉฐ ์ธ์ฝ”๋”ฉ ๋ฌธ์ œ ๋ฐœ์ƒ ์‹œ ํ…์ŠคํŠธ๊ฐ€ ๊นจ์งˆ ์ˆ˜ ์žˆ์Œ

  • ๋Œ€์šฉ๋Ÿ‰ ํ…์ŠคํŠธ ์ž…๋ ฅ ์‹œ ์ฒ˜๋ฆฌ ์†๋„ ์ €ํ•˜ ๋ฐ chunk ์ œํ•œ์— ์ฃผ์˜ ํ•„์š”

  • ์ž…๋ ฅ ํŒŒ์ผ ๋‚ด ๋ฏผ๊ฐ์ •๋ณด ํฌํ•จ ์—ฌ๋ถ€๋ฅผ ์‚ฌ์ „์— ์ ๊ฒ€ ํ•„์š”

Last updated