๋ก์ปฌ์ ์ค์นํ LLM์๊ฒ ํ๊ธ์ ์ฅ์ฐฉํด๋ณด์!
โ ๋ฐฉ๋ฒ 1: ๋ํ ์์ํ ๋ ์์คํ ํ๋กฌํํธ ๋ฃ๊ธฐ
์์: ํฐ๋ฏธ๋์์
ollama run llama3
์คํ
ollama run llama3
> ์์คํ
: ์์ผ๋ก ๋ชจ๋ ๋๋ต์ ํ๊ตญ์ด๋ก ํด์ค.
> ์ฌ์ฉ์: ๋๋ ์ด๋ค ๋ชจ๋ธ์ด์ผ?
์ฒ์ โํ๊ตญ์ด๋ก ๋๋ตํด์คโ๋ผ๊ณ ํ ๋ฒ๋ง ๋งํด๋๋ฉด, ๋์ฒด๋ก ์ดํ๋ถํฐ ๊ณ์ ํ๊ตญ์ด๋ก ๋๋ต
โ ๋ฐฉ๋ฒ 2: ์์คํ ํ๋กฌํํธ๋ก ์ค์ ํ
Modelfile
๋ง๋ค๊ธฐ (์ถ์ฒ)
๋ ํ์คํ๊ฒ ํญ์ ํ๊ตญ์ด๋ก ์๋ตํ๋๋ก ํ๋ ค๋ฉด Modelfile์ ๋ง๋ค์ด์ ์ ๋ชจ๋ธ ์ด๋ฆ์ผ๋ก ๋ฑ๋ก
1.
Modelfile ์์ฑ
FROM llama3
SYSTEM ๋ชจ๋ ์๋ต์ ๋ฐ๋์ ํ๊ตญ์ด๋ก ํด์ฃผ์ธ์.
2. ๋ชจ๋ธ ๋ฑ๋ก
ollama create llama3-ko -f Modelfile
3. ์คํ
ollama run llama3-ko
์ด์ ๋ ๋งค๋ฒ โํ๊ตญ์ด๋ก ํด์คโ ์ ์จ๋ ๊ธฐ๋ณธ์ ์ผ๋ก ํ๊ตญ์ด๋ก ์๋ต
๐ก์ถ๊ฐ ํ
๋ชฉ์
ํ๋กฌํํธ ์์
ํญ์ ํ๊ตญ์ด ์๋ต
SYSTEM ๋ชจ๋ ์๋ต์ ํ๊ตญ์ด๋ก ํด์ฃผ์ธ์.
ํน์ ๋งํฌ
SYSTEM ์กด๋๋ง๋ก, ์น์ ํ๊ณ ๊ฐ๊ฒฐํ๊ฒ ๋๋ตํด์ฃผ์ธ์.
์บ๋ฆญํฐ ์ค์
SYSTEM ๋น์ ์ ํ๊ตญ์ด๋ฅผ ์ํ๋ ์ง์ ๋ง์ ์กฐ์์ ๋๋ค.
ํ์ํ๋ฉด llama3-ko ๋ชจ๋ธ์ REST API๋ก๋ ๋ฐ๋ก ํธ์ถ ๊ฐ๋ฅ.