์๋ ํ์ธ์ ์ฌ๋ฌ๋ถ!
์ด๋ฒ ๊ธ์์๋ ๋ก๋ผ๋ผ๋ ์ธ๊ณต์ง๋ฅ ๋๊ตฌ๋ฅผ ์ด์ฉํ์ฌ ๊ทธ๋ฆผ์ ๊ทธ๋ ค๋ณด๋ ์๊ฐ์ ๊ฐ์ ธ๋ณผ ๊ฑฐ์์!
๐ค ๊ทผ๋ฐ... ๋ก๋ผ๊ฐ ๋ญ๊ฐ์?
LoRA (Low-Rank Adaptation)
ํน์ ์์ฆ ์ธ๊ณต์ง๋ฅ์ด ์์ฒญ๋๊ฒ ๋ฐ์ ํ๊ณ ์๋ ๊ฑฐ ์์๋์?? ์ด์ ์๋ AI ์ฑ๋ด๋ถํฐ ์์ํด์ ๋ํ๋ธ ์๊ณ ๋ฆฌ์ฆ ์ถ์ฒ, ์ต๊ทผ ์์ฒญ๋๊ฒ ๋ ์ค๋ฅด๋ chatgpt๊น์ง... ์๊ฒ ๋ชจ๋ฅด๊ฒ ์ธ๊ณต์ง๋ฅ์ ์ฐ๋ฆฌ ์ถ์ ๋ง์ ์ํฅ์ ๋ผ์น๊ณ ์์ด์. ํนํ๋, 2022๋ ์ ๊ทธ๋ฆผ์ ๊ทธ๋ ค์ฃผ๋ AI๊ฐ ์์ฒญ๋๊ฒ ๋ฐ์ ํ ํ ํด์์ฃ !
๋ก๋ผ๋ ์ต๊ทผ์ ์ธ๊ธฐ๋ฅผ ์ป๊ณ ์๋ GPT-3์ ๊ฐ์ ์ธ๊ณต์ง๋ฅ ๊ธฐ์ ์ ๊ธฐ๋ฐ์ผ๋ก ๋ง๋ค์ด์ง ๋๊ตฌ๋ก, ๊ทธ๋ฆผ์ ์๋์ผ๋ก ์์ฑํด์ฃผ๋ ๊ธฐ๋ฅ์ ์ ๊ณตํฉ๋๋ค. ์ด๋ฏธ ์ฌ์ ์ ํ๋ จ๋ ๋ชจ๋ธ์ ์ฌ์ฉํ๋ ๊ฒ์ด๊ธฐ ๋๋ฌธ์ ๋ณด๋ค ๊ฐํธํ๊ฒ ๊ทธ๋ฆผ์ ๊ทธ๋ฆด ์๊ฐ ์์ฃ ! ๋ํ ๊ฒ์์ ํตํด์ ์ฌ๋ฌ ๋ฒ์ ์ ๋ก๋ผ๋ฅผ ๋ง๋๋ณผ ์ ์์ด์. ์๋ฅผ ๋ค์ด, ์ค์ฌํ์ ํนํ๋์๋ค๊ฑฐ๋, ํํ์งํ์ ํนํ๋์๋ค๊ฑฐ๋ ํ๋ ๊ฑฐ์ฃ !
ํ์ง๋ง, ์ด๋ฌํ ์ธ๊ณต์ง๋ฅ ๋๊ตฌ๋ฅผ ์ฌ์ฉํ์ฌ ๊ทธ๋ฆผ์ ๊ทธ๋ฆฌ๋ ๊ฒฝ์ฐ, ์ฌ์ฉ์๊ฐ ์ํ๋ ๊ฒฐ๊ณผ๋ฅผ ์ป๊ธฐ ์ํด์๋ ์ ์ ํ ๊ฐ์ค์น๋ฅผ ์กฐ์ ํด์ผ ํด์.
์ด๊ณณ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ ํ ์คํธํ์ฌ ์ ์ ํ ๊ฐ์ค์น๋ฅผ ์ฐพ์ ๋ณด๋ ค ํฉ๋๋ค. ํนํ ๋ชจ์ํ(!!!) ๊ทธ๋ฆผ์ฒด ๋ฅผ ๋ง๋ค์ ์๋ ๋ก๋ผ์ ์ ์ ํ ๊ฐ์ค์น ์กฐ์ฌ๋ฅผ ์ํด, ๋ค์ํ ๊ฐ์ค์น๋ฅผ ํ ์คํธํ๊ณ ๊ฒฐ๊ณผ๋ฅผ ๋น๊ตํ์์ต๋๋ค ๐
๋ก๋ผ์ ๋ํด ์ข ๋ ์์ธํ ๋ด์ฉ์ด ์๊ณ ์ถ์ผ์ ๋ถ์ ์๋ ๋งํฌ๋ฅผ ์ฐธ์กฐํด์ฃผ์ธ์. LoRA: Low-Rank Adaptation of Large Language Models์ด๋ผ๋ ์ ๋ชฉ์ ๋ ผ๋ฌธ์ ๋๋ค! (๊ทผ๋ฐ ์์ด๋ผ์ ์ ๋ ์ค๊ฐ์ ํฌ๊ธฐํ์ต๋๋ค...^^)
https://arxiv.org/abs/2106.09685
๐ฑ ๋๋ฐ์ด์ค ์ฌ์
๋ก๋ผ๋ ๋น๊ต์ ๋ฎ์ ์ฌ์์ PC์์๋ ์ฌ์ฉ์ด ๊ฐ๋ฅํ๋ค๊ณ ํ๊ธด ํ์ง๋ง, ์ผ์ ํ ์ฌ์์ ์ปดํจํฐ๊ฐ ํ์ํ๊ธด ํฉ๋๋ค. ์ต์ 6GB ์ด์์ VRAM์ด ํ์ํ๋ค๊ณ ํ๋ค์. ์ด๋ฒ ํ ์คํธ์์๋ ์๋์ ๊ฐ์ ์ฌ์์ ์ปดํจํฐ๋ฅผ ์ฌ์ฉํ์ต๋๋ค!
CPU i7 8700
GTX 1060 6G
DDR4 32G
๐จ์ธ๊ณต์ง๋ฅ ๋๊ตฌ
์์ Stable Diffusion ์ด๋ผ๋ ์ธ๊ณต์ง๋ฅ ๋๊ตฌ๋ฅผ ์ฌ์ฉํ์ด์. Stable Diffusion์ ํ ์คํธ์์ ์ด๋ฏธ์ง๋ฅผ ์์ฑํ๋ ๋ฅ๋ฌ๋ ๋ชจ๋ธ์ด๋๋๋ค. stability.ai์์ ๋ง๋ค์์ผ๋ฉฐ, ๋ค๋ฅธ ๋ชจ๋ธ์ ๋นํด ํ์ง, ๋ค์์ฑ ๋ฑ์์ ์ฐ์ํ ์ฑ์ ์ ๊ฑฐ๋๊ณ ์์ฃ ๐
์ฌ์ฉ ๋ฆฌ์์ค
์ด๋ฒ ํ ์คํธ์์๋ ๋ค์๊ณผ ๊ฐ์ ๋ฆฌ์์ค๋ฅผ ์ฌ์ฉํ์์ต๋๋ค.
๋ชจ๋ธ : AniLike 2.5 v1
๋ก๋ผ : CuteScrap - 0,5v (https://civitai.com/models/5100/cutescrap-05v)
ํ๋กฌํํธ
์ฌ๊ธฐ์์ ํ๋กฌํํธ๋, ๊ทธ๋ฆผ์ ๊ทธ๋ฆฌ๊ธฐ ์ํด ๋ก๋ผ์๊ฒ ์ ๋ฌํ๋ ๋ฉ์์ง๋ฅผ ๋ปํด์. "์๋ฆฌ์ผ~ ์ด๊ฒ ์ข ์ฐพ์์ค~" ํ๋ ๊ฒ์ฒ๋ผ, ๋ก๋ผ๊ฐ ๊ทธ๋ฆผ์ ๊ทธ๋ฆฌ๊ธฐ ์ ์ ์ฐ๋ฆฌ๊ฐ ๋จผ์ ๋ฌด์์ ๊ทธ๋ฆด์ง ๋งํด์ค์ผ ํฉ๋๋ค.
์๋์ ๊ฐ์ด ํฌ์งํฐ๋ธ์๋ ํฌํจ๋์์ผ๋ฉด ํ๋ ์์ฑ์, ๋ค๊ฑฐํฐ๋ธ์๋ ํฌํจ๋์ง ์์์ผ๋ฉด ํ๋ ์์ฑ์ ์ ์ด์ฃผ๋ฉด ๋๋ต๋๋ค.
ํฌ์งํฐ๋ธ : lora:cutescrap05v_cutescrap3:0.6, 1girl, white_hair, headphones, hoodie
๋ค๊ฑฐํฐ๋ธ : EasyNegative
์ธํ ๊ฐ
์ด๋ฒ ํ ์คํธ์์๋ ๋ค์ํ ๊ฐ์ค์น๋ฅผ ํ ์คํธํ์์ต๋๋ค. ๋ค์์ ๊ฐ ๊ฐ์ค์น์ ์ธํ ๊ฐ์ ๋๋ค.
๐ ํ ์คํธ ๊ฒฐ๊ณผ
๋ก๋ผ ๊ฐ์ค์น 0
์์ฑ ์๋ฃ! ์ฒซ ๋ฒ์จฐ ํ ์คํธ์์๋ ๋ชจ๋ธ์ ํ์ธ์ ์ํด ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0์ผ๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค. ์ด๋ฒ ํ ์คํธ์์๋ ํ๋กฌํํธ์ ๋ฃ์ ๋จ์ด๋ค์ ์กฐํฉ์ด ์ ์์ ์ผ๋ก ์ฐ์ถ๋ ๊ฒ์ ํ์ธํ ์ ์์์ด์.
โ ์ฆ, ๋ชจ๋ธ์ด ๋ด๊ฐ ์๊ตฌํ ํ๋กฌ์ ๋ชจ๋ ์ ์ฉ ์ํฌ ์ ์์์ ์ ์ ์์ต๋๋ค!
๋ก๋ผ ๊ฐ์ค์น 1
๋ ๋ฒ์งธ๋ ์์ฑ์๋ฃ! ...์ธ๋ฐ ํ๋กฌํํธ์ ๋ฃ์๋ ์ฌํญ๋ค์ด ๋ฐ์์ด ์ ๋ ๋ชจ์ต์ ๋ณด์ฌ์ฃผ๋ค์. ํค๋ํฐ์ด ์ฌ๋ผ์ ธ๋ฒ๋ ธ์ต๋๋ค.. ๋ค์ ๋๋ ค๋ ๋์ผํ ๊ฒฐ๊ณผ๊ฐ ๋์ค๋ ๊ฑธ๋ก ๋ด์ , ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 1๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ๋ฉด ํค๋ํฐ์ ์ฐ์ถํ ์ ์์์ ์ ์ ์์ต๋๋ค ๐
๋ํ ๊ทธ๋ฆผ์์ ๊ฐ์ค์น๋ฅผ ์ ์ฉํ์ง ์์์ ๋์ ๋ง์ ์ฐจ์ด๊ฐ ๋๋ ๊ฒ์ ๋ณผ ์ ์์ต๋๋ค.
์, ๊ทธ๋ผ ์ด์ ์ํ๋ ๋๋์ ์ํด ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ ์กฐ์ ํด์, ์ํ๋ ๊ทธ๋ฆผ์ ์ป์ด๋ด๋ณด์๊ตฌ์!
๋ก๋ผ ๊ฐ์ค์น 0.8
์ธ ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.8๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค. ๊ท์ฝ๊ธด ํ์ง๋ง... ์ง์ ํ ํฌ์ธํธ๊ฐ ๊ฝค๋ ๋ง์ ๋ฏ ํ๋ค์..! ํนํ๋ ์์ง๊น์ง๋ ํค๋ํฐ์ ์ ๋๋ก ๊ตฌํํ ์ ์๋๋ด์ ใ ใ ใ
๋ก๋ผ ๊ฐ์ค์น 0.7
๋ค ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.7๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค. ๋๋์ด ํค๋ํฐ ๊ตฌํ์ด ๊ฐ๋ฅํด์ก์ต๋๋ค!! ํค๋ํฐ์ ์๊น์๊ฐ ์์ ์ ๋ฃ๋ ์ฉ๋๋ณด๋ค๋ ์์ด๋์ด ๊ณต์ฐํ ๋ ์ฐจ๋ ์ด์ด๋ง์ดํฌ ๊ฐ์ ๋๋์ด ๋๋ค์!
๊ฐ์ ์ธํ ์ผ๋ก ๋ค์ ๋๋ ค๋ณธ ๊ฒฐ๊ณผ, ๊ฐ์๊ธฐ ์๊ตฌํ ์ ์๋ ํ ๋ผ ๊ท๊ฐ ์๊ฒผ์ต๋๋ค! ๊ท์ฝ๊ธด ํ์ง๋ง... ์ฌ์ฉ์๊ฐ ์ํ๋ ๊ฒ ์ธ์ ๋ฌด์ธ๊ฐ๋ฅผ ์ฃผ๋ ๊ฒ์ ์๋ฌด๋๋ ์ข ๊ณค๋ํ์ฃ ...๐ฅบ
๋ก๋ผ ๊ฐ์ค์น 0.65
๋ค์ฏ ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.65๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค. ์ด๋ฒ ํ ์คํธ์์๋ ๋ผ์ด๋ธ ๊ณต์ฐ์ ํด์ผํ ๊ฒ ๊ฐ์ ๋ง์ดํฌ ๋ฌ๋ฆฐ ํค๋์ ์ด ๋์๋ค์! ํค๋ํฐ ๋ง์ดํฌ๋ฅผ ๊ต์ฅํ ์ข์ํ๋์ง ๊ฐ์ ์ธํ ์ผ๋ก ๋ค์ ๋๋ ค๋ณด์๋ ํญ์ ํค๋ํฐ ๋ง์ดํฌ๋ง ๋์ค๋๋ผ๊ตฌ์... ์ผ๊ด์ฑ ์์ด์ ์คํ๋ ค ์ข์... ์ผ๊น์? ๐ค
๋ก๋ผ ๊ฐ์ค์น 0.6
์ฌ์ฏ ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.6๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค. ์ด๋ฒ ํ ์คํธ๋ ๋ฌด๋ํ๋ค์! ์ ๋นํ ๋ฏน์ค๋ ๋๋์ ์ฃผ๋ ๊ทธ๋ฆผ์ด์์ต๋๋ค. ๋ค๋ง ์์ ๊ทธ๋ฆผ์ฒ๋ผ ๊ฐ๋ ํค๋ํฐ 1+1 ์ด๋ฒคํธ๋ ํ๊ณค ํฉ๋๋ค ๐
๋ก๋ผ ๊ฐ์ค์น 0.5
์ผ๊ณฑ ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.5๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค. ์ ์ ๊ธฐ์ค์น 0์ ๋ชจ์ต๊ณผ ํก์ฌํด์ง๋ ๊ฑธ ๋ณผ ์ ์์ด์. ์ ๊ณ ์๋ ์ท์ด ์๋นํ ํน์ดํด์ ๋ง์์ ๋๋ ๊ทธ๋ฆผ์ ๋๋ค... ^_^
์ด์ ๋ณด์ฌ๋๋ฆด๋งํผ ๋ณด์ฌ๋๋ฆฐ ๊ฒ ๊ฐ์์! ๋๋จธ์ง 0.4~0.1 ๊ทธ๋ฆผ์ ์ฌ๋ด ์์ด ๊ทธ๋ฆผ๋ง ๋ณด์ฌ๋๋ฆฌ๊ฒ ์ต๋๋ค!
๋ก๋ผ ๊ฐ์ค์น 0.4
์ฌ๋ ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.4๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค.
๋ก๋ผ ๊ฐ์ค์น 0.3
์ํ ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.3์ผ๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค.
๋ก๋ผ ๊ฐ์ค์น 0.2
์ด ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.2๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค.
๋ก๋ผ ๊ฐ์ค์น 0.1
์ดํ ๋ฒ์งธ ํ ์คํธ์์๋ ๋ก๋ผ์ ๊ฐ์ค์น๋ฅผ 0.1๋ก ์ค์ ํ์ฌ ๊ทธ๋ฆผ์ ์์ฑํ์์ต๋๋ค.
๐ก ๊ฒฐ๋ก
๊ธธ๊ณ ๊ธธ์๋ ํ ์คํธ๊ฐ ๋ง์ฐธ๋ด... ๋์ด ๋ฌ์ต๋๋ค...!!
์ด์ ํ๋ก ์ ๊ธฐ๋ค๋ฆฌ๊ณ ์๋ ์นจ๋์๊ฒ๋ก ๋์๊ฐ ์ ์๊ฒ ๋์์ด์.
์ด๋ฒ ํ ์คํธ์์๋ ๋ก๋ผ์ ๋ค์ํ ๊ฐ์ค์น๋ฅผ ํ ์คํธํด๋ดค์ต๋๋ค.
๊ฐ ๊ฐ์ค์น๋ง๋ค ๊ทธ๋ฆผ์ ํํ์ ์์์ด ๋ฌ๋ผ์ก์ผ๋ฉฐ, ํ๋กฌํํธ์ ๋ฐ๋ผ ๊ทธ๋ฆผ์ด ์์ฑ๋๋ ๊ณผ์ ์์๋ ์ฐจ์ด๋ฅผ ๋ณผ ์ ์์์ฃ . ๋ฐ๋ผ์, ๋ก๋ผ๋ฅผ ์ฌ์ฉํ์ฌ ๊ทธ๋ฆผ์ ๊ทธ๋ฆฌ๋ ๊ฒฝ์ฐ ์ ์ ํ ๊ฐ์ค์น๋ฅผ ์ฐพ์๋ด๋ ๊ฒ์ด ์ค์ํด๋ณด์ ๋๋ค! ์ด๋ฅผ ์ํด์๋ ๋ค์ํ ๊ฐ์ค์น๋ฅผ ํ ์คํธํ๊ณ ๊ฒฐ๊ณผ๋ฅผ ๋น๊ตํด์ผ๋ง ํด์. ์๋ฌด๋๋ ์ ์ ํ ๊ฐ์ค์น๋ ์ฌ์ฉ์๊ฐ ๋ฌด์์ ๋ ์ค์ํ๋๋์ ๋ฐ๋ผ ๋ค๋ฅด๋๊น์!
๋ง์ง๋ง์ผ๋ก, ์ธ๊ณต์ง๋ฅ ๊ทธ๋ฆผ์ ํ์ฌ ์ ์๊ถ ๊ด๋ จํ์ฌ ๋ ผ๋์ด ๋๊ณ ์์ด์. ๋ฐ๋ผ์ ์ง์ ๊ณต์ ๋ ์๊ฐ์ ์ป๋ ์ฉ๋ ๋ก ์ฌ์ฉํ๋ ๊ฒ์ด ์ข์ ๊ฒ ๊ฐ์ต๋๋ค \(๏ฟฃ๏ธถ๏ฟฃ*\))
<< ์ด๋ถ๋ถ ์ด๋ป๊ฒ ํ ๊น์?
๊ทธ๋ผ, ๋ค์์๋ ๋ ์ฌ๋ฐ๋ ๊ธ๋ก ๋์์ค๊ฒ ์ต๋๋ค ! ๐
Comments