๋ณธ๋ฌธ ๋ฐ”๋กœ๊ฐ€๊ธฐ
๐Ÿ“‚ UNREAL ENGINE

[์ธ๊ณต์ง€๋Šฅ4] ์–ธ๋ฆฌ์–ผ์—”์ง„ 2024

by Sjungwon 2024. 5. 3.

์‹œ๋“œ๊ฐ€ ์žˆ์–ด์•ผ์ง€ (๊ธฐ์ค€์ )์„ ๊ฐ€์ง€๊ณ  ์‹œ์ž‘ํ•  ์ˆ˜ ์žˆ๋‹ค. 

 

๋‹ค๋ฅธ ์‚ฌ๋žŒ์ด๋‚˜ ๋ณธ์ธ์ด ์‹œ๋“œ๋„˜๋ฒ„๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ๋‹ค๋ฉด ๊ทธ๊ฒƒ์„ ์ค‘์‹ฌ์œผ๋กœ ๋น„์Šทํ•œ ๊ฒƒ์„ ๋งŒ๋“ค์–ด ๋‚ผ ์ˆ˜ ์žˆ๋‹ค. 

 

 

์Šคํ…Œ์ด๋ธ”๋””ํ“จ์ € - ์ œ์ผ ์ค‘์š”ํ•œ ๊ฒƒ์€ ์•ž์—๋‹ค ์จ์ค€๋‹ค. ์˜ˆ) ํ•œ๊ตญ์ธ์˜ ๋ฐฅ์ƒ์„ ๋‚˜ํƒ€๋‚ด๊ณ  ์‹ถ๋‹ค๋ฉด 1girl / ๋ฐฅ์ƒ, 10๋Œ€, (ํ•œ๊ตญ์—ฌ์„ฑ, (์ •๋ฉด: 1.5), ๊ธด๋จธ๋ฆฌ, ๋ฏธ์†Œ, ๋จน๋ฐฉ, (์นด์šฐ๋ณด์ด์ƒท:2)), (๊น€์น˜ : -5) ์™€ ๊ฐ™์ด ํ”„๋กฌํ”„ํŠธ ์ž‘์„ฑ

 

์Šคํ…Œ์ด๋ธ”๋””ํ“จ์ €๋Š” ํ”„๋กฌํ”„ํŠธ ์ž‘์„ฑ๋ฒ• -> ์ˆœ์„œ๊ฐ€ ์ค‘์š”ํ•˜๋‹ค. 

 

Model (CKPT. Safetensors)

LoRA ( ํ•˜์ดํ…Œํฌํ•œ ํ’๊ฒฝ์„ ๋งŒ๋“ค๊ณ  ์‹ถ์€๋ฐ ์ปจ๋ฌผ์ด ์œ ๋ฆฌ๊ฑด๋ฌผ์ด๊ณ  

์‚ด์•„์žˆ๋Š” ์ž์—ฐ์–ด๋ฅผ ๊ธฐ๊ณ„์–ด๋กœ ๋ฐ”๊พผ ๊ฒƒ์„ ์ธ๋ฒ ๋”ฉ์ด๋ผ๊ณ  ํ•œ๋‹ค. 

 

<<์‹ค์ œ ์ž‘์—…์—๋Š” LoRa ์“ฐ๊ธด ํ•œ๋ฐ ๋ฆฌ์–ผ๋ชจ๋ธ๋กœ ๋™์–‘์Šคํƒ€์ผ ๋ชจ๋ธ์„ ๋งŒ๋“ค๊ณ  ์‹ถ๋‹ค. ๋“ฑ์„ ํ• ๋•Œ ์‚ฌ์šฉํ•˜๊ธฐ ์ข‹์Œ>>

 

 

.......

๋‚ด ์–ผ๊ตด๋กœ๋„ ๋กœ๋ผ๋ฅผ ๋งŒ๋“ค ์ˆ˜ ์žˆ์Œ.

๋กœ๋ผ์˜ ๊ฒฝ์šฐ ์–ผ๊ตด๋งŒ ํ‰๋‚ด๋‚ผ๋ฟ ์˜ท๊ฐ€์ง€๋‚˜ ์ด์™ธ๋Š” ์ž˜ ๋ชปํ•œ๋‹ค. 

 

-----------์˜ค๋Š˜ ์‹ค์Šต์€ T2i / i2i ๋ฅผ ํ•  ์˜ˆ์ •์ด๋‹ค. 

 

์—ฌ๋Ÿฌ๋ถ„๋“ค์ด ๋‚˜์˜จ๊ฒƒ๋“ค์ด ๋ถ„์œ„๊ธฐ๊ฐ€ ์ข‹์€ ์ด๋ฏธ์ง€๋“ค์ด ์žˆ๋‹ค๋ฉด ๊ทธ๊ฒƒ๋“ค์„ ์–ด๋””์ธ๊ฐ€ ์ €์žฅํ•ด๋†“์•„์•ผํ•ฉ๋‹ˆ๋‹ค.

 

์˜คํ”ˆํฌ์ฆˆ 0.69๊นŒ์ง€๋งŒ ํฌ์ฆˆ๋ฅผ ๊ธฐ์กด์œผ๋กœ ๋‘”๋‹ค.

 ์™„์ „ 2D์™€ ์‹ค์‚ฌ๊ฐ€ ํ‘œ์ • ์ž˜ ๋‚˜์˜ด

 

----------------

<<์ปจ์…‰์•„ํŠธ ๋งŒ๋“ค๊ธฐ>>

1. ๋ฐฐ๊ฒฝ๊ณผ ์บ๋ฆญํ„ฐ ๋™์‹œ์— ์ƒ์„ฑ

2. ์ƒ์„ฑ๋œ ์บ๋ฆญํ„ฐ์— ๋ฐฐ๊ฒฝ์„ ๋ถ™์ด๋Š” ๊ฒฝ์šฐ

3. ์ƒ์„ฑ๋œ ๋ฐฐ๊ฒฝ์— ์บ๋ฆญํ„ฐ๋ฅผ ใ…“ใ…‡ใ„ต๊ธฐ

4. ๋”ฐ๋กœ ์ƒ์„ฑํ•˜๋Š” ๊ฒฝ์šฐ

 

 

์บ๋ฆญํ„ฐ ํฌ์ฆˆ๋Š” ์–ด๋–ค ๋ฐฐ์šฐ ๋ชจ๋ธ์˜ ํฌ์ฆˆ๋ฅผ ๋”ฐ์„œ ์ƒ์„ฑ์„ ํ•œ๋‹ค. 

์‚ฌ๋žŒ๋ถ€ํ„ฐ ์ƒ์„ฑํ•˜๊ณ  ๋ฐฐ๊ฒฝ์„ ๋งŒ๋“œ๋Š”๊ฒŒ ๋น ๋ฅธ๋ฐ

๋”ฐ๋กœ๋”ฐ๋กœ ์ƒ์„ฑํ•ด์„œ ๋ถ™์ด๋Š”๊ฒŒ ์˜์ƒ ํ•ฉ์„ฑํ•˜๊ณ  ๋น„์Šทํ•˜๋‹ค. ๋‘˜์„ ๋™์‹œ์— ์ƒ์„ฑํ•˜๋Š” ๊ฒƒ์ด ์ข‹๋‹ค. 

 

 

<<T21_ControlNet_Openpose๋กœ ํ„ด ์–ด๋ผ์šด๋“œ ์‹œํŠธ ๋งŒ๋“ค๊ธฐ>>

1 girl, turnaround sheet, same(out fit, face, lcoth ์ด๋ ‡๊ฒŒ ์จ์„œ ์ด ํฌ์ฆˆ๋ฅผ ๊ธฐ์ค€์œผ๋กœ ๋งŒ๋“ค์–ด๋ผ ํ•  ์ˆ˜ ์žˆ์Œ

 

 

์˜คํ”ˆํฌ์ฆˆ ํฌ๊ธฐ๊ฐ€ ์ž‘์•„์ง€๋ฉด (์ž๋™์œผ๋กœ ๋’ค์— ์žˆ๋‹ค๊ณ  ์ƒ๊ฐํ•œ๋‹ค.)

 

<๊ฑด๋ฌผ ๋งŒ๋“ค๊ธฐ>

i2i_Inpaint upload ์‚ฌ์šฉ๋ฒ• _ ๊ฑด์ถ•ํˆฌ์‹œ๋„ ๋งŒ๋“ค๊ธฐ

Innpaint ์ „์šฉ๋ชจ๋ธ์„ ์‚ฌ์šฉํ•˜๋Š”๊ฒŒ ๊ธฐ๋ณธ, ํ•˜์ง€๋งŒ ์ ˆ๋Œ€์ ์ธ๊ฑด ์•„๋‹ˆ๋‹ค. 

 

<์˜ท๋งŒ ๋งˆ์Šคํฌ ๋”ฐ๊ธฐ>

instant LoRa ๋งŒ๋“ค๊ธฐ + Openpose

 

 

<๋ถ€๋ถ„ ์ปฌ๋Ÿฌ ๋ฐ”๊พธ๊ธฐ>

์ปฌ๋Ÿฌ ์ฝ”๋“œ ๊ฐ’์˜ ๋ธ”๋ผ์šฐ์Šค ์ปฌ๋Ÿฌ ์ฝ”๋“œ ๊ฐ’์˜ ์น˜๋งˆ๋ฅผ ๋ณ€๊ฒฝํ•ด์ค˜/.

 

<์ˆœ์—ด ํ”„๋กฌํ”„ํŠธ>

 

 

<I2I_Inpaint sketch๋กœ ๋งŒ๋“ค์–ด๊ฐ€๋Š” ์•„ํŠธ์›>

Sketch์™€ Inpaint๊ฐ€ ํ•ฉ์ฒด๋œ ๊ฐ•๋ ฅํ•œ ๊ธฐ๋Šฅ

 

<T2I.I2I_ContrilNet/ Lineart ๊ธฐ๋ณธ ์‚ฌ์šฉ๋ฒ•>

์„๊ณ  -> ์‹ค์‚ฌํ™”

 

<๋ผ์ธ ์•„ํŠธ ์‚ฌ์šฉ๋ฒ•>

๋ผ์ธ ์•„ํŠธ๋Š” ๋ฉด์ ์˜ ๊ตฌ๋ถ„์ด๋ผ๊ณ  ํ•œ๋‹ค. 

๋ผ์ธ์•„ํŠธ๋Š” ๋งŒํ™”๋‚˜ ์›นํˆฐ์—์„œ ์“ด๋‹ค. 

 

์‹ค์‚ฌ ๋ชจ๋ธ์„ ์“ธ๊ฑฐ๋ƒ ์• ๋‹ˆ ๋ชจ๋ธ์„ ์“ธ๊ฑฐ๋ƒ ์—์„œ ๋‹ฌ๋ผ์ง„๋‹ค. 

 

๋ผ์ธ ์ด๋ฏธ์ง€๋ฅผ ์‹ค์ฒดํ™” ํ•ด๋ณด์ž. 

 

์–ด๋Š ๋ถ€๋ถ„์„ ๊ฐ•ํ™”์‹œ์ผœ์•ผํ•˜๋Š”์ง€๋ฅผ ๊ทธ๋ฆผ์„ ๋ณด๋ฉด์„œ ์ƒ๊ฐํ•ด๋ณด๋Š”....

 

 

T2I_ControlNet / Depth + IP - Adapter ํ™œ์šฉ

<

 

<T2i_?Wildcart Manager>

00๋‚˜๋ผ์œผ ์ „ํ†ต๋ณต์ž์‘ใ„น ์ž…๊ณ  ์„œ์žˆ๋Š”

 

๊ฐ™์€ ํฌ์ฆˆ ๊ฐ™์€ ์บ๋ฆญํ„ฐ ๊ฐ™์€ ๊ณต๊ฐ„์—์„œ ๋ณด์—ฌ์ค˜. 

 

 

<T2I ControlNet_Scrible/Sketch>

๊ทธ๋ฆผ ๋ชป๊ทธ๋ฆฌ๋Š” ์‚ฌ๋žŒ์ด ๊ฑ ๋Œ€์ถฉ๊ทธ๋ ค์„œ ์ด๋ฏธ์ง€ํ™” ์ž˜ ๋˜๊ฒŒ ํ•ด์ฃผ๋Š” ์• 

 

์ผ๋‹จ์„ ๋ณด์—ฌ์ค€๋‹ค๋Š” ๊ฒƒ์ด ์ค‘์š”ํ•˜๋‹ค. 

 

----------------------------------------------------------

๋ฏธ๋“œ์ €๋‹ˆ

 

 

 

๋‹จ์–ด๋“ค ๋‹จ์–ด๋“ค์„ ์ ์„ ์ˆ˜๋ก ๋” ์ •ํ™•ํ•˜๊ฒŒ ์ด๋ฏธ์ง€๊ฐ€ ๋‚˜์˜จ๋‹ค.

 

์‚ฌ์šฉ์ž๋“ค์ด ๋‹จ์–ด๋“ค์„ ๋ณต์žกํ•˜๊ฒŒ ํ•˜์ง€ ์•Š๋Š”๋‹ค๋ฉด ๋น„์Šท๋น„์Šทํ•˜๊ฒŒ ์ด๋ฏธ์ง€๊ฐ€ ๋‚˜์™€๋ฒ„๋ฆฐ๋‹ค. ์ด๋ฏธ์ง€์˜ ๊นŠ์ด๊ฐ์ด ์ƒ๊ฒผ์Œ... 4์žฅ์„ ์ƒ์„ฑ์„ ํ–ˆ์„๋•Œ 4์žฅ์ด ์„œ๋กœ ๋‹ค๋ฅธ ์ด๋ฏธ์ง€ (ํ•˜๋‚˜๋Š” ํ˜„์‹ค, ํ•˜๋‚˜๋Š” ์ด๋ฏธ์ง€ ์Šค๋Ÿฝ๊ฒŒ ) ๊ทธ๋Ÿฐ ๊ฒƒ ์ฒ˜๋Ÿผ ์–˜๊ฐ€ ํ”„๋กฌํ”„ํŠธ์—์„œ ํ•˜๋‚˜์—์„œ๋Š” ํฌ๊ฒŒํ•˜๊ณ  ํ•˜๋‚˜์—์„œ๋Š” ์ ๊ฒŒํ•˜๋Š” ๊ฒƒ ์ฒ˜๋Ÿผ ํ”„๋กฌํ”„ํŠธ๋ฅผ ์กฐ๊ธˆ ์”ฉ ๊ตฌ๋ถ„ํ•ด๊ฐ€๋ฉด์„œ ์“ฐ๋Š” ๊ฒƒ์ด ์ข‹๋‹ค. 

 

์—…์Šค์ผ€์ผ์€ 

 

๋ฏธ๋“œ์ €๋‹ˆ (์ด์ œ ์›”๊ธ‰ ๋“ค์–ด์™”์œผ๋‹ˆ๊นŒ ํ•œ๋ฒˆ ๊ตฌ๋งคํ•ด์„œ ํ•ด๋ด์•ผ๊ฒ ๋‹ค.)

T2I

I2I

 ๋ญ˜ ๋งŒ๋“ค์—ˆ๋Š”๋ฐ ์ด๊ฑธ ์“ฐ์ž! ํ•˜๋Š”๊ฒŒ ์—†๋‹ค. ๊ทผ๋ฐ ๊ทธ๊ฑธ ์–ด๋–ป๊ฒŒ ์ง„ํ–‰ ํ•ด์•ผ ํ•˜๋Š”์ง€ ๋ชจ๋ฅธ๋‹ค๋ฉด ์ผ๋ฐ˜์ธ๋“ค์ด๋ž‘ ์ฐจ์ด๊ฐ€ ์—†๋‹ค.

 

-> ๊ธฐ๋ฆฐ์ด ์žˆ๋Š” ๊ณณ์— ๊ณฐ์„ ๋Œ€์ฒดํ•ด์„œ ๋„ฃ์–ด์ค˜ ํ•˜๋ฉด ์ด๋ ‡๊ฒŒ ์ˆ˜์ •๋„ ๊ฐ€๋Šฅํ•˜๋‹ค. 

 

์˜ฌ๊ฐ€๋ฏธ ํ˜•ํƒœ๋กœ ์ง€์ •ํ•œ ๋ถ€๋ถ„์„ ์ˆ˜์ •ํ•˜๋Š” ๊ธฐ๋Šฅ๋„ ์žˆ๋Š”๋ฐ  

 

์ƒ์„ฑ AI ๋“ค์€ ์ž๊ธฐ๋„ค๋“ค์ด ๋ณธ๋Šฅ์ ์œผ๋กœ ํ•™์Šต๋˜์–ด ์žˆ๋Š” ๊ฒƒ๋“ค์ด ์žˆ๋‹ค. 

์˜์ƒ์ž‘์—… ํ• ๋•Œ๋„ ๋ฏธ๋“œ์ €๋‹ˆ์—์„œ ์†Œ์Šค ๋งŒ๋“ค๊ณ  ํ•ด์•ผํ•œ๋‹ค. 

์˜์ƒ์„ ๋งŒ๋“ ๋‹ค๋“ ์ง€ ํ•  ๋•Œ ์†Œ์Šค ์ถœ์ฒ˜๋กœ ์“ฐ๊ธฐ ๋„ˆ๋ฌด ๋„ˆ๋ฌด ์ข‹๋‹ค. 

https://ideogram.ai/t/explore

ํ…์ŠคํŠธ ์ƒ์„ฑ์œจ์ด ๋„ˆ๋ฌด ์ข‹๋‹ค. 

 

--------------------------------------------------------------------------------------------------------------------