[AI 이미지] [SD 05] Stable Diffusion 설치부터 응용 시리즈 - 실사 이미지

LINK : https://youtube.com/playlist?list=PLdWJCXJ7ciCD-G2ISTeW6VKGOz9lJSQLQ

Korean Doll: https://huggingface.co/datasets/KrakExilios/koreandoll/tree/main

Add Detail: https://civitai.com/models/58390/detail-tweaker-lora-lora

■ 프롬프트 가중치

AI에게 프롬프트의 중요도를 알려주는 설정값

ex) (realistic:1.2) 

숫자 0.1 ~ 1.8 

디폴트 값 = 1

1보다 높은 수 = AI가 더 중요하게 생각

1보다 낮은 수 = 해당 프롬프트를 조금 적게 적용

■ Lora

Low-Rank Adaptation of Large Language Model

특정 그림체/인물/부위만 학습시킨 모델

체크포인트, VAE는 전체적 그림체와 보정 처리를 담당

cf. Lora는 특정 부분에 영향을 주는 보조 모델

체크포인트 모델은 대부분 서양 얼굴 이미지로 훈련되기 때문에 아시아 미인 얼굴을 얻기 힘듬 

그래서 한국형 미인 Lora를 사용 

1) Koreandoll (Lora)

https://huggingface.co/datasets/KrakExilios/koreandoll/tree/main

koreanDollLikeness_v15 다운로드

stable-diffusion-webui-1.7.0\Models\Lora 폴더에 복사

WebUi의 Lora탭에서 새로 고침

프롬프트 영역을 클릭한 상태에서 로라를 클릭

<로라:로라 이름:가중치>

한국 Lora는 성형 미인 이미지가 강함

따라서 가중치를 조금 낮추는 것이 좋음 (0.3 ~ 0.5)

프롬프트에 <로라:로라 이름:0> 입력

Script 탭 

→ Script (X/Y/Z plot)

→ X type (Prompt S/R)

<로라:로라 이름:서로 다른 가중치> 입력 

→ 가중치에 따른 차이를 관찰

Script X/Y/Z를 사용하려면 입력한 프롬프트의 첫번째 키워드가 프롬프트에 입력되어 있어야 함

ex) <lora:koreanDollLikeness_v15:0>부분이 프롬프트에 입력되어 있어야 그 다음 항목부터 비교를 위해서 생성됨

2) Detail Tweaker LoRA

https://civitai.com/models/58390/detail-tweaker-lora-lora

가중치 0.3 ~ 0.5

■ ADetailer : After Detailer

이미지가 생성된 후 디테일 작업을 한 번 더 해주는 확장 프로그램

full_body 프롬프트로 얼굴이 멀어지면 디테일이 떨어지는 현상 해결

WebUi 화면에서 extensions 클릭

→ Available → Load from → detailer 입력 → After detailer manipulations (Install)

→ Installed에서 추가된 것을 확인

→ Check for Updates 확인

→ Apply and restart UI (webui 재시작)

ADetailer 탭 

Enable ADetailer 체크

ADetailer 모델 

face (얼굴), hand (손), mediapipe_face_mesh_eyes_only (눈) 

얼굴과 손을 동시 보정할 경우

1st (얼굴 모델) 2nd (손 모델)