Stable Diffusion으로 아바타 그리기

이 글의 대부분은 이 영상을 참고했습니다

소개

사용한 리소스:

1. Stable Diffusion 통합 패키지: https://www.bilibili.com/read/cv22159609/
2. Stable Diffusion 모델: https://tusi.cn/models/605039709506335625
3. LoRA 모델: https://tusi.cn/models/620507699483853069

구체적인 작업

1. 먼저 적합한 사진 한 장을 고릅니다. 피사체와 내용이 명확하고 디테일이 필요 없는 사진이 좋습니다. 제가 고른 사진은 이겁니다:

   

2. 영상을 참고해 img2img에 다음 프롬프트를 입력합니다:

   PROMPT복사

   (white background:1.1),(simple background:1.1),(chibi),thick outline,happy,mugshot
   

3. 사진을 WD 1.4 태거에 불러오면 다음 프롬프트가 생성됩니다:

   PROMPT복사

   outdoors, ocean, solo, day, black hair, 1boy, from behind, male focus, horizon, water, shorts, sky, photo background, rock, scenery, holding, short hair, standing, facing away, blue sky, pants, white shorts, long sleeves, shirt, shoes, bag, backpack, wide shot
   

4. 이 프롬프트들을 img2img에 붙여 넣고, 일부 프롬프트는 삭제합니다.

5. 생성 창의 img2img에 이미지를 불러온 뒤 다음 파라미터를 변경합니다:

   파라미터	값
   샘플링 방법 (Sampler)	DPM++ 3M SDE
   샘플링 스텝 (Steps)	30
   디노이징 강도	0.7
   배치 수	4

6. 생성 버튼을 누르면 4장의 이미지가 생성됩니다. 결과에 따라 디노이징 강도를 조정할 수 있으며, 보통 0.6-0.7 사이의 값으로 설정합니다. 마음에 드는 이미지가 나올 때까지 반복하세요.

7. 마음에 드는 이미지와 생성 파라미터를 후처리(Extras) 탭으로 보내고, 업스케일러 1과 2를 모두 R-ESRGAN 4x+ Anime6B로 선택한 다음 확대 배율을 4로 설정하고 생성 버튼을 클릭합니다.

8. 최종적으로 이런 이미지를 얻었습니다:

   

비교해 보세요: