Stable Diffusion webUI - Outpaint 이미지 크게 만들기

outpainting 에는 여러 방법이 있었다.

1. 처음시도한 방법은 https://github.com/lkwq007/stablediffusion-infinity.git

GitHub - lkwq007/stablediffusion-infinity: Outpainting with Stable Diffusion on an infinite canvas

설치는 간단하다. 깃헙페이지로 가서 윈도우 설치부분을 그대로 따라하면 된다. 다만 설치하는데 시간이 많이 걸린다.

나는 conda로 outpaint라는 가상환경을 만들고 여기에 설치했다.

git clone --recurse-submodules https://github.com/lkwq007/stablediffusion-infinity
cd stablediffusion-infinity
conda create -n outpaint python=3.10
conda activate outpaint
conda install pytorch torchvision torchaudio pytorch-cuda=11.6 -c pytorch -c nvidia
conda install scipy scikit-image
conda install -c conda-forge diffusers transformers ftfy accelerate
pip install opencv-python
pip install -U gradio
pip install pytorch-lightning==1.7.7 einops==0.4.1 omegaconf==2.2.3
pip install timm

infinity를 사용해 아래의 원본 이미지를 그 아래의 이미처럼 확장시킬수 있다. 엄청나다. 

사용법은 혼자 그냥 만지며 익혔다. 나중에 유튜브를 찾아보니 나와 다를바 없었다. 

만들때 꼭 처음 저 이미지를 생성할때의 프롬프트도 같이 넣어야 어색하게 안나온다.
그리고 기존 이미지 정보도 함께 많이 포함해줘야(선택해줘야) 자연스러워진다.

하지만 시간이 아주 오래 걸린다. 마음에 들지 않는 그림이 나올때도 많다. 그래서 다른 방법을 찾아봤다.

 

2. 기존 이미지의 canvas를 늘리고 그 부분을 색칠한 다음 이 부분만 img2img에서 다시 생성하는 방법이다.

이제 제일 좋을 거라 생각했는데 더 좋은 방법을 찾아냈다.

 

3. 추가 설치할 것도 없다. 바로 stable diffusion > img2img 에서 사용할 수 있다.

환상적이다. 속도도 빠르다.

img2img를 가면 맨 아래에 Script를 선택하는 부분이 있다.

여기서 Outpaing mk2로 선택한다. 아래와 같은 선택창이 뜨는데 바꾸 않는게 가장 좋더라.
단 방향은 한 방향씩 늘려가면서 테스트하는게 좋다. 아래처럼 left 먼저하고 다음 right 돌려보는 방식이다.

다 된거다. 그냥 생성하면 된다. 왼쪽으로 더 늘리고 싶다면 결과창에서 다시한번 send to img2img 버튼을 눌러 보낸후 거기서 다시 생성하면 된다.
가장 좋은 점은 기존과 완전히 똑같은 프롬프트와 체크포인트, 로라 및 각종 설정을 사용하여 기존 이미의 느낌을 살리기 쉽다는 거다.
그리고 infinity보다 속도가 월등히 빠르다. 계속 만들며 실험하면 된다.