아직 이해가 안되는데 효과는 봐서 올림

나는 바질만 쓰면 뿌옇게 인스타 저채도 필터 들어감


뭔말이냐면



이게 옛날에 가지고 놀던 실사




이게 바질




이게 OBD 인데 


갈수록 뿌옇게 되고 심지어  i2i 반복해서 돌리면 아예 그냥 안개마냥 덮어버림..

다른 챈럼들은 안그러는데 나만 그러는거 맞나? 
찾아봐도 나 빼고 아무도 없는거
sample 이랑 scale 올리면 좀 덜하긴한데 오래걸리는것도 짜증남



그래서 저걸 어떻게 잡을까했는데

 VAE라고 후보정 하는 기능이 있더라

또 나만 몰랐음


https://huggingface.co/stabilityai/sd-vae-ft-mse-original


대충 허깅페이스에서 vae 검색해서 나오는거 받아서 넣어봄

걍 여기저기 유포된거 찾아봤는데 어떤건 pt고  

어떤건 ckpt인데 용량은 다양함. 

저건 300메가로 좀 큰편


https://huggingface.co/stabilityai/sd-vae-ft-mse-original/resolve/main/vae-ft-mse-840000-ema-pruned.ckpt

저거중에 mse-840000 짜리 받아가지고



stable-diffusion-webui/models/VAE 폴더에다 넣음





Settings -  Stable Diffusion - SD VAE 맨 오른쪽에 새로고침 버튼 누르면 뜸
아니면 그냥 전체 재부팅하면 목록에 나옴 (reload Ui 는 안됨)


Apply settings 누르고 

비교샷




둘다 같은 해상도인데 확실히 고쳐짐

찌글찌글한 노이즈도 교정됨





이건 디시 아이마스갤 에서 뿌린 nai-animevae.pt  해본거.  

너무 쨍하다 싶으면 이거도 반실사에 써볼만함

근데 색감은 잡아줬는데 노이즈 보정은 모르겠음 


아래부터 걍 mse-840000 이거 쓰겠음




포즈랑 외모는 전혀 안건드림

눈알이랑 뒷 배경보면  묘사가 훨씬 좋아짐





가로 640 픽셀에 풀바디 얼굴이 저렇게 잘나온다
inpaint 보낼 필요가 없어짐





챈럼들 많이 쓰는 오렌지+바질 0.5  에 먹여봄

프롬고자라서 허접하지만 걍 효과만 보자



원리를 읽어보니까 보통 일반적인 모델은 512 베이스로 학습을 함

전신샷 같이 작은 영역에 얼굴 출력하면 박살나는거고


vae-ft-mse-840000-ema-pruned 는 256 작은 그림들로 84만번 학습을 시켰다함

일반적인 모델보다 2배 더 작은 영역에 묘사를 할 수 있으므로

비록 똑같은 해상도지만 업스케일 2배한 묘사력을  VAE가 먹여줌



이게 VAE  잘 쓰고있는지도 모르겠지만

결론적으로 말하면 후보정 잘해줌

걍 잡솨보자



이건 나만 몰랐던것같은데 유용해서 추가


 


settings -  user interface - quick menu list 에다가

sd_model_checkpoint, sd_vae, CLIP_stop_at_last_layers  이거 입력해두면




상단에 단축바 생성할 수 있다는 것

아예 설정메뉴 들락거리지 않아도 됨