요즘 모델 믹스는 단순하게 

Sum, difference 방식이 아니라 

U-net 12계층을 토대로 섞을 수 있음


쉽게 말하자면

스테이블 디퓨전은 학습한 그림을 쪼개서 모래알로 만들고

모래알에서 다시 그림을 재구성하는데  총 12단계를 거침


화가로 치면

구도 스캐치하고, 묘사하고, 명암넣고

최종 디테일 넣는 과정이 12단계라는 것


그럼 서로 다른 두 모델을 섞을 때

그 12계층 비율을 마음대로 조정해보자해서 나온게
Merge block weighted 라는 확장기능임


A모델과  B모델 출력 단계가

서로 영향을 주고받는 상황을 그려보면

U 자 모양으로  이해할 수 있음


근데 나도 잘모름.. 대충 이렇구나 하면 됨



모델의 장점만 쏙쏙 빼먹을 수 있게

12단계 각각의 비율을 건드려보자는 것





 확장기능 설치하기


https://github.com/bbc-mc/sdweb-merge-block-weighted-gui


위 주소 복사해서




extensions - install from URL 로 설치 후

setting - reload Ui 해주면 준비완료






복잡한거 없다. 버튼 여섯개만 알면 됨.

들어가서, 섞고 싶은 모델 넣고

프리셋 고르고, 이름 지어주고

merge 누르면 끝남


계층이 낮을수록 구도나 인체에 가깝고
높을수록 세밀한 디테일영역 피부질감 이라는데
걍 결과물 보고 감잡는게 빠름




머지가 끝나면 새로고침 한번 해주면 바로 써볼 수 있음



아래는  바질믹스드림라이크 포토리얼 믹스 섞기 테스트 한 것

얼짱 임베딩+얼굴복구 켜놔서 외모는 그냥 무시바람

교복, 운동화, 도시야경을 얼마나 철저하고 잘 반영했는가만 보면 됨

원래 오렌지 같은 2D 모델 + 실사모델  해봐야 티가 확나는데 

이미 개노가다 진행해버려서 걍 함. 바질도 거의 반실사니까

반실사에 사진 디테일을 올리겠다는 목적으로 보자



클릭하면 크게 보임(PC로 보는걸 추천)


All a, All b 는 걍 안하느니만 못하고 

flat은  sum이나 다름없는 듯함


분명히 교복을 언급했는데 네온사인 영향받아서
네온추리닝, 네온운동화 나온건 말귀를 잘 못알아먹는 모델임

결과적으로 smooth step 이나 Wrap 계열이 잘나오는 것 같고
세밀한 믹스값 조정은 알아서 해보길 바람



심층 분석후기 및 예시
https://arca.live/b/aiartreal/68175415