2로 설정되있는 사람 원래대로 돌려놓고 학습시켜라

개인적으로 드림부스로 학습한 그림 뽑을때도

clip skip 1 로 기본 설정으로 돌려놓는게 제일 프롬 잘먹히는거 같음

CLIP SKIP 1로 학습해놓고 설정 2로 해놓고 뽑는건 학습한걸 아깝게 낭비하는거임

실제로 비교해보니 2로 하면 학습 전 그림체랑 섞이더라


--------------------------------------------------------------

Stop at last layer of CLIP/ CLIP skip이란?

CLIP은 니가 입력한 프롬프트를 이미지를 생성하는 모델이 알아들을 수 있도록 숫자로 표현하는 복잡한 신경망이다.

CLIP은 여러개의 레이어로 구성되어 있고 첫번째 레이어를 통과하면 그 값이 두 번째 레이어로 가고 통과하면, 다시 세 번재 레이어로 가는것을 신경망 끝까지 반복하게 되어있음. 이게 기본 설정값인 1로 표현됨.

여기서 값을 2로 변경하면 레이어 하나를 덜 통과하는 거임

어떤 모델은 clip skip을 2로 설정해서 학습한 경우가 있어서 2로 했을때가 더 나은 모델도 있다고 함.