디코에서 정보찾다가 발견함
저 레포는 정규화없이 학습하는 파인튜닝만 있어서 로라랑 드림부스는 몰루
kohya도 최근에 드롭아웃값 설정하는거 생겨서 가능함
512x512학습 1e-6
640x640학습 3e-7
768x768학습 1e-7
캡션 드롭아웃 레이트값은 모두 0.05 고정
그리고 한가지 해상도로 학습하지말고, 512, 640, 768 셋다 각각 에포크 나눠가면서 학습하는걸 추천했음.
높은 해상도로만 학습했을시, 낮은 해상도에서 그림을 뽑으면 잘 안나오게될 가능성이 있어서
512해상도와 그 이상의 해상도를 균형있게 학습하는게 좋다고함