문제시 바로 삭제합니다.


버튜버 ASMR를 주로듣는데 가끔 새로운 귀여운 버튜버들있으면 만드는편임 혼자가지고놈

최대한 의상살리려고 하지만 못살리는경우도있음...



ASMR 듣다가 최근엔 어떤 버튜버를 발견해서 만들어봄...

png 판때기는 구했지만 리뉴얼이 몇번되서 다른 판때기는... 저 귀여운 느낌이 안나기 때문에...

제대로 공개된게없었음... 그러다가 찾았는데


근데 배경이있네... 하...

그래서 그냥 간단하게 포토샵 켜서  오브젝트 셀렉션툴로 마스크 작업

halo(머리링)랑 날개는 어쩌피 학습시켜봐야 저렇게 안나오니깐 과감하게 삭제

너무완벽하게 할려하지마 어쩌피 ai현존기술로는 못하니깐


어케어케 찾아보니깐 트윈테일 모델의 이미지는 구할수있었음...

해상도가 너무낮아서 할수있는 방법으로 (저는 토파즈 AI) 업스케일링 2배 조지고 (그이상되면 너무 이미지 훼손되서)

지금이미지는 이미지 해상도 업해서 올린상태인거임 그래도 700픽셀 근처밖에안됨 


학습에 도움이안되는부분이있어서 변한부분이있는데

스타킹 고양이있어서 지우고, 리본 위에 인형있어서 지움 어쩌피 제대로 학습안되고 이상하게 괴물인형 그려내는 노이즈가 될뿐이라

최대한 깔끔하게 물론 저런 내용들이 확실하게 수십장있으면 나오긴하는데 최소한의 이미지에서

더 높은 퀄리티 필요한부분만 취한다! 가 목표이기 때문에


누끼에서 중요한부분은 지울꺼면 최대한 겉선에 배경색이 묻어나오지않는게 중요!!! 이것을 학습해버리는경우가 있어서

이번에는 배경색이 크게 묻어나오지않아서 편하게 했는데 만약 엄청 묻어나오는색이면 한번 누끼 오브젝트 셀렉션으로 딴다음


https://youtube.com/shorts/1MivhgZ-zcA?si=2agb4LC6lZaAsA4k

이작업하면 됨





지울 때 도트들이 점형식으로 조금씩이라도 남아있으면 다 노이즈로 학습됨 뽑을 때마다 그림 근처에 이상한 점 같은게 생기는 최악의 경우도 있음

정못살리는 구간은 다 지워버리는게 나음


*팁으로 머리같은거에 이상 별가루같은거있으면 뭉개는 툴로 다 비슷한색으로 뭉게는게 더 학습에 좋다... 

그 상태로 학습하면 그 이상한 가루를 배경에 다뿌려버림 머리나 옷에 다뿌려버리거나



그리고 원래는 추가적으로 소스를 만들기위해서 머리쪽만 확대해서 얼굴을 제대로 학습하게 만드는데

저걸로하기엔 해상도가 너무낮은데 진짜 없으면 하는편이고

이번에는 머리부분만 고해상도 구할수있어서 그렇게했습니다 구글검색하니나옴


날개부분하고 머리링 부분 지움


사실 캐릭터만 원하면 이 1장으로도 구현가능...

근데 이번엔 의상까지 해볼려고하는거라


아래 중국분이 써주신 가이드덕분에 새로운 아이디어를 시도해봤어요.



인형을 가려보니깐 오브젝트 허그를 학습해서 인형이 안나오게 가능하게되었습니다...


WD1.4로  태깅 후 각각 한장씩 원래는 보통 한폴더에 넣고 학습했는데 이것도 중국분 아이디어 덕분에 그냥 폴더를 나눠서 얼굴쪽은 학습반복을 줄이는 쪽을 택해봅니다... 그 이유는 얼굴 크롭부분만 학습하다보면 클로즈업만 뽑아내는 경향이 높게 발생하므로 줄였습니다.



학습은 보통 500스탭안이면 잘나와기때문에 저런식으로 하고 돌렸습니다.

맨앞에 트리거 키워드도 넣어주고 

Epoch 6

Learning rate : 0.000085 / Text Encoder learning rate : 0.00007 /  Unet learning rate : 0.00012 /

(기본설정값으로 걍써도됨)


네트워크 랭크 :24 / 네트워크 알파 : 12 /

(줄여도됨)


네트워크 드롭아웃 0.08 / 랭크 드롭아웃 0.08 / 모듈 드롭아웃 0.08 / 캡션 드롭아웃 0.15 / Clip skip 2

(드롭아웃쪽은 딱히 의미가 있는가 잘모르겠는데 그냥 여러가지로 시도해보고있어서)


해상도 768 768 

(해상도는 낮을수록 학습율을 줄여야되는거같음 )


결과물






i2i로 좀 깍은거 (눈동자가 달라진이유는 눈 관련 로라 써서)




머리장신구도 지우고 학습했어야되는데 이것은 선택사항 쉬운거면 잘그려주는데 (일반적인 머리핀, 달모양, 하트모양 이런 확실히 등록이되어있을법한것들은 아주잘그려냄) 너무 독특한거면 노이즈로 그리기때문에 학습단계에서 머리색으로 뭉개서 없애는편이 좋고...

그냥 만든다음 걍 머리색으로 뭉갠다음 i2i로 지워도되고 애초에 지워서 학습하면 쭉안나오니 좋고 지금껀 i2i 해서 지웠음


암튼 잘됩니다.



프로그램이나 이런거에서 문제생기면 혼자해결잘못하는데

여기서 항상 도움을 얻었기때문에 한번써봤습니다.

땡큐베리머치 감사.


- - - - -

겸사겸사 추가적인 정보로 

3D모델링으로도 이작업해도 잘나오니깐 원하는 캐릭터가 3D인경우여도 해보셈.

얼굴부분은 그림도 섞어주면 좋고