선 결론

중간 퀄리티 영상 정도는 초당 1분 이하로 만듬






진짜 하나부터 열까지 다 알려드림

보간이랑 후편집은 알아서.... 난 Flowframes이랑 다빈치리졸브 사용




일단 로컬 기준이고 코랩은 몰?루

다들 무료코랩도 망했는데 글카나 사자 ^^





mov2mov로 AI영상을 케이크처럼 진짜로 쉽게 먹는방법

시작



준비물


컨트롤넷 1.1 82c42285b9e28f6ab76aa35e2ed62690639b2b5c 버전

(난 최신버전은 안먹혀서 요 버전으로 다운그레이드 함.... 이건 내 로컬 문제 일지도?)

(다운그레이드 방법 : 컨넷 폴더에 들어가서 우클릭 후 터미널 열고

git checkout 82c42285b9e28f6ab76aa35e2ed62690639b2b5c 입력)


mov2mov 확장 https://github.com/Scholar01/sd-webui-mov2mov


템포럴넷 https://huggingface.co/CiaraRowles/TemporalNet/blob/main/diff_control_sd15_temporalnet_fp16.safetensors

(컨트로렛 모델 폴더에 저장)


ABG 리무버 https://github.com/KutsuyaYuki/ABG_extension



방법은 2가지로 나뉨

첫번째는 그림체 변경 (카툰렌더링?)

두번째는 탈룰라





1. 그림체 변경







일단 이런 그림체 변경부터








준비물을 다 준비했으면 요렇게 뜰거임

일단 여기서 사용하는건 mov2mov컨넷 사실 컨넷도 없어도 되긴 함


걍 일단 첨에는 따라하셈


1. mov2mov 선택

2. 프롬입력

3. 영상삽입

4. 샘플링 Euler 선택

5. 원본영상 비율 맞춰서 가로세로 크기 입력

6. 노이즈 1 / cgf 7 / 디노이즈 0.2~0.4

7. 원하는 프레임 입력


요렇게만 하고 생성 누르면 

outputs 폴더에 mov2mov-images 폴더가 생기면서 자동으로 이미지가 저장됨

다 끝나면 mov2mov-videos 에 비디오도 저장


하지만! 나는 그냥 mov2mov가 만들어주는 비디오는 무시하고 따로 이미지를 합쳐서 영상 만드는거 추천




자세하게 설명하자면


2. 프롬입력

복잡하게 하지말고 기본적인 배스트퀄리티, 로우퀄리티, 이지네거 등등 정도



5. 원본영상 가로세로 크기 입력

이건 원본영상 비율을 맞춰서 입력하면 됨

해상도를 크게 줄수록 결과물의 퀄리티가 비약적으로 상승 (대신 걸리는 시간도 상승...)

비율계산기 https://homzzang.com/ratio/

요 사이트에서 원본영상 가로세로 사이즈 넣고 원하는 사이즈비율 맞추셈


ex) 1280*720 영상은 1440*810 / 1600*900 / 1920*1080 등으로 변환 가능


1280*720으로 했는데 얼굴이깨진다? 싶을때 1920*1080 으로 해보면 정상으로 나옴



6. 노이즈 1 / cgf 7 / 디노이즈 0.2~0.4

디노이즈는 영상따라 하나씩 해보는거 추천

ex) 0.2 / 0.25 / 0.3 / 0.35 / 0.4



7. 원하는 프레임 입력

*중요* 원하는 프레임 입력이지만 이상한 프레임 넣으면 인식 못할수도 있고 편집도 까다로움

딱딱 배수에 맞춰서? 프레임 설정해야 됨

ex)

원본30fps -> 10fps O

원본 24fps -> 10fps X

원본 24fps -> 12fps O


이런느낌?


난 보통 10프레임이나 12프레임으로 뽑고 프레임보간 등 후편집 함

프레임 보간이 뭐냐고? 그건 니가 알아서....

난 Flowframes 사용




추가로 컨트롤넷 하고싶으면 하면 됨

셋팅에 따라서 퀄리티가 상승할지도?

내가 주로 쓰는 모델은 오픈포즈, 라인아트, 템포럴넷 정도

보통 셋중에 두개정도 쓰까 씀


추천 값은

오픈포즈 1~1.3

라인아트 0.3~1

템포럴넷 0.2~0.6


뭐 이건 대충 해보면서 감 잡으시고....













2. 탈룰라




자 그럼 두번째 탈룰라 가겠음

(애니 스타일인건 그냥 예시니까 대충 넘어가자


일단 탈룰라는 오픈포즈가 잘 인식하는 원본영상을 써야됨

첫번재 방법과 셋팅은 거의 동일한데



프롬입력

이번에는 프롬을 정확하게 입력해야 됨

(눈색, 머리스타일, 머리색, 복장, 긴팔인지 반팔인지 등등등 다)

*****(로라사용추천)*****



CFG

일단 7로 해보고 잘 안된다 싶으면

고 cgf를 주고 다이나믹 쓰레스홀드로 안정화 해주면 됨

이건 알아서...



디노이즈

이번에는 디노이즈 값을 0.7~1까지 줘야 됨



*****컨트롤넷*****

이번에는 컨넷이 거의 필수

오픈포즈, 템포럴넷 사용 


추천 값은

오픈포즈 1.3

템포럴넷 0.3~0.6


템포럴넷 사용법은


엔에블 찍고

프리프로세서 none

모델 템포럴넷

가중치 0.3~0.6


(템포럴넷 스크립트는 사용 안함)




ABG 리무버



이건 누끼 자동으로 따주는거임

저 두개 체크하고 백그라운드 컬러 하얀색으로

(배경 후편집 할거면 커스텀 백그라운드 체크 X)





그럼 다들 영상 생활 해보자고?

막히는거 있으면 물어보고



유용하면개추