소리O



워크플로우

Tokyo_Jab의 사용 지침은 여기 . 비디오를 그리드로 변환하고 다시 비디오로 변환하기 위해 Temporal Kit를 사용했습니다 (EBSynth 사용). 다음은 이 비디오를 변환하기 위해 취한 단계입니다.

  1. 배경을 제거했습니다.

  2. 비디오 크기를 1024x1536으로 조정했습니다. 이것은 512x768의 배수입니다.

  3. 시간 키트를 사용하여 값을 사용하여 그리드를 생성했습니다(측면: 4, 높이 해상도: 3072, 키프레임당 프레임: 4, EbSynth 모드 확인, 배치 설정 확인 > BatchRun).

  4. img2img 설정 사용(단계: 25, 샘플러: DPM++ 2M, CFG 스케일: 7, 얼굴 복원: CodeFormer, 크기: 2048x3072, 모델: edgeOfRealism_eorV20Fp16BakedVAE, 노이즈 제거 강도: 0.8, 버전: v1.2.0, ControlNet 0: "전처리기: softedge_pidinet , 모델: control_v11p_sd15_softedge) 이것은 txt2img로 수행할 수 있으며 img2img를 사용하여 배치로 실행했습니다.

  5. Temporal-Kit>EBSynth-process, read_last_settings 사용, 출력 해상도를 1536으로 설정합니다.

  6. 자세한 내용을 추가하려면 키 디렉토리에서 img2img를 실행하고 값을 사용했습니다(단계: 25, 샘플러: DPM++ 2M, CFG 스케일: 7, 얼굴 복원: CodeFormer, 크기: 1024x1536, 모델: edgeOfRealism_eorV20Fp16BakedVAE, 노이즈 제거 강도: 0.1 )

  7. EbSynth를 실행합니다. 나는 그것을 20 개의 키 배치로 나누었습니다. Temporal-kit에는 그리드를 생성할 때 이 작업을 수행할 수 있는 옵션이 있습니다. 불완전한 그리드가 생성되고 이미지 간의 일관성이 깨집니다.

  8. Temporal kit > 재조합 ebsynth.

  9. 디플리커를 사용하려면 DaVinci에서 비디오를 여십시오.


Used instructions from Tokyo_Jab here. Used Temporal Kit for converting video to grid and back to video (with EBSynth). Below are the steps I took to convert this video.

  1. Removed background.

  2. Resized the video to 1024x1536. This is a multiple of 512x768.

  3. Used Temporal kit to generate the grid using values (Sides: 4, Height Resolution: 3072, frames per keyframe: 4, Check EbSynth Mode, Check Batch Settings > BatchRun)

  4. Used img2img with settings (Steps: 25, Sampler: DPM++ 2M, CFG scale: 7, Face restoration: CodeFormer, Size: 2048x3072, Model: edgeOfRealism_eorV20Fp16BakedVAE, Denoising strength: 0.8, Version: v1.2.0, ControlNet 0: "preprocessor: softedge_pidinet, model: control_v11p_sd15_softedge). This can be done with txt2img, I used img2img to run in batch.

  5. Temporal-Kit>EBSynth-process, Use read_last_settings, set output resolution to 1536.

  6. Run img2img on the keys directory to add more details, I used values (Steps: 25, Sampler: DPM++ 2M, CFG scale: 7, Face restoration: CodeFormer, Size: 1024x1536, Model: edgeOfRealism_eorV20Fp16BakedVAE, Denoising strength: 0.1 )

  7. Run EbSynth. I broke it into batches of 20 keys. Temporal-kit has the option for doing this when generating the grid. I found that it results in incomplete grids and that breaks the consistency between images.

  8. Temporal kit > recombine ebsynth.

  9. Open video in DaVinci to use deflicker.


i2i 말고 mov2mov로 사용하면 더 편하게 만들기 가능할듯