[스테이블 디퓨전] mov2mov 확장 기능으로 기존영상을 수정하여 다른 영상으로

mov2mov 확장 기능이란?

기존 영상에 얼굴이나 배경 등을 프롬프트 입력하여 다른 것으로 교체하여 새로운 영상을 만들어 주는 기능이다. 

일종의 딥페이크 영상을 만드는 건데, 오~ 이거 진짜 신기하고 재미있다.

아직은 제대로 사용하는 법을 모르지만, 제대로만 하면 어딘가에 많이 쓸 수 있을 듯

근데, 시스템 리소스를 너무 많이 먹어서 내 컴이 나쁘지 않을 편인데도 시간이 많이 걸렸다.

아마 코렙으로 사용하는 분들은 안 돌아 갈듯

mov2mov 설치하기

설치는 쉽다. 

늘 하듯 URL로 설치하면 된다. 

[Extensions] – [Install from URL] – URL for extension’s git repository에 아래 URL 입력

사이트 가보면 중국어가 많은 거 보니 중국사람이 개발한 듯하다.

https://github.com/Scholar01/sd-webui-mov2mov.git

설치 완료 후 재시작하면 [mov2mov] 탭이 만들어진것을 볼수 있다.

mov2mov 해보기

우선 txt2img에서 인물을 하나 만들자!

(happy512), ultra realistic details, sharp focus,  detailed skin, 1 korean cute girl, small head,
(21 years old cute Korean girl:1.2), (kpop idol:1.2), (korean beauty:0.8), (korean mixed), (portrait:1.2), 
(large breasts),

 

[mov2mov] 탭으로 가서 아까 만든 인물 이미지 시드를 고정시키고, 프롬프트도 똑 같이 써준다.

이제 원본 비디오를 넣는다.

아래 비디오를 넣어보았다!

이제 저 비디오 안의 인물 대신 스테이블 디퓨전으로 새로 만든 여성이 들어갈 거다.

Generate 버튼을 누르면 엄청 많은 시간이 걸린다.. 그래도 도스 CMD 창을 보면 뭔가가 막 돌아간다.

한참 걸려 만들어진 영상

오~ 좀 신기하다, 얼굴만 바뀐 게 아니라 옷도 다 바뀌고 동작만 원본 영상을 가지고 왔는데,

그런 세세한 것들도 다 조정이 가능하지 않을까?

다른 것도 해봤는데, 느낌이 나쁘지 않다 ^^