mov2mov 확장 기능이란?
기존 영상에 얼굴이나 배경 등을 프롬프트 입력하여 다른 것으로 교체하여 새로운 영상을 만들어 주는 기능이다.
일종의 딥페이크 영상을 만드는 건데, 오~ 이거 진짜 신기하고 재미있다.
아직은 제대로 사용하는 법을 모르지만, 제대로만 하면 어딘가에 많이 쓸 수 있을 듯 근데, 시스템 리소스를 너무 많이 먹어서 내 컴이 나쁘지 않을 편인데도 시간이 많이 걸렸다.
아마 코렙으로 사용하는 분들은 안 돌아 갈듯
mov2mov 설치하기
설치는 쉽다.
늘 하듯 URL로 설치하면 된다.
[Extensions] – [Install from URL] – URL for extension’s git repository에 아래 URL 입력
사이트 가보면 중국어가 많은 거 보니 중국사람이 개발한 듯하다.
https://github.com/Scholar01/sd-webui-mov2mov.git
GitHub - Scholar01/sd-webui-mov2mov: This is the Mov2mov plugin for Automatic1111/stable-diffusion-webui.
This is the Mov2mov plugin for Automatic1111/stable-diffusion-webui. - Scholar01/sd-webui-mov2mov
github.com
설치 완료 후 재시작하면 [mov2mov] 탭이 만들어진것을 볼수 있다.
mov2mov 해보기
우선 txt2img에서 인물을 하나 만들자!
(happy512), ultra realistic details, sharp focus, detailed skin, 1 korean cute girl, small head,
(21 years old cute Korean girl:1.2), (kpop idol:1.2), (korean beauty:0.8), (korean mixed), (portrait:1.2),
(large breasts),
[mov2mov] 탭으로 가서 아까 만든 인물 이미지 시드를 고정시키고, 프롬프트도 똑 같이 써준다.
이제 원본 비디오를 넣는다.
아래 비디오를 넣어보았다!
이제 저 비디오 안의 인물 대신 스테이블 디퓨전으로 새로 만든 여성이 들어갈 거다.
Generate 버튼을 누르면 엄청 많은 시간이 걸린다.. 그래도 도스 CMD 창을 보면 뭔가가 막 돌아간다.
한참 걸려 만들어진 영상
오~ 좀 신기하다, 얼굴만 바뀐 게 아니라 옷도 다 바뀌고 동작만 원본 영상을 가지고 왔는데, 그런 세세한 것들도 다 조정이 가능하지 않을까?
다른 것도 해봤는데, 느낌이 나쁘지 않다 ^^
