MV 장면에 내 얼굴 넣기 — 다들 하는 방법은 셋인데 푸는 문제가 다르다

유명 MV 의 한 장면을 가져다 얼굴만 자기로 바꾼 영상이 돈다. 「다들 어떻게 만드나」 가 궁금해서 찾아보니 방법이 셋 있었고, 셋 다 직접 돌려 봤다. 하나는 결제 단계에서 막혔다.

결론부터. 그런 영상은 대부분 얼굴만 바꾸기다. 사람 전체를 바꾸는 방법은 따로 있고, 첫 프레임을 고쳐 영상을 새로 만드는 방법은 원본 「재현」 이 아니라 비슷한 새 장면이 된다. 이 글을 읽으면 원하는 결과에 맞는 방법을 고를 수 있다.

먼저 선부터. 넣는 얼굴은 내 얼굴이거나 동의를 받은 얼굴이어야 한다. 실존 인물처럼 보이게 공개하면 사칭 · 딥페이크 문제가 된다. 올릴 때는 AI 로 바꾼 영상이라고 밝힌다. 원본 MV 와 음원은 저작권물이라 유튜브라면 Content ID 에 걸릴 수 있다.

세 방법 한눈에

	1. 얼굴만 교체	2. 인물 전체 교체	3. 첫 프레임 편집 → 영상 생성
도구	FaceFusion(로컬), 얼굴 교체 앱	Runway Aleph / Act-Two, Wan 2.2 Animate, Kling	Nano Banana Pro + Veo / Kling / Runway
원본 장면	그대로	그대로	새로 생성된다
머리 · 체형	원본 그대로	레퍼런스를 따른다	레퍼런스를 따른다
이번 결과	성공	결제 단계에서 막힘	원본 프레임은 거절, 새 장면은 통과

실측 환경은 M2 Max 64GB, 8초 클립, 1280×720.

1. FaceFusion — 원본도 머리도 그대로

hyperswap_1a_256 + pixel boost 512 + gfpgan_1.4 보정, 마스크 box occlusion. 200 프레임에 4~8분, 비용은 0.

담배 · 연기 · 손 문신이 얼굴을 가리는 부분까지 자연스러웠다. 함정은 하나. 기본 --face-selector-mode reference 는 각도가 바뀐 프레임을 다른 사람으로 보고 건너뛴다. 1.2~1.6초, 2.4~2.8초에 원래 얼굴이 튀어나왔다. --face-selector-mode one --face-detector-score 0.35 로 해결했다.

그리고 머리 모양은 원본 그대로다. 장발인 사람을 넣어도 삭발로 나온다. 왜 그런지는 얼굴 교체가 머리카락을 못 바꾸는 이유에 따로 적었다.

3. Nano Banana Pro + Veo — 재현이 아니라 오마주

첫 프레임 얼굴 교체부터 모델 차이가 났다. Gemini 2.5 Flash Image 는 두 번 다 지시를 무시하고 원본을 그대로 돌려줬다. 16:9 를 지정하기 전엔 정사각으로 잘라 버리기까지 했다. Gemini 3 Pro Image(Nano Banana Pro)는 한 번에 됐다.

그런데 Veo 가 그 프레임을 거절했다.

Sorry, we can't create videos from input images containing celebrity or their likenesses.

얼굴은 바꿨어도 구도 · 문신 · 의상이 MV 원본이라 유명인 필터에 걸린 것으로 보인다. MV 프레임 없이 「비슷한 분위기의 장면」 을 새로 생성하니 통과했고, 8초 영상에 소리까지 붙어 나왔다.

다만 「locked-off static camera, no zoom」 을 넣어도 두 번 다 카메라가 뒤로 빠지며 와이드로 바뀌었다. 이 경로는 MV 재현이 아니라 오마주다. 트렌드 영상 중 원본과 미묘하게 다른 것들은 아마 이쪽일 것이다.

2. Runway Aleph — 크레딧 0 에서 403

스크립트는 준비했는데 업로드 단계에서 403 이 났다. At least one credit purchase is required for this account to use ephemeral uploads. 결제를 한 번도 안 한 계정은 업로드부터 막힌다.

로컬 대안인 Wan 2.2 Animate 는 Mac 에서 8초에 수십 분 넘게 걸릴 것 같아 돌리지 않았다. 그래서 2번은 아직 결과가 없다. Aleph 도 Veo 처럼 원본 MV 프레임을 막는지는 크레딧을 넣고 확인할 생각이다.

왜 다들 로컬 · 앱을 쓰나

생성형 API(Veo)에는 유명인 필터가 있고 로컬 도구(FaceFusion)에는 없다. 원본 장면을 그대로 쓰고 싶은 사람들이 FaceFusion 이나 얼굴 교체 앱으로 몰리는 실제 이유가 이것일 수 있다. 필터가 없다는 건 그만큼 쓰는 쪽이 선을 지켜야 한다는 뜻이기도 하다.

내 기준은 이렇다. 원본 연기를 살리고 얼굴만 → 1. 머리 · 옷까지 → 2. 원본과 달라도 분위기만 → 3.

영상 제작에 AI 를 붙이는데 어느 경로가 맞을지 고민이라면 negabaro 에 물어봐도 된다 (문의).