MiniMax H3로 정체성 변형 없이 영상 속 캐릭터를 교체하는 법
Vincent11분 읽기 ·

목표는 MiniMax H3로 영상 속 캐릭터를 교체하면서 정체성 변형을 방지하는 것입니다. 이를 위해 참조 이미지를 정체성의 출처로, 원본 영상을 연기의 출처로 사용하세요. 간단한 원칙은 이미지 = 정체성, 영상 = 연기, 프롬프트 = 제약입니다. 이렇게 하면 H3가 원래 동작, 타이밍, 포즈, 카메라 움직임을 유지하면서 새 캐릭터의 얼굴과 외형을 보존하는 데 도움이 됩니다.
주요 과제는 정체성 변형입니다. 캐릭터가 처음에는 올바르게 보이다가 원래 연기자를 닮아 갈 수 있으며 빠른 동작, 가림, 긴 클립, 충돌하는 참조는 일관성을 더 떨어뜨립니다. 기록된 H3 작업 흐름을 검토한 MiniMax H3 리뷰에는 6시간 동안 400회 넘게 생성한 연구와 다중 캐릭터, 빠른 동작, 프레이밍, 로컬 ComfyUI 테스트가 포함됩니다. 이 사례 전반에서 명확한 참조 역할, 짧은 테스트 클립, 강한 정체성 기준, 명시적인 보존 규칙이 가장 유용한 작업 원칙으로 일관되게 나타납니다.
이처럼 참조가 많은 AI 작업 흐름을 관리하는 창작 팀에 Virse는 과정을 더 체계적으로 정리하는 방법을 제공합니다. 모든 결정을 채팅창에 넣는 대신 Virse는 참조, 결과물, 창작 관계가 계속 보이는 무한 캔버스에서 작동하며 여러 Agent가 같은 프로젝트에서 작업하고 맥락을 공유할 수 있습니다. 팀 선호, 브랜드 기준, 프로젝트 지식에 대한 장기 기억을 통해 Virse는 전문 디자이너가 창작 통제권을 유지하면서 AI 보조 제작을 반복하고 확장하도록 돕습니다. MiniMax H3, Seedance 2.5 및 Seedance 2.0을 이제 Virse에서 사용할 수 있어 같은 창작 흐름에서 여러 주요 영상 모델을 탐색하고 비교할 수 있습니다.

MiniMax H3의 캐릭터 교체는 어떻게 작동하나요?
H3 캐릭터 교체는 얼굴 바꾸기 이상
전통적인 얼굴 교체는 주로 얼굴 외형을 바꿉니다. MiniMax H3는 더 폭넓은 이미지 생성과 편집을 지원할 수 있으며, 여기서는 얼굴, 헤어스타일, 의상, 색상, 실루엣, 신체 정체성을 바꾸면서 원래 움직임과 촬영 표현을 유지합니다.
가장 유용한 이해 방식은 간단합니다.
이미지 = 정체성. 영상 = 연기. 프롬프트 = 역할 배분과 제약.
이미지는 새 캐릭터의 외형을 결정합니다. 영상은 캐릭터가 어떻게 움직이고 연기하며 장면과 상호작용해야 하는지 알려 줍니다.
이 구분은 여러 흔한 실패를 설명합니다. 기록된 작업 흐름에서 일부 결과는 머리나 의상은 바꾸었지만 원래 얼굴을 지나치게 많이 남겼습니다. 다른 결과는 원본 영상을 너무 강하게 보존해 요청한 캐릭터 교체가 거의 일어나지 않았습니다.
이미지·영상·오디오 참조에는 명확한 역할이 필요
참조의 품질이 개수보다 중요합니다.
입력 | 가장 적합한 역할 |
캐릭터 이미지 | 얼굴, 머리, 의상, 비율, 정체성 |
원본 영상 | 동작, 포즈, 표정, 위치, 타이밍 |
원본 영상 | 카메라, 프레이밍, 조명, 장면, 가림 |
오디오 참조 | 필요한 경우 음성, 어조 또는 오디오 맥락 |
프롬프트 | 교체, 계승, 보존 정의 |
목표는 사용 가능한 참조 슬롯을 모두 채우는 것이 아니라 각 참조가 한 가지 명확한 정보 유형을 담당하게 하는 것입니다.
최적의 MiniMax H3 캐릭터 참조 준비법
이미지를 늘리기 전에 확실한 인물 사진 한 장 사용하기
클로즈업과 미디엄 샷에서는 선명한 인물 사진 한 장이 가장 좋은 출발점인 경우가 많습니다.
검토한 작업 흐름 중에는 참조 이미지 수를 줄여 정체성 정확도가 높아진사례가 있었습니다. 추가 이미지는 헤어스타일, 얼굴 구조, 의상, 조명, 비율에 작은 모순을 만들 수 있습니다.
좋은 첫 참조는 다음을 제공해야 합니다.
- 명확히 보이는 얼굴
- 식별 가능한 헤어스타일
- 일관된 의상
- 최소한의 가림
- 정체성을 고정할 충분한 얼굴 세부 정보
특정한 정보 누락을 해결할 때만 다른 시점을 추가하세요.
전신 동작과 회전에는 캐릭터 보드 사용하기
연기자가 회전하거나 옆모습을 보이거나 카메라를 등지면 인물 사진 한 장의 유용성이 줄어듭니다.
이런 클립에서는 정면, 후면, 얼굴 클로즈업을 결합한 캐릭터 보드가 더 충분한 정보를 제공할 수 있습니다. 특히 독특한 헤어스타일, 재킷, 신발, 의상이 동작 전이와 회전 중에도 일관되어야 할 때 유용합니다.
디자인 작업 흐름 관점에서는 전통적인 캐릭터 턴어라운드 시트처럼 작동합니다. 해당 시점이 움직임 속에 나타나기 전에 모델이 시각 정보를 받습니다.
참조 프레이밍을 목표 샷에 맞추기
프레이밍은 간과하기 쉬운 변수입니다.
기록된 한 작업 흐름에서는 참조를 약 864 × 480으로 조정해 목표 구도에 가깝게 맞추자 일관성이 향상되었습니다. 다른 사례에서는 848 × 1264 전신 PNG를 1280 × 720, 30 fps, 14.4초 원본 클립에 사용했지만 여전히 눈에 띄는 정체성 변형이 남았습니다.
이는 대조 벤치마크는 아니지만 실용적인 원칙을 뒷받침합니다. 즉, 정체성을 규정하는 특징을 최종 샷에서 캐릭터가 보이는 크기에 맞춰 충분히 크고 선명하게 제공하세요.

MiniMax H3로 영상 캐릭터 교체하는 단계별 방법
1단계: 원본 영상을 연기의 기준으로 삼기
원본 영상이 움직임, 포즈, 위치, 몸의 회전, 표정 연기, 속도, 타이밍, 안무를 제어하게 하세요.
원본 영상에 원하는 연기가 이미 있다면 모든 움직임을 텍스트로 다시 쓰지 마세요. 동작을 재설명하면 충실도가 높아지는 대신 해석 단계가 추가될 수 있습니다.
2단계: 참조 이미지를 정체성 출처로 지정하기
원래 연기자를 참조에 보이는 캐릭터로 교체해야 한다고 명확히 명시하세요.
유지해야 할 시각적 속성으로 얼굴, 헤어스타일, 의상, 색상, 비율, 독특한 세부 요소를 정의하세요.
기록된 한 연구에서는 약 6시간 동안 400회 넘게 생성했으며, 모호한 피사체 정의가 일부 테스트 실행의 약 절반에서 정체성 상실과 연관되었습니다. 모든 작업 흐름이 똑같이 작동한다는 뜻이 아니라 일관성이 중요할 때 모호한 정체성 표현은 위험하다는 것이 교훈입니다.
3단계: 원래 연기 전이하기
교체된 캐릭터는 원래 연기자의 움직임, 포즈, 위치, 표정, 회전, 속도, 타이밍을 이어받아야 합니다.
이 지시는 원래 연기자가 제공하는 것이 정체성이 아니라 연기라는 점을 H3에 알려 주므로 중요합니다
4단계: 카메라, 조명, 장면 구조 보존하기
의도한 캐릭터 편집 범위 밖의 모든 것을 보호하세요.
보존할 것은 배경, 소품, 카메라 경로, 프레이밍, 초점, 모션 블러, 조명, 그림자, 구도, 편집 타이밍입니다.
H3가 다시 설계해야 하는 무관한 요소가 적을수록 모델 역량을 교체 자체에 집중하기 쉽습니다.
5단계: 가림 관계 보존하기
손, 머리카락, 소품, 무기, 의상, 다른 캐릭터가 피사체 앞을 지날 때 가림 관계가 중요합니다.
원본에서 손이 얼굴 앞을 지나간다면 교체된 얼굴 앞에서도 같은 순간에 지나가야 합니다. 활, 장비, 전경 물체, 캐릭터 간 겹침에도 동일하게 적용됩니다.
이는 특히 춤, 달리기, 복싱, 양궁, 빠른 회전, 액션 장면에서 중요합니다.
MiniMax H3 캐릭터 교체에 가장 좋은 프롬프트는 무엇인가요?
교체·일치·계승·보존·방지 활용하기
가장 효과적인 일반 프롬프트 틀은 다음과 같습니다.
교체: 원래 연기자를 참조 캐릭터로 바꿉니다.
일치: 캐릭터의 얼굴, 머리, 의상, 색상, 비율, 식별 가능한 정체성 세부 요소를 맞춥니다.
계승: 원래 연기자의 동작, 포즈, 표정, 위치, 속도, 회전, 타이밍을 유지합니다.
보존: 원래 카메라, 배경, 조명, 그림자, 소품, 프레이밍, 초점, 편집을 유지합니다.
방지: 새로운 동작, 물체, 컷, 카메라 움직임, 텍스트, 액세서리를 넣지 않습니다.
따라서 간결한 제작 프롬프트는 다음과 같이 작성할 수 있습니다.
영상 1에서 원래 연기자를 이미지 1의 캐릭터로 교체하세요. 클립 전체에서 참조 캐릭터의 얼굴, 헤어스타일, 의상, 색상, 신체 비율, 눈에 보이는 정체성 세부 요소를 일치시키세요. 원래 연기자의 동작, 포즈, 위치, 회전, 표정, 속도, 타이밍을 유지하세요. 배경, 소품, 카메라 경로, 프레이밍, 초점, 모션 블러, 조명, 그림자, 구도, 편집은 바꾸지 마세요. 손, 머리카락, 의상, 물체가 캐릭터 앞을 지날 때 원래 가림 관계를 유지하세요. 새로운 동작, 물체, 카메라 움직임, 컷, 텍스트, 액세서리를 추가하지 마세요.
간단한 프롬프트가 지나치게 구조화된 프롬프트보다 나을 수 있음
프롬프트가 길다고 자동으로 제어가 쉬워지는 것은 아닙니다.
기록된 한 머리 교체 작업에서는 간소화한 지시가 약 70%의 시도에서 좋은 결과를 냈지만, 더 복잡한 버전은 원본을 너무 많이 보존해 교체가 거의 일어나지 않기도 했습니다.
구조화된 프롬프트는 다중 캐릭터 매핑, 지속적인 정체성 변형, 참조 충돌같은 특정 문제를 해결할 때 더 유용합니다.
MiniMax H3 정체성 변형 해결법
길이를 늘리기 전에 짧은 클립으로 시작하기
정체성 변형은 점진적으로 나타나는 경우가 많습니다. 캐릭터가 처음에는 올바르다가 원래 연기자에 가까워지고 다시 일부 회복될 수 있습니다.
한 14.4초, 1280 × 720, 30 fps테스트에서 848 × 1264 전신 참조를 사용했지만 16GB RTX 5070 Ti작업 흐름에서 여전히 상당한 변형이 나타났습니다.
더 효율적인 문제 해결 순서는 다음과 같습니다.
- 약 5초를 테스트합니다.
- 얼굴 참조를 강화합니다.
- 프레이밍을 더 가깝게 맞춥니다.
- 불필요한 참조를 제거합니다.
- 정체성과 연기의 역할을 명확히 합니다.
- 회전 샷에는 후면 시점을 추가합니다.
- 다른 시드를 테스트합니다.
- 어려운 동작에서는 품질 설정을 높입니다.
빠른 동작에는 더 보수적인 설정이 필요할 수 있음
400회 넘게 생성한 작업 흐름에서는 5초 클립을 주로 테스트에 사용했고 추가로 15초 실험도 진행했습니다.
4단계 Turbo 설정은 반복 작업에 유용했지만 어려운 동작에서는 정체성 일관성이 사라지기도 했습니다. 더 어려운 시퀀스에서 해당 흐름은 약 20단계로 돌아갔습니다.

이는 보편적인 프리셋이 아닙니다. 더 넓은 절충 관계를 보여 줍니다. 모델이 정체성, 포즈, 동작, 가림, 시간적 연속성을 한꺼번에 해결해야 하면 빠른 생성의 신뢰성이 떨어질 수 있습니다.

컷과 긴 영상 전반에서 H3 캐릭터 정체성 유지하기
긴 시퀀스와 하드 컷은 원래 정체성이 다시 나타나거나 참조가 경쟁할가능성을 높입니다.
제작에서는 시퀀스를 늘리기 전에 짧고 개별 검토된 구간에서 교체를 검증하세요. 클립 간 동일한 정체성 설명과 참조 매핑을 유지하고 모든 컷에서 연속성을 확인하세요.
첫 샷에서 올바르게 구현한 캐릭터가 이후 샷에서도 자동으로 우세하게 유지된다고 가정하지 마세요. 클립 간 일관성은 한 번의 프롬프트 결정이 아니라 명확한 제작 과제로 다뤄야 합니다.
MiniMax H3로 여러 캐릭터를 교체하는 법
모든 캐릭터를 명확히 매핑하기
두 인물을 교체할 때는 각 정체성에 안정적인 매핑이 필요합니다.
실용적인 구조는 다음과 같습니다.
- 이미지 1이 캐릭터 A를 정의
- 이미지 2가 캐릭터 B를 정의
- 영상 1이 두 연기를 제공
- 캐릭터 A가 왼쪽 연기자를 교체
- 캐릭터 B가 오른쪽 연기자를 교체
기록된 한 2인 캐릭터 작업 흐름은 피사체 매핑과 유지력을 개선한 뒤 약 90%의 성공률을 보고했지만 결과는 여전히 시드에 따라 달랐습니다.

교차 중 정체성 혼합 방지하기
연기자가 위치를 교차하거나 겹치거나 서로 가리는 순간이 가장 어렵습니다.
‘첫 번째 사람’, ‘두 번째 사람’처럼 모호한 표현보다 캐릭터 A와 B를 명확히 지정하는 편이 더 안전합니다.
다중 캐릭터 작업에서는 참조 역할의 명확성이 최대 참조 개수보다 중요합니다.
MiniMax H3 ComfyUI 성능 테스트는 무엇을 보여 주나요?
12GB VRAM으로 가능하지만 큰 절충이 필요
한 RTX 3060 12GB작업 흐름은 대략 다음을 보고했습니다.
- 약 2MP에서 5초
- 약 1.34MP에서 8초
- 1.34MP 생성에 약 25분
다른 12GB 테스트에서는 0.4MP에서 HD PNG 참조 9개를 사용했습니다. 일반적인 30초 이미지 투 비디오 생성은 약 14분이 걸렸고, 다중 참조 Ref2V 작업 흐름은 약 20분이 걸렸습니다.
이 결과는 보편적 벤치마크가 아닌 작업 흐름 사례지만 길이, 해상도, 참조 개수, 생성 비용사이의 절충 관계를 보여 줍니다.

VRAM이 많아도 정체성 변형이 자동으로 해결되지는 않음
16GB 작업 흐름에서도 긴 교체 클립에서 변형이 발생했습니다.
한 24GB RTX 3090 Ti테스트에서는 0.5MP의 56프레임을 사용했으며 영상 편집이 더 단순한 이미지 참조 생성보다 약 2배 더 많은 자원을 요구한다고 설명했습니다.
고급 5090 최적화 작업 흐름에서는 메모리 효율적인 구성 요소로 바꾼 후 10GB 넘는 VRAM 절약과 약 14GB의 공유 GPU 메모리 사용량 감소를 보고했으며 생성 속도는 거의 비슷했습니다.
핵심은 GPU 용량은 실행 가능한 설정에 영향을 주지만 참조 품질, 길이, 동작 복잡도, 프롬프트 구조가 여전히 정체성 안정성을 결정한다는 것입니다.

MiniMax H3 캐릭터 교체에서 가장 흔한 실수는 무엇인가요?
실패 원인을 진단하기 전에 참조 추가하기
참조가 많으면 모순도 늘 수 있습니다.
하나의 강한 정체성 출처로 시작하세요. 목표 클립에 첫 이미지가 제공하지 못하는 정보가 나타날 때만 다른 시점을 추가하세요.
너무 일찍 긴 영상 테스트하기
실패한 15초 액션 클립에는 여러 원인이 있을 수 있습니다.
5초 테스트는 더 많은 연산 자원을 쓰기 전에 정체성, 프레이밍, 동작, 시드, 해상도, 가림문제를 분리하기 쉽게 합니다.
너무 많은 요소를 한꺼번에 바꾸기
캐릭터 교체가 목적이라면 배경, 조명, 카메라, 애니메이션, 편집 스타일을 동시에 바꾸지 마세요.
전문적인 AI 영상 작업 흐름은 매 생성의 변환 범위가 좁을 때 더 쉽게 제어할 수 있습니다.
자주 묻는 질문
H3가 원래 얼굴을 유지하는 이유는 무엇인가요?
가장 흔한 원인은 약한 정체성 참조, 모호한 참조 역할, 맞지 않는 프레이밍, 과도한 참조, 편집보다 강한 보존 지시입니다. 선명한 인물 사진 한 장으로 시작해 이미지는 정체성, 영상은 연기로 지정하고 복잡도를 높이기 전에 짧은 클립에서 교체를 검증하세요.
H3는 두 캐릭터를 동시에 교체할 수 있나요?
네. 각 참조를 한 연기자에게 명확히 매핑하면 다중 캐릭터 교체가 가능합니다. 주요 과제는 캐릭터가 겹치거나 위치를 교차하거나 서로 가릴 때 정체성이 섞이는 것입니다. 안정적인 캐릭터 A·B 매핑이 모호한 위치 설명보다 신뢰할 수 있습니다.
H3에 참조 이미지를 몇 장 사용해야 하나요?
먼저 확실한 이미지 한 장으로 시작하세요. 원본 영상에 뒤쪽 헤어스타일이나 의상처럼 첫 이미지가 제공하지 못하는 정보가 드러날 때만 다른 시점을 추가하세요. 여러 기록된 작업 흐름에서는 모델이 조정해야 할 상충하는 시각 신호가 줄어 참조가 적을 때 일관성이 좋아졌습니다.
H3에는 VRAM이 얼마나 필요한가요?
고정된 단일 요구사항은 없습니다. 기록된 로컬 작업 흐름에는 12GB, 16GB, 24GB GPU에서 작동한 사례가 있지만 해상도, 길이, 단계 수, 양자화, 모델 구성, 참조 개수가 모두 메모리 사용량에 영향을 줍니다. 하드웨어가 제한적이면 먼저 클립 길이와 해상도를 줄이세요.
결론
최고의 MiniMax H3 캐릭터 교체 작업 흐름은 하나의 ‘궁극적인 프롬프트’를 중심으로 만들어지지 않습니다. 각 정보 출처가 올바른 역할을 맡을 때 완성됩니다. 참조 이미지는 정체성을, 원본 영상은 연기와 촬영 표현을, 프롬프트는 무엇을 바꾸고 전이하며 그대로 둘지 정의합니다. 수백 건의 기록된 생성, 다중 캐릭터 사례, 빠른 동작 테스트, 프레이밍 실험, 로컬 GPU 작업 흐름에서 가장 강한 패턴은 일관됩니다. 짧은 클립으로 시작하고, 최소한의 강한 참조를 사용하며, 정체성과 연기를 분리하고, 카메라와 가림을 명시적으로 보존하며, 구체적인 실패가 요구할 때만 복잡도를 추가하세요.
Virse 블로그의 다른 글
워크플로

GPT Image 2.5 Noise and Oversharpening: Why Some Images Still Look AI-Generated
2026년 10월 9일 by Yifan Zhao
워크플로

GPT Image 2.5 Keeps Changing My Image: How to Use a "Keep List" for Reliable Edits
2026년 10월 9일 by Yifan Zhao
워크플로

GPT Image 2.5 Editing Drift: Why Images Get Blurry, Cropped or Worse After Multiple Edits
2026년 10월 9일 by Yifan Zhao