비디오 속 인물을 교체하고 원본 오디오 유지하기

캐릭터 교체에서 실제로 무엇이 바뀌나요?

전체 캐릭터 교체는 참조 이미지를 사용하여 화면의 연기자를 재해석하는 것을 목표로 합니다. 이는 얼굴, 의상, 실루엣 및 기타 시각적 세부 사항에 영향을 미칠 수 있습니다. 얼굴 영역만 바꾸는 것보다 더 야심 찬 작업이므로, 배경의 모든 픽셀이나 제스처가 변하지 않고 그대로 유지될 것이라고 가정하지 마십시오.

영상이 바뀐다고 해서 오디오까지 바뀔 필요는 없습니다. 소스에는 음성, 음악, 현장음 또는 이들의 조합이 포함될 수 있습니다. 해당 트랙을 보존한다는 것은 기존 사운드를 새 영상으로 그대로 가져오는 것을 의미하며, 목소리를 재구성하거나 새로운 캐릭터가 다르게 말하도록 만드는 것을 의미하지 않습니다.

무엇을 일관되게 유지해야 할지 결정하는 것부터 시작하십시오. 댄스 클립의 경우 음악적 타이밍이 우선순위일 수 있습니다. 마스코트가 손을 흔드는 경우, 정확한 얼굴 움직임보다 동작의 형태가 더 중요합니다. 대화의 경우 입 모양 타이밍이 추가적인 품질 확인 요소가 됩니다. 이러한 결정은 크레딧을 소비하기 전에 부적합한 소스를 거르는 데 도움이 됩니다.

깨끗하고 짧은 소스 클립 하나 준비하기

성인 연기자 한 명이 명확하게 보이는 단일 샷을 사용하십시오. 고정된 카메라, 적당한 움직임, 피사체와 배경의 분리는 나중에 검사할 디테일을 줄여줍니다. 피사체가 가구 뒤로 반복해서 지나가거나 프레임을 벗어난다면 더 쉬운 장면부터 시작하십시오.

TryMotion 웹 스튜디오는 1초에서 10초 사이, 최대 30fps, 최대 업로드 크기 25MB의 준비된 H.264 MP4 파일을 수락합니다. 업로드하기 전에 평소 사용하는 편집기에서 트리밍하십시오. 내장된 트리밍 도구는 없으며, MOV 파일의 확장자를 MP4로 이름을 바꾼다고 해서 코덱이 변환되지는 않습니다.

트리밍된 파일을 끝까지 들어보십시오. 긴 녹음본의 앞부분이 남지 않고 의도한 순간에 오디오가 시작되어야 합니다. 편집기에서 소리를 화면과 별개로 이동했다면 지금 소스 타임라인을 수정하십시오. 오디오 보존 단계는 내보내기 시 이미 잘못된 타이밍 관계를 복구할 수 없습니다.

촬영 장면에 적합한 레퍼런스를 선택하십시오.

레퍼런스는 캐릭터의 가시적인 정체성을 제공할 뿐, 보이지 않는 디테일에 대한 무한한 설명을 제공하지 않습니다. 얼굴 사진은 전신 연기에 대한 가이드를 거의 제공하지 못합니다. 소스에서 연기자의 전신이 보인다면, 윤곽을 읽을 수 있는 캐릭터의 전신이 포함된 레퍼런스를 사용하십시오.

포즈와 시선 방향을 최대한 가깝게 맞추십시오. 정면을 응시하는 레퍼런스를 측면 프로필이 유지되는 소스와 결합하면 변환이 더 어려워집니다. 미세한 글자, 작은 로고, 손가락 및 액세서리는 모델이 충실하게 재현할 것이라고 가정할 대상이 아니라 면밀히 검사해야 할 디테일입니다.

각 테이크에 사용된 레퍼런스의 복사본을 보관하십시오. 나중에 두 결과물을 비교할 때, 소스나 레퍼런스 중 하나만 변경하는 것이 모든 것을 한꺼번에 바꾸는 것보다 더 유용한 비교 데이터를 제공합니다. 촬영 장면, 레퍼런스, 의도한 동작에 대한 간단한 기록만으로도 충분합니다.

시각적 생성과 오디오를 분리하여 유지하기

신뢰할 수 있는 워크플로는 먼저 교체된 영상을 생성한 다음, 그 영상과 소스 사운드트랙을 결합합니다. 영상과 소리는 시작점이 동일해야 합니다. 최종 내보내기 파일에는 단순히 미리보기에서 소리 아이콘이 활성화된 것이 아니라, 실제 오디오 트랙이 포함되어 있어야 합니다.

TryMotion의 구현 방식에는 업로드된 비디오에 오디오가 포함된 경우 선택적인 오디오 병합 단계가 포함됩니다. 스튜디오는 오디오 트랙의 존재 여부를 감지하고 생성 견적에 해당 설정을 포함합니다. 소스에 소리가 없는 경우, 보존 설정을 켜도 없는 소리를 만들어낼 수는 없습니다.

이 워크플로는 짧은 소스 클립과 원본 캐릭터 레퍼런스를 사용합니다. Par défaut로 P-Video-Replace 720p가 설정되어 있으며, 더 높은 품질을 위해 1080p를 사용할 수 있습니다. 예시 장면들은 워크플로를 설명하기 위한 것이며 특정 생성 결과를 보장하는 증거가 아닙니다.

공유 전 다음 확인 사항 검토하기

먼저 정상 속도로 결과물을 시청한 다음, 까다로운 순간들을 면밀히 검사하십시오. 시각적으로 매력적인 첫 프레임이라도 영상 중간에 손이 어긋나거나, 의상이 바뀌거나, 얼굴을 놓치는 현상이 숨어 있을 수 있습니다. 썸네일에 의존하지 말고 전체 클립을 검토하십시오.

1. 시작 프레임과 종료 프레임을 확인하십시오. 클립이 예상한 시작점, 끝점, 구도 및 방향을 유지하고 있는지 확인하십시오.
2. 헤드폰으로 끝까지 들어보십시오. 트랙이 존재하고 잘 들리는지, 예상치 못한 두 번째 사운드트랙이 섞이지 않았는지 확인하십시오.
3. 박수, 발소리 또는 발음되는 자음과 같이 눈에 보이는 타이밍 신호를 찾아 소스와 비교해 보십시오.
4. 손, 얼굴 경계선, 가려진 신체 부위 및 브랜드 로고 등을 검사하십시오. 결과물이 사용 목적에 적합한지 확인하십시오.
5. 내보낸 파일을 다운로드하여 별도의 플레이어에서 다시 재생해 보십시오. 브라우저 미리보기에 의존하지 말고 저장된 비디오에 오디오가 포함되어 있는지 확인하십시오.

가장 일반적인 불일치 문제 해결하기

사운드트랙이 나오지 않는다면, 먼저 업로드한 소스에 실제로 오디오 스트림이 있는지 확인하십시오. 소리가 없는 내보내기 파일은 파일 탐색기에서 일반 MP4와 동일하게 보일 수 있습니다. 소리가 로컬에는 존재하지만 최종 파일에 없다면, 문제는 캐릭터 레퍼런스가 아닌 병합 또는 내보내기 단계에 있는 것입니다.

사운드트랙이 지속적으로 빠르거나 느리게 나온다면, 소스 편집본과 결과물의 첫 프레임을 검사하십시오. 고정된 오차는 비디오 편집기에서 수정할 수 있는 경우가 많지만, 반복되는 파이프라인 오차를 방치해서는 안 됩니다. 배치를 생성하기 전에 이를 조사해야 합니다. 동기화가 점진적으로 어긋난다면 화면의 속도가 조절되었거나 길이가 변경되었는지 확인하십시오.

목소리가 다르게 들린다면 원래 녹음 대신 생성된 오디오 트랙이 사용되었을 수 있습니다. 정체성과 연기력이 중요한 경우 소스 트랙을 보존하십시오. 음성 복제, 더빙 및 음성 합성은 적절한 권한을 가진 별도의 명시적 선택 사항이어야 하며, 본 MVP 범위 밖의 기능입니다.

빠른 회전 시 캐릭터 이미지가 깨진다면 화면의 문제를 단순화하십시오. 더 짧은 구간, 더 안정적인 샷, 또는 소스 각도에 더 가까운 레퍼런스를 시도해 보십시오. 동일한 까다로운 입력을 반복해서 실행하는 것은 비용 관리 측면에서 신뢰할 수 있는 전략이 아닙니다.

크레딧 및 보관 이해하기

기본 P-Video-Replace 720p는 최대 5초 소스에 10 크레딧, 최대 10초 소스에 20 크레딧이 소요됩니다. 더 고화질인 1080p 옵션은 각각 20 및 40 크레딧이 소요됩니다. 서버는 견적을 발행하기 전 업로드된 비디오의 길이를 확인하므로, 제출 전 확인된 가격을 검토하십시오.

생성이 시작되면 크레딧이 예약됩니다. 기술적 실패가 확인되면 예약된 크레딧 전액이 1회 자동으로 반환됩니다. 중단되거나 확인되지 않은 작업은 총 30분의 제한 시간이 적용됩니다. 완료된 출력물 저장은 해당 제한 시간 내에 최대 10분 동안 재시도됩니다. 여전히 영상을 전달할 수 없는 경우, 페이지를 닫더라도 보통 5분 이내에 다음 복구 확인 시 크레딧이 자동으로 반환됩니다. 별도의 지원 요청은 필요하지 않습니다. 미확인 제출물은 두 번째 유료 생성을 자동으로 제출하지 않고 확인 절차를 거칩니다. 크리에이티브 측면에서 마음에 들지 않는 완성된 비디오는 기술적으로 실패한 작업과는 다릅니다.

TryMotion은 업로드 및 결과물을 7일의 만료 기간 동안 비공개로 저장합니다. 보관하고 싶은 결과물은 다운로드하십시오. TryMotion 파일을 삭제하면 저장된 복사본이 제거되지만, 추론 제공업체는 자체 정책에 따라 제출된 입력 및 출력을 보유할 수 있습니다. 처리 권한이 없는 자료는 업로드하지 마십시오.

실용적인 첫 실험

정돈된 배경에서 수행된 5초 분량의 손 흔들기, 돌기 또는 단순한 걸음걸이로 시작하십시오. 독창적인 캐릭터 참조 이미지를 사용하고, 실루엣 전체가 보이도록 하며, 짧은 주변 사운드트랙을 유지하십시오. 생성 전에 세 가지 수락 기준을 작성하십시오: 제스처를 알아볼 수 있는가, 캐릭터가 일관성을 유지하는가, 오디오가 정확한 시점에 시작되는가.

더 복잡한 촬영을 시도하기 전에 해당 기준에 따라 결과를 검토하십시오. 이를 통해 워크플로가 프로젝트에 적합한지 구체적으로 판단할 수 있습니다. 첫 테스트의 목표는 소스와 레퍼런스가 무엇을 지원할 수 있는지 파악하고, 그 정보를 바탕으로 다음 테이크를 계획하는 것입니다.