Remplacez une personne dans une vidéo et conservez l'audio d'origine

Qu'est-ce qui change réellement dans un remplacement de personnage ?

Un remplacement complet du personnage vise à réinterpréter l'interprète visible à l'aide d'une image de référence. Cela peut affecter le visage, les vêtements, la silhouette et d'autres détails visuels. C'est plus ambitieux que de changer une zone du visage, alors ne supposez pas que chaque pixel d'arrière-plan ou geste survivra intact.

L'audio n'a pas besoin de changer simplement parce que l'image change. Votre source peut contenir des paroles, de la musique, une ambiance de pièce ou une combinaison de ceux-ci. Préserver cette piste signifie transférer son son existant dans la nouvelle vidéo ; cela ne signifie pas reconstruire la voix ou faire parler le nouveau personnage différemment.

Commencez par décider ce qui doit rester constant. Pour un clip de danse, la synchronisation musicale peut être la priorité. Pour une mascotte qui fait signe, la forme du geste compte plus que le mouvement exact du visage. Pour le dialogue, la synchronisation de la bouche devient un contrôle de qualité supplémentaire. Cette décision vous aide à rejeter une source inappropriée avant de dépenser des crédits.

Préparez un court clip source propre

Utilisez un seul plan avec un interprète adulte clairement visible. Une caméra stable, des mouvements modérés et une séparation entre le sujet et l'arrière-plan vous donnent moins de détails à inspecter plus tard. Si le sujet passe de façon répétée derrière des meubles ou sort du cadre, commencez par un passage plus facile.

Le studio web de TryMotion accepte un MP4 H.264 préparé entre 1 et 10 secondes, jusqu'à 30 images par seconde, avec une taille d'importation maximale de 25 Mo. Coupez-le dans votre éditeur habituel avant de l'importer. Il n'y a pas d'outil de découpage intégré, et renommer un fichier MOV en MP4 ne convertira pas son codec.

Écoutez le fichier découpé d'un bout à l'autre. Son audio doit commencer au moment prévu, sans introduction restante d'un enregistrement plus long. Si votre éditeur a déplacé le son indépendamment de l'image, corrigez la chronologie source maintenant. Une étape de préservation audio ne peut pas récupérer une relation de synchronisation qui était déjà mauvaise dans l'exportation.

Choisissez une référence qui correspond au plan

Votre référence fournit l'identité visible du personnage, et non une description illimitée des détails cachés. Un portrait donne peu d'indications pour une performance complète du corps. Lorsque la source montre l'interprète entier, utilisez une référence qui montre le personnage entier avec un contour lisible.

Faites correspondre la pose et la direction de vue aussi étroitement que possible. Une référence de face associée à une source qui reste de profil crée une transformation plus difficile. Le lettrage fin, les petits logos, les doigts et les accessoires sont des détails à inspecter, et non des détails dont on suppose que le modèle reproduira fidèlement.

Conservez une copie de la référence utilisée pour chaque prise. Si vous comparez plus tard deux résultats, ne changer que la source ou que la référence vous donne une comparaison plus utile que de tout changer à la fois. Un simple enregistrement du plan, de la référence et du geste prévu suffit pour commencer.

Gardez l'audio séparé de la génération visuelle

Un flux de travail fiable produit d'abord l'image de remplacement puis combine cette image avec la bande-son source. L'image et le son doivent partager le même point de départ. L'exportation finale doit contenir une piste audio, plutôt que de simplement montrer une icône de son activée dans un aperçu.

L'implémentation de TryMotion inclut une étape de fusion audio facultative lorsque la vidéo importée contient du son. Le studio détecte si une piste audio existe et inclut le paramètre dans le devis de génération. Si la source est silencieuse, l'activation de la préservation ne peut pas créer un son manquant.

Ce flux de travail utilise un court clip source et une référence de personnage originale. P-Video-Replace 720p est la valeur par défaut, avec 1080p disponible pour une qualité supérieure. Les scènes illustrées décrivent le flux de travail et ne constituent pas une preuve d'un résultat généré particulier.

Passez en revue ces vérifications avant de partager

Regardez d'abord le résultat à vitesse normale, puis inspectez les moments difficiles. Une première image visuellement attrayante peut cacher une main qui dérive, un costume changeant ou un visage perdu à mi-chemin du plan. Examinez le clip entier plutôt que de vous fier à sa vignette.

1. Vérifiez les images d'ouverture et de fermeture. Confirmez que le clip a le début, la fin, le cadrage et l'orientation attendus.
2. Écoutez attentivement avec des écouteurs. Vérifiez que la piste est présente, audible et exempte d'une deuxième bande-son inattendue.
3. Recherchez un repère de synchronisation visible, comme un battement de mains, un bruit de pas ou une consonne parlée. Comparez-le avec la source.
4. Inspectez les mains, les limites du visage, les parties du corps occultées et les marques de marque. Assurez-vous que le résultat est adapté à votre objectif.
5. Téléchargez et rejouez le fichier exporté dans un deuxième lecteur. Confirmez que la vidéo enregistrée inclut l'audio, plutôt que de dépendre d'un aperçu de navigateur.

Dépanner les incohérences les plus courantes

Si la bande-son est absente, vérifiez d'abord si la source importée contient réellement un flux audio. Une exportation silencieuse peut sembler identique à un MP4 normal dans un navigateur de fichiers. Si le son existe localement mais pas dans le fichier final, le problème provient de l'étape de fusion ou d'exportation plutôt que de la référence du personnage.

Si la bande-son est systématiquement en avance ou en retard, inspectez le montage source et la première image du résultat. Un décalage fixe peut souvent être corrigé dans un éditeur vidéo, mais ne masquez pas un décalage de pipeline récurrent : il doit être étudié avant de générer un lot. Si la synchronisation dérive progressivement, vérifiez si l'image a été resynchronisée ou si sa durée a changé.

Si la voix semble différente, une piste audio générée a peut-être été utilisée à la place de l'enregistrement original. Conservez la piste source lorsque l'identité et la performance comptent. Le clonage vocal, le doublage et la synthèse vocale devraient être des choix séparés et explicites avec les bonnes autorisations ; ils sont en dehors de ce MVP.

Si le personnage se brise pendant un virage rapide, simplifiez le problème de l'image. Essayez une section plus courte, un plan plus stable ou une référence plus proche de l'angle source. Exécuter de manière répétée la même entrée difficile n'est pas une stratégie fiable pour contrôler les coûts.

Comprendre les crédits et la conservation

P-Video-Replace 720p par défaut coûte 10 crédits pour une source allant jusqu'à 5 secondes et 20 pour jusqu'à 10 secondes. L'option 1080p de meilleure qualité coûte respectivement 20 et 40 crédits. Le serveur vérifie la durée de la vidéo importée avant d'émettre un devis ; examinez ce prix confirmé avant de soumettre.

Les crédits sont réservés lorsqu'une génération commence. Une défaillance technique confirmée restitue automatiquement la totalité des crédits réservés une seule fois. Les tâches bloquées ou non confirmées ont une limite globale de 30 minutes. L'enregistrement d'un résultat terminé est réessayé pendant un maximum de 10 minutes, dans cette limite globale. Si la vidéo ne peut toujours pas être livrée, les crédits sont restitués automatiquement lors du prochain contrôle de récupération, normalement dans les 5 minutes, même si vous fermez la page. Aucune demande d'assistance n'est requise. Les soumissions non confirmées sont vérifiées sans soumettre automatiquement une deuxième génération payante. Une vidéo terminée que vous n'aimez pas sur le plan créatif est différente d'une tâche qui a techniquement échoué.

TryMotion stocke les fichiers importés et les résultats en privé avec une expiration de 7 jours. Téléchargez le résultat que vous souhaitez conserver. La suppression d'un fichier TryMotion supprime cette copie stockée, mais les fournisseurs d'inférence peuvent conserver les entrées et sorties soumises selon leurs propres politiques. Évitez d'importer du matériel que vous n'êtes pas autorisé à partager pour traitement.

Une première expérience pratique

Commencez par un signe de la main de 5 secondes, un tour ou un simple pas exécuté sur un arrière-plan épuré. Utilisez une référence de personnage originale, gardez toute sa silhouette visible et conservez une courte bande-son ambiante. Écrivez trois critères d'acceptation avant de générer : le geste reste reconnaissable, le personnage reste cohérent et l'audio commence au bon moment.

Examinez le résultat par rapport à ces critères avant d'essayer un plan plus compliqué. Cela vous donne un moyen concret de décider si le flux de travail correspond à votre projet. Le but d'un premier test est d'apprendre ce que la source et la référence peuvent supporter, puis d'utiliser ces informations pour planifier la prochaine prise.