Vervang een persoon in een video en behoud de originele audio

Wat verandert er feitelijk bij een personage-vervanging?

Een volledige character-vervanging is bedoeld om de zichtbare performer te herinterpreteren aan de hand van een referentieafbeelding. Dat kan invloed hebben op het gezicht, de kleding, het silhouet en andere visuele details. Het is ambitieuzer dan het veranderen van een gezichtsregio, dus ga er niet vanuit dat elke achtergrondpixel of elk gebaar onveranderd blijft.

Audio hoeft niet te veranderen alleen omdat het beeld verandert. Uw bron kan spraak, muziek, omgevingsgeluid of een combinatie daarvan bevatten. Het behouden van die track betekent dat het bestaande geluid wordt meegenomen naar de nieuwe video; het betekent niet dat de stem wordt gereconstrueerd of dat het nieuwe personage anders gaat praten.

Begin met te beslissen wat consistent moet blijven. Voor een dansclip kan de muzikale timing de prioriteit zijn. Voor een zwaaiende mascotte is de vorm van het gebaar belangrijker dan de exacte gezichtsbeweging. Voor dialoog wordt de timing van de mond een extra kwaliteitscontrole. Deze beslissing helpt je om een ongeschikte bron af te wijzen voordat je credits uitgeeft.

Bereid één schone, korte bronclip voor

Gebruik één enkel shot met één duidelijk zichtbare volwassen performer. Een stabiele camera, matige beweging en scheiding tussen het onderwerp en de achtergrond zorgen voor minder details om later te inspecteren. Als het onderwerp herhaaldelijk achter meubels langs gaat of het beeld verlaat, begin dan met een makkelijker fragment.

De TryMotion webstudio accepteert een voorbereide H.264 MP4 tussen 1 en 10 seconden, tot 30 frames per seconde, met een maximale uploadgrootte van 25 MB. Trim de video in je gebruikelijke editor voordat je deze uploadt. Er is geen ingebouwde trim-tool, en het hernoemen van een MOV-bestand naar MP4 zal de codec niet converteren.

Luister het ingekorte bestand volledig af. De audio moet op het beoogde moment beginnen, zonder een overgebleven aanloop van een langere opname. Als je editor het geluid onafhankelijk van het beeld heeft verplaatst, herstel dan nu de tijdlijn van de bron. Een stap voor audiobehoud kan een timing-relatie die al fout was in de export niet herstellen.

Kies een referentie die bij het shot past

Je referentie levert de zichtbare identiteit van het personage, geen onbeperkte beschrijving van verborgen details. Een portretfoto geeft weinig houvast voor een uitvoering van het hele lichaam. Wanneer de bron de hele performer toont, gebruik dan een referentie die het hele personage toont met een leesbare omtrek.

Match de pose en de kijkrichting zo nauwkeurig mogelijk. Een naar voren gerichte referentie gecombineerd met een bron die in profiel blijft, zorgt voor een moeilijkere transformatie. Fijne belettering, kleine logo's, vingers en accessoires zijn details om te inspecteren, niet details waarvan je mag uitgaan dat het model ze getrouw zal reproduceren.

Bewaar een kopie van de gebruikte referentie voor elke take. Als je later twee resultaten vergelijkt, geeft het wijzigen van alleen de bron of alleen de referentie een nuttiger vergelijk dan wanneer je alles tegelijk verandert. Een eenvoudig verslag van het shot, de referentie en het beoogde gebaar is voldoende om te beginnen.

Houd audio gescheiden van visuele generatie

Een betrouwbare workflow produceert eerst het vervangende beeld en combineert dat beeld vervolgens met de bron-soundtrack. Het beeld en het geluid moeten hetzelfde startpunt delen. De uiteindelijke export moet een audiotrack bevatten, in plaats van alleen een geactiveerd geluidspictogram in een preview te tonen.

De implementatie van TryMotion bevat een optionele fase voor het samenvoegen van audio wanneer de geüploade video geluid bevat. De studio detecteert of er een audiospoor bestaat en neemt de instelling op in de prijsopgave voor de generatie. Als de bron stil is, kan het inschakelen van behoud geen ontbrekend geluid creëren.

Deze workflow gebruikt een korte bronclip en een originele personage-referentie. P-Video-Replace 720p is de standaard, met 1080p beschikbaar voor hogere kwaliteit. Geïllustreerde scènes beschrijven de workflow en zijn geen bewijs van een specifiek gegenereerd resultaat.

Controleer deze punten voordat je deelt

Bekijk de output eerst op normale snelheid en inspecteer daarna de moeilijke momenten. Een visueel aantrekkelijk eerste frame kan een afwijkende hand, een veranderend kostuum of een verloren gezicht halverwege het shot verbergen. Beoordeel de volledige clip in plaats van te vertrouwen op de thumbnail.

1. Controleer de begin- en eindframes. Bevestig dat de clip de verwachte start, het einde, de kadrering en de oriëntatie heeft.
2. Luister alles na met een koptelefoon. Controleer of het spoor aanwezig is, hoorbaar is en vrij is van een onverwachte tweede soundtrack.
3. Zoek naar een zichtbaar timing-signaal, zoals een klap, voetstap of uitgesproken medeklinker. Vergelijk dit met de bron.
4. Inspecteer handen, gezichtsgrenzen, bedekte lichaamsdelen en eventuele merktekens. Zorg ervoor dat de output geschikt is voor je doel.
5. Download het geëxporteerde bestand en speel het af in een tweede speler. Bevestig dat de opgeslagen video de audio bevat, in plaats van te vertrouwen op een browser-voorbeeld.

Problemen met de meest voorkomende afwijkingen oplossen

Als de soundtrack ontbreekt, controleer dan eerst of de geüploade bron daadwerkelijk een audiostream heeft. Een stille export kan er in een bestandsbrowser identiek uitzien als een normale MP4. Als het geluid lokaal wel bestaat maar niet in het eindbestand, ligt het probleem bij de samenvoeg- of exportfase en niet bij de personage-referentie.

Als de soundtrack consistent te vroeg of te laat is, inspecteer dan de bronmontage en het eerste frame van de output. Een vaste afwijking kan vaak worden gecorrigeerd in een video-editor, maar verberg een terugkerende vertraging in de pipeline niet: deze moet worden onderzocht voordat je een batch genereert. Als de synchronisatie geleidelijk verloopt, controleer dan of het beeld is versneld/vertraagd of dat de duur is gewijzigd.

Als de stem anders klinkt, is er mogelijk een gegenereerd audiospoor gebruikt in plaats van de originele opname. Behoud het bronspoor wanneer identiteit en uitvoering belangrijk zijn. Stemklonen, nasynchronisatie en spraaksynthese moeten afzonderlijke, expliciete keuzes zijn met de juiste machtigingen; deze vallen buiten deze MVP.

Als het personage vervormt tijdens een snelle draai, vereenvoudig dan het beeldprobleem. Probeer een korter fragment, een stabieler shot of een referentie die dichter bij de hoek van de bron ligt. Het herhaaldelijk uitvoeren van dezelfde moeilijke invoer is geen betrouwbare strategie om de kosten te beheersen.

Inzicht in credits en bewaring

Standaard P-Video-Replace 720p kost 10 credits voor een bronbestand tot 5 seconden en 20 voor maximaal 10 seconden. De hogere kwaliteit 1080p-optie kost respectievelijk 20 en 40 credits. De server controleert de duur van de geüploade video voordat een prijsopgave wordt gedaan; bekijk die bevestigde prijs voordat je deze indient.

Credits worden gereserveerd zodra een generatie start. Een bevestigde technische fout retourneert automatisch eenmalig de volledige gereserveerde credits. Vastgelopen of onbevestigde taken hebben een totale tijdslimiet van 30 minuten. Het opslaan van een voltooid resultaat wordt tot 10 minuten geprobeerd, binnen die totale limiet. Als de video nog steeds niet kan worden afgeleverd, worden credits automatisch geretourneerd bij de volgende herstelcontrole, normaal gesproken binnen 5 minuten, zelfs als u de pagina sluit. Er is geen ondersteuningsverzoek vereist. Onbevestigde inzendingen worden gecontroleerd zonder automatisch een tweede betaalde generatie in te dienen. Een voltooide video die je creatief niet aanstaat, is iets anders dan een taak die technisch is mislukt.

TryMotion slaat uploads en outputs privé op met een vervaldatum van 7 dagen. Download het resultaat dat je wilt bewaren. Het verwijderen van een TryMotion-bestand verwijdert die opgeslagen kopie, maar providers van AI-modellen kunnen ingediende inputs en outputs bewaren onder hun eigen beleid. Vermijd het uploaden van materiaal dat je niet mag delen voor verwerking.

Een praktisch eerste experiment

Begin met een zwaaibeweging van 5 seconden, een draai of een simpele stap uitgevoerd tegen een rustige achtergrond. Gebruik een originele character-referentie, houd het volledige silhouet zichtbaar en behoud een korte soundtrack met omgevingsgeluid. Noteer drie acceptatiecriteria voordat u genereert: het gebaar blijft herkenbaar, het personage blijft coherent en de audio begint op het juiste moment.

Beoordeel het resultaat aan de hand van die criteria voordat je een ingewikkelder shot probeert. Dit geeft je een concrete manier om te beslissen of de workflow bij je project past. Het doel van een eerste test is om te leren wat de bron en referentie kunnen ondersteunen, en die informatie vervolgens te gebruiken om de volgende take te plannen.