Ganti orang dalam video dan pertahankan audio aslinya

Apa yang sebenarnya berubah dalam penggantian karakter?

Penggantian karakter secara utuh bertujuan untuk menginterpretasikan kembali penampil yang terlihat menggunakan gambar referensi. Hal itu dapat memengaruhi wajah, pakaian, siluet, dan detail visual lainnya. Ini lebih ambisius daripada sekadar mengubah area wajah, jadi jangan berasumsi setiap piksel latar belakang atau gerakan akan tetap tidak berubah.

Audio tidak perlu berubah hanya karena gambar berubah. Sumber Anda mungkin berisi ucapan, musik, suasana ruangan, atau kombinasinya. Mempertahankan trek tersebut berarti membawa suara yang ada ke dalam video baru; itu tidak berarti merekonstruksi suara atau membuat karakter baru berbicara secara berbeda.

Mulailah dengan memutuskan apa yang harus tetap konsisten. Untuk klip tarian, pengaturan waktu musik mungkin menjadi prioritas. Untuk maskot yang melambai, bentuk gestur lebih penting daripada gerakan wajah yang tepat. Untuk dialog, sinkronisasi mulut menjadi pemeriksaan kualitas tambahan. Keputusan ini membantu Anda menolak sumber yang tidak sesuai sebelum menghabiskan kredit.

Siapkan satu klip sumber yang bersih dan pendek

Gunakan bidikan tunggal dengan satu pemeran dewasa yang terlihat jelas. Kamera yang stabil, gerakan sedang, dan pemisahan antara subjek dan latar belakang memberi Anda lebih sedikit detail untuk diperiksa nanti. Jika subjek berulang kali lewat di belakang furnitur atau meninggalkan bingkai, mulailah dengan bagian yang lebih mudah.

Studio web TryMotion menerima MP4 H.264 yang telah disiapkan antara 1 hingga 10 detik, hingga 30 frame per detik, dengan ukuran impor maksimum 25 MB. Potong di editor biasa Anda sebelum mengimpor. Tidak ada alat pemotong bawaan, dan mengubah nama file MOV menjadi MP4 tidak akan mengonversi codec-nya.

Dengarkan file yang telah dipotong sepenuhnya. Audionya harus dimulai pada momen yang diinginkan, tanpa sisa awalan dari rekaman yang lebih panjang. Jika editor Anda telah menggeser suara secara terpisah dari gambar, perbaiki linimasa sumber sekarang. Langkah pelestarian audio tidak dapat memulihkan hubungan waktu yang sudah salah saat pengeksporan.

Pilih referensi yang sesuai dengan bidikan

Referensi Anda memberikan identitas visual karakter, bukan deskripsi tak terbatas tentang detail yang tersembunyi. Foto kepala memberikan sedikit panduan untuk performa seluruh tubuh. Saat sumber menunjukkan seluruh pemeran, gunakan referensi yang menunjukkan seluruh karakter dengan garis luar yang terbaca.

Cocokkan pose dan arah pandangan sedekat mungkin secara praktis. Referensi yang menghadap ke depan yang dipasangkan dengan sumber yang tetap menyamping (profil) menciptakan transformasi yang lebih sulit. Huruf halus, logo kecil, jari, dan aksesori adalah detail yang harus diperiksa, bukan detail yang diasumsikan akan direproduksi secara akurat oleh model.

Simpan salinan referensi yang digunakan untuk setiap pengambilan gambar. Jika Anda kemudian membandingkan dua hasil, mengubah hanya sumber atau hanya referensi akan memberikan perbandingan yang lebih berguna daripada mengubah semuanya sekaligus. Catatan sederhana tentang bidikan, referensi, dan gestur yang dimaksud sudah cukup untuk memulai.

Pisahkan audio dari pembuatan visual

Alur kerja yang andal menghasilkan gambar pengganti terlebih dahulu dan kemudian menggabungkan gambar tersebut dengan trek suara sumber. Gambar dan suara harus berbagi titik awal yang sama. Ekspor final harus berisi trek audio, bukan sekadar menunjukkan ikon suara yang diaktifkan dalam pratinjau.

Implementasi TryMotion menyertakan tahap penggabungan audio opsional saat video yang diimpor berisi audio. Studio mendeteksi apakah trek audio ada dan menyertakan pengaturan tersebut dalam penawaran pembuatan. Jika sumber tidak bersuara, mengaktifkan pelestarian audio tidak dapat menciptakan suara yang hilang.

Alur kerja ini menggunakan klip sumber pendek dan referensi karakter asli. P-Video-Replace 720p adalah default, dengan 1080p tersedia untuk kualitas yang lebih tinggi. Adegan yang diilustrasikan menggambarkan alur kerja dan bukan bukti dari hasil pembuatan tertentu.

Tinjau pemeriksaan ini sebelum membagikan

Tonton hasil video pada kecepatan normal terlebih dahulu, lalu periksa momen-momen yang sulit. Bingkai pertama yang menarik secara visual dapat menyembunyikan tangan yang bergeser, kostum yang berubah, atau wajah yang hilang di tengah bidikan. Tinjau seluruh klip daripada hanya mengandalkan thumbnail-nya.

1. Periksa bingkai pembuka dan penutup. Pastikan klip memiliki awal, akhir, pembingkaian (framing), dan orientasi yang sesuai harapan.
2. Dengarkan menggunakan headphone. Pastikan trek ada, terdengar, dan bebas dari soundtrack kedua yang tidak diharapkan.
3. Cari isyarat waktu yang terlihat, seperti tepukan tangan, langkah kaki, atau konsonan yang diucapkan. Bandingkan dengan sumbernya.
4. Periksa tangan, batas wajah, bagian tubuh yang terhalang, dan tanda merek apa pun. Pastikan hasilnya sesuai untuk tujuan Anda.
5. Unduh dan putar ulang file yang diekspor di pemutar kedua. Pastikan video yang disimpan menyertakan audio, alih-alih hanya mengandalkan pratinjau browser.

Pecahkan masalah ketidaksesuaian yang paling umum

Jika soundtrack tidak ada, pertama-tama periksa apakah sumber yang diimpor benar-benar memiliki aliran audio. Ekspor yang membisu bisa terlihat identik dengan MP4 normal di penjelajah file. Jika suara ada secara lokal tetapi tidak di file akhir, masalahnya ada pada tahap penggabungan atau ekspor, bukan pada referensi karakter.

Jika soundtrack terus-menerus mendahului atau terlambat, periksa pengeditan sumber dan bingkai pertama hasil video. Offset tetap sering kali dapat diperbaiki di editor video, tetapi jangan menyembunyikan offset pipeline yang berulang: hal ini harus diselidiki sebelum melakukan pembuatan massal (batch). Jika sinkronisasi bergeser secara bertahap, periksa apakah gambar telah diatur ulang waktunya atau durasinya berubah.

Jika suara terdengar berbeda, trek audio hasil generator mungkin telah digunakan alih-alih rekaman asli. Pertahankan trek sumber jika identitas dan performa sangat penting. Kloning suara, dubbing, dan sintesis ucapan harus menjadi pilihan terpisah yang eksplisit dengan izin yang tepat; hal tersebut berada di luar MVP ini.

Jika karakter rusak saat melakukan putaran cepat, sederhanakan masalah gambar. Coba bagian yang lebih pendek, bidikan yang lebih stabil, atau referensi yang lebih dekat dengan sudut sumber. Berulang kali menjalankan input sulit yang sama bukanlah strategi yang andal untuk mengendalikan biaya.

Pahami kredit dan penyimpanan

Default P-Video-Replace 720p memerlukan 10 kredit untuk sumber hingga 5 detik dan 20 untuk hingga 10 detik. Opsi kualitas lebih tinggi 1080p masing-masing memerlukan 20 dan 40 kredit. Server memeriksa durasi video yang diimpor sebelum memberikan penawaran; tinjau harga yang dikonfirmasi tersebut sebelum mengirimkan.

Kredit dipesan saat pembuatan dimulai. Kegagalan teknis yang terkonfirmasi secara otomatis mengembalikan kredit penuh yang dipesan satu kali. Pekerjaan yang macet atau tidak terkonfirmasi memiliki batas keseluruhan 30 menit. Menyimpan hasil yang sudah selesai dicoba kembali hingga 10 menit, dalam batas keseluruhan tersebut. Jika video masih tidak dapat dikirimkan, kredit kembali secara otomatis pada pemeriksaan pemulihan berikutnya, biasanya dalam 5 menit, meskipun Anda menutup halaman. Tidak diperlukan permintaan dukungan. Pengiriman yang tidak terkonfirmasi akan diperiksa tanpa secara otomatis mengirimkan pembuatan berbayar kedua. Video selesai yang tidak Anda sukai secara kreatif berbeda dengan pekerjaan yang gagal secara teknis.

TryMotion menyimpan impor dan hasil secara privat dengan masa berlaku 7 hari. Unduh hasil yang ingin Anda simpan. Menghapus file TryMotion akan menghapus salinan yang disimpan tersebut, tetapi penyedia inferensi mungkin menyimpan input dan output yang dikirimkan berdasarkan kebijakan mereka sendiri. Hindari mengimpor materi yang tidak diizinkan untuk Anda bagikan untuk diproses.

Eksperimen pertama yang praktis

Mulailah dengan lambaian 5 detik, putaran, atau langkah sederhana yang dilakukan dengan latar belakang yang rapi. Gunakan referensi karakter asli, biarkan seluruh siluetnya terlihat, dan pertahankan trek suara lingkungan yang pendek. Tuliskan tiga kriteria penerimaan sebelum Anda membuat: gerakan tetap dapat dikenali, karakter tetap koheren, dan audio dimulai pada saat yang tepat.

Tinjau hasilnya berdasarkan kriteria tersebut sebelum mencoba bidikan yang lebih rumit. Ini memberi Anda cara konkret untuk memutuskan apakah alur kerja sesuai dengan proyek Anda. Tujuan pengujian pertama adalah untuk mempelajari apa yang dapat didukung oleh sumber dan referensi, lalu gunakan informasi tersebut untuk merencanakan pengambilan gambar berikutnya.