การแทนที่ตัวละคร (character swap) vs. การแทนที่ใบหน้า (face swap): วิดีโอของคุณต้องการแบบไหน?

กำหนดการเปลี่ยนแปลงก่อนเลือกเครื่องมือ

ลองเขียนประโยคบรรยายช็อตที่เสร็จสมบูรณ์โดยไม่ต้องระบุชื่อโมเดล เช่น นักแสดงใส่ชุดเดิมแต่เปลี่ยนใบหน้าใหม่, นักเต้นกลายเป็นหุ่นยนต์สไตล์ล้ำสมัย, หรือมาสคอตเลียนแบบการโบกมือสั้นๆ บรีฟทั้งสามรูปแบบนี้ไม่สามารถใช้แทนกันได้ การเลือกเวิร์กโฟลว์จากบรีฟงานจะมีประโยชน์มากกว่าการเลือกชื่อโมเดลที่ใหม่ที่สุดก่อน

การแทนที่ใบหน้าจะมุ่งเป้าไปที่บริเวณใบหน้าในขณะที่พยายามรักษาการแสดงเดิมและฉากรอบข้างไว้ให้มากที่สุดเท่าที่เครื่องมือจะทำได้ ส่วนการแทนที่ตัวละคร (character replacement) มีเป้าหมายเพื่อการเปลี่ยนแปลงรูปลักษณ์ที่กว้างกว่า งานประเภทหลังนี้อาจเกี่ยวข้องกับส่วนประกอบของเฟรมที่ใหญ่ขึ้น และมีความไม่แน่นอนมากขึ้นเกี่ยวกับเสื้อผ้า สัดส่วน มือ และการโต้ตอบกับฉาก

ชื่อเรียกทั้งสองแบบไม่ใช่การรับประกันคุณภาพ ผลิตภัณฑ์สองอย่างที่ใช้คำคล้ายกันอาจรับข้อมูลนำเข้าที่ต่างกันหรือเลือกวิธีการตัดต่อที่ต่างกัน ให้มองหาตัวอย่างจากต้นฉบับสู่ผลลัพธ์ (source-to-result) ที่คล้ายกับช็อตของคุณ โดยเห็นคลิปต้นฉบับด้วย แทนที่จะตัดสินเครื่องมือจากผลลัพธ์ที่ดูดีเพียงอย่างเดียวโดยไม่มีภาพอ้างอิง

เมื่อการสลับใบหน้าเป็นตัวเลือกที่เหมาะสมกว่า

หากเสื้อผ้า การเคลื่อนไหวร่างกาย และสภาพแวดล้อมเหมาะสมอยู่แล้ว การเปลี่ยนเฉพาะใบหน้าอาจเพียงพอ ตัวอย่างเช่น ช็อตล้อเลียนที่ได้รับอนุญาตอาจต้องการรักษาชุดและการออกแบบท่าเต้นเดิมของผู้แสดงไว้ การสร้างใหม่ทั้งตัวจะทำให้เกิดการเปลี่ยนแปลงที่โจทย์ไม่ได้ต้องการ

ตรวจสอบมุมด้านข้างใบหน้า การแสดงออกทางสีหน้า และการเปลี่ยนผ่านระหว่างเฟรม ควรตรวจสอบการแทนที่ในขณะที่ผู้แสดงกำลังพูด หันหน้า และผ่านการเปลี่ยนแปลงของแสง เฟรมภาพนิ่งที่ดีไม่ใช่ข้อพิสูจน์ถึงความสม่ำเสมอของภาพเคลื่อนไหว (temporal consistency)

เว็บสตูดิโอของ TryMotion มุ่งเน้นไปที่การเปลี่ยนตัวละคร (character replacement) ไม่ได้ถูกวางตำแหน่งมาเพื่อใช้แทนที่เวิร์กโฟลว์การสลับใบหน้า (face-swap) โดยเฉพาะ หากคุณต้องการเปลี่ยนแค่ใบหน้าเพียงอย่างเดียว ควรเปรียบเทียบกับเครื่องมือที่รองรับการแก้ไขเฉพาะส่วนนั้นโดยตรง ก่อนที่จะตัดสินใจใช้การแปลงผลที่ครอบคลุมกว้างกว่า

เมื่อการเปลี่ยนตัวละครทั้งตัวเหมาะสมกว่า

หุ่นยนต์ มาสคอตที่เป็นภาพประกอบ หรือตัวละครสมมติที่เป็นออริจินัล มักต้องการมากกว่าแค่ใบหน้า ชุด ร่างกาย แขนขา และรูปร่างโดยรวมอาจเป็นสิ่งที่ทำให้จดจำตัวละครนั้นได้ การแทนที่ตัวละคร (character replacement) คือหมวดหมู่ที่เหมาะสมเมื่อลักษณะเฉพาะเหล่านี้เป็นหัวใจสำคัญของคอนเซปต์คุณ

ส่วนที่ยากคือการรักษาความสัมพันธ์ระหว่างเอกลักษณ์และการเคลื่อนไหว ร่างกายมาสคอตที่กว้างอาจไม่สามารถเคลื่อนไหวตามรูปร่างมนุษย์ที่ผอมบางได้อย่างเป็นธรรมชาติ ตัวละครที่มีแขนสั้นมากอาจเอื้อมไม่ถึงพร็อพแบบเดียวกับที่นักแสดงทำ ควรวางแผนท่าทางที่เหมาะสมกับทั้งภาพอ้างอิงและการแสดงต้นฉบับ

เริ่มจากให้การปฏิสัมพันธ์ทางกายภาพเรียบง่ายไว้ก่อน ท่ากวักมือสั้นๆ นั้นประเมินได้ง่ายกว่าการกิน การหยิบจับวัตถุขนาดเล็ก หรือการเคลื่อนที่ผ่านฝูงชน หากไอเดียต้องอาศัยการสัมผัสที่แม่นยำ ควรเผื่อเวลาสำหรับการตรวจสอบและการตัดต่อแบบดั้งเดิม แทนที่จะสมมติว่าผลลัพธ์จะพร้อมใช้งานสำหรับโฆษณาได้ทันที

เปรียบเทียบขั้นตอนการทำงานตามส่วนประกอบของช็อต

สำหรับใบหน้า ให้ตรวจสอบเอกลักษณ์ การแสดงออก ทิศทาง และความสม่ำเสมอระหว่างเฟรม สำหรับเครื่องแต่งกาย ให้ตรวจสอบสี ตะเข็บ รูปทรงที่ซ้ำกัน และโลโก้ สำหรับรูปร่าง ให้ตรวจสอบโครงร่างทั้งหมดระหว่างการเคลื่อนไหว สำหรับฉาก ให้ตรวจสอบเงา พร็อพ และขอบรอบตัวผู้แสดง

เสียงเป็นส่วนที่ต้องตัดสินใจแยกต่างหากในทุกขั้นตอนการทำงาน การใช้แทร็กเสียงเดิมซ้ำไม่จำเป็นต้องมีการแทนที่หรือจำลองเสียง (cloning) เก็บเสียงบันทึกต้นฉบับไว้เมื่อโปรเจกต์ของคุณขึ้นอยู่กับจังหวะของเสียงนั้น และตรวจสอบว่าผลลัพธ์ที่บันทึกไว้นั้นมีแทร็กเสียงดังกล่าวอยู่จริง

การเคลื่อนที่ของกล้องเป็นอีกหนึ่งความท้าทายที่แยกต่างหาก กล้องที่เคลื่อนไหวจะเปลี่ยนสิ่งที่โมเดลต้องตีความเมื่อเวลาผ่านไป หากคุณต้องการเปรียบเทียบเอนจินอย่างยุติธรรม ให้เริ่มจากวิดีโอต้นฉบับที่นิ่งเหมือนกัน ภาพอ้างอิงเดียวกัน และความยาวผลลัพธ์ที่เท่ากัน มิฉะนั้น ความยากที่แตกต่างกันของข้อมูลนำเข้าอาจถูกเข้าใจผิดว่าเป็นความต่างของคุณภาพเอนจินได้

สร้างภาพอ้างอิงที่มีประโยชน์

ภาพอ้างอิงควรแสดงรายละเอียดที่คุณต้องการรักษาไว้ สำหรับการตัดต่อที่เน้นใบหน้า ใบหน้าต้องชัดเจน สำหรับการตัดต่อตัวละครทั้งตัว ให้แสดงเครื่องแต่งกายและรูปร่างด้วย ภาพที่มีฉากหลังโดดเด่นเกินไปจะทำให้พื้นที่ในการแสดงรายละเอียดของตัวแบบที่คุณสนใจจริงๆ ลดน้อยลง

หลีกเลี่ยงการซ่อนลักษณะสำคัญไว้หลังพร็อพขนาดใหญ่หรือเอฟเฟกต์ที่ดูเกินจริง ภาพอ้างอิงที่ดูสะอาดตาจะช่วยให้ระบุได้ง่ายขึ้นว่าการเปลี่ยนแปลงในผลลัพธ์มาจากข้อมูลนำเข้าที่ไม่ชัดเจนหรือมาจากกระบวนการสร้าง (generation) ใช้ฉากหลังที่เรียบง่ายถ้าเป็นไปได้ และเก็บสำเนาของภาพอ้างอิงที่ใช้จริงไว้ด้วย

พยายามให้ภาพอ้างอิงมีมุมกล้องตรงกับช็อตที่ตั้งใจไว้ ต้นฉบับแบบเต็มตัวที่ใช้คู่กับภาพอ้างอิงเฉพาะใบหน้า จะทำให้โมเดลต้องตัดสินใจเรื่องรูปลักษณ์ส่วนที่เหลือเองเป็นอย่างมาก นั่นอาจยอมรับได้สำหรับการค้นหาไอเดีย แต่เป็นจุดเริ่มต้นที่ไม่ดีนักเมื่อตัวละครของคุณต้องการชุดหรือเอกลักษณ์ของแบรนด์ที่เฉพาะเจาะจง

ใช้ตารางเปรียบเทียบขนาดเล็ก

ก่อนทำการสร้าง ให้คะแนนในแง่มุมที่มีความสำคัญต่อโปรเจกต์ของคุณ คุณไม่จำเป็นต้องมีเกณฑ์การทดสอบที่ซับซ้อน เพียงแค่คำถามว่า 'ผ่านหรือไม่ผ่าน' ไม่กี่ข้อ ก็สามารถสร้างบันทึกที่ดีกว่าการกล่าวลอยๆ ว่าผลลัพธ์รอบหนึ่งดูสมจริงกว่าอีกรอบ

1. เอกลักษณ์ (Identity): ใบหน้าหรือตัวละครที่ตั้งใจไว้สามารถจดจำได้ตลอดทั้งคลิปหรือไม่?
2. การเคลื่อนไหว (Movement): การกระทำหลักยังคงดูออกหรือไม่ โดยไม่มีการเปลี่ยนรูปของแขนขาที่คาดไม่ถึง?
3. ฉาก (Scene): พร็อพที่สำคัญและขอบเขตของฉากหลังสามารถใช้งานได้หรือไม่?
4. จังหวะเวลา (Timing): ภาพและเสียงที่รักษาไว้ยังคงตรงกันหรือไม่?
5. ความสามารถในการตัดต่อ (Editability): ผลลัพธ์สามารถนำไปประกอบในงานขั้นสุดท้ายได้โดยไม่ทิ้งข้อบกพร่องสำคัญไว้หรือไม่?

ตำแหน่งการใช้งานของ TryMotion เว็บสตูดิโอ

เว็บสตูดิโอใช้วิดีโอที่อัปโหลดหนึ่งไฟล์และภาพอ้างอิงตัวละครหนึ่งภาพ โดยรองรับคลิปที่เตรียมไว้สูงสุด 10 วินาที มีตัวเลือกเริ่มต้นที่ 720p และ 1080p สำหรับคุณภาพที่สูงกว่า สตูดิโอไม่รองรับการนำเข้า URL จากโซเชียลมีเดีย ไม่รองรับขั้นตอนการแทนที่บุคคลหลายคน และไม่มีเครื่องมือตัดต่อวิดีโอแบบยาว โปรดเตรียมไฟล์ต้นฉบับของคุณให้เรียบร้อยจากภายนอกสตูดิโอ

TryMotion ตั้งค่าเริ่มต้นเป็น P-Video-Replace 720p โดยใช้ 10 เครดิตสำหรับวิดีโอระดับ 5 วินาที ส่วนตัวเลือก 1080p ที่คุณภาพสูงกว่าจะใช้ 20 เครดิต นอกจากนี้ยังมีเวิร์กโฟลว์ทางเลือกจาก Wan Animate, Seedance 2.5 และ Kling motion control ให้เลือกใช้เมื่อพร้อมให้บริการ โดยสตูดิโอจะแสดงสถานะการใช้งานและราคาประเมินก่อนที่คุณจะส่งคำขอ

ราคา Credits จะช่วยกำหนดขอบเขตที่ชัดเจนสำหรับการทดลองแต่ละครั้ง ระดับ P-Video 720p แบบยาวใช้ 20 credits ตัวเลือก 1080p แบบยาวใช้ 40 การซื้อแพ็กเกจที่ใหญ่ขึ้นไม่ได้ทำให้ช็อตที่ยากนั้นง่ายขึ้น ดังนั้นควรทดสอบวิดีโอต้นฉบับและภาพอ้างอิงของคุณด้วยการทดสอบเล็กๆ ก่อนวางแผนทำจำนวนมาก

การขออนุญาตเป็นส่วนหนึ่งของโจทย์งานโปรดักชัน

โปรดใช้ฟุตเทจ ภาพอ้างอิง และเสียงที่คุณเป็นเจ้าของหรือได้รับอนุญาตให้นำมาประมวลผล การได้รับอนุญาตให้ดูคลิปออนไลน์ไม่ได้หมายความว่าคุณได้รับอนุญาตให้ดัดแปลงรูปลักษณ์ของบุคคลหรือนำเพลงประกอบมาใช้ซ้ำโดยอัตโนมัติ สำหรับงานลูกค้า ควรแจ้งรายละเอียดการแปลงผลที่ต้องการให้ชัดเจนก่อนทำการบันทึกการแสดง

แจ้งให้ผู้ชมทราบเมื่อมีการเปลี่ยนแปลงที่อาจทำให้เข้าใจผิดว่าเป็นวิดีโอจริง หลีกเลี่ยงการทำให้เกิดความนัยว่าบุคคลจริงให้การรับรองแบรนด์หรือกระทำการใดๆ ที่พวกเขาไม่ได้อนุญาต ข้อกำหนดการใช้งานเว็บของ TryMotion ห้ามการปลอมแปลงที่หลอกลวงและเนื้อหาที่ละเมิดลิขสิทธิ์หรือสร้างความเสียหาย

เก็บไฟล์ต้นฉบับและเอกสารการอนุมัติไว้กับโปรเจกต์เสมอ นี่คือการจัดการโปรดักชันที่มีประโยชน์แม้จะเป็นมาสคอตสมมติที่ชัดเจนก็ตาม: การออกแบบตัวละคร ผู้แสดง ดนตรี และการเผยแพร่ขั้นสุดท้ายอาจมีเจ้าของที่แตกต่างกัน บันทึกโปรเจกต์ที่ชัดเจนจะช่วยให้การตัดต่อและการอนุมัติในภายหลังง่ายขึ้น

เลือกทางเลือกที่เรียบง่ายที่สุดที่ตอบโจทย์งาน

หากการแทนที่ใบหน้าทำให้ไอเดียของคุณสมบูรณ์แล้ว ให้ประเมินขั้นตอนการทำงานเฉพาะสำหรับใบหน้า หากไอเดียขึ้นอยู่กับการเปลี่ยนร่างกายหรือชุดของตัวละคร ให้ประเมินขั้นตอนการทำงานแบบแทนที่ตัวละครทั้งตัว หากขึ้นอยู่กับการสัมผัสพร็อพที่แม่นยำ ตัวอักษร หรือการแสดงภาพผลิตภัณฑ์ ให้รวมการตัดต่อแบบดั้งเดิมไว้ในแผนตั้งแต่เริ่มต้น

เลือกการทดลองครั้งต่อไปจากสิ่งที่คุณได้เรียนรู้จากผลลัพธ์ก่อนหน้า รูปร่างที่สั่นไหวอาจบ่งบอกว่าควรกลับไปดูเรื่องการเคลื่อนไหวหรือการจัดเฟรม ชุดที่เลื่อนลอยอาจบ่งบอกว่าควรกลับไปดูภาพอ้างอิงหรือลดความซับซ้อนลง เสียงที่ไม่ตรงอาจบ่งบอกว่าควรตรวจสอบการรวมเสียง การวินิจฉัยส่วนที่ล้มเหลวนั้นมีประโยชน์มากกว่าการเปลี่ยนเอนจินไปเรื่อยๆ โดยไม่มีสมมติฐานที่ชัดเจน

สำหรับมาสคอตที่เป็นออริจินัล ให้เริ่มจากท่าทางเดียวที่ชัดเจนและภาพอ้างอิงที่สะอาดตา สำหรับการเปลี่ยนเฉพาะใบหน้า ให้ส่วนที่เหลือของช็อตคงที่ ในทั้งสองกรณี การทดสอบสั้นๆ ที่ควบคุมตัวแปรได้ จะช่วยให้คุณตัดสินใจได้ในทางปฏิบัติว่าขั้นตอนการทำงานนั้นคุ้มค่ากับเวลาและงบประมาณของคุณหรือไม่