คู่มืออุตสาหกรรม

AI ในภาพยนตร์และเอฟเฟ็กต์ภาพ

AI กำลังเปลี่ยนการสร้างภาพยนตร์จากสคริปต์หนึ่งไปอีกหน้าจอ — เร่งเอฟเฟกต์ภาพ ลดอายุของนักแสดง แปลบทสนทนา และแม้แต่สร้างคลิปวิดีโอทั้งหมดจากข้อความ

ภาพรวม

AI กำลังเปลี่ยนการสร้างภาพยนตร์จากสคริปต์หนึ่งไปอีกหน้าจอ — เร่งเอฟเฟกต์ภาพ ลดอายุของนักแสดง แปลบทสนทนา และแม้แต่สร้างคลิปวิดีโอทั้งหมดจากข้อความ สิ่งสำคัญคือสามารถประหยัดเวลาและต้นทุนของผลกระทบที่ครั้งหนึ่งเคยต้องใช้กองทัพของศิลปิน ขณะเดียวกันก็ทำให้เกิดคำถามหนักๆ เกี่ยวกับงาน ความยินยอม และความถูกต้อง

AI ในภาพยนตร์และเอฟเฟ็กต์ภาพใช้ AI ในสภาพแวดล้อมเฉพาะโดเมน ซึ่งกฎระเบียบ การปฏิบัติงาน และการยอมรับความเสี่ยงเป็นตัวกำหนดตัวเลือกการออกแบบอย่างมาก

เจาะลึก

ในวิชวลเอฟเฟกต์ (VFX) ตอนนี้ AI จะทำให้งานที่ต้องใช้แรงงานมากเป็นอัตโนมัติ เช่น การหมุนกล้อง (การตัดวัตถุออกจากพื้นหลัง) การล้างการจับภาพเคลื่อนไหว และการขยายขนาดภาพเก่าให้มีความละเอียดสูง การลดอายุของการเรียนรู้ด้วยเครื่องจักรและการเพิ่มสองเท่าทางดิจิทัลช่วยให้สตูดิโอปรับเปลี่ยนอายุที่ปรากฏของนักแสดงหรือสร้างนักแสดงขึ้นมาใหม่ได้ ดังที่เห็นได้จากการลดอายุในภาพยนตร์แฟรนไชส์รายใหญ่ โมเดลวิดีโอทั่วไปสามารถสร้างภาพเสมือนจริงสั้นๆ จากข้อความแจ้ง ซึ่งมีประโยชน์สำหรับการแสดงภาพล่วงหน้า สตอรี่บอร์ด และ B-roll เครื่องมือพากย์และลิปซิงค์ด้วย AI แปลภาพยนตร์เป็นหลายภาษาในขณะที่จับคู่การเคลื่อนไหวของปาก การเรนเดอร์แบบนิวรอลและการสาดแบบเกาส์เซียนจะสร้างฉาก 3 มิติจากภาพถ่าย ผู้ตัดต่อใช้ AI เพื่อประกอบการตัดแบบหยาบ ซิงค์เสียง เกรดสี และทำความสะอาดเสียง เครื่องมือเหล่านี้บีบอัดไทม์ไลน์แต่ได้กระตุ้นให้เกิดการถกเถียงกันในอุตสาหกรรม ซึ่งเป็นศูนย์กลางของการนัดหยุดงานฮอลลีวูดในปี 2023 เกี่ยวกับสิทธิในความเหมือนและงานสร้างสรรค์

ข้อมูลเชิงลึกทางเทคนิค

การชะลอวัยสมัยใหม่มักใช้แบบจำลองใบหน้าที่ได้รับการฝึกฝนจากฟุตเทจที่เก็บถาวรของนักแสดง จากนั้นเรนเดอร์ใบหน้าที่อ่อนเยาว์แบบเฟรมต่อเฟรม บางครั้งมีการปรับปรุงตามการแพร่กระจายเพื่อแก้ไขการสั่นไหวและแสง ระบบแปลงข้อความเป็นวิดีโอใช้หม้อแปลงแบบกระจายที่ได้รับการฝึกอบรมเกี่ยวกับชุดข้อมูลคำบรรยายวิดีโอขนาดใหญ่ เรียนรู้ที่จะปฏิเสธลำดับของเฟรมในขณะที่ยังคงความสอดคล้องชั่วคราว Neural Radiance Field (NeRF) และการกระเซ็นแบบเกาส์เซียนจะสร้างฉาก 3 มิติขึ้นมาใหม่โดยการปรับแสงและสีที่ปรากฏจากหลายมุมมองให้เหมาะสม

การเรียนรู้ AI ในภาพยนตร์และเอฟเฟ็กต์ภาพ

AI กำลังเปลี่ยนการสร้างภาพยนตร์จากสคริปต์หนึ่งไปอีกหน้าจอ — เร่งเอฟเฟกต์ภาพ ลดอายุของนักแสดง แปลบทสนทนา และแม้แต่สร้างคลิปวิดีโอทั้งหมดจากข้อความ สิ่งสำคัญคือสามารถประหยัดเวลาและต้นทุนของผลกระทบที่ครั้งหนึ่งเคยต้องใช้กองทัพของศิลปิน ขณะเดียวกันก็ทำให้เกิดคำถามหนักๆ เกี่ยวกับงาน ความยินยอม และความถูกต้อง AI ในภาพยนตร์และเอฟเฟ็กต์ภาพใช้ AI ในสภาพแวดล้อมเฉพาะโดเมน ซึ่งกฎระเบียบ การปฏิบัติงาน และการยอมรับความเสี่ยงเป็นตัวกำหนดตัวเลือกการออกแบบอย่างมาก เพื่อสร้างความเข้าใจอย่างลึกซึ้ง ให้ปฏิบัติต่อ AI ในภาพยนตร์และเอฟเฟ็กต์ภาพเสมือนเป็นแบบจำลองการดำเนินงาน ไม่ใช่คุณลักษณะเดียว: กำหนดผลลัพธ์ที่ต้องการ ชี้แจงสมมติฐาน และแยกสิ่งที่ระบบสามารถทำได้อย่างน่าเชื่อถือจากสิ่งที่ยังต้องใช้วิจารณญาณจากผู้เชี่ยวชาญ

ในทางปฏิบัติ ทีมที่แข็งแกร่งที่ใช้ AI ในภาพยนตร์และเอฟเฟ็กต์ภาพจะจัดความสามารถทางเทคนิคให้สอดคล้องกับนโยบายโดเมน ความสามารถในการตรวจสอบ และการตัดสินใจระดับแนวหน้า โดยจะบันทึกเกณฑ์ความสำเร็จที่ชัดเจน ทดสอบกับข้อมูลและขั้นตอนการทำงานที่สมจริง และทำซ้ำตามรูปแบบความล้มเหลวที่สังเกตได้ แทนที่จะชนะการวัดประสิทธิภาพเพียงครั้งเดียว นี่คือจุดที่ความเข้าใจทางทฤษฎีกลายเป็นความสามารถที่คงทนของผลิตภัณฑ์ นโยบาย และการดำเนินงาน

บริบททางอุตสาหกรรมเป็นตัวกำหนดว่าแนวคิด AI จะรอดจากการสัมผัสกับความเป็นจริงหรือไม่ ในเวลาเดียวกัน ข้อกำหนดด้านกฎระเบียบอาจทำให้ต้นแบบที่แข็งแกร่งเป็นโมฆะได้ แนวทางที่ยืดหยุ่นที่สุดคือการรวมความเร็วของการทดลองเข้ากับวินัยในการกำกับดูแล: ดำเนินการนำร่อง จับหลักฐาน เผยแพร่บันทึกการตัดสินใจ และอัปเดตการป้องกันอย่างต่อเนื่องเมื่อพฤติกรรมของโมเดล ความคาดหวังของผู้ใช้ และข้อกำหนดด้านกฎระเบียบมีการเปลี่ยนแปลง

ผลกระทบเชิงกลยุทธ์

บริบททางอุตสาหกรรมเป็นตัวกำหนดว่าแนวคิด AI จะรอดจากการสัมผัสกับความเป็นจริงหรือไม่

บริบททางอุตสาหกรรมเป็นตัวกำหนดว่าแนวคิด AI จะรอดจากการสัมผัสกับความเป็นจริงหรือไม่ ในการปรับใช้คุณภาพสูง สิ่งนี้จะถูกแปลเป็นกฎการปฏิบัติงานที่วัดผลได้ ขอบเขตความเป็นเจ้าของ และขั้นตอนการตรวจสอบที่เกิดซ้ำ เพื่อให้ทีมสามารถปรับขนาดความมั่นใจแทนที่จะปรับขนาดความคลุมเครือ

ข้อจำกัดของโดเมนมีอิทธิพลต่ออัตราข้อผิดพลาดที่ยอมรับได้และแบบจำลองการควบคุมดูแล

ข้อจำกัดของโดเมนมีอิทธิพลต่ออัตราข้อผิดพลาดที่ยอมรับได้และแบบจำลองการควบคุมดูแล ในการปรับใช้คุณภาพสูง สิ่งนี้จะถูกแปลเป็นกฎการปฏิบัติงานที่วัดผลได้ ขอบเขตความเป็นเจ้าของ และขั้นตอนการตรวจสอบที่เกิดซ้ำ เพื่อให้ทีมสามารถปรับขนาดความมั่นใจแทนที่จะปรับขนาดความคลุมเครือ

การปรับใช้ที่ประสบความสำเร็จจะปรับความสามารถทางเทคนิคให้สอดคล้องกับเวิร์กโฟลว์แนวหน้า

การปรับใช้ที่ประสบความสำเร็จจะปรับความสามารถทางเทคนิคให้สอดคล้องกับเวิร์กโฟลว์แนวหน้า ในการปรับใช้คุณภาพสูง สิ่งนี้จะถูกแปลเป็นกฎการปฏิบัติงานที่วัดผลได้ ขอบเขตความเป็นเจ้าของ และขั้นตอนการตรวจสอบที่เกิดซ้ำ เพื่อให้ทีมสามารถปรับขนาดความมั่นใจแทนที่จะปรับขนาดความคลุมเครือ

อนาคตของ AI ในภาพยนตร์และเอฟเฟ็กต์ภาพ

วิดีโอเชิงสร้างสรรค์จะย้ายจากคลิปสั้นไปสู่ลำดับที่ยาวขึ้น ควบคุมได้ และกำกับโดยผู้กำกับได้ พร้อมด้วยตัวละครและฟิสิกส์ที่สอดคล้องกัน การผลิตเสมือนจริงแบบเรียลไทม์ — ปริมาณ LED ที่ขับเคลื่อนโดยสภาพแวดล้อมที่สร้างโดย AI — จะขยายตัว คาดหวังกรอบการยินยอมและการชดเชยที่เป็นมาตรฐานสำหรับความคล้ายคลึงทางดิจิทัล และมาตรฐานลายน้ำหรือแหล่งที่มา (เช่น C2PA) เพื่อติดป้ายกำกับฟุตเทจสังเคราะห์ การเปลี่ยนแปลงที่ใหญ่ที่สุดคือการสร้างภาพยนตร์อินดี้ ซึ่งทีมขนาดเล็กจะได้รับเครื่องมือระดับสตูดิโอ และในด้านการแปลเป็นภาษาท้องถิ่น ซึ่งการพากย์หลายภาษาทันทีจะขยายการเข้าถึงทั่วโลก

การใช้งานจริงในโลกแห่งความเป็นจริง

Industrial Light & Magic และสตูดิโออื่นๆ ใช้ ML de-aging เพื่อทำให้นักแสดงดูเด็กกว่าวัยบนหน้าจอหลายสิบปี

ทางวิ่งและเครื่องมือแปลงข้อความเป็นวิดีโอที่คล้ายกันจะสร้างคลิปและช็อตช็อตที่ใช้ในโฆษณาและหนังสั้น

เครื่องมือ Rotoscoping และ Roto ของ AI (เช่น ในผลิตภัณฑ์ Adobe และ Foundry) จะตัดนักแสดงจากพื้นหลังสำหรับคอมโพสิตโดยอัตโนมัติ

บริการพากย์เสียงด้วย AI ลิปซิงค์และแปลภาพยนตร์และซีรีส์เป็นภาษาต่างๆ มากมายเพื่อการสตรีมทั่วโลก

รูปแบบการดำเนินงาน

AI ในภาพยนตร์และวิชวลเอฟเฟกต์ในทางปฏิบัติ

Industrial Light & Magic และสตูดิโออื่นๆ ใช้ ML de-aging เพื่อทำให้นักแสดงดูเด็กกว่าวัยบนหน้าจอหลายสิบปี

Industrial Light & Magic และสตูดิโออื่นๆ ใช้ ML de-aging เพื่อทำให้นักแสดงดูเด็กลงหลายสิบปีบนหน้าจอ ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อพวกเขากำหนดเกณฑ์คุณภาพล่วงหน้า รักษาเส้นทางการยกระดับของมนุษย์สำหรับกรณี Edge และติดตามทั้งประสิทธิภาพการทำงานที่เพิ่มขึ้นและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป

AI ในภาพยนตร์และวิชวลเอฟเฟกต์ในทางปฏิบัติ

ทางวิ่งและเครื่องมือแปลงข้อความเป็นวิดีโอที่คล้ายกันจะสร้างคลิปและช็อตช็อตที่ใช้ในโฆษณาและหนังสั้น

ทางวิ่งและเครื่องมือแปลงข้อความเป็นวิดีโอที่คล้ายกันจะสร้างคลิปและช็อตการแสดงภาพล่วงหน้าที่ใช้ในโฆษณาและภาพยนตร์สั้น ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อพวกเขากำหนดเกณฑ์คุณภาพไว้ล่วงหน้า รักษาเส้นทางการยกระดับโดยมนุษย์สำหรับกรณี Edge และติดตามทั้งการเพิ่มผลผลิตและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป

AI ในภาพยนตร์และวิชวลเอฟเฟกต์ในทางปฏิบัติ

เครื่องมือ Rotoscoping และ Roto ของ AI (เช่น ในผลิตภัณฑ์ Adobe และ Foundry) จะตัดนักแสดงจากพื้นหลังสำหรับคอมโพสิตโดยอัตโนมัติ

เครื่องมือโรโตสโคปและโรโตของ AI (เช่น ในผลิตภัณฑ์ Adobe และ Foundry) จะตัดนักแสดงออกจากพื้นหลังสำหรับการจัดองค์ประกอบโดยอัตโนมัติ ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อพวกเขากำหนดเกณฑ์คุณภาพล่วงหน้า รักษาเส้นทางการยกระดับโดยมนุษย์สำหรับกรณี Edge และติดตามทั้งประสิทธิภาพการทำงานที่เพิ่มขึ้นและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป

AI ในภาพยนตร์และวิชวลเอฟเฟกต์ในทางปฏิบัติ

บริการพากย์เสียงด้วย AI ลิปซิงค์และแปลภาพยนตร์และซีรีส์เป็นภาษาต่างๆ มากมายเพื่อการสตรีมทั่วโลก

บริการพากย์เสียง AI ลิปซิงค์และแปลภาพยนตร์และซีรีส์เป็นภาษาต่างๆ มากมายสำหรับการสตรีมทั่วโลก ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อพวกเขากำหนดเกณฑ์คุณภาพล่วงหน้า รักษาเส้นทางการยกระดับโดยมนุษย์สำหรับกรณี Edge และติดตามทั้งประสิทธิภาพการทำงานที่เพิ่มขึ้นและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป

ความเสี่ยงและรั้ว

!

ข้อกำหนดด้านกฎระเบียบอาจทำให้ต้นแบบที่แข็งแกร่งเป็นโมฆะได้

!

ข้อมูลในอดีตอาจเข้ารหัสอคติที่เป็นอันตรายต่อชุมชนบางแห่ง

!

ระบบเดิมสามารถสร้างปัญหาคอขวดในการบูรณาการและต้นทุนแอบแฝงได้

แผนงานการดำเนินงาน

1

ให้ผู้เชี่ยวชาญโดเมนมีส่วนร่วมตั้งแต่การกำหนดกรอบปัญหาไปจนถึงการประเมิน

ให้ผู้เชี่ยวชาญโดเมนมีส่วนร่วมตั้งแต่การกำหนดกรอบปัญหาไปจนถึงการประเมิน ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น

2

ออกแบบเส้นทางการตรวจสอบและเอกสารประกอบก่อนการเปิดตัว

ออกแบบเส้นทางการตรวจสอบและเอกสารประกอบก่อนการเปิดตัว ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น

3

ตรวจสอบการปฏิบัติตามข้อกำหนดและภาระผูกพันด้านความปลอดภัยตั้งแต่เนิ่นๆ

ตรวจสอบการปฏิบัติตามข้อกำหนดและภาระผูกพันด้านความปลอดภัยตั้งแต่เนิ่นๆ ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น

4

เปิดตัวเป็นระยะโดยมีเกณฑ์การหยุดและย้อนกลับที่ชัดเจน

เปิดตัวเป็นระยะโดยมีเกณฑ์การหยุดและย้อนกลับที่ชัดเจน ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น

สำรวจต่อไป