เครื่องมือ AI ใหม่ช่วยให้สามารถแก้ไขวิดีโอจากเอกสารข้อความได้

ทีมนักวิจัยด้านวิทยาการคอมพิวเตอร์จาก Tsinghua และ Beihand University ในประเทศจีน, IDC Herzilya ในอิสราเอล และ Harvard University ได้สร้างเครื่องมือที่สามารถสร้างวิดีโอแก้ไขจากข้อความและคลังวิดีโอได้

มีการบันทึกวิดีโอจำนวนมากทุกวันโดยนักบันทึกวิดีโอมืออาชีพ, มือสมัครเล่น และคนธรรมดา แต่ยังคงต้องใช้เวลาและเงินมากในการแก้ไขวิดีโอเหล่านี้ให้สมบูรณ์ โดยทั่วไปแล้วต้องใช้เครื่องมือแก้ไขวิดีโอที่ซับซ้อนซึ่งสามารถจัดการกับวิดีโอดิบได้ ทีมนักวิจัยระหว่างประเทศได้พัฒนาเครื่องมือที่สามารถรับข้อความและคลังวิดีโอแล้วสร้างวิดีโอตามข้อความนั้นได้ เครื่องมือนี้สามารถตรวจสอบคลังวิดีโอและเลือกคลิปที่สอดคล้องกับข้อความที่ให้มาได้

ในขณะที่แพลตฟอร์มแก้ไขวิดีโอปัจจุบันต้องการความรู้เกี่ยวกับเทคนิคการแก้ไขวิดีโอ เครื่องมือที่พัฒนาโดยนักวิจัยช่วยให้ผู้ใช้สามารถสร้างวิดีโอได้อย่างง่ายดายโดยการแก้ไขข้อความที่伴าวิดีโอเท่านั้น หากผู้ใช้ลบข้อความ, เพิ่มข้อความ หรือย้ายประโยค, การเปลี่ยนแปลงเหล่านี้จะสะท้อนให้เห็นในวิดีโอได้

Ariel Shamir, คณบดีของ Efi Arazi School of Computer Science ที่ IDC Herzliya อธิบายว่าเครื่องมือ Write-A-Video ช่วยให้ผู้ใช้สามารถโต้ตอบกับวิดีโอได้โดยหลักผ่านข้อความ โดยใช้เทคนิคการประมวลผลภาษาธรรมชาติในการจับคู่วิดีโอตามความหมายที่ให้มา

โปรแกรมจะเลือกคลิปที่มีความน่าดึงดูดจากมุมมองของสุนทรียศาสตร์ โดยพิจารณาจากวิธีการถ่ายภาพ, โฟกัส และแสงเพื่อกำหนดความน่าดึงดูด

ตามที่ทีมนักวิจัยอธิบาย, การทดลองของพวกเขาชี้ให้เห็นว่าเทคนิคดิจิทัลที่รวมเอาแง่มุมของการมองเห็นและประมวลผลภาษาธรรมชาติสามารถช่วยให้ผู้ใช้สามารถสร้างวิดีโอได้อย่างง่ายดาย

ทีมนักวิจัยได้ทดสอบเครื่องมือของพวกเขากับคลังวิดีโอและเอกสารข้อความต่างๆ และพบว่าผู้ใช้ที่ไม่ใช่มืออาชีพสามารถสร้างวิดีโอแก้ไขที่มีคุณภาพสูงได้เร็วกว่ามืออาชีพที่ใช้ซอฟต์แวร์แก้ไขวิดีโอมาตรฐาน

นักวิจัยจะนำเสนอผลงานของพวกเขาที่การประชุม ACM SIGGRAPH Asia ที่จะจัดขึ้นในออสเตรเลีย ส่วนอื่นๆ ก็ใช้ AI เพื่อเพิ่มความสามารถในการแก้ไขวิดีโอเช่นกัน Adobe (ADBE ) ก็ได้พัฒนาเครื่องมือ AI ที่ช่วยให้ผู้ใช้สามารถแก้ไขวิดีโอได้อย่างง่ายดายโดยไม่ต้องมีความรู้เกี่ยวกับการแก้ไขวิดีโอ