งานวิจัยของ Disney Research ช่วยให้ตัดต่อภาพวิดีโอจากกล้องหลายตัวได้ง่ายๆ

by ตะโร่งโต้ง
17 August 2014 - 17:30

Disney Research ได้เผยแพร่ผลงานการวิจัยใหม่ ว่าด้วยเรื่องของซอฟต์แวร์ที่ช่วยตัดต่อคลิปวิดีโอที่ถูกถ่ายจากกล้องหลายตัวเข้าเป็นคลิปเดียวกัน

ซอฟต์แวร์ที่ Disney Research พัฒนาขึ้นมานี้ สามารถนำคลิปจากกล้องหลายตัวที่บันทึกภาพเหตุการณ์เดียวกันจากหลายมุมมองเข้าเป็นคลิปเดียวกัน โดยมันจะเลือกเอาภาพที่ดีจากกล้องแต่ละตัวในแต่ละขณะมาประกอบกัน ทั้งยังสามารถตัดภาพแบบซูมเจาะเฉพาะส่วนที่สำคัญในแต่ละขณะได้ด้วย

ซอฟต์แวร์ที่ว่านี้อาศัยการประมวลผลจากภาพของกล้องแต่ละตัว ด้วยเทคนิคการวิเคราะห์ที่เรียกว่า "3D Joint Attention" จนสามารถเข้าใจได้ว่าในขณะที่บันทึกคลิปวิดีโอนั้น กล้องแต่ละตัวอยู่ในมุมและตำแหน่งไหนของสถานที่ถ่ายทำ และรู้ได้ว่าสิ่งใดคือจุดรวมความสนใจของการถ่ายทำ (หากกล้องทุกตัวจับภาพเด็กที่กำลังวิ่ง ซอฟต์แวร์ก็จะรู้ว่าการตัดต่อคลิปต้องทำโดยเลือกภาพที่ดีที่แสดงให้เห็นถึงการวิ่งของเด็ก) และเนื่องจากมันรู้ถึงตำแหน่งของกล้อง ทำให้ซอฟต์แวร์สามารถเลือกตัดต่อภาพจากกล้องต่างๆ ได้โดยไม่ฝ่าฝืน "กฎ 180 องศา" ซึ่งหมายถึงหลักการถ่ายทำภาพยนตร์ที่ผู้ตัดต่อไม่ควรตัดสลับภาพไปมาระหว่างกล้องที่ถ่ายจากด้านหน้าและด้านหลัง (หรือระหว่างด้านซ้ายและด้านขวา) ของเหตุการณ์ เพราะจะทำให้ผู้ชมรู้สึกสับสนถึงตำแหน่งและทิศทางการเคลื่อนที่ของสิ่งที่อยู่ในคลิปวิดีโอ

เมื่อซอฟต์แวร์รู้แล้วว่าสิ่งที่ต้องเป็นจุดรวมความสนใจของคลิปคืออะไร มันก็สามารถเลือกจังหวะที่จะตัดสลับภาพจากกล้องตัวแรกไปใช้ภาพจากกล้องตัวอื่นได้ อธิบายเป็นตัวอย่างได้ว่า ซอฟต์แวร์จะตัดภาพจากกล้อง 1 ไปใช้ภาพจากกล้อง 2 ก็ต่อเมื่อจุดรวมความสนใจหลุดออกจากตำแหน่งภาพที่ดีในกล้อง 1 ไปแล้ว หรือเมื่อมุมมองจากกล้อง 2 สามารถเห็นลักษณะการเคลื่อนไหวของจุดรวมความสนใจได้ดีกว่ามุมมองจากกล้อง 1 เป็นต้น โดยการตัดภาพนั้นจะเลือกทำในช่วงจังหวะที่ไม่ใช่การเคลื่อนไหวสำคัญของคนหรือสิ่งของในภาพด้วย

นอกจากนี้ซอฟต์แวร์ของ Disney Research ยังสามารถตัดต่อคลิปโดยเลือกตัดเจาะเอาเฉพาะส่วนที่น่าสนใจของคลิปนั้นได้ ยกตัวอย่างเช่น ในการถ่ายคลิปการแข่งขันฟุตบอลจากระยะไกล ซึ่งทำให้ได้ภาพมุมกว้างมานั้น ตัวซอฟต์แวร์สามารถตัดเจาะภาพโดยเลือกเอาเฉพาะส่วนของผู้เล่นและสนามให้อยู่ในเฟรมภาพของชิ้นงานได้ เพราะรู้ว่าส่วนของอัฒจันทร์สนามและท้องฟ้าเบื้องหลังนั้นไม่ใช่จุดรวมความสนใจของการถ่ายทำ

ความสามารถอื่นของซอฟต์แวร์ที่ถูกพัฒนาขึ้นนี้ยังมีการเรียบเรียงภาพจากคลิปเพื่อแยกแยะ "เนื้อเรื่องย่อย" ของการถ่ายทำออกจากกันให้ด้วย ตัวอย่างเช่นในงานเลี้ยงสังสรรค์ที่มีการบันทึกคลิปวิดีโอไว้ด้วยกล้องหลายตัวภายในงาน โดยกล้องส่วนหนึ่งเน้นถ่ายภาพบนเวที ในขณะที่ที่อีกส่วนหนึ่งเน้นถ่ายภาพบนโต๊ะอาหาร เมื่อนำภาพทั้งหมดมาตัดต่อรวมกัน ซอฟต์แวร์ของ Disney Research จะหลีกเลี่ยงการตัดภาพสลับไปมาระหว่างบนเวทีกับบนโต๊ะอาหาร (เพราะมันทราบดีว่าเนื้อหาของคลิปเหล่านั้น สนใจในคนละเรื่องกัน) แต่จะพยายามเรียบเรียงคลิปส่วนบนเวที และคลิปในส่วนของโต๊ะอาหาร แยกเป็นคนละช่วงออกจากกัน

ผลประโยชน์ที่เล็งเห็นได้ชัดของซอฟต์แวร์นี้ คงเป็นการนำไปประยุกต์ใช้เป็นเครื่องมือตัดต่อวิดีโอสำหรับผู้ใช้ที่ไม่ใช่มืออาชีพด้านการถ่ายทำหรือตัดต่อภาพ ซึ่งก็ไม่แน่ว่าวันหนึ่งเราอาจเห็นแอพตัดต่อคลิปที่สุดฉลาดจาก Disney ก็เป็นได้

ที่มา - Mashable, เอกสารงานวิจัย

Blognone Jobs Premium