กูเกิลรายงานถึงโมเดลปัญญาประดิษฐ์เบื้องหลังฟีเจอร์เบลอฉากหลังหรือเปลี่ยนภาพฉากหลังใน Google Meet ที่ใช้ปัญญาประดิษฐ์จับภาพว่าตรงไหนเป็นเบื้องหน้าและตรงไหนเป็นฉากหลัง
โมเดลที่ใช้ตั้งต้นเป็น MobileNetV3-small สร้าง encoder รับภาพ และโมเดลขนาดเท่ากันแต่กลับข้างสร้างเอาท์พุต โดยรวมมีพารามิเตอร์เพียง 193,000 พารามิเตอร์เท่านั้น แต่ละพารามิเตอร์ใช้ข้อมูลแบบ float16 ทำให้ขนาดโมเดลรวมไม่ถึง 400KB
ตัวปัญญาประดิษฐ์มีหน้าที่แยกฉากหลังออกมาเท่านนั้น จากนั้นต้องใช้ฟิลเตอร์เบลอขอบภาพเพื่อให้ใบหน้าคนในวิดีโอกลมกลืนกับฉากหลังที่เป็นภาพวางลงไป หรือหากผู้ใช้เลือกเบลอฉากหลังก็ต้องนำภาพฉากหลังมาเบลอก่อน
โมเดลปัญญาประดิษฐ์ที่ใช้ตัดฉากหลังจริงๆ แล้วมีสองความละเอียด คือ 256x144 และ 160x27 เพื่อให้กระบวนการประมวลผลภาพทั้งหมดยังสามารถประชุมวิดีโอที่เฟรมเรต 30 เฟรมต่อวินาทีได้ กูเกิลแสดงให้เห็นว่าแม้แต่ Chromebook รุ่นราคาถูกเช่น Acer Chromebook 11 ที่ใช้ซีพียู Intel N3060 ก็ยังประมวลผลภาพทั้งหมดได้ภายใน 30ms หรือเฟรมเรต 33fps
ที่มา - Google AI Blog