เฟซบุ๊กสาธิตแพลตฟอร์มจำแนกภาพ Lumos สำหรับการสร้างตัวจำแนกภาพตามคำบรรยาย สามารถฝึกฝนโมเดลจำแนกภาพแบบใหม่ๆ และปรับปรุงโมเดลให้ดีขึ้นได้เรื่อยๆ ตามข้อมูลอินพุตที่มากขึ้น
ตอนนี้เฟซบุ๊กใช้โมเดลนี้ในการบรรยายภาพแล้ว 12 แบบ เช่น "มีคนกำลังเดิน", "มีคนเต้น", หรือ "มีคนขี่ม้า"
เฟซบุ๊กอาศัยภาพตัวอย่างที่แชร์บนเฟซบุ๊กเป็นสาธารณะ 130,000 ภาพ แล้วให้คนบรรยายสั้นๆ เกี่ยวกับภาพนั้นๆ กระบวนการสร้างฐานข้อมูลตัวอย่างจะเร็วขึ้นเพราะเฟซบุ๊กสามารถเลือกภาพที่คำบรรยายภาพใกล้เคียงกับคำบรรยายที่กำลังสร้างโมเดลอยู่ ผู้ใช้ Lumos สามารถดูภาพที่คำบรรยายใกล้เคียงแล้วระบุว่าภาพเหล่านั้นตรงกับความต้องการหรือไม่ จากก็ฝึกโมเดลใหม่แล้วทำซ้ำจนได้โมเดลที่ดีขึ้นเรื่อยๆ
ด้วยซอฟต์แวร์ที่เข้าใจภาพมากขึ้นเช่นนี้ทำให้ตอนนี้เฟซบุ๊กสามารถหาภาพจากเนื้อหาในภาพได้แล้ว เช่น "กำลังใส่เสื้อดำ" เฟซบุ๊กก็จะสามารถหาภาพคนใส่เสื้อดำได้แม้จะไม่มีในคำบรรยายก็ตามที
ที่มา - Facebook Code