Facebook เริ่มปรับระบบแปลภาษาไปใช้ neural network แล้ว

by nutmos
4 August 2017 - 10:53

ปัจจุบัน Facebook ได้ให้บริการแปลภาษาอัตโนมัติกว่า 4.5 พันล้านครั้งต่อวัน ซึ่งตอนนี้ Facebook ได้นำระบบ neural network มาช่วยในการแปลภาษาแล้ว จากเดิมที่จะใช้ระบบ phrase-based

ความแตกต่างที่สำคัญระหว่างระบบเก่าและระบบใหม่คือ attention span ซึ่งระบบ phrase-based จะใช้ระบบแปลประโยคแบบคำต่อคำ หรือดูตามวลี ในขณะที่ neural network จะพิจารณาทั้งประโยค โดยระบบนี้จะใช้งานสิ่งที่เรียกว่า long short-term memory network หรือ LSTM

ด้วยการใช้งาน neural network นี้ Facebook พบว่าสามารถเพิ่มค่า BLEU (เครื่องมือวัดความแม่นยำของการแปลภาษาของเครื่อง) ของทุกภาษาได้สูงถึง 11% เมื่อเทียบกับการใช้งานระบบ phrase-based เดิม

แต่หากว่าคำในประโยคนั้นไม่มีคำแปลโดยตรงในอีกภาษา neural network จะสร้าง placeholder ไว้และจะนำคำเหล่านี้ไปค้นหาในระบบพจนานุกรมของ Facebook ที่เป็นข้อมูลเทรนนิ่งโดย Facebook เอง เพื่อแทนที่ด้วยคำปกติ อย่างเช่น “tmrw” จะถูกแปลเหมือนกับคำว่า “tomorrow”

หากใครสนใจรายละเอียดเพิ่มเติมเชิงเทคนิคสามารถอ่านเพิ่มเติมได้จากที่มา

ที่มา - The Verge, Facebook Code

Blognone Jobs Premium