Meta เผยกำลังเทรน Llama 3, จะมีจีพียู H100 3.5 แสนตัว, เป้าหมายคือ Open Source AGI

by mk
19 January 2024 - 01:36

Mark Zuckerberg เปิดเผยว่าตอนนี้ทีม AI ของบริษัท Meta กำลังเทรนโมเดล Llama 3 บนโครงสร้างพื้นฐานคอมพิวเตอร์ขนาดใหญ่ ที่จะมีจีพียู NVIDIA H100 เพิ่มเป็น 350,000 ตัวภายในสิ้นปี 2024 และถ้านับจีพียูตัวอื่นๆ มารวมด้วย จะเทียบได้กับการมี H100 จำนวนรวม 600,000 ตัว

ตอนนี้ Meta มีทีมพัฒนา AI สองทีมคือ Fundamental AI Research (FAIR) ที่เน้นงานวิจัย และ GenAI ที่เพิ่งตั้งเมื่อต้นปี 2023 เน้นพัฒนาฟีเจอร์ AI ให้กับบริการในเครือ อย่าง WhatsApp, Messenger, Instagram

Zuckerberg บอกว่าเป้าหมายของบริษัทคือสร้าง artificial general intelligence (AGI) ที่เปิดเป็นโอเพนซอร์สให้ทุกคนเข้าถึงได้ พร้อมบอกว่าจะเชื่อมโยงบริการ AI กับโครงการแว่นอัจฉริยะของบริษัท อย่างเช่น Ray Ban Meta smart glass ด้วย

Blognone Jobs Premium