AWS เปิดตัวชิปของตัวเอง 2 ตัวพร้อมกันในงาน re:Invent 2023 ได้แก่ ซีพียู Graviton 4 และชิปฝึกปัญญาประดิษฐ์ Trainium 2
Graviton 4 เป็นซีพียู ARMv9 ภายในเป็นคอร์ Neoverse V2 96 คอร์ เพิ่มขึ้นจาก Graviton3 ที่เคยมี 64 คอร์ และยังมีแบนวิดท์แรมเพิ่มขึ้น 30% ใส่แรมได้มากขึ้น 3 เท่าตัว ความพิเศษอีกอย่างคือชิปใหม่นี้สามารถเข้ารหัสการส่งข้อมูลออกนอกชิปทั้งหมด
Trainium 2 ชิปฝึกปัญญาประดิษฐ์ ออกแบบมารองรับการฝึก LLM ระดับล้านล้านพารามิเตอร์ ประสิทธิภาพการฝึกรวมเพิ่มขึ้นกว่ารุ่นแรก 4 เท่าและรองรับหน่วยความจำได้มากกว่าเดิม 3 เท่า ตอนนี้ Anthropic และ MosaicML ผู้พัฒนา LLM ก็ออกมาแสดงความสนใจจะใช้ Trainium 2 ฝึกโมเดล LLM ตัวต่อไป
ที่มา - AWS