Meituan เปิดตัวโมเดล LongCat-2.0 ที่มีพารามิเตอร์ล้านล้านตัว พร้อมโทเคน 30 ล้านล้าน เมื่อวันที่ 30 มิถุนายน

จาก Jin10 Meituan เปิดตัว LongCat-2.0 โมเดลภาษาขนาดใหญ่พารามิเตอร์ล้านล้านตัวใหม่ เมื่อวันที่ 30 มิถุนายน และประกาศให้เป็นโอเพนซอร์ส ชุดข้อมูล pretraining มีโทเค็นมากกว่า 30 ล้านล้านโทเค็น และครอบคลุมภาษาจีน อังกฤษ หลายภาษา และโค้ด ทีมงานของ Meituan จัดการกับความท้าทายด้านฮาร์ดแวร์และการคำนวณในการฝึกอบรมขนาดใหญ่บน GPU หมื่นตัว ปรับปรุงความเสถียรของระบบ และลดอัตราความล้มเหลวเฉลี่ยรายวันต่อเดือนลงมากกว่า 70 เปอร์เซ็นต์ ผ่านกลไกการกู้คืนอัตโนมัติและโปรโตคอลการตรวจสอบความสอดคล้อง
news.article.disclaimer
แสดงความคิดเห็น
0/400
ไม่มีความคิดเห็น