Moonshot AI публикует исходный код модели Kimi K3 на 280 млрд параметров и заявляет о 2,5-кратном росте интеллекта

Согласно PANews, Moonshot AI открыла исходный код своей крупной языковой модели Kimi K3 27 июля, представив 280 миллиардов параметров в архитектуре Mixture-of-Experts. Модель обеспечивает нативные мультимодальные возможности для зрения и поддерживает контекстное окно на 1 миллион токенов. Компания утверждает, что новая архитектура обеспечивает примерно 2,5-кратное повышение интеллекта при эквивалентной вычислительной стоимости. Moonshot AI также одновременно выпустила поддерживающие инструменты, включая высокопроизводительный оператор внимания, библиотеку для коммуникаций MoE и инфраструктурный код для развертывания агентов в масштабе.
Дисклеймер: Информация на этой странице может быть получена из источников третьих сторон и предоставляется только для ознакомления. Она не отражает взгляды или мнения Gate и не является финансовой, инвестиционной или юридической рекомендацией. Торговля виртуальными активами связана с высоким риском. Пожалуйста, не основывайте свои решения исключительно на данных этой страницы. Подробнее смотрите в Дисклеймере.
комментарий
0/400
Нет комментариев