Moonshot AI, пекинский стартап в сфере искусственного интеллекта при поддержке Alibaba, представил Kimi K3, описываемую как крупнейшая open-source модель ИИ, созданная на сегодняшний день. Компания запустила модель 16 июля через свой API и размещенные платформы, а полные веса модели должны стать доступны для публичного скачивания 27 июля по лицензии Modified MIT.

Kimi K3 имеет 2.8 трлн параметров, что ставит ее в число крупнейших публично доступных моделей ИИ и делает первой публичной моделью в диапазоне, близком к 3 трлн параметров. Количество параметров не является прямым показателем качества модели, но служит полезным индикатором масштаба и вычислительных ресурсов, которые, вероятно, потребуются для запуска или адаптации системы.

Техническая архитектура Kimi K3

Модель использует архитектуру mixture-of-experts, или MoE, вместе с технологией, которую Moonshot называет Kimi Delta Attention. Вместо активации всех параметров для каждого запроса система выбирает наиболее релевантное подмножество из своего большого пула параметров. Такой подход призван удерживать стоимость инференса на управляемом уровне, несмотря на общий масштаб модели.

Kimi K3 также поддерживает контекстное окно в 1 млн токенов, что позволяет ей обрабатывать в одном запросе объем текста, примерно сопоставимый с несколькими полноформатными романами. Moonshot разработала эту возможность для ресурсоемких задач, таких как долгосрочное программирование, продвинутая работа со знаниями и глубокие рассуждения.

По лицензии Modified MIT разработчики смогут свободно скачивать, изменять и самостоятельно размещать модель после публикации весов. Это различие важно, поскольку один лишь размещенный доступ оставляет пользователей зависимыми от доступности и цен провайдера, тогда как открытые веса позволяют организациям с достаточной инфраструктурой проверять, адаптировать и эксплуатировать модель на собственных системах.

Спрос, по-видимому, превысил доступные мощности Moonshot AI вскоре после запуска. Компания приостановила новые подписки всего через несколько дней после представления Kimi K3, поскольку пользовательский спрос превысил ее пропускную способность.

Контекст ИИ в отношениях США и Китая

Релиз происходит на фоне усиленного внимания США к развитию ИИ в Китае. Администрация Байдена и последующая администрация Трампа ввели экспортный контроль в отношении передовых чипов, поставляемых в Китай.

После того как веса модели станут публичными 27 июля, пользователи с достаточными вычислительными ресурсами смогут запускать, дообучать и развертывать K3 независимо от юрисдикции. На практике масштаб модели означает, что ее внедрение, вероятно, будет зависеть не только от доступа к скачиванию, но и от наличия оборудования, стоимости обслуживания и способности разработчиков эффективно интегрировать ее в существующие ИИ-процессы.

Последствия для ИИ-компаний и политики

Если Kimi K3 покажет производительность, сопоставимую с ведущими проприетарными моделями OpenAI и Anthropic, при этом будучи доступной для бесплатного скачивания, это может усложнить модель выручки компаний, взимающих премиальные цены за доступ к API.

Поддержка Moonshot AI со стороны Alibaba также указывает на то, что модель может продолжить получать развитие, оптимизацию и сопровождение.

Релиз может привлечь дополнительное внимание Вашингтона. Если регуляторы сочтут open-source релизы передовых китайских моделей ИИ риском для безопасности, они могут рассмотреть ограничения на развертывание, хостинг или интеграцию разработанных за рубежом ИИ-систем в инфраструктуру США. Среди ключевых деталей, за которыми стоит следить после публикации весов, — результаты независимых бенчмарков, отчеты о реальных развертываниях и то, предоставит ли Moonshot дополнительную документацию или инструменты для поддержки самостоятельного размещения.