NaiveAI Open-Weights Naive-N0.5-Flash: 309B MoE, Hybrid SWA-DSA 1M Context, MIT

Naiveai Moe ии Hugging Face Mit код pandaily.com

NaiveAI выпустила Naive-N0.5-Flash под открытой лицензией MIT: 309B MoE с 15.5B активных параметров, гибридным SWA–DSA и нативным контекстом 1М токенов для кодинга и ИИ-разработки, построенная на MiMo-V2.5 без слоев full-attention.

Компания NaiveAI опубликовала модель Naive-N0.5-Flash на платформе Hugging Face. Это модель с открытыми весами, основанная на архитектуре mixture-of-experts (MoE), предназначенная для разработки кода и исследований в области искусственного интеллекта. Об этом свидетельствуют данные из описания модели и технические материалы, опубликованные примерно в середине-конце сентября 2026 года. Официальное англоязычное название продукта — NaiveAI / Naive-N0.5-Flash. Данный материал фокусируется на архитектуре и условиях выпуска; информация о финансировании выходит за рамки статьи. В некоторых второстепенных отчетах лаборатория упоминается как аффилированная с Университетом Цинхуа через основателей, однако к этой информации следует относиться с осторожностью, отдавая предпочтение продуктовой марке NaiveAI при повседневных упоминаниях.

Основные характеристики модели согласно описанию: около 309 миллиардов общих параметров, из которых 15,5 миллиардов активны, веса и код для инференса распространяются под лицензией MIT, а также нативная поддержка контекстного окна длиной один миллион токенов. Длина контекста достигается за счет гибридного подхода, сочетающего Sliding-Window Attention (SWA) и легковесную DeepSeek Sparse Attention (DSA) с grouped-query attention. Описанная конфигурация преимущественно использует соотношение SWA к DSA примерно 5:1, без использования слоев full-attention в стеке. В описании указано, что модель построена на основе открытой модели MiMo-V2.5, с последующим дообучением (mid- and post-training), а не с нуля — этот подход отличается от работы Xiaomi над HySparse2 с KV-шарингом, которая уже освещалась на Pandaily.

В части инференса NaiveAI выделяет NaiveRT — стек для выполнения моделей, разработанный в рамках исследований в области ИИ, который объединяет мега-ядерную фузию (mega-kernel fusion), Programmatic Dependent Launch и спекулятивное декодирование. По данным разработчиков, производительность составляет около 50 токенов в секунду на пользователя в стандартном режиме и до 2000 токенов в секунду в режиме Ultrafast. Эти цифры следует рассматривать как заявления NaiveAI до их независимого подтверждения. Теги на Hugging Face подчеркивают применение модели для генерации кода, работы с длинным контекстом и задач ИИ-исследований, что соответствует заявлению о том, что дообучение на сильной открытой базе может способствовать развитию кодирующих агентов (coding Agents).

Для разработчиков, работающих с открытыми моделями и сравнивающих китайские MoE-решения, представленные на этой неделе, Naive-N0.5-Flash является конкретным примером MoE-модели с 309 млрд общих и 15,5 млрд активных параметров, гибридной SWA–DSA и миллионным контекстным окном под лицензией MIT. Это новость о продукте, ориентированном на архитектуру, а не о его оценке, не о выпуске IDE MiniMax Code и не о запуске персонального ассистента.

Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.

В тренде:


Похожие новости: