Soofi S 30B-A3B — німецька відкрита модель ШІ, яка очолила бенчмарки англійською та німецькою мовами
Німецький дослідницький консорціум випустив Soofi S — відкриту 30-мільярдну мовну модель, яка завдяки гібридній архітектурі Mamba-Transformer та орієнтованому на німецьку мову тренуванню лідирує в бенчмарках.
Soofi S — новий етап європейського ШІ-суверенітету
13 липня 2026 року німецький дослідницький консорціум під координацією KI Bundesverband (Німецької асоціації ШІ) офіційно випустив Soofi S 30B-A3B — відкриту мовну модель, повністю натреновану на промисловій ШІ-хмарі Deutsche Telekom у Мюнхені. Це одна з перших великих мовних моделей, створених повністю на німецькій суверенній інфраструктурі.
Модель продемонструвала вражаючі результати: як в англійських, так і в німецьких бенчмарках Soofi S перевершує всі інші повністю відкриті моделі. Особливо важливо, що Soofi S досягає цього з набагато меншою кількістю активних параметрів — лише 3.2 мільярди на токен.
Гібридна архітектура Mamba-Transformer
Soofi S використовує Mixture-of-Experts (MoE) підхід — загалом 31.6 мільярда параметрів, але активує лише 3.2 мільярди для кожного токена. Це означає, що обчислювальні витрати ближчі до моделі 3B, ніж до традиційної 30B моделі. Консорціум використав архітектуру Nvidia Nemotron 3 Nano без змін — гібридний дизайн, що поєднує шари Mamba-2 зі стандартними шарами attention.
Навчання на 512 GPU та 27 трильйонах токенів
Модель навчалася на 27 трильйонах токенів. У першій фазі (22T токенів) 7.2% даних були німецькомовними, у другій фазі (5T токенів) частка зросла до 15.3%. Навчання відбувалося на 512 Nvidia B200 GPU в дата-центрі Deutsche Telekom у Мюнхені.
Бенчмарки та продуктивність
Англійською мовою Soofi S перевершив OLMo 3 32B у MMLU-Pro, DROP та ARC-Challenge. Німецькою мовою модель досягла найвищих показників у HellaSwag-DE, ARC-DE, MMLU-DE та DROP-DE, перевершивши навіть Llama 4 Scout (109B), маючи в 30 разів менше активних параметрів.
Відповідність OSI та європейський ШІ-суверенітет
Soofi S повністю відповідає OSI Open Source AI Definition 1.0 — ваги моделі, навчальні дані та код повністю відкриті. Це важливий крок до європейської ШІ-незалежності.
Значення для Грузії
Soofi S демонструє, що можна створити високоякісні мовні моделі для неанглійських мов. Це позитивний сигнал для перспектив інтеграції грузинської мови в ШІ.