Mistral випускає Leanstral 1.5 — модель із відкритим кодом, яка досягає 100% у формальній математиці
Нова відкрита модель Mistral Leanstral 1.5 демонструє 100% результат на бенчмарку формальної математики miniF2F, розв'язує 587 із 672 задач PutnamBench і знаходить реальні помилки в промисловому коді.
Mistral AI зробила ще один важливий крок у світі штучного інтелекту, представивши Leanstral 1.5 — модель із відкритим кодом для формальної верифікації.
Leanstral 1.5 — це модель із відкритим кодом під ліцензією Apache 2.0. Модель спеціально навчена працювати з Lean 4 для формальних математичних доведень.
miniF2F: Ідеальний результат 100%
Leanstral 1.5 досягла ідеального результату 100% на miniF2F — бенчмарку, що охоплює задачі від рівня середньої школи до математичних олімпіад.
PutnamBench: 587 задач із 672
Модель успішно розв'язала 587 задач PutnamBench, лідируючи серед усіх відкритих моделей. Єдиний конкурент — пропрієтарний Aleph Prover.
Алгебраїчні бенчмарки
FATE-H: 87%, FATE-X: 34% — найкращі показники серед відкритих моделей.
Виявлення реальних помилок
Leanstral 1.5 знайшла 5 невідомих помилок у 57 відкритих репозиторіях.