Mistral-მა Leanstral 1.5 გამოუშვა — ღია კოდის მოდელი, რომელიც ფორმალურ მათემატიკაში 100%-ს აღწევს
Mistral-ის ახალი ღია კოდის მოდელი Leanstral 1.5 ფორმალურ მათემატიკაში 100%-იან შედეგს აჩვენებს — miniF2F ბენჩმარკზე სრულ ქულას აღწევს და PutnamBench-ზე 672 ამოცანიდან 587-ს წყვეტს.
Mistral AI-მა კიდევ ერთი მნიშვნელოვანი ნაბიჯი გადადგა ხელოვნური ინტელექტის სამყაროში — კომპანიამ წარმოადგინა Leanstral 1.5, ღია კოდის მოდელი, რომელიც სპეციალურად ფორმალური ვერიფიკაციისთვის არის შექმნილი.
Leanstral 1.5 არის Mistral AI-ის მიერ შემუშავებული ღია კოდის მოდელი Apache 2.0 ლიცენზიით. მოდელი სპეციალურად არის გაწვრთნილი Lean 4 პროგრამირების ენაზე მუშაობისთვის, რაც მას ფორმალური მათემატიკური მტკიცებულებებისა და კოდის ვერიფიკაციის ძლიერ ინსტრუმენტად აქცევს.
miniF2F: სრული 100%
Leanstral 1.5-ის ერთ-ერთი ყველაზე შთამბეჭდავი მიღწევაა miniF2F ბენჩმარკზე 100%-იანი შედეგი. miniF2F მოიცავს ამოცანებს საშუალო სკოლის დონიდან მათემატიკური ოლიმპიადების სირთულემდე. 100% ნიშნავს, რომ მოდელმა ყველა ამოცანა სრულყოფილად ამოხსნა.
PutnamBench: 587 ამოცანა 672-დან
PutnamBench წარმოადგენს 672 ამოცანას Putnam მათემატიკური კონკურსიდან. Leanstral 1.5-მა 587 წარმატებით ამოხსნა, რაც 87%-ია. მოდელი ლიდერობს ყველა ღია კოდის მოდელს შორის.
ალგებრის ბენჩმარკები: FATE-H და FATE-X
FATE-H-ზე მოდელმა 87% აჩვენა, FATE-X-ზე 34%. ეს საუკეთესო შედეგებია ღია კოდის მოდელებს შორის.
Lean 4 — რა არის ეს?
Lean 4 არის ფუნქციური პროგრამირების ენა და თეორემების დამტკიცების ასისტენტი Microsoft Research-ისგან. მისი მთავარი დანიშნულებაა მათემატიკური მტკიცებულებებისა და კოდის სისწორის ფორმალური ვერიფიკაცია.
რეალური ბაგები რეალურ კოდში
Leanstral 1.5-მა დაასკანირა 57 ღია კოდის რეპოზიტორი და აღმოაჩინა 5 მანამდე უცნობი შეცდომა, მათ შორის overflow bug Rust-ში.
ხელმისაწვდომობა
Leanstral 1.5 ხელმისაწვდომია Hugging Face-ზე Apache 2.0 ლიცენზიით.
რატომ აქვს ამას მნიშვნელობა საქართველოსთვის?
ქართულ უნივერსიტეტებსა და კომპანიებს შეუძლიათ მისი თავისუფლად გამოყენება. SiTeach ვორკშოპებში ინტეგრაცია ქართველ დეველოპერებს მომავლის უნარებს შესძენს.