Mistral AIのLeanstral 1.5、miniF2Fで100%達成し5つの実バグを発見

Mistral AIは、形式検証に特化したオープンソースモデル「Leanstral 1.5」をリリースしました。このモデルは、形式数学ベンチマークminiF2Fで驚異の100%スコアを達成し、さらにPutnam問題を587問解くという優れた性能を見せています。特筆すべきは、57のオープンソースリポジトリを分析し、これまで未発見だった5つの実バグを発見した点です。Leanstral 1.5はApache 2.0ライセンスでHugging Faceにて公開されており、ミッドトレーニング、SFT（Supervised Fine-Tuning）、RL（Reinforcement Learning）を用いてトレーニングされています。技術的意義としては、Leanstral 1.5はLean 4プログラミング言語を用いた形式検証において、AIモデルが人間の専門家レベルの能力を発揮できることを証明しました。これにより、数学的証明やソフトウェアの正確性を形式的に検証するプロセスが大幅に効率化され、これまで困難だった複雑なシステムの検証も可能になる可能性があります。社会・産業への影響としては、ソフトウェア開発における品質保証やセキュリティ検証の信頼性が飛躍的に向上し、バグの早期発見・修正によるコスト削減が期待されます。特に、自動運転システムや医療機器など、高い信頼性が求められる分野での応用が注目されます。今後の展望として、この技術がさらに発展することで、プログラマーがコードの正確性を自動的に検証できる時代が到来する可能性があり、AIがソフトウェア開発ライフサイクル全体に深く組み込まれる道が開かれるでしょう。