Summary

Mistral AI released Leanstral 1.5 on July 2, 2026 — an Apache-2.0 licensed Lean 4 theorem-proving model (119B total, 6B active params). It saturates miniF2F, solves 587/672 PutnamBench problems, sets SOTA on FATE-H (87%) and FATE-X (34%), and found 5 previously unknown bugs across 57 open-source repos. Available on Hugging Face and as a free API endpoint.

PreScreening Notes

Score: 7/10 | Priority: high

Notable open-source AI research release from Mistral with SOTA benchmark results and practical bug-finding demos. Primary source. Recent. Strong AI audience fit. No duplicate.

Source Analysis

Primary Mistral announcement verified. Apache-2.0 license and Hugging Face availability confirmed.

Research Notes

Additional Sources Found

Key Facts Verified

  • Confirmed: Apache 2.0; Hugging Face weights + free API leanstral-1-5; 119B total / 6B active MoE (Mistral primary)
  • Confirmed benchmarks (Mistral-reported): 100% miniF2F; 587/672 PutnamBench; 87% FATE-H; 34% FATE-X
  • Confirmed practical: 5 unknown bugs in 57 OSS repos including Rust varinteger overflow (Mistral, THE DECODER)
  • Third-party: Only closed-source Aleph Prover beats Leanstral on PutnamBench (THE DECODER)
  • Minor discrepancy: 6B vs 6.5B active params across sources — Mistral blog says 6B, TestingCatalog says 6.5B

Broader Context

  • AI moving from code generation to code verification — bridges formal methods and practical SWE
  • Open-weight SOTA in niche with reproducible benchmarks supports European AI lab narrative
  • Replaces Leanstral 2603 (retired June 30, 2026)

Evaluation Report

News Value Assessment

DimensionRatingNotes
TimelinessHighReleased Jul 2, 2026
ImpactMedium-HighNiche (formal methods) but SOTA results + practical bug-finding demos broaden appeal
ProminenceHighMistral AI — major European AI lab
ProximityMediumLean/theorem proving is niche; bug-finding angle resonates with devs
NoveltyHighSOTA on multiple benchmarks; 5 unknown bugs found in OSS repos

Audience Fit

  • AI enthusiasts: Excellent — open-weight SOTA model with reproducible benchmarks.
  • Software developers: Good — practical bug-finding in open-source repos is actionable.
  • Finance professionals: Low — no direct relevance.

Risk & Ethics Assessment

  • Verification: PASSED — Mistral primary announcement.
  • Misinformation risk: Low — benchmark claims verifiable via Hugging Face and paper.
  • Fact-checking: Bug-finding claims should reference specific repos during analysis phase.

Publication Strategy

  • Format: standard (600-800 words)
  • Rationale: Technical release needs benchmark context and practical implications explanation.
  • Suggested related wiki: mistral, ai-for-science

Suggested Angle

Turkish headline: “Mistral AI, Açık Kaynak Leanstral 1.5 ile Teorem Kanıtlamada SOTA’ya Ulaştı — 57 Repoda 5 Yeni Bug Buldu”

Editorial angle: Bridge formal methods and practical software engineering — Leanstral isn’t just an academic curiosity; it found real bugs in production open-source code. Explain MoE architecture (119B total, 6B active) and why Apache-2.0 matters for reproducibility. For developers unfamiliar with Lean 4: position this as AI moving from code generation to code verification. Connect to broader AI-for-science and formal verification trends without requiring math PhD to understand the impact.

Editorial Notes

Decision: Approved
Format: standard (600-800 words) — confirmed

Headline suggestions (Turkish):

  • “Mistral AI, Açık Kaynak Leanstral 1.5 ile Teorem Kanıtlamada SOTA’ya Ulaştı — 57 Repoda 5 Yeni Bug Buldu”
  • “Leanstral 1.5: Mistral’ın Formal Doğrulama Modeli 57 Açık Kaynak Repoda Bug Keşfetti”
  • “AI Kod Üretiminden Kod Doğrulamaya: Mistral Leanstral 1.5 Yayında”

Reporting instructions:

  • Use 6B active params (Mistral primary) — note 6.5B discrepancy from TestingCatalog if relevant
  • Benchmark claims are Mistral-reported — attribute accordingly
  • Include Rust varinteger overflow bug as concrete example
  • Explain MoE architecture (119B total, 6B active) for non-specialist readers
  • Apache-2.0 license and Hugging Face availability are key differentiators
  • Free API endpoint leanstral-1-5 available; Leanstral 2603 retired June 30

Key points (must include):

  • 100% miniF2F, 587/672 PutnamBench, 87% FATE-H, 34% FATE-X (Mistral-reported)
  • 5 previously unknown bugs in 57 OSS repos
  • AI moving from code generation to code verification
  • Only closed-source Aleph Prover beats Leanstral on PutnamBench

Draft Article

Mistral AI, Açık Kaynak Leanstral 1.5 ile Teorem Kanıtlamada SOTA’ya Ulaştı — 57 Repoda 5 Yeni Bug Buldu

mistral, 2 Temmuz 2026’da Apache-2.0 lisanslı leanstral 1.5 modelini yayınladı. Lean 4 tabanlı teorem kanıtlama modeli, akademik benchmark’larda güçlü sonuçlar verirken 57 açık kaynak repoda daha önce bilinmeyen 5 bug keşfetti — AI’ın kod üretiminden kod doğrulamaya geçişinin somut örneği.

Ana Gelişme

Leanstral 1.5, mixture-of-experts mimarisiyle 119 milyar toplam parametre ve 6 milyar aktif parametreye sahip. Mistral’in bildirdiği benchmark sonuçları: miniF2F’de %100, PutnamBench’te 672 sorudan 587’si, FATE-H’de %87, FATE-X’te %34. Bu rakamlar Mistral’e atfedilmeli. Model Hugging Face’te ağırlıklarıyla ve leanstral-1-5 adlı ücretsiz API endpoint’iyle erişilebilir.

Pratik keşifler arasında Rust varinteger overflow bug’ı öne çıkıyor — model, üretim açık kaynak kodunda gerçek güvenlik açıkları bulabildiğini gösteriyor. PutnamBench’te yalnızca kapalı kaynak Aleph Prover, Leanstral’ı geçiyor.

Neden Önemli?

formal-verification uzun süredir akademik bir nişti; Leanstral 1.5 bunu pratik yazılım mühendisliğine taşıyor. Apache-2.0 lisansı, sonuçların yeniden üretilebilirliği için kritik — kapalı modellere karşı açık ağırlıklı SOTA iddiası Avrupa AI laboratuvarı narratifini güçlendiriyor. Önceki Leanstral 2603 modeli 30 Haziran 2026’da emekliye ayrıldı.

Teknik Detaylar

Lean 4, matematiksel teoremlerin makine tarafından doğrulanabilir kanıtlarını ifade etmek için kullanılan bir proof assistant. MoE mimarisi, 119B toplam parametrenin yalnızca 6B’sinin her inference adımında aktif olmasını sağlayarak hesaplama maliyetini düşürüyor. Bazı kaynaklarda aktif parametre 6,5B olarak geçiyor; Mistral’in birincil kaynağı 6B diyor.

Bağlam

ai-for-science ve ai-assisted-research trendleri, AI modellerinin yalnızca metin üretmekle kalmayıp matematiksel doğruluk ve kod güvenliği sağlayabileceğini gösteriyor. agentic-ai ekosisteminde formal verification araçları, coding agent’ların ürettiği kodu doğrulamak için tamamlayıcı bir katman oluşturabilir.

Sonraki Adımlar

Leanstral 1.5 API’sinin 30 Eylül 2026’da emekliye ayrılması planlanıyor. Geliştiriciler, Hugging Face ağırlıklarını indirerek kendi ortamlarında çalıştırabilir veya API üzerinden deneme yapabilir.


Kaynaklar