LeanCat: Leanにおける圏論のベンチマーク

Research Paper#Artificial Intelligence, Formal Verification, Category Theory🔬 Research|分析: 2026年1月3日 08:41
公開: 2025年12月31日 11:33
1分で読める
ArXiv

分析

この論文は、Leanにおける形式的な圏論のベンチマークスイートであるLeanCatを紹介しています。これは、現代数学に不可欠な抽象的かつライブラリを介した推論における大規模言語モデル(LLM)の能力を評価するために設計されています。既存のベンチマークの限界に対処し、数学的構造の統一言語である圏論に焦点を当てています。構造的およびインターフェースレベルの推論に焦点を当てることで、形式的な定理証明におけるAIの進歩を評価するための貴重なツールとなっています。
引用・出典
原文を見る
"The best model solves 8.25% of tasks at pass@1 (32.50%/4.17%/0.00% by Easy/Medium/High) and 12.00% at pass@4 (50.00%/4.76%/0.00%)."
A
ArXiv2025年12月31日 11:33
* 著作権法第32条に基づく適法な引用です。