字节跳动BFS-Prover模型开源：引领形式化数学推理迈入72.95%准确率新纪元

在人工智能攻克数学推理难题的征程上，字节跳动团队近日迈出了里程碑式的一步。其最新研发的BFS-Prover-V1-7B形式化数学定理证明模型正式对外开源，该模型基于Qwen2.5-Math-7B构建，在国际权威的MiniF2F测试基准中斩获72.95%的证明成功率，一举刷新该领域SOTA纪录，成为当前Lean4形式化环境下性能最强的自动定理证明系统。这一突破性进展不仅标志着AI在复杂逻辑推理领域的能力跃升，更为数学研究与形式化验证产业带来了革命性工具。

【免费下载链接】BFS-Prover-V1-7B项目地址: https://ai.gitcode.com/hf_mirrors/ByteDance-Seed/BFS-Prover-V1-7B

创新双阶段训练架构解析

BFS-Prover的卓越性能源于其独创的两阶段训练体系。模型首先在超大规模混合数学语料库上完成监督微调（SFT），该数据集融合了Lean-Github开源社区的证明代码、Lean-Workbook标准化习题集以及NuminaMath-CoT结构化推理样本，总训练token量超过80亿。这一阶段使模型全面掌握形式化数学的语法规则与基础推理模式，构建起从自然语言命题到形式化表达的映射能力。

如上图所示，BFS-Prover创新引入编译器反馈驱动的直接偏好优化（DPO）训练阶段。该流程通过Lean4编译器实时捕获证明过程中的类型错误、战术失效等反馈信息，构建"成功-失败"对比样本对，使模型能够针对性优化战术选择策略。这一机制使模型在复杂证明场景中的战术调用准确率提升了37%，显著降低了推理路径的探索成本。

最佳优先搜索机制的范式突破

不同于当前主流自动定理证明系统采用的蒙特卡洛树搜索（MCTS）框架，BFS-Prover创新性地采用简化的最佳优先搜索（BFS）架构，并设计了动态自适应的战术预算分配机制。该系统通过评估当前证明状态的复杂度与战术成功概率，自动调整每个分支的探索深度与宽度，在保证搜索效率的同时避免陷入局部最优解。

在模型扩展性测试中，研究团队进行了从1倍到32倍战术预算的梯度扩展实验。结果显示，当预算从基础值提升至32倍时，模型在MiniF2F基准上的证明成功率从27.10%稳步提升至45.88%，呈现出优异的线性扩展特性。尤为值得关注的是，BFS-Prover完全摒弃了传统系统依赖的评论家模型（Critic Model），仅通过单一基础模型配合搜索策略即实现性能突破，将计算资源需求降低60%以上，为在普通GPU集群部署高性能证明系统提供了可能。

性能超越同类系统的全面对比

在国际公认的MiniF2F形式化数学证明基准测试中，BFS-Prover展现出压倒性性能优势。该基准包含来自《数学分析》《抽象代数》等高等数学领域的1600余个定理命题，全面考察系统处理不同难度、不同数学分支问题的综合能力。测试结果显示，BFS-Prover以72.95%的总体证明成功率，大幅领先当前主流定理证明系统。

如上图所示，该柱状图清晰展示了BFS-Prover与行业同类产品的性能差距。具体而言，较腾讯HunyuanProver的68.4%提升4.55个百分点，超越阿里InternLM2.5-StepProver的65.9%达7.05个百分点，领先深度求索DeepSeek-Prover-V1.5的63.5%更是达到9.45个百分点。在代数拓扑、微分方程等传统难点领域，BFS-Prover的性能优势更为显著，证明成功率平均提升12-15个百分点，充分验证了其在复杂数学场景下的推理能力。

多场景形式化验证应用

BFS-Prover已深度集成至LeanDojo开源证明环境，提供开箱即用的形式化证明辅助能力。该系统支持通过API接口与Jupyter Notebook、VS Code等主流开发工具联动，实现证明过程的可视化与交互式调整。在实际应用中，该模型展现出广泛的适用性：

在高等数学研究领域，科研人员已成功应用BFS-Prover完成了实分析中Heine-Borel定理的形式化验证，将原本需要3名专家协作3周的证明工作缩短至2小时内完成。系统不仅自动生成了完整的证明代码，还能对关键引理的等价表述进行优化推荐，帮助研究团队发现了两种新的证明路径。

数学教育领域，BFS-Prover可作为智能教学助手，自动解答从高中数学到大学微积分的各类习题。与传统解题系统不同，该模型能输出符合Lean4规范的形式化证明过程，每步推导都附有严格的逻辑依据，使学生能够清晰理解数学结论的形成过程。目前已支持数学分析、线性代数等5个学科方向的习题自动解答，平均证明准确率达89.3%。

在程序验证领域，BFS-Prover展现出强大的跨领域迁移能力。通过将程序正确性命题转化为形式化数学命题，该系统已成功验证了包括排序算法、密码学协议在内的23个经典程序模块的正确性。在对SHA-256加密算法核心模块的验证中，BFS-Prover自动发现了3处潜在的边界条件错误，证明了其在高可靠性系统开发中的应用价值。

快速上手与代码示例

为降低使用门槛，BFS-Prover提供了与Hugging Face Transformers生态兼容的API接口，开发者可通过数行代码即可实现高性能定理证明功能。以下Python代码片段展示了如何调用模型解决简单的等式证明问题：

from transformers import AutoModelForCausalLM, AutoTokenizer # 加载模型与分词器 model = AutoModelForCausalLM.from_pretrained("bytedance-research/BFS-Prover") tokenizer = AutoTokenizer.from_pretrained("bytedance-research/BFS-Prover") # 定义证明状态：已知h : x = y + 2，需证明x - 1 = y + 1 state = "h : x = y + 2 ⊢ x - 1 = y + 1" prompt = state + ":::" # 使用":::"作为状态与证明内容的分隔符 # 生成证明战术 inputs = tokenizer(prompt, return_tensors="pt") outputs = model.generate(**inputs, max_new_tokens=128, temperature=0.7) # 提取并打印证明结果 proof = tokenizer.decode(outputs[0], skip_special_tokens=True).split(":::")[1] print(f"自动生成的证明战术：{proof}") # 输出: simp [h] （使用simp战术结合假设h完成证明）

该示例中，模型自动选择了simp [h]战术，通过调用Lean4的化简器（simplifier）并应用假设h，一步完成了等式变换。对于更复杂的证明目标，模型会生成包含多步战术的证明序列，自动探索最优证明路径。开发者可通过调整max_new_tokens参数控制证明长度，或通过temperature参数调节输出的创造性。

未来展望与学术贡献

字节跳动团队在技术报告中披露，BFS-Prover的下一版本（V2）将重点突破两大核心能力：一是引入多模态证明状态理解机制，支持将几何图形、图表等视觉信息转化为形式化描述，解决当前模型在几何定理证明中的瓶颈；二是开发跨语言形式化迁移能力，实现从Isabelle/HOL、Coq等其他证明助手到Lean4环境的命题自动转换，构建多语言形式化知识库互联体系。

相关研究成果已以《BFS-Prover: Scalable Best-First Tree Search for LLM-based Automatic Theorem Proving》为题发表于arXiv预印本平台（论文编号2502.03438），详细阐述了模型架构、训练方法与实验验证过程。开源代码仓库已同步更新至GitCode，包含完整的训练脚本、评估工具与示例数据集。

BFS-Prover的开源发布，不仅为数学研究者提供了强大的智能辅助工具，更推动了形式化方法在工业界的普及应用。随着模型能力的持续进化，我们有理由相信，人工智能将在未来几年内逐步攻克更具挑战性的数学难题，为人类知识边界的拓展贡献AI力量。

【免费下载链接】BFS-Prover-V1-7B项目地址: https://ai.gitcode.com/hf_mirrors/ByteDance-Seed/BFS-Prover-V1-7B