当前位置:首页 > Deepseek最新资讯 > 正文内容

超越DeepSeek-R1,数学形式化准确率飙升至84% 字节南大开源

17小时前Deepseek最新资讯23

  该框架创新性地将评估模型置于核心位置。通过强化学习训练的CriticLeanGPT模型,能像数学专家一样精准判断形式化代码是否贴合原始语义,配合迭代优化机制,让生成的定理证明既符合语法规范,又忠实于数学逻辑。

  将自然语言描述的数学命题转化为机器可验证的形式化代码(如Lean 4定理),是自动化定理证明领域的基础性难题,其核心挑战不仅在于语法层面的准确转换,更在于对数学语义的深度理解与忠实还原。

  尽管现有研究在生成模型与编译有效性上取得一定进展,但在复杂问题的语义对齐上仍存在显著瓶颈,具体体现在以下三方面:

  CriticLean框架将引入强化学习的 Critic 模型,通过训练专门的语义评价模型(CriticLeanGPT)、结合 Lean 4 编译器反馈进行迭代生成。系统性解决语义对齐、评价可靠性与数据质量问题,为数学自动化形式化提供了全新范式。

  该模型能识别12类常见错误,包括类型错误(占比24.9%)、数学表示错误(23.8%)等,能够发现“代码编译通过但逻辑偏离原题”的隐性问题。

  CriticLeanBench是用于评估模型在数学形式化任务中关键推理能力的基准测试,旨在全面衡量模型将自然语言数学陈述转化为经形式验证的定理声明等方面的表现.

  CriticLeanBench 在数据收集阶段,从多个数据来源选取数学陈述及对应的Lean 4 陈述,提交Lean 4陈述到编译器。1)对于编译失败的语句,随机采样保留编译器反馈信息。2)对于编译成功的部分,通过使用 DeepSeek R1 结合专家校验的方式保留正确和错误的样本(错误的样本保留错误信息)。

  与高度偏斜的 Lean-Workbook 相比,FineLeanCorpus 提供了更透明的批判过程、更高比例的顶级问题,以及更加平衡和多样化的主题分布

  与高度偏斜的 Lean-Workbook 相比,FineLeanCorpus 提供了更透明的批判过程、更高比例的顶级问题,以及更加平衡和多样化的主题分布

  将该框架应用于自动形式化流程,配合Kimina-Autoformalizer-7B生成器,准确率从38%(单轮生成)提升至84%(多轮迭代优化),其中语义评估环节贡献了30个百分点的提升。

  特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。

  中共中央政治局召开会议 决定召开二十届四中全会 分析研究当前经济形势和经济工作 中共中央总书记习近平主持会议

  中共中央政治局召开会议 决定召开二十届四中全会 分析研究当前经济形势和经济工作 中共中央总书记习近平主持会议

标签: deepseek

“超越DeepSeek-R1,数学形式化准确率飙升至84% 字节南大开源” 的相关文章

“奋力打开改革发展新天地”——进一步全面深化改革不断向广度和深度进军

“奋力打开改革发展新天地”——进一步全面深化改革不断向广度和深度进军

  星火·AIGC底座,2024年10月,2024年7月,2024年8月召开的中心周全深化革新委员会第六次会议,宣示革新决心、擘画改改革局。开拓AIGC赋能视听家当成长新场景。孵化优质AI...

中外对话

中外对话

  “星火·医疗”依托全栈 AI 能力与医疗可托数据办事底座,改动监察法,展现出强盛的用户转化能力与生态黏性。制造业领域外资准入限定办法实现“清零”;习总出席中心城市事情会议并揭橥首要讲话...

浪潮企业云“民航大模型”基础能力通过中国信通院民航领域大模型能力验证!

浪潮企业云“民航大模型”基础能力通过中国信通院民航领域大模型能力验证!

  近日,首批民航云大模型场景应用能力评估结果于中国通信标准化协会主论坛正式发布,浪潮企业云“民航大模型”基础能力支撑的“民航智慧空管AI时空大模型”成功通过中国信通院民航领域大模型能力验...

又是梅西粉丝集体沉默的一天

又是梅西粉丝集体沉默的一天

  这都发到乒乓球区了,是不是怕人知道今天梅西助攻梅开二度,补时助攻队友绝杀,罗密还不得哭天喊地?   这都发到乒乓球区了,是不是怕人知道今天梅西助攻梅开二度,补时助攻队...

900 万、DeepSeek 部署大单

900 万、DeepSeek 部署大单

  需求概况:有效支撑各委办局在政务场景下对大模型等智能化应用的迫切需求,以政府采购服务的方式搭建岳阳市市级政务云智算专区,部署...

塞斯科和霍伊伦是两种风格

塞斯科和霍伊伦是两种风格

  看了那个塞斯科近80脚射门,一大半都是禁区外远射,也有很多盘带后的射门,这应该是一个喜欢回撤拿球的中锋,机动性很强,霍伊伦是典型的禁区里找机会的中锋,不喜欢拿球。  ...