首页 资讯 正文

我国科学家提出高效推理策略 可避免大模型“过度思考”

体育正文 164 0

我国科学家提出高效推理策略 可避免大模型“过度思考”

我国科学家提出高效推理策略 可避免大模型“过度思考”

随着人工智能大模型的不断发展,如何让(ràng)其在“难”的问题上深入思考,而不是对所有(suǒyǒu)问题“想个(xiǎnggè)不停”?记者5月29日(rì)从中国科学院自动化研究所获悉,该所联合鹏城实验室提出了一种高效推理策略(cèlüè)AutoThink,可让大模型实现自主切换思考模式,避免“过度思考”。 “当前,越来越多的(de)大(dà)模型开始具备‘深度思考能力’。”中国科学院自动化研究所研究员张启超说,模型在回答问题之前要先生成一整段包含反复自我反思、自我验证的推理过程,然后再(zài)给出答案。 张启超表示(biǎoshì),这一思考模式显著提升了大模型解决复杂问题的(de)能力,但同时也带来了“过度思考”的问题,即在处理简单(jiǎndān)任务时也会生成冗余的思考过程。 “比如使用者对大模型提问‘2+3等于(děngyú)几’,大模型可能会从自然数定义讲起,列出(lièchū)加法交换律,甚至反复确认,最后才输出(shūchū)答案是5。”张启超说,这种不必要的“过度思考(sīkǎo)”现象在推理模型中广泛存在。 针对(zhēnduì)这一问题,AutoThink可赋予推理模型根据题目(tímù)难度自主切换思考模式(móshì)的能力,即通过所设计的提示词和多阶段强化学习,引导其自主决定是否进行深度思考。 张启超介绍,AutoThink提供(tígōng)了一种简单而有效的推理新范式——通过省略号提示配合三阶段强化学习,引导大模型不再“逢题必深思熟虑”,而是根据问题难度自主决定“是否思考”“思考多少”。在多个数学数据(shùjù)集上,AutoThink实现了准确率(zhǔnquèlǜ)与效率平衡,既提升性能又(yòu)节省算力,展示出较强的适应性和(hé)实用性。 据悉,AutoThink已集成于(yú)一站式智能科研平台ScienceOne,并(bìng)将用于训练ScienceOne的基座(jīzuò)大模型S1-Base。研发团队表示,让大模型“更聪明(cōngmíng)地思考、更简洁地表达”,是未来科学基础大模型演进的重要方向。(记者宋晨)
我国科学家提出高效推理策略 可避免大模型“过度思考”

欢迎 发表评论:

评论列表

暂时没有评论

暂无评论,快抢沙发吧~