新闻中心

DeepSeek R1也会大脑过载?过度思考后性能下降,少琢磨让计算成本直降43%

2025-03-02
浏览次数:
返回列表

大型语言模型(llm)在执行任务时也可能面临“过度思考”的困境,导致效率低下甚至失败。近期,来自加州大学伯克利分校、uiuc、eth zurich 和 cmu 等机构的研究人员对这一现象进行了深入研究,并发表了题为《过度思考的危险:考察代理任务中的推理-行动困境》的论文(论文链接:https://www.php.cn/link/48e4527085f884352825f9f7df2846db)。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

图片

研究人员发现,在实时交互环境中,LLM 常常在“直接行动”和“周密计划”之间犹豫不决。这种“过度思考”会导致模型花费大量时间构建复杂的行动计划,却难以有效执行,最终事倍功半。

为了深入了解这一问题,研究团队使用现实世界的软件工程任务作为实验框架,并选取了包括o1、DeepSeek R1、Qwen2.5等多种LLM进行测试。他们构建了一个受控环境,让LLM在信息收集、推理和行动之间取得平衡,并持续保持上下文。

图片

研究人员将“过度思考”分为三种模式:分析瘫痪(Analysis Paralysis)、恶意行为(Rogue Actions)和过早放弃(Premature Disengagement)。他们开发了一个基于LLM的评估框架,对4018条模型轨迹进行了量化分析,并构建了一个开源数据集,以促进相关研究。

结果表明,过度思考与问题解决率呈显著负相关。推理模型的过度思考程度几乎是非推理模型的三倍,更容易受到此问题的影响。

图片

图片

为缓解过度思考,研究人员提出了原生函数调用和选择性强化学习两种方法,并取得了显著成效。例如,通过选择性地使用低推理能力的模型,可以大幅降低计算成本,同时保持较高的任务完成率。

图片

Zyro AI Background Remover Zyro AI Background Remover

Zyro推出的AI图片背景移除工具

Zyro AI Background Remover 145 查看详情 Zyro AI Background Remover

研究还发现,模型规模与过度思考之间存在负相关关系,较小模型更容易过度思考。 此外,增加推理token数量可以有效抑制过度思考,而上下文窗口大小则没有显著影响。

图片

图片

图片

图片

图片

图片

图片

这项研究为理解和解决LLM的“过度思考”问题提供了宝贵的见解,有助于提升LLM在实际应用中的效率和可靠性。

以上就是DeepSeek R1也会大脑过载?过度思考后性能下降,少琢磨让计算成本直降43%的详细内容,更多请关注其它相关文章!


# 工程  # 科大  # 山东如何推广网站优化  # 塘沽建设网站  # 喀什正规网站建设  # 越秀企业管理SEO攻略  # 重庆seo教程技巧  # 绵阳门户网站建设报价  # 浙江seo教程推荐公司  # seo的分词和用法  # 网站排名优化 询问宙m思环境有  # 网站建设ps网站有哪些  # 进行了  # 你该  # 更容易  # 网易  # 系列产品  # 也会  # 这一  # 软件工程  # 开源  # qwen  # deepseek  # 大型推理模型 


相关栏目: 【 行业资讯67740 】 【 技术百科0 】 【 网络运营39195


相关推荐: dos命令如何复制目录结构  如何更新苹果ios16  春运返程如何抢票成功  电脑显示屏上power是什么意思  rxjs和typescript什么意思  类似微信的聊天软件有哪些  自由服务器如何做动态ip域名解析  双十一哪一天买比较便宜?  165开头的是什么电话号码  春运车站抢票和网上抢票  typescript书籍哪个好  苹果16系统网站有哪些  a股等权平均市盈率是什么意思  台达变频器power灯是什么意思  j*a怎么读取char数组  夸克绑定设备是什么意思  春运抢票哪个平台好一点  单片机程序负数怎么表示  如何查询固态硬盘序列  为什么程序员热爱typescript  征信不好如何恢复信誉度 ‌征信不好恢复信誉度的方法  抖音GMV是什么_抖音GMV是什么意思  夸克网盘下载为什么要钱  如何在命令行写j*a程序  typescript为什么现在才火  1s等于多少ms  typescript全局配置放哪里  爱奇艺视频怎么下载到手机u盘怎么转换格式方法  命令指示符如何打开盘符  市盈率高是什么意思  春运抢票软件哪个好  如何显示固态硬盘  单片机加法程序怎么写  如何通过命令行启动tomcat  哪些库是typescript  如何操作fixup命令  折叠屏手机共有哪些  折叠屏手机选择哪个好  春运抢票多久可以买到票  树莓派命令行如何新建文件  typescript有哪些版本  阿里云盘共享账户怎么用  typescript中如何引入本地js  drawing是什么意思  哪些编程软件需要typescript  苹果16充电方式有哪些  如何用adb命令停用系统软件  如何开发typescript  夸克前缀后缀什么意思啊  哪些编程软件需用typescript 

搜索