当前位置:首页 > Deepseek最新资讯 > 正文内容

谷歌新发现:DeepSeek 推理分裂出多重人格,左右脑互搏越来越聪明

3个月前 (01-20)Deepseek最新资讯73

  研究发现,当遇到 GPQA graduate-level 科学问题、复杂数学推导这类高难度任务时,这种内部观点冲突会变得更加激烈。

  团队通过分析 DeepSeek-R1 和 QwQ-32B 等模型的思维轨迹发现,它们的推理过程充满了对话感。

  团队借助稀疏自编码器 SAE,对 AI 的推理黑盒进行了深度解码,成功“监听”到了 AI 的脑内群聊。

  首先,研究者让 AI 执行复杂的数学或逻辑推理任务。在模型产出思维链的同时,团队同步提取其隐藏层神经元的激活数值。

  将这些激活数据输入 SAE,通过 SAE 的稀疏约束机制,就可以把杂乱的激活拆解为“自问自答”、“切换视角”等独立的对话语义特征;

  通过分析这些特征的激活频率以及它们在时间序列上的协同关系,团队成功识别出了不同的内部逻辑实体。

  再给上述特征打上“规划者”、“验证者”等虚拟角色的标签,就成功解码了 AI 内部的多角色对话行为deepseek

  通过对比 DeepSeek-R1 与 DeepSeek-V3、Qwen-2.5-32B-IT 这类普通指令模型的推理轨迹,发现推理模型的对话式行为出现的频率显著更高。

  当团队通过激活添加法强化模型的对话特征,放大“哦!”这类表达惊讶、转折的话语标记时,模型在 Countdown 算术推理任务中的准确率直接从 27.1% 翻倍至 54.8%。

  研究人员不提供任何对话结构的训练信号,只奖励模型答对题目的行为,结果发现模型会自发学会用对话式思考;

  而先通过多智能体对话数据对模型进行微调,再进行推理训练,进步速度会远快于直接训练推理或用独白式推理数据微调的模型。

  在 Qwen-2.5-3B 和 Llama-3.2-3B 两个模型体系中,早期训练阶段对话微调模型的准确率比独白微调模型高出 10% 以上,Llama-3.2-3B 到训练后期差距甚至扩大到 22%。原文出处:谷歌新发现:DeepSeek 推理分裂出多重人格,左右脑互搏越来越聪明,感谢原作者,侵权必删!

标签: deepseek

“谷歌新发现:DeepSeek 推理分裂出多重人格,左右脑互搏越来越聪明” 的相关文章

11月11日DeepSeek预测:开拓者vs魔术,班凯罗率队主场复仇?

11月11日DeepSeek预测:开拓者vs魔术,班凯罗率队主场复仇?

  作为NBA知名青年军,魔术队(东部第11,4胜6负)将在安利中心迎战西部第7的开拓者(5胜4负)。此役对双方季后赛卡位至关重要——魔术若胜可缩小与东部前八差距,开拓者则需稳固西部前八席...

网传DeepSeek计划年底前发布AI智能体,公司暂无回应

网传DeepSeek计划年底前发布AI智能体,公司暂无回应

  9月4日,有消息称,中国人工智能公司DeepSeek计划在2025年底前正式发布AI智能体(AI Agent),以抢占下一代人机交互入口。   根据公开资料整理,AI...

震荡股市中的AI交易员:DeepSeek从从容容游刃有余? 港大开源一周8k星标

震荡股市中的AI交易员:DeepSeek从从容容游刃有余? 港大开源一周8k星标

  2025 年 10 月,美股经历了一轮典型的震荡行情:月初科技股强势反弹,月中通胀数据扰动市场,10 月 10 日前后纳指单日波动超过 3%。   就在这波谲云诡的市...

2月28日DeepSeek预测:掘金vs雷霆,约基奇能否带队逆袭西部榜首?

2月28日DeepSeek预测:掘金vs雷霆,约基奇能否带队逆袭西部榜首?

  西部第四的丹佛掘金将客场挑战榜首俄克拉荷马雷霆,这场强强对话或将成为西部格局的关键转折点。约基奇与亚历山大的MVP级对决,搭配两队近期胶着的状态,让比赛充满悬念。  ...

DeepSeek开源全新OCR模型!弃用CLIP改用Qwen轻量小模型

DeepSeek开源全新OCR模型!弃用CLIP改用Qwen轻量小模型

  相较于去年10月20日发布的初代模型,DeepSeek-OCR 2的核心突破在于打破了传统模型死板的“光栅扫描”逻辑,实现了   为此,DeepSeek-OCR 2弃...

11月24日 DeepSeek预测 湖人vs爵士:东契奇率队冲击五连胜,爵士主场

11月24日 DeepSeek预测 湖人vs爵士:东契奇率队冲击五连胜,爵士主场

  北京时间11月24日09:00,NBA常规赛将迎来一场西部对决,犹他爵士坐镇主场迎战洛杉矶湖人。目前爵士以5胜10负排名西部第11,而湖人则以11胜4负高居西部第三。两队5天前刚在洛杉...