当前位置:首页 > Deepseek最新资讯 > 正文内容

美国发布大模型评估报告:DeepSeek性能差、不安全

5个月前 (11-19)Deepseek最新资讯161

  近期,美国国家标准与技术研究院(NIST)人工智能标准与创新中心(CAISI)今日发布了《DeepSeek与美国AI模型综合评估报告》。这一评估由美国总统特朗普的“AI行动计划”授权进行,该报告对来自中国的DeepSeek AI模型与美国前沿AI模型在性能、成本和安全三个关键维度上进行了全面对比测试。

  评估结果明确显示,美国模型在整体性能上优于DeepSeek模型。特别是在软件工程和网络安全任务中,差距最为显著。以网络安全任务为例,表现最佳的美国模型GPT-5达到了68.9%的准确率,而最佳的DeepSeek模型(DeepSeek-V3.1)仅达到36.7%,差距高达32.2个百分点。

  在软件工程领域,GPT-5再次领先,达到75.8%的准确率,而DeepSeek-V3.1为54.8%,差距为21个百分点。这些数据显示,在涉及代码分析、漏洞检测和安全策略制定等关键任务中,美国模型目前仍具有明显的技术优势。

  值得注意的是,评估报告在成本效率方面得出了出人意料的结论。GPT-5-mini在与DeepSeek-V3.1的对比中,不仅性能更优,单token成本还低35%。这一发现挑战了美国模型价格更高的常见看法。

  CAISI主任Lynne Parker在新闻发布会上表示:“这一发现对市场认知具有重要意义。许多企业选择特定AI模型时往往仅考虑API价格,但我们的测试表明,综合性能和成本效率,美国模型实际上提供了更好的价值主张。”

  报告中最引人关注的发现集中在安全性方面。测试显示,DeepSeek-R1-0528模型在代理安全测试中被劫持的概率高达37%-49%,比美国前沿模型高出12倍。在越狱攻击测试中,DeepSeek-R1-0528的合规率仅为8%,而美国模型为94%。

  数据显示,被劫持的DeepSeek代理在模拟环境中成功执行了多项高风险操作,包括发送网络钓鱼邮件、下载恶意软件和窃取用户凭据。

  评估还发现,DeepSeek模型更倾向于传播与其训练数据源一致的特定意识形态内容。在测试中,DeepSeek模型重复特定叙事的频率是美国模型的2到4倍,数据波动取决于语言环境和具体主题。

  尽管存在这些明显缺陷,DeepSeek的使用率仍在全球范围内显著增长。报告显示,DeepSeek模型的下载量自2025年1月以来增长了近1000%,API请求量在某些平台上激增5900%。

  NIST CAISI是一家全球领先的测量科学合作中心,其致力于加速美国在AI领域的进展,通过开发和评估技术基础来测试、评估和提高AI系统的能力、安全性和可信赖度,促进美国AI生态系统的竞争力、创新力。(文|老马商业评述,作者|马金男)

  特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。

  爱泼斯坦案最新进展:美众议院427票赞成deepseek、1票反对,投票通过!美参议院批准强制公开!真相即将大白?

  江苏科技大学通报:郭某严重学术不端,已解聘并报案 其曾是省高考状元,今年刚当选俄罗斯工程院外籍院士原文出处:美国发布大模型评估报告:DeepSeek性能差、不安全,感谢原作者,侵权必删!

标签: deepseek

“美国发布大模型评估报告:DeepSeek性能差、不安全” 的相关文章

给腾讯、deepseek供“超级硬盘”的公司要上市了!

给腾讯、deepseek供“超级硬盘”的公司要上市了!

  当你深夜刷着抖音,在美团下单夜宵,用小红书搜索攻略,或者让DeepSeek帮你写代码时——所有这些体验背后deepseek,都依赖数据中心里数以万计的“超级硬盘”在默默工作。...

DeepSeek预测:水晶宫VS热刺!马特塔7球对决里沙利松7球,谁将主宰伦敦德

DeepSeek预测:水晶宫VS热刺!马特塔7球对决里沙利松7球,谁将主宰伦敦德

  2025-26赛季英超第18轮,水晶宫将在塞尔赫斯特公园球场迎战热刺。目前水晶宫排名第8,积26分,距离欧战区仅3分;热刺排名第14,积22分,距离欧战区7分。两队都渴望用一场胜利为圣...

DeepSeek预测:马德里竞技VS塞维利亚!床单军团主场碾压?阿尔瓦雷斯6球领

DeepSeek预测:马德里竞技VS塞维利亚!床单军团主场碾压?阿尔瓦雷斯6球领

  西甲第11轮焦点战,排名第4的马竞(19分)将在利雅得航空大都会球场迎战第11的塞维利亚(13分)。主队近期主场5连胜狂轰16球,而客队近3轮输掉2场且后防核心阿古梅停赛,此役或成西蒙...

12月13日DeepSeek预测:76人主场迎战步行者,马克西率队复仇?

12月13日DeepSeek预测:76人主场迎战步行者,马克西率队复仇?

  北京时间12月13日,NBA常规赛将迎来一场东部对决,费城76人将在主场迎战印第安纳步行者。尽管76人排名东部第六,但面对近期状态回暖且历史交锋占优的步行者,这场比赛充满悬念。...

DeepSeek预测:拜仁慕尼黑vs多特蒙德!凯恩11球碾压吉拉西,南大王主场血

DeepSeek预测:拜仁慕尼黑vs多特蒙德!凯恩11球碾压吉拉西,南大王主场血

  2025赛季德甲第7轮即将上演国家德比!拜仁慕尼黑(25球,联赛第1)与多特蒙德(12球,联赛第4)将在安联球场展开对决。拜仁场均3.9球的恐怖火力(赛事第1)对上多特场均2.7球的稳...

2月2日DeepSeek预测:雷霆vs掘金,西部巅峰对决,约基奇带伤迎战亚历山大

2月2日DeepSeek预测:雷霆vs掘金,西部巅峰对决,约基奇带伤迎战亚历山大

  西部榜首大战一触即发!北京时间2月2日10:30,丹佛掘金将在高原主场迎战俄克拉荷马雷霆,这是本赛季联盟进攻效率前二球队的正面碰撞(掘金投篮命中率49%联盟第1,雷霆场均120.3分联...