当前位置:首页 > Deepseek最新资讯 > 正文内容

AI推理进入“10毫秒、1块钱”时代!浪潮信息发布面向智能体优化AI计算系统

7个月前 (09-29)Deepseek最新资讯351

  光明网讯9月26日,在2025人工智能计算大会上,浪潮信息宣布,基于元脑SD200超节点AI服务器,DeepSeek R1大模型token生成速度仅需8.9毫秒,创造国内大模型最快token生成速度。最新发布的元脑HC1000超扩展AI服务器,实现每百万token成本首次击破1元。

  随着Scaling Law持续推动模型能力跃升,以DeepSeek为代表的开源模型极大降低了创新门槛,加速智能体产业化的到来。智能体产业化的核心三要素是能力、速度和成本。其中,模型能力决定了智能体的应用上限,交互速度决定了智能体的商业价值deepseek,token成本决定了智能体的盈利能力。

  浪潮信息对AI计算架构的持续创新,旨在解决智能体产业化面临的交互速度和token成本两大瓶颈,为多智能体协同与复杂任务推理的规模化落地,提供高速度、低成本的算力基础设施。

  浪潮信息最新公布,基于元脑SD200超节点AI服务器运行DeepSeek R1大模型,单token生成速度低至8.9毫秒,带动国内AI服务器token生成速度率先进入“10毫秒时代”。

  元脑SD200基于创新研发的多主机低延迟内存语义通信架构,在单机内实现了64路本土AI芯片的高速统一互连,单机可承载4万亿参数单体模型,或部署多个万亿参数模型组成的智能体应用,实现多模型协同执行复杂任务。

  为实现极低的通信延迟,元脑SD200采用精简高效的三层协议栈,原生支持多种内存语义操作,避免冗余数据拷贝,将基础通信延迟降至百纳秒级,硬件化链路层重传与分布式预防式流控进一步适配高吞吐、低延迟的 AI 推理场景。

  浪潮信息发布元脑HC1000超扩展AI服务器,基于全新开发的全对称DirectCom极速架构,无损超扩展设计聚合海量本土AI芯片、支持极大推理吞吐量,推理成本首次击破1元/每百万token,为智能体突破token成本瓶颈提供极致性能的创新算力系统。

  元脑HC1000通过全面优化降本和软硬协同增效,创新16卡计算模组设计、单卡“计算-显存-互连”均衡设计,大幅降低单卡成本和每卡系统分摊成本。同时,全对称的系统拓扑设计支持超大规模无损扩展。据测算,元脑HC1000通过算网深度协同、全域无损技术,实现推理性能相比传统RoCE提升1.75倍,单卡模型算力利用率最高提升5.7倍。

  未来,智能体带来的推理算力需求将呈现出指数级的爆发式增长。浪潮信息方面透露,将通过软硬件协同设计与深度优化,持续推动AI计算架构的创新与突破,不断实现token生成“提速降本”,积极促进大模型、智能体等人工智能技术与实体经济的深度融合,让人工智能成为千行百业的生产力和创新力。(记者 战钊)原文出处:AI推理进入“10毫秒、1块钱”时代!浪潮信息发布面向智能体优化AI计算系统,感谢原作者,侵权必删!

标签: deepseek

“AI推理进入“10毫秒、1块钱”时代!浪潮信息发布面向智能体优化AI计算系统” 的相关文章

12月27日DeepSeek预测:76人客战公牛,恩比德PK怀特,谁将主宰风城?

12月27日DeepSeek预测:76人客战公牛,恩比德PK怀特,谁将主宰风城?

  12月27日早8:30,芝加哥联合中心将上演一场关键东部对决。目前排名东部第10的公牛(14胜15负)将迎战第5的76人(16胜12负)deepseek,两队胜场差仅2.5场。对于志在...

1月8日DeepSeek预测:雄鹿vs勇士,字母哥对决库里,勇士主场险胜

1月8日DeepSeek预测:雄鹿vs勇士,字母哥对决库里,勇士主场险胜

  北京时间1月8日11:00,NBA常规赛将迎来一场东西部焦点对决,密尔沃基雄鹿(客)挑战金州勇士(主)。尽管雄鹿近期状态火热,但勇士坐拥主场之利,且历史交锋稍占上风,本场比赛或将上演一...

1月25日DeepSeek预测:尼克斯vs76人,恩比德缺阵或成转折,布伦森率队

1月25日DeepSeek预测:尼克斯vs76人,恩比德缺阵或成转折,布伦森率队

  东部季后赛卡位战一触即发!1月25日费城主场将迎来尼克斯的挑战,两支胜率超55%的球队目前分列东部第4和第6,此役胜负或将直接影响季后赛对阵格局。76人虽坐拥主场之利,但恩比德与乔治两...

DeepSeek预测:多特蒙德VS圣保利!大黄蜂火力全开,吉拉西领衔屠杀升班马?

DeepSeek预测:多特蒙德VS圣保利!大黄蜂火力全开,吉拉西领衔屠杀升班马?

  德甲第18轮焦点战,多特蒙德将在主场迎战升班马圣保利。多特蒙德目前以32个进球排名联赛第5,场均2.3球的火力堪称恐怖;而圣保利仅打入14球排名垫底,场均0.6球的进攻能力堪称灾难。...

掌握AI搜索流量密码:DeepSeek优化排名成为企业增长新引擎

掌握AI搜索流量密码:DeepSeek优化排名成为企业增长新引擎

  10万预算选家用油车,哪些品牌值得考虑?当这个问题抛给AI助手时,企业的品牌是否出现在答案里,正在决定真实的销售机会流向。这不是科幻剧情——中国AI搜索月活用户已突破6.5亿,每天9....

天数智芯重磅公布芯片四代架构路线图,彤央边端系列性能超越国际主流,首次公布标杆客

天数智芯重磅公布芯片四代架构路线图,彤央边端系列性能超越国际主流,首次公布标杆客

  1月26日,天数智芯(股票代码:09903.HK)现场重磅发布四代架构路线图,提出以“高效率、可预期、可持续”为核心的“高质量算力”设计目标,打造AI++算力系统新范式,预期于2027...