当前位置:首页 > Deepseek最新资讯 > 正文内容

国产算力火速适配DeepSeek新版本

1个月前 (09-30)Deepseek最新资讯155

  9月29日,国内AI企业深度求索(DeepSeek)正式推出实验性(Experimental)模型DeepSeek-V3.2-Exp,在V3.1-Terminus的基础上首次引入自研稀疏注意力机制(DSA),在保持模型性能的同时大幅降低长文本处理成本。

  与此同时,华为云、寒武纪(688256.SH)、海光信息(688041.SH)等国产算力厂商第一时间宣布完成适配,凸显国产AI软硬件生态协同加速趋势。

  DeepSeek-V3.2-Exp作为V3系列的实验性版本,核心突破在于采用稀疏注意力架构(DSA)。

  DSA是一种针对Transformer架构的优化技术。在大语言模型的技术机制中,注意力机制是一个核心组件,决定了模型如何在文本序列中聚焦关键信息,实现语义理解与生成。

  因为实现细粒度稀疏注意力机制,在几乎不影响模型输出效果的前提下,可以实现长文本训练和推理效率的大幅提升。

  同时,为方便用户进行对比测试,DeepSeek为此前发布的V3.1-Terminus临时保留额外的API访问接口,将开放至10月15日deepseek,调用价格与V3.2-Exp一致;为支持社区研究,DeepSeek还开源新模型研究中设计和实现的GPU算子,包括TileLang和CUDA两种版本。团队建议社区在进行研究性实验时,优先使用基于TileLang的版本,以便于调试和快速迭代。

  华为昇腾快速基于vLLM/SGLang等推理框架完成适配部署,实现DeepSeek-V3.2-Exp 0day支持,并面向开发者开源所有推理代码和算子实现。

  华为云第一时间完成对DeepSeek-V3.2-Exp模型的适配工作,最大可支持160K长序列上下文长度。目前该模型已正式上架华为云大模型即服务平台MaaS,为企业及开发者提供模型体验和API服务。

  华为云方面称,ModelArts推理平台基于CloudMatrix384超节点,为DeepSeek-V3.2-Exp模型提供稳定、可靠的推理服务。ModelArts推理平台能够根据实际负载需求,按需供给和分配模型推理算力资源,实现资源分时复用与灵活扩缩容。

  针对DeepSeek-V3.2-Exp模型,此次沿用大EP并行方案部署,基于稀疏Attention结构叠加实现长序列亲和的上下文并行策略,并兼顾模型时延和吞吐性能。

  寒武纪(688256.SH)亦同步适配DeepSeek-V3.2-Exp,并开源vLLM-MLU推理引擎源代码,依托自研BangC融合算子与Triton框架达成“计算与通信并行”的极致性能优化。

  海光信息(688041.SH)同日宣布其DCU实现无缝适配+深度调优,做到大模型算力“零等待”部署。海光信息表示,基于GPGPU架构强大的生态优势,与编程开发软件栈DTK的特性,DeepSeek-V3.2-Exp在海光DCU上展现出优异的性能,同时验证海光DCU高通用性、高生态兼容度及自主可控的技术优势。

  这一协同效率背后是国产算力生态的成熟。华为昇腾、寒武纪等企业近期持续优化软硬件协同设计,而互联网厂商如腾讯云、阿里云亦积极拥抱国产芯片适配。原文出处:国产算力火速适配DeepSeek新版本,感谢原作者,侵权必删!

标签: deepseek

“国产算力火速适配DeepSeek新版本” 的相关文章

范乔丹重伤火箭怎么办?DeepSeek:阿门当主控 KD也可以发起进攻

范乔丹重伤火箭怎么办?DeepSeek:阿门当主控 KD也可以发起进攻

  直播吧09月24日讯 昨日ESPN名记Shams Charania率先报道,数位消息人士透露,火箭主力控卫范弗里特遭遇(右膝)前十字韧带撕裂,可能赛季报销。   范弗...

DeepSeek -V3.1让国产算力迎新机遇

DeepSeek -V3.1让国产算力迎新机遇

  DeepSeek方面称,本次升级包含以下主要变化:混合推理架构让一个模型同时支持思考模式与非思考模式;相比DeepSeek-R1-0528,DeepSeek-V3.1-Think能在更...

齐鲁软件园联合山东大学、浪潮集团打造开源社区

齐鲁软件园联合山东大学、浪潮集团打造开源社区

  今年以来,DeepSeek在全球掀起一股生成式AI大发展潮流,各行各业纷纷拥抱开源DeepSeek。业内认为,DeepSeek最大的贡献和价值在于通过开源,推动了AI的普惠。2024年...

Deepseek推荐全国旅游百强区第47名:广东佛山市南海区

Deepseek推荐全国旅游百强区第47名:广东佛山市南海区

  日前,全国县镇发展研究课题组、天和经济研究所县镇发展研究院联合发布了2024《全国县镇发展报告》,报告评价篇对全国县市以及包含乡村人口的市辖区旅游发展水平进行了综合评价,并发布了天和2...

达嘉维康:公司现有业务板块暂未接入DeepSeek、ChatGPT端口

达嘉维康:公司现有业务板块暂未接入DeepSeek、ChatGPT端口

  金融界8月25日消息,有投资者在互动平台向达嘉维康提问:“请问董秘,贵公司有没有应用到人工智能技术,有没有接入应用到相关的大模型,比如deepseek,chatgpt?”...

扎根沃土绽芳华

扎根沃土绽芳华

  在平凡的岗位上,她如一粒饱满的种子,深深扎根、默默积蓄;在创新的征途上,她如一束跃动的火焰,点燃智慧、破解难题;在团队的成长中,她如一座明亮的灯塔,凝聚力量、温暖他人。她,就是山东省潍...