当前位置:首页 > Deepseek最新资讯 > 正文内容

微博自研模型VibeThinker:仅15亿参数、7800美元训练成本,性能对标

5个月前 (11-19)Deepseek最新资讯212

  当整个AI行业陷入“参数竞赛”的狂热时,微博AI交出了一份出乎意料的答卷,为沸腾的大模型战场开辟了一条充满想象力的新路径。

  近日,微博正式发布首个自研开源大模型VibeThinker,这个仅拥有15亿参数的“轻量级选手”,在国际顶尖数学竞赛基准测试上击败了参数量是其数百倍的,高达6710亿的DeepSeek R1模型。

  更令人瞩目的是,其单次“后训练”的成本仅7800美元,对比DeepSeek-R1和MiniMax-M1等成本直接降低了几十倍。这一突破不仅重新定义了大模型的技术评价标准,更有望推动AI产业从“规模竞赛”转向“效率革命”。

  在AI发展史上,参数量曾被视为衡量模型能力的核心指标。行业普遍认为,复杂推理能力需要1000亿以上参数才能涌现,而小模型则因无法处理高难度问题被视为“天生不足”。

  但如果从小模型入手,通过巧妙的训练策略,能否挖掘出隐藏的推理能力?微博自研开源大模型VibeThinker,给出了行业一个肯定的答案。

  当大多数AI厂商仍遵循着“规模扩大即智能提升”的 Scaling Law法则时,微博AI研发人员转而优化模型结构和训练范式,并创新提出了“频谱到信号原理”(SSP)方法训练,创造出了一个仅拥有15亿参数的“轻量级选手”,但在AI竞技场上战胜了超越其数百倍体量的“巨人”。

  VibeThinker一经发布,立即引起了全球AI研究界的广泛关注,因其在一系列涵盖数学、编码的权威基准测试中,交出了一份出乎意料的答卷:

  VibeThinker雄辩地证明,通过精巧的算法设计和训练策略,一个小规模模型完全有潜力在复杂的逻辑推理任务上,达到甚至超越那些体量庞大数百倍的巨型模型,更为AI产业的成本结构、技术路线和资本布局带来了全新的思考路径。

  需要说明的是,VibeThinker目前发布的版本尚处于实验性版本,其研发重点主要集中于极大强化小模型复杂数学与竞赛编程等方面的能力,其在日常聊天等能力还没有做过针对性训练优化,所以暂不适合作为日常聊天工具进行互动,更适用于数学和代码等高智能应用场景。

  训练成本一直是制约AI技术普及的关键瓶颈,VibeThinker的成就不仅在于惊艳的性能,更在于其极致的成本效益。

  根据公开数据,2025年主流大模型单次后训练(Post-Training)成本普遍在数十万美元级别。上海AI企业MiniMax于今年6月发布的M1模型,使用512块H800 GPU训练三周,租赁成本约53.5万美元,创始人发文表示:“第一次感觉到大山不是不能翻越。”

  今年9月,AI初创公司DeepSeek(深度求索)的论文登上《自然》杂志。论文首次揭示了训练R1的成本:仅为29.4万美元。这不包括DeepSeek公司在开发R1所基于的基础LLM上花费的约600万美元,但总成本仍然远低于竞争对手模型被认为花费的数千万美元。

  在这样的行业背景下,VibeThinker整个后训练过程(包括SFT和RL阶段)总共只花费了约3900个GPU小时deepseek。按照当时的市场租赁价格,总计算成本仅7800美元。

  这也意味着,其用不到8000美元的成本,达到了需要花费30万甚至50万美元才能企及的性能水平,成本效益比达到了惊人的30到60倍。

  这种成本上的显著优势,也意味着强大的AI推理能力不再是少数科技巨头的专利,技术资源得以普惠,更多中小型公司、研究机构和大学,都有机会参与到前沿AI创新开发中来,极大地促进了AI研究的普惠化,推动整个行业朝着更开放、更多元、更具活力的方向发展。

  微博积极拥抱人工智能发展趋势,全面促进AI技术在多项业务场景的落地。2024年,微博自主研发“知微”大语言模型,并成功通过备案,更陆续推出微博智搜、内容总结、AI互动号等前沿功能,优化用户体验,提升内容生产和互动效率。

  一是微博智搜,它通过深度分析平台内海量优质内容,构建可信知识图谱,实现“精准捕捉用户需求、理解情感与场景”的突破性体验,6月智搜月活跃用户突破5000万;

  二是评论罗伯特,作为AI互动账号,它从毒舌风格起步,逐渐进化出温情与聪明版本,成为广大用户“又爱又恨”的交流对象,全网粉丝近200万,展现了AI评论助手的另一种可能性。

  立足于自研大模型VibeThinker,微博的未来规划凸显了鲜明的“数据赋能”路径。公司计划深度融合其在心理等垂直领域积累的独特数据资产,目标是打造一个更洞悉公众情绪、更能服务社会化需求的专属模型。微博不仅是在优化一个大模型,更是在解锁其数据生态的深层价值,以提供更精准、更懂用户心理状态的下一代社交服务。

  VibeThinker的强大技术能力,或将成为驱动微博AI应用“多点开花”的核心引擎,深度融入平台全业务生态。未来,VibeThinker有望在微博智搜等核心AI产品中落地,不仅能持续提升用户使用体验,更有望打破场景边界,裂变出兼具社交属性与智能服务的 下一个“社交超级生态”。

  此外,VibeThinker的技术突破有望大幅降低微博AI应用成本。无论是智能搜索的算力损耗,还是实时互动场景的AI响应成本,都将得到高效优化,让平台在规模化投入AI能力时无需承担过高的资源压力,进一步释放微博的生态创新能力,为用户带来更丰富、更便捷的智能体验。原文出处:微博自研模型VibeThinker:仅15亿参数、7800美元训练成本,性能对标千亿级模型,感谢原作者,侵权必删!

标签: deepseek

“微博自研模型VibeThinker:仅15亿参数、7800美元训练成本,性能对标” 的相关文章

DeepSeek开源OCR 2新模式,机器视觉编码逻辑更像“人类”

DeepSeek开源OCR 2新模式,机器视觉编码逻辑更像“人类”

  新浪科技讯 1月27日下午消息,DeepSeek团队今日《DeepSeek-OCR 2: Visual Causal Flow》论文并开源了DeepSeek-OCR 2模型。据悉,该模...

10月26日DeepSeek预测:太阳vs掘金,约基奇50分神迹能否延续?

10月26日DeepSeek预测:太阳vs掘金,约基奇50分神迹能否延续?

  丹佛掘金坐镇高原主场迎战菲尼克斯太阳,两支1胜球队的较量暗藏玄机。主队掘金虽暂列西部第12,但上赛季MVP约基奇刚轰下50分13篮板10助攻的恐怖数据;客队太阳则凭借德文·布克场均24...

A.O.史密斯的反内卷路径:以技术竞优与AI深融突围

A.O.史密斯的反内卷路径:以技术竞优与AI深融突围

  自2024年下半年以来,工信部多次强调“鼓励企业通过技术创新开辟新赛道”。政策导向清晰指向一个核心:摒弃低质低效的价格厮杀,迈向高质量发展的价值竞争。   在国家战略...

DeepSeek预测:西班牙人vs赫罗纳!米拉领衔主场屠杀,加扎尼加难挡火力

DeepSeek预测:西班牙人vs赫罗纳!米拉领衔主场屠杀,加扎尼加难挡火力

  西甲第20轮即将上演一场欧战资格卡位战!排名第5的西班牙人坐镇RCDE球场迎战第13名的赫罗纳。主队目前以34分紧咬欧冠区,客队则距离欧战区8分之差。这场价值6分的对决将直接影响两队赛...

1月7日DeepSeek预测:骑士vs步行者,米切尔缺阵骑士仍有望客场取胜

1月7日DeepSeek预测:骑士vs步行者,米切尔缺阵骑士仍有望客场取胜

  北京时间1月7日8:00,NBA常规赛将迎来骑士客场挑战步行者的对决。目前骑士以20胜17负排名东部第8,胜率54.1%;而步行者仅6胜30负排名东部垫底,胜率16.7%。此役对骑士冲...

2月1日DeepSeek预测:老鹰vs步行者,特雷杨率队客场擒鹰?

2月1日DeepSeek预测:老鹰vs步行者,特雷杨率队客场擒鹰?

  北京时间2月1日,NBA常规赛将迎来老鹰(24胜26负,东部第9)与步行者(12胜36负,东部第15)的较量。对于志在冲击季后赛的老鹰而言,这场对阵东部垫底球队的比赛堪称必须拿下的福利...