财经
当前位置:首页 > TMT > 正文

比DeepSeek R2先发!阿里巴巴Qwen3登顶全球最强开源模型

Qwen3千呼万唤始出来,直接登顶全球最强开源模型。

4月29日凌晨,阿里巴巴开源新一代通义千问模型Qwen3(简称千问3),旗舰模型Qwen3-235B-A22B参数量仅为DeepSeek-R1的1/3,总参数量235B,激活仅需22B,成本大幅下降,性能全面超越R1、OpenAI-o1等全球顶尖模型,登顶全球最强开源模型。

比DeepSeek R2先发!阿里巴巴Qwen3登顶全球最强开源模型

千问3预训练数据量达36T,并在后训练阶段多轮强化学习,将快思考模式和慢思考模式无缝整合,同时在推理、指令遵循、工具调用、多语言能力等方面均大幅增强,创下所有国产模型及全球开源模型的性能新高。

千问3共计八款模型,包含2款30B、235B的MoE模型,以及0.6B、1.7B、4B、8B、14B、32B等6款密集模型,每款模型均斩获同尺寸开源模型SOTA(最佳性能)。

其中,千问3的30B参数MoE模型实现了10倍以上的模型性能杠杆提升,仅激活3B就能媲美上代Qwen2.5-32B模型性能;千问3的稠密模型性能继续突破,一半的参数量可实现同样的高性能,如32B版本的千问3模型可跨级超越Qwen2.5-72B性能。

4月是大模型集中发布的一月,OpenAI发布了GPT-4.1  o3、o4 mini系列模型,谷歌Gemini 2.5 Flash Preview混合推理模型上新,豆包也公布了1.5·深度思考模型,其他大模型厂商也开源或者更新了不少模型,业内也传出DeepSeek R2模型即将发布的消息,但目前大部分消息都是捕风捉影。

不论DeepSeek R2发布与否,“先发制人”的千问3,先一步站在大模型“平民化”的真正起点上。 

国内首个混合推理思考模型增强Agent能力且支持MCP

千问3模型支持两种思考模式:

  • 慢思考模式:在这种模式下,模型会逐步推理,经过深思熟虑后给出最终答案。这种方法非常适合需要深入思考的复杂问题。

  • 快思考模式:在此模式中,模型提供快速、近乎即时的响应,适用于那些对速度要求高于深度的简单问题。

所有千问3模型都是混合推理模型,这也使其成为国内首个“混合推理模型”,“快思考”与“慢思考”集成进同一个模型,对简单需求可低算力“秒回”答案,对复杂问题可多步骤“深度思考”,大大节省算力消耗。

API可按需设置“思考预算”(即预期最大深度思考的tokens数量),进行不同程度的思考,灵活满足AI应用和不同场景对性能和成本的多样需求。比如,4B模型是手机端的绝佳尺寸;8B可在电脑和汽车端侧丝滑部署应用;32B最受企业大规模部署欢迎,有条件的开发者也可轻松上手。

在奥数水平的AIME25测评中,千问3斩获81.5分,刷新开源纪录;在考察代码能力的LiveCodeBench评测中,千问3突破70分大关,表现甚至超过Grok3;在评估模型人类偏好对齐的ArenaHard测评中,千问3以95.6分超越OpenAI-o1及DeepSeek-R1。

性能大幅提升的同时,千问3的部署成本还大幅下降,仅需4张H20即可部署千问3满血版,显存占用仅为性能相近模型的三分之一。

比DeepSeek R2先发!阿里巴巴Qwen3登顶全球最强开源模型

千问3模型还支持 119 种语言和方言。目前这些模型均在 Apache 2.0 许可下开源,现已在 Hugging Face、ModelScope 和 Kaggle 等平台上开放使用。

阿里巴巴也推荐使用SGLang和vLLM等框架部署,而对于本地使用,Ollama、LMStudio、MLX、llama.cpp和KTransformers等工具也支持。

千问3也考虑了智能体Agent和大模型应用落地。在评估模型Agent能力的BFCL评测中,千问3创下70.8的新高,超越Gemini2.5-Pro、OpenAI-o1等顶尖模型,将大幅降低Agent调用工具的门槛。

同时,千问3原生支持MCP协议,并具备强大的工具调用(function calling)能力,结合封装了工具调用模板和工具调用解析器的Qwen-Agent 框架,将大大降低编码复杂性,实现高效的手机及电脑Agent操作等任务。

36万亿token预训练四阶段后训练

在预训练方面,Qwen3的数据集相比Qwen2.5有了显著扩展。Qwen2.5是在18万亿个token上进行预训练的,而Qwen3使用的数据量几乎是其两倍,达到了约36万亿个token。

为了构建这个庞大的数据集,千问团队不仅从网络上收集数据,还从PDF文档中提取信息。例如使用Qwen2.5-VL从这些文档中提取文本,并用Qwen2.5改进提取内容的质量。

为了增加数学和代码数据的数量,千问团队利用Qwen2.5-Math和Qwen2.5-Coder这两个数学和代码领域的专家模型合成数据,合成了包括教科书、问答对以及代码片段等多种形式的数据。

预训练过程分为三个阶段。在第一阶段(S1),模型在超过 30 万亿个 token 上进行了预训练,上下文长度为 4K token。这一阶段为模型提供了基本的语言技能和通用知识。

在第二阶段(S2),千问团队通过增加知识密集型数据(如STEM、编程和推理任务)的比例来改进数据集,随后模型又在额外的5万亿个token上进行了预训练。

在最后阶段,千问团队使用高质量的长上下文数据将上下文长度扩展到 32K token,确保模型能够有效地处理更长的输入。

比DeepSeek R2先发!阿里巴巴Qwen3登顶全球最强开源模型

由于模型架构的改进、训练数据的增加以及更有效的训练方法,Qwen3Dense基础模型的整体性能与参数更多的Qwen2.5基础模型相当。

例如,Qwen3-1.7B/4B/8B/14B/32B-Base分别与Qwen2.5-3B/7B/14B/32B/72B-Base表现相当。特别是在STEM、编码和推理等领域,Qwen3Dense基础模型的表现甚至超过了更大规模的Qwen2.5模型。

对于Qwen3MoE基础模型,它们在仅使用10%激活参数的情况下达到了与Qwen2.5Dense基础模型相似的性能。这带来了训练和推理成本的显著节省。

后训练方面,为了开发能够同时具备思考推理和快速响应能力的混合模型,千问团队实施了一个四阶段的训练流程。该流程包括:(1)长思维链冷启动,(2)长思维链强化学习,(3)思维模式融合,以及(4)通用强化学习。

比DeepSeek R2先发!阿里巴巴Qwen3登顶全球最强开源模型

在第一阶段,先使用多样的的长思维链数据对模型进行了微调,涵盖了数学、代码、逻辑推理和STEM问题等多种任务和领域。这一过程旨在为模型配备基本的推理能力。

第二阶段的重点是大规模强化学习,利用基于规则的奖励来增强模型的探索和钻研能力。

在第三阶段,在一份包括长思维链数据和常用的指令微调数据的组合数据上对模型进行微调,将非思考模式整合到思考模型中,确保了推理和快速响应能力的无缝结合。

在第四阶段,在包括指令遵循、格式遵循和Agent能力等在内的20多个通用领域的任务上应用了强化学习,以进一步增强模型的通用能力并纠正不良行为。

目前个人用户可立即通过通义APP直接体验千问3,夸克也即将全线接入千问3。阿里通义已开源200余个模型,全球下载量超3亿次,千问衍生模型数超10万个,已超越美国Llama,成为全球第一开源模型。

(责任编辑:zx0600)

推荐阅读

DeepSeek,灵魂三问

DeepSeek,灵魂三问

没有什么技术能像大语言模型一般,能在破圈之后如此迅速地接入各行各业。

动脉网 2025-02-28 10:56:47
DeepSeek搅动产业链

DeepSeek搅动产业链

“我们打算招募更多的闲置算力”,在接入DeepSeek-R1之后,青云科技市场总监王玉圆向北京商报记者透露,在她看来,“这波连锁反应中,最早受益的是上游的算力公司”。

北京商报 2025-02-07 13:36:30
DeepSeek火了,百度急了?

DeepSeek火了,百度急了?

李彦宏“背叛”闭源大模型,拥抱开源。

趣解商业 2025-02-17 13:59:57
DeepSeek播种,阿里云“收割”?

DeepSeek播种,阿里云“收割”?

DeepSeek冲击影响下,云和AI正在成为重估阿里的标尺。

光子星球 2025-02-24 10:01:44
腾讯,摸着 DeepSeek 过河

腾讯,摸着 DeepSeek 过河

DeepSeek 的王炸已经在路上,6 月见。

蓝洞商业 2025-02-19 11:04:40
AI手机想借DeepSeek翻红!

AI手机想借DeepSeek翻红!

DeepSeek的红利,手机厂商能否接得住?

华尔街科技眼 2025-02-12 10:19:27
百度、微信接入DeepSeek

百度、微信接入DeepSeek

中国互联网行业再迎标志性技术事件。

北京商报 2025-02-17 15:06:35
OpenAI打小报告,要求禁用DeepSeek

OpenAI打小报告,要求禁用DeepSeek

针对DeepSeek的全球风暴。

锌财经 2025-03-18 11:01:36
最新!腾讯理财通接入DeepSeek

最新!腾讯理财通接入DeepSeek

2月20日,北京商报记者获悉,腾讯理财通正式接入DeepSeek-R1模型满血版,同时支持腾讯混元大模型。

北京商报 2025-02-20 14:29:01
DeepSeek 有多奇迹,百度就有多落寞

DeepSeek 有多奇迹,百度就有多落寞

2025年的开局,DeepSeek 在全球掀起风暴。有人受益,就有人受伤。百度急了吗?答案是肯定的,而 DeepSeek带来的撼动是全世界范围的,着急的不只是百度。

蓝洞商业 2025-02-14 14:13:22
政务DeepSeek一体机,就得这么选

政务DeepSeek一体机,就得这么选

近日,各级地方政府接入DeepSeek向民众提供政务服务成为热潮。

中华网财经 2025-03-11 14:19:23
腾讯借力DeepSeek,砸百度“饭碗”?

腾讯借力DeepSeek,砸百度“饭碗”?

被戏称为行业颠覆者的DeepSeek,正为中国科技资产的价值重估带来了新的契机。

环球老虎财经app 2025-02-18 10:32:24
火爆全网的DeepSeek,热度还在持续

火爆全网的DeepSeek,热度还在持续

春节假期后的A股首个交易日,DeepSeek热度持续发酵,相关概念股“涨势”大好。

消费记 2025-02-06 09:49:58
用友网络欲借DeepSeek“翻身”?

用友网络欲借DeepSeek“翻身”?

春节后,A股因DeepSeek掀起热潮,众多概念股一时成为资本市场焦点。

环球老虎财经app 2025-02-17 11:15:35
DeepSeek背后,浙江大学的神秘军团,藏不住了!

DeepSeek背后,浙江大学的神秘军团,藏不住了!

打造中国的斯坦福。

华商韬略 2025-02-20 10:27:01
DeepSeek还没赚钱,允许卖课的先富起来

DeepSeek还没赚钱,允许卖课的先富起来

当技术成为投机和收割的工具。

锌财经 2025-02-14 14:02:23
Deepseek概念狂飙,哪只股票涨幅最高?

Deepseek概念狂飙,哪只股票涨幅最高?

近期,Deepseek概念在A股杀疯!

览富财经网 2025-02-14 14:56:57
英伟达“扛住”DeepSeek冲击了吗

英伟达“扛住”DeepSeek冲击了吗

营收393.3亿美元、净利润220.66亿美元、毛利率73%……凭借多个超预期表现,AI龙头英伟达在DeepSeek冲击之下再次给投资者吃下一颗定心丸。

北京商报 2025-02-28 14:09:12

友情链接

联系方式

中华网新媒体 财经频道
互动/投稿邮箱:
finance@zhixun.china.com
网上不良信息举报电话:010-56177181
财经频道联系电话:(010)56176102