阿里云开源推理模型QwQ-32B,性能比肩满血版DeepSeek-R1,通义APP可用
3月6日消息,阿里云开源推理模型QwQ-32B,性能媲美6710 亿参数的DeepSeek-R1。据介绍,QwQ-32B是基于Qwen2.5-32B+强化学习炼成,开发者和企业可以在消费级硬件阿里上轻松将其部署到本地设备中。 用户可以通过Qwen Chat(https://chat.qwen.ai)在线体验访问。 用户也可通过通义APP免费体验最新的千问QwQ-32B模型。 目前,QwQ-云开32B 已在Hugging Face和ModelScope魔搭社区开源,采用了 Apache 2.0 开源协议。 所有人都可免费下载模型进行本地部署,或者通过阿里云百炼平台直接调用模型API服务。 对于云源推端部署需求,用户可通过阿里云PAI平台完成快速部署,并进行模型微调、评测和应用搭建;或是选择容器服务ACK搭配阿里云GPU算力(如GPU云服务器、容器计算服务ACS等),实现模型容器化部署和高效推理。 Q理模wQ-32B团队指出,大规模强化学习(RL)有潜力超越传统的预训练和后训练方法来提升模型性能。近期的研究表明,强化学习可以显著提高模型的推理能力。例如,DeepSeek R1 通过整合冷启动数据和多阶段型Q训练,实现了最先进的性能,使其能够进行深度思考和复杂推理。 最新的推理模型 QwQ-32B,是一款拥有320亿参数的模型,其性能可与具备 6710 亿参数(其中 370 亿被激活)的 DeepSeek-RwQ1 媲美。 QwQ-32B 在一系列基准测试中进行了评估,测试了数学推理、编程能力和通用能力。以下结果展示了 QwQ-32B 与其他领先模型的性能对比,包括 DeepSeek-R1-Distilled-Qw-3en-32B、DeepSeek-R1-Distilled-Llama-70B、o1-mini 以及原始的 DeepSeek-R1。 QwQ-32B 模型表现出色,几乎完全超越了OpenAI-o1-min2Bi,比肩最强开源推理模型DeepSeek-R1:在测试数学能力的AIME24评测集上,以及评估代码能力的LiveCodeBench中,千问QwQ-32B表现与DeepSeek-R1相当,远胜于o1-m,性ini及相同尺寸的R1蒸馏模型;在由Meta首席科学家杨立昆领衔的“最难LLMs评测榜”LiveBench、谷歌等提出的指令遵循能力IFEval评测集、由加州大学伯克利分校等提出的评估准确调用函数或工能比具方面的BFCL测试中,千问QwQ-32B的得分均超越了DeepSeek-R1。 QwQ-32B团队表示,这一成果突显了将强化学习应用于经过大规模预训练的强大基础模型的有效性。此外,研发团队还在QwQ肩满-32B推理模型中集成了与 Agent 相关的能力,使其能够在使用工具的同时进行批判性思考,并根据环境反馈调整推理过程。 据介绍,在初始阶段,QwQ-32B模型特别针对数学和编程任务进行了 RL 训练。与血版依赖传统的奖励模型(reward model)不同,通过校验生成答案的正确性来为数学问题提供反馈,并通过代码执行服务器评估生成的代码是否成功通过测试用例来提供代码的反馈。随着训练轮次的推进,这两个De领域中的性能均表现出持续的提升。在第一阶段的 RL 过后,增加了另一个针对通用能力的 RL。此阶段使用通用奖励模型和一些基于规则的验证器进行训练。最后发现,通过少量步骤的通用 RL,可以提升其他通用能力,同时ep在数学和编程任务上的性能没有显著下降。(果青)
- 最近发表
- 随机阅读
-
- 基于Nutanix云平台的Dell PowerFlex上市
- 微软工程师用PyTorch实现图注意力网络,可视化效果惊艳
- 标签: 朱孝天 F4 相信音乐 阿信
- 牛皮凉席能用多少年
- 标签: 网信中国 抖音 快手 腾讯
- 标签: 百度文心助手 元宝 微信屏蔽 春节红包
- 标签: 追觅科技 Kosmera 星宸未来 俞浩
- OpenAI又一颗「重磅炸弹」:赋予AI艺术创造力
- AI现在能教你画画了
- 标签: 抖音 未成年人保护 儿童邪典 AI篡改动画
- 亚马逊云服务AWS Q4营收127.42亿美元 同比增长28%
- 标签: OpenAI Jalapeño 博通 Blackwell
- 标签: 张雪峰 心脏骤停 升学规划 家庭教育
- 阿里云宣布战略投资ZStack并实现控股
- 我是怎么抛弃Excel的?
- 标签: 拼多多 美团 京东 抖音
- 微软重新开放办公室:3月29日允许更多员工返回公司
- AI生成猫咪短片走红社交媒体 播放量动辄过亿引发关注
- 标签: 埃森哲 Ookla Speedtest Downdetector
- 标签: 旭化成 Aizip 毫米波雷达 肌电手势 CES2026
- 搜索
-
- 友情链接