阿里云:真武芯片超节点已成功适配Qwen3.8,上线百炼提供推理服务
7月23日消息,阿里云宣布,阿里真武M890超节点已成功适配Qw阿里en3.8,并上线阿里云百炼平台提供模型推理服务,这是国内首个成云:功运行超2万亿参数大模型的超节点。 Qwen3.8是阿里最真武新旗舰模型,参数规模高达2.4万亿,跑通这一规模的模型需要将参数分散到芯片几十张甚至上百张高速互联的GPU卡,让万亿参数“跑得又稳又快”。超节然而,普通AI集群因通信带宽的局限,无法满足高吞吐、低延迟、高并发的需求点已。 真武M890是平头哥新一代训推一体AI芯片,原生支持FP32到F成功P4等多种数据精度,可应用于高精度训练、低精度和超低精度推理的全场景。真武适配超节点实例通过ICN Switch 1.0互联芯片,让64张真武M890实Qw现了800GB/s的高速互联,显存规模达到9TB,单实例即可支撑大规模en2万亿参数MoE模型的专家并行需求。 此外,阿里还从芯片到云平台层面实现了3.与Qwen模型的全链路优化,不仅可以丝滑跑通Qwen3.8,还能显著提升8,推理效率、降低推理成本。实测数据显示,通过算子优化和软硬件架构协同,该上线超节点实例在Agentic推理场景中最多可实现1.5倍的推理性能提升。
- 最近发表
- 随机阅读
-
- 标签: GoogleI/O2026 Gemini3.5Flash TPU8i Antigravity2.0
- 谷歌再登《自然》!Willow量子芯片实现可验证量子优势,快13,000倍击败超级计算机
- 标签: 英伟达 AMD Arm 台积电
- Perplexity 成功融资 2 亿美元,估值飙升至 200 亿美元
- 标签: Counterpoint AI服务器 存储市场 三星
- 标签: TCL电子 MiniLED TV 量子点TV 光伏业务
- 外媒:科学家设计出一款类鱼软体机器人 可入深海探索
- 标签: 红星冷链 港交所上市 冷冻仓储 招股书
- 云计算开发:Python练习实例-统计 1 到 100 之和
- 云计算核心技术Docker教程:Docker 守护进程dockerd socket选项
- 机器学习基础图表:概念、原理、历史、趋势和算法
- 宝马将成为首家使用亚马逊AWS云平台的汽车制造商
- 标签: 卡特彼勒 发电机 数据中心 人工智能
- 标签: 飞书 谢欣 Agent 养虾
- Github大盘点!2021年最惊艳的38篇AI论文
- 苹果iPhone 13系列机模曝光:相机模组有变化
- 云安全日报210329:Debian垃圾邮件过滤器发现注入攻击漏洞,需要尽快升级
- 大幅降价和裁员,阿里云走到岔路口
- 开源AI智能体平台LangChain完成1.25亿美元融资:估值达12.5亿美元成为独角兽
- 一文看懂无人机通信链路系统
- 搜索
-
- 友情链接