09
12

阿里发布下一代基础模型架构Qwen3-Next

2025-09-12 07:21分享至
36氪获悉,阿里发布了下一代基础模型架构Qwen3-Next,并开源了基于该架构的Qwen3-Next-80B-A3B系列模型。据介绍,该结构相比Qwen3的MoE模型结构,进行了以下核心改进:混合注意力机制、高稀疏度MoE结构、一系列训练稳定友好的优化,以及提升推理效率的多token预测机制。Qwen3-Next-80B-A3B-Base模型拥有800亿参数,激活参数30亿,实现了与Qwen3-32B dense模型相近甚至略好的性能,而训练成本仅为Qwen3-32B的十分之一不到。原文链接

下一篇

美股周四早盘,德州仪器股价下跌0.9%,此前该公司首席执行官哈维夫·伊兰(Haviv Ilan)强调公司数据中心市场实现强劲增长,预计将为营收做出显著贡献。伊兰称,受人工智能服务和基础设施需求推动,该业务板块预计将增长50%。(新浪财经)

2小时前

36氪APP让一部分人先看到未来
36氪
鲸准
氪空间

推送和解读前沿、有料的科技创投资讯

一级市场金融信息和系统服务提供商

聚焦全球优秀创业者,项目融资率接近97%,领跑行业