阿里发布下一代基础模型架构Qwen3-Next

鞭牛士 2025-09-12 09:56:18

9月12日，阿里发布了下一代基础模型架构 Qwen3-Next，并开源了基于该架构的Qwen3-Next-80B-A3B系列模型。

该结构相比Qwen3的MoE模型结构,进行了以下核心改进：混合注意力机制、高稀疏度MoE结构、一系列训练稳定友好的优化，以及提升推理效率的多token预测机制。

扫码下载app 最新资讯实时掌握