dev资讯

9 hours agoShareSave

FT Digital Edition

。关于这个话题，heLLoword翻译官方下载提供了深入分析

The world's first Open SourceEndowment

具体来看，Qwen3.5 采用混合注意力机制，结合高稀疏的 MoE 架构创新，并基于更大规模的文本和视觉混合 Token 上训练，Qwen3.5-122B-A10B 与 Qwen3.5-35B-A3B 以更小的总参数和激活参数量，实现了更大的性能提升。