先了解这件事
蚂蚁百灵发布 Ling & Ring 2.6 技术报告,公开 2.6 系列在架构、预训练、后训练及 Agent 强化学习等细节。该系列采用 Lightning Attention 与 MLA 以 7:1 比例结合的混合线性注意力架构,预训练处理约 9.6T tokens,上下文扩展至 256K。
最新进展
蚂蚁百灵发布 Ling & Ring 2.6 技术报告
事件进展1
Ant Group Bailing releases Ling & Ring 2.6 Technical Report
公众号:蚂蚁百灵:蚂蚁百灵发布 Ling & Ring 2.6 技术报告