先了解这件事
Mistral AI 发布代码模型 Codestral Mamba,采用 Mamba 架构与线性时间推理,可免费使用、修改和分发。Mistral 称其具备高级代码与推理能力,性能与 SOTA Transformer 模型相当,并已测试最高 256k tokens 的上下文检索能力;模型参数约 72.85 亿。
这是 Mistral 在 Mixtral 系列之后对新架构的又一次尝试。
AI 根据报道生成 · 3 天前更新最新进展
Mistral 发布 Mamba 架构代码模型 Codestral Mamba
事件进展1
Mistral AI 发布 Codestral Mamba 模型
Mistral AI:News:Mistral 发布 Mamba 架构代码模型 Codestral Mamba