返回精选
Google AI for Developersgoogleaidevs2026-06-06 00:576 月 6 日

谷歌发布 Gemma 4 QAT 检查点,支持消费级 GPU 和移动设备本地运行

New @GoogleGemma 4 QAT (Quantization-Aware Training) checkpoints are here, so you can run models loc...

AI 导读

谷歌发布 Gemma 4 量化感知训练 (QAT) 检查点,支持在消费级 GPU 和移动设备上本地运行,质量损失极小。新检查点提供 GGUF(Q4_0)格式,覆盖所有尺寸及起草模型,实现最佳本地性能。自定义移动模式采用混合精度方案,将 Gemma 4 压缩至 1GB 以下,包含 2-bit 解码层、优化 KV 缓存和静态激活。通过在训练中模拟压缩(而非训练后量化),大幅降低内存占用并加速解码,同时保持推理质量。

来源:Google AI for Developers · x.com

看完资讯,聊聊你的企业

一对一,30 分钟让你的企业用 AI 推动起来。

WECHAT

添加我的微信

长按或选中下方微信号复制。