跳至内容

pchao.org

NVFP4

MiX:面向端到端低比特视觉语言模型加速的微反缩放

19 9 月, 2026 作者 PengChao
关键机制

MiX 把微缩放反过来:每个元素自带相对指数、尾数在小组内共享,再与 MX 权重组合成无乘法器双格式脉动阵列,在约 4.5 bit 有效位宽上对齐或超过 NVFP4,并端到端加速视觉语言模型。

分类 CVPR三分钟 标签 CVPR三分钟、 Micro-Inverted-Scaling、 MiX-4.25b、 NVFP4、 人工智能、 深度学习、 计算机视觉 发表评论
© 2026 pchao.org • Built with GeneratePress