跳到正文
热点事件持续更新

免训练剪枝框架P2P:减55%算力保94%精度

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

Rahul Chowdhury等作者发布免训练视觉语言模型推理加速框架 Patch-to-Prune(P2P),通过验证引导的前向与反向层扫描,找出解码器中可用固定中性代理激活向量替换视觉 token 投影输出的区域,在不改变序列长度、token 顺序、位置信息、注意力掩码和残差路径的前提下剪枝计算。 作者称,在 3% 精度容差下,P2P 保留约 94% 的稠密模型精度,同时减少 55% 的 FLOPs。该框架受机制可解释性启发,将激活修补从诊断工具转为推理时的计算旁路。

AI 根据报道生成 · 56 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. arXiv:cs.LG
    Patch-to-Prune(P2P):无需训练即可剪枝视觉语言模型中的视觉计算

    研究者提出免训练框架 Patch-to-Prune(P2P),通过验证引导的前向与反向层扫描,用固定中性代理激活向量替换部分解码器层的视觉 token 投影输出,在不改变序列长度、token 顺序、位置信息、注意力掩码和残差路径的前提下剪枝计算。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。