当随机采样遇见插值,微软亚研提出节省推理计算量的新范式( 三 )
Fig.4 中展示了本文所提出的方法与其他方法在 Speed-accuracy trade-off 下的比较 。 相比于基于均匀采样的方法(即缩小输入图片的尺寸) , 该方法效果提升十分显著 。 而与其他确定性采样方法相比 , 该方法也具有明显的优势 。
本文插图
在图像分类问题中与其他的方法进行比较
本文插图
Table. 4 展示了图像分类中该方法与其他方法的比较 。 总的来说 , 本文所提出的方法在图像分类中并无显著优势 。 作者猜测 , 这是因为图像分类专注于获取全局表示(Global Feature Representation) , 因此仅需保留一部分重要的区域就可以获得良好的性能 , 重构整个特征图对分类任务并无必要 。 通过将插值模块移除 , 作者发现性能的确没有显著的变化 , 也验证了该猜想 。
CPU 上的实际加速
作者还验证了该方法在 CPU 上的实际加速比 。 为了展示在不同硬件条件下的情况 , 作者使用了 Workstation(E5-2650 v2) 以及 Laptop(I7-6650U) 两种不同的测试环境 , 结果如 Table. 5 所示 。 可以看到 , 该方法的实际加速比与理论加速比仍然具有较大的差距 , 但是在 Laptop 下的加速比要好于 Workstation , 这也说明该方法也许更适合在低资源情况下应用 , 如移动端以及边缘计算设备 。
本文插图
与 Model Pruning 的兼容性
本文插图
本文所提出的方法利用了图像的空间冗余特性 , 其机制与现有基于模型结构化的加速方法正交 , 因此两类技术理论上应该相互兼容 , 作者也对此进行了验证 , 结果如 Table 6 所示 。 可以看到 , 本文所提出的方法在不同的 Prune Ratio 上的表现均好于 Baseline , 证明了该方法与 Model Pruning 技术的兼容性 。
推荐阅读
- [爱情]无论你遇见谁,别伤害,别欺骗
- 露从今夜白丨在白露遇见秋日的浪漫
- 环球时报|英国伯明翰午夜随机伤人事件,致1死7伤
- 草莓味的棉花糖|陈根:当人工智能与猜拳狭路相逢,石头剪刀布还随机吗?
- 英国伯明翰午夜随机伤人事件,致1死7伤
- 「英国伯明翰午夜随机伤人事件」英国伯明翰午夜随机伤人事件,致1死7伤
- 电竞智多星|DNF:财宝群岛还有两周,“随机性”依旧是玩家们的“一生之敌”
- 中国新闻网|服贸会上的“抗疫”元素:国产新冠疫苗首展 机器人咽拭子采样
- 小畜播报|手机壁纸:秋天会有炒板栗和新的遇见 要把生活的期待变小塞进口袋里
- 「邓文迪」邓文迪周凯旋田朴珺:女人想遇见帮自己的男人,需要具备哪素养
