EfficientViT：高效视觉transformer与级联组注意力

文章目录

• 摘要
• 1、简介
• 2、用视觉transformer加速
• • 2.1. 内存效率
  • 2.2. 计算效率
  • 2.3. 参数效率
• 3、高效视觉Transformer
• • 3.1. EfficientViT的构建块
  • 3.2、EfficientViT网络架构
• 4、实验
• • 4.1. 实现细节
  • 4.2. ImageNet上的结果
  • 4.3. 迁移学习结果
  • 4.4、 消融实验