EdgeSAM: 基于提示的环路蒸馏技术用于 SAM 的设备内部部署

EdgeSAM是一种加速变体的Segment Anything Model（SAM），适用于边缘设备。它通过优化ViT-based SAM图像编码器为纯CNN-based架构，提高了速度。EdgeSAM使用盒状和点状提示来捕捉用户输入和掩码生成之间的复杂动态。相比原始SAM，EdgeSAM提速40倍，在边缘设备上比MobileSAM快14倍，同时在COCO和LVIS上提高了平均交并比。EdgeSAM是第一个可以在iPhone 14上以超过30FPS运行的SAM变体。