Meta AI 模型 DINOv3 与 SAM 如何助力匹兹堡大学改造辅助机器人

Meta 的 DINOv3 与 SAM 正被匹兹堡大学 RAMMP 项目用于辅助机器人，在电池供电的边缘设备上实现实时环境感知。RAMMP 的感知系统基于 RF-DETR，并用 DINOv2 嵌入微调、由 SAM 自动标注训练数据，实现 360 度环境感知与自适应物体检测。团队已把基于 DINO 的图像传感器查询功能集成进首个原型，可检测自动门按钮、杯子和路缘，目前正转向语音与触控输入。