CoPeD

Zhou 2024 · 논문

한 줄 요약 — CoPeD는 공중-지상 로봇 팀을 중심으로 구축된, 포괄적인 실제 멀티로봇 협업 지각 데이터셋으로, 협업 지각 연구를 시뮬레이션에 갇혀 있게 만든 평가 공백을 메우기 위해 만들어졌다.

문제

지난 10년간 단일 로봇 지각은 눈에 띄는 발전을 이루었지만, 멀티로봇 협업 지각은 대체로 미개척 상태로 남아 있었다 — 그리고 주요 장벽 중 하나는 실제 데이터셋의 부재였다. 협업 지각은 센서 잡음, 가림, 그리고 완전한 센서 고장 하에서 로봇 간의 압축되고, 간헐적이고, 제한적이고, 이종적이고, 비동기적인 환경 정보를 융합해야 한다. 기존의 멀티로봇 데이터셋은 대부분 SLAM(로봇 간 시점 중첩이 제한적인 기하학적 매핑)을 위해 설계되었고, 협업 지각 데이터셋은 대부분 시뮬레이션이며 항공 시점이 없는 V2V 자율주행 벤치마크였다. CoPeD는 바로 이 공백을 메우기 위해 특별히 제작되었다.

방법 및 아키텍처

데이터셋 논문으로서 CoPeD의 “방법”은 수집, 캘리브레이션, 어노테이션 파이프라인이다(핵심 수식은 포함하지 않는다):

실험 결과

논문의 평가는 정성적이다 — 그 기여는 인프라적인 것이다. 논문은 협업 지각 작업에서 데이터셋을 시연한다: 두 대의 항공 로봇과 한 대의 지상 로봇이 특징 맵을 공유하는 그래프 신경망 시스템이 멀티로봇 단안 깊이 추정과 시맨틱 분할을 수행하며, 멀리 있는 물체(깊이에서는 나무, 분할에서는 집)에 대한 예측을 복원하고, 단일 에이전트 베이스라인과 비교했을 때 한 로봇의 이미지 센서가 손상된 경우에도 강인성을 유지한다. 제로샷 시맨틱/깊이 어노테이션은 실내외 시퀀스 전반에 걸쳐 제시된다. 전체 시퀀스 표와 센서 사양은 논문을 참조하라. 데이터와 도구는 arplaboratory/CoPeD에 공개되어 있다.

SLAM에서의 의미

협업 SLAM 논문들은 역사적으로 가상 에이전트들에게 인위적으로 나눠준 단일 로봇 데이터셋으로 평가되어 왔는데, 이는 실제 배치의 어려운 부분들 — 비동기 센싱, 이종 플랫폼, 그리고 같은 장소에 대한 진짜로 다른 시점 — 을 숨긴다. CoPeD는 Kimera-Multi와 Swarm-SLAM 같은 C-SLAM 시스템에 EuRoC가 단일 로봇 VIO에 대해 했던 것과 같은 역할의, 현실적인 공중-지상 벤치마크를 제공한다 — 그리고 AprilTag 기반 로봇 간 실측값은 로봇 간 루프 클로저와 맵 병합 평가를 직접적으로 지원한다.

관련 문서