EgoTraj-Bench: Towards Robust Trajectory Prediction Under Ego-view Noisy Observations

이 논문은 1 인칭 시점의 관측 노이즈를 고려한 최초의 벤치마크인 'EgoTraj-Bench'와 이를 기반으로 역사적 관측 데이터를 정제하고 미래 궤적을 예측하는 이중 스트림 모델 'BiFlow'를 제안하여, 인간 중심 환경에서의 로봇 내비게이션 신뢰성을 획기적으로 향상시켰습니다.

Jiayi Liu, Jiaming Zhou, Ke Ye, Kun-Yu Lin, Allan Wang, Junwei Liang

게시일 2026-03-06
📖 3 분 읽기☕ 가벼운 읽기

Each language version is independently generated for its own context, not a direct translation.

1. 문제: "안경이 흐릿한 상태에서 미래를 점치기"

지금까지 로봇이 사람의 움직임을 예측할 때는 마치 드론이 하늘에서 내려다보는 (Bird's Eye View) 완벽한 영상을 상상했습니다. 모든 사람이 어디에 있는지, 누가 누구인지 명확하게 보인다고 가정했죠. 마치 투명한 유리창을 통해 모든 것을 훤히 보는 것과 같습니다.

하지만 실제 로봇은 **사람의 눈 (First-person View)**을 가지고 있습니다.

  • 가려짐 (Occlusion): 앞사람이 뒤사람을 가려서 보이지 않습니다.
  • 실수 (ID Switch): 두 사람이 스쳐 지나가면 로봇이 "아, 저건 A 였는데 B 가 됐네?"라고 헷갈려 합니다.
  • 왜곡: 카메라 끝부분에 있는 사람은 길쭉하게 늘어나 보입니다.

기존의 로봇들은 이 **흐릿하고 깨진 안경 (노이즈)**을 통해 세상을 볼 때, 마치 투명한 유리창을 본 것처럼 예측을 하려고 해서 자주 실패했습니다. 마치 안개가 낀 날에 운전하면서, 앞차의 위치를 정확히 알고 있다고 착각하고 운전하는 것과 비슷합니다.

2. 해결책 1: 새로운 시험지 만들기 (EgoTraj-Bench)

연구진은 로봇이 실제로 겪는 **불완전한 눈 (FPV)**과 **정확한 정답 (BEV)**을 동시에 가진 새로운 시험지인 **'EgoTraj-Bench'**를 만들었습니다.

  • 비유: 기존에는 로봇에게 "완벽한 지도"를 주고 길을 찾게 했지만, 이제는 로봇에게 **"안개가 낀 지도"**를 주고, 그 옆에 **"정답이 적힌 투명한 지도"**를 함께 두어, 로봇이 안개 속에서도 정답에 가까워지도록 훈련시키는 것입니다.
  • 이 시험지를 통해 기존에 잘하던 로봇들이 안개 낀 상황에서는 얼마나 엉망이 되는지 확인했고, 새로운 해결책이 필요하다는 것을 증명했습니다.

3. 해결책 2: 새로운 로봇 두뇌 (BiFlow)

이제 연구진이 제안한 새로운 로봇 두뇌인 **'BiFlow'**를 소개합니다. 이 로봇은 두 가지 일을 동시에 합니다.

  1. 과거를 복원하는 일 (Denoising): 흐릿하게 보이는 과거의 발자국을 깨끗하게 닦아냅니다.
  2. 미래를 예측하는 일 (Prediction): 깨끗해진 과거를 바탕으로 앞으로 어디로 갈지 예측합니다.

핵심 메커니즘: 'EgoAnchor' (의도 나침반)
이 로봇은 과거의 흔적을 복원할 때, 단순히 위치만 맞추는 게 아니라 **"그 사람이 지금 어떤 의도를 가지고 있는지"**를 파악합니다.

  • 비유: 사람이 길을 가다가 갑자기 멈추거나 방향을 틀면, 우리는 "아, 저 사람은 버스 정류장을 보려고 한가?", "아, 저 사람은 친구를 만나려고 한가?"라고 추측합니다. BiFlow 도 마찬가지로, 흐릿한 과거 데이터에서 **"의도 (Intent)"**를 추려내어 나침반처럼 미래를 예측하는 데 사용합니다.

4. 결과: 안개 속에서도 길을 잘 찾는다

실험 결과, BiFlow 는 기존 방법들보다 10~15% 더 정확하게 미래를 예측했습니다.

  • 기존 로봇: 안개 낀 길에서 자주 길을 잃거나, 사람과 부딪힐 뻔했습니다.
  • BiFlow 로봇: 안개 낀 과거를 "닦아내면서" 동시에 미래를 예측하므로, 불완전한 정보 속에서도 훨씬 더 안전하게 움직일 수 있습니다.

요약

이 논문은 **"현실 세계는 완벽하지 않다 (안개, 가림, 실수)"**는 사실을 인정하고, 그 불완전한 환경에서도 로봇이 과거의 흔적을 깨끗하게 정리하며 미래의 의도를 파악할 수 있도록 돕는 새로운 기준 (벤치마크) 과 알고리즘을 제시했습니다.

마치 안개가 낀 밤에 운전할 때, 앞차의 불빛이 흐릿해도 운전사의 경험과 직관 (의도) 을 통해 안전한 경로를 찾아내는 숙련된 운전자처럼, 로봇도 이제 더 똑똑하고 튼튼하게 될 수 있게 되었습니다.