Gallant: Voxel Grid-based Humanoid Locomotion and Local-navigation across 3D Constrained Terrains

Motivation

• Known: 기존 인간형 로봇 이동 방법은 elevation map이나 depth image 기반 인식을 사용하여 지면 장애물에만 대응 가능하며, LiDAR 기반 point cloud 방법은 실시간 추론이 불가능하다.
• Gap: 기존 방법들은 3D 구조(오버행, 저천장, 다층 구조)를 포착하지 못하고, LiDAR 기반 접근도 계산 효율성과 학습 확장성 문제가 있다.
• Why: 인간형 로봇의 현실 배포는 다양한 3D 제약 환경에서 안전하고 견고한 운동이 필요하며, 이를 위해 효율적이면서도 3D 구조를 완전히 포착하는 인식 시스템이 필수적이다.
• Approach: Voxel Grid 표현을 사용하여 LiDAR 데이터를 구조화하고, z-grouped 2D CNN으로 이를 효율적으로 처리하며, 고충실도 LiDAR 시뮬레이션과 8개 지형 패밀리 커리큘럼으로 sim-to-real 일관성을 보장한다.

Achievement

Figure 1. Overview. Gallant enables a single policy with voxel grids to traverse diverse 3D constrained terrains: (a) as

• 단일 정책으로 다양한 3D 제약 지형 대응: 계단 오르내림, 측면 잡동사니, 천장 제약, 다층 구조, 좁은 통로 등을 하나의 정책으로 처리
• 높은 성공률: 계단 등반 및 높은 플랫폼 딛기에서 거의 100%의 성공률 달성
• 효율적인 인식 처리: z-grouped 2D CNN이 3D CNN 대비 우수한 성능과 낮은 추론 지연시간 제공
• 고충실도 시뮬레이션: 동적 LiDAR 시뮬레이션으로 로봇 움직임을 포함한 현실적 관측 생성

How

Figure 2. Method Overview. (a) Curriculum-based training over 8 representative terrains enhances generalization. (b) Rea

• Voxel Grid 표현: 로봇 중심의 3D LiDAR point cloud를 voxel로 변환하여 다층 구조 보존
• z-grouped 2D CNN: 높이 슬라이스를 채널로 취급하여 sparse voxel grid를 효율적으로 처리
• 고충실도 LiDAR 시뮬레이션: 센서 노이즈, 지연, 동적 객체 스캔을 모델링하여 현실적 훈련 데이터 생성
• 커리큘럼 학습: 8개의 대표적 지형 패밀리(지면 장애물, 측면 잡동사니, 천장 제약)를 단계적으로 학습
• End-to-end 최적화: Voxel Grid, 고유 감각, 목표 위치를 통합하여 PPO로 단일 정책 학습
• 위치 기반 공식화: 속도 추적 대신 상대 목표 위치를 입력으로 하여 국소 네비게이션과 이동을 통합

Originality

• 인간형 로봇 이동 분야에서 Voxel Grid를 직접 인식 표현으로 처음 도입하여 기존 elevation map의 3D 정보 손실 문제 해결
• z-grouped 2D CNN 아키텍처: sparse voxel grid에 최적화된 효율적 처리 방식으로 3D CNN의 계산 비용을 개선
• 동적 LiDAR 시뮬레이션: 로봇의 움직이는 링크를 포함한 현실적 스캔으로 sim-to-real 갭 축소
• 위치 기반 end-to-end 공식화: 국소 네비게이션과 로콩을 단일 정책으로 통합

Limitation & Further Study

• 계산 복잡도: Voxel Grid 생성 및 CNN 처리의 실시간성 분석 부족
• 지형 다양성: 8개 지형 패밀리가 모든 현실 환경을 대표하는지 검증 필요
• 로봇 일반화: 특정 인간형 로봇(구체적 모델 명시 필요)에 대해서만 검증됨
• 시뮬레이션 정확도: 실제 LiDAR 센서의 복잡한 특성(multipath, 재질별 반사)의 모델링 완성도 미흡 가능
• 후속연구: (1) 다양한 로봇 플랫폼으로의 전이 학습 (2) 실시간 계산량 최적화 (3) 야외 환경의 날씨 영향 포함 (4) 더욱 복잡한 3D 지형 테스트

Evaluation

총평: Gallant는 Voxel Grid와 효율적 CNN을 결합하여 인간형 로봇의 3D 지형 인식 문제를 체계적으로 해결하고, 고충실도 시뮬레이션과 end-to-end 최적화로 sim-to-real 일관성을 달성한 임팩트 있는 연구이다. 다만 실시간 성능과 지형 일반화의 추가 검증이 필요하다.