🔬 optics

Event-based Scheimpflug LiDAR for Ultra-Fast Laser-Scanned Rangefinding

이 논문은 밀리미터 단위에서 킬로미터 단위에 이르는 응용 분야를 위해 배경 노이즈와 반사 아티팩트를 효과적으로 억제하면서 초고속으로 조밀한 3D 포인트 클라우드를 생성하기 위해 변조된 연속파 라인 레이저와 이벤트 센서를 결합한 이벤트 기반 셰임플러그(Scheimpflug) LiDAR 시스템인 eSCHORTY를 소개한다.

원저자: Nathan Meraz, Alisha Whitehead, Suet Ying Chan, Ronan Taneja, Gabriella Mayrend, Joseph L. Greene

게시일 2026-06-10

📖 4 분 읽기☕ 가벼운 읽기

CC BY 4.0

원저자: Nathan Meraz, Alisha Whitehead, Suet Ying Chan, Ronan Taneja, Gabriella Mayrend, Joseph L. Greene

원본 논문은 CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. ✨ 이것은 아래 논문에 대한 AI 생성 설명입니다. 저자가 작성하거나 승인한 것이 아닙니다. 기술적 정확성을 위해서는 원본 논문을 참조하세요. 전체 면책 조항 읽기

당신이 길고 구불구불한 도로를 사진으로 찍으려고 노력하고 있다고 상상해 보세요. 하지만 당신의 카메라는 고장 난 상태입니다. 사진을 찍으려고 할 때마다 이미지를 처리하는 데 꼬박 1초가 걸리고, 만약 새가 날아가거나 나뭇잎이 떨어지면 카메라는 배경의 추가적인 움직임 때문에 혼란에 빠집니다. 당신은 1초에 몇 장의 스냅샷밖에 찍을 수 없으며, 사진은 의도하지 않은 것들로 가득 차기 일쑤입니다.

이제, 전혀 "사진"을 찍지 않는 새로운 종류의 카메라를 상상해 보세요. 이것은 마치 작고 매우 기민한 반딧불이 떼와 같습니다. 각 반딧불이는 무언가 변화가 생길 때만 빛을 냅니다. 세상이 정지해 있으면 그들은 어둠 속에 머뭅니다. 자동차가 지나가면, 그들은 즉시 일제히 빛을 발합니다. 이 카메라는 1초를 기다리지 않습니다. 대신 수백만 분의 1초 단위로 반응합니다.

이것이 논문에 기술된 새로운 레이저 스캐너인 eSCHORTY의 핵심 아이디어입니다. 이 시스템은 전통적인 방식보다 훨씬 더 빠르고 깔끔하게 거리를 측정하기 위해 세 가지 영리한 기술을 결집했습니다.

1. 기울어진 카메라 (슈임플러그(Scheimpflug) 기법)

대부분의 카메라는 앞부터 뒤까지 모든 곳에 초점을 맞추려 노력하지만, 이는 길게 기울어진 표면을 바라볼 때 매우 어렵습니다. 전통적인 레이저 스캐너는 깊이를 파악하기 위해 추측하거나 많은 사진을 찍어야 하는 경우가 많습니다.

eSCHORTY 팀은 **슈임플러그 이미징(Scheimpflug imaging)**이라는 기술을 사용합니다. 렌즈, 내부 센서, 그리고 당신이 보고 있는 물체가 방의 모서리처럼 하나의 점(single point)에서 만나는 것처럼 카메라를 기울여 잡는다고 상상해 보세요. 카메라를 적절하게 기울임으로써, 스캐너는 다시 초점을 맞출 필요 없이 길고 기울어진 단면 전체를 한 번에 완벽하게 선명하게 유지할 수 있습니다. 이는 마치 코앞에 있든 10피트 앞에 있든 재초점 조절 없이도 완벽하게 초점이 유지되는 자를 가진 것과 같습니다.

2. "반딧불이" 센서 (이벤트 기반 비전)

전체 장면의 사진을 매 순간 찍는 대신(일반적인 카메라처럼), 이 시스템은 **이벤트 기반 센서(Event-Based Sensor)**를 사용합니다.

일반 카메라: 아무것도 움직이지 않아도 방 전체의 사진을 찍습니다. 이 방식은 느리며 정적인 배경 노이즈(예: 벽) 때문에 혼란을 겪습니다.
eSCHOTRY 센서: 무언가 변할 때만 "말을 합니다." 정적인 벽은 무시하고 오직 레이저 선이 물체 위를 지나가는 것만을 보고합니다. 이는 외부의 바람은 무시하고 문이 열릴 때만 작동하는 보안 시스템과 같습니다.

변화만을 보고하기 때문에, 이 센서는 **초당 100만 개 이상의 "이벤트"**를 처리할 수 있습니다. 이는 달팽이가 기어가는 것과 총알이 날아가는 것의 차이와 같습니다.

3. 깜빡이는 레이저 (변조(Modulation))

시스템은 장면을 가로질러 레이저 선을 비추지만, 단순히 일정하게 비추는 것이 아닙니다. 레이저를 매우 빠르게 껐다 켰다 하며 깜빡입니다(변조).

비유: 붐비고 어두운 방에서 특정 인물을 찾는다고 상상해 보세요. 모두가 가만히 서 있다면 찾기가 어렵습니다. 하지만 스트로보 조명을 번쩍이면, 움직이는 사람(혹은 당신이 보고 있는 사람)이 눈에 확 띕니다.
결과: "반딧불이" 센서는 깜빡이는 레이저 선은 포착하면서 나머지 방의 모습은 무시합니다. 논문에 따르면, 레이저가 깜빡이는 속도를 조절함으로써 사용자는 더 많은 물체를 볼 것인지(어둡거나 지저ley한 환경에 유리), 혹은 물체의 가장자리를 더 정밀하게 볼 것인지(정확한 거리 측정에 유리) 사이에서 선택할 수 있습니다.

그들이 실제로 무엇을 만들고 테스트했는가?

팀은 기성 부품(표준 렌즈, 3D 프린팅된 마운트, 특수 센서)을 사용하여 eSCHORTY라는 프로토타입을 제작했습니다. 그들은 두 가지 주요 방식으로 테스트를 진행했습니다:

캘리브레이션(교정): 알려진 물체(금속 기둥 등)를 측정하여 수학적 원리가 작동함을 증명했습니다. 그들은 장치를 만들 때마다 구성이 조금씩 달라지더라도, 이를 빠르게 "튜닝"하여 정확한 측정값을 얻을 수 있음을 보여주었습니다.
실제 장면: 그들은 두 가지를 스캔했습니다:
- 낙엽 더미: 겹쳐져 있는 개별 잎사귀들을 식별해 냈으며, 약 2밀리미터의 오차로 잎 사이의 거리를 측정했습니다.
- 사람의 얼굴: 약 8피트 거리에서 세 사람의 얼굴을 스캔했습니다. 시스템은 코의 곡선과 귀의 형태를 성공적으로 매핑했습니다.

핵심 요약

속도: 이 시스템은 레이저가 깜빡이는 속도와 스캐너가 움직이는 속도에 의해서만 제한될 뿐, 카메라가 사진을 찍는 속도에 구애받지 않고 매우 밀도 높은 3D 지도를 생성합니다.
깔한 데이터: 레이저 빛의 변화에만 집중하기 때문에 배경의 불필요한 요소들을 자연스럽게 무시합니다.
유연성: 레이저의 깜빡임 속도를 조절함으로써, 사용자는 더 넓고 대략적인 그림을 얻을 것인지, 아니면 더 좁더라도 아주 정밀한 그림을 얻을 것인지 선택할 수 있습니다.
확장성: 렌즈와 기울기 각도를 변경하기만 하면, 이론적으로 몇 인치 거리부터 수 마일 거리까지 측정할 수 있을 만큼 설계가 단순합니다.

요약하자면, eSCHORTY는 사진을 찍지 않는 레이저 스캐너입니다. 대신 빛의 변화가 보내는 "속삭임"에 귀를 기울임으로써, 이전보다 훨씬 더 빠르고 깔끔하게 세상의 3D 지도를 그려냅니다.

기술 요약: 초고속 레이저 스캔 거리 측정을 위한 이벤트 기반 셰임플러그 LiDAR (eSCHORTY)

문제 정의
전통적인 프레임 기반 거리 측정 시스템은 고처리량 또는 혼잡한 환경에서 본질적인 한계에 직면한다. 이들은 프레임 속도와 픽셀 판독 속도에 의해 제약을 받으며, 이는 데이터 획득의 상한선을 형성한다. 또한, 이러한 시스템은 배경 억제 메커니즘이 결여되어 있어, 깊이 회복을 복잡하게 만드는 구조화되지 않은 배경 노이즈를 흔히 포착한다. 기존의 다양한 능동 광학 방식(멀티 뷰, ToF, 간섭계 및 파면 인코딩)이 여러 솔루션을 제공하지만, 크기, 무게, 전력, 비용(SWaP-C) 측면의 트레이드오프, 복잡한 하드웨어 요구 사항(예: 타임 게이팅), 또는 계산 집약적인 재구성 문제를 빈번하게 겪는다. 이전의 셰임플러그 LiDAR 시스템은 콤팩트하고 단일 뷰를 제공하지만, 프레임 기반 카메라의 처리량 제한에 묶여 있으며 조명 평면 외의 배경에 민감하다는 한계가 있다.

방법론
저자들은 이벤트 기반 센서(EBS)와 변조된 연속파(CW) 라인 레이저를 셰임플러그 이미징 기하 구조 내에 통합한 새로운 LiDAR 시스템인 eSCHORTY를 제시한다.

광학 아키텍처: 시스템은 물체 평면, 렌즈 평면, 이미지 평면이 공통의 교차선을 공유하는 셰임플러그 원리를 활용한다. 렌즈에 대해 이미지 평면을 기울임으로써, 시스템은 기울어진 물체 평면 전체에 대해 선명한 초점을 유지한다. 이는 특정 깊이를 센서의 특정 픽셀 행에 매핑한다. 변조된 CW 라인 레이저는 단일 깊이 인코딩 슬라이스를 조명하여 픽셀 단위의 범위 회복을 가능하게 한다.
이벤트 기반 센 sensing: 전체 프레임을 캡처하는 대신, Prophesee EVK4 이벤트 센서는 로그 강도 변화가 사용자가 정의한 대비 임계값을 초과하는 픽셀만을 비동기적으로 보고한다. 이 아키텍처는 정적인 배경과 저대비 디포커스 영역을 본질적으로 억제한다. 타임스탬프가 찍힌 비동기 스트림은 마이크로초 단위의 해상도로 변조된 레이저 리턴을 포착하여, 전체 프레임 판독 제약을 제거한다.
교정 및 처리: 시스템은 기울어진 평면에 적응된 뉴턴 이미징 조건을 기반으로 한 거리 측정 모델을 사용한다. 교정은 알려진 물체 거리와 픽셀 좌표를 매핑하여 시스템 파라미터( $k$ , $k'$ , $b$ , $b'$ )를 결정하는 과정을 포함한다. SENPI 이벤트 기반 프로세싱 엔진을 사용하여 이벤트를 2D 타임 서피스로 집계하고 3D 시공간 볼륨으로 구성한다.
포인트 클라우드 생성: 원시 이벤트 텐서는 배경 활동 필터링(BAF)을 거쳐 노이즈를 억제한다. 각 센서 컬럼을 따라 무게 중심 추정이 수행되어 깊이를 결정한다. 시스템은 푸시 브룸(push-broom) 구성을 사용하여 레이저 라인을 장면을 가로질러 직교 방향으로 스캔함으로써 조밀한 3D 포인트 클라우드를 생성한다.

주요 기여

시스템 통합: 이벤트 카메라 처리 속도(초당 100만 메가이벤트 이상)로 조밀한 3D 포인트 클라우드를 생성할 수 있는 저비용, 기성품 플랫폼인 eSCHORTY를 입증하였다.
변조 트레이드오프 특성화: 본 논문은 레이저 변조 주파수에 따른 이벤트 공간의 특징 검출과 위치 결정 사이의 튜닝 가능한 트레이드오프를 식별하고 특성화하였다. 세 가지 레짐이 관찰되었다:
- 저주파: 전체 레이저 프로파일 검출과 함께 이벤트 수가 선형적으로 증가함.
- 중간 주파수: 프로파일 에지가 임계값 아래로 떨어지는 포화 및 "붕괴(breakdown)"의 시작 단계.
- 고주파 (붕괴 레짐): 검출 가능한 풋프린트가 빔 피크로 축소되어, 유효 레이저 프로파일이 이벤트 공간에서 좁아짐. 이는 이벤트 밀도를 희생하는 대신 검출 불확실성(정밀도 향상)을 줄인다.
반사율 아티팩트 분석: 연구는 표면 반사율이 무게 중심 추정에 미치는 영향을 정량화한다. 강도 기반 거리 측정은 반사율 단계에 따라 무게 중심 위치가 선형적으로 이동하는 것과 달리, EBS의 로그 인코딩은 로그 관계를 나타낸다. 이는 반사율로 인한 무게 중심 아티팩트를 크게 억제하여, 최대 측정 편차를 선형 모델이 예측하는 값의 약 절반인 약 3.75 픽셀로 줄인다.
확장성: 저자들은 셰임플러그 기하 구조가 초점 거리와 기울기 조정을 통해 최소한의 재구성을 통해 밀리미터에서 킬로미터 규모의 응용 분야까지 확장이 가능하다는 것을 보여준다.

결과

성능 지표: 작동 거리 0.8 m에서 2.5 m인 벤치탑 프로토타입에서, 시스템은 0.8 m에서 0.9 mm, 2.5 m에서 2.8 mm(범위의 약 0.1%)의 깊이 샘플링 해상도를 달로했다.
처리량: 시스템은 70 Hz 변조에서 초당 약 89,600개의 포인트를 생성했으며, 더 높은 변조 주파수(>1000 Hz)에서는 현재 프로토타입의 기계적 스캔 스테이지 및 USB 대역폭에 의해 제한되지만 초당 128만 개 이상의 포인트를 생성할 수 있음을 입증했다.
자연 장면 재구성: 다층 잎사귀 콜라주와 인간의 얼굴 프로필을 포함한 자연 장면 재구성을 통해 공간적으로 일관된 깊이 회복을 확인했다. 시스템은 2.2 mm까지의 개별 잎사귀 분리도를 성공적으로 해결했으며, 2.43 m 거리에서 얼굴 기하 구조(코의 능선, 귀)를 회복했다.
교정 정확도: 세 가지 다른 하드웨어 구성에 걸친 잔류 거리 오차는 기하학적 피사계 심도 제한 내에 머물렀으며, 이는 조립 변동에도 불구하고 시스템 파라미터를 회복하는 교정 모델의 능력을 검증한다.

의의
본 논문은 eSCHORTY가 기존 프레임 기반 셰임플러그 LiDAR의 처리량 상한과 배경 민감도를 극복하는 콤팩트하고 고처리량이며 선택적인 깊이 인코딩 아키텍처를 제공한다고 주장한다. 이벤트 센서의 비동기적 특성과 셰임플러그 원리의 기하학적 제약을 활용함으로써, 시스템은 타임 게이팅 하드웨어나 커스텀 광학 장치 없이도 신뢰할 수 있는 3D 재구성을 달성한다. 레이저 변조를 튜닝할 수 있는 능력은 운영자가 견고성(높은 배경 환경에서의 특징 검출 가능성)과 정밀도(공간적 위치 결정) 사이에서 균형을 맞출 수 있게 하며, 센서의 로그 인코딩은 반사율로 인한 거리 측정 오차를 본질적으로 완화한다. 저자들은 이 아키텍처가 광범위한 물리적 규모에 걸쳐 적용 가능한 재구성 가능한 LiDAR 플랫폼을 위한 확장 가능한 경로를 제공한다고 단언한다.