BMO 파이낸셜 그룹, 2026년 2분기 실적 발표

메타, BMW와 손잡고 차량 내 AR/VR 경험 혁신 나선다

메타(META)가 BMW와 협력해 차량 내에서 증강현실(AR)과 가상현실(VR) 기술을 활용한 새로운 승객 경험을 구현하기 위한 연구를 진행하고 있다고 밝혔다. 이 프로젝트는 2021년 시작되었으며, 미래의 자동차, 기차, 비행기 등 이동 수단에서 승객 경험을 혁신할 잠재력을 가지고 있다.

기존의 차량 내 경험은 주로 대화, 팟캐스트 청취, 음악 감상 등에 국한되었다. 하지만 메타와 BMW의 공동 연구는 이러한 시간을 더욱 생산적이고, 사회적이며, 엔터테인먼트적인 경험으로 전환하는 것을 목표로 한다. 이를 통해 기존 차량에 탑재된 화면이나 계기판 이상의 가치를 제공하는 핸즈프리 커뮤니케이션, 엔터테인먼트, 유틸리티 등 새로운 형태의 경험을 열 것으로 기대된다.

이 기술의 핵심 과제는 움직이는 차량 안에서 VR 헤드셋의 정확한 위치 추적이다. 메타의 Oculus Insight와 같은 기존 추적 기술은 관성 측정 장치(IMU)와 카메라를 함께 사용하여 헤드셋의 위치와 움직임을 정밀하게 추정한다. 하지만 차량이 움직이는 환경, 즉 비관성 기준계에서는 카메라가 차량 내부를 기준으로 움직임을 관찰하는 반면, IMU는 외부 세계를 기준으로 가속도와 회전 속도를 측정하게 되어 두 정보 간에 불일치가 발생한다. 이로 인해 메타 퀘스트 2(Meta Quest 2)와 같은 VR 헤드셋은 차량이 회전하거나 가속할 때 안정적인 가상 콘텐츠를 표시하기 어려웠다.

메타는 이 문제를 해결하기 위해 BMW와의 협력을 통해 BMW 차량의 센서 배열에서 얻은 IMU 데이터를 실시간으로 메타의 Project Aria 연구용 안경 추적 시스템에 통합했다. 이 추가 정보는 시스템이 차량 내부에서 안경의 위치를 계산할 수 있도록 지원한다. 이 기술은 메타 퀘스트 프로(Meta Quest Pro)로 이전되어, 차량의 디지털 트윈을 활용하여 움직이는 차량에 가상 객체를 정확하게 고정시키는 것을 가능하게 했다.

현재 메타는 이 새로운 추적 시스템과 메타 퀘스트 프로를 사용하여 움직이는 차량 내에서 몰입감 있는 가상 및 혼합 현실 승객 경험을 시연하는 데 성공했다. 다음 단계는 차량의 세계 좌표계 상 위치 정보를 추가하여 월드 락킹 렌더링(world-locked rendering)을 구현하는 것이다.

메타는 앞으로도 BMW와의 협력을 지속하며, 현대 자동차의 발전하는 머신 퍼셉션(machine perception) 능력을 활용하여 미래의 사용 사례를 구현할 계획이다. 차량의 정밀한 6자유도(6DOF) 포지셔닝 시스템에 대한 접근은 차량 외부의 랜드마크나 관심 지점을 식별하는 등 월드 락킹 가상 콘텐츠를 렌더링하는 것을 가능하게 할 것으로 예상된다. 이러한 기능은 미래의 AR 안경 및 개인화된 AI 비서에게 매우 유용할 것으로 전망된다. 메타는 이러한 혁신적인 비전을 실현하기 위해 지속적으로 노력할 것이라고 밝혔다.