Meta는 Apple의 Vision Pro보다 핵심적인 장점을 가진 비밀 VR 헤드셋을 보유하고 있다.

Meta는 비밀 VR 헤드셋으로 Apple의 Vision Pro보다 핵심적인 장점을 가지고 있다.

혼합 현실(Mixed Reality) 및 일부 가상 현실(Virtual Reality) 헤드셋들은 아직 완벽하게 구현하지 못한 하나의 공통점을 가지고 있습니다. 그것은 바로 패스스루(Passthrough)입니다. 카메라와 렌즈의 정교한 배치를 통해, Meta Quest Pro, Apple Vision Pro, 그리고 299달러의 Quest 2와 같은 헤드셋들은 사용자의 실제 시야를 가리면서, 다양한 정도로 실제 환경을 시뮬레이션할 수 있습니다.

또한: 개발자들로부터 소리치는 Apple의 Vision Pro 연구실

패스스루는 가상현실을 이용한 가정 디자인, 패션, 상호작용 학습과 같은 애플리케이션에 실제 공간 인식과 이미지 시뮬레이션에 관련된 사용 사례들을 활성화시킵니다. 이를 위해서는 상당한 계산 처리와 실제 생활에서의 시각 경험과 유사한 시각적 경험을 달성하는 것은 쉬운 일이 아닙니다.

당연히 헤드셋 카메라의 위치와 본인의 “카메라”(또는 눈)의 위치 간의 거리를 고려할 때, 실제 생활과 유사한 시각 경험을 달성하는 것은 어려운 일입니다. 하지만 Meta는 패스스루 코드를 완벽히 풀어낸 것으로 믿는 Reality Labs의 Display Systems Research(DSR) 팀 내에 비밀 병기를 가지고 있습니다.

플라메라(Flamera)라고 하는 사전 제작 혼합현실 헤드셋은 “라이트 필드 패스스루(Light Field Passthrough)”를 사용하여 사용자의 주변 환경을 정확하게 복제합니다. 카메라의 렌즈 배열과 센서 사이에 구멍의 그리드를 조립함으로써, 사용자가 눈을 움직이는 방식에 관계없이 가장 최적의 빛 캡처가 가능하며, 주변 사물의 거리와 움직임을 자연스럽게 기록합니다.

플라메라의 사전 제작 단위.

이 조리개 모듈은 모든 방향과 각도를 향하는 구멍들로 인해 벌레 눈처럼 보입니다. Meta에 따르면, 이 헤드셋은 이러한 구멍들에 의해 캡처된 원시 센서 데이터를 깊이 의존적 재구성을 통해 결합합니다. 아래에서 패스스루 모드와 실제 시각 간의 비교를 볼 수 있습니다.

“플라메라의 광학 설계는 헤드셋이 얇을 때 가장 잘 작동합니다. 이는 우리가 패스스루 카메라를 사용자의 눈에 가능한 가깝게 배치할 수 있게 해줍니다,”라고 Meta의 DSR 팀의 연구 과학자인 Grace Kuo는 말합니다. “라이트 필드 패스스루에 대한 우리의 작업으로, 우리는 퍼스펙티브-보정 MR 패스스루 경험을 미리 볼 수 있도록 초점을 맞추고 있습니다,”라고 DSR의 디렉터인 Douglas Lanman은 덧붙입니다.

지난 달에는 플라메라가 컴퓨터 그래픽스와 인터랙티브 기술 분야의 혁신가들을 선보이는 연례 컨벤션인 Siggraph 2023에서 시연되었습니다. “이는 내가 본 AR 패스스루 중에서 가장 우수한 품질 중 하나였습니다,”라고 Moors Insights & Strategy의 주요 분석가인 Anshel Sag가 IEEE Spectrum에 말했습니다.

또한: Meta Quest 3 공개: 가격, 기능 및 구매 가능 시기

Sag는 또한 베타 헤드셋의 작은 시야에 대해 언급하며, 좌우로 시선을 돌려야 하는 VR/AR 애플리케이션에 문제가 될 수 있다고 말했습니다.

그래도, 플라메라는 큰 변화의 시작일 수도 있습니다. 그리고 앞으로 몇 달 동안 새로운 혼합현실 헤드셋이 출시되며, 내년 초에 Apple의 Vision Pro가 출시될 예정이므로, Meta의 DSR 팀이 개발한 기술은 주목할 가치가 있습니다.