구글의 Starline을 통해 3D 비디오 채팅을 시도해봤습니다. 이는 완성되지 않은 매끄러운 작업입니다.

구글 Starline으로 3D 비디오 채팅을 시도했습니다. 작업은 아직 완성되지 않았습니다.

Code Conference 2023에서는 Google의 최신 버전인 프로젝트 스타라인(Project Starline)을 시도해보았습니다. 이 회사는 3D 비디오와 같은 깊이를 추가하여 비디오 채팅을 훨씬 더 매력적으로 만들기 위한 노력을 기울였습니다. 팬데믹으로 인해 잠시 동안 작은 컴퓨터 화면 위에서 Zoom 채팅을 하느라 지친 사람들에게 이는 큰 도전입니다. 하지만 더 많은 인간성을 느낄 수 있는 원거리 통화를 할 때 더욱 피로하지 않았습니다.

구글 I/O 2021에서 처음 소개된 프로젝트 스타라인은 카메라와 소프트웨어를 사용하여 평면 화면에 깊이를 시뮬레이션하여 사람이 가짜 3D 효과로 화면에서 빠져나오는 초강력 비디오 채팅입니다. ENBLE의 Scott Stein은 작년 10월에 처음으로 공개된 스타라인 버전을 테스트해본 결과, 기술과 센서로 가득 찬 전시 부스를 차지하였습니다. 이번에 선보인 휴대용 버전은 2D 비디오 콜보다 훨씬 더 많은 몸의 언어 신호를 전달하기 위해 3D를 활용하는 유사한 원격 통화 기능을 제공합니다. 이는 대화 중인 사람들 양쪽에게 더 매력적입니다. 구글은 이를 가설로 내세웁니다.

“특히 구글 내부에서 우리는 사람을 믿고, 그들의 느낌을 받아들여 신뢰할 수 있기 때문에 새로운 관계를 형성하는 데 사용할 수 있다는 것을 발견했습니다.”라고 프로젝트 스타라인의 총괄 매니저인 Andrew Nartker는 5월에 소개된 새로운 스타라인을 직접 체험하기 전에 말했습니다.

나는 프로젝트 스타라인 데모 룸으로 들어갔습니다. 벽에는 장식용으로 흰색 프릴이 둘러져 있고, 책상 앞에는 스타라인 장치가 있었습니다. 최신 버전의 프로젝트 스타라인은 수정된 평면 TV 크기로 축소되었으며, 각 측면과 위쪽에 하나씩 총 세 세트의 쌍 카메라로 둘러싸여 있습니다.

6개의 카메라는 내 정확한 몸의 위치와 움직임을 추적하여 통화 상대방에게 내 위치를 전달하는 데에만 사용하는 것이 아니라, 내 눈이 정확히 어디에 있는지도 알아냅니다. 그리고 각 눈알에 약간 다른 위치에 같은 이미지를 보여주어 3D 효과를 만들어냅니다. 이것은 예전의 파란색과 빨간색 3D 안경의 21세기 버전과 비슷합니다.

구글은 같이 일하는 동료들은 서로를 알고 있는 상태에서 일반적인 비디오 콜을 잘 사용할 수 있었지만, 직접 만나지 못한 사람들은 Zoom 콜을 통해 결합하고 연결되지 못했습니다.

대신, 스타라인은 TV 크기의 디스플레이를 사용하며, 카메라는 대상의 허리부터 위쪽을 보여줍니다. 그리고 상대방의 제스처, 움직임, 화면을 직접 보는 것을 표현하기 위해 깊이를 제공합니다. 큰 디스플레이 아래쪽으로 약간 휘어진 작은 천 아치가 있으며, 이는 사용자의 시선을 상대방의 3D 이미지가 화면에서 얼마나 떨어져 있는지로 안내합니다. 이 설정은 사람들이 원거리에서도 결속력을 갖도록 훨씬 더 좋습니다. 스타라인 팀은 이를 믿습니다.

구글의 프로젝트 스타라인 프로토타입을 사용하면 참가자들은 깊이 효과를 가진 원격 대화를 할 수 있습니다. (이 각도에서는 잘 보이지 않지만, 앉아 있는 기자는 사과를 “잡고” 있는 상대방 아래에 손을 내밀고 있습니다.)

David Lumb/CNET

“문제점을 설명하는 비단언어적인 신호, 손 제스처, 움직임, 상대방에게로 몸을 앞으로 기울이거나 뒤로 빼는 것과 같은 작은 것들을 읽을 수 있습니다. 이러한 것들은 일반적인 비디오 콜에서 빠져 있는데, 우리는 이를 미리 알아차릴 수 있는 기능을 가지고 있습니다.”라고 Nartker는 말합니다. 작은 웹캠의 화면에 맞춰 몸을 굳게 만들어야 하는 사람들은 비디오 콜에서 비언어적인 신호를 감정적으로 표현하지 못하게 됩니다.

사무실에서든 세계 어디에서든 3D로 대화하기

스타라인은 그룹 Zoom 채팅이 아닌 1대1 통화로 제한되며, 큰 화면에 표시되므로 새롭고 개선된 스타라인은 대화 상대방과 쉽게 결속할 수 있도록 초대합니다.

나의 경우, 나는 몇 개의 방을 거쳐 Nartker와 대화를 나누었습니다. 각자의 스타라인 프로토타입을 사용하고 호텔의 ENBLE 인터넷 네트워크로 연결했습니다. 구글은 그들이 어떤 속도를 얻고 있는지 정확히 알려주지 않았지만, 내가 확인할 수 있는 한, 스타라인 네트워크는 특수한 네트워크가 필요하지 않으며, 일반적인 업무나 가정용 네트워크도 지연 없는 통신에 적합한 것으로 보였습니다. Nartker는 선명하게 나와 지연이 없었지만, 가끔 팔과 하체의 가장자리에 울퉁불퉁함이 있었는데, 이는 깊이 효과를 위해 이미지를 혼합하는 복잡성 때문이라고 생각했습니다.

대화하는 동안 Nartker가 설명한 이러한 비언어적인 신체 언어 신호를 포착하려고 노력했습니다. 그는 나에게로 기울거나 멀어지는 것을 볼 때, 내가 말하는 것에 관심이 있는지 여부에 대한 미묘한 피드백이었습니다. 이는 화면의 3D 효과로 쉽게 판단할 수 있었으며, 이는 매력적이었습니다 (닌텐도 3DS의 입체적인 3D로부터 많이 발전한 것 같습니다). 3D 효과는 안경을 쓰고 있어도 유지되었으며, 대화하는 동안 Nartker와 눈을 마주치는 것은 안정감이 있었습니다. 우리가 대화하는 동안 자연스럽게 앞으로 기울이고 제스처를 더 생동감 있게 했습니다. 이는 Nartker의 제스처 수준과 자연스럽게 일치했습니다.

더 많이 참여하면서 이메일을 쓰거나 참석해야하는 세션에 대해 덜 생각하게 되었습니다; 비디오 통화에서 사람들은 발각되지 않으므로 여러 가지 일을 동시에 처리합니다. 그러나 Nartker는 사과를 내밀었고, TV 화면 너머에서 떠다니는 것을 볼 수 있었습니다. 그는 내가 어디를 보고 있는지 알 수 있었기 때문에 대화를 공간적으로 이끌 수 있었고, 기업 프레젠테이션을 가리키거나 원격진료 통화에서 관리를 지시하는 데 도움이 될 것입니다.

2023년 Code Conference에서 Google은 Project Starline 프로토타입을 회사들에게 소개하고 흥미로운 피드백을 받았습니다.

David Lumb/CNET

하지만 Starline 팀은 또 다른 점을 알아차렸습니다: 그들의 시스템을 사용하여 채팅할 때, 참가자들은 비디오 통화보다 더 많은 것을 기억합니다. Nartker는 사람들이 공간 기억을 통해 세상을 기억하기 때문에– 사람들이 서 있던 곳, 그들이 입은 옷, 그들의 키, 방의 모습 등– Starline 채팅은 사람들에게 무엇이 일어났는지에 대한 더 생생한 회상을 남깁니다.

“생산성 회의나 무언가에 대해 생각을 더 많이 하며 회의를 마칠 수 있는 차이가 분명히 있습니다,” Nartker는 말했습니다.

내가 10분 동안의 Starline 대화에서 상당히 많은 것을 기억했습니다, 특히 Nartker가 어떻게 움직이고 제스처를 하는지, 그가 가리키는 것과 말하는 동안의 태도를 기억했습니다. 이는 비디오 통화와 고가의 대인 면담 사이의 격차를 줄일 수 있는 Starline 설정이기 때문에 기업 응용 프로그램에 유리합니다. Google은 Starline 장치의 가격을 아직 공개하지 않았지만(아직 프로토타입인 상태), 임원들의 사설 제트기 비행 또는 팀 전체의 출장 숙박보다 저렴하게 제공될 것으로 생각됩니다.

여러 개의 Starline 제품 중 첫 번째?

Google은 지난 5월 Google I/O 2023 주변에서 새로운 Starline을 블로그 게시물을 통해 소개하였으며, 이동 가능한 프로토 타입을 선택된 장소에 가져가서 관심을 모으고 있습니다. 팀은 Starline (Nartker는 이것을 단수로 언급하여 그것이 단순히 프로젝트 이름 이상이 되었으며, 아마 내부적으로 제품 이름이 되었을 것입니다)을 Code Conference에 가져와 잠재적인 협력사에게 직접 사용해보도록 초대했습니다 (이미 Salesforce와 함께 Starline 시스템을 개선하기 위해 협력한 바 있습니다) 뿐만 아니라 Google 팀에 대한 피드백을 위해 새로운 사용 방법을 고안하기 위해.

“Code Conference의 이 그룹과 함께 여행을 없애려는 시도가 자주 나온 아이디어 중 하나입니다,” Nartker는 말했습니다. “오늘 나는 어디로 가고 있고, 왜 중요한 회의나 협상 또는 비즈니스 거래를 대면으로 진행해야합니까. 대신에 Starline을 통해 할 수 있을까요?”

현재 일대일 통화의 양측 참가자 모두가 Starline 장치가 필요하므로 TV, 카메라 및 스피커 장치를 원하는 위치로 배송하고 Google 엔지니어가 현장에 있어 작동하도록 해야합니다. 설치에는 하루가 걸리므로 단순히 Starline을 가져다 놓고 기업 통화에 바로 동기화하는 것은 아직 가능하지 않습니다.

하지만 새로운 프로토 타입은 이전 버전보다 훨씬 이동이 가능하며, Google의 AI 혁신 덕분에 Starline을 더 작은 크기로 축소하는 경향을 보여줍니다. 그리고 팀은 여러 가지 형식 중 하나에 불과합니다.

“[Starline]은 매우 유연한 통신 기술로 생각합니다. 많은 다른 형태와 형태 요소를 가질 수 있습니다,” Nartker는 말했습니다. “우리는 가장 많이 탐구한 것은 이것입니다. 하지만 모든 사람들이 모여있을 수있는 종류의 Starline 버전을 갖고 있습니다.”

팀은 물체와 참가자의 인식을 계속해서 진행하고 통화의 양쪽에서 이를 복제하는 데 진전을 이루고 있습니다. 충분한 개발과 소프트웨어 혁신으로, 언젠가 비디오 대화 상대들은 동일한 깊이 효과를 얻기 위해 맞춤형 다중 카메라 설정이 필요하지 않을 수도 있습니다. Nartker는 Starline을 노트북과 단일 웹캠으로 사용할 수 있는지, 또는 가능한지에 대해 알려주지는 않았지만 가능성을 배제하지는 않았습니다.

“저는 장기적으로는 현재 단계에서는 이러한 목표가 좋은 방향이라고 생각합니다,” Nartker는 말했습니다. “우리는 충분한 카메라로 사람들이 함께 할 수 있는 효과를 만들 수 있는 프로토 타입을 탐색하고 있습니다. 시간이 지나면 더 쉬운 시스템으로도 할 수 있을 것입니다.”