Google Beam 살펴보기: 차세대 3D 화상 회의 도구

화상 통화와 가상 회의는 원격 근무를 가능하게 하여 팀이 국가와 시간대를 넘어 연결된 상태를 유지하도록 지원해 왔습니다. 이제 화상 통화와 가상 회의는 우리 삶의 일상적인 일부가 되었으며, 우리가 소통하는 방식을 바꾸었습니다.

그러나 널리 사용되고 있음에도 불구하고 화상 회의의 핵심 기술은 수년간 대부분 변하지 않았습니다. 최근의 발전에 힘입어 화상 회의 플랫폼은 더욱 자연스럽고 생생한 경험을 제공하는 방향으로 변화하기 시작했습니다.

흥미롭게도 Google은 연례 개발자 컨퍼런스(Google I/O 2025)에서 Google Beam이라는 새로운 화상 커뮤니케이션 도구를 소개했습니다. Beam은 인공지능 (AI)과 3D 화상 회의 기술을 사용하여 기존의 평면 화면을 넘어 더욱 몰입감 있는 대면 경험을 제공합니다.

그림 1. Google CEO Sundar Pichai가 Google Beam을 소개하는 모습 (출처).

실제로 Google Beam은 대화 중인 상대방이 바로 앞에 있는 듯한 느낌을 주도록 설계되었습니다. 일반적인 화상 통화와 달리, 시선 맞춤과 관점에 따라 달라지는 자연스러운 움직임처럼 평면 화면에서는 자주 사라지는 미묘한 인간적 신호를 되살립니다.

이 글에서는 Google Beam이 무엇인지, 어떻게 개발되었는지, 어떻게 작동하는지, 그리고 어떤 분야에 적용되는지 자세히 살펴보겠습니다. 시작해 보겠습니다!

Project Starline에서 Google Beam으로#

Google Beam을 자세히 살펴보기 전에, 먼저 이전 버전인 Project Starline에 대해 더 잘 이해해 보겠습니다.

Google I/O 2021에서 소개된 Project Starline은 원격 커뮤니케이션을 마치 같은 방에 있는 것처럼 더욱 생생하게 만드는 것을 목표로 한 연구 이니셔티브였습니다. 이 기술은 사람의 실물 크기 3D 이미지를 실시간으로 생성하는 방식으로 작동했습니다. 이 기술은 큰 관심을 끌었지만, 복잡한 설정과 대형 하드웨어가 필요했습니다.

그림 2. Project Starline 살펴보기 (출처).

수년에 걸쳐 기술이 발전하면서 Google은 소프트웨어를 개선하고 하드웨어를 간소화했습니다. 4년간의 개발 끝에 Project Starline은 더욱 작고 사용자 친화적인 솔루션인 Google Beam으로 발전했습니다.

Google Beam은 AI를 사용하여 대화 중인 사람을 더욱 사실적인 3D와 유사한 이미지로 구현함으로써 화상 통화를 향상합니다. 일반적인 2D 영상을 다양한 각도에 맞춰 조정되는 화면으로 변환하여 시선 맞춤을 유지하고 표정을 더 쉽게 볼 수 있도록 합니다. 또한 실시간 번역, 머리 추적, 공간 오디오와 같은 기능도 포함합니다.

Google Beam 개요#

Google Beam은 증강 현실 (AR)이나 가상 현실 (VR) 헤드셋과 같은 추가 액세서리 없이 작동하도록 개발되었습니다. 대신 자체 내장 디스플레이, 카메라 시스템 및 하드웨어를 사용하여 3D 영상을 생성합니다. 따라서 일반적인 화상 회의보다 화상 통화를 더욱 자연스럽고 편안하며 몰입감 있게 느낄 수 있습니다.

그림 3. Google Beam 사용 예시 (출처).

Google Beam이 사실적인 가상 회의를 구현하는 방법#

Google Beam의 개발 배경을 살펴보았으니, 이제 어떻게 작동하는지 자세히 알아보겠습니다.

몰입형 원격 협업을 위한 이미지 캡처#

모든 과정은 시각 정보 캡처에서 시작됩니다. Beam은 6개의 고해상도 카메라를 사용하여 서로 다른 각도에서 동시에 사진을 촬영합니다.

이 카메라들은 얼굴 특징, 신체 언어 및 미세한 움직임을 실시간으로 추적하는 데 도움을 줍니다. AI는 카메라 설정을 최적화하고 모든 영상 피드를 완벽하게 동기화하는 핵심 역할을 합니다. 이를 통해 시스템은 다음 단계인 데이터 처리 과정을 준비합니다.

2D 이미지에서 3D 화상 회의로#

다음으로 AI를 사용하여 6개의 2D 카메라 피드를 결합하고 화면에 보이는 사람의 실시간 3D 모델을 생성합니다. 단순히 2D 이미지를 겹쳐 놓는 대신 깊이, 그림자 및 공간적 관계를 재구성하여 완전한 3D 디지털 트윈을 만듭니다.

이 3D 모델을 구축하기 위해 Beam은 깊이 추정 및 모션 추적과 같은 AI 및 컴퓨터 비전 기술을 사용합니다. 이러한 방법은 사람이 카메라에서 얼마나 떨어져 있는지, 어떻게 움직이는지, 신체가 어떤 자세를 취하고 있는지를 파악하는 데 도움을 줍니다. 시스템은 이 데이터를 사용하여 3D 공간에서 얼굴 특징과 신체 부위를 정확하게 매핑할 수 있습니다.

Beam을 구동하는 AI 모델은 대화를 매끄럽고 생생하게 유지하기 위해 3D 표현을 초당 60 프레임 (FPS)으로 업데이트합니다. 또한 사람의 움직임을 정확하게 반영하도록 실시간으로 조정합니다.

그림 4. Google Beam의 6개 카메라가 서로 다른 각도에서 이미지를 캡처합니다 (출처).

Google Beam의 라이트 필드 디스플레이 시스템#

3D 모델은 라이트 필드 디스플레이를 사용하여 수신 측 Beam 시스템에 표시됩니다. 양쪽 눈에 동일한 이미지를 보여주는 기존 화면과 달리, 라이트 필드 디스플레이는 각 눈에 약간씩 다른 이미지를 방출하여 실제로 깊이를 인식하는 방식을 시뮬레이션합니다. 이를 통해 더욱 사실적인 3차원 시각 경험을 제공합니다.

그림 5. Google Beam을 통해 가상 하이파이브를 나누는 모습 (출처).

실시간 밀리미터 단위의 정밀한 머리 추적#

Google Beam의 가장 인상적인 기능 중 하나는 실시간 AI 추적 기능입니다. 시스템은 정밀한 머리 및 눈 추적을 사용하여 가장 작은 움직임까지 따라갑니다.

예를 들어 Beam의 AI 엔진은 사용자의 머리 위치를 지속적으로 추적하고 실시간으로 이미지에 미세한 조정을 적용할 수 있습니다. 이를 통해 화면 속 사람이 실제로 맞은편에 앉아 있는 듯한 느낌을 줍니다. 머리를 움직이면 3D 이미지도 그에 맞춰 이동하여 실제 대면 대화와 같은 경험을 제공합니다.

AI로 향상된 가상 커뮤니케이션을 위한 오디오 처리#

Beam은 화면에서 사람이 보이는 위치에 맞춰지는 공간 음향을 사용하여 오디오 경험도 향상합니다. 누군가 디스플레이 왼쪽에 있다면 그 사람의 목소리도 왼쪽에서 들리는 것처럼 느껴집니다. 사람이 위치를 바꾸면 오디오도 함께 조정됩니다. 이를 통해 대화가 더욱 자연스럽게 느껴지고, 별도의 노력 없이도 뇌가 누가 말하고 있는지 따라갈 수 있습니다.

이는 방향성 오디오 기술과 실시간 추적을 결합하여 작동합니다. Beam은 공간 오디오를 사용하여 우리가 실제 세계에서 소리를 자연스럽게 인식하는 방식, 즉 소리가 오는 방향과 각 귀에 도달하는 방식에 기반한 인식을 시뮬레이션합니다. 또한 시스템은 시청자의 머리 움직임을 추적하고 그에 맞춰 오디오 출력을 조정하여 소리가 화면 속 사람에게 “붙어” 있는 것처럼 유지합니다.

Google Beam의 활용 분야#

아직 초기 단계에 있는 Google Beam은 화상 회의 분야에서 유망한 가능성을 보여주고 있습니다. 주요 활용 분야는 다음과 같습니다.

• 원격 협업: Google Beam은 회의, 특히 리더십 논의나 중요한 협상을 더욱 개인적이고 효과적으로 느껴지도록 만들 수 있습니다. 신체 언어와 시선 맞춤 같은 미묘한 요소를 캡처하여 서로 멀리 떨어져 있어도 사람들이 더욱 현장에 있는 듯한 느낌을 받을 수 있도록 지원합니다.
• 교육: Beam은 가상 학습을 더욱 흥미롭고 접근하기 쉽게 만들 수 있습니다. 전 세계 반대편에 있는 학생들에게 과학자가 실시간 강의를 진행하면서도 실제로 같은 방에 있는 듯한 느낌을 주는 상황을 상상해 보십시오.
• 의료: Beam은 원격 상담을 더욱 개인적인 경험으로 만들 수 있습니다. 의사와 환자가 서로를 선명하게 보고 자연스럽게 시선을 맞출 수 있으면 신뢰가 형성되고 상호작용이 더욱 인간적으로 느껴집니다.
• 창작 산업: 애니메이터, 아티스트, 프로듀서와 같은 창작 분야 종사자에게 Beam은 원격 협업을 더욱 쉽고 자연스럽게 만들어 줄 수 있습니다. 아이디어를 브레인스토밍하거나 프로젝트를 검토할 때에도 화상 통화보다는 스튜디오에 함께 앉아 있는 듯한 느낌을 줍니다.

Google Beam의 장단점#

Google Beam과 같은 혁신이 제공하는 주요 이점은 다음과 같습니다.

• 헤드셋 불필요: 많은 몰입형 기술과 달리 Beam은 AR 또는 VR 헤드셋 없이 작동합니다. 따라서 더욱 편안한 경험을 제공하고 멀미나 추가 장비 착용의 불편함과 같은 일반적인 문제를 피할 수 있습니다.
• 화면 피로 감소: 3D 디스플레이는 더욱 자연스럽고 편안한 시청 경험을 제공하므로, 장시간 평면 화면을 바라볼 때보다 눈의 피로를 줄이는 데 도움이 될 수 있습니다.
• 실시간 언어 번역: Beam은 AI 기반 실시간 번역을 통합할 수 있어, 국제 회의나 학습 환경에서 서로 다른 언어를 사용하는 사람들이 자연스럽게 소통하기 쉬워집니다.

Beam은 유망한 발전이지만, 모든 신기술과 마찬가지로 몇 가지 한계도 있습니다. 다음과 같은 사항을 고려해야 합니다.

• 하드웨어 요구 사항: Beam은 라이트 필드 디스플레이와 여러 대의 카메라 같은 특수 고급 장비를 필요로 하므로 개인과 소규모 조직이 사용하기에는 비용이 높고 접근성이 낮습니다.
• 휴대성 부족: Beam 시스템은 고정 설치를 전제로 설계되었으며 쉽게 이동할 수 있도록 만들어지지 않았기 때문에, 모바일 환경이나 변화하는 환경에서의 유연성과 활용이 제한됩니다.

핵심 요점#

Google Beam은 가상 커뮤니케이션을 더욱 인간적으로 느끼게 만드는 흥미로운 발전입니다. 아직 초기 단계에 있지만 우리가 만나고, 연결되고, 협업하는 방식을 혁신할 잠재력을 지니고 있습니다. 고급 AI, 3D 이미징 및 공간 오디오를 결합하여 더욱 생생하고 몰입감 있는 원격 경험을 제공합니다.

Google이 Beam의 하드웨어를 계속 개선하고 더욱 작게 만들며, 향후 일반 사용자에게 제공할 가능성도 열어 두면서 가상 커뮤니케이션의 미래에 대한 흥미로운 가능성이 커지고 있습니다. Beam은 홀로그램 회의와 3D 아바타 같은 새로운 기술 트렌드와 함께 가상 회의의 새로운 표준을 제시하고 있습니다.

지금 바로 컴퓨터 비전을 시작하려면 커뮤니티에 참여하고 라이선싱 옵션을 살펴보십시오. AI에 대해 자세히 알아보려면 GitHub 리포지토리를 확인하십시오. 다양한 활용 사례에 대한 인사이트를 얻으려면 솔루션 페이지에서 리테일 분야의 AI 및 농업 분야의 컴퓨터 비전에 관한 내용을 읽어 보십시오.