Google Beam 살펴보기: 차세대 3D 화상 회의 도구

화상 통화와 가상 회의는 원격 근무를 가능하게 해 팀이 국가와 시간대를 넘어 연결 상태를 유지하도록 돕습니다. 화상 통화와 가상 회의는 일상의 일부가 되었으며 우리가 소통하는 방식도 바꾸었습니다.

그러나 널리 사용되고 있음에도 화상 회의의 핵심 기술은 수년 동안 대부분 변하지 않았습니다. 최근의 발전에 힘입어 화상 회의 플랫폼은 더 자연스럽고 현실감 있는 경험을 목표로 변화하기 시작했습니다.

흥미롭게도 Google은 연례 개발자 컨퍼런스(Google I/O 2025)에서 Google Beam이라는 새로운 영상 커뮤니케이션 도구를 선보였습니다. Beam은 인공지능(AI)과 3D 화상 회의 기술을 사용해 기존의 평면 화면을 넘어 더욱 몰입감 있는 대면 경험을 구현합니다.

그림 1. Google의 CEO Sundar Pichai가 Google Beam을 소개하고 있습니다(출처).

실제로 Google Beam은 대화 상대가 바로 앞에 있는 듯한 느낌을 주도록 설계되었습니다. 일반적인 화상 통화와 달리 시선 맞춤이나 시점에 따라 달라지는 자연스러운 움직임과 같은 섬세한 인간적 신호를 되살립니다. 이러한 세부 요소는 평면 화면에서는 흔히 사라집니다.

이 글에서는 Google Beam이 무엇인지, 어떻게 개발되었는지, 어떻게 작동하는지, 어떤 분야에 활용되는지 살펴보겠습니다.

Project Starline에서 Google Beam으로의 발전#

Google Beam을 자세히 살펴보기 전에, 이전 프로젝트인 Project Starline을 먼저 알아보겠습니다.

Google I/O 2021에서 공개된 Project Starline은 원격 커뮤니케이션을 마치 같은 공간에 있는 것처럼 더욱 생생하게 만드는 것을 목표로 한 연구 프로젝트였습니다. 이 프로젝트는 실시간으로 사람의 실제 크기 3D 이미지를 생성하는 방식으로 작동했습니다. 이 기술은 큰 관심을 받았지만 복잡한 설치 과정과 고성능 하드웨어가 필요했습니다.

그림 2. Project Starline 살펴보기(출처).

기술이 발전함에 따라 Google은 수년에 걸쳐 소프트웨어를 개선하고 하드웨어를 간소화했습니다. 4년간의 개발 끝에 Project Starline은 더 작고 사용하기 쉬운 솔루션인 Google Beam으로 진화했습니다.

Google Beam은 AI를 활용해 영상 통화에서 대화 상대를 더욱 실감 나고 3D에 가까운 이미지로 표현합니다. 일반적인 2D 영상을 다양한 시점에 맞춰 조정되는 화면으로 변환해 눈을 맞추고 표정을 더 쉽게 볼 수 있도록 돕습니다. 실시간 번역, 머리 추적, 공간 오디오 기능도 포함합니다.

Google Beam 개요#

Google Beam은 증강 현실(AR) 또는 가상 현실(VR) 헤드셋과 같은 추가 액세서리 없이 작동하도록 개발되었습니다. 대신 3D 시각 자료를 생성하는 자체 내장 디스플레이, 카메라 시스템 및 하드웨어를 갖추고 있습니다. 따라서 일반적인 화상 회의보다 더 자연스럽고 편안하며 몰입감 있는 통화가 가능합니다.

그림 3. Google Beam 사용 예시(출처).

Google Beam이 현실감 있는 가상 회의를 구현하는 방식#

Google Beam이 어떻게 탄생했는지 살펴보았으니, 이제 작동 방식을 자세히 알아보겠습니다.

몰입감 있는 원격 협업을 위한 이미지 캡처#

모든 과정은 시각 정보 캡처에서 시작됩니다. Beam은 고해상도 카메라 6대를 사용해 여러 각도에서 동시에 이미지를 촬영합니다.

이 카메라들은 얼굴 특징, 몸짓, 미세한 움직임을 실시간으로 추적합니다. AI는 카메라 설정을 최적화하고 모든 영상 피드를 동기화하는 데 핵심적인 역할을 합니다. 이를 통해 시스템은 다음 단계인 데이터 처리에 대비할 수 있습니다.

2D 이미지에서 3D 화상 회의로#

다음으로 AI를 사용해 6개의 2D 카메라 피드를 결합하고 화면 속 인물의 실시간 3D 모델을 생성합니다. 단순히 2D 이미지를 겹치는 대신 깊이, 그림자, 공간적 관계를 재구성해 완전한 3D 디지털 트윈을 만듭니다.

이 3D 모델을 구축하기 위해 Beam은 AI와 컴퓨터 비전 기법인 깊이 추정 및 움직임 추적을 활용합니다. 이러한 방법은 인물이 카메라에서 얼마나 떨어져 있는지, 어떻게 움직이는지, 몸의 위치가 어떤지 파악하는 데 도움이 됩니다. 시스템은 이 데이터를 사용해 3D 공간에서 얼굴 특징과 신체 부위를 정확하게 매핑할 수 있습니다.

Beam의 기반이 되는 AI 모델은 대화를 매끄럽고 현실감 있게 유지하기 위해 3D 표현을 초당 60 프레임(FPS)으로 업데이트합니다. 또한 인물의 움직임을 정확하게 반영하도록 실시간으로 조정합니다.

그림 4. Google Beam의 카메라 6대가 여러 각도에서 이미지를 캡처합니다(출처).

Google Beam의 라이트 필드 디스플레이 시스템#

3D 모델은 라이트 필드 디스플레이를 사용해 수신 측 Beam 시스템에 표시됩니다. 양쪽 눈에 같은 이미지를 보여주는 기존 화면과 달리, 라이트 필드 디스플레이는 각 눈에 약간씩 다른 이미지를 방출해 현실에서 깊이를 인식하는 방식을 재현합니다. 이를 통해 더 현실감 있는 입체 시각 경험을 구현합니다.

그림 5. Google Beam으로 가상 하이파이브를 주고받습니다(출처).

실시간 밀리미터 단위 정밀도의 머리 추적#

Google Beam의 가장 인상적인 기능 중 하나는 실시간 AI 추적 기능입니다. 시스템은 정밀한 머리 및 시선 추적을 사용해 아주 미세한 움직임까지 따라갑니다.

예를 들어 Beam의 AI 엔진은 사용자의 머리 위치를 지속적으로 추적하고 실시간으로 이미지에 미세한 조정을 적용할 수 있습니다. 이를 통해 화면 속 인물이 실제로 맞은편에 앉아 있는 듯한 느낌을 줍니다. 머리를 움직이면 실제 대면 대화에서처럼 3D 이미지도 그에 맞춰 이동합니다.

AI 기반 가상 커뮤니케이션을 위한 오디오 처리#

Beam은 화면에서 인물이 보이는 위치에 맞춘 공간 음향을 사용해 오디오 경험도 개선합니다. 누군가 디스플레이 왼쪽에 있으면 목소리도 왼쪽에서 들리는 것처럼 재생됩니다. 인물의 위치가 바뀌면 오디오도 함께 조정됩니다. 이를 통해 대화가 더 자연스럽게 느껴지고 별다른 노력 없이도 누가 말하는지 파악할 수 있습니다.

이 기능은 지향성 오디오 기술과 실시간 추적을 결합해 작동합니다. Beam은 공간 오디오를 사용해 소리가 나는 방향과 각 귀에 전달되는 방식에 따라 현실에서 소리를 자연스럽게 인식하는 방식을 구현합니다. 또한 시스템은 시청자의 머리 움직임을 추적해 오디오 출력을 그에 맞게 조정하므로 소리가 화면 속 인물에게 계속 '붙어 있는' 것처럼 들립니다.

Google Beam의 활용 분야#

아직 초기 단계인 Google Beam은 화상 회의 분야에서 유망한 잠재력을 보여줍니다. 주요 활용 분야는 다음과 같습니다.

• 원격 협업: Google Beam은 특히 리더십 논의나 중요한 협상에서 회의를 더 친밀하고 효과적으로 만들 수 있습니다. 바디 랭귀지와 시선 맞춤 같은 미묘한 요소를 포착해 서로 멀리 떨어져 있어도 사람들이 더 가까이 있는 듯한 느낌을 줍니다.
• 교육: Beam은 가상 학습을 더욱 흥미롭고 접근하기 쉽게 만들 수 있습니다. 과학자가 지구 반대편에 있는 학생들에게 실시간으로 강의하면서 실제로 같은 공간에 있는 듯한 느낌을 주는 상황을 상상해 보세요.
• 의료: Beam은 원격 진료를 더욱 친밀하게 만들 수 있습니다. 의사와 환자가 서로를 선명하게 보고 자연스럽게 눈을 맞추면 신뢰가 쌓이고 상호작용이 더욱 인간적으로 느껴집니다.
• 창작 산업: 애니메이터, 아티스트, 프로듀서와 같은 창작 분야 종사자에게 Beam은 원격 팀워크를 더 쉽고 자연스럽게 만들어 줄 수 있습니다. 아이디어를 브레인스토밍하거나 프로젝트를 검토할 때도 화상 통화보다 스튜디오에 함께 앉아 있는 듯한 느낌을 줍니다.

Google Beam의 장단점#

Google Beam과 같은 혁신적인 기술의 주요 이점은 다음과 같습니다.

• 헤드셋 불필요: 많은 몰입형 기술과 달리 Beam은 AR 또는 VR 헤드셋 없이 작동합니다. 따라서 더 편안한 경험을 제공하고 멀미나 추가 장비 착용의 불편함과 같은 일반적인 문제를 피할 수 있습니다.
• 화면 피로 감소: 3D 디스플레이는 더 자연스럽고 편안한 시청 경험을 제공하므로 장시간 평면 화면을 볼 때보다 눈의 피로를 줄이는 데 도움이 됩니다.
• 실시간 언어 번역: Beam은 AI 기반 실시간 번역을 통합할 수 있어 국제 회의나 학습 환경에서 서로 다른 언어를 사용하는 사람들이 자연스럽게 소통하도록 돕습니다.

Beam은 유망한 진전이지만, 다른 신기술과 마찬가지로 몇 가지 한계가 있습니다. 고려해야 할 사항은 다음과 같습니다.

• 하드웨어 요구 사항: Beam은 라이트 필드 디스플레이와 여러 대의 카메라 같은 특수한 고급 장비를 필요로 하므로 비용이 많이 들고 개인과 소규모 조직이 이용하기 어렵습니다.
• 휴대성 부족: Beam 시스템은 고정 설치용으로 설계되어 쉽게 이동할 수 없으므로, 이동하거나 환경이 바뀌는 상황에서 활용하기 어렵습니다.

핵심 요점#

Google Beam은 가상 커뮤니케이션을 더 인간적으로 만드는 데 있어 흥미로운 진전입니다. 아직 초기 단계이지만 우리가 만나고, 소통하고, 협업하는 방식을 바꿀 잠재력이 있습니다. 첨단 AI, 3D 이미징, 공간 오디오를 결합해 더 현실감 있고 몰입감 있는 원격 경험을 제공합니다.

Google이 Beam의 하드웨어를 계속 개선하고 크기를 더욱 줄여 일반 사용자에게 제공할 가능성도 있어, 가상 커뮤니케이션의 미래에 흥미로운 가능성이 열리고 있습니다. 홀로그램 회의와 3D 아바타 같은 새로운 기술 트렌드와 함께 Beam은 가상 회의의 새로운 표준을 세울 수 있습니다.

저희 커뮤니티에 참여하고 라이선스 옵션을 확인해 지금 바로 컴퓨터 비전을 시작해 보세요. AI에 대해 더 알아보려면 GitHub 리포지토리를 확인하세요. 솔루션 페이지에서 리테일 분야의 AI 및 농업 분야의 컴퓨터 비전 등 다양한 활용 사례를 살펴보세요.