비전 AI로 운전자 주의 모니터링 시스템 구현하기

긴 고속도로 주행이나 늦은 밤 운전, 바쁜 하루는 누구나 피로감을 느끼게 할 수 있습니다. 하지만 도로 안전에서는 잠깐만 주의가 흐트러져도 큰 차이를 만들 수 있습니다.

그래서 많은 자동차 제조업체가 운전자의 각성과 집중을 유지하도록 돕는 신기술을 도입하고 있습니다. 조향 패턴을 추적하는 센서부터 피로 징후를 살피는 카메라까지, 오늘날의 차량은 운전자의 주의가 흐트러지기 시작하는 순간을 더 똑똑하게 인식하고 있습니다.

특히 인공지능(AI)의 한 분야인 컴퓨터 비전을 활용하면 기계가 사람처럼 이미지와 동영상을 해석할 수 있습니다. 차량에서는 컴퓨터 비전을 운전자 주의 모니터링 시스템에 적용해 운전자의 자세, 표정, 눈 움직임을 분석할 수 있습니다.

예를 들어 Ultralytics YOLO11과 Ultralytics YOLO26 같은 비전 AI 모델은 객체 감지(이미지에서 객체를 식별하고 위치를 찾는 작업), 객체 추적(프레임 간 객체의 이동을 추적하는 작업), 인스턴스 세그멘테이션(개별 객체를 배경과 분리하는 작업)과 같은 컴퓨터 비전 작업을 지원합니다. 이러한 작업은 운전자의 자세, 머리 위치, 전반적인 주의 상태를 모니터링하는 데 적용할 수 있습니다.

이 글에서는 운전자의 부주의와 졸음의 원인, 비전 AI가 운전자 주의 모니터링 시스템을 구현하는 방식, 그리고 이러한 시스템이 모든 운전자의 더 안전한 미래를 어떻게 만들어 가는지 살펴봅니다.

운전자의 부주의와 졸음이란 무엇인가요?#

운전 중 집중력을 유지하려면 끊임없이 주의를 기울여야 합니다. 운전자는 매초 도로 표지판과 교통 신호, 주변 차량의 움직임을 파악합니다. 집중력이 잠깐이라도 흐트러지면 사고 위험이 급격히 커집니다.

연구에 따르면, 도로에서 시선을 떼는 행동을 한 번 이상 하거나 차량 내 버튼을 자주 누르는 운전자는 위험 증가 폭이 정확히 두 배가 아니더라도 충돌 사고나 아차 사고에 연루될 가능성이 더 높습니다.

이러한 연구 결과는 운전자의 주의가 얼마나 쉽게 흐트러질 수 있는지를 보여주며, 이를 운전자 부주의라고 합니다. 운전자가 휴대전화를 확인하거나 음악을 바꾸거나 생각에 잠겨 도로에서 시선이나 정신을 돌릴 때 이러한 현상이 발생합니다. 단 2초 동안 빠르게 시선을 돌리는 것만으로도 속도를 늦추는 앞차나 빨간 신호를 놓칠 수 있습니다.

그림 1. 주의가 산만한 운전자의 예. (출처)

한편 운전자의 졸음은 점진적으로 나타나며, 피로나 수면 부족으로 인해 발생하는 경우가 많습니다. 졸린 운전자는 눈을 느리게 깜박이거나 고개를 끄덕이고 핸들을 잡은 손에 힘이 풀릴 수 있습니다. 피로가 쌓이면 반응 시간이 느려지고 차량을 제어하기가 더 어려워집니다.

운전자의 각성 상태 파악#

다음은 운전자의 부주의 또는 졸음에서 흔히 나타나는 징후입니다.

• 눈 깜박임 빈도 및 지속 시간: 운전자가 평소보다 눈을 더 느리게 또는 더 자주 깜박입니다.
• 머리 위치 및 기울기: 운전자의 머리가 앞으로 숙여지거나 한쪽으로 기울어집니다.
• 눈의 움직임 및 시선 방향: 운전자가 도로에서 너무 오랫동안 시선을 돌립니다.
• 조향 조작 부족: 운전자가 주행 중 조향을 조금만 수정하거나 늦게 수정합니다.

이러한 징후는 처음에는 미미할 수 있지만, 특히 장거리 운전이나 야간 운전 중에는 시간이 지날수록 더 뚜렷해집니다. 징후를 조기에 인식하면 운전자는 도로에서 각성과 집중 상태를 유지하고 안전하게 운전할 수 있습니다.

운전자 주의 모니터링의 필요성#

차량을 차선 중앙에 유지하도록 돕는 차선 유지 보조 기능이나 안전 거리를 유지하는 어댑티브 크루즈 컨트롤과 같은 첨단 기능이 있더라도 운전자의 주의가 흐트러지면 사고가 발생할 수 있습니다. 기술은 안전을 높일 수 있지만, 운전자가 각성 상태를 유지할 책임은 여전히 운전자에게 있습니다.

이러한 위험을 줄이기 위해 Vision AI를 탑재한 카메라로 운전자의 얼굴과 눈을 모니터링하는 새로운 기술이 등장했습니다. 운전자 주의력 모니터링 시스템으로 알려진 이러한 기술은 피로나 주의 산만의 초기 징후를 감지하고 운전자가 각성 상태와 안전을 유지하도록 돕습니다.

그림 2. 비전 AI 기반 시스템은 운전자 주의 모니터링에 사용할 수 있습니다. (출처)

시스템은 눈을 느리게 깜박이거나 고개를 끄덕이거나 도로에서 시선이 벗어나는 등의 경고 신호를 감지하면 보통 시각 또는 청각 경고와 같은 부드러운 알림을 보내 위험이 커지기 전에 운전자가 다시 집중하도록 유도합니다.

운전자 주의 모니터링: 작동 방식#

운전자 주의 모니터링 시스템은 운전자가 집중력을 잃기 시작하는 시점을 인식하도록 설계되었습니다. 이러한 현상은 운전자조차 알아차리지 못한 채 서서히 진행될 수 있습니다. 일반적으로 이 시스템은 스티어링 휠 근처나 대시보드에 장착된 소형 카메라를 사용해 운전자의 얼굴과 눈을 지속적으로 관찰합니다.

모든 조건에서 안정적인 성능을 보장하기 위해 많은 시스템은 적외선 카메라를 사용합니다. 적외선 카메라는 야간이나 조도가 낮은 환경, 악천후에서도 얼굴의 세부 특징을 선명하게 포착할 수 있습니다. 운전자 주의 모니터링은 타이밍이 중요한 애플리케이션이므로, 피로나 주의 산만의 징후를 감지하고 대응하려면 카메라로 촬영한 영상을 실시간으로 분석해야 합니다.

Vision AI가 운전자 행동을 해석하는 방법#

그렇다면 이러한 시스템은 실제로 어떻게 작동할까요? 카메라가 실시간 영상을 촬영하면 인간의 자세와 얼굴 행동을 해석하도록 학습된 Vision AI 모델이 이를 분석합니다. 이 모델은 운전자가 얼마나 각성했거나 주의가 산만한지 보여주는 미묘한 시각적 단서를 감지합니다. 예를 들어 Ultralytics Platform에서 YOLO26n을 미세 조정한 운전자 졸음 감지 모델을 사용해 보거나 운전자 졸음 감지 데이터셋으로 직접 모델을 학습할 수 있습니다.

얼굴 및 신체 단서 분석#

이러한 모델과 통합된 Vision AI 시스템은 포즈 추정 기법을 사용해 운전자의 얼굴과 전반적인 신체 자세를 감지하고 추적할 수 있습니다. 눈, 코, 입, 어깨, 머리 위치와 같은 키포인트를 식별하여 조명이 바뀌거나 운전자가 자세를 바꾸더라도 움직임과 정렬 상태를 모니터링할 수 있습니다.

운전자의 얼굴이 감지되면 시스템은 머리 방향을 추정해 운전자가 도로 정면, 기기 쪽 아래, 옆 방향 중 어디를 보고 있는지 판단합니다. 그런 다음 눈에 초점을 맞춰 깜박임 빈도와 지속 시간, 시선 방향을 분석하여 주의력을 평가합니다.

그림 3. 작동 중인 운전자 주의 모니터링 시스템의 모습. (출처)

느린 눈 깜박임, 감긴 눈, 도로에서 벗어나는 시선은 피로나 주의 산만을 나타낼 수 있습니다. 일부 시스템은 머신러닝을 사용해 시간에 따른 자세와 움직임 패턴도 추적하고, 이를 정상적인 주의 집중 행동과 비교해 고개 끄덕임, 구부정한 자세, 느린 반응과 같은 점진적인 징후를 식별합니다.

피로 감지 및 운전자 주의 경고 제공#

피로나 부주의의 초기 징후가 감지되면 시스템은 운전자가 다시 집중할 수 있도록 부드러운 알림을 보냅니다. 알림은 부드러운 차임벨 소리, 스티어링 휠의 진동, 대시보드에 표시되는 알림 등의 형태로 제공될 수 있습니다. 운전자가 반응하지 않으면 도로에 다시 주의를 기울일 때까지 경고가 점점 더 두드러지게 표시됩니다.

Vision AI는 다른 운전자 보조 및 안전 기능도 지원합니다#

운전자 주의를 모니터링하는 것 외에도 Vision AI는 오늘날 차량에 탑재된 다양한 안전 및 운전자 보조 기능을 향상할 수 있습니다. 예를 들어, 시스템이 주의 산만이나 졸음의 징후를 감지하면 해당 정보를 다른 차량 내 시스템과 공유하여 차량의 동작을 조정하고 안전하고 안정적인 주행을 유지하도록 도울 수 있습니다.

운전자를 보조하도록 설계된 다른 시스템은 다음과 같습니다.

• 어댑티브 크루즈 컨트롤: 설정된 속도를 유지하고 앞차와 안전거리를 유지하도록 자동으로 속도를 조절합니다.
• 차선 유지 보조: 이 시스템은 차량이 차선 중앙을 유지하고 의도치 않게 차선을 벗어나는 것을 줄일 수 있도록 부드러운 조향 입력을 제공합니다.
• 전방 충돌 경고: 잠재적인 충돌이나 교통 흐름의 급격한 감속을 감지하면 운전자에게 알리는 기능입니다.
• 핸즈프리 주행 보조 시스템: 이러한 기능은 운전자의 주의를 모니터링해 안전을 보장하면서 호환되는 도로에서 제한적인 핸즈프리 주행을 지원합니다. 예를 들면 General Motors의 Super Cruise와 Ford의 BlueCruise가 있으며, 두 시스템 모두 차량 내 카메라를 사용해 운전자의 집중 상태를 추적하고 주의가 흐트러지면 알림을 보냅니다.

그림 4. 전방 충돌을 운전자에게 경고하는 데 Vision AI를 사용하는 예입니다. (출처.)

Vision AI는 도로 위 생명을 구할 수 있습니다#

운전자 주의 모니터링 시스템은 단순한 실험적 혁신이 아니라 이미 실제 제품에 적용되고 있습니다. 피로와 주의 산만은 장거리 트럭 운전자들이 일상적으로 겪는 문제입니다. 이들은 휴식 시간이 많지 않은 채 장시간 도로 위에서 보내는 경우가 많습니다.

Vision AI는 이제 운전자의 각성 상태를 실시간으로 모니터링해 이 문제를 해결하도록 돕고 있습니다. Volvo Trucks가 도입한 업그레이드된 Driver Alert Support 시스템이 좋은 예입니다. 이 시스템은 운전자 쪽을 향한 시선 추적 카메라와 차선 위치 및 주행 패턴을 모니터링하는 전방 카메라를 결합합니다. 이 외에도 여러 자동차 제조업체가 컴퓨터 비전과 AI 기반 운전자 모니터링 시스템을 통합해 운전자의 각성과 집중을 돕고 있습니다.

운전자 주의 모니터링의 장단점#

운전자 주의 모니터링 시스템을 사용하면 다음과 같은 주요 이점이 있습니다.

• 실시간 감지: 컴퓨터 비전 모델은 얼굴 표정, 안구 움직임, 머리 위치를 실시간으로 분석하여 피로나 주의 산만을 조기에 감지할 수 있습니다.
• 비침습적 모니터링: 웨어러블 센서와 달리 카메라 기반 시스템은 운전자와 물리적으로 접촉하거나 운전자가 추가로 노력하지 않아도 주의 상태를 수동적으로 추적합니다.
• 확장성 및 적응성: 비전 기반 모델은 새로운 데이터로 지속적으로 재학습하고 개선할 수 있어 조명 조건, 얼굴 유형, 환경이 달라도 정확도를 높일 수 있습니다.

운전자 주의 모니터링 시스템은 많은 이점을 제공하지만 고려해야 할 한계도 몇 가지 있습니다. 다음은 유념해야 할 주요 요소입니다.

• 조명 및 가시성 문제: 조명이 어둡거나 눈부심이 있거나 운전자가 반사되는 안경 또는 주요 얼굴 특징을 가리는 모자를 착용하면 컴퓨터 비전 성능이 저하될 수 있습니다.
• 데이터 프라이버시 우려: 차량 내부 영상을 캡처하고 처리하면 얼굴 데이터와 행동 패턴의 저장, 사용, 보호 방식에 관한 의문이 제기됩니다.
• 연산 요구량: 실시간 동영상 분석에는 상당한 처리 성능이 필요하므로 시스템 비용과 에너지 소비가 증가할 수 있습니다.

핵심 요점#

안전 운전을 위해서는 운전 중 항상 주의를 기울여야 합니다. 잠깐의 주의 산만이나 피로도 사고 위험을 높일 수 있습니다.

Vision AI 기반 운전자 주의 모니터링 시스템은 눈의 움직임, 깜박임 패턴, 머리 위치와 같은 시각적 단서를 추적해 이러한 위험을 줄이는 데 도움이 됩니다. 졸음이나 부주의의 초기 징후를 인식하면 운전자가 다시 집중하고 도로에서 안전을 유지할 수 있도록 적시에 알림을 보낼 수 있습니다.

커뮤니티에 참여하고 GitHub 리포지토리를 방문해 AI에 대해 더 알아보세요. 솔루션 페이지에서 자동차 분야의 컴퓨터 비전과 의료 분야의 컴퓨터 비전에 관한 내용을 확인해 보세요. 라이선스 옵션을 살펴보고 지금 Vision AI 개발을 시작하세요!