ResNet-50이란 무엇이며 컴퓨터 비전에서 그 중요성은 무엇인가요?

과속 차량 단속이나 의료 영상 분석 같은 애플리케이션에서 자동화된 이미지 분석이 점점 더 보편화되고 있습니다. 이러한 혁신을 이끄는 기술이 바로 computer vision 또는 비전 AI입니다. 이는 기계가 인간처럼 이미지와 영상을 해석하고 이해할 수 있도록 하는 인공지능(AI)의 한 분야입니다.

이러한 computer vision solutions을 구축하기 위해 개발자들은 방대한 시각 데이터를 학습할 수 있는 비전 AI 모델에 의존합니다. 수년에 걸쳐 연구원들은 이미지 분류(이미지에 라벨 지정), 객체 감지(이미지 내 객체 위치 파악 및 식별), 인스턴스 세그멘테이션(객체 감지 및 정확한 윤곽선 외곽선 추출)과 같은 vision AI tasks에서 인상적인 성능을 보여주는 더욱 새롭고 발전된 모델들을 개발해 왔습니다.

그러나 이전 모델들을 되돌아보고 이해하는 것은 오늘날의 컴퓨터 비전 시스템이 어떻게 작동하는지 파악하는 데 도움이 될 수 있습니다. 예를 들어, 핵심적인 사례인 ResNet-50은 모델이 더 빠르고 정확하게 학습할 수 있도록 돕는 단순한 경로인 '숏컷 연결(shortcut connections)'이라는 개념을 도입한 영향력 있는 모델입니다.

이러한 혁신을 통해 훨씬 더 깊은 신경망을 효과적으로 훈련할 수 있게 되었으며, 이는 image classification의 상당한 향상으로 이어지고 이후에 등장한 많은 모델들의 설계에 영향을 미쳤습니다. 본 글에서는 ResNet-50의 개념, 작동 방식, 그리고 컴퓨터 비전의 진화에 있어 갖는 의미를 살펴보겠습니다. 시작하겠습니다!

ResNet-50이란 무엇인가요?#

ResNet-50은 Convolutional Neural Network (CNN)이라는 신경망 유형을 기반으로 하는 컴퓨터 비전 모델입니다. CNN은 컴퓨터가 이미지의 테두리, 색상, 모양 같은 패턴을 학습하고 이를 활용해 객체를 인식하고 분류함으로써 시각 정보를 이해할 수 있도록 설계되었습니다.

2015년 마이크로소프트 리서치(Microsoft Research) 연구원들이 도입한 ResNet-50은 대규모 이미지 인식 작업에서의 정확성과 효율성 덕분에 해당 분야에서 가장 영향력 있는 모델 중 하나가 되었습니다.

ResNet-50의 핵심 특징은 '잔차 연결(residual connections)' 또는 '숏컷 연결'을 사용한다는 점입니다. 이는 모델이 학습 과정에서 일부 단계를 건너뛸 수 있도록 하는 단순한 경로입니다. 즉, 모델이 모든 계층을 거쳐 정보를 전달하도록 강제하는 대신, 이러한 숏컷을 통해 중요한 세부 정보를 더 직접적으로 전달할 수 있습니다. 이를 통해 학습 속도가 빨라지고 신뢰성이 향상됩니다.

Fig 1. ResNet 아키텍처의 잔차 연결 살펴보기.

이러한 설계는 딥러닝의 고질적인 문제인 '기울기 소실(vanishing gradient) 문제'를 해결하는 데 도움이 됩니다. 매우 깊은 모델에서는 정보가 많은 계층을 통과하며 중요한 정보가 유실될 수 있어 모델 학습이 어려워집니다.

잔차 연결은 정보가 처음부터 끝까지 명확하게 흐르도록 유지함으로써 이를 방지하는 데 도움을 줍니다. 모델 이름이 ResNet-50인 이유도 여기에 있습니다. ResNet은 잔차 네트워크(Residual Network)를 의미하며, '50'은 이미지를 처리하는 데 사용되는 레이어의 수를 나타냅니다.

ResNet-50의 작동 방식 개요#

ResNet-50은 중요한 정보 유실 없이 모델을 깊게 구성할 수 있도록 체계적인 구조를 갖추고 있습니다. 이는 강력한 성능을 유지하면서도 효율성을 보장하는 단순하고 반복적인 패턴을 따릅니다.

ResNet-50 아키텍처의 작동 방식을 자세히 살펴보겠습니다:

• 기본 feature extraction: 모델은 컨볼루션(convolution)이라는 수학적 연산을 적용하는 것으로 시작합니다. 이는 이미지 위에 작은 필터(커널이라고 함)를 슬라이딩하여 테두리나 텍스처 같은 기본 패턴을 강조하는 이미지의 새로운 버전인 피처 맵을 생성하는 과정입니다. 이를 통해 모델은 유용한 시각 정보를 포착하기 시작합니다.
• 복잡한 특징 학습: 데이터가 네트워크를 통과하면서 특징 맵의 크기는 점차 작아집니다. 이는 풀링(pooling)이나 더 큰 보폭(stride)을 가진 필터를 사용하는 기법을 통해 수행됩니다. 동시에 네트워크는 더 많은 특징 맵을 생성하여 모양, 객체의 구성 요소, 질감과 같이 점점 더 복잡한 패턴을 포착하게 됩니다.
• 데이터 압축 및 확장: 각 단계는 데이터를 압축하고 처리한 다음 다시 확장합니다. 이는 메모리를 절약하면서 모델이 학습할 수 있도록 돕습니다.
• 숏컷 연결: 이는 정보를 모든 계층으로 거치게 하지 않고 미리 건너뛰게 하는 단순한 경로입니다. 이를 통해 학습이 더욱 안정적이고 효율적으로 이루어집니다.
• prediction 생성: 네트워크의 끝에서 학습된 모든 정보가 결합되어 소프트맥스(softmax) 함수를 통과합니다. 이는 가능한 클래스에 대한 확률 분포를 출력하며, 각 예측에 대한 모델의 신뢰도를 나타냅니다(예: 고양이 90%, 개 9%, 자동차 1%).

Fig 2. ResNet-50 아키텍처.

ResNet-50의 주요 특징#

ResNet-50은 원래 이미지 분류용으로 설계되었지만, 유연한 설계 덕분에 컴퓨터 비전의 여러 분야에서 유용하게 사용되고 있습니다. ResNet-50을 돋보이게 하는 몇 가지 특징을 살펴보겠습니다.

이미지 분류를 위한 ResNet-50 사용#

ResNet-50은 주로 image classification에 사용되며, 목표는 이미지에 하나의 라벨을 지정하는 것입니다. 예를 들어 사진이 주어지면 모델은 눈에 띄는 주요 객체를 기반으로 개, 고양이, 비행기로 라벨을 지정할 수 있습니다.

신뢰할 수 있는 설계와 PyTorch, TensorFlow 같은 널리 사용되는 딥러닝 라이브러리에서의 지원 덕분에 ResNet-50은 대규모 이미지 데이터셋으로 학습하기 위한 초기 인기 선택지가 되었습니다. 가장 잘 알려진 예 중 하나는 컴퓨터 비전 모델을 평가하고 비교하는 데 사용되는 대규모 라벨링 이미지 모음인 ImageNet입니다.

Ultralytics YOLO11과 같은 최신 모델이 더 뛰어난 성능을 보이지만, ResNet-50은 정확도, 속도, 단순성의 탄탄한 균형 덕분에 여전히 벤치마크로 흔히 사용됩니다.

Fig 3. ResNet-50을 사용하여 개를 분류하는 예시.

ResNet-50 백본으로 구현되는 객체 탐지#

이미지 분류가 사진 속 주요 객체를 식별하는 것인 반면, object detection은 동일한 이미지에서 여러 객체를 찾아내고 라벨을 지정함으로써 한 걸음 더 나아갑니다. 예를 들어 번잡한 거리 이미지에서 모델은 자동차, 버스, 사람을 감지하고 각각의 위치를 파악해야 할 수 있습니다.

ResNet-50은 이러한 모델 중 일부에서 백본으로 사용됩니다. 이는 모델의 초기 단계에서 이미지를 분석하고 이미지 내 객체의 종류와 위치를 설명하는 중요한 세부 정보를 추출하는 역할을 합니다. 이후 이 정보는 '탐지 헤드(detection head)'라고 불리는 모델의 다음 부분으로 전달되어, 어떤 객체가 이미지 내 어디에 있는지에 대한 최종 결정을 내립니다.

Faster R-CNN 및 DETR과 같은 유명한 탐지 모델들은 이 특징 추출 단계에 ResNet-50을 사용합니다. 미세한 세부 사항과 이미지의 전반적인 구도를 모두 효과적으로 포착하기 때문에, 복잡한 장면에서도 정확한 예측을 수행할 수 있도록 돕습니다.

ResNet-50을 활용한 전이 학습(Transfer Learning)#

ResNet-50 모델의 또 다른 흥미로운 특징은 transfer learning을 지원하는 능력입니다. 즉, 이미지 분류를 위해 ImageNet 같은 대규모 데이터셋으로 원래 훈련된 모델을 훨씬 적은 데이터로 새로운 작업에 맞게 조정할 수 있습니다.

처음부터 다시 시작하는 대신, 모델 계층의 대부분을 재사용하고 마지막 분류 계층만 새 작업에 맞게 교체하고 재훈련합니다. 이는 시간을 절약해주며 특히 라벨링된 데이터가 제한적인 상황에서 유용합니다.

ResNet-50의 컴퓨터 비전 애플리케이션#

ResNet-50 아키텍처는 광범위한 컴퓨터 비전 애플리케이션에서 유용하게 사용되었습니다. 특히 딥러닝 초기 단계에서 중요하게 작용하여 비전 AI 기술을 연구 단계를 넘어 실제 현장으로 도입하는 데 기여했습니다. 핵심적인 과제들을 해결함으로써, 오늘날 우리가 사용하는 더 발전된 모델들을 위한 발판을 마련했습니다.

ResNet-50 기반의 의료 영상 분석#

ResNet-50은 딥러닝 기반 의료 영상에서 사용된 초기 모델 중 하나였습니다. 연구원들은 X선, MRI 및 기타 진단 스캔에서 질병 패턴을 식별하는 데 이를 활용해 왔습니다. 예를 들어 안과 진단을 지원하기 위해 detect tumors 및 diabetic retinal images 분류를 돕는 역할을 해왔습니다.

현재는 임상 도구에 더 발전된 모델들이 사용되고 있지만, ResNet-50은 초기 의료 AI 연구에서 중요한 역할을 했습니다. 사용 편의성과 모듈식 설계 덕분에 진단 시스템 프로토타입을 제작하는 데 적합한 선택지였습니다.

Fig 4. ResNet-50 기반 뇌 종양 감지.

ResNet-50 기반의 산업 자동화#

마찬가지로 ResNet-50은 산업 현장에도 적용되어 왔습니다. 예를 들어 제조업에서는 강철, 콘크리트, 도색된 부품 등의 detect surface defects on materials을 위해 연구 및 파일럿 시스템에 사용되었습니다.

또한 주조나 조립 과정에서 발생하는 구멍, 균열, 이물질 등을 식별하기 위한 설정에서도 테스트되었습니다. ResNet-50은 표면 질감의 미세한 차이를 감지할 수 있어 품질 검사에 중요한 능력을 갖추고 있으므로 이러한 작업에 매우 적합합니다.

Ultralytics YOLO11과 같은 더 발전된 모델들이 이제 프로덕션 시스템에서 흔히 사용되지만, ResNet-50은 여전히 학술 연구 및 벤치마킹, 특히 이미지 분류 작업에서 중요한 역할을 하고 있습니다.

Fig 5. ResNet-50을 활용한 표면 검사.

ResNet-50의 장점과 한계#

ResNet-50의 장점들을 살펴보겠습니다:

• 강력한 기준 성능: ResNet-50은 광범위한 작업에서 견고한 정확도를 제공하여 연구 및 실제 프로젝트 모두에서 신뢰받는 벤치마크가 됩니다.
• 충분한 문서화 및 폭넓은 연구: 아키텍처가 잘 알려져 있고 문서화가 잘 되어 있어 개발자와 연구자들이 문제 해결 및 학습을 하기가 더 쉽습니다.
• 다양한 도메인에서의 범용성: 의료 영상 분석에서 제조에 이르기까지 ResNet-50은 다양한 실무 문제에 성공적으로 적용되어 그 유연성을 입증했습니다.

한편, ResNet-50의 한계도 있습니다:

• 높은 리소스 사용량: ResNet-50은 경량 모델에 비해 더 많은 메모리와 컴퓨팅 성능을 요구하므로 모바일 기기나 실시간 애플리케이션에는 적합하지 않을 수 있습니다.
• 소규모 datasets에서의 과적합: ResNet-50은 깊고 복잡한 구조로 인해 적절한 정규화 기법 없이 제한된 데이터로 훈련할 때 과적합이 발생할 수 있습니다.
• 고정된 입력 크기: ResNet-50은 일반적으로 224×224 픽셀과 같이 특정 크기의 이미지를 요구하므로 이미지 크기를 조정하거나 자르는 과정에서 중요한 세부 정보가 손실될 수 있습니다.

핵심 요약#

ResNet-50은 매우 깊은 신경망이 효과적으로 훈련될 수 있으며 시각 작업에서 강력한 성능을 발휘할 수 있음을 증명했습니다. 그 아키텍처는 안정적으로 작동하는 더 깊은 모델을 구축하기 위한 명확하고 실용적인 프레임워크를 제공했습니다.

출시 이후 연구자들은 설계를 확장하여 ResNet-101 및 ResNet-152와 같은 더 깊은 버전을 만들었습니다. 전반적으로 ResNet-50은 오늘날 컴퓨터 비전에서 딥러닝이 사용되는 방식을 형성하는 데 도움을 준 핵심적인 모델입니다.

성장하는 저희 community에 참여하세요! AI에 대해 더 알아보려면 GitHub repository를 살펴보세요. 자신만의 컴퓨터 비전 프로젝트를 시작할 준비가 되셨나요? 저희 licensing options을 확인해 보세요. 솔루션 페이지를 방문하여 AI in agriculture 및 vision AI in healthcare를 만나보세요!