Synthetic Data Generation

합성 데이터 생성은 실제 개인이나 사건을 포함하지 않으면서도 현실 세계 데이터의 통계적 속성과 패턴을 모방하는 인공 데이터셋을 만드는 과정입니다. 인공지능(AI) 및 머신러닝(ML) 영역에서 이 기술은 데이터 부족, 개인 정보 보호 문제, 편향을 극복하기 위한 핵심 요소가 되었습니다. 사건이 발생하는 대로 기록하는 기존의 데이터 수집 방식과 달리, 합성 생성은 알고리즘, 시뮬레이션, 생성형 모델을 사용하여 필요에 따라 고충실도 데이터를 제작합니다. 이 접근 방식은 개발자가 실제로 포착하기에 드물고, 위험하거나, 비용이 많이 드는 시나리오를 위해 완벽하게 라벨이 지정된 방대한 양의 학습 데이터를 생성할 수 있게 해주므로, 강력한 컴퓨터 비전(CV) 모델을 학습시키는 데 특히 중요합니다.

합성 생성의 원리#

합성 데이터 생성을 구동하는 핵심 기술은 종종 고급 생성형 AI 아키텍처를 포함합니다. 이러한 시스템은 실제 데이터의 더 작은 샘플을 분석하여 기본 구조와 상관관계를 이해합니다. 모델이 이러한 분포를 학습하면 해당 분포로부터 샘플링하여 새롭고 고유한 인스턴스를 생성할 수 있습니다.

주로 두 가지 방법이 지배적입니다:

• 컴퓨터 시뮬레이션: 비전 작업의 경우, 개발자는 비디오 게임에 사용되는 것과 유사한 3D 그래픽 엔진을 사용하여 실사 같은 장면을 렌더링합니다. 이를 통해 조명, 날씨, 객체 배치를 정밀하게 제어할 수 있습니다. 컴퓨터가 장면을 생성하기 때문에 수동 데이터 라벨링의 필요성을 우회하여 완벽한 주석(예: 객체 감지를 위한 경계 상자)도 자동으로 생성됩니다.
• 심층 생성 모델: 생성적 적대 신경망(GAN) 및 확산 모델과 같은 아키텍처는 매우 현실적인 이미지나 표 형태의 데이터를 합성할 수 있습니다. 예를 들어, NVIDIA 연구진은 이러한 모델을 활용하여 자율주행 머신을 위한 다양한 학습 환경을 조성합니다.

AI의 실제 응용 사례#

합성 데이터 생성은 데이터가 병목 현상이 되는 산업을 변화시키고 있습니다.

• 자율주행: 자율주행 차량을 학습시키려면 수십억 마일에 달하는 주행 데이터가 필요합니다. 물리적으로 이를 수집하는 것은 불가능합니다. 대신 기업들은 합성 환경을 사용하여 거리에 뛰어드는 아이나 눈이 멀 정도의 태양 광사와 같은 위험한 엣지 케이스를 시뮬레이션합니다. 이를 통해 자율주행차 인지 시스템이 실제 도로에서 거의 마주치지 않을 수 있는 중요한 시나리오를 바탕으로 학습되도록 보장합니다.
• 의료 및 의료 영상: HIPAA와 같은 환자 개인 정보 보호법은 의료 기록 공유를 엄격하게 제한합니다. 합성 생성을 통해 연구자들은 종양과 같은 질병의 생물학적 마커를 유지하면서도 실제 환자와는 완전히 분리된 X선 또는 MRI 스캔 데이터셋을 만들 수 있습니다. 이를 통해 환자의 기밀을 침해하지 않고 의료 영상 분석 도구를 개발할 수 있습니다.

Ultralytics YOLO26와의 시너지#

워크플로에 합성 데이터를 통합하면 Ultralytics YOLO26과 같은 최첨단 모델의 성능을 크게 향상시킬 수 있습니다. 실제 데이터셋에 합성 예시를 보완함으로써, 새로운 환경으로 일반화하는 모델의 능력을 개선할 수 있습니다.

아래는 실제 데이터와 합성 데이터의 혼합으로 학습될 수 있는 모델을 로드하여 추론을 수행하는 방법을 보여주는 Python 예제입니다.

from ultralytics import YOLO

# Load a YOLO26 model (trained on diverse synthetic and real data)
model = YOLO("yolo26n.pt")

# Run inference on an image to verify detection capabilities
# Synthetic training helps models handle varied lighting and angles
results = model("https://ultralytics.com/images/bus.jpg")

# Display the resulting bounding boxes and confidence scores
results[0].show()

데이터 증강과 합성 데이터의 차이점#

두 기술 모두 데이터셋을 확장하는 것을 목표로 하지만, 합성 데이터 생성과 데이터 증강을 구분하는 것이 중요합니다.

• 데이터 증강은 기존의 실제 이미지를 가져와 뒤집기, 회전, 색상 균형 변경 등을 통해 변형하여 변형본을 만듭니다. 이는 엄격하게 원본 캡처에서 파생된 것입니다.
• 합성 데이터 생성은 완전히 새로운 데이터 포인트를 처음부터 만듭니다. 생성 과정 중에 실제 원본 이미지와 일대일 대응이 필요하지 않으므로 물리적으로 존재한 적이 없는 장면을 만들 수 있습니다.

모범 사례 및 과제#

합성 데이터를 효과적으로 사용하려면 "심투실(sim-to-real)" 전송 가능성을 보장하는 것이 중요합니다. 이는 합성 데이터로 학습된 모델이 실제 입력에서 얼마나 잘 수행되는지를 나타냅니다. 합성 데이터에 실제 이미지의 질감이나 노이즈가 부족한 경우 배포 시 모델이 실패할 수 있습니다. 이를 완화하기 위해 개발자는 도메인 무작위화와 같은 기술을 사용하여 시뮬레이션의 질감과 조명을 다양화함으로써 모델이 특정 아티팩트에 의존하지 않고 형태 기반 기능을 학습하도록 강제합니다.

Ultralytics Platform을 사용하여 팀은 이러한 하이브리드 데이터셋을 관리하고, 모델 성능을 모니터링하며, 합성 데이터의 포함이 평균 정밀도(mAP) 같은 정확도 지표를 진정으로 개선하고 있는지 확인할 수 있습니다. Gartner에서 지적했듯이, 합성 데이터는 더 공정하고, 더 강력하며, 편향이 적은 모델을 학습할 수 있는 경로를 제공하면서 능력 있는 AI 시스템을 구축하기 위한 표준 요구사항으로 빠르게 자리 잡고 있습니다.