Method and apparatus for automatic selection and auto-labeling of image frames from video data for building deep learning training data

• Main Authors: KIM JEONG UK, LEE EUN SU
• Format: Patent
• Language: English; Korean
• Published: 19.06.2024
• Subjects: CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; COUNTING; PHYSICS

딥 러닝 학습 데이터 구축을 위하여 영상데이터에서 이미지프레임 자동 추출 및 레이블링 방법 및 장치가 개시된다. 본 발명의 영상데이터에서 이미지프레임 자동 추출 및 레이블링 장치는 카메라로부터 영상데이터를 획득하는 영상 촬영부; 상기 영상데이터로부터 복수의 이미지프레임을 추출하는 이미지프레임 추출부; 상기 복수의 이미지프레임으로부터 색 분포를 계산하여 이미지프레임의 색 분포 특징 벡터를 추출하는 특징 벡터 추출부; 상기 색 분포 특징 벡터를 갖는 이미지프레임을 클러스터링하여 클러스터를 결정하는 클러스터링부; 상기 각각의 클러스터에서 대표 이미지프레임을 추출하여 이를 학습 데이터로 결정하는 이미지프레임 선별부; 및 상기 학습 데이터를 자동 레이블링하는 레이블링부를 포함한다. 본 발명에 따르면, 중복되지 않고 의미 있는 이미지 프레임을 자동으로 영상 데이터에서 도출할 수 있고, 상기 도출된 이미지는 자동으로 레이블링되므로, 학습 데이터 세트 구축에서 시간 및 비용을 절약할 수 있다.