Method and Apparatus for Linking of Multiple Model Object Detection Results in a Video using Deep Learning-based Object Detectors

• Main Authors: AHN HANSE, YU SEUNGHYUN, SON JUNHYUNG, LEE SE JUN, PARK DAI HEE, YONGWHA CHUNG, SON SEUNGWOOK
• Format: Patent
• Language: English; Korean
• Published: 05.01.2023
• Subjects: CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; COUNTING; ELECTRIC DIGITAL DATA PROCESSING; PHYSICS

Provided are a method and apparatus for linking multiple model object detection results in a video using deep learning-based object detectors. According to the present invention, the method for linking multiple model object detection results in a video using deep learning-based object detectors comprises: a step of photographing multiple objects through a camera and acquiring a video; a step of acquiring multiple detection boxes for detecting multiple objects for each of a current frame and previous frame through an object detection unit from the acquired video; a step of determining whether the multiple detection boxes of the current frame are overlapped with the multiple detection boxes of the previous frame through the object detection unit, and determining a matching box, and adding the matching box to an ensemble box; and a step of checking the movements of multiple objects by using the difference between the number of pixels in the current frame and in the previous frame through an ensemble box correction unit from the acquired video, and readjusting the ensemble box in accordance with the movements of the multiple objects. Therefore, accuracy can be increased. 딥러닝 기반 객체 탐지기를 이용한 동영상 내 복수 모델 객체 탐지 결과 연결 방법 및 장치가 제시된다. 본 발명에서 제안하는 딥러닝 기반 객체 탐지기를 이용한 동영상 내 복수 모델 객체 탐지 결과 연결 방법은 카메라를 통해 복수의 객체를 촬영하여 영상을 획득하는 단계, 획득된 영상으로부터 객체 탐지부를 통해 현재 프레임과 이전 프레임 각각에 대하여 복수의 객체 탐지를 위한 복수의 탐지 박스를 획득하는 단계, 객체 탐지부를 통해 현재 프레임과 이전 프레임의 복수의 탐지 박스 간의 겹침 여부를 판단하여 매칭 박스를 결정하고, 앙상블 박스에 추가하는 단계 및 획득된 영상으로부터 앙상블 박스 보정부를 통해 현재 프레임과 이전 프레임의 픽셀 수의 차를 이용하여 복수의 객체의 움직임을 확인하고, 복수의 객체의 움직임에 따라 앙상블 박스를 재조정하는 단계를 포함한다.