3 3D HUMAN BODY MODEL RECONSTRUCTION APPARATUS AND METHOD

• Main Authors: LEE SANG HOON, HUH JUNG WOO
• Format: Patent
• Language: English; Korean
• Published: 15.06.2021
• Subjects: CALCULATING; COMPUTING; COUNTING; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS

The present invention provides an apparatus and method for restoring a three-dimensional (3D) human model, which comprises: a two-dimensional (2D) posture feature extraction unit for estimating a 2D joint vector corresponding to each joint position of at least one person included in a 2D image by a previously learned pattern estimation method and normalizing the estimated 2D joint vector in a predetermined mode to acquire features of a 2D posture; a multi-step human model estimation unit for receiving 2D posture features for each of the at least one person included in the 2D image, estimating a body type and a posture vector designated by a human model template in order to restore a human model corresponding to the 2D posture feature by a previously learned pattern estimation method, and estimating a location vector in order to dispose the human model being restored at a location corresponding to the 2D posture feature in the 3D space; and a 3D space disposition unit for receiving a status vector composed of a body type vector, a posture vector and a location vector and a 2D posture feature to restore a human model corresponding to the body type vector and the posture vector and disposing the human model restored according to the location vector in 3D space. 본 발명은 미리 학습된 패턴 추정 방식에 따라 2차원 영상에 포함된 적어도 하나의 사람 각각의 관절 위치에 대응하는 2차원 관절 벡터를 추정하고, 추정된 2차원 관절 벡터를 기지정된 방식으로 정규화하여 2차원 자세 특징을 획득하는 2차원 자세 특징 추출부; 2차원 영상에 포함된 적어도 하나의 사람 각각에 대한 2차원 자세 특징을 인가받고, 미리 학습된 패턴 추정 방식에 따라 2차원 자세 특징에 대응하는 체형 및 자세의 인간 모델을 복원하기 위해 인간 모델 템플릿에 의해 지정되는 체형 벡터와 자세 벡터를 추정하고, 복원되는 인간 모델을 3차원 공간 상의 2차원 자세 특징에 대응하는 위치에 배치하기 위한 위치 벡터를 추정하는 다단 인간 모델 추정부; 및 체형 벡터와 자세 벡터 및 위치 벡터로 구성되는 상태 벡터와 2차원 자세 특징을 인가받아, 체형 벡터와 자세 벡터에 대응하는 인간 모델을 복원하고, 위치 벡터에 따라 복원된 인간 모델을 3차원 공산 상에 배치하는 3차원 공간 배치부를 3차원 인간 모델 복원 장치 및 방법을 제공할 수 있다.