THREE-DIMENSION RECONSTRUCTION METHOD AND THREE-DIMENSION RECONSTRUCTION DEVICE

• Main Authors: SUGIO, Toshiyasu, YOSHIKAWA, Satoshi, MATSUNOBU, Toru, YASUGI, Shunsuke, KOYAMA, Tatsuya, FUKUDA, Masaki
• Format: Patent
• Language: English; French; Japanese
• Published: 26.12.2019
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRICITY; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION

This three-dimension reconstruction method for generating a three-dimensional model by using a plurality of camera images obtained from a plurality of cameras (101) which are placed at different positions and which capture images of the same three-dimensional space, comprises: acquiring (S122) a three-dimensional model and camera parameters of the plurality of cameras (101); generating (S123) a depth image indicating the distance from one camera (101) to the three-dimensional model on the basis of the camera parameters and the three-dimensional model; generating (S125) a foreground image indicating a region, where an object is included, of one camera image captured by the one camera (101) among a plurality of camera images; determining (S126) whether or not any three-dimensional point is missing in the three-dimensional model, by comparing the depth image and the foreground image; and outputting missing information indicating that a three-dimensional point is missing in the three-dimensional model when the three-dimensional point is missing in the three-dimensional model. L'invention concerne un procédé de reconstruction tridimensionnelle permettant de générer un modèle tridimensionnel à l'aide d'une pluralité d'images de caméra obtenues à partir d'une pluralité de caméras (101) qui sont placées à différentes positions et qui capturent des images du même espace tridimensionnel, et qui consiste : à acquérir (S122) un modèle tridimensionnel et des paramètres de caméra de la pluralité de caméras (101) ; à générer (S123) une image de profondeur indiquant la distance d'une caméra (101) au modèle tridimensionnel sur la base des paramètres de caméra et du modèle tridimensionnel ; à générer (S125) une image de premier plan indiquant une région, où un objet est inclus, d'une image de caméra capturée par la caméra (101) parmi une pluralité d'images de caméra ; à déterminer (S126) si un point tridimensionnel est absent ou non dans le modèle tridimensionnel, en comparant l'image de profondeur et l'image de premier plan ; et à délivrer en sortie des informations absentes indiquant qu'un point tridimensionnel est absent dans le modèle tridimensionnel lorsque le point tridimensionnel est absent dans le modèle tridimensionnel. 互いに異なる位置に配置されており、共通する三次元空間を撮像する複数のカメラ（１０１）から得られた複数のカメラ画像を用いて三次元モデルを生成する三次元再構成方法であって、複数のカメラ（１０１）のカメラパラメータおよび三次元モデルを取得し（Ｓ１２２）、カメラパラメータおよび三次元モデルに基づいて、一のカメラ（１０１）から三次元モデルまでの距離を示すデプス画像を生成し（Ｓ１２３）、複数のカメラ画像のうちの一のカメラ（１０１）により撮像された一のカメラ画像中においてオブジェクトが映り込んでいる領域が示される前景画像を生成し（Ｓ１２５）、デプス画像と前景画像とを比較することにより三次元モデルに三次元点の欠落があるか否かを判定し（Ｓ１２６）、三次元モデルに三次元点の欠落がある場合、三次元モデルに三次元点の欠落があることを示す欠落情報を出力する。