OBJECT RETRIEVAL SYSTEM, OBJECT RETRIEVAL METHOD AND LEARNED MODEL

• Main Authors: SUGIURA KOMEI, KAWAI HISASHI, MAGASSOUBA ALY
• Format: Patent
• Language: English; Japanese
• Published: 26.11.2020
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC DIGITAL DATA PROCESSING; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS

To provide a technology capable of specifying a target object even in a situation where there are a plurality of candidates of the target object.SOLUTION: An object retrieval system includes: an instruction statement acquisition unit that acquires an instruction statement relating to a specific object; an image extraction unit that extracts one or a plurality of first partial images indicating an individual object included in an input image from the input image associated with the instruction statement; and a learned model that receives an input of the instruction statement, each of the first partial images, and information indicating an intra-image environment of the first partial image to output a probability that each of the first partial images is an object specified by the instruction statement. The learned model is learned by the instruction statement specifying any object included in the image, and the partial image indicating the object specified by the instruction statement.SELECTED DRAWING: Figure 1 【課題】対象となる物体の候補が複数存在するような状況であっても、対象となる物体を特定できる技術を提供する。【解決手段】対象物検索システムは、特定の対象物に関する命令文を取得する命令文取得部と、命令文に関連付けられた入力画像から、当該入力画像に含まれる個々の物体を示す１または複数の第１の部分画像を抽出する画像抽出部と、命令文と、第１の部分画像の各々と、当該第１の部分画像の画像内環境を示す情報との入力を受けて、第１の部分画像の各々が命令文により特定される対象物である確率を出力する学習済モデルとを含む。学習済モデルは、画像に含まれるいずれかの物体を特定する命令文と、当該命令文により特定される物体を示す部分画像とを含むトレーニングデータセットにより学習されている。【選択図】図１