ENGAGEMENT VALUE PROCESSING SYSTEM AND ENGAGEMENT VALUE PROCESSING DEVICE

• Main Authors: OKAZAKI MIKIO, YATANI SHOICHI, HIRAIDE RYUICHI, NISHIO SEIICHI, MURAYAMA MASAMI
• Format: Patent
• Language: English; Japanese
• Published: 11.01.2018
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRICITY; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION

PROBLEM TO BE SOLVED: To provide a concentration ratio processing system that can acquire both of a concentration ratio and biological information such as a pulse rate at the same time using only video data obtained from an imaging device.SOLUTION: In a client 103 of an engagement value processing system 101, an image data stream output by an imaging device is created in feature point data indicating a feature point of a face by a feature point extraction unit. A face direction vector and a visual line direction vector for calculating an engagement value for a content of a user are calculated from the feature point data. On the other hand, the feature point data can be utilized for cutout of partial image data and estimation of a feeling of the user in detecting a pulse rate. Thus, it is possible to acquire the engagement value, the pulse rate, and the feeling for the content of the user viewing the content, at the same time, only by imaging the user using the imaging device.SELECTED DRAWING: Figure 6 【課題】撮像装置から得られる映像データのみを用いて、集中度に加え、脈拍等の生体情報を同時に取得できる集中度処理システムを提供する。【解決手段】エンゲージメント値処理システム１０１のクライアント１０３において、撮像装置が出力する画像データストリームは、特徴点抽出部によって顔の特徴点を示す特徴点データが生成される。特徴点データから、ユーザのコンテンツに対するエンゲージメント値を算出するための顔方向ベクトルと視線方向ベクトルが算出される。一方、特徴点データは、脈拍を検出する際の、部分画像データの切り出しと、ユーザの感情の推定にも利用できる。したがって、撮像装置でユーザを撮影するだけで、コンテンツを視聴するユーザの、コンテンツに対するエンゲージメント値と、脈拍と、感情を同時に取得することができる。【選択図】図６