COMMUNICATION ASSISTANCE SYSTEM, COMMUNICATION ASSISTANCE METHOD, AND IMAGE CONTROL PROGRAM

• Main Authors: HOSOYA Toshifumi, KAKII Toshiaki, OKINA Yuna, DAI Guiming
• Format: Patent
• Language: English; French; Japanese
• Published: 08.10.2020
• Subjects: CALCULATING; COMPUTING; COUNTING; DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FORADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORYOR FORECASTING PURPOSES; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRIC DIGITAL DATA PROCESSING; ELECTRICITY; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE,COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTINGPURPOSES, NOT OTHERWISE PROVIDED FOR

A communication assistance system according to one aspect of the present disclosure assists communication between a first user corresponding to a first terminal and a second user corresponding to a second terminal. At least one processor in the system analyzes first video data in which the first user appears, selects a movement pattern corresponding to a first nonverbal behavior (which is a nonverbal behavior of the first user) from an avatar movement pattern group, and transmits control data indicating the selected movement pattern to the second terminal. The second terminal displays on the second terminal a virtual space containing a first avatar corresponding to the first user and a second avatar corresponding to the second user, receives the control data, moves the first avatar on the basis of the selected movement pattern, and moves the second avatar on the basis of second video data in which the second user appears. Selon un aspect, l'invention porte sur un système d'aide à la communication qui facilite la communication entre un premier utilisateur correspondant à un premier terminal et un second utilisateur correspondant à un second terminal. Au moins un processeur dans le système analyse de premières données vidéo dans lesquelles apparaît le premier utilisateur, sélectionne un motif de mouvement correspondant à un premier comportement non verbal (qui est un comportement non verbal du premier utilisateur) dans un groupe de motifs de mouvement d'avatar, et transmet des données de commande indiquant le motif de mouvement sélectionné au second terminal. Le second terminal affiche sur le second terminal un espace virtuel contenant un premier avatar correspondant au premier utilisateur et un second avatar correspondant au second utilisateur, reçoit les données de commande, déplace le premier avatar sur la base du motif de mouvement sélectionné, et déplace le second avatar sur la base de secondes données vidéo dans lesquelles apparaît le second utilisateur. 本開示の一側面に係るコミュニケーション支援システムは、第１端末に対応する第１ユーザと第２端末に対応する第２ユーザとの間のコミュニケーションを支援する。システムの少なくとも一つのプロセッサは、第１ユーザを映した第１映像データを解析して、アバターの動作パターン群の中から、第１ユーザの非言語行動である第１非言語行動に対応する動作パターンを選択し、選択された動作パターンを示す制御データを第２端末に送信する。第２端末は、第１ユーザに対応する第１アバターと、第２ユーザに対応する第２アバターとを含む仮想空間を第２端末に表示し、制御データを受信し、選択された動作パターンに基づいて第１アバターを動作させ、第２ユーザを映した第２映像データに基づいて第２アバターを動作させる。