CONTEXTUAL IN-GAME ELEMENT RECOGNITION, ANNOTATION AND INTERACTION BASED ON REMOTE USER INPUT

• Main Authors: GREGORIO, Alex R, SARIN, Raman Kumar, VERMA, Arunabh
• Format: Patent
• Language: English; French
• Published: 14.11.2019
• Subjects: AMUSEMENTS; CARD, BOARD, OR ROULETTE GAMES; GAMES; GAMES NOT OTHERWISE PROVIDED FOR; HUMAN NECESSITIES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; SPORTS; VIDEO GAMES

Systems, methods, and apparatuses are provided for annotating a video frame generated by a video game. A video game model that associates element tags with elements of the video game may be generated. The video game model may be applied by a video game overlay executing concurrently with the video game. The video game overlay may receive a remote user input from one or more remote devices over a network. The remote user input may be multiplexed and/or normalized, and subsequently parsed by applying the video game model to extract an element tag corresponding to the video game. By applying the video game model, an in-game element of the video game corresponding to the element tag may be identified in the video frame. Based on the identified element in the video frame of the video game, the video frame may be annotated and presented to the video game user. La présente invention concerne des systèmes, des procédés et des appareils pour annoter une trame vidéo générée par un jeu vidéo. Un modèle de jeu vidéo qui associe des étiquettes d'éléments à des éléments du jeu vidéo peut être généré. Le modèle de jeu vidéo peut être appliqué par une superposition de jeu vidéo s'exécutant en même temps que le jeu vidéo. La superposition de jeu vidéo peut recevoir une entrée d'utilisateur à distance provenant d'un ou de plusieurs dispositifs à distance sur un réseau. L'entrée d'utilisateur à distance peut être multiplexée et/ou normalisée, puis analysée par application du modèle de jeu vidéo pour extraire une étiquette d'élément correspondant au jeu vidéo. En appliquant le modèle de jeu vidéo, un élément de jeu du jeu vidéo correspondant à l'étiquette d'élément peut être identifié dans la trame vidéo. Sur la base de l'élément identifié dans la trame vidéo du jeu vidéo, la trame vidéo peut être annotée et présentée à l'utilisateur du jeu vidéo.