SELECTING PORTIONS OF VEHICLE-CAPTURED VIDEO TO USE FOR DISPLAY

A vehicle camera system captures and transmits video to a user device, which includes a viewing device for playback of the captured video, such as virtual reality or augmented reality glasses. A rendering map is generated that indicates which pixels of the video frame (as identified by particular co...

Full description

Saved in:
Bibliographic Details
Main Authors ZHANG, Zhengyou, SMOLYANSKIY, Nikolai, ANDERSON, Sean Eron, HALL, Michael
Format Patent
LanguageEnglish
French
Published 14.12.2017
Subjects
Online AccessGet full text

Cover

Loading…
More Information
Summary:A vehicle camera system captures and transmits video to a user device, which includes a viewing device for playback of the captured video, such as virtual reality or augmented reality glasses. A rendering map is generated that indicates which pixels of the video frame (as identified by particular coordinates of the video frame) correspond to which coordinates of a virtual sphere in which a portion of the video frame is rendered for display. When a video frame is received, the rendering map is used to determine the texture values (e.g., colors) for coordinates in the virtual sphere, which is used to generate the display for the user. This technique reduces the rendering time when a user turns his or her head (e.g., while in virtual reality) and so it reduces motion and/or virtual reality sickness induced by the rendering lag. Un système de caméra de véhicule capture et transmet une vidéo à un dispositif utilisateur, qui comprend un dispositif de visualisation pour la lecture de la vidéo capturée, telle que des lunettes de réalité virtuelle ou à réalité augmentée. Une carte de rendu est générée, laquelle indique quels pixels de l'image vidéo (comme identifiés par des coordonnées particulières de l'image vidéo) correspondent à quelles coordonnées d'une sphère virtuelle dans laquelle une partie de l'image vidéo est rendue aux fins d'affichage. Lorsqu'une image vidéo est reçue, la carte de rendu est utilisée pour déterminer les valeurs de texture (par exemple, les couleurs) pour des coordonnées dans la sphère virtuelle, qui est utilisée pour générer l'affichage pour l'utilisateur. Cette technique réduit le temps de rendu lorsqu'un utilisateur tourne la tête (par exemple, en réalité virtuelle) et réduit ainsi la cinétose et/ou le mal de la réalité virtuelle induit par le retard de rendu.
Bibliography:Application Number: WO2017US19227