SURFEL REPROJECTION OF SEMANTIC DATA FOR ACCELERATED AUGMENTED REALITY PERCEPTION

Techniques include storing semantic information in data structures that are updated at a rate less than a nominal frame rate. For example, a semantic model is applied to a first camera image frame in a sequence of frames to produce semantic data for each pixel in the frame. In addition, a first edge...

Full description

Saved in:
Bibliographic Details
Main Authors DEBATS, Stephanie Renee, TATENO, Keisuke, TURNER, Eric Lee, KOWDLE, Adarsh Prakash Murthy, TRIPATHI, Pratibha
Format Patent
LanguageEnglish
French
Published 22.08.2024
Subjects
CALCULATING
COMPUTING
COUNTING
PHYSICS
Online AccessGet full text

Cover

More Information
Summary:Techniques include storing semantic information in data structures that are updated at a rate less than a nominal frame rate. For example, a semantic model is applied to a first camera image frame in a sequence of frames to produce semantic data for each pixel in the frame. In addition, a first edge image is derived from the first camera image frame to define boundaries for the semantic labels. A first semantic image may be derived from the semantic data and the first edge image. The semantic data is then stored in the data structures. For a second camera image frame of the sequence, a second edge image is derived but the semantic data is exported from the data structures to the second edge image to produce a second semantic image without generating new semantic data. Les techniques comprennent le stockage d'informations sémantiques dans des structures de données qui sont mises à jour à une vitesse inférieure à une fréquence d'images nominale. Par exemple, un modèle sémantique est appliqué à une première image de caméra dans une séquence d'image pour produire des données sémantiques pour chaque pixel dans l'image. De plus, une première image de bord est dérivée de la première image de caméra pour définir des limites pour les étiquettes sémantiques. Une première image sémantique peut être dérivée des données sémantiques et de la première image de bord. Les données sémantiques sont ensuite stockées dans les structures de données. Pour une seconde image de caméra de la séquence, une seconde image de bord est dérivée mais les données sémantiques sont exportées des structures de données à la seconde image de bord pour produire une seconde image sémantique sans générer de nouvelles données sémantiques.
Bibliography:Application Number: WO2023US62647