SYSTEMS AND METHODS FOR FAST OBJECT DETECTION IN COMPRESSED DOMAINS

• Main Authors: KANAUJIA, Atul, PARAMESWARAN, Vasudev, TRAN, Ryan
• Format: Patent
• Language: English; French
• Published: 12.09.2024
• Subjects: CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRICITY; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION

Methods and systems for performing detections at native resolution in high resolution video streams without requiring reconstruction of each frame comprises a baseline detector for performing object detections on key frames such as I frames in H.264 or H.265 video together with a shift lightweight neural network for calculating, from accumulated motion vectors of intermediate frames such as B frames and P frames, shift in the object detections and also together with a refine lightweight neural network responsive to the calculations from the shift network and accumulated frame residuals of the intermediate frames to determine object detections in the intermediate frames. L'invention concerne des procédés et des systèmes pour effectuer des détections à une résolution native dans des flux vidéo à haute résolution sans nécessiter de reconstruction de chaque trame comprenant un détecteur de ligne de base pour effectuer des détections d'objet sur des trames clés telles que des trames I dans les vidéos H.264 ou H.265 conjointement avec un réseau neuronal léger à décalage pour calculer, à partir de vecteurs de mouvement accumulés de trames intermédiaires telles que des trames B et des trames P, un décalage dans les détections d'objet et également conjointement avec un réseau neuronal léger affiné en réponse aux calculs provenant du réseau de décalage et des résidus de trame accumulés des trames intermédiaires pour déterminer des détections d'objet dans les trames intermédiaires.