AUTONOMOUS STORE TRACKING SYSTEM

• Main Authors: BUIBAS, MARIUS, QUINN, JOHN, PIEKNIEWSKI, FILIP, KUO, CHINANG, BAPST, ALEKSANDER, FEIGUM, KAYLEE, PETRE, CSABA, YOUSEFISAHI, SOHEYL
• Format: Patent
• Language: English; French
• Published: 23.01.2020
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRICITY; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION

A system that analyzes camera images to track a person in an autonomous store, and to determine when a tracked person takes or moves items in the store. The system may associate a field of influence volume around a person's location; intersection of this volume with an item storage area, such as a shelf, may trigger the system to look for changes in the items on the shelf. Items that are taken from, placed on, or moved on a shelf may be determined by a neural network that processes before and after images of the shelf. Person tracking may be performed by analyzing images from fisheye ceiling cameras projected onto a plane horizontal to the floor. Projected ceiling camera images may be analyzed using a neural network trained to recognize shopper locations. The autonomous store may include modular ceiling and shelving fixtures that contain cameras, lights, processors, and networking. L'invention concerne un système qui analyse des images de caméra pour suivre une personne dans un magasin autonome et pour déterminer lorsqu'une personne suivie prend ou déplace des articles dans le magasin. Le système peut associer un champ de volume d'influence autour de l'emplacement d'une personne; l'intersection de ce volume avec une zone de stockage d'articles, telle qu'une étagère, peut déclencher la recherche, par le système, de changements concernant les articles sur l'étagère. Des articles qui sont prélevés, placés ou déplacés sur une étagère peuvent être déterminés par un réseau neuronal qui traite des images avant et après de l'étagère. Le suivi de personne peut être réalisé par analyse d'images de caméras de plafond panoramiques projetées sur un plan horizontal par rapport au sol. Des images de caméra de plafond projetées peuvent être analysées à l'aide d'un réseau neuronal entraîné pour reconnaître des emplacements d'acheteurs. Le magasin autonome peut comprendre des appareils de plafond et de rayonnage modulaires qui contiennent des caméras, des lumières, des processeurs et une mise en réseau.