METHODS AND SYSTEMS FOR TRAINING AND VALIDATING A PERCEPTION SYSTEM

• Main Authors: NEHMADI, Youval, COHEN, Anna, WAGNER, Mark, MANGAN, Shmuel, BEN EZRA, Shahar, AVITAL, Itzik
• Format: Patent
• Language: English; French
• Published: 17.06.2021
• Subjects: ANALOGOUS ARRANGEMENTS USING OTHER WAVES; CALCULATING; COMPUTING; CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE ORDIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; CONTROLLING; COUNTING; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; GYROSCOPIC INSTRUMENTS; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION ORRERADIATION OF RADIO WAVES; MEASURING; MEASURING DISTANCES, LEVELS OR BEARINGS; NAVIGATION; PERFORMING OPERATIONS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY; PHYSICS; RADIO DIRECTION-FINDING; RADIO NAVIGATION; REGULATING; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TOTHE CONTROL OF A PARTICULAR SUB-UNIT; SURVEYING; SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES; TESTING; TRANSPORTING; VEHICLES IN GENERAL

A perception system, comprising a set of reference sensors; a set of test sensors and a computing device, which is configured for receiving first training signals from the set of reference sensors and receiving second training signals from the set of test sensors, the set of reference sensors and the set of test sensors simultaneously exposed to a common scene; processing the first training signals to obtain reference images containing reference depth information associated with the scene; and using the second training signals and the reference images to train a neural network for transforming subsequent test signals from the set of test sensors into test images containing inferred depth information. La présente invention concerne un système de perception, comprenant un ensemble de capteurs de référence; un ensemble de capteurs de test et un dispositif informatique qui est configuré pour recevoir des premiers signaux d'entraînement en provenance de l'ensemble de capteurs de référence et pour recevoir des seconds signaux d'entraînement en provenance de l'ensemble de capteurs de test, l'ensemble de capteurs de référence et l'ensemble de capteurs de test étant exposés simultanément à une scène commune; le traitement des premiers signaux d'entraînement pour obtenir des images de référence contenant des informations de profondeur de référence associées à la scène; et l'utilisation des seconds signaux d'entraînement et des images de référence pour entraîner un réseau neuronal afin de transformer des signaux de test subséquents provenant de l'ensemble de capteurs de test en des images de test contenant des informations de profondeur inférées.