A METHOD AND A SYSTEM FOR TRAINING A MODEL PERFORMING SEMANTIC SEGMENTATION OF NIGHTTIME IMAGES

• Main Authors: ZUPPINGER, Patrizia, VIGNARD, Nicolas, DAI, Dengxin, GOOL, Luc
• Format: Patent
• Language: English; French
• Published: 26.03.2020
• Subjects: CALCULATING; COMPUTING; COUNTING; HANDLING RECORD CARRIERS; PHYSICS; PRESENTATION OF DATA; RECOGNITION OF DATA; RECORD CARRIERS

The present invention relates to a method and system for training a semantic segmentation model performing semantic segmentation of images taken at nighttime, comprising: a - obtaining (S01) a first set of labelled images (101) taken at daylight, the labelled images being annotated with predefined semantic segmentation labels, b - training (S02) a semantic segmentation model using the first set of labelled images, c - applying (S03) the semantic segmentation model of step b to a second set of unlabeled images (102) taken at twilight of a first predefined degree, where solar illumination is less than at daylight and more than at nighttime, to obtain semantic segmentations (102') of the images of the second set, d - labelling (S04) the second set of unlabeled images (102) with the semantic segmentations (102') of the images of the second set to obtain a second set of labelled images (102"), and e - training (S05) the semantic segmentation model using the first set of labelled images (101) and the second set of labelled images (102"). La présente invention concerne un procédé et un système pour l'apprentissage d'un modèle de segmentation sémantique réalisant une segmentation sémantique d'images prises la nuit. Ledit procédé comprend : a - l'obtention (S01) d'un premier ensemble d'images marquées (101) prises le jour, les images marquées étant annotées avec des marques prédéfinies de segmentation sémantique, b - l'apprentissage (S02) d'un modèle de segmentation sémantique à l'aide du premier ensemble d'images marquées, c - l'application (S03) du modèle de segmentation sémantique de l'étape b à un second ensemble d'images non marquées (102) prises dans une pénombre d'un premier degré prédéfini, l'éclairement solaire étant inférieur à celui pendant le jour et supérieur à celui pendant la nuit, pour obtenir des segmentations sémantiques (102') des images du second ensemble, d - le marquage (S04) du second ensemble d'images non marquées (102) avec les segmentations sémantiques (102') des images du second ensemble pour obtenir un second ensemble d'images marquées (102''), et e - l'apprentissage (S05) du modèle de segmentation sémantique à l'aide du premier ensemble d'images marquées (101) et du second ensemble d'images marquées (102'').