HIGH RESOLUTION REAL-TIME ARTISTIC STYLE TRANSFER PIPELINE

• Main Authors: PRINS, Adam, WU, Richard, POPLIN, Ryan, HOFFMAN-JOHN, Erin, TOOR, Andeep
• Format: Patent
• Language: English; French
• Published: 24.09.2020
• Subjects: CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; COUNTING; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS

Systems and methods are provided for receiving at least one image and a reference image, and performing a plurality of downscaling operations having separable convolutions on the received at least one image. A plurality of residual blocks may be formed, with each residual block containing two separable convolutions of the kernel and two instance normalizations. A plurality of upscaling operations may be performed on the plurality of residual blocks, and a stylized image may be displayed based on at least the performed plurality of upscaling operations and the reference image. La présente invention concerne des systèmes et des procédés permettant de recevoir au moins une image et une image de référence, et d'effectuer une pluralité d'opérations de réduction de la résolution ayant des convolutions séparables sur ladite image reçue. Une pluralité de blocs résiduels peuvent être formés, chaque bloc résiduel contenant deux convolutions séparables du noyau et deux normalisations d'instance. Une pluralité d'opérations d'interpolation peuvent être effectuées sur la pluralité de blocs résiduels, et une image stylisée peut être affichée sur la base d'au moins la pluralité d'opérations d'interpolation effectuée et de l'image de référence.