멀티스케일 이미지 생성

• Main Authors: GOMES DE FREITAS JOAO FERDINANDO, BELOV DANIEL, KALCHBRENNER NAL EMMERICH, GOMEZ COLMENAREJO SERGIO, WANG ZIYU, REED SCOTT ELLISON, VAN DEN OORD AARON GERARD ANTONIUS
• Format: Patent
• Language: Korean
• Published: 20.08.2019
• Subjects: CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; COUNTING; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS

본원은, N 픽셀들 × N 픽셀들의 출력 해상도를 갖는 출력 이미지를 생성하는 방법을 개시하며, 출력 이미지의 각 픽셀은 복수의 컬러 채널들 각각에 대한 각각의 컬러 값을 가지며, 상기 방법은, 상기 출력 이미지의 저해상도 버전을 획득하는 단계; 그리고 현재 K × K 해상도를 갖는 출력 이미지의 현재 버전을 획득하는 단계; 동작들을 반복 수행함으로써 출력 해상도를 갖는 출력 이미지를 생성하도록 상기 출력 이미지의 저해상도 버전을 업스케일링하는 단계를 포함하며, 상기 동작들은, 현재 K × K 해상도를 갖는 상기 출력 이미지의 현재 버전을 획득하는 동작; 그리고 2K x 2K 해상도를 갖는 출력 이미지의 업데이트된 버전을 생성하도록 상기 현재 해상도에 특정한 컨벌루션 신경망들의 세트를 사용하여 상기 출력 이미지의 상기 현재 버전을 프로세싱하는 동작을 포함한다. A method of generating an output image having an output resolution of N pixels×N pixels, each pixel in the output image having a respective color value for each of a plurality of color channels, the method comprising: obtaining a low-resolution version of the output image; and upscaling the low-resolution version of the output image to generate the output image having the output resolution by repeatedly performing the following operations: obtaining a current version of the output image having a current K×K resolution; and processing the current version of the output image using a set of convolutional neural networks that are specific to the current resolution to generate an updated version of the output image having a 2K×2K resolution.