Transformer-based depth estimation apparatus and method

트랜스포머 기반 깊이 추정 장치 및 방법이 개시된다. 트랜스포머 기반 깊이 추정 장치는 스윈-트랜스포머(Swin Transformer) 인코더와 픽셀-단위 스킵 어텐션(Pixel-Wise Skip-Attention) 기반 디코더 모듈을 통해 인코더 특징맵과 이전 단계의 디코더 특징맵을 융합하여 스윈-트랜스포머 인코더에서 추출된 전역적 정보를 보충하고, 인코더 특징맵을 입력으로 픽셀 레벨 주의 맵을 생성하여 전역 정보만 포함된 디코더 특징맵에 국소적 정보를 향상시킬 수 있으며, 디코더에서 나온 최고해상도의 깊이 영상을 라벨로 활용하여...

Full description

Saved in:
Bibliographic Details
Main Authors KIM NAM IL, HAN DAE CHAN, CHOI YU KYUNG, SHIN JEONG MIN
Format Patent
LanguageEnglish
Korean
Published 07.12.2023
Subjects
CALCULATING
COMPUTING
COUNTING
IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
PHYSICS
Online AccessGet full text

Cover

More Information
Summary:트랜스포머 기반 깊이 추정 장치 및 방법이 개시된다. 트랜스포머 기반 깊이 추정 장치는 스윈-트랜스포머(Swin Transformer) 인코더와 픽셀-단위 스킵 어텐션(Pixel-Wise Skip-Attention) 기반 디코더 모듈을 통해 인코더 특징맵과 이전 단계의 디코더 특징맵을 융합하여 스윈-트랜스포머 인코더에서 추출된 전역적 정보를 보충하고, 인코더 특징맵을 입력으로 픽셀 레벨 주의 맵을 생성하여 전역 정보만 포함된 디코더 특징맵에 국소적 정보를 향상시킬 수 있으며, 디코더에서 나온 최고해상도의 깊이 영상을 라벨로 활용하여 중간 레벨의 깊이 추정 결과와 비교하는 자가 증류 손실을 이용하여 학습될 수 있다.
Bibliography:Application Number: KR20220066476