모델 데이터 처리 방법, 장치, 전자 기기 및 컴퓨터 판독 가능 매체

본 개시는 모델 데이터 처리 방법 및 장치를 개시하며, 인공지능 기술 분야에 관한것이다. 해당 방법의 일 구체적인 실시예는, 처리하고자 하는 데이터 세트 중의 적어도 두 가지 다른 모달리티의 데이터를 획득하는 단계; 적어도 두 가지 다른 모달리티의 데이터에 대해 특징 추출을 수행하여 스티칭 및/또는 오버레이하여 특징 시퀀스를 취득하는 단계; 특징 시퀀스에 대해 모델 매핑 처리를 수행하여 자기회귀 모델에 적합한 멀티모달 입력 데이터를 취득하는 단계; 및 멀티모달 입력 데이터를 자기회귀 모델에 입력하여 자기회귀 모델이 출력한 단일모달...

Full description

Saved in:
Bibliographic Details
Main Authors WU YOUZHENG, ZHAO NAN
Format Patent
LanguageKorean
Published 11.05.2023
Subjects
CALCULATING
COMPUTING
COUNTING
ELECTRIC DIGITAL DATA PROCESSING
PHYSICS
Online AccessGet full text

Cover

More Information
Summary:본 개시는 모델 데이터 처리 방법 및 장치를 개시하며, 인공지능 기술 분야에 관한것이다. 해당 방법의 일 구체적인 실시예는, 처리하고자 하는 데이터 세트 중의 적어도 두 가지 다른 모달리티의 데이터를 획득하는 단계; 적어도 두 가지 다른 모달리티의 데이터에 대해 특징 추출을 수행하여 스티칭 및/또는 오버레이하여 특징 시퀀스를 취득하는 단계; 특징 시퀀스에 대해 모델 매핑 처리를 수행하여 자기회귀 모델에 적합한 멀티모달 입력 데이터를 취득하는 단계; 및 멀티모달 입력 데이터를 자기회귀 모델에 입력하여 자기회귀 모델이 출력한 단일모달 결과를 취득하는 단계를 포함한다. 해당 실시예는 모델 입력 데이터의 정보량의 다양성을 향상시킨다. A method and apparatus for processing model data, which relate to the technical field of artificial intelligence. The method comprises: acquiring data of at least two different modalities in a to-be-processed dataset; performing feature extraction on the data of at least two different modalities, then splicing and/or superimposing same, and obtaining a feature sequence; performing model mapping on the feature sequence, to obtain multi-modal input data adapted to an autoregressive model; and inputting the multi-modal input data into the autoregressive model, and obtaining a single-modal result outputted by the autoregressive model.
Bibliography:Application Number: KR20237012388