Generation method for a steerable realistic image contents and motion simulation system thereof

• Main Authors: YOO SEONG GEUN, YOO SEONG JONG, KIM JINWOOK, MUN KYUNG RYOUL
• Format: Patent
• Language: English; Korean
• Published: 30.06.2023
• Subjects: ADVERTISING; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND,DEAF OR MUTE; CALCULATING; COMPUTING; COUNTING; CRYPTOGRAPHY; DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FORADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORYOR FORECASTING PURPOSES; DIAGRAMS; DISPLAY; EDUCATION; EDUCATIONAL OR DEMONSTRATION APPLIANCES; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRICITY; GLOBES; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION; PLANETARIA; SEALS; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE,COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTINGPURPOSES, NOT OTHERWISE PROVIDED FOR

According to an embodiment, a motion simulation system for steerable realistic video content comprises a realistic video content generation device generating steerable realistic video content and a realistic video providing device providing the steerable realistic video content to a first user. The realistic video content generation device comprises: a movement path generation portion obtaining a movement path from a realistic video which is a video captured while a camera moves along a certain path; a 3D movement model generation portion generating a 3D movement model based on the movement path, wherein the 3D movement model includes a 3D movement object which moves along a 3D movement path generated according to 3D coordinates of the movement path; and a content synchronization portion generating synchronization information by synchronizing the 3D movement model and the realistic video. The steerable realistic video content includes the realistic video, the 3D movement model, and the synchronization information. The realistic video providing device comprises: an input portion formed to input a control command of the first user; an immersive display device outputting the steerable realistic video content to the first user; a motion providing device formed to transmit a motion change according to the steerable realistic video content to the first user; and a data processing portion formed to control the input portion, the immersive display device, and the motion providing device. 실시예에 따른 조종 가능한 실감 영상 콘텐츠의 모션 시뮬레이션 시스템은 조종 가능한 실감 영상 콘텐츠를 생성하는 실감 영상 콘텐츠의 생성 장치 및 상기 조종 가능한 실감 영상 콘텐츠를 제1 사용자에게 제공하는 실감 영상 제공 장치를 포함하되, 상기 실감 영상 콘텐츠의 생성 장치는 일정 경로를 카메라가 이동하면서 촬영한 영상인 실감 영상에서 이동 경로를 획득하는 이동 경로 생성부; 상기 이동 경로를 기초로 3차원 이동 모델을 생성하는 3차원 이동 모델 생성부로서, 상기 3차원 이동 모델은 상기 이동 경로의 3차원 좌표에 따라 생성된 3차원 이동 경로를 이동하는 3차원 이동 객체를 포함하는, 3차원 이동 모델 생성부; 및 상기 3차원 이동 모델과 상기 실감 영상을 동기화하여 동기화 정보를 생성하는 컨텐츠 동기화부를 포함하며, 상기 조종 가능한 실감 영상 콘텐츠는 상기 실감 영상, 상기 3차원 이동 모델 및 상기 동기화 정보를 포함하며, 상기 실감 영상 제공 장치는 상기 제1 사용자의 조종 명령이 입력되도록 구성되는 입력부; 상기 제1 사용자에게 조종 가능한 실감 영상 콘텐츠를 출력하는 몰입형 표시 장치; 상기 조종 가능한 실감 영상 컨텐츠에 따른 모션 변화를 상기 제1 사용자에게 전달하도록 구성되는 모션 제공 장치; 및 상기 입력부, 상기 몰입형 표시 장치 및 상기 모션 제공 장치를 제어하도록 구성되는 데이터 처리부를 포함한다.