VIRTUAL OBJECT OPERATION DEVICE, PROGRAM FOR SAME, AND VIRTUAL OBJECT DISPLAY SYSTEM

• Main Author: IHARA Toshiyuki
• Format: Patent
• Language: English; French; Japanese
• Published: 04.07.2024
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC DIGITAL DATA PROCESSING; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; PHYSICS

A virtual object operation device (1) comprises: an MR video generation unit (15) that generates an MR video obtained by superimposing a virtual object and a video of a designated gaze direction in a spherical panorama video inputted from a spherical panorama camera for imaging the real world; an operation instruction input unit (13) for inputting an operation instruction for the virtual object on the MR video generated by the MR video generation unit (15); an operation unit (141) that subjects the virtual object to an operation corresponding to the operation instruction; a control information transmission unit (11) that transmits, as control information, position information of the virtual object operated by the operation unit (141) to a HMD; and a control information reception unit (12) that receives, as control information, position information pertaining to the position where the virtual object was operated by the HMD. Un dispositif de manipulation d'objet virtuel (1) comprend : une unité de génération de vidéo en RM (15) qui génère une vidéo en RM obtenue en superposant un objet virtuel sur une vidéo dans une direction du regard indiquée dans une vidéo panoramique sphérique entrée à partir d'une caméra panoramique sphérique conçue pour imager le monde réel ; une unité d'entrée d'instruction de manipulation (13) conçue pour entrer une instruction de manipulation relative à l'objet virtuel sur la vidéo en RM générée par l'unité de génération de vidéo en RM (15) ; une unité de manipulation (141) qui soumet l'objet virtuel à une manipulation correspondant à l'instruction de manipulation ; une unité de transmission d'informations de commande (11) qui transmet à un visiocasque, à titre d'informations de commande, des informations sur la position de l'objet virtuel manipulé par l'unité de manipulation (141) ; et une unité de réception d'informations de commande (12) qui reçoit à titre d'informations de commande les informations sur la position dans laquelle l'objet virtuel a été manipulé par le visiocasque. 仮想物体操作装置（１）は、現実世界を撮影する天球カメラから入力される天球映像の指定された視線方向の映像と仮想物体とを重ね合わせたＭＲ映像を生成するＭＲ映像生成部（１５）と、ＭＲ映像生成部（１５）で生成されたＭＲ映像上において、仮想物体に対する操作指示を入力する操作指示入力部（１３）と、操作指示に対応する操作を仮想物体に対して行う操作部（１４１）と、操作部（１４１）で操作された仮想物体の位置情報を制御情報としてＨＭＤに送信する制御情報送信部（１１）と、ＨＭＤで仮想物体を操作された位置情報を制御情報として受信する制御情報受信部（１２）と、を備える。