ELECTRONIC DEVICE AND METHOD FOR PROCESSING USER INPUT

• Main Authors: LEE, Seungjoon, LEE, Joayoung, CHOI, Inyoung, JUNG, Shinjae, MYUNG, Insik
• Format: Patent
• Language: English; French; Korean
• Published: 16.06.2022
• Subjects: ACOUSTICS; CALCULATING; COMPUTING; COUNTING; ELECTRIC DIGITAL DATA PROCESSING; HANDLING RECORD CARRIERS; IMAGE DATA PROCESSING OR GENERATION, IN GENERAL; MUSICAL INSTRUMENTS; PHYSICS; PRESENTATION OF DATA; RECOGNITION OF DATA; RECORD CARRIERS; SPEECH ANALYSIS OR SYNTHESIS; SPEECH OR AUDIO CODING OR DECODING; SPEECH OR VOICE PROCESSING; SPEECH RECOGNITION

An electronic device according to an exemplary example disclosed in the present document can comprise: a partially transparent display; a camera; memory; and a processor operatively connected to the partially transparent display, camera and memory. The memory can store instructions which, when executed, enable the processor to: receive a first gesture input using a part of a user's body, by means of the camera; receive a spoken input of the user in response to the first gesture input; display a text, generated on the basis of the attributes of the spoken input, at coordinates corresponding to the position of the part of the user's body in an augmented reality (AR) provided by means of the partially transparent display; end the spoken input reception if an end gesture input using the part of the user's body is received by means of the camera; and fix the displayed text to a designated position in the augmented reality in accordance with the received end gesture input. Other various embodiments identified through the specification are possible. Le présent document divulgue, dans un exemple donné à titre d'exemple, un dispositif électronique qui peut comprendre : un dispositif d'affichage partiellement transparent ; une caméra ; une mémoire ; et un processeur raccordé de manière opérationnelle au dispositif d'affichage partiellement transparent, à la caméra et à la mémoire. La mémoire peut stocker des instructions qui, lorsqu'elles sont exécutées, permettent au processeur : de recevoir une première entrée de geste à l'aide d'une partie du corps d'un utilisateur, au moyen de la caméra ; de recevoir une entrée vocale de l'utilisateur à la suite de la première entrée de geste ; d'afficher un texte, généré sur la base des attributs de l'entrée vocale, à des coordonnées correspondant à la position de la partie du corps de l'utilisateur dans une réalité augmentée (AR) fournie au moyen du dispositif d'affichage partiellement transparent ; de mettre fin à la réception d'entrée vocale si une entrée de geste d'extrémité à l'aide de la partie du corps de l'utilisateur est reçue au moyen de la caméra ; et de fixer le texte affiché à une position désignée dans la réalité augmentée selon l'entrée de geste d'extrémité reçue. Divers autres modes de réalisation identifiés par le biais de la description sont possibles. 본 문서에 개시되는 예시적인 실시예에 따른 전자 장치는, 적어도 일부 투명한 디스플레이, 카메라, 메모리 및 상기 적어도 일부 투명한 디스플레이, 상기 카메라 및 상기 메모리와 작동적으로 연결되는 프로세서를 포함할 수 있다. 상기 메모리는, 실행 시에 상기 프로세서가, 상기 카메라를 이용하여 사용자의 신체의 일부를 이용한 제1 제스처(gesture) 입력을 수신하고, 상기 제1 제스처 입력에 응답하여 상기 사용자의 발화 입력을 수신하고, 상기 발화 입력의 속성에 기반하여 생성된 텍스트를 상기 적어도 일부 투명한 디스플레이를 통하여 제공되는 증강 현실(augmented reality, AR) 상에서 상기 사용자의 신체의 일부의 위치에 대응되는 좌표에 표시하고, 상기 카메라를 이용하여 상기 사용자의 신체의 일부를 이용한 종료 제스처 입력을 수신하면, 상기 발화 입력 수신을 종료하고, 상기 수신된 종료 제스처 입력에 대응하여, 상기 표시된 텍스트를 상기 증강 현실(augmented reality, AR) 상의 지정된 위치에 고정하도록 하는 인스트럭션들을 저장할 수 있다. 이 외에도 명세서를 통해 파악되는 다양한 실시예가 가능하다.