PROVIDING COMPOSITE GRAPHICAL ASSISTANT INTERFACES FOR CONTROLLING VARIOUS CONNECTED DEVICES

• Main Authors: NI YUZHAO, SCHAIRER DAVID ROY
• Format: Patent
• Language: English; Korean
• Published: 11.04.2023
• Subjects: ACOUSTICS; CALCULATING; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRIC DIGITAL DATA PROCESSING; ELECTRICITY; MUSICAL INSTRUMENTS; PHYSICS; SPEECH ANALYSIS OR SYNTHESIS; SPEECH OR AUDIO CODING OR DECODING; SPEECH OR VOICE PROCESSING; SPEECH RECOGNITION; TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHICCOMMUNICATION

다수의 상이한 연결 디바이스들과 인터랙션하기 위한 복합 그래픽 어시스턴트 인터페이스들을 조정하는 방법, 장치, 시스템 및 컴퓨터-판독가능 매체가 제공된다. 복합 그래픽 어시스턴트 인터페이스는 연결 디바이스가 특정 기능을 수행하도록 사용자가 자동화 어시스턴트에 대한 요청을 제공하는 것에 응답하여 생성될 수 있다. 자동화 어시스턴트가 요청을 수신하는 것에 응답하여, 자동화 어시스턴트는 다른 연결 디바이스들 및 그 다른 연결 디바이스들을 의해 수행될 수 있는 다른 기능들을 식별할 수 있다. 다른 기능들은 사용자가 상이한 연결 디바이스와 인터랙션할 수 있는 복합 그래픽 어시스턴트 인터페이스를 제공하기 위해 다양한 그래픽 제어 엘리먼트들에 매핑될 수 있다. 각 그래픽 제어 엘리먼트는 각 연결 디바이스가 복합 그래픽 어시스턴트 인터페이스의 프리젠테이션과 동시에 작동하는 방식을 반영하도록 배열될 수 있다. Methods, apparatus, systems, and computer-readable media are provided for tailoring composite graphical assistant interfaces for interacting with multiple different connected devices. The composite graphical assistant interfaces can be generated in response to a user providing a request for an automated assistant to cause a connected device to perform a particular function. In response to the automated assistant receiving the request, the automated assistant can identify other connected devices, and other functions capable of being performed by the other connected devices. The other functions can then be mapped to various graphical control elements in order to provide a composite graphical assistant interface from which the user can interact with different connected devices. Each graphical control element can be arranged to reflect how each connected device is operating simultaneous to the presentation of the composite graphical assistant interface.