패킷화된 데이터의 멀티모달 송신

• Main Authors: LEWIS JUSTIN, STETS ROBERT, RAPP RICHARD, BHAYA GAURAV
• Format: Patent
• Language: Korean
• Published: 02.08.2018
• Subjects: ACOUSTICS; CALCULATING; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRIC DIGITAL DATA PROCESSING; ELECTRICITY; MUSICAL INSTRUMENTS; PHYSICS; SPEECH ANALYSIS OR SYNTHESIS; SPEECH OR AUDIO CODING OR DECODING; SPEECH OR VOICE PROCESSING; SPEECH RECOGNITION; TRANSMISSION; TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHICCOMMUNICATION

음성 활성화된 데이터 패킷 기반 컴퓨터 네트워크 환경에서의 패킷화된 데이터의 멀티-모달 송신의 시스템이 제공된다. 자연 언어 프로세서 컴포넌트는 요청 및 트리거 키워드를 식별하기 위하여 입력 오디오 신호를 파싱할 수 있다. 입력 오디오 신호에 기초하여, 다이렉트 액션 애플리케이션 프로그래밍 인터페이스는 제 1 액션 데이터 구조를 생성할 수 있고, 컨텐츠 선택기 컴포넌트는 컨텐츠 항목을 선택할 수 있다. 인터페이스 관리 컴포넌트는 제 1 및 제 2 후보 인터페이스들, 및 개개의 자원 사용 값들을 식별할 수 있다. 인터페이스 관리 컴포넌트는 자원 사용 값들에 기초하여, 컨텐츠 항목을 제시하기 위하여 제 1 후보 인터페이스를 선택할 수 있다. 인터페이스 관리 컴포넌트는 오디오 출력으로서 렌더링하기 위하여 제 1 액션 데이터 구조를 클라이언트 컴퓨팅 디바이스에 제공할 수 있고, 선택된 인터페이스로부터 렌더링하기 위한 컨텐츠 항목을 전달하기 위하여, 제 1 모달리티에 대하여 변환된 컨텐츠 항목을 송신할 수 있다. A system of multi-modal transmission of packetized data in a voice activated data packet based computer network environment is provided. A natural language processor component can parse an input audio signal to identify a request and a trigger keyword. Based on the input audio signal, a direct action application programming interface can generate a first action data structure, and a content selector component can select a content item. An interface management component can identify first and second candidate interfaces, and respective resource utilization values. The interface management component can select, based on the resource utilization values, the first candidate interface to present the content item. The interface management component can provide the first action data structure to the client computing device for rendering as audio output, and can transmit the content item converted for a first modality to deliver the content item for rendering from the selected interface.