USER INTERFACE RESPONSE BASED ON GAZE-HOLDING EVENT ASSESSMENT

• Main Authors: AGAOLGU MEHMET N, LACEY PAUL A, CHAWDA VINAY, BERARDINO ALEXANDER G, GUM LEAH M, SHUTZBERG JULIAN K, CORNELISSEN TIM H
• Format: Patent
• Language: English; Korean
• Published: 29.03.2024
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC DIGITAL DATA PROCESSING; OPTICAL ELEMENTS, SYSTEMS, OR APPARATUS; OPTICS; PHYSICS

다양한 구현예들은 3D 환경들(예컨대, 확장 현실(XR) 환경들)의 뷰들을 제공한다. 손 제스처들과 같은 눈 기반이 아닌 사용자 활동은, 사용자가 3D 환경의 뷰 내에서 디스플레이되는 특정 사용자 인터페이스 컴포넌트를 응시하는 것과 같은 일부 유형들의 눈 기반 활동과 연관된다. 예를 들어, 사용자의 핀칭 손 제스처는, 핀칭 손 제스처가 이루어지는 것과 거의 동시에, 사용자가 버튼과 같은 특정 사용자 인터페이스 컴포넌트를 응시하는 것과 연관될 수 있다. 이어서, 이러한 연관된 거동들(예컨대, 핀치 및 버튼 응시)은 사용자 입력, 예컨대, 그 사용자 인터페이스 컴포넌트를 선택하거나 달리 그에 대해 작용하는 사용자 입력으로서 해석될 수 있다. 일부 구현예들에서, 눈 기반이 아닌 사용자 활동은, 사용자가 그가 보고 있는 것을 지각하는 것 및/또는 사용자가 의도적으로 무엇인가를 보는 것에 대응할 가능성이 있는 유형들의 눈 기반 사용자 활동과만 연관된다. Various implementations provide views of 3D environments (e.g., extended reality (XR) environments). Non-eye-based user activity, such as hand gestures, is associated with some types of eye-based activity, such as the user gazing at a particular user interface component displayed within a view of a 3D environment. For example, a user's pinching hand gesture may be associated with the user gazing at a particular user interface component, such as a button, at around the same time as the pinching hand gesture is made. These associated behaviors (e.g., the pinch and gaze at the button) may then be interpreted as user input, e.g., user input selecting or otherwise acting upon that user interface component. In some implementations, non-eye-based user activity is only associated with types of eye-based user activity that are likely to correspond to a user perceiving what they are seeing and/or intentionally looking at something.