用户界面菜单的情景感知
2020-01-12

用户界面菜单的情景感知

公开了可穿戴系统用来自动选择或筛选可用用户界面交互或虚拟对象的系统和方法的示例。可穿戴系统可以基于与用户、用户的环境,用户的环境中的物理对象或虚拟对象、或用户的生理状态或心理状态相关联的情景信息选择虚拟对象组以进行用户交互。

用户的生理状态或心理状态

可穿戴系统还可以包括用于肌电图(EMG)、脑电图(EEG)、功能性近红外光谱(fNIR)等的传感器。可穿戴系统可以使用从这些传感器获得的数据来确定用户的心理状态和生理状态。这些数据可以单独使用或与从诸如面向内部的成像系统、面向外部的成像系统和用于测量皮电活动的传感器之类的其它传感器获得的数据结合使用。ARD可以使用用户的心理状态和生理状态的信息来向用户呈现虚拟内容(诸如虚拟菜单)。

在第57方面,根据方面50至56中任一项所述的可穿戴系统,其中,情景信息包括用户过去与虚拟对象集进行的交互,其中,硬件处理器被编程为识别用户经常与之进行交互的一个或多个虚拟对象,并且在虚拟菜单的虚拟对象子集中包括一个或多个虚拟对象。

1.一种用于在用户的三维(3D)环境中生成虚拟内容的方法,所述方法包括:

在第8方面,根据方面7所述的方法,其中,物理对象的取向包括水平取向或垂直取向。

图11是用于与虚拟用户界面交互的方法1100的示例的过程流程图。方法1100可以由本文描述的可穿戴系统执行。

其它实施例

在一些实施方式中,可以以基准标记(在此也被称为标签)编码情景信息。基准标记可以与物理对象相关联。基准标记可以是光学标记,诸如快速响应(QR)代码、条形码、ArUco标记(其可以在遮挡下被可靠地检测)等。基准标记还可以包括电磁标记(例如,射频识别标签),电磁标记可以发射或接收能够被可穿戴设备检测的电磁信号。这种基准标记可以被物理地固定在物理对象上或物理对象附近。可穿戴设备可以使用面向外部的成像系统464(图4所示)或一个或多个传感器来检测基准标记,该传感器从基准标记中接收信号或将信号发送到基准标记(例如,将信号发送到标记,然后该标记可以返回回复信号)。