本公开内容总体上涉及与远程设备的交互。例如,本公开内容的各方面包括过滤和/或建议用于与远程设备的用户交互的虚拟内容。
背景技术:
1、扩展现实技术可以用于向用户呈现虚拟内容,和/或可以将来自物理世界的真实环境与虚拟环境相结合,以向用户提供扩展现实体验。术语扩展现实可以包含虚拟现实、增强现实、混合现实等。扩展现实的这些形式中的每一种都允许用户体验身临其境的虚拟环境或内容或与之交互。例如,扩展现实体验可以允许用户与利用虚拟内容强化或增强的真实或物理环境交互。
2、可以实现扩展现实技术以在广泛的上下文(例如,娱乐、医疗保健、零售、教育、社交媒体等)中强化用户体验。
技术实现思路
1、公开了用于确定用于远程设备交互(例如,在扩展现实(xr)设备与一个或多个远程设备(比如,物联网设备)之间的交互)的用户交互数据的系统、装置、方法和计算机可读介质。根据至少一个示例,提供了一种用于呈现与至少一个输入选项相关联的信息的方法。该方法包括:接收标识与场景中的设备相关联的一个或多个输入选项的数据;包括使用至少一个存储器,确定与场景、设备以及与电子设备相关联的用户中的至少一项相关的信息;以及,基于一个或多个输入选项和信息,输出与已经确定了相关上下文信息的输入选项相对应的用户引导数据。
2、在另一示例中,提供了一种用于呈现与至少一个输入选项相关联的信息的装置,该装置包括至少一个存储器和耦合到至少一个存储器的至少一个处理器(例如,在电路中实现)。至少一个处理器被配置为并且可以:接收标识与场景中的设备相关联的一个或多个输入选项的数据;包括使用至少一个存储器,确定与场景、设备和与电子设备相关联的用户中的至少一项相关的信息;以及,基于一个或多个输入选项和信息,输出与已经确定了相关上下文信息的输入选项相对应的用户引导数据。
3、在另一示例中,提供了一种其上存储有指令的非暂时性计算机可读介质,所述指令在由一个或多个处理器执行时使得所述一个或多个处理器:接收标识与场景中的设备相关联的一个或多个输入选项的数据;包括使用至少一个存储器,确定与所述场景、所述设备以及与电子设备相关联的用户中的至少一项相关的信息;以及,基于所述一个或多个输入选项和所述信息,输出与已经确定了相关上下文信息的输入选项相对应的用户引导数据。
4、在另一示例中,提供了一种用于呈现与至少一个输入选项相关联的信息的装置。该方法包括用于以下操作的单元:接收标识与场景中的设备相关联的一个或多个输入选项的数据;包括使用至少一个存储器,确定与场景、设备以及与电子设备相关联的用户中的至少一项相关的信息;以及,基于一个或多个输入选项和信息,输出与已经确定了相关上下文信息的输入选项相对应的用户引导数据。
5、在一些方面中,上述方法、非暂时性计算机可读介质和装置可以包括:基于信息来预测与设备的用户交互;以及,基于一个或多个输入选项和经预测的用户交互来呈现与输入选项相对应的用户引导数据。
6、在一些示例中,用户引导数据可以包括以下各项中的至少一项:与输入选项相关联的用户输入元素、与输入选项相关联的物理对象上的虚拟覆盖物、和/或指示如何提供与输入选项相关联的输入的提示。
7、在一些示例中,设备可以包括具有网络通信能力的连接设备,并且上述方法、非暂时性计算机可读介质和装置可以包括:基于信息以及一个或多个输入选项来确定表示经预测的用户交互的手势;以及,呈现所述用户引导数据。在一些示例中,经预测的用户交互可以包括对设备的经预测的用户输入。在一些情况下,用户引导数据可以包括对手势的指示,该手势在被检测到时调用在设备处的实际用户输入。
8、在一些方面中,呈现用户引导数据可以包括:在与电子设备相关联的显示器处渲染被配置为看起来位于设备的表面上的虚拟覆盖物。在一些示例中,虚拟覆盖物可以包括与输入选项相关联的用户界面元素。在一些情况下,用户界面元素可以包括以下各项中的至少一项:与输入选项相关联的虚拟用户输入对象和被配置为接收与输入选项相对应的输入的设备上的物理控制对象的视觉指示。
9、在一些示例中,信息包括用户的眼睛注视和用户的姿态中的至少一项,并且上述方法、非暂时性计算机可读介质和装置可以包括:基于用户的眼睛注视和用户的姿势中的至少一项来预测与设备的用户交互;在呈现用户引导数据之后,检测与输入选项相关联的实际用户输入,所述实际用户输入表示经预测的用户交互;以及,向设备发送对应于与输入选项相关联的实际用户输入的命令。
10、在一些示例中,输出与输入选项相对应的用户引导数据可以包括:显示用户引导数据。在一些示例中,输出与输入选项相对应的用户引导数据可以包括:输出表示所述用户引导数据的音频数据。
11、在一些示例中,输出与输入选项相对应的用户引导数据可以包括显示用户引导数据;以及,输出与所显示的用户引导数据相关联的音频数据。
12、在一些方面中,上述方法、非暂时性计算机可读介质和装置可以包括:从设备接收标识与设备相关联的一个或多个输入选项的数据。在一些方面中,上述方法、非暂时性计算机可读介质和装置可以包括:从服务器接收标识与设备相关联的一个或多个输入选项的数据。
13、在一些情况下,设备不具有用于接收一个或多个用户输入的外部用户界面。
14、在一些方面中,上述方法、非暂时性计算机可读介质和装置可以包括:基于信息,避免呈现与设备相关联的附加用户引导数据。
15、在一些方面中,上述方法、非暂时性计算机可读介质和装置可以包括:在呈现用户引导数据之后,获得与输入选项相关联的用户输入;以及,向设备发送与用户输入相对应的指令。在一些情况下,指令可以被配置为控制设备的一个或多个操作。
16、在一些方面中,所述装置包括相机、移动设备(例如,移动电话或所谓的“智能电话”或其它移动设备)、可穿戴设备、扩展现实设备(例如,虚拟现实(vr)设备、增强现实(ar)设备、或混合现实(mr)设备)、个人计算机、膝上型计算机、服务器计算机、或其它设备。在一些方面中,所述装置包括用于捕获一个或多个图像的一个或多个相机。在一些方面中,所述装置还包括用于显示一个或多个图像、通知和/或其它可显示数据的显示器。在一些方面中,上文描述的装置可以包括一个或多个传感器。
17、该
技术实现要素:
既不旨在标识所要求保护的主题的关键或必要特征,也不旨在单独用于确定所要求保护的主题的范围。应当通过参考本专利的整个说明书的适当部分、任何或全部附图以及每个权利要求来理解该主题。
18、在参照以下说明书、权利要求以及附图之后,前述内容以及其它特征和实施例将变得更加显而易见。
1.一种用于输出与至少一个输入选项相关联的信息的装置,包括:
2.根据权利要求1所述的装置,其中,所述用户引导数据包括以下各项中的至少一项:与所述输入选项相关联的用户输入元素、与所述输入选项相关联的物理对象上的虚拟覆盖物、以及指示如何提供与所述输入选项相关联的输入的提示。
3.根据权利要求1所述的装置,其中,所述至少一个处理器被配置为:
4.根据权利要求1所述的装置,其中,所述设备包括具有网络通信能力的连接设备,并且所述至少一个处理器被配置为:
5.根据权利要求1所述的装置,其中,为了呈现所述用户引导数据,所述至少一个处理器被配置为:
6.根据权利要求1所述的装置,其中,所述信息包括所述用户的眼睛注视和所述用户的姿态中的至少一项,所述至少一个处理器被配置为:
7.根据权利要求1所述的装置,其中,为了输出与所述输入选项相对应的所述用户引导数据,所述至少一个处理器被配置为:
8.根据权利要求1所述的装置,其中,为了输出与所述输入选项相对应的所述用户引导数据,所述至少一个处理器被配置为:
9.根据权利要求1所述的装置,其中,为了输出与所述输入选项相对应的所述用户引导数据,所述至少一个处理器被配置为:
10.根据权利要求1所述的装置,其中,所述至少一个处理器被配置为:
11.根据权利要求1所述的装置,其中,所述至少一个处理器被配置为:
12.根据权利要求1所述的装置,其中,所述设备不具有用于接收一个或多个用户输入的外部用户接口。
13.根据权利要求1所述的装置,其中,所述至少一个处理器被配置为:
14.根据权利要求1所述的装置,其中,所述装置是扩展现实设备。
15.根据权利要求1所述的装置,还包括显示器。
16.根据权利要求15所述的装置,其中,所述显示器被配置为至少显示所述用户引导数据。
17.根据权利要求1所述的装置,其中,所述至少一个处理器被配置为:
18.一种用于输出与至少一个输入选项相关联的信息的方法,包括:
19.根据权利要求18所述的方法,其中,所述用户引导数据包括以下各项中的至少一项:与所述输入选项相关联的用户输入元素、与所述输入选项相关联的物理对象上的虚拟覆盖物、以及指示如何提供与所述输入选项相关联的输入的提示。
20.根据权利要求18所述的方法,还包括:
21.根据权利要求20所述的方法,其中,所述设备包括具有网络通信能力的连接设备,并且所述方法还包括:
22.根据权利要求18所述的方法,其中,呈现所述用户引导数据包括:
23.根据权利要求18所述的方法,其中,所述信息包括所述用户的眼睛注视和所述用户的姿态中的至少一项,所述方法还包括:
24.根据权利要求18所述的方法,其中,输出对应于所述输入选项的所述用户引导数据包括:
25.根据权利要求18所述的方法,其中,输出对应于所述输入选项的所述用户引导数据包括:
26.根据权利要求18所述的方法,其中,输出对应于所述输入选项的所述用户引导数据包括:
27.根据权利要求18所述的方法,还包括:
28.根据权利要求18所述的方法,还包括:
29.根据权利要求18所述的方法,其中,所述设备不具有用于接收一个或多个用户输入的外部用户接口。
30.根据权利要求18所述的方法,还包括:
31.根据权利要求18所述的方法,还包括:
