一种行为指引方法、电子设备及介质与流程

专利检索2025-11-03  3


本技术涉及增强现实(augmented reality,ar)领域,特别涉及一种行为指引方法、电子设备及介质。


背景技术:

1、目前,许多行为指引方法均能够通过关于目标位置的描述性信息指引用户到达目标位置,如常用的导航软件可以采用目标位置的图标、目标位置与当前位置之间的路径信息、距离信息等描述信息,指引用户到达目标位置。但是这些方法基本都建立在视觉基础上,都需要用到眼睛,难以适用于不基于视觉的指引场景。


技术实现思路

1、本技术实施例中提供一种行为指引方法、电子设备及介质。

2、第一方面,本技术实施例提供了一种行为指引方法,应用于电子设备,电子设备至少包括第一电子设备,其特征在于,方法包括:第一电子设备接收到用户的指引指令,指引指令用于指令第一电子设备播放对应目标物理空间中的目标物理位置的指引语音;第一电子设备响应于指引指令,确认在目标场景模型中对应目标物理位置的目标模型位置;第一电子设备基于用户的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位,生成并播放对应的指引语音。

3、可以理解,本技术实施例中,物理位置和物理空间可以指实际位置和实际空间,模型位置可以为实际位置在模型中所对应的位置。本技术实施例中提及的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位可以反映用户当前物理位置与目标物理位置之间的距离和方位。

4、目标场景模型可以为本技术实施例中提及的目标空间对应的场景模型。第一电子设备可以为ar眼镜。

5、可以理解,本技术实施例中提及的各指引语音(例如第一指引语音、第二指引语音、第三指引语音、第四指引语音等)可以包括行为指引语音,例如向左转,向右转等指引语音,以及渲染的虚拟声像,例如水龙头对应的位置播放流水声、煤气灶的火焰声等虚拟声像。

6、本技术实施例提供的行为指引方法,通过对目标模型位置(可以为本技术实施例中提及的目标物品对应的位置和/或指引路线中确定的各其他位置点,例如拐点位置等)进行声像渲染以对用户进行行为指引,使得即使不基于视觉也可以知晓目标位置(或物品)的方位,并且在对用户进行行为指引的过程中,实时根据用户与目标物品所在位置之间距离和方位的变化调整虚拟声像,实现了对用户的精确指引。

7、在一种可能的实现中,基于用户的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位,生成并播放对应的指引语音包括:基于当前模型位置与目标模型位置之间距离和方位的变化,生成并播放不同的指引语音。

8、可以理解,不同的指引语音中的虚拟声像可以包括不同类型的指引语音、不同播放速度的指引语音,不同响度的指引语音、不同声源的指引语音等,不同指引语音中的行为指引语音可以根据实际路线生成并播放。

9、可以理解,本技术实施例中,目标模型位置可以为指引指令中目标物品在场景模型中所对应的位置,当用户与目标模型位置的距离缩小时,调高虚拟声像的播放速度;当用户与目标模型位置的距离扩大时,调低虚拟声像的播放速度,以便用户知晓自己与各位置点的距离的远近。

10、在一种可能的实现中,响应于指引指令,确认在目标场景模型中对应目标物理位置的目标模型位置包括:确定指引指令中的目标物品;基于目标场景模型确定目标物品对应的目标物品模型位置;基于目标物品模型位置和用户的当前物理位置在目标场景模型中对应的当前模型位置确定第一指引路线;基于第一指引路线确定目标场景模型中的至少一个目标模型位置,至少一个目标模型位置包括目标物品模型位置。

11、可以理解,本技术实施例中,目标模型位置的数量可以有多个,可以包括目标物品对应的目标物品模型位置,还可以包括在第一指引路线中的若干目标模型位置,例如拐点位置等,在第一指引路线中的若干目标模型位置可以播放不同的提示音,以便对用户进行不同的提示,例如,提示用户行进方向,提示用户路径情况等。

12、在一种可能的实现中,接收到用户的指引指令前,包括:获取目标物理空间的环境信息;基于环境信息构建目标场景模型。

13、在一种可能的实现中,接收到用户的指引指令后,包括:基于第一电子设备在目标物理空间扫描到的环境信息构建目标场景模型。

14、在一种可能的实现中,环境信息包括目标物理空间的特征信息、目标物理空间中各物品相对于目标物理空间的位置信息、目标物理空间中各物品的特征信息。

15、在本技术实施例中,目标物理空间的特征信息包括目标物理空间的几何形状信息、空间布局信息等;物品的特征信息包括物品的颜色、形状、大小、纹理等。

16、在一种可能的实现中,目标物理空间包括多个空间;对应于当前模型位置与目标模型位置在多个空间的同一空间的情况,生成并播放第一指引语音;对应于当前模型位置与目标模型位置不在多个空间的同一空间的情况,生成并播放第二指引语音。

17、在本技术实施例中,第一指引语音为未增加音效的指引语音;第二指引语音为增加了预设音效,如具有隔音效果的指引语音。

18、由此,通过不同的指引语音使用户知晓目标物理位置与自己是否在同一空间,提高了用户体验。

19、在一种可能的实现中,生成并播放第二指引语音包括:对第一指引语音增加预设音效,生成并播放第二指引语音。

20、在本技术实施例中,预设音效可以为隔音效果,例如对虚拟声像增加声屏障,以使用户感知到目标物品与用户不处在同一空间。

21、在一种可能的实现中,基于用户的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位,生成并播放对应的指引语音包括:对应于当前模型位置在目标模型位置的设定范围内的情况,生成并播放第三指引语音;对应于当前模型位置不在目标模型位置的设定范围内的情况,生成并播放第四指引语音。

22、可以理解第三指引语音中的虚拟声像可以为短音,如“滴滴滴”,相当于本技术实施例的第二提示音,第四指引语音中的虚拟声像可以为长音,如“滴-滴-”,相当于本技术实施例的第一提示音,设定范围可以根据实际需求进行设定,本技术对此不做具体限制。

23、在一些实施例中,还可以根据当前模型位置与目标模型位置之间的距离,调节第三指引语音、第四指引语音的播放速度。例如当用户与目标模型位置的距离缩小时,调高第三指引语音或第四指引语音的播放速度;当用户与目标模型位置的距离扩大时,调低第三指引语音或第四指引语音的播放速度,使得即使用户是盲人也可以知晓自己与目标位置(或物品)的距离的远近。

24、在一种可能的实现中,第一电子设备在根据第一路线的移动过程中检测到障碍物时,播报障碍物提示语音,并基于用户的当前模型位置、障碍物的模型位置以及目标物品模型位置规划第二路线。

25、由此,可以避免用户碰撞到障碍物摔倒,提高了指引过程的准确性,提高了用户体验。

26、在一种可能的实现中,电子设备包括第二电子设备;第一电子设备将目标物理位置发送至第二电子设备;第二电子设备获取第二电子设备的当前物理位置;第二电子设备根据第二电子设备的当前物理位置与目标物理位置的距离确定震动特征信息;第二电子设备根据目标物理位置相对于第二电子设备方位、震动特征信息,控制第二电子设备震动。

27、可以理解,震动特征信息包括震动的强度、频率、幅度等,第二电子设备可以为手环等具有震动单元的电子设备。第二电子设备通过刻画第二电子设备与目标物理位置的相对距离,提高了行为指引过程的准确性,提高了用户体验。

28、在一种可能的实现中,第二电子设备包括至少一个震动区域;根据目标物理位置相对于第二电子设备的方位、震动特征信息,控制第二电子设备震动包括:根据目标物理位置相对于第二电子设备的方位,确定至少一个震动区域中的至少一个区域;根据震动特征信息,控制至少一个区域震动。

29、例如,用户佩戴手环在当前物理位置时,可以根据目标物理位置和当前物理位置之间的距离确定震动特征信息,如确定震动的强度以及频率,并且根据用户佩戴着的手环的当前物理位置与目标物理位置的相对方位确定手环中的至少一个震动区域,根据确定的震动的强度以及频率震动手环中的至少一个震动区域。

30、例如,用户垂着手(手上佩戴手环)时,根据用户佩戴着的手环的当前物理位置与目标物理位置的距离确定震动特征信息,手环的方位由内部的陀螺仪等检测为第一方位,根据当前手环与目标物理位置的相对方位确定第二电子设备中目标物理位置对应的震动区域为第一震动区域,根据确定的震动特征信息震动第一震动区域。

31、当用户举起手时,手环的方位转变为第二方位,此时根据手环与目标物理位置的相对方位产生变化,则震动区域也会产生变化,例如变化为第二震动区域,并且震动特征信息实时根据用户与目标物理位置的距离进行调整。

32、第二方面,本技术实施例提供了一种行为指引方法,应用于电子设备,电子设备至少包括第一电子设备和第三电子设备,其特征在于,方法包括:第三电子设备接收到用户的指引指令,指引指令用于指令第三电子设备播放对应目标物理空间中的目标物理位置的指引语音;第三电子设备发送指引指令至第一电子设备;第一电子设备基于指引指令,确认在目标场景模型中对应目标物理位置的目标模型位置;第一电子设备发送用户的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位至第三电子设备;第三电子设备基于用户的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位,生成并播放对应的指引语音。

33、可以理解,本技术实施例中,物理位置和物理空间可以指实际位置和实际空间,模型位置可以为实际位置在模型中所对应的位置。本技术实施例中提及的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位可以反映用户当前物理位置与目标物理位置之间的距离和方位。目标场景模型可以为本技术实施例中提及的目标空间对应的场景模型。第一电子设备可以为手机、第三电子设备可以为耳机。

34、可以理解,本技术实施例中提及的各指引语音(例如第一指引语音、第二指引语音、第三指引语音、第四指引语音等)可以包括行为指引语音,例如向左转,向右转等指引语音,以及渲染的虚拟声像,例如水龙头对应的位置播放流水声、煤气灶的火焰声等虚拟声像。

35、本技术实施例提供的行为指引方法,通过对目标模型位置(可以为本技术实施例中提及的目标物品对应的位置和/或指引路线中确定的各其他位置点,例如拐点位置等)进行声像渲染以对用户进行行为指引,使得即使不基于视觉也可以知晓目标位置(或物品)的方位,并且在对用户进行行为指引的过程中,实时根据用户与目标物品所在位置之间距离和方位的变化调整虚拟声像,实现了对用户的精确指引。

36、第三方面,本技术实施例提供了一种可读介质,可读介质上存储有指令,指令在电子设备上执行时使电子设备实现上述第一方面、第二方面及上述第一方面、第二方面的各种可能实现提供的任一种行为指引方法。

37、第四方面,本技术实施例提供了一种电子设备,包括:存储器,用于存储由电子设备的一个或多个处理器执行的指令,以及处理器,是电子设备的一个或多个处理器之一,用于实现上述第一方面、第二方面及上述第一方面、第二方面的各种可能实现提供的任一种行为指引方法。


技术特征:

1.一种行为指引方法,应用于电子设备,所述电子设备至少包括第一电子设备,其特征在于,所述方法包括:

2.根据权利要求1所述的行为指引方法,其特征在于,所述基于用户的当前物理位置在所述目标场景模型中对应的当前模型位置、与所述目标模型位置之间的距离和方位,生成并播放对应的指引语音包括:

3.根据权利要求1所述的行为指引方法,其特征在于,所述响应于所述指引指令,确认在目标场景模型中对应所述目标物理位置的目标模型位置包括:

4.根据权利要求1所述的行为指引方法,其特征在于,所述接收到用户的指引指令前,包括:

5.根据权利要求1所述的行为指引方法,其特征在于,所述接收到用户的指引指令后,包括:

6.根据权利要求4-5任一项所述的行为指引方法,其特征在于,所述环境信息包括所述目标物理空间的特征信息、所述目标物理空间中各物品相对于所述目标物理空间的位置信息、所述目标物理空间中各物品的特征信息。

7.根据权利要求1所述的行为指引方法,其特征在于,所述目标物理空间包括多个空间;

8.根据权利要求7所述的行为指引方法,其特征在于,所述生成并播放第二指引语音包括:

9.根据权利要求1所述的行为指引方法,其特征在于,所述基于用户的当前物理位置在所述目标场景模型中对应的当前模型位置、与所述目标模型位置之间的距离和方位,生成并播放对应的指引语音包括:

10.根据权利要求3所述的行为指引方法,其特征在于,还包括:

11.根据权利要求1所述的行为指引方法,其特征在于,所述电子设备包括第二电子设备;

12.根据权利要求11所述的行为指引方法,其特征在于,所述第二电子设备包括至少一个震动区域;

13.一种行为指引方法,应用于电子设备,所述电子设备至少包括第一电子设备和第三电子设备,其特征在于,所述方法包括:

14.一种可读介质,其特征在于,所述可读介质上存储有指令,所述指令在电子设备上执行时使所述电子设备执行如权利要求1至13中任一项所述的行为指引方法。

15.一种电子设备,其特征在于,包括:存储器,用于存储由所述电子设备的一个或多个处理器执行的指令,以及所述处理器,是所述电子设备的所述一个或多个处理器之一,用于执行如权利要求1至13中任一项所述的行为指引方法。


技术总结
本申请涉及增强现实领域,公开了一种行为指引方法、电子设备及介质。本申请的行为指引方法包括:第一电子设备接收到用户的指引指令,指引指令用于指令第一电子设备播放对应目标物理空间中的目标物理位置的指引语音;第一电子设备响应于指引指令,确认在目标场景模型中对应目标物理位置的目标模型位置;第一电子设备基于用户的当前物理位置在目标场景模型中对应的当前模型位置、与目标模型位置之间的距离和方位,生成并播放对应的指引语音。上述行为指引方法可以在对用户进行行为指引的过程中,实时根据用户与目标位置的距离和方位的变化调整指引语音,实现对用户的精确指引。

技术研发人员:陈家熠,陈沄崟,朱梦尧,石超宇,靖霄
受保护的技术使用者:华为技术有限公司
技术研发日:
技术公布日:2024/5/29
转载请注明原文地址:https://win.8miu.com/read-1158270.html

最新回复(0)