非显而易见杯

专利无效挑战赛

目标专利:3481用于对混合现实内容进行基于注视的控制的方法和系统

专利公开号:CN112262361B

专利权人:交互数字

无效请求书提交日期:2026年


上一项目 下一项目

非显而易见性评估仅供参考,不构成法律建议。



权利要求列表点击可跳转

序号 权利要求内容

1

一种用于对混合现实(MR)内容进行基于注视的控制的方法,包括;形成增强现实(AR)头戴式显示器(HMD)的用户的周围环境的三维(3D)图;选择MR对象以在所述3D图中放置或重新定位;在所述3D图中显示视觉引导线路径;在沿着所述视觉引导线路径的一个或多个定位处检测所述用户的注视;以及在与所述用户的所述注视的所述一个或多个检测的定位相对应的沿着所述视觉引导线路径的渲染定位处,渲染所述MR对象。

2

根据权利要求1所述的方法,其中所述视觉引导线路径是相对于所述用户占据多个深度的直线。

3

根据权利要求1至2中的任一项所述的方法,其中所述视觉引导线路径是在3D空间中显示的曲线。

4

根据权利要求1至2中的任一项所述的方法,其中所述视觉引导线路径与多个点标记一起显示;所述多个点标记识别所述MR对象可被渲染的所述渲染定位。

5

根据权利要求1至2中任一项所述的方法,其中多个点标记对应于由所述HMD的光学系统支持的离散焦平面。

6

根据权利要求1至2中的任一项所述的方法,该方法还包括确定所述视觉引导线路径以避开所述3D图中的对象。

7

根据权利要求1至2中任一项所述的方法,该方法还包括确定所述视觉引导线路径以避开由所述HMD为所述用户显示的附加MR对象。

8

根据权利要求1至2中任一项所述的方法,其中选择所述MR对象包括;识别在所述用户的视图中内容增强对其可用的对象;以及为所识别的对象选择可用的内容增强对象作为所选的MR对象。

9

根据权利要求1至2中任一项所述的方法,该方法还包括;检测所述用户的注视点;其中基于所述用户的所检测的注视点来选择所述MR对象。

10

根据权利要求1至2中的任一项所述的方法,其中在沿着所述视觉引导线路径的所述渲染定位处渲染所述MR对象会改变相对于所述用户渲染所述MR对象的深度。

11

根据权利要求1至2中任一项所述的方法,该方法还包括;显示针对与所述MR对象相对应的对象的内容增强对所述用户可用的视觉提示;其中选择所述MR对象包括激活针对所述对象的内容增强。

12

根据权利要求11所述的方法,该方法还包括;在选择之前,将与所述MR对象相对应的所述对象与所述视觉提示一起显示在所述3D图中。

13

根据权利要求11所述的方法,其中与所述MR对象相对应的所述对象包括虚拟对象、预先存在的现实世界对象或MR对象中的一者。

14

根据权利要求11所述的方法,其中选择所述MR对象还包括;根据相对于所述视觉提示对所述AR HMD的用户输入,激活针对与所述MR对象相对应的所述对象的内容增强。

15

根据权利要求1至2中的任一项所述的方法,其中对所述AR HMD的所述用户输入包括对所述视觉提示的注视、头部姿态或注视停留中的一者或多者的用户输入。

16

根据权利要求1至2中任一项所述的方法,其中在所述3D图中显示所述视觉引导线路径包括;在所述3D图内的多个深度处显示多个焦平面指示符。

17

根据权利要求16所述的方法,其中对应于所述用户的所述注视的所述一个或多个所检测的定位,沿着所述视觉引导线路径渲染所述MR对象包括;沿着所述多个焦平面指示符在所述多个深度处移动所述MR对象以放大所述MR对象。

18

根据权利要求1至2中任一项所述的方法,其中在所述3D图中显示所述视觉引导线路径包括基于眼睛注视方向和眼睛聚散度来确定所述用户的注视点的深度方向位置。

19

根据权利要求18所述的方法,该方法还包括;确定所述3D图中的所述视觉引导线路径;以及将所述一个或多个定位确定为沿着所述视觉引导线路径的一个或多个识别的焦点。

20

根据权利要求19所述的方法,其中确定沿着所述视觉引导线路径的所述一个或多个识别的焦点包括以下任意一者;通过所述用户的注视跟踪确定所述一个或多个识别的焦点;根据所述AR HMD的一个或多个硬件限制,确定所述一个或多个识别的焦点;基于能够由所述AR HMD显示的视觉上正确的焦平面的数目,确定一个或多个识别的焦点;基于所述AR HMD上可用的确定的注视跟踪精度,确定所述一个或多个识别的焦点;根据所述MR对象的距离确定所述一个或多个识别的焦点;或者通过所述用户的移动确定所述一个或多个识别的焦点。

21

根据权利要求19所述的方法,其中确定所述3D图中的所述视觉引导线路径包括以下任意一者;基于所述用户的注视点的深度方向位置和所述3D图中的可用空间,确定所述视觉引导线路径;通过形成所述视觉引导线路径以避开所述3D图中的一个或多个识别的对象来确定所述视觉引导线路径;通过根据由用户注视确定的旋转点更改所述视觉引导线路径来确定所述视觉引导线路径;或者通过根据所述用户的运动来改变所述视觉引导线路径来确定所述视觉引导线路径,所述用户的所述运动包括头部倾斜、头部俯仰、头部偏转和姿态中的一者或多者。

22

根据权利要求1至2中的任一项所述的方法,其中渲染所述MR对象还包括;在对应于所述用户的所述注视的方向的位置处,沿着所述视觉引导线路径渲染一个或多个MR对象,同时避开在所述周围环境的所述3D图中的一个或多个预先存在的对象;其中所述视觉引导线路径被放置在所述周围环境的所述3D图中的确定的可用空间中;并且其中所述一个或多个预先存在的对象包括现实世界对象或现有MR对象中的至少一者。


对比文件列表

编号 名称

权利要求1

一种用于对混合现实(MR)内容进行基于注视的控制的方法,包括;形成增强现实(AR)头戴式显示器(HMD)的用户的周围环境的三维(3D)图;选择MR对象以在所述3D图中放置或重新定位;在所述3D图中显示视觉引导线路径;在沿着所述视觉引导线路径的一个或多个定位处检测所述用户的注视;以及在与所述用户的所述注视的所述一个或多个检测的定位相对应的沿着所述视觉引导线路径的渲染定位处,渲染所述MR对象。


权利要求2

根据权利要求1所述的方法,其中所述视觉引导线路径是相对于所述用户占据多个深度的直线。


权利要求3

根据权利要求1至2中的任一项所述的方法,其中所述视觉引导线路径是在3D空间中显示的曲线。


权利要求4

根据权利要求1至2中的任一项所述的方法,其中所述视觉引导线路径与多个点标记一起显示;所述多个点标记识别所述MR对象可被渲染的所述渲染定位。


权利要求5

根据权利要求1至2中任一项所述的方法,其中多个点标记对应于由所述HMD的光学系统支持的离散焦平面。


权利要求6

根据权利要求1至2中的任一项所述的方法,该方法还包括确定所述视觉引导线路径以避开所述3D图中的对象。


权利要求7

根据权利要求1至2中任一项所述的方法,该方法还包括确定所述视觉引导线路径以避开由所述HMD为所述用户显示的附加MR对象。


权利要求8

根据权利要求1至2中任一项所述的方法,其中选择所述MR对象包括;识别在所述用户的视图中内容增强对其可用的对象;以及为所识别的对象选择可用的内容增强对象作为所选的MR对象。


权利要求9

根据权利要求1至2中任一项所述的方法,该方法还包括;检测所述用户的注视点;其中基于所述用户的所检测的注视点来选择所述MR对象。


权利要求10

根据权利要求1至2中的任一项所述的方法,其中在沿着所述视觉引导线路径的所述渲染定位处渲染所述MR对象会改变相对于所述用户渲染所述MR对象的深度。


权利要求11

根据权利要求1至2中任一项所述的方法,该方法还包括;显示针对与所述MR对象相对应的对象的内容增强对所述用户可用的视觉提示;其中选择所述MR对象包括激活针对所述对象的内容增强。


权利要求12

根据权利要求11所述的方法,该方法还包括;在选择之前,将与所述MR对象相对应的所述对象与所述视觉提示一起显示在所述3D图中。


权利要求13

根据权利要求11所述的方法,其中与所述MR对象相对应的所述对象包括虚拟对象、预先存在的现实世界对象或MR对象中的一者。


权利要求14

根据权利要求11所述的方法,其中选择所述MR对象还包括;根据相对于所述视觉提示对所述AR HMD的用户输入,激活针对与所述MR对象相对应的所述对象的内容增强。


权利要求15

根据权利要求1至2中的任一项所述的方法,其中对所述AR HMD的所述用户输入包括对所述视觉提示的注视、头部姿态或注视停留中的一者或多者的用户输入。


权利要求16

根据权利要求1至2中任一项所述的方法,其中在所述3D图中显示所述视觉引导线路径包括;在所述3D图内的多个深度处显示多个焦平面指示符。


权利要求17

根据权利要求16所述的方法,其中对应于所述用户的所述注视的所述一个或多个所检测的定位,沿着所述视觉引导线路径渲染所述MR对象包括;沿着所述多个焦平面指示符在所述多个深度处移动所述MR对象以放大所述MR对象。


权利要求18

根据权利要求1至2中任一项所述的方法,其中在所述3D图中显示所述视觉引导线路径包括基于眼睛注视方向和眼睛聚散度来确定所述用户的注视点的深度方向位置。


权利要求19

根据权利要求18所述的方法,该方法还包括;确定所述3D图中的所述视觉引导线路径;以及将所述一个或多个定位确定为沿着所述视觉引导线路径的一个或多个识别的焦点。


权利要求20

根据权利要求19所述的方法,其中确定沿着所述视觉引导线路径的所述一个或多个识别的焦点包括以下任意一者;通过所述用户的注视跟踪确定所述一个或多个识别的焦点;根据所述AR HMD的一个或多个硬件限制,确定所述一个或多个识别的焦点;基于能够由所述AR HMD显示的视觉上正确的焦平面的数目,确定一个或多个识别的焦点;基于所述AR HMD上可用的确定的注视跟踪精度,确定所述一个或多个识别的焦点;根据所述MR对象的距离确定所述一个或多个识别的焦点;或者通过所述用户的移动确定所述一个或多个识别的焦点。


权利要求21

根据权利要求19所述的方法,其中确定所述3D图中的所述视觉引导线路径包括以下任意一者;基于所述用户的注视点的深度方向位置和所述3D图中的可用空间,确定所述视觉引导线路径;通过形成所述视觉引导线路径以避开所述3D图中的一个或多个识别的对象来确定所述视觉引导线路径;通过根据由用户注视确定的旋转点更改所述视觉引导线路径来确定所述视觉引导线路径;或者通过根据所述用户的运动来改变所述视觉引导线路径来确定所述视觉引导线路径,所述用户的所述运动包括头部倾斜、头部俯仰、头部偏转和姿态中的一者或多者。


权利要求22

根据权利要求1至2中的任一项所述的方法,其中渲染所述MR对象还包括;在对应于所述用户的所述注视的方向的位置处,沿着所述视觉引导线路径渲染一个或多个MR对象,同时避开在所述周围环境的所述3D图中的一个或多个预先存在的对象;其中所述视觉引导线路径被放置在所述周围环境的所述3D图中的确定的可用空间中;并且其中所述一个或多个预先存在的对象包括现实世界对象或现有MR对象中的至少一者。


Powered by Django

网站备案号:渝ICP备2023012882号


重庆市非显而易见网络科技有限责任公司 A Anti NPE NPE