面向增强和混合现实的远程虚实高精度匹配定位的方法与流程

专利2022-06-28  110


本发明涉及混合现实和增强现实技术领域,具体涉及一种面向增强和混合现实的远程虚实高精度匹配定位的方法。



背景技术:

增强和混合现实技术是将计算机模拟的数字化信息数据与现实场景环境无缝叠加,突破空间和时间限制,实现高沉浸、无割裂感的实时信息指引、虚实互动。其本质体现在“所见即得,所触即现”。借助此项技术,可以将借助屏幕显示和交互的信息替换成与实际环境对象强关联的三维信息,直观呈现于使用者眼前。

增强和混合现实一个重要应用场景是远程辅助运维和培训。借助增强和混合现实技术,操作人员在远程端面对1:1数字场景和装备产品,与实际场景准确匹配,在虚拟空间中进行操作;终端人员在现场面对实物,同时叠加虚拟空间中的装配产品,根据远程端操作人员在虚拟空间中给出的指导操作辅助操作,即利用数字虚拟空间跨越空间障碍,利用虚实叠加完成直观指导,有效避免“空对空”交流困境。而对于一些人类无法涉足的区域,更可以利用远程虚实定位叠加,让人类在当前场景就可以对远程场景进行观察、交互。

然而,在进行发明创造的过程中发明人发现,增强和混合现实处于应用初期阶段,相关应用场景还未切实落地,针对远程场景的高精度匹配定位还未有实用的技术方法,现有的技术方法要么只能进行米级的粗略匹配定位,要么只能够使用标志点或者特定图案纹理来进行局部定位,定位范围有限,即现有的方法匹配定位不精准。



技术实现要素:

(一)解决的技术问题

针对现有技术的不足,本发明提供了一种面向增强和混合现实的远程虚实高精度匹配定位的方法,解决了现有方法中匹配定位不精准的技术问题。

(二)技术方案

为实现以上目的,本发明通过以下技术方案予以实现:

本发明提供了一种面向增强和混合现实的远程虚实高精度匹配定位的方法,所述方法包括:

在近端的虚拟场景与远端场景相对应的位置建立全局坐标系gcs;

在远端场景中:确定至少一个与所述gcs相对位置固定的物理标识,放置能获取远端场景的点云数据的远程相机,并基于所述远程相机构建相机坐标系ccs;其中,所述ccs与所述gcs位置相对固定;

在近端环境空间中:按照所述物理标识与所述gcs的位置关系设置与所述物理标识外形一致的真实标识物,以程序启动时的ar/mr设备在环境空间中的相对位置为坐标原点建立环境坐标系ar/mrecs,并测量所述gcs与所述ar/mrecs的位置关系;

在近端的虚拟场景中:按照所述物理标识与所述gcs的位置关系添加与物理标识外形一致的虚拟标识;

使用ar/mr设备中的硬件摄像头获取所述真实标识物在近端环境空间中的位置信息;根据所述真实标识物在近端环境空间中的位置信息确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

优选的,所述方法还包括:

以所述物理标识的标记点建立标识坐标系mcs,所述mcs的x,y,z方向与所述gcs的x,y,z方向一致;采用所述mcs与所述gcs的位置关系表示所述物理标识与所述gcs的位置关系;

基于所述真实标识物和所述物理标识的对应关系,以所述真实标识物的标记点建立标识坐标系mcs,采用所述mcs与所述gcs的位置关系表示所述真实标识物与所述gcs的位置关系。

优选的,所述在近端的虚拟场景与远端场景相对应的位置分别建立全局坐标系gcs,具体包括:

在近端的虚拟场景与远端场景相对应的某一位置按照右手法则分别建立一个全局坐标系gcs。

优选的,所述相机坐标系具体包括:远程相机拍摄远端场景生成的点云数据坐标系。

优选的,所述使用ar/mr设备中的硬件摄像头获取所述真实标识物在近端环境空间中的位置信息,具体包括:

使用硬件摄像头的rgb图像识别及深度信息捕捉,确定真实标识物与硬件摄像头的相对位置,进而得到真实标识物与ar/mrecs的位置关系,确定真实标识物在近端环境空间中的位置信息。

优选的,所述根据所述真实标识物在近端环境空间中的位置信息确定近端的虚拟场景和由远端场景的点云数据拟合得到的点云场景在近端的环境空间中的位置,具体包括:

根据真实标识物在近端环境空间中的位置信息,结合真实标识物和gcs的位置关系,确定gcs在近端环境空间中的位置信息;

根据gcs在近端环境空间中的位置信息,确定近端的虚拟场景在在近端的环境空间中的位置;

根据真实标识物在近端环境空间中的位置信息位置信息,结合真实标识物和物理标识的对应关系,以及ccs与gcs位置关系,确定点云场景在近端的环境空间中的位置。

优选的,所述方法还包括:

修正虚实场景之间的误差,修正方法包括:反向拟合调节法、多标记点匹配法和多用户辅助部署法。

优选的,所述反向拟合调节法是针对固定误差源的修正方法,具体包括:

修正真实标识物的位置误差、修正真实标识物标记点标记误差、修正虚实场景中全局坐标系对应的误差和修正远程相机拍摄角度导致的畸变误差。

优选的,所述多标记点匹配法具体为:

在近端环境空间中设置多个真实标识物,将ar/mr设备中的硬件摄像头扫描得到的所述真实标识物在近端环境空间中的位置信息进行均值化处理,得到位置信息的均值,根据位置信息的均值确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

优选的,所述多用户辅助部署法具体为:

多人协同环境下,多用户设备扫描真实标识物得到的位置数据在通信服务端进行均值化处理,得到真实标识物在近端环境空间中的位置信息的均值,根据位置信息的均值确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

(三)有益效果

本发明提供了一种面向增强和混合现实的远程虚实高精度匹配定位的方法。与现有技术相比,具备以下有益效果:

本发明通过构建多重坐标系和确定各种坐标系之间的位置关系,利用真实标识物确定远程场景的点云场景和近端的虚拟场景在近端环境空间中的位置,实现面向的远程虚实高精度匹配定位。通过本发明的方法,可以实现基于真实空间标记对象位置,跨越空间障碍实现自适应准确定位混合和增强现实环境中虚拟对象位置,将虚拟空间中的场景准确地叠加到近端环境空间中,便于实现虚实比对下的交互操作,如远程培训示教、辅助引导等。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明实施例一种面向增强和混合现实的远程虚实高精度匹配定位的方法的框图;

图2为本发明实施例中一种面向增强和混合现实的远程虚实高精度匹配定位的方法中的定位原理及误差源分析示意图;

图3为实施例1中各个坐标系及之间位置关系的示意图;

图4为实施例1中人类所处的环境空间中中贴敷真实标识物的示意图;

图5为实施例1中ar/mrces坐标系及虚拟场景构建的示意图;

图6为实施例1中虚实叠加定位的示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

本申请实施例通过提供一种面向增强和混合现实的远程虚实高精度匹配定位的方法,解决了现有方法中匹配定位不精准的技术问题,实现远程虚实高精度匹配定位。

本申请实施例中的技术方案为解决上述技术问题,总体思路如下:

本发明实施例通过构建多重坐标系和确定各种坐标系之间的位置关系,利用真实标识物确定远程场景的点云场景和近端的虚拟场景在近端环境空间中的位置,实现面向的远程虚实高精度匹配定位。

为了更好的理解上述技术方案,下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。

本发明实施例提供一种面向增强和混合现实的远程虚实高精度匹配定位的方法,如图1所示,包括:

s1、在近端的虚拟场景与远端场景相对应的位置建立全局坐标系gcs;

s2、在远端场景中执行以下步骤:确定至少一个与gcs相对位置固定的物理标识,放置能获取远端场景的点云数据的远程相机,并基于远程相机构建相机坐标系ccs;其中,ccs与gcs位置相对固定;

s3、在近端环境空间中执行以下步骤:按照物理标识外形、物理标识与gcs的位置关系设置真实标识物,以程序启动时的ar/mr设备在环境空间中的相对位置为坐标原点建立环境坐标系ar/mrecs,并测量gcs与ar/mrecs的位置关系;

s4、在近端的虚拟场景中执行以下步骤:按照物理标识与gcs的位置关系添加与物理标识外形一致的虚拟标识;

s5、使用ar/mr设备中的硬件摄像头获取真实标识物在近端环境空间中的位置信息;根据真实标识物在近端环境空间中的位置信息确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

本发明实施例通过构建多重坐标系和确定各种坐标系之间的位置关系,利用真实标识物确定远程场景的点云场景和近端的虚拟场景在近端环境空间中的位置,实现面向的远程虚实高精度匹配定位。通过本发明实施例的方法,可以实现基于真实空间标记对象位置,跨越空间障碍实现自适应准确定位混合和增强现实环境中虚拟对象位置,将虚拟空间中的场景准确地叠加到近端环境空间中,便于实现虚实比对下的交互操作,如远程培训示教、辅助引导等。

下面对各个步骤进行详细描述。

需要说明的是,在本发明实施例中近端环境空间是指近端的实际场景;远端场景包括远端的实际场景和远端的虚拟场景。

实际场景,是指ar/mr设备的应用环境,例如在室内使用时的地面、墙壁、桌椅、人员等。

虚拟场景是指预先在ar/mr设备的存储系统中构建,后期利用ar/mr设备在实际场景中投射出的相对应虚拟的地面、墙壁、桌椅、人员等模型,以及其他附着的一些虚拟信息数据。

点云场景是指利用远程相机拍照扫描得到的具备深度信息的点云数据拟合得到的虚拟场景模型。需要注意的是,点云场景仅表示远程信息不局限于点云场景,还包括所有需要在实际场景中需要准确定位的远程信息。

s1、在近端的虚拟场景与远端场景相对应的位置分别建立全局坐标系gcs。具体实施过程如下:

在近端的虚拟场景在与远端的实际场景相对应的某一位置按照右手法则建立的坐标系。在具体实施过程中,选取实际场景中不易发生变化且较为规则平整的区域进行gcs坐标系的构建。

s2、在远端场景中执行以下步骤:确定至少一个与gcs相对位置固定的物理标识,放置能获取远端场景的点云数据的远程相机,并基于远程相机构建相机坐标系ccs。具体实施过程如下:

s201、在远端场景中确定至少一个与gcs相对位置固定的物理标识,以物理标识的标记点(在本发明实施例中,标记点为物理标识的中心点)建立标识坐标系mcs,mcs的x,y,z方向与gcs的x,y,z方向一致;采用mcs与gcs的位置关系表示物理标识与gcs的位置关系。需要说明的是,可以由ar/mr设备的存储系统在远端的虚拟场景中确定至少一个物理标识,也可以在远端的实际场景中放置至少一个物理标识。物理标识在远端场景中的位置选择应考虑现场的易部署性、易识别性。

s202、放置能获取远端场景的点云数据的远程相机,根据远程相机自带坐标系建立相机坐标系ccs,测量gcs与ccs的位置关系。在本发明实施例中,ccs是指远程相机拍摄实际场景环境生成的点云数据坐标系,因ccs与gcs的相对位置固定,可将远程相机拍摄生成的点云数据可直接内部换算为gcs坐标系下的点云数据。

s3、在近端环境空间中执行以下步骤:按照物理标识外形、物理标识与gcs的位置关系设置真实标识物,以程序启动时的ar/mr设备在环境空间中的相对位置为坐标原点建立环境坐标系ar/mrecs,并测量gcs与ar/mrecs的位置关系。具体实施过程如下:

s301、在近端环境空间中贴敷真实标识物,真实标识物和物理标识完全相同,可以选择大小、形状一致的图片或二维码(需要说明的是,采用自然特征作为真实标识物在本发明实施例的范围之内)。根据真实标识物和物理标识的对应关系,以真实标识物的标记点建立标识坐标系mcs,采用mcs与gcs的位置关系表示真实标识物与gcs的位置关系。

s302、以程序启动时的ar/mr设备在环境空间中的相对位置为坐标原点建立环境坐标系ar/mrecs,并测量gcs与ar/mrecs的位置关系。

s4、在近端的虚拟场景中执行以下步骤:按照物理标识与gcs的位置关系添加与物理标识外形一致的虚拟标识。具体实施过程如下:

在近端的虚拟场景中添加虚拟标识,虚拟标识和物理标识完全相同,可以选择大小、形状一致的图片或二维码。根据虚拟标识和物理标识的对应关系,以虚拟标识的标记点建立标识坐标系mcs,采用mcs与gcs的位置关系表示虚拟与gcs的位置关系。

s5、使用ar/mr设备中的硬件摄像头获取真实标识物在近端环境空间中的位置信息;根据真实标识物在近端环境空间中的位置信息确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。具体实施过程如下:

s501、使用硬件摄像头的rgb图像识别及深度信息捕捉,确定真实标识物与硬件摄像头的相对位置,进而得到真实标识物与ar/mrecs的位置关系,确定真实标识物在近端环境空间中的位置信息。

s502、根据真实标识物在近端环境空间中的位置信息位置信息,结合真实标识物和物理标识的对应关系,以及ccs与gcs位置关系,确定点云场景在近端的环境空间中的位置。

s503、根据真实标识物在近端环境空间中的位置信息,结合真实标识物和gcs的位置关系,确定gcs在近端环境空间中的位置信息,进而确定近端的虚拟场景在在近端的环境空间中的位置。

在本发明实施例中,为了进一步提高面向增强和混合现实的匹配定位的精度,本发明实施例基于定位原理及误差源分析(如图2所示),对虚实场景之间的误差提出了修正方法,修正方法包括:反向拟合调节法、多标记点匹配法和多用户辅助部署法。

针对固定误差源的修正,包括:修正真实标识物的位置误差、修正真实标识物标记点标记误差、修正虚实场景中全局坐标系对应的误差和修正相机拍摄角度导致的畸变误差。通过多次使用ar/mr设备扫描真实标识物,测量绘制误差变化曲线拟合为函数,在ar/mr设备系统内部进行反向调节。

多标记点匹配法具体为:

在近端的环境空间中设置多个真实标识物,将ar/mr设备扫描得到的真实标识物在近端的环境空间中的位置信息进行均值化处理,得到位置信息的均值,根据位置信息的均值确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

均值化处理的具体过程包括:对于真实标识物不同方位采取不同的处理方法:对于垂直于标识方向的坐标值以及三个转动方向的坐标值(t),需对多个标识数据(t1,t2,……,tn)求取均值(a=(∑tn)/4),并除以方差得到最终均值化数据对于其他位置数据的坐标值,仅需对多个标识数据求取平均值的方法得到均值化数据。需要说明的是,本发明实施例提出的均值化处理的具体过程只是均值化处理的其中一种方式,本发明实施例的均值化处理的具体过程并不局限与这种方式。

多用户辅助部署法具体为:

多人协同环境下,多用户设备扫描真实标识物得到的位置数据在通信服务端进行均值化处理,得到真实标识物在近端环境空间中的位置信息的均值,根据位置信息的均值确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

实施例1:

为了进一步说明书本发明实施例的方法,以火星探测器为例,详细解释本发明实施例的具体过程:

火星探测器由于部署在太空星球,目前人类无法涉足,因此存在无法直观了解火星地形地貌的问题,利用本发明实施例的方法,可以实现将火星地貌直观呈现于人类所处的环境空间中,同时可以将部分实际物体或者环境(如一比一构建的真实探测器)与虚拟火星地貌精准匹配,让操作人员达到真实临场的感受。

步骤1:火星探测器发射之前,在其上选取某一固定位置作为gcs坐标系(案例选取火星探测器大臂转台中心位置为gcs坐标系原点,沿着臂长位置向上为z方向,按照右手法则确定了x,y方向,如图3所示)。选取大臂上安装的双目相机自带坐标系为ccs坐标系(不同双目相机所定义的坐标系方位可能有所差异)。

步骤2:确定好坐标系后,在地面测量得到ccs相对于gcs的位置关系pcg(x,y,z,rx,ry,rz,rt)。其中(x,y,z)是位移坐标,(rx,ry,rz,rt)是四元数,表示ccs坐标系相对于gcs坐标系的转动关系。

步骤3:确定物理标识放置位置,放置位置应与gcs(全局坐标系)相对位置固定,不会随着探测器工作或移动发生变化。若有多个物理标识放置,为较好实现多标识点匹配降低定位误差,应确保其放置位置有一定间距,放置角度应相对有偏移。每个标记点确定一个mcs,物理标识位置确认好后需测量每个mcs相对于gcs的位置关系pmg1(x1,y1,z1,rx1,ry1,rz1,rt1);pmg2(x2,y2,z2,rx2,ry2,rz2,rt2)。如图3所示。

步骤4:在人类所处的环境空间中中贴敷真实标识物,如图4所示。(由于没有真实火星探测器,案例中以墙壁为贴敷位置,要确保pmg1与pmg2相对位置与设定的一致)。

步骤5:在ar/mr系统中设定虚拟场景,设定gcs坐标。并确定在虚拟场景中与ar/mrecs的相对位置关系pge(x,y,z,rx,ry,rz,rt);确定虚拟场景相对于ar/mrecs(ar/mr环境坐标系)坐标系的相对位置关系pve(x,y,z,rx,ry,rz,rt)。如图5所示。

步骤6:在ar/mr系统中添加数字标识,数字标识的坐标位置与gcs相对关系应吻合pmg1及pmg2。如图5所示。

步骤7:利用ar/mr设备识别真实标识物,得到每个真实标识物在物理环境中的位置信息(不同设备,以及不同系统采用的物理空间坐标系不相同,并不影响最终结果),分别为p1(x1,y1,z1,rx1,rx1,rx1,rt1),p2(x2,y2,z2,rx2,rx2,rx2,rt2)。

步骤8:利用pmg1和pmg2相对位置数据,结合p1和p2进行反求,得到gcs坐标系相对于人类所处的环境空间中的位置pgr1(x1,y1,z1,rx1,rx1,rx1,rt1),pgr2(x2,y2,z2,rx2,rx2,rx2,rt2)。

步骤9:对pgr1和pgr2进行均值化处理,得到pgr(x,y,z,rx,ry,rz,rt)。进而通过pcg,pge反求得到ar/mrecs以及ccs相对于人类所处的环境空间中的位置,并得到虚拟场景以及点云场景在人类所处的环境空间中的准确位置。如附图6所示。

步骤10:当有多人协同参与,每一人都可以按照上述1~8步骤得到一个gcs坐标位置pgri,将得到的多个pgr1,pgr2,…pgri位置信息按照均值化处理方法求得均值pgr,并同步给每个一协同人员更新其pgr位置数据,进一步降低误差。

综上所述,与现有技术相比,具备以下有益效果:

1、本发明实施例通过构建多重坐标系和确定各种坐标系之间的位置关系,利用真实标识物确定远程场景的点云场景和近端的虚拟场景在近端环境空间中的位置,实现面向的远程虚实高精度匹配定位。通过本发明实施例的方法,可以实现基于真实空间标记对象位置,跨越空间障碍实现自适应准确定位混合和增强现实环境中虚拟对象位置,将虚拟空间中的场景准确地叠加到近端环境空间中,便于实现虚实比对下的交互操作,如远程培训示教、辅助引导等。

2、本发明实施例提出虚实场景之间的误差的修正方法,进一步提高面向增强和混合现实的远程虚实匹配定位的精度。

需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。


技术特征:

1.一种面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述方法包括:

在近端的虚拟场景与远端场景相对应的位置建立全局坐标系gcs;

在远端场景中:确定至少一个与所述gcs相对位置固定的物理标识,放置能获取远端场景的点云数据的远程相机,并基于所述远程相机构建相机坐标系ccs;其中,所述ccs与所述gcs位置相对固定;

在近端环境空间中:按照所述物理标识与所述gcs的位置关系设置与所述物理标识外形一致的真实标识物,以程序启动时的ar/mr设备在环境空间中的相对位置为坐标原点建立环境坐标系ar/mrecs,并测量所述gcs与所述ar/mrecs的位置关系;

在近端的虚拟场景中:按照所述物理标识与所述gcs的位置关系添加与物理标识外形一致的虚拟标识;

使用ar/mr设备中的硬件摄像头获取所述真实标识物在近端环境空间中的位置信息;根据所述真实标识物在近端环境空间中的位置信息确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

2.如权利要求1所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述方法还包括:

以所述物理标识的标记点建立标识坐标系mcs,所述mcs的x,y,z方向与所述gcs的x,y,z方向一致;采用所述mcs与所述gcs的位置关系表示所述物理标识与所述gcs的位置关系;

基于所述真实标识物和所述物理标识的对应关系,以所述真实标识物的标记点建立标识坐标系mcs,采用所述mcs与所述gcs的位置关系表示所述真实标识物与所述gcs的位置关系。

3.如权利要求1所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述在近端的虚拟场景与远端场景相对应的位置分别建立全局坐标系gcs,具体包括:

在近端的虚拟场景与远端场景相对应的某一位置按照右手法则分别建立一个全局坐标系gcs。

4.如权利要求1所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述相机坐标系具体包括:远程相机拍摄远端场景生成的点云数据坐标系。

5.如权利要求1所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述使用ar/mr设备中的硬件摄像头获取所述真实标识物在近端环境空间中的位置信息,具体包括:

使用硬件摄像头的rgb图像识别及深度信息捕捉,确定真实标识物与硬件摄像头的相对位置,进而得到真实标识物与ar/mrecs的位置关系,确定真实标识物在近端环境空间中的位置信息。

6.如权利要求1所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述根据所述真实标识物在近端环境空间中的位置信息确定近端的虚拟场景和由远端场景的点云数据拟合得到的点云场景在近端的环境空间中的位置,具体包括:

根据真实标识物在近端环境空间中的位置信息,结合真实标识物和gcs的位置关系,确定gcs在近端环境空间中的位置信息;

根据gcs在近端环境空间中的位置信息,确定近端的虚拟场景在在近端的环境空间中的位置;

根据真实标识物在近端环境空间中的位置信息位置信息,结合真实标识物和物理标识的对应关系,以及ccs与gcs位置关系,确定点云场景在近端的环境空间中的位置。

7.如权利要求1~6任一项权利要求所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述方法还包括:

修正虚实场景之间的误差,修正方法包括:反向拟合调节法、多标记点匹配法和多用户辅助部署法。

8.如权利要求7所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述反向拟合调节法是针对固定误差源的修正方法,具体包括:

修正真实标识物的位置误差、修正真实标识物标记点标记误差、修正虚实场景中全局坐标系对应的误差和修正远程相机拍摄角度导致的畸变误差。

9.如权利要求7所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述多标记点匹配法具体为:

在近端环境空间中设置多个真实标识物,将ar/mr设备中的硬件摄像头扫描得到的所述真实标识物在近端环境空间中的位置信息进行均值化处理,得到位置信息的均值,根据位置信息的均值确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

10.如权利要求7所述的面向增强和混合现实的远程虚实高精度匹配定位的方法,其特征在于,所述多用户辅助部署法具体为:

多人协同环境下,多用户设备扫描真实标识物得到的位置数据在通信服务端进行均值化处理,得到真实标识物在近端环境空间中的位置信息的均值,根据位置信息的均值确定由远端场景的点云数据拟合得到的点云场景和近端的虚拟场景在近端的环境空间中的位置。

技术总结
本发明提供一种面向增强和混合现实的远程虚实高精度匹配定位的方法,涉及混合现实和增强现实技术领域。本发明通过构建多重坐标系和确定各种坐标系之间的位置关系,利用真实标识物确定远程场景的点云场景和近端的虚拟场景在近端环境空间中的位置,实现面向的远程虚实高精度匹配定位。通过本发明的方法,可以实现基于真实空间标记对象位置,跨越空间障碍实现自适应准确定位混合和增强现实环境中虚拟对象位置,将虚拟空间中的场景准确地叠加到近端环境空间中,便于实现虚实比对下的交互操作,如远程培训示教、辅助引导等。

技术研发人员:魏一雄;张燕龙;张红旗;郭磊;陈亮希;周红桥;田富君
受保护的技术使用者:中国电子科技集团公司第三十八研究所
技术研发日:2020.01.10
技术公布日:2020.06.09

转载请注明原文地址: https://bbs.8miu.com/read-9017.html

最新回复(0)