CN110324342A - 一种增强现实注册方法 - Google Patents

一种增强现实注册方法 Download PDF

Info

Publication number
CN110324342A
CN110324342A CN201910595333.6A CN201910595333A CN110324342A CN 110324342 A CN110324342 A CN 110324342A CN 201910595333 A CN201910595333 A CN 201910595333A CN 110324342 A CN110324342 A CN 110324342A
Authority
CN
China
Prior art keywords
augmented reality
parameter
video camera
virtual
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910595333.6A
Other languages
English (en)
Inventor
李攀
易姿含
李子序
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Zixu Science And Technology Co Ltd
Original Assignee
Wuhan Zixu Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Zixu Science And Technology Co Ltd filed Critical Wuhan Zixu Science And Technology Co Ltd
Priority to CN201910595333.6A priority Critical patent/CN110324342A/zh
Publication of CN110324342A publication Critical patent/CN110324342A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种增强现实注册方法,包括如下步骤:S1,计算摄像机的参数,参数包括摄像机的内参数和外参数,将环境图像坐标与摄像机坐标进行转换;S2,基于坐标转换,利用摄像机预先捕获待检测物体的视频图像,并对采集的视频图像提取自然特征,自然特征包括物体视频图像各个面上的顶点数据,并存储到服务器端,在服务器端对提取的特征信息进行第一标记处理,并形成第一标识。本发明无需为博物馆的展品制作标记识别,节省了流程,提高了实时性。且在服务器端进行特征点检测,可以保障用户在不同角度下进行图像获取的时候,达到增强现实效果的一致性。

Description

一种增强现实注册方法
技术领域
本发明涉及增强现实技术领域,更为具体地,涉及一种增强现实注册方法。
背景技术
AR提供了在一般情况下,不同于人类可以感知的信息。它不仅展现了真实世界的信息,而且将虚拟的信息同时显示出来,两种信息相互补充、叠加。在视觉化的增强现实中,用户利用头盔显示器,把真实世界与电脑图形多重合成在一起,便可以看到真实的世界围绕着它。
国外已经有许多实际的应用。在德国,工程技术人员,在进行机械安装、维修、调式时,通过头盔显示器,可以将原来不能呈现的机器内部结构,以及它的相关信息、数据完全呈现出来。并可以按照电脑的提示,来进行工作,解决技术难题。使我们的工作非常方便、快捷、准确。摒弃了我们以前,需要带着大量、笨重的资料在身边,边工作,边查阅,一但出现难题、紧急情况,不知所措的落后的方法和现象。现有的增强现实注册技术,由于用户拍摄的角度各不相同,造成识别的目标物差别较大,难以保证增强现实效果的一致性。
发明内容
本发明的目的在于克服现有技术的不足,提供一种增强现实注册方法,无需为博物馆的展品制作标记识别,节省了流程,提高了实时性。且在服务器端进行特征点检测,可以保障用户在不同角度下进行图像获取的时候,达到增强现实效果的一致性。
本发明的目的是通过以下技术方案来实现的:
一种增强现实注册方法,包括步骤:
S1,计算摄像机的参数,所述参数包括摄像机的内参数和外参数,将环境图像坐标与摄像机坐标进行转换;
S2,基于坐标转换,利用摄像机预先捕获待检测物体的视频图像,并对采集的视频图像提取自然特征,所述自然特征包括物体视频图像各个面上的顶点数据,并存储到服务器端,在服务器端对提取的特征信息进行第一标记处理,并形成第一标识;
S3,特征匹配,检测S2步骤中所述第一标识,并将S2步骤中进行第一标记处理后的数据与当下检测物体的特征数据进行匹配,如果匹配成功,则进行第二标记处理;如果未匹配成功,并删除当下检测物体的误匹配的点继续检测,保存第二标记处理后的特征点;
S4,确定虚拟信息的位置和方向,根据第二标记处理后的特征点相对于虚拟图形的位置和方向角,以及根据摄像机的内部参数和外部参数,确定所添加的虚拟信息在真实空间中的映射位置;
S5,确认了所述映射位置后,将所述虚拟信息渲染到图像中,然后输出增强现实图像到显示输出设备。
进一步的,在步骤S1中,使用摄像机标定算法求出摄像机的世界坐标和外部参数。
进一步的,在步骤S2中,对所述标识进行编号,在特征匹配时能够利用编号进行匹配。
进一步的,在步骤S3中,包括设置阈值M步骤,如果未匹配成功,并删除当下检测物体的误匹配的点继续检测,如果达到阈值M,则停止检测。
进一步的,在步骤S4中,所述虚拟信息包括虚拟图形信息。
进一步的,所述虚拟图形信包括二维虚拟图形和三维虚拟图形中的任一种。
本发明的有益效果是:
(1)本发明在服务器端进行标记处理等,无需为博物馆的展品制作标记识别,节省了流程,提高了实时性。且在服务器端进行特征点检测,可以保障用户在不同角度下进行图像获取的时候,达到增强现实效果的一致性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明的步骤流程示意图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案,但本发明的保护范围不局限于以下所述。本说明书中公开的所有特征,或隐含公开的所有方法或过程中的步骤,除了互相排斥的特征和/或步骤以外,均可以以任何方式组合。
本说明书(包括任何附加权利要求、摘要和附图)中公开的任一特征,除非特别叙述,均可被其他等效或具有类似目的的替代特征加以替换。即,除非特别叙述,每个特征只是一系列等效或类似特征中的一个例子而已。
下面将详细描述本发明的具体实施例,应当注意,这里描述的实施例只用于举例说明,并不用于限制本发明。在以下描述中,为了提供对本发明的透彻理解,阐述了大量特定细节。然而,对于本领域普通技术人员显而易见的是:不必采用这些特定细节来实行本发明。在其他实例中,为了避免混淆本发明,未具体描述公知的电路,软件或方法。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在对实施例进行描述之前,需要对一些必要的术语进行解释。例如:
若本申请中出现使用“第一”、“第二”等术语来描述各种元件,但是这些元件不应当由这些术语所限制。这些术语仅用来区分一个元件和另一个元件。因此,下文所讨论的“第一”元件也可以被称为“第二”元件而不偏离本发明的教导。应当理解的是,若提及一元件“连接”或者“联接”到另一元件时,其可以直接地连接或直接地联接到另一元件或者也可以存在中间元件。相反地,当提及一元件“直接地连接”或“直接地联接”到另一元件时,则不存在中间元件。
在本申请中出现的各种术语仅仅用于描述具体的实施方式的目的而无意作为对本发明的限定,除非上下文另外清楚地指出,否则单数形式意图也包括复数形式。
当在本说明书中使用术语“包括”和/或“包括有”时,这些术语指明了所述特征、整体、步骤、操作、元件和/或部件的存在,但是也不排除一个以上其他特征、整体、步骤、操作、元件、部件和/或其群组的存在和/或附加。
如图1所示,一种增强现实注册方法,包括步骤:
S1,计算摄像机的参数,所述参数包括摄像机的内参数和外参数,将环境图像坐标与摄像机坐标进行转换;
S2,基于坐标转换,利用摄像机预先捕获待检测物体的视频图像,并对采集的视频图像提取自然特征,所述自然特征包括物体视频图像各个面上的顶点数据,并存储到服务器端,在服务器端对提取的特征信息进行第一标记处理,并形成第一标识;
S3,特征匹配,检测S2步骤中所述第一标识,并将S2步骤中进行第一标记处理后的数据与当下检测物体的特征数据进行匹配,如果匹配成功,则进行第二标记处理;如果未匹配成功,并删除当下检测物体的误匹配的点继续检测,保存第二标记处理后的特征点;
S4,确定虚拟信息的位置和方向,根据第二标记处理后的特征点相对于虚拟图形的位置和方向角,以及根据摄像机的内部参数和外部参数,确定所添加的虚拟信息在真实空间中的映射位置;
S5,确认了所述映射位置后,将所述虚拟信息渲染到图像中,然后输出增强现实图像到显示输出设备。
进一步的,在步骤S1中,使用摄像机标定算法求出摄像机的世界坐标和外部参数。
进一步的,在步骤S2中,对所述标识进行编号,在特征匹配时能够利用编号进行匹配。
进一步的,在步骤S3中,包括设置阈值M步骤,如果未匹配成功,并删除当下检测物体的误匹配的点继续检测,如果达到阈值M,则停止检测。
进一步的,在步骤S4中,所述虚拟信息包括虚拟图形信息。
进一步的,所述虚拟图形信包括二维虚拟图形和三维虚拟图形中的任一种。
实施例1
如图1所示,一种增强现实注册方法,包括步骤:
S1,计算摄像机的参数,所述参数包括摄像机的内参数和外参数,将环境图像坐标与摄像机坐标进行转换;
S2,基于坐标转换,利用摄像机预先捕获待检测物体的视频图像,并对采集的视频图像提取自然特征,所述自然特征包括物体视频图像各个面上的顶点数据,并存储到服务器端,在服务器端对提取的特征信息进行第一标记处理,并形成第一标识;
S3,特征匹配,检测S2步骤中所述第一标识,并将S2步骤中进行第一标记处理后的数据与当下检测物体的特征数据进行匹配,如果匹配成功,则进行第二标记处理;如果未匹配成功,并删除当下检测物体的误匹配的点继续检测,保存第二标记处理后的特征点;
S4,确定虚拟信息的位置和方向,根据第二标记处理后的特征点相对于虚拟图形的位置和方向角,以及根据摄像机的内部参数和外部参数,确定所添加的虚拟信息在真实空间中的映射位置;
S5,确认了所述映射位置后,将所述虚拟信息渲染到图像中,然后输出增强现实图像到显示输出设备。
在本实施例中的其余技术特征,本领域技术人员均可以根据实际情况进行灵活选用和以满足不同的具体实际需求。然而,对于本领域普通技术人员显而易见的是:不必采用这些特定细节来实现本发明。在其他实例中,为了避免混淆本发明,未具体描述公知的算法,方法或系统等,均在本发明的权利要求书请求保护的技术方案限定技术保护范围之内。
对于前述的方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某一些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和单元并不一定是本申请所必须的。
本领域技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法实现所描述的功能,但是这种实现不应超出本发明的范围。
所揭露的系统、模块和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例,仅仅是示意性的,例如,所述单元的划分,可以仅仅是一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以说通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述分立部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例的方案的目的。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解实现上述实施例的方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、ROM、RAM等。
以上所述仅是本发明的优选实施方式,应当理解本发明并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文所述构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。

Claims (6)

1.一种增强现实注册方法,其特征在于,包括步骤:
S1,计算摄像机的参数,所述参数包括摄像机的内参数和外参数,将环境图像坐标与摄像机坐标进行转换;
S2,基于坐标转换,利用摄像机预先捕获待检测物体的视频图像,并对采集的视频图像提取自然特征,所述自然特征包括物体视频图像各个面上的顶点数据,并存储到服务器端,在服务器端对提取的特征信息进行第一标记处理,并形成第一标识;
S3,特征匹配,检测S2步骤中所述第一标识,并将S2步骤中进行第一标记处理后的数据与当下检测物体的特征数据进行匹配,如果匹配成功,则进行第二标记处理;如果未匹配成功,并删除当下检测物体的误匹配的点继续检测,保存第二标记处理后的特征点;
S4,确定虚拟信息的位置和方向,根据第二标记处理后的特征点相对于虚拟图形的位置和方向角,以及根据摄像机的内部参数和外部参数,确定所添加的虚拟信息在真实空间中的映射位置;
S5,确认了所述映射位置后,将所述虚拟信息渲染到图像中,然后输出增强现实图像到显示输出设备。
2.根据权利要求1所述的一种增强现实注册方法,其特征在于,在步骤S1中,使用摄像机标定算法求出摄像机的世界坐标和外部参数。
3.根据权利要求1所述的一种增强现实注册方法,其特征在于,在步骤S2中,对所述标识进行编号,在特征匹配时能够利用编号进行匹配。
4.根据权利要求1所述的一种增强现实注册方法,其特征在于,在步骤S3中,包括设置阈值M步骤,如果未匹配成功,并删除当下检测物体的误匹配的点继续检测,如果达到阈值M,则停止检测。
5.根据权利要求1所述一种增强现实注册方法,其特征在于,在步骤S4中,所述虚拟信息包括虚拟图形信息。
6.根据权利要求5所述一种增强现实注册方法,其特征在于,所述虚拟图形信包括二维虚拟图形和三维虚拟图形中的任一种。
CN201910595333.6A 2019-07-03 2019-07-03 一种增强现实注册方法 Pending CN110324342A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910595333.6A CN110324342A (zh) 2019-07-03 2019-07-03 一种增强现实注册方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910595333.6A CN110324342A (zh) 2019-07-03 2019-07-03 一种增强现实注册方法

Publications (1)

Publication Number Publication Date
CN110324342A true CN110324342A (zh) 2019-10-11

Family

ID=68122441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910595333.6A Pending CN110324342A (zh) 2019-07-03 2019-07-03 一种增强现实注册方法

Country Status (1)

Country Link
CN (1) CN110324342A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105279750A (zh) * 2014-07-09 2016-01-27 雷震 一种基于ir-uwb和图像矩的装备展示导览系统
EP3091510A1 (en) * 2015-05-06 2016-11-09 Reactive Reality GmbH Method and system for producing output images and method for generating image-related databases
CN106600638A (zh) * 2016-11-09 2017-04-26 深圳奥比中光科技有限公司 一种增强现实的实现方法
CN107038758A (zh) * 2016-10-14 2017-08-11 北京联合大学 一种基于orb算子的增强现实三维注册方法
CN108665490A (zh) * 2018-04-02 2018-10-16 浙江大学 一种基于多属性编码及动态权重的图形匹配方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105279750A (zh) * 2014-07-09 2016-01-27 雷震 一种基于ir-uwb和图像矩的装备展示导览系统
EP3091510A1 (en) * 2015-05-06 2016-11-09 Reactive Reality GmbH Method and system for producing output images and method for generating image-related databases
CN107038758A (zh) * 2016-10-14 2017-08-11 北京联合大学 一种基于orb算子的增强现实三维注册方法
CN106600638A (zh) * 2016-11-09 2017-04-26 深圳奥比中光科技有限公司 一种增强现实的实现方法
CN108665490A (zh) * 2018-04-02 2018-10-16 浙江大学 一种基于多属性编码及动态权重的图形匹配方法

Similar Documents

Publication Publication Date Title
US10255492B2 (en) Image processing method providing information for identifying a function of an object, the function being identified based on a pose of a person with respect to the object
CN111709874B (zh) 图像调整的方法、装置、电子设备及存储介质
CN107990899A (zh) 一种基于slam的定位方法和系统
CN109242913A (zh) 采集器相对参数的标定方法、装置、设备和介质
US20050234333A1 (en) Marker detection method and apparatus, and position and orientation estimation method
CN107633526A (zh) 一种图像跟踪点获取方法及设备、存储介质
EP3114647A2 (en) Method and system for 3d capture based on structure from motion with simplified pose detection
JP6464938B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
CN109284784A (zh) 一种针对直播场景视频的内容审核模型训练方法及装置
CN110415358A (zh) 一种实时三维跟踪方法
CN108564653B (zh) 基于多Kinect的人体骨架追踪系统及方法
CN113177468B (zh) 人体行为检测方法、装置、电子设备及存储介质
CN111709973A (zh) 目标跟踪方法、装置、设备及存储介质
CN110866977A (zh) 增强现实处理方法及装置、系统、存储介质和电子设备
CN111191582B (zh) 三维目标检测方法、检测装置、终端设备及计算机可读存储介质
JP7379065B2 (ja) 情報処理装置、情報処理方法、およびプログラム
KR20200076267A (ko) 골격의 길이 정보를 이용한 제스쳐 인식 방법 및 처리 시스템
CN108430032A (zh) 一种实现vr/ar设备位置共享的方法及设备
CN113447128B (zh) 一种多人体温检测方法、装置、电子设备及存储介质
CN111354029A (zh) 手势深度确定方法、装置、设备及存储介质
CN110399039A (zh) 一种基于眼动跟踪的虚实场景融合方法
CN110349504A (zh) 一种基于ar的博物馆导览系统
KR101010904B1 (ko) 마커를 사용하지 않는 증강공간 제공 장치
CN110324342A (zh) 一种增强现实注册方法
CN112365530A (zh) 增强现实处理方法及装置、存储介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191011

RJ01 Rejection of invention patent application after publication