CN112634346A - 基于ar眼镜的现实物品尺寸获取方法和系统 - Google Patents

基于ar眼镜的现实物品尺寸获取方法和系统 Download PDF

Info

Publication number
CN112634346A
CN112634346A CN202011523003.5A CN202011523003A CN112634346A CN 112634346 A CN112634346 A CN 112634346A CN 202011523003 A CN202011523003 A CN 202011523003A CN 112634346 A CN112634346 A CN 112634346A
Authority
CN
China
Prior art keywords
real
real object
glasses
size
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011523003.5A
Other languages
English (en)
Inventor
孙立
叶柳青
刘晖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Shadow Creator Information Technology Co Ltd
Original Assignee
Shanghai Shadow Creator Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Shadow Creator Information Technology Co Ltd filed Critical Shanghai Shadow Creator Information Technology Co Ltd
Priority to CN202011523003.5A priority Critical patent/CN112634346A/zh
Publication of CN112634346A publication Critical patent/CN112634346A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Geometry (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种基于AR眼镜的现实物品尺寸获取方法和系统,包括:原始现实图像获取步骤:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;热特征分布现实图像获取步骤:AR眼镜通过红外成像设备获取AR眼镜前方的实时的现实环境的图像,得到热特征分布现实图像;现实物品尺寸获取步骤:根据热特征分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。本发明提供了一种新的有别于传统图像识别得到现实物品的方法。

Description

基于AR眼镜的现实物品尺寸获取方法和系统
技术领域
本发明涉及AR领域,具体地,涉及基于AR眼镜的现实物品尺寸获取方法和系统。
背景技术
百度百科AR词条公开了:增强现实(Augmented Real ity,简称AR),增强现实技术也被称为扩增现实,AR增强现实技术是促使真实世界信息和虚拟世界信息内容之间综合在一起的较新的技术内容,其将原本在现实世界的空间范围中比较难以进行体验的实体信息在电脑等科学技术的基础上,实施模拟仿真处理,叠加将虚拟信息内容在真实世界中加以有效应用,并且在这一过程中能够被人类感官所感知,从而实现超越现实的感官体验。真实环境和虚拟物体之间重叠之后,能够在同一个画面以及空间中同时存在。增强现实技术不仅能够有效体现出真实世界的内容,也能够促使虚拟的信息内容显示出来,这些细腻内容相互补充和叠加。在视觉化的增强现实中,用户需要在头盔显示器的基础上,促使真实世界能够和电脑图形之间重合在一起,在重合之后可以充分看到真实的世界围绕着它。增强现实技术中主要有多媒体和三维建模以及场景融合等新的技术和手段,增强现实所提供的信息内容和人类能够感知的信息内容之间存在着明显不同。
现有技术中的AR眼镜对于现实物品从图像中的分割提取有待优化。
发明内容
针对现有技术中的缺陷,本发明的目的是提供一种基于AR眼镜的现实物品尺寸获取方法和系统。
根据本发明提供的一种基于AR眼镜的现实物品尺寸获取方法,包括:
原始现实图像获取步骤:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
热特征分布现实图像获取步骤:AR眼镜通过红外成像设备获取AR眼镜前方的实时的现实环境的图像,得到热特征分布现实图像;
现实物品尺寸获取步骤:根据热特征分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
优选地,在所述现实物品尺寸获取步骤中,将热特征分布现实图像中属于不同温度区间的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
根据本发明提供的一种基于AR眼镜的现实物品尺寸获取方法,包括:
原始现实图像获取步骤:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
景深分布现实图像获取步骤:AR眼镜通过景深摄像设备获取AR眼镜前方的实时的现实环境的图像,得到景深分布现实图像;
现实物品尺寸获取步骤:根据景深分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
优选地,在所述现实物品尺寸获取步骤中,将景深分布现实图像中属于不同景深的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
根据本发明提供的一种AR眼镜的增强方法,包括:
虚拟物品尺寸获取步骤:获取虚拟物品的尺寸;
现实物品尺寸获取步骤:根据所述的基于AR眼镜的现实物品尺寸获取方法,获取现实物品的尺寸:
尺寸匹配增强步骤:从所述多个现实物品中找到尺寸与所述虚拟物品的尺寸最匹配的现实物品,记为被叠加现实物品;
图像叠加步骤:通过AR眼镜,在所述被叠加现实物品上叠加显示所述虚拟物品。
根据本发明提供的一种基于AR眼镜的现实物品尺寸获取系统,包括:
原始现实图像获取模块:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
热特征分布现实图像获取模块:AR眼镜通过红外成像设备获取AR眼镜前方的实时的现实环境的图像,得到热特征分布现实图像;
现实物品尺寸获取模块:根据热特征分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
优选地,在所述现实物品尺寸获取模块中,将热特征分布现实图像中属于不同温度区间的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
根据本发明提供的一种基于AR眼镜的现实物品尺寸获取系统,包括:
原始现实图像获取模块:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
景深分布现实图像获取模块:AR眼镜通过景深摄像设备获取AR眼镜前方的实时的现实环境的图像,得到景深分布现实图像;
现实物品尺寸获取模块:根据景深分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
优选地,在所述现实物品尺寸获取模块中,将景深分布现实图像中属于不同景深的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
根据本发明提供的一种AR眼镜的增强系统,包括:
虚拟物品尺寸获取模块:获取虚拟物品的尺寸;
现实物品尺寸获取模块:根据所述的基于AR眼镜的现实物品尺寸获取系统,获取现实物品的尺寸:
尺寸匹配增强模块:从所述多个现实物品中找到尺寸与所述虚拟物品的尺寸最匹配的现实物品,记为被叠加现实物品;
图像叠加模块:通过AR眼镜,在所述被叠加现实物品上叠加显示所述虚拟物品。
与现有技术相比,本发明具有如下的有益效果:
本发明提供了一种新的有别于传统图像识别得到现实物品的方法。例如利用热特征分布图像或者是景深图像中的分界线得到现实物品的轮廓边界。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明方法的步骤流程图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变化和改进。这些都属于本发明的保护范围。
根据本发明提供的一种AR眼镜的增强方法,包括:
虚拟物品尺寸获取步骤:获取虚拟物品的尺寸;具体地,虚拟物品的尺寸为构建虚拟物品时虚拟物品的属性,从虚拟物品的属性中获得虚拟物品给的尺寸。虚拟物品的尺寸仅为虚拟物品向AR眼镜佩戴者所展示的表面的尺寸,例如虚拟手机的尺寸仅仅为虚拟手机屏幕所在机身表面的长宽,而不包括虚拟手机的机身厚度。
现实物品尺寸获取步骤:获取现实物品的尺寸:一个优选例中,通过图像识别得到是什么现实物品,然后到数据库中找到该现实物品的尺寸;另一个优选例中,在现实物品尺寸获取步骤中,提示AR眼镜佩戴者注视现实物品,根据AR眼镜佩戴者的注视点确定现实物品与AR眼镜佩戴者之间的间距,以及现实物品在AR眼镜具有的摄像头所捕获图像中的图像中的尺寸,然后根据所述间距与图像中的尺寸得到现实物品的实际尺寸,作为所述现实物品的尺寸与虚拟物品的尺寸进行匹配。其中,根据注视点并且根据AR眼镜佩戴者的眼动,能够得到AR眼镜佩戴者在注视点处现实物品与AR眼镜佩戴者的间距,更为具体地,通过得知AR眼镜佩戴者双目观看的视线,能够得到双目视线之间的角度,将双目视线的交叉处与AR眼镜佩戴者的间距作为注视点处现实物品与AR眼镜佩戴者之间的间距。
在所述现实物品尺寸获取步骤中,第一优选例中,通过如下方式获得现实物品的尺寸,包括:
原始现实图像获取步骤:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;具体地,AR眼镜上设置有摄像头,摄像头拍摄实时画面,例如微信视频聊天时就利用了智能手机上设置的前置或后置摄像头。AR眼镜具有的摄像头的朝向与AR眼镜的正前方同轴设置或平行设置。AR眼镜前方的视角取决于摄像头的取景视角,例如若摄像头的镜头为广角镜,则AR眼镜前方的视角相对于标准镜头要大。
热特征分布现实图像获取步骤:AR眼镜通过红外成像设备获取AR眼镜前方的实时的现实环境的图像,得到热特征分布现实图像;具体地,在所述热特征分布现实图像获取步骤中,将红外成像设备获取到的现实环境的红外成像图像作为热特征分布现实图像;在特征分布显示图像中,不同温度区间的区域以不同颜色的色块表示;例如,温度区间由高到低可分别用红色、橘色、绿色、蓝色表示,最高温度区间的图像区域就用红色的色块表示。由于计算机能够识别的颜色远远多于肉眼,因此本发明借助于计算机能够分辨出肉眼看来并不明显的不同颜色的色块。所有在优选例中,尽可能多的用更多的颜色表示不同的温度区间。
现实物品尺寸获取步骤:根据热特征分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。具体地,在所述现实物品尺寸获取步骤中,将热特征分布现实图像中属于不同温度区间的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。例如红色的装有开水的杯子与蓝色的冰凉的桌面中,红色区域与蓝色区域之前的分界线是杯子与桌子之间的边界,也是杯子的边缘。
在所述现实物品尺寸获取步骤中,第二优选例中,通过如下方式获得现实物品的尺寸,包括:
原始现实图像获取步骤:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
景深分布现实图像获取步骤:AR眼镜通过景深摄像设备获取AR眼镜前方的实时的现实环境的图像,得到景深分布现实图像;具体地,例如利用3D深感摄像头,也叫TOF镜头、景深镜头,能够获取景深分布现实图像。
现实物品尺寸获取步骤:根据景深分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。在所述现实物品尺寸获取步骤中,将景深分布现实图像中属于不同景深的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
尺寸匹配增强步骤:从所述多个现实物品中找到尺寸与所述虚拟物品的尺寸最匹配的现实物品,记为被叠加现实物品;所述虚拟物品为虚拟显示屏,所述虚拟物品的尺寸是虚拟显示屏的长宽,所述现实物品的尺寸是现实物品的平坦表面的长宽。当现实物品的平坦表面正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽相匹配,则令虚拟显示屏叠加显示在所述现实物品的平坦表面上;当现实物品的平坦表面没有正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽不相匹配,则对虚拟显示屏进行隐藏不显示。进一步优选地,AR眼镜佩戴者通过调整现实物品的姿态,能够开启或关闭虚拟物品的显示。当现实物品的平坦表面正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽相匹配,认为AR眼镜佩戴者输入了开启虚拟显示屏的指令,则令虚拟显示屏叠加显示在所述现实物品的平坦表面上;当现实物品的平坦表面没有正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽不相匹配,认为AR眼镜佩戴者输入了关闭虚拟显示屏的指令,则对虚拟显示屏进行隐藏不显示。
图像叠加步骤:通过AR眼镜,在所述被叠加现实物品上叠加显示所述虚拟物品。
根据本发明提供的一种AR眼镜的增强系统,包括:
虚拟物品尺寸获取模块:获取虚拟物品的尺寸;具体地,虚拟物品的尺寸为构建虚拟物品时虚拟物品的属性,从虚拟物品的属性中获得虚拟物品给的尺寸。虚拟物品的尺寸仅为虚拟物品向AR眼镜佩戴者所展示的表面的尺寸,例如虚拟手机的尺寸仅仅为虚拟手机屏幕所在机身表面的长宽,而不包括虚拟手机的机身厚度。
现实物品尺寸获取模块:获取现实物品的尺寸:一个优选例中,通过图像识别得到是什么现实物品,然后到数据库中找到该现实物品的尺寸;另一个优选例中,在现实物品尺寸获取模块中,提示AR眼镜佩戴者注视现实物品,根据AR眼镜佩戴者的注视点确定现实物品与AR眼镜佩戴者之间的间距,以及现实物品在AR眼镜具有的摄像头所捕获图像中的图像中的尺寸,然后根据所述间距与图像中的尺寸得到现实物品的实际尺寸,作为所述现实物品的尺寸与虚拟物品的尺寸进行匹配。其中,根据注视点并且根据AR眼镜佩戴者的眼动,能够得到AR眼镜佩戴者在注视点处现实物品与AR眼镜佩戴者的间距,更为具体地,通过得知AR眼镜佩戴者双目观看的视线,能够得到双目视线之间的角度,将双目视线的交叉处与AR眼镜佩戴者的间距作为注视点处现实物品与AR眼镜佩戴者之间的间距。
在所述现实物品尺寸获取模块中,第一优选例中,通过如下方式获得现实物品的尺寸,包括:
原始现实图像获取模块:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;具体地,AR眼镜上设置有摄像头,摄像头拍摄实时画面,例如微信视频聊天时就利用了智能手机上设置的前置或后置摄像头。AR眼镜具有的摄像头的朝向与AR眼镜的正前方同轴设置或平行设置。AR眼镜前方的视角取决于摄像头的取景视角,例如若摄像头的镜头为广角镜,则AR眼镜前方的视角相对于标准镜头要大。
热特征分布现实图像获取模块:AR眼镜通过红外成像设备获取AR眼镜前方的实时的现实环境的图像,得到热特征分布现实图像;具体地,在所述热特征分布现实图像获取模块中,将红外成像设备获取到的现实环境的红外成像图像作为热特征分布现实图像;在特征分布显示图像中,不同温度区间的区域以不同颜色的色块表示;例如,温度区间由高到低可分别用红色、橘色、绿色、蓝色表示,最高温度区间的图像区域就用红色的色块表示。由于计算机能够识别的颜色远远多于肉眼,因此本发明借助于计算机能够分辨出肉眼看来并不明显的不同颜色的色块。所有在优选例中,尽可能多的用更多的颜色表示不同的温度区间。
现实物品尺寸获取模块:根据热特征分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。具体地,在所述现实物品尺寸获取模块中,将热特征分布现实图像中属于不同温度区间的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。例如红色的装有开水的杯子与蓝色的冰凉的桌面中,红色区域与蓝色区域之前的分界线是杯子与桌子之间的边界,也是杯子的边缘。
在所述现实物品尺寸获取模块中,第二优选例中,通过如下方式获得现实物品的尺寸,包括:
原始现实图像获取模块:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
景深分布现实图像获取模块:AR眼镜通过景深摄像设备获取AR眼镜前方的实时的现实环境的图像,得到景深分布现实图像;具体地,例如利用3D深感摄像头,也叫TOF镜头、景深镜头,能够获取景深分布现实图像。
现实物品尺寸获取模块:根据景深分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。在所述现实物品尺寸获取模块中,将景深分布现实图像中属于不同景深的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
尺寸匹配增强模块:从所述多个现实物品中找到尺寸与所述虚拟物品的尺寸最匹配的现实物品,记为被叠加现实物品;所述虚拟物品为虚拟显示屏,所述虚拟物品的尺寸是虚拟显示屏的长宽,所述现实物品的尺寸是现实物品的平坦表面的长宽。当现实物品的平坦表面正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽相匹配,则令虚拟显示屏叠加显示在所述现实物品的平坦表面上;当现实物品的平坦表面没有正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽不相匹配,则对虚拟显示屏进行隐藏不显示。进一步优选地,AR眼镜佩戴者通过调整现实物品的姿态,能够开启或关闭虚拟物品的显示。当现实物品的平坦表面正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽相匹配,认为AR眼镜佩戴者输入了开启虚拟显示屏的指令,则令虚拟显示屏叠加显示在所述现实物品的平坦表面上;当现实物品的平坦表面没有正面朝向AR眼镜佩戴者时,在AR眼镜具有的摄像头采集到的现实物品的平坦表面的轮廓的长宽与所述虚拟显示屏的长宽不相匹配,认为AR眼镜佩戴者输入了关闭虚拟显示屏的指令,则对虚拟显示屏进行隐藏不显示。
图像叠加模块:通过AR眼镜,在所述被叠加现实物品上叠加显示所述虚拟物品。
本领域技术人员知道,除了以纯计算机可读程序代码方式实现本发明提供的系统、装置及其各个模块以外,完全可以通过将方法步骤进行逻辑编程来使得本发明提供的系统、装置及其各个模块以逻辑门、开关、专用集成电路、可编程逻辑控制器以及嵌入式微控制器等的形式来实现相同程序。所以,本发明提供的系统、装置及其各个模块可以被认为是一种硬件部件,而对其内包括的用于实现各种程序的模块也可以视为硬件部件内的结构;也可以将用于实现各种功能的模块视为既可以是实现方法的软件程序又可以是硬件部件内的结构。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变化或修改,这并不影响本发明的实质内容。在不冲突的情况下,本申请的实施例和实施例中的特征可以任意相互组合。

Claims (10)

1.一种基于AR眼镜的现实物品尺寸获取方法,其特征在于,包括:
原始现实图像获取步骤:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
热特征分布现实图像获取步骤:AR眼镜通过红外成像设备获取AR眼镜前方的实时的现实环境的图像,得到热特征分布现实图像;
现实物品尺寸获取步骤:根据热特征分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
2.根据权利要求1所述的基于AR眼镜的现实物品尺寸获取方法,其特征在于,在所述现实物品尺寸获取步骤中,将热特征分布现实图像中属于不同温度区间的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
3.一种基于AR眼镜的现实物品尺寸获取方法,其特征在于,包括:
原始现实图像获取步骤:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
景深分布现实图像获取步骤:AR眼镜通过景深摄像设备获取AR眼镜前方的实时的现实环境的图像,得到景深分布现实图像;
现实物品尺寸获取步骤:根据景深分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
4.根据权利要求3所述的基于AR眼镜的现实物品尺寸获取方法,其特征在于,在所述现实物品尺寸获取步骤中,将景深分布现实图像中属于不同景深的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
5.一种AR眼镜的增强方法,其特征在于,包括:
虚拟物品尺寸获取步骤:获取虚拟物品的尺寸;
现实物品尺寸获取步骤:根据权利要求1至4中任一项所述的基于AR眼镜的现实物品尺寸获取方法,获取现实物品的尺寸:
尺寸匹配增强步骤:从所述多个现实物品中找到尺寸与所述虚拟物品的尺寸最匹配的现实物品,记为被叠加现实物品;
图像叠加步骤:通过AR眼镜,在所述被叠加现实物品上叠加显示所述虚拟物品。
6.一种基于AR眼镜的现实物品尺寸获取系统,其特征在于,包括:
原始现实图像获取模块:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
热特征分布现实图像获取模块:AR眼镜通过红外成像设备获取AR眼镜前方的实时的现实环境的图像,得到热特征分布现实图像;
现实物品尺寸获取模块:根据热特征分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
7.根据权利要求6所述的基于AR眼镜的现实物品尺寸获取系统,其特征在于,在所述现实物品尺寸获取模块中,将热特征分布现实图像中属于不同温度区间的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
8.一种基于AR眼镜的现实物品尺寸获取系统,其特征在于,包括:
原始现实图像获取模块:AR眼镜通过摄像头获取AR眼镜前方的实时的现实环境的图像,得到原始现实图像;
景深分布现实图像获取模块:AR眼镜通过景深摄像设备获取AR眼镜前方的实时的现实环境的图像,得到景深分布现实图像;
现实物品尺寸获取模块:根据景深分布得到现实物品的轮廓,根据现实物品的轮廓得到现实物品的尺寸。
9.根据权利要求8所述的基于AR眼镜的现实物品尺寸获取系统,其特征在于,在所述现实物品尺寸获取模块中,将景深分布现实图像中属于不同景深的区域之间的分界线作为从原始现实图像中分割得到现实物品图像的依据,其中,认为所述分界线与现实物品的边缘重叠。
10.一种AR眼镜的增强系统,其特征在于,包括:
虚拟物品尺寸获取模块:获取虚拟物品的尺寸;
现实物品尺寸获取模块:根据权利要求6至9中任一项所述的基于AR眼镜的现实物品尺寸获取系统,获取现实物品的尺寸:
尺寸匹配增强模块:从所述多个现实物品中找到尺寸与所述虚拟物品的尺寸最匹配的现实物品,记为被叠加现实物品;
图像叠加模块:通过AR眼镜,在所述被叠加现实物品上叠加显示所述虚拟物品。
CN202011523003.5A 2020-12-21 2020-12-21 基于ar眼镜的现实物品尺寸获取方法和系统 Pending CN112634346A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011523003.5A CN112634346A (zh) 2020-12-21 2020-12-21 基于ar眼镜的现实物品尺寸获取方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011523003.5A CN112634346A (zh) 2020-12-21 2020-12-21 基于ar眼镜的现实物品尺寸获取方法和系统

Publications (1)

Publication Number Publication Date
CN112634346A true CN112634346A (zh) 2021-04-09

Family

ID=75320468

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011523003.5A Pending CN112634346A (zh) 2020-12-21 2020-12-21 基于ar眼镜的现实物品尺寸获取方法和系统

Country Status (1)

Country Link
CN (1) CN112634346A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113676721A (zh) * 2021-08-20 2021-11-19 融信信息科技有限公司 一种ar眼镜的图像获取方法及系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103337079A (zh) * 2013-07-09 2013-10-02 广州新节奏智能科技有限公司 一种虚拟增强现实的教学方法及装置
CN104143212A (zh) * 2014-07-02 2014-11-12 惠州Tcl移动通信有限公司 基于穿戴设备的增强现实方法及系统
CN106600638A (zh) * 2016-11-09 2017-04-26 深圳奥比中光科技有限公司 一种增强现实的实现方法
CN107277481A (zh) * 2017-07-14 2017-10-20 维沃移动通信有限公司 一种图像处理方法及移动终端
CN107284379A (zh) * 2017-07-28 2017-10-24 合肥芯福传感器技术有限公司 用于车辆安全行驶的ar投影系统及投影方法
CN107608080A (zh) * 2017-10-31 2018-01-19 深圳增强现实技术有限公司 智能ar眼镜及智能ar眼镜景深信息获取方法
CN207506986U (zh) * 2017-11-21 2018-06-19 深圳市至高乐商业管理有限公司 一种体温游乐设备
CN110580672A (zh) * 2018-06-07 2019-12-17 刘丹 增强现实热感智能眼镜、显示方法及计算机存储介质
CN111028597A (zh) * 2019-12-12 2020-04-17 塔普翊海(上海)智能科技有限公司 混合现实的外语情景、环境、教具教学系统及其方法
WO2020250106A1 (en) * 2019-06-08 2020-12-17 Pankaj Raut A system and a method for teleportation for enhanced audio-visual interaction in mixed reality (mr) using a head mounted device (hmd)

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103337079A (zh) * 2013-07-09 2013-10-02 广州新节奏智能科技有限公司 一种虚拟增强现实的教学方法及装置
CN104143212A (zh) * 2014-07-02 2014-11-12 惠州Tcl移动通信有限公司 基于穿戴设备的增强现实方法及系统
CN106600638A (zh) * 2016-11-09 2017-04-26 深圳奥比中光科技有限公司 一种增强现实的实现方法
CN107277481A (zh) * 2017-07-14 2017-10-20 维沃移动通信有限公司 一种图像处理方法及移动终端
CN107284379A (zh) * 2017-07-28 2017-10-24 合肥芯福传感器技术有限公司 用于车辆安全行驶的ar投影系统及投影方法
CN107608080A (zh) * 2017-10-31 2018-01-19 深圳增强现实技术有限公司 智能ar眼镜及智能ar眼镜景深信息获取方法
CN207506986U (zh) * 2017-11-21 2018-06-19 深圳市至高乐商业管理有限公司 一种体温游乐设备
CN110580672A (zh) * 2018-06-07 2019-12-17 刘丹 增强现实热感智能眼镜、显示方法及计算机存储介质
WO2020250106A1 (en) * 2019-06-08 2020-12-17 Pankaj Raut A system and a method for teleportation for enhanced audio-visual interaction in mixed reality (mr) using a head mounted device (hmd)
CN111028597A (zh) * 2019-12-12 2020-04-17 塔普翊海(上海)智能科技有限公司 混合现实的外语情景、环境、教具教学系统及其方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
PALMERIUS, KL 等,: "Visualization of Heat Transfer Using Projector-Based Spatial Augmented Reality", 《3RD INTERNATIONAL CONFERENCE ON AUGMENTED REALITY, VIRTUAL REALITY AND COMPUTER GRAPHICS (SALENTO AVR)》, vol. 9768, pages 407 - 417 *
王娇 等,: "基于虚拟试衣系统下网购消费心理及营销模式的探讨", 《湖南包装》, vol. 31, no. 173, pages 78 - 80 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113676721A (zh) * 2021-08-20 2021-11-19 融信信息科技有限公司 一种ar眼镜的图像获取方法及系统

Similar Documents

Publication Publication Date Title
EP3547672A1 (en) Data processing method, device, and apparatus
CN106959759A (zh) 一种数据处理方法及装置
CN110378990B (zh) 增强现实场景展现方法、装置及存储介质
JP7387202B2 (ja) 3次元顔モデル生成方法、装置、コンピュータデバイス及びコンピュータプログラム
US20140160163A1 (en) Display Method And Display Device
CN110968188A (zh) 基于头部位置的应用程序放置
US20170195664A1 (en) Three-dimensional viewing angle selecting method and apparatus
US20170330381A1 (en) Apparatus and method for selectively displaying an operational environment
CN108259883B (zh) 图像处理方法、头戴式显示器以及可读存储介质
US20160148429A1 (en) Depth and Chroma Information Based Coalescence of Real World and Virtual World Images
WO2017204581A1 (ko) 혼합현실을 이용한 가상현실 시스템 및 그 구현방법
CN105869115B (zh) 一种基于kinect2.0的深度图像超分辨率方法
CN110915211A (zh) 虚拟现实中的物理输入设备
CN103034330A (zh) 一种用于视频会议的眼神交互方法及系统
WO2014128751A1 (ja) ヘッドマウントディスプレイ装置、ヘッドマウントディスプレイ用プログラム、およびヘッドマウントディスプレイ方法
US11212501B2 (en) Portable device and operation method for tracking user's viewpoint and adjusting viewport
CN106570852A (zh) 一种实时3d图像态势感知方法
CN107016730A (zh) 一种虚拟现实与真实场景融合的装置
CN106780757B (zh) 一种增强现实的方法
CN112634346A (zh) 基于ar眼镜的现实物品尺寸获取方法和系统
Ballestin et al. A registration framework for the comparison of video and optical see-through devices in interactive augmented reality
EP3038061A1 (en) Apparatus and method to display augmented reality data
CN106981100A (zh) 一种虚拟现实与真实场景融合的装置
CN109255838B (zh) 避免增强现实显示设备观看重影的方法及设备
TW202009922A (zh) 適於多人觀看的資訊顯示方法及資訊顯示裝置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination