CN105898287B - 基于裸眼立体显示的机器视觉分析装置及方法 - Google Patents

基于裸眼立体显示的机器视觉分析装置及方法 Download PDF

Info

Publication number
CN105898287B
CN105898287B CN201610294837.0A CN201610294837A CN105898287B CN 105898287 B CN105898287 B CN 105898287B CN 201610294837 A CN201610294837 A CN 201610294837A CN 105898287 B CN105898287 B CN 105898287B
Authority
CN
China
Prior art keywords
machine vision
bore hole
stereoscopic display
hole stereoscopic
analytical equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610294837.0A
Other languages
English (en)
Other versions
CN105898287A (zh
Inventor
廖洪恩
范真诚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN201610294837.0A priority Critical patent/CN105898287B/zh
Publication of CN105898287A publication Critical patent/CN105898287A/zh
Application granted granted Critical
Publication of CN105898287B publication Critical patent/CN105898287B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开一种基于裸眼立体显示的机器视觉分析装置及方法,能够克服现有的机器视觉领域信息传输安全性较弱、鲁棒性较差的缺陷,且能够实现波长范围较大的裸眼三维显示。所述装置包括:裸眼立体显示设备、机器视觉采集设备和机器视觉分析设备;其中,所述裸眼立体显示设备,用于显示需要显示的三维立体影像,其中,所述显示波段包括不可见光波段的子集;所述机器视觉采集设备,用于采集所述三维立体影像;所述机器视觉分析设备,用于利用所述机器视觉采集设备采集的影像数据进行机器视觉分析。

Description

基于裸眼立体显示的机器视觉分析装置及方法
技术领域
本发明涉及机器视觉技术领域,具体涉及一种基于裸眼立体显示的机器视觉分析装置及方法。
背景技术
机器视觉分析主要包括物体识别、定位、追踪等方面。基于显示装置的机器视觉分析能够根据采集到的显示信息进行分析与判断。传统二维显示装置作为一种输入输出设备,能够将数据通过特定的传输设备显示到屏幕上并呈现在观察者眼前。在传输的各种数据中,图像信息是显示装置最基本的显示数据。利用相机等采集设备能够对传输的数据进行采集,并同时进行分析处理,实现物体识别、定位、追踪等。然而,基于可见光二维显示装置的机器视觉分析存在以下的缺点:1、基于可见光的影像信息人眼可见,信息传输安全性较弱。2、基于可见光的机器视觉分析受到外界可见光环境的干扰,鲁棒性较差。因此,目前红外显示装置得到越来越多的关注。将红外显示装置用于机器视觉分析,能够提高信息传输的安全性与鲁棒性。
然而,传统二维显示(基于可见光或红外光二维显示装置)仅能够显示二维影像,缺乏三维影像信息的显示。相较于传统二维显示装置,裸眼三维显示装置因为其能够显示丰富的三维图像信息、提供更为直观的视觉感受、并且观察者无需佩戴特质眼镜等特点而引起越来越多的关注。现在,国外的多家公司都在进行基于可见光的裸眼三维显示器的研究与开发并已经有相关产品问世。但是,已有裸眼三维显示装置仅能够实现人眼可见的三维图像显示,无法实现波长范围更大的裸眼三维显示。
发明内容
有鉴于此,本发明实施例提供一种基于裸眼立体显示的机器视觉分析装置及方法,能够克服现有的机器视觉领域信息传输安全性较弱、鲁棒性较差的缺陷,且能够实现波长范围较大的裸眼三维显示。
一方面,本发明实施例提出一种基于裸眼立体显示的机器视觉分析装置,包括:
裸眼立体显示设备、机器视觉采集设备和机器视觉分析设备;其中,
所述裸眼立体显示设备,用于显示需要显示的三维立体影像,其中,所述显示波段包括不可见光波段的子集;
所述机器视觉采集设备,用于采集所述三维立体影像;
所述机器视觉分析设备,用于利用所述机器视觉采集设备采集的影像数据进行机器视觉分析。
另一方面,本发明实施例提出一种基于上述的基于裸眼立体显示的机器视觉分析装置的分析方法,包括:
所述裸眼立体显示设备显示需要显示的三维立体影像;
所述机器视觉采集设备采集所述三维立体影像;
所述机器视觉分析设备利用所述机器视觉采集设备采集的影像数据进行机器视觉分析。
本发明实施例提供的基于裸眼立体显示的机器视觉分析装置及方法,利用显示波段包括不可见光波段的子集的裸眼立体显示设备显示需要显示的三维立体影像,由于显示的三维立体影像人眼不可见,克服了现有的机器视觉领域信息传输安全性较弱的缺陷,而且在机器视觉分析设备采集影像数据时能够减少可见光的影响,从而克服了现有的机器视觉领域鲁棒性较差的缺陷,另一方面,通过调整裸眼立体显示设备的显示波段能够实现波长范围较大的裸眼三维显示。
附图说明
图1为本发明基于裸眼立体显示的机器视觉分析装置一实施例的结构示意图;
图2为本发明一实施例的被动式的立体全像型红外裸眼立体显示设备的裸眼立体显示部件示意图;
图3为本发明一实施例的可以被机器视觉探测到的三维红外标记物;
图4为本发明切换显示不同波段三维影像的示意图;
图5为本发明基于裸眼立体显示的机器视觉分析方法一实施例的流程示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本实施例公开一种基于裸眼立体显示的机器视觉分析装置,包括:
裸眼立体显示设备1、机器视觉采集设备2和机器视觉分析设备3;其中,
所述裸眼立体显示设备1,用于显示需要显示的三维立体影像,其中,所述显示波段包括不可见光波段的子集;
所述机器视觉采集设备2,用于采集所述三维立体影像;
所述机器视觉分析设备3,用于利用所述机器视觉采集设备2采集的影像数据进行机器视觉分析。
本发明实施例提供的基于裸眼立体显示的机器视觉分析装置,利用显示波段包括不可见光波段的子集的裸眼立体显示设备显示需要显示的三维立体影像,由于显示的三维立体影像人眼不可见,克服了现有的机器视觉领域信息传输安全性较弱的缺陷,而且在机器视觉分析设备采集影像数据时能够减少可见光的影响,从而克服了现有的机器视觉领域鲁棒性较差的缺陷,另一方面,通过调整裸眼立体显示设备的显示波段能够实现波长范围较大的裸眼三维显示。
可选地,在本发明基于裸眼立体显示的机器视觉分析装置的另一实施例中,所述显示波段包括红外波段,所述机器视觉采集设备为基于红外光的机器视觉采集设备,所述裸眼立体显示设备有自发光式和被动发光式两种。
本发明实施例中,通过显示波段包括红外波段的红外裸眼立体显示设备显示出红外三维影像,不仅能够保证显示与传输信息的安全性,还使基于红外光的红外机器视觉采集设备能够捕获鲁棒性更高的红外影像,进行准确的图像识别、定位、追踪等。
可选地,在本发明基于裸眼立体显示的机器视觉分析装置的另一实施例中,所述裸眼立体显示部件包括光栅型、立体全像型、光场型和全息型。
本发明实施例中,裸眼立体显示部件可以包括光栅型、立体全像型、光场型和全息型,也可以包括其它类型,本发明对此不作限定。
可选地,在本发明基于裸眼立体显示的机器视觉分析装置的另一实施例中,若所述裸眼立体显示设备为被动发光式的立体全像型裸眼立体显示设备,所述被动发光式的立体全像型裸眼立体显示设备包括:光源发生器和裸眼立体显示部件,所述裸眼立体显示部件包括像素阵列和透镜阵列;
所述光源发生器产生的红外光照射所述像素阵列后产生的光线经所述透镜阵列调制后形成所述三维立体影像,其中,所述像素阵列记录有模拟的所述透镜阵列将模拟的所述三维立体影像投影到焦面上产生的图像信息。
根据实际需求,裸眼立体显示设备不仅可以显示某一特定波段下的三维影像,也可以切换显示多种波段下的三维影像。例如,可以切换显示红外裸眼立体影像和可见光裸眼立体影像,其中,基于可见光的裸眼三维影像用于观察者进行观察,基于红外的裸眼三维影像用于采集设备进行采集、利用机器视觉的方法进行识别分析。该显示设备能够同时满足人眼观察与机器视觉采集设备的高鲁棒性采集,实现准确图像识别、定位、追踪等,并且切换速度可调。如图2所示是本发明被动式的立体全像型红外裸眼立体显示设备的裸眼立体显示部件示意图。需要说明的是,被动式裸眼立体显示设备的其它类型(包括有光栅型、光场型和全息型)进行三维影像显示的原理与立体全像型裸眼立体显示设备进行三维影像显示的原理相同,只是所使用的进行光线调制的结构不同。此外,自发光式裸眼立体显示设备与被动发光式的唯一区别在于像素阵列能够自发光,即自发光式裸眼立体显示设备的像素阵列可取代光源发生器,从而自发光式裸眼立体显示设备不需要光源发生器,通过自发光的像素阵列和光线调制结构(比如透镜阵列、光栅等)即可实现三维影像显示。此外,还可以借助于可见的或红外的裸眼三维立体标记物来提高裸眼立体显示设备显示的三维立体影像的定位与追踪精度。比如,在裸眼立体显示渲染过程,设置待显示的原始三维数据的位置与标记物的位置相同,通过模拟透镜阵列和成像面位置,模拟物体中每个点发出的光线,得到光线穿过透镜阵列后在图像层成的像。而在裸眼立体显示再现过程,通过显示图像层成的像,并在图像前放置具有和渲染过程相同参数的透镜阵列。根据光路可逆原理,能够在空间中再现三维影像。为了进行定位与追踪,可以同时显示标记物与裸眼三维立体影像,因为两者位置一样,通过定位标记物的位置实现追踪点的定位与追踪。如图3所示为可以用于显示器定位追踪的一种红外裸眼三维立体标记物的图像。根据生成的这种红外裸眼三维立体标记物,能够完成高鲁棒性的标记物识别、分析、定位与追踪,并进一步根据标记物实现对显示器与三维影像的定位追踪。需要说明的是,图3中所示的标记物只是适用于本发明的标记物中的一种,本发明还可以使用其它类型的标记物进行辅助定位与追踪,比如可以使用球体等其它具有特殊形状的标记物,只要能够对其标记点定位即可。而且本发明对组成标记物的结构的数量不作限定,以能够实现待追踪物的定位为宜。
可选地,在本发明基于裸眼立体显示的机器视觉分析装置的另一实施例中,所述光源发生器可切换发出红外光和可见光。
如图4所示是本发明切换显示不同波段三维影像的示意图,可以显示波长范围更广的裸眼三维影像,主要包括人眼可观察的可见光裸眼三维立体影像和用于机器视觉等领域的红外裸眼三维立体影像。当两者的切换速度足够快时能够满足人眼连续观察。需要说明的是,图4中显示的红外裸眼三维立体影像可以为待追踪物的红外影像和标记物的红外影像。当待追踪物的红外影像可以展现给用户时,可以使显示的可见光裸眼三维立体影像为待追踪物的影像,而显示的红外裸眼三维立体影像为标记物的红外影像。该装置能够满足人眼观察裸眼三维影像的同时,在保证传输信息的安全性的同时满足机器视觉的高鲁棒性的准确图像识别与定位追踪。
可选地,在本发明基于裸眼立体显示的机器视觉分析装置的另一实施例中,所述机器视觉采集设备为单目相机、双目相机或多目相机。
可选地,在本发明基于裸眼立体显示的机器视觉分析装置的另一实施例中,若机器视觉分析为物体识别,则所述机器视觉分析设备采用已有图像识别算法进行分析处理;
若机器视觉分析为物体定位和追踪,则所述机器视觉分析设备分别采用已有空间定位算法和物体追踪算法进行分析处理。
若机器视觉采集设备选用单目相机,则可以实现物体二维识别与追踪。可以通过特征或深度学习等方式识别二维图像;通过对视频流每帧之间的相互关系实现物体追踪。
若机器视觉采集设备选用双目相机或多目相机,则可以实现物体的三维识别与追踪。可以通过采集数据重建得到三维物体,利用三维特征或深度学习等方式识别三维物体;通过对基于视频流每组帧重建得到的三维物体之间的相互关系实现物体三维追踪。同时,可以通过基于多视图的三角化等方式实现物体的定位。
参看图5,本实施例公开一种基于上述实施例任一项所述的基于裸眼立体显示的机器视觉分析装置的分析方法,包括:
S1、所述裸眼立体显示设备显示需要显示的三维立体影像;
S2、所述机器视觉采集设备采集所述三维立体影像;
S3、所述机器视觉分析设备利用所述机器视觉采集设备采集的影像数据进行机器视觉分析。
本实施例提供的分析方法,利用显示波段包括不可见光波段的子集的裸眼立体显示设备显示需要显示的三维立体影像,由于显示的三维立体影像人眼不可见,克服了现有的机器视觉领域信息传输安全性较弱的缺陷,而且在机器视觉分析设备采集影像数据时能够减少可见光的影响,从而克服了现有的机器视觉领域鲁棒性较差的缺陷,另一方面,通过调整裸眼立体显示设备的显示波段能够实现波长范围较大的裸眼三维显示。
虽然结合附图描述了本发明的实施方式,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (5)

1.一种基于裸眼立体显示的机器视觉分析装置,其特征在于,包括:
裸眼立体显示设备、机器视觉采集设备和机器视觉分析设备;其中,
所述裸眼立体显示设备,用于显示需要显示的三维立体影像,其中,所述显示波段包括不可见光波段的子集;
所述机器视觉采集设备,用于采集所述三维立体影像;
所述机器视觉分析设备,用于利用所述机器视觉采集设备采集的影像数据进行机器视觉分析;
所述显示波段包括红外波段,所述机器视觉采集设备为基于红外光的机器视觉采集设备,所述裸眼立体显示设备有自发光式和被动发光式两种;
所述裸眼立体显示部件包括立体全像型、光场型和全息型;
若所述裸眼立体显示设备为被动发光式的立体全像型裸眼立体显示设备,所述被动发光式的立体全像型裸眼立体显示设备包括:光源发生器和裸眼立体显示部件,所述裸眼立体显示部件包括像素阵列和凸透镜阵列;
所述光源发生器产生的红外光照射所述像素阵列后产生的光线经所述凸透镜阵列调制后形成所述三维立体影像,其中,所述像素阵列记录有模拟的所述凸透镜阵列将模拟的所述三维立体影像投影到焦面上产生的图像信息。
2.根据权利要求1所述的基于裸眼立体显示的机器视觉分析装置,其特征在于,所述光源发生器可切换发出红外光和可见光。
3.根据权利要求1所述的基于裸眼立体显示的机器视觉分析装置,其特征在于,所述机器视觉采集设备为单目相机、双目相机或多目相机。
4.根据权利要求1所述的基于裸眼立体显示的机器视觉分析装置,其特征在于,若机器视觉分析为物体识别,则所述机器视觉分析设备采用已有图像识别算法进行分析处理,
若机器视觉分析为物体定位和追踪,则所述机器视觉分析设备分别采用已有空间定位算法和物体追踪算法进行分析处理。
5.一种基于权利要求1至4任一项所述的基于裸眼立体显示的机器视觉分析装置的分析方法,其特征在于,包括:
所述裸眼立体显示设备显示需要显示的三维立体影像;
所述机器视觉采集设备采集所述三维立体影像;
所述机器视觉分析设备利用所述机器视觉采集设备采集的影像数据进行机器视觉分析。
CN201610294837.0A 2016-05-05 2016-05-05 基于裸眼立体显示的机器视觉分析装置及方法 Active CN105898287B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610294837.0A CN105898287B (zh) 2016-05-05 2016-05-05 基于裸眼立体显示的机器视觉分析装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610294837.0A CN105898287B (zh) 2016-05-05 2016-05-05 基于裸眼立体显示的机器视觉分析装置及方法

Publications (2)

Publication Number Publication Date
CN105898287A CN105898287A (zh) 2016-08-24
CN105898287B true CN105898287B (zh) 2018-08-28

Family

ID=56702151

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610294837.0A Active CN105898287B (zh) 2016-05-05 2016-05-05 基于裸眼立体显示的机器视觉分析装置及方法

Country Status (1)

Country Link
CN (1) CN105898287B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109961478A (zh) * 2017-12-25 2019-07-02 深圳超多维科技有限公司 一种裸眼立体显示方法、装置及设备
CN108063940B (zh) * 2017-12-25 2023-10-27 张家港康得新光电材料有限公司 一种人眼跟踪裸眼3d显示系统的校正系统和方法
CN108198238B (zh) * 2018-01-30 2021-06-22 北京小米移动软件有限公司 全息投影设备、方法、装置及计算机可读存储介质
CN110572634A (zh) * 2018-06-06 2019-12-13 广西百业晟科技发展有限责任公司 一种裸眼3d投影显示系统
CN109246417A (zh) * 2018-11-27 2019-01-18 武汉市天蝎科技有限公司 一种基于裸眼立体显示的机器视觉分析系统及方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103105146A (zh) * 2013-01-22 2013-05-15 福州大学 用于三维显示的柱透镜光栅的平整性检测方法
CN103353689A (zh) * 2013-06-28 2013-10-16 京东方科技集团股份有限公司 光阀器件、红外显示装置、专用眼镜及系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6757422B1 (en) * 1998-11-12 2004-06-29 Canon Kabushiki Kaisha Viewpoint position detection apparatus and method, and stereoscopic image display system
CN101334846B (zh) * 2008-08-04 2011-04-20 刘显福 一种广谱视频图像的采集识别方法及其设备
CN103176606B (zh) * 2013-04-15 2016-03-16 上海图漾信息科技有限公司 基于双目视觉识别的平面交互系统及方法
CN103472588B (zh) * 2013-09-24 2015-12-23 深圳市华星光电技术有限公司 3d显示装置及3d显示方法
CN103595916A (zh) * 2013-11-11 2014-02-19 南京邮电大学 一种双摄像头目标跟踪系统及其实现方法
CN105160278B (zh) * 2015-08-28 2017-11-21 上海斐讯数据通信技术有限公司 屏幕隐私显示/阅读方法及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103105146A (zh) * 2013-01-22 2013-05-15 福州大学 用于三维显示的柱透镜光栅的平整性检测方法
CN103353689A (zh) * 2013-06-28 2013-10-16 京东方科技集团股份有限公司 光阀器件、红外显示装置、专用眼镜及系统

Also Published As

Publication number Publication date
CN105898287A (zh) 2016-08-24

Similar Documents

Publication Publication Date Title
CN105898287B (zh) 基于裸眼立体显示的机器视觉分析装置及方法
CN106131530B (zh) 一种裸眼3d虚拟现实展示系统及其展示方法
CN1706201B (zh) 立体视觉用途图像提供方法和立体图像显示设备
CN102170577B (zh) 用于处理视频图像的方法和系统
CN105739707B (zh) 电子设备、脸部识别跟踪方法和三维显示方法
CN102098524B (zh) 跟踪式立体显示设备及跟踪式立体显示方法
CN101729920B (zh) 一种自由视角立体视频显示方法
CN102209254B (zh) 一种一维集成成像方法和装置
CN104883556A (zh) 基于增强现实的三维显示方法和增强现实眼镜
CN103207664A (zh) 一种图像处理方法和设备
CN107105216B (zh) 一种基于针孔阵列的连续视差、广视角的三维光场显示装置
CN101636747A (zh) 二维/三维数字信息获取和显示设备
CN105809654A (zh) 目标对象跟踪方法、装置和立体显示设备及方法
Kovács et al. Quality Measurement Of 3D Light-Field Displays
CN103065359A (zh) 一种光学成像的三维轮廓重建系统及其重建方法
CN113238472A (zh) 基于频域位移的高分辨率光场显示方法及装置
CN104635337A (zh) 可提高立体图像显示分辨率的蜂窝式透镜阵列设计方法
Wu et al. Depth mapping of integral images through viewpoint image extraction with a hybrid disparity analysis algorithm
KR20140041012A (ko) 다중 패턴 빔을 이용하는 3차원 촬영 장치 및 방법
CN111079673A (zh) 一种基于裸眼三维的近红外人脸识别方法
CN106817511A (zh) 一种用于跟踪式自由立体显示器的图像补偿方法
KR101960577B1 (ko) 뷰 공간에 관한 스테레오 정보를 송수신하는 방법
CN108616736A (zh) 用于立体显示的跟踪定位方法及装置
CN111308698A (zh) 一种定向显示屏与一种感应式三维显示装置及其显示方法
CN106918321A (zh) 一种利用图像上目标物视差进行测距的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant