CN108627816A - 影像测距方法、装置、存储介质和电子设备 - Google Patents

影像测距方法、装置、存储介质和电子设备 Download PDF

Info

Publication number
CN108627816A
CN108627816A CN201810168257.6A CN201810168257A CN108627816A CN 108627816 A CN108627816 A CN 108627816A CN 201810168257 A CN201810168257 A CN 201810168257A CN 108627816 A CN108627816 A CN 108627816A
Authority
CN
China
Prior art keywords
target data
image
object element
distance
data units
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810168257.6A
Other languages
English (en)
Inventor
徐保树
刘召军
刘秦
王继东
李昊阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang Science And Technology Co Ltd As Primus
Original Assignee
Shenyang Science And Technology Co Ltd As Primus
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang Science And Technology Co Ltd As Primus filed Critical Shenyang Science And Technology Co Ltd As Primus
Priority to CN201810168257.6A priority Critical patent/CN108627816A/zh
Publication of CN108627816A publication Critical patent/CN108627816A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/12Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves

Landscapes

  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

本公开的目的是提供一种影像测距方法、装置、存储介质和电子设备,以解决相关技术中影像测距效率不高的问题。所述方法包括:同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像;获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元;根据多个所述目标数据单元计算所述目标元素的距离。

Description

影像测距方法、装置、存储介质和电子设备
技术领域
本公开涉及影像处理领域,具体地,涉及一种影像测距方法、装置、存储介质和电子设备。
背景技术
相关技术中,可以通过单目相机获取目标场景的多帧影像,并利用多帧影像计算目标场景中的各目标元素的深度信息。计算过程中,处理器需要在获取多帧完整的影像后才能得出深度信息的计算结果,延迟较大。
此外,也可以距离探测仪器还可以通过主动向目标物体主动发出激光、雷达或者超声波等探测信号,以探测目标场景中各目标元素的深度信息。然而,可能会因为主动发出的探测信号在检测过程中互相干扰,或者因为目标场景中某一目标元素无法反射有效的探测回波,导致很多场景下无法得到有效测量数据。
发明内容
本公开的目的是提供一种影像测距方法、装置、存储介质和电子设备,以解决相关技术中影像测距效率不高的问题。
为了实现上述目的,第一方面,本公开提供一种影像测距方法,所述方法包括:
同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像;
获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元;
根据多个所述目标数据单元计算所述目标元素的距离。
可选的,所述根据多个所述目标数据单元计算所述目标元素的距离,包括:
调整所述数据单元的时序,以使多个所述目标数据单元的时序信息一致;
根据所述目标数据单元的时序信息,从预先存储的参数库中提取校正参数,并根据所述校正参数对多个所述目标数据单元进行校正,所述校正参数包括影像失真校正参数和立体匹配校正参数;
根据校正后的多个所述目标数据单元计算所述目标元素的距离。
可选的,所述根据多个所述目标数据单元计算所述目标元素的距离,包括:
根据多个所述目标数据单元计算拍摄所述目标元素时的视差信息;
根据所述视差信息和拍摄参数计算所述目标元素的距离。
第二方面,本公开提供一种影像测距装置,所述装置包括:
成像模块,用于同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像;
获取模块,用于获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元;
处理模块,用于根据多个所述目标数据单元计算所述目标元素的距离。
可选的,所述处理模块,包括:
时序调整子模块,用于调整所述数据单元的时序,以使多个所述目标数据单元的时序信息一致;
校正子模块,用于根据所述目标数据单元的时序信息,从预先存储的参数库中提取校正参数,并根据所述校正参数对多个所述目标数据单元进行校正,所述校正参数包括影像失真校正参数和立体匹配校正参数;
计算子模块,用于根据校正后的多个所述目标数据单元计算所述目标元素的距离。
可选的,所述处理模块,包括:
视差计算子模块,用于根据多个所述目标数据单元计算拍摄所述目标元素时的视差信息;
距离计算子模块,用于根据所述视差信息和拍摄参数计算所述目标元素的距离。
第三方面,本公开提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现所述影像测距方法的步骤。
第四方面,本公开提供一种电子设备,包括:
上述第三方面中的计算机可读存储介质;以及一个或者多个处理器,用于执行所述计算机可读存储介质中的程序。
上述技术方案,至少能达到以下技术效果:
通过同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像,获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元,再根据多个所述目标数据单元计算所述目标元素的距离。也就是说,无需获取目标场景的完整影像,仅接收到场景中对应目标元素的多路影像数据即可计算得到该目标元素的距离,这样,提升了影像测距的效率。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
图1是本公开一示例性实施例示出的一种FPGA影像测距系统框图。
图2所示是本公开一示例性实施例示出的一种影像测距方法的流程图。
图3是本公开一示例性实施例示出的一种影像测距装置框图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。
图1是本公开一示例性实施例示出的一种FPGA影像测距系统。如图1所示,该FPGA影像测距系统包括:FPGA处理单元,与所述FPGA处理单元相连的成像单元,与所述成像单元和所述FPGA处理单元相连的影像传输单元。其中,所述成像单元可以搭载第一COMS成像模块和第二COMS成像模块,每一COMS成像模块是与COMS芯片软硬件结合构成的。所述FPGA处理单元包括COMS驱动模块,影像串转并模块,第一影像校正模块和第二影像校正模块,第一校正参数存储模块和第二校正参数存储模块,影像视差信息计算模块,距离信息计算模块。
图2所示是本公开一示例性实施例示出的一种影像测距方法的流程图。所述方法可以应用于上述FPGA影像测距系统。所述方法包括:
S21,同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像。
示例地,FPGA影像测距系统中的COMS驱动模块驱动第一COMS成像模块和第二COMS成像模块对目标场景进行拍摄,获取目标场景的两个完整影像,并生成用于传输两个影像的两路数据流。然后,通过影像传输单元将两路数据流传输至FPGA处理单元的影像串转并模块。
S22,获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元。
S23,根据多个所述目标数据单元计算所述目标元素的距离。
可选的,所述根据多个所述目标数据单元计算所述目标元素的距离,包括:调整所述数据单元的时序,以使多个所述目标数据单元的时序信息一致;根据所述目标数据单元的时序信息,从预先存储的参数库中提取校正参数,并根据所述校正参数对多个所述目标数据单元进行校正,所述校正参数包括影像失真校正参数和立体匹配校正参数;根据校正后的多个所述目标数据单元计算所述目标元素的距离。
具体的,影像传输单元和影像串转并模块将第一路影像数据流和第二路影像数据流中的时序对齐,使两路数据流中对应目标场景中目标元素的目标数据单元保持一致的时序信息。接着,再由第一影像校正模块从第一校正参数存储模块中提取预先存储的影像失真校正参数和立体匹配校正参数,对第一路影像数据流中的目标数据单元进行校正。相似的,再由第二影像校正模块从第而校正参数存储模块中提取预先存储的影像失真校正参数和立体匹配校正参数,对第二路影像数据流中的目标数据单元进行校正。
进一步的,所述根据多个所述目标数据单元计算所述目标元素的距离,包括:根据多个所述目标数据单元计算拍摄所述目标元素时的视差信息;根据所述视差信息和拍摄参数计算所述目标元素的距离。
具体的,影像视差信息计算模块获取到校正后的多个目标数据单元,计算目标数据单元之间的视差信息。接着,距离信息计算模块获取该视差信息后,依据拍摄参数计算目标元素的距离,并输出距离计算结果。其中,拍摄参数包括双影像的基线长度。
也就是说,无需获取目标场景的完整影像,仅接收到场景中对应目标元素的多路影像数据即可计算得到该目标元素的距离,这样,提升了影像测距的效率。
本公开利用现场可编程门阵列FPGA的并行处理能力,可以对两输入影像进行深度信息计算,解决了计算深度信息延迟长,存储消耗大和关键时刻距离漏测等问题。FPGA可以通过编程方便的改变其内部的逻辑功能,从而实现高速的硬件计算和并行运算,且FPGA的功耗不足1W。并且,可以通过增加FPGA内部资源达到增大运算规模且降低运算功耗的效果。
图3是本公开一示例性实施例示出的一种影像测距装置框图,所述装置包括:
成像模块310,用于同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像;
获取模块320,用于获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元;
处理模块330,用于根据多个所述目标数据单元计算所述目标元素的距离。
可选的,所述处理模块330,包括:
时序调整子模块,用于调整所述数据单元的时序,以使多个所述目标数据单元的时序信息一致;
校正子模块,用于根据所述目标数据单元的时序信息,从预先存储的参数库中提取校正参数,并根据所述校正参数对多个所述目标数据单元进行校正,所述校正参数包括影像失真校正参数和立体匹配校正参数;
计算子模块,用于根据校正后的多个所述目标数据单元计算所述目标元素的距离。
可选的,所述处理模块330,包括:
视差计算子模块,用于根据多个所述目标数据单元计算拍摄所述目标元素时的视差信息;
距离计算子模块,用于根据所述视差信息和拍摄参数计算所述目标元素的距离。
本公开实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述影像测距方法的步骤。
本公开实施例还提供一种电子设备,包括:
上述计算机可读存储介质;以及一个或者多个处理器,用于执行所述计算机可读存储介质中的程序。
以上结合附图详细描述了本公开的优选实施方式,但是,本公开并不限于上述实施方式中的具体细节,在本公开的技术构思范围内,可以对本公开的技术方案进行多种简单变型,这些简单变型均属于本公开的保护范围。
另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合,为了避免不必要的重复,本公开对各种可能的组合方式不再另行说明。
此外,本公开的各种不同的实施方式之间也可以进行任意组合,只要其不违背本公开的思想,其同样应当视为本公开所公开的内容。

Claims (8)

1.一种影像测距方法,其特征在于,所述方法包括:
同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像;
获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元;
根据多个所述目标数据单元计算所述目标元素的距离。
2.根据权利要求1所述的方法,其特征在于,所述根据多个所述目标数据单元计算所述目标元素的距离,包括:
调整所述数据单元的时序,以使多个所述目标数据单元的时序信息一致;
根据所述目标数据单元的时序信息,从预先存储的参数库中提取校正参数,并根据所述校正参数对多个所述目标数据单元进行校正,所述校正参数包括影像失真校正参数和立体匹配校正参数;
根据校正后的多个所述目标数据单元计算所述目标元素的距离。
3.根据权利要求1或2所述的方法,其特征在于,所述根据多个所述目标数据单元计算所述目标元素的距离,包括:
根据多个所述目标数据单元计算拍摄所述目标元素时的视差信息;
根据所述视差信息和拍摄参数计算所述目标元素的距离。
4.一种影像测距装置,其特征在于,所述装置包括:
成像模块,用于同时分别从不同视角对目标场景进行拍摄,获取目标场景的多个影像,并生成用于传输所述多个影像的多路数据流,其中每一路所述数据流对应每一所述影像;
获取模块,用于获取所述多路数据流中对应所述目标场景中目标元素的目标数据单元;
处理模块,用于根据多个所述目标数据单元计算所述目标元素的距离。
5.根据权利要求4所述的装置,其特征在于,所述处理模块,包括:
时序调整子模块,用于调整所述数据单元的时序,以使多个所述目标数据单元的时序信息一致;
校正子模块,用于根据所述目标数据单元的时序信息,从预先存储的参数库中提取校正参数,并根据所述校正参数对多个所述目标数据单元进行校正,所述校正参数包括影像失真校正参数和立体匹配校正参数;
计算子模块,用于根据校正后的多个所述目标数据单元计算所述目标元素的距离。
6.根据权利要求4或5所述的装置,其特征在于,所述处理模块,包括:
视差计算子模块,用于根据多个所述目标数据单元计算拍摄所述目标元素时的视差信息;
距离计算子模块,用于根据所述视差信息和拍摄参数计算所述目标元素的距离。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-3中任一项所述方法的步骤。
8.一种电子设备,其特征在于,包括:
权利要求7中所述的计算机可读存储介质;以及
一个或者多个处理器,用于执行所述计算机可读存储介质中的程序。
CN201810168257.6A 2018-02-28 2018-02-28 影像测距方法、装置、存储介质和电子设备 Pending CN108627816A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810168257.6A CN108627816A (zh) 2018-02-28 2018-02-28 影像测距方法、装置、存储介质和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810168257.6A CN108627816A (zh) 2018-02-28 2018-02-28 影像测距方法、装置、存储介质和电子设备

Publications (1)

Publication Number Publication Date
CN108627816A true CN108627816A (zh) 2018-10-09

Family

ID=63706152

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810168257.6A Pending CN108627816A (zh) 2018-02-28 2018-02-28 影像测距方法、装置、存储介质和电子设备

Country Status (1)

Country Link
CN (1) CN108627816A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109489620A (zh) * 2019-01-12 2019-03-19 内蒙古农业大学 一种单目视觉测距方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101701828A (zh) * 2009-11-23 2010-05-05 常州达奇信息科技有限公司 基于立体视觉和信息融合的盲人自主导航方法
CN101917550A (zh) * 2010-07-01 2010-12-15 清华大学 高时空分辨率视频去模糊方法及系统
CN102333234A (zh) * 2011-10-28 2012-01-25 清华大学 一种双目立体视频状态信息的监测方法及装置
CN103379277A (zh) * 2012-04-19 2013-10-30 佳能株式会社 测距装置、测距方法和成像系统
US20140009577A1 (en) * 2011-03-23 2014-01-09 Sharp Kabushiki Kaisha Disparity calculating device, distance calculating device, and disparity calculating method
CN106529495A (zh) * 2016-11-24 2017-03-22 腾讯科技(深圳)有限公司 一种飞行器的障碍物检测方法和装置
CN106713754A (zh) * 2016-12-29 2017-05-24 中国科学院长春光学精密机械与物理研究所 基于面阵cmos图像传感器的运动场景成像方法及系统
CN106920250A (zh) * 2017-02-14 2017-07-04 华中科技大学 基于rgb‑d视频的机器人目标识别与定位方法及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101701828A (zh) * 2009-11-23 2010-05-05 常州达奇信息科技有限公司 基于立体视觉和信息融合的盲人自主导航方法
CN101917550A (zh) * 2010-07-01 2010-12-15 清华大学 高时空分辨率视频去模糊方法及系统
US20140009577A1 (en) * 2011-03-23 2014-01-09 Sharp Kabushiki Kaisha Disparity calculating device, distance calculating device, and disparity calculating method
CN102333234A (zh) * 2011-10-28 2012-01-25 清华大学 一种双目立体视频状态信息的监测方法及装置
CN103379277A (zh) * 2012-04-19 2013-10-30 佳能株式会社 测距装置、测距方法和成像系统
CN106529495A (zh) * 2016-11-24 2017-03-22 腾讯科技(深圳)有限公司 一种飞行器的障碍物检测方法和装置
CN106713754A (zh) * 2016-12-29 2017-05-24 中国科学院长春光学精密机械与物理研究所 基于面阵cmos图像传感器的运动场景成像方法及系统
CN106920250A (zh) * 2017-02-14 2017-07-04 华中科技大学 基于rgb‑d视频的机器人目标识别与定位方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
丁欢欢: "双目立体视觉测距系统关键技术研究", 《信息科技辑》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109489620A (zh) * 2019-01-12 2019-03-19 内蒙古农业大学 一种单目视觉测距方法
CN109489620B (zh) * 2019-01-12 2020-12-25 内蒙古农业大学 一种单目视觉测距方法

Similar Documents

Publication Publication Date Title
US11024046B2 (en) Systems and methods for depth estimation using generative models
Luo et al. Single view stereo matching
JP2021520154A (ja) 画像処理方法、コンピュータ可読記憶媒体、および電子機器
WO2016101892A1 (en) Computational multi-camera adjustment for smooth view switching and zooming
US20080199070A1 (en) Three-dimensional image display apparatus and method for enhancing stereoscopic effect of image
JP6087947B2 (ja) 非同期センサに依存するシーンの3d再構成の方法
CN110009672A (zh) 提升ToF深度图像处理方法、3D图像成像方法及电子设备
CN107077743A (zh) 用于阵列相机的动态校准的系统和方法
US20200137376A1 (en) Method for generating a light-field 3d display unit image and a generating device
RU2020109861A (ru) Оборудование и способ для формирования представления сцены
TWI522968B (zh) 手持式電子裝置、影像擷取裝置及景深資訊的獲取方法
WO2014196374A1 (ja) 画像処理装置および画像処理方法
JP6319030B2 (ja) 目標検出装置
CN107560592A (zh) 一种用于光电跟踪仪联动目标的精确测距方法
CN106572789B (zh) 内窥镜
CN108924533A (zh) 增强现实显示方法和装置、存储介质、增强现实设备
EP1445964A2 (en) Multi-layered real-time stereo matching method and system
US20140192163A1 (en) Image pickup apparatus and integrated circuit therefor, image pickup method, image pickup program, and image pickup system
CN108627816A (zh) 影像测距方法、装置、存储介质和电子设备
CN214587004U (zh) 一种立体匹配加速电路、图像处理器及三维成像电子设备
CN116704111B (zh) 图像处理方法和设备
CN107845108B (zh) 一种光流值计算方法、装置及电子设备
CN102750687A (zh) 一种摄像机参数标定和三维点云生成方法和装置
CN109658459A (zh) 摄像头标定方法、装置、电子设备和计算机可读存储介质
CN106456114B (zh) 超声换能器组件

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181009

RJ01 Rejection of invention patent application after publication