CN115797459B - 一种任意焦距组合的双目视觉系统测距方法 - Google Patents

一种任意焦距组合的双目视觉系统测距方法 Download PDF

Info

Publication number
CN115797459B
CN115797459B CN202211045010.8A CN202211045010A CN115797459B CN 115797459 B CN115797459 B CN 115797459B CN 202211045010 A CN202211045010 A CN 202211045010A CN 115797459 B CN115797459 B CN 115797459B
Authority
CN
China
Prior art keywords
distance
binocular
camera
focal length
focus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211045010.8A
Other languages
English (en)
Other versions
CN115797459A (zh
Inventor
李一能
曾庆化
刘建业
孙永荣
赵宾
罗怡雪
靳子琪
洪晟
赖际舟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CN202211045010.8A priority Critical patent/CN115797459B/zh
Publication of CN115797459A publication Critical patent/CN115797459A/zh
Application granted granted Critical
Publication of CN115797459B publication Critical patent/CN115797459B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Measurement Of Optical Distance (AREA)

Abstract

本发明公开了一种任意焦距组合的双目定焦镜头的测距方法,属于计算机视觉技术领域,可以将两个任意焦距的镜头构建双目系统并对视场重叠部分的目标进行测距,大大突破了原有双目系统对于相机焦距的要求。本发明方法包括以下步骤:首先固定感光元件位置,并保持感光元件处于同一平面并且高度相同;然后加装两个焦距任意的镜头并利用棋盘格对各镜头进行标定;最后通过任意焦距组合的双目测距算法对双目系统中重叠视场中目标进行测距。

Description

一种任意焦距组合的双目视觉系统测距方法
技术领域
本发明属于计算机视觉技术领域,具体涉及一种任意焦距组合的双目视觉系统测距方法。
背景技术
视觉测距系统在目标探测与跟踪系统中起着日益重要的作用,已广泛应用于公安、边防、公路交通、城市场景三维重建等各个行业。随着多焦距镜头、红外热像仪、近红外相机的发展,视觉测距系统从单一的可见光镜头发展到多种视觉传感器镜头组合的多视觉传感器组合系统。而测距功能作为双目视觉系统的重要功能之一,如何通过任意焦距组合的双目测距系统对视场中目标的距离进行有效测量是当前双目视觉系统发展中的重点与难点。
发明内容
本发明提供了一种任意焦距组合的双目视觉系统测距方法,解决了现有技术中对视场中目标的距离进行有效测量的问题。
为了实现上述技术目的,本发明采用以下技术方案:
一种任意焦距组合的双目视觉系统测距方法,包括以下步骤:
(1)将成像系统感光原件固定在同一平面上,保证两块感光原件处于同一高度上,选用任意焦距的镜头与感光原件组合成为两个相机,从而构建一个不同焦距的双目测距装置;
(2)利用棋盘格标定分别对两个相机进行标定,分别得到两个相机的不同的内参矩阵,记相机的内参的矩阵分别为与/>结合感光原件的大小与内参矩阵求解两个相机的主距f1、f2以及主点(cx1,cy1)、(cx2,cy2),记主点之间的距离为基线距b;
(3)采集双目成像系统中视觉信息数据,对双目成像系统中左右视场中重叠区域内的目标利用不平衡双目成像原理进行测距。
以上所述步骤中,步骤(3)的具体过程如下:
(3a)将长短焦双目成像系统水平放置,采集当前视场中的图像信息,分别获取左视场中的图像A与右视场中的图像B;
(3b)获取测距目标在左右视场中的匹配点,记左视场中测距目标点在像素坐标系下的坐标为(u1,v1),右视场中测距目标点在像素坐标系下的坐标为(u2,v2),结合步骤(2)中通过标定得到的相机主距与主点参数,基于相似性三角形原理构建距离方程,解算该目标点距离相机的距离;
步骤(3b)中所述双目测距装置双目成像距离计算公式为:
式中,f1、f2、fx1、fx2、cx1、cx2分别为短焦相机与长焦相机的主距、x方向的内参、x方向主点的坐标,u1、u2是目标点短焦相机与长焦相机在x方向的像素坐标系下的坐标,b是基线距。
进一步的,双目测距装置双目成像距离计算公式推导过程为:相机成像过程中,以左目短焦镜头光心为世界坐标系为原点,光轴为Z轴正方向,过原点竖直向下为y轴正方向,过原点与y轴垂直为x轴正方向建立世界坐标系,对于空间一点(X,Y,Z),在左测短焦相机与右侧长焦相机中成像点为(u1,v1)与(u2,v2),两点距离两个屏幕主点的x轴像距离分别是x1、x2,f1、f2分别为短焦相机与长焦相机的主距,可以根据三角形相似可以得到:
假设相机1与相机2的感光元件的像素单元在x与y方向的长度分别为α1、α2、β1、β2,可以得到图像坐标系到像素坐标系转换关系
联立上述等式可以得到目标点距离。
有益效果:本发明提供了一种任意焦距组合的双目视觉系统测距方法,可以将两个任意焦距的镜头构建双目系统并对视场重叠部分的目标进行测距,大大突破了原有双目系统对于相机焦距的要求;本发明能够适用于不同类型的镜头包括红外镜头、近红外镜头、可见光镜头等符合小孔成像原理的镜头,构建的双目系统大大拓展了双目系统的镜头适用范围。
附图说明
图1是本发明实施的任意焦距双目定焦摄像机的双目重叠区域目标测距示意图。
具体实施方式
下面将结合附图和具体实施例对本发明进行详细说明:
一种任意焦距组合的双目视觉系统测距方法,包括以下步骤:
将成像系统感光原件固定在同一平面上,保证两块感光原件处于同一高度上,选用任意焦距的镜头与感光原件组合成为两个相机,从而构建一个不同焦距的双目测距装置;如图1所示,两块CMOS平面处于同一高度,图中含有两个任意焦距的镜头1与镜头2,其中镜头1为短焦镜头,镜头2是长焦镜头,镜头1的主距为f1,该镜头的主点为OA,镜头2的主距为f2,该镜头的主点为OB,b为主点OA与OB之间的距离,即双目系统的基线距;相机成像过程中,以左目短焦镜头光心为世界坐标系原点O1(0,0,0),光轴为Z轴正方向,过原点竖直向下为y轴正方向,过原点与y轴垂直为x轴正方向建立世界坐标系,对于空间一点O(-X,-Y,Z)在镜头1成像平面上投影为PA(u1,v1),在镜头2成像平面上投影为PB(u2,v2),该两点距离主点的距离在x轴的分量分别是x1、x2
利用棋盘格标定分别对两个摄像机进行标定,分别得到两个相机的不同的内参矩阵,记相机的内参矩阵分别为与/>则主点坐标为OA(cx1,cy1)、OB(cx2,cy2);
将长短焦双目成像系统水平放置,采集当前视场中的图像信息,分别获取左视场中的图像A与右视场中的图像B;
相机成像过程中,以左目短焦镜头光心为世界坐标系为原点,光轴为Z轴正方向,过原点竖直向下为y轴正方向,过原点与y轴垂直为x轴正方向建立世界坐标系。对于空间一点(X,Y,Z),在左测短焦相机与右侧长焦相机中成像点为(u1,v1)与(u2,v2),该两点距离两个屏幕主点的x轴像距离分别是x1、x2,f1、f2分别为短焦相机与长焦相机的主距,可以根据三角形相似可以得到:
假设相机1与相机2的感光原件中像素单元在x与y方向的长度分别为α1、β1、α2、β2,可以得到图像坐标系到像素坐标系转换关系:
联立上述等式可以得到目标点距离:
对上述算法进行测试,得到的效果如表1所示:
表1双目测距实验结果
序号 激光测距/m 双目解算/m 误差/m 误差百分比
1 0.916 0.909 0.007 0.76%
2 1.869 1.840 0.029 1.55%
3 2.893 2.831 0.062 2.14%
4 3.980 3.958 0.022 0.55%
5 5.139 4.984 0.155 3.02%
6 5.327 5.621 -0.294 -5.52%
以上仅是本发明的优选实施例,将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是对本领域的普通技术人员来说,在不脱离本发明构思的前提下,做出的若干变形和改进都属于本发明的保护范围。

Claims (4)

1.一种任意焦距组合的双目视觉系统测距方法,其特征在于,包括以下步骤:
(1)将成像系统感光原件固定在同一平面上,保证两块感光原件处于同一高度上,选用任意焦距的镜头与感光原件组合成为两个相机,两个镜头的感光成像平面在同一平面上,构建不同焦距的双目测距装置;
(2)利用棋盘格标定分别对两个相机进行标定,分别得到两个相机的不同的内参矩阵,记相机的内参的矩阵分别为与/>结合感光原件的大小与内参矩阵求解两个相机的主距f1、f2以及主点(cx1,cy1)、(cx2,cy2),记主点之间的距离为基线距b;
(3)采集双目成像系统中视觉信息数据,对双目成像系统中左右视场中重叠区域内的目标利用不平衡双目成像原理进行测距,双目测距装置的双目成像距离计算公式为:
式中,f1、f2、fx1、fx2、cx1、cx2分别为短焦相机与长焦相机的主距、x方向的内参、x方向主点的坐标,u1、u2是目标点短焦相机与长焦相机在x方向的像素坐标系下的坐标,b是基线距。
2.根据权利要求1所述的任意焦距组合的双目视觉系统测距方法,其特征在于,所述双目测距装置左侧为短焦镜头,右侧为长焦镜头。
3.根据权利要求2所述的任意焦距组合的双目视觉系统测距方法,其特征在于,步骤(3)具体包括以下步骤:
(a)将长短焦双目成像系统水平放置,采集当前视场中的图像信息,分别获取左视场中的图像A与右视场中的图像B;
(b)获取测距目标在左右视场中的匹配点,记左视场中测距目标点在像素坐标系下的坐标为(u1,v1),右视场中测距目标点在像素坐标系下的坐标为(u2,v2),结合步骤(2)中通过标定得到的相机主距与主点参数,基于相似性三角形原理构建距离方程,解算该目标点距离相机的距离。
4.根据权利要求3所述的任意焦距组合的双目视觉系统测距方法,其特征在于,基于相似性三角形原理构建距离方程具体包括以下步骤:
相机成像过程中,以左目短焦镜头光心为世界坐标系为原点,光轴为Z轴正方向,过原点竖直向下为y轴正方向,过原点与y轴垂直为x轴正方向建立世界坐标系,对于空间一点(X,Y,Z),在左测短焦相机与右侧长焦相机中成像点为(u1,v1)与(u2,v2),两点距离两个屏幕主点的x轴像距离分别是x1、x2,f1、f2分别为短焦相机与长焦相机的主距,可以根据三角形相似可以得到:
假设相机1与相机2的感光元件的像素单元在x与y方向的长度分别为α1、α2、β1、β2,可以得到图像坐标系到像素坐标系转换关系
联立上述等式可以得到目标点距离。
CN202211045010.8A 2022-08-29 2022-08-29 一种任意焦距组合的双目视觉系统测距方法 Active CN115797459B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211045010.8A CN115797459B (zh) 2022-08-29 2022-08-29 一种任意焦距组合的双目视觉系统测距方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211045010.8A CN115797459B (zh) 2022-08-29 2022-08-29 一种任意焦距组合的双目视觉系统测距方法

Publications (2)

Publication Number Publication Date
CN115797459A CN115797459A (zh) 2023-03-14
CN115797459B true CN115797459B (zh) 2024-02-13

Family

ID=85431629

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211045010.8A Active CN115797459B (zh) 2022-08-29 2022-08-29 一种任意焦距组合的双目视觉系统测距方法

Country Status (1)

Country Link
CN (1) CN115797459B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107884767A (zh) * 2017-10-31 2018-04-06 暨南大学 一种双目视觉系统测量船舶距离与高度的方法
CN108629812A (zh) * 2018-04-11 2018-10-09 深圳市逗映科技有限公司 一种基于双目相机的测距方法
CN109084688A (zh) * 2018-09-20 2018-12-25 杭州电子科技大学 一种基于可变焦相机的双目视觉测距方法
CN110763140A (zh) * 2019-07-08 2020-02-07 北京宇航时代科技发展有限公司 一种非平行光轴高精度双目测距方法
CN111179335A (zh) * 2019-12-28 2020-05-19 东北林业大学 一种基于双目视觉的立木测定方法
CN111709985A (zh) * 2020-06-10 2020-09-25 大连海事大学 一种基于双目视觉的水下目标测距方法
CN111914715A (zh) * 2020-07-24 2020-11-10 廊坊和易生活网络科技股份有限公司 一种基于仿生视觉的智能车目标实时检测与定位方法
CN111982061A (zh) * 2020-07-15 2020-11-24 杭州晨安科技股份有限公司 一种基于不同焦距双目定焦摄像机的测距方法
CN112985293A (zh) * 2021-01-14 2021-06-18 北京航空航天大学 一种单像机双球面镜镜像双目视觉测量系统和测量方法
CN113379848A (zh) * 2021-06-09 2021-09-10 中国人民解放军陆军军事交通学院军事交通运输研究所 基于双目ptz相机的目标定位方法
CN113593050A (zh) * 2021-08-02 2021-11-02 南京南戈特机电科技有限公司 一种双目视觉引导的机器人智能装配方法、系统及装置

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107884767A (zh) * 2017-10-31 2018-04-06 暨南大学 一种双目视觉系统测量船舶距离与高度的方法
CN108629812A (zh) * 2018-04-11 2018-10-09 深圳市逗映科技有限公司 一种基于双目相机的测距方法
CN109084688A (zh) * 2018-09-20 2018-12-25 杭州电子科技大学 一种基于可变焦相机的双目视觉测距方法
CN110763140A (zh) * 2019-07-08 2020-02-07 北京宇航时代科技发展有限公司 一种非平行光轴高精度双目测距方法
CN111179335A (zh) * 2019-12-28 2020-05-19 东北林业大学 一种基于双目视觉的立木测定方法
CN111709985A (zh) * 2020-06-10 2020-09-25 大连海事大学 一种基于双目视觉的水下目标测距方法
CN111982061A (zh) * 2020-07-15 2020-11-24 杭州晨安科技股份有限公司 一种基于不同焦距双目定焦摄像机的测距方法
CN111914715A (zh) * 2020-07-24 2020-11-10 廊坊和易生活网络科技股份有限公司 一种基于仿生视觉的智能车目标实时检测与定位方法
CN112985293A (zh) * 2021-01-14 2021-06-18 北京航空航天大学 一种单像机双球面镜镜像双目视觉测量系统和测量方法
CN113379848A (zh) * 2021-06-09 2021-09-10 中国人民解放军陆军军事交通学院军事交通运输研究所 基于双目ptz相机的目标定位方法
CN113593050A (zh) * 2021-08-02 2021-11-02 南京南戈特机电科技有限公司 一种双目视觉引导的机器人智能装配方法、系统及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
变焦三维测量系统的主距标定方法;范敬利;张益华;崔海华;程筱胜;陈樱莹;;光学与光电技术(第01期);全文 *

Also Published As

Publication number Publication date
CN115797459A (zh) 2023-03-14

Similar Documents

Publication Publication Date Title
WO2021004312A1 (zh) 一种基于双目立体视觉系统的车辆智能测轨迹方法
US6985183B2 (en) Method for exploring viewpoint and focal length of camera
CN109859272B (zh) 一种自动对焦双目摄像头标定方法及装置
CN105701827B (zh) 可见光相机与红外相机的参数联合标定方法及装置
CN107635129B (zh) 一种三维三目摄像装置及深度融合方法
CN110517325B (zh) 一种坐标变换及坐标变换的车身周围物体定位方法和系统
Zhang et al. A robust and rapid camera calibration method by one captured image
CN107025670A (zh) 一种远心相机标定方法
CN102072706B (zh) 一种多相机定位与跟踪方法及系统
CN109615661A (zh) 光场相机内参数标定装置及方法
KR101759798B1 (ko) 실내 2d 평면도의 생성 방법, 장치 및 시스템
Xu et al. An omnidirectional 3D sensor with line laser scanning
CN109325981A (zh) 基于聚焦像点的微透镜阵列型光场相机几何参数标定方法
JP2010276433A (ja) 撮像装置、画像処理装置及び距離計測装置
CN110874854A (zh) 一种基于小基线条件下的大畸变广角相机双目摄影测量方法
CN110441737B (zh) 一种采用鱼眼镜头的声源定位方法及其设备
Robson et al. Optimised multi-camera systems for dimensional control in factory environments
Liu et al. On-site calibration method for outdoor binocular stereo vision sensors
Zhao et al. Metric calibration of unfocused plenoptic cameras for three-dimensional shape measurement
Wang et al. Corners positioning for binocular ultra-wide angle long-wave infrared camera calibration
Li et al. Local error and its identification for microlens array in plenoptic camera
CN115797459B (zh) 一种任意焦距组合的双目视觉系统测距方法
Yang et al. A novel camera calibration method based on circle projection model
Lin et al. Depth from motion and defocus blur
CN112489141B (zh) 车载摄像头单板单图带中继镜的产线标定方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant