CN106228564A - 多目相机的外参数两步联合在线标定方法及系统 - Google Patents

多目相机的外参数两步联合在线标定方法及系统 Download PDF

Info

Publication number
CN106228564A
CN106228564A CN201610625046.1A CN201610625046A CN106228564A CN 106228564 A CN106228564 A CN 106228564A CN 201610625046 A CN201610625046 A CN 201610625046A CN 106228564 A CN106228564 A CN 106228564A
Authority
CN
China
Prior art keywords
many mesh
camera
mesh camera
outer parameter
many
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610625046.1A
Other languages
English (en)
Other versions
CN106228564B (zh
Inventor
李丰阳
贾学东
林慧
董明
陈国军
何婷
辛军
张伟政
钟浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Corp of China SGCC
PLA Information Engineering University
Zhengzhou Power Supply Co of Henan Electric Power Co
Original Assignee
State Grid Corp of China SGCC
PLA Information Engineering University
Zhengzhou Power Supply Co of Henan Electric Power Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Corp of China SGCC, PLA Information Engineering University, Zhengzhou Power Supply Co of Henan Electric Power Co filed Critical State Grid Corp of China SGCC
Priority to CN201610625046.1A priority Critical patent/CN106228564B/zh
Publication of CN106228564A publication Critical patent/CN106228564A/zh
Application granted granted Critical
Publication of CN106228564B publication Critical patent/CN106228564B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种多目相机的外参数两步联合在线标定方法及系统，包括GPU图像辨识服务器、现场布设的千兆以太网、光纤网络和一定数量的多目监控相机，在变电站相机监控视场范围内墙壁、线杆等布设大量反光的已知基准点，在此基础上，利用布设的多目监控相机组实时采集现场图像，通过千兆以太网传输至GPU服务器，GPU服务器根据采集的现场图像，利用两步联合在线标定算法对相机外参数进行在线快速联合标定，其操作十分简洁、高效，并且标定精度高。

Description

多目相机的外参数两步联合在线标定方法及系统
技术领域：
本发明涉及一种多目相机的标定方法，特别是涉及一种多目相机的外参数两步联合在线标定方法及系统。
背景技术：
在视觉测量领域，相机外参数标定的研究较为成熟，已有的相机外参数标定有：利用基于罗德里格矩阵的角锥法来解算相机的外参数初值，解决大角度场景下的外参数标定问题；相机外参数标定的数值解法，解决四个以上基准点求相机外参数的最优解问题；基于一定数量距离约束的相机不稳定定向算法，解决相机外参数在测量现场结果不稳定的问题。
上述相机标定方法主要满足了视觉测量的精度需求，但随着在机器视觉测量应用不断拓展，相机外参数标定已不局限于具有高精度需求的工程测量领域，如在变电站巡检、交通管理、建筑物施工测量、桥梁水库的变形监测等实际工程应用中，虽然可通过在已知场景中布设大量基准点的方式获取高精度的相机外参数，但是由于实际标定成本和相机安置的场景限制，不可能也无必要频繁对其进行外参数标校，这为异常情况下的实际工作埋下隐患，显然，上述应用对于静态、连续、精确的视觉在线标定需求显著。
发明内容：
本发明所要解决的技术问题是：克服现有技术的不足，提供一种设计合理、容易实施、标定精确且方便快捷的多目相机的外参数两步联合在线标定方法及系统。
本发明的技术方案是：
一种多目相机的外参数两步联合在线标定方法，包括以下步骤：
a、第一步标定，利用多目相机对布设于标定平面或线杆上反光的已知基准点P(Xw,Yw,Zw)进行拍摄，利用基于四元数的共线交会原理获取多目相机的初始外参数Posini，以及像点坐标的重投影误差σji，由不同位姿得到的基准点误差建立稀疏光束平差的赋权矩阵Σx，再根据双目定位原理获取多目相机共视下的环境特征不变点坐标P(Xk,Yk,Zk)；
b、第二步标定，利用基于LM算法的稀疏光束平差，对第一步标定环节得到的相机初始外参数、像点坐标、已知基准点坐标以及环境特征不变点坐标进行联合平差，最终得到包括相机外参数Posopt在内的全部参数的精确估计，实现多目相机外参数的在线标定。
所述标定平面为经过加工并进行固定的铟钢板或平整墙面，所述标定平面上按照规律设置有所述已知基准点，所述标定平面的前方设置有支撑台或固定架，所述支撑台或固定架上固定有多目相机，所述多目相机通过以太网与图像处理器GPU连接，所述图像处理器GPU与中央处理器CPU连接，对拍摄的图像进行处理。
所述中央处理器CPU通过无线通讯网分别与个人信息终端和上位机连接，多目相机外参数的标定结果通过所述无线通讯网分别传输到上位机和个人信息终端上。
所述已知基准点为设备的交叉点、设备标牌、设备线夹、套管顶端、标杆或杆塔，多目相机的安装架为固定式结构，或者为能够在竖直平面内转动的转动式结构，或为既能在竖直平面内转动又能在水平面内转动的转动式结构。
所述转动式结构包括弧形板或弧形齿条，所述弧形板或弧形齿轮分别与紧固螺栓或驱动电机的齿轮连接。
一种多目相机的外参数两步联合在线标定系统，包括双目相机、图像处理器GPU和中央处理器CPU，变电站需要监控范围内的墙壁或线杆上布设有大量反光的已知基准点，多目相机设置在监控现场且通过以太网与所述图像处理器GPU连接，所述图像处理器GPU与所述中央处理器CPU连接，所述多目相机对布设于标定平面或线杆上的已知基准点P(Xw,Yw,Zw)进行拍摄，利用基于四元数的共线交会原理获取多目相机的初始外参数Posini，以及像点坐标的重投影误差σji，由不同位姿得到的基准点误差建立稀疏光束平差的赋权矩阵Σx，再根据双目定位原理获取多目相机共视下的环境特征不变点坐标P(Xk,Yk,Zk)；所述中央处理器CPU利用基于LM算法的稀疏光束平差，对上一步标定环节得到的相机初始外参数、像点坐标、已知基准点坐标以及环境特征不变点坐标进行联合平差，最终得到包括相机外参数Posopt在内的全部参数的精确估计，实现多目相机外参数的在线标定。
所述标定平面为经过加工并进行固定的铟钢板或平整墙面，所述标定平面上按照规律设置有所述已知基准点，所述标定平面的前方设置有支撑台或固定架，所述支撑台或固定架上固定有所述多目相机。
所述中央处理器CPU通过无线通讯网分别与个人信息终端和上位机连接，多目相机外参数的标定结果通过所述无线通讯网分别传输到上位机和个人信息终端上。
所述已知基准点为设备的交叉点、设备标牌、设备线夹、套管顶端、标杆或杆塔，多目相机的安装架为固定式结构，或者为能够在竖直平面内转动的转动式结构，或为既能在竖直平面内转动又能在水平面内转动的转动式结构。
所述转动式结构包括弧形板或弧形齿条，所述弧形板或弧形齿轮分别与紧固螺栓或驱动电机的齿轮连接。
本发明的有益效果是：
1、本发明利用两步联合在线标定算法对多目相机外参数进行在线快速联合标定，操作十分简洁、高效，并且标定精度高。
2、本发明能够根据不同多目相机的标定需求设计不同的标志方案，在一个标定平面实现多种型号多目相机的标定任务，具有通用性和灵活性，并且整个标定过程由计算机自动完成，无人工操作环节，具有自动化和快速高效的优点。
3、本发明标定平面可以采用经过加工处理的铟钢板，也可以采用经过加工处理的平整墙面，根据需要确定；采用铟钢板时，下端通过底座进行固定。
4、本发明标定结果既可以输入到个人信息终端，便于相关人员及时获知，还可以通过无线通讯网上传到上位机，便于监控和保存，安全性好
5、本发明设计合理、容易实施、标定精确且方便快捷，其应用范围广，易于推广实施，具有良好的经济效益。
附图说明：
图1为多目相机的外参数两步联合在线标定的流程图；
图2为多目相机的外参数两步联合在线标定系统的原理图。
具体实施方式：
实施例：参见图1-图2，图中，1-支撑台，2-多目相机，3-已知基准点，4-标定平面，5-底座，6-以太网，7-图像处理器GPU，8-中央处理器CPU，9-显示器，10-个人信息终端，11-无线通讯网，12-上位机。
一种多目相机的外参数两步联合在线标定方法及系统，包括：
a、第一步标定，利用多目相机2对布设于标定平面4或线杆上反光的已知基准点3P(Xw,Yw,Zw)进行拍摄，利用基于四元数的共线交会原理获取多目相机2的初始外参数Posini，以及像点坐标的重投影误差σji，由不同位姿得到的基准点误差建立稀疏光束平差的赋权矩阵Σx，再根据双目定位原理获取多目相机共视下的环境特征不变点坐标P(Xk,Yk,Zk)；
b、第二步标定，利用基于LM算法的稀疏光束平差，对第一步标定环节得到的相机初始外参数、像点坐标、已知基准点坐标以及环境特征不变点坐标进行联合平差，最终得到包括相机外参数Posopt在内的全部参数的精确估计，实现多目相机外参数的在线标定。
标定平面4为经过加工并进行固定的铟钢板或平整墙面，标定平面4上按照规律设置有已知基准点3，标定平面4的前方设置有支撑台1或固定架，支撑台1或固定架上固定有多目相机2，多目相机2通过以太网6与图像处理器GPU连接，图像处理器GPU与中央处理器CPU连接，对拍摄的图像进行处理。
中央处理器CPU通过无线通讯网11分别与个人信息终端10和上位机12连接，多目相机2外参数的标定结果通过无线通讯网分别传输到上位机和个人信息终端上。
已知基准点3为设备的交叉点、设备标牌、设备线夹、套管顶端、标杆或杆塔，多目相机2的安装架为固定式结构，或者为能够在竖直平面内转动的转动式结构，或为既能在竖直平面内转动又能在水平面内转动的转动式结构。
转动式结构包括弧形板或弧形齿条，弧形板或弧形齿轮分别与紧固螺栓或驱动电机的齿轮连接。
本发明利用两步联合在线标定算法对多目相机外参数进行在线快速联合标定，操作十分简洁、高效，并且标定精度高。
以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制，凡是依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属于本发明技术方案的范围内。

Claims (10)

1.一种多目相机的外参数两步联合在线标定方法，包括以下步骤：
a、第一步标定，利用多目相机对布设于标定平面或线杆上反光的已知基准点P(Xw,Yw,Zw)进行拍摄，利用基于四元数的共线交会原理获取多目相机的初始外参数Posini，以及像点坐标的重投影误差σji，由不同位姿得到的基准点误差建立稀疏光束平差的赋权矩阵Σx，再根据双目定位原理获取多目相机共视下的环境特征不变点坐标P(Xk,Yk,Zk)；
b、第二步标定，利用基于LM算法的稀疏光束平差，对第一步标定环节得到的相机初始外参数、像点坐标、已知基准点坐标以及环境特征不变点坐标进行联合平差，最终得到包括相机外参数Posopt在内的全部参数的精确估计，实现多目相机外参数的在线标定。
2.根据权利要求1所述的多目相机的外参数两步联合在线标定方法，其特征是：所述标定平面为经过加工并进行固定的铟钢板或平整墙面，所述标定平面上按照规律设置有所述已知基准点，所述标定平面的前方设置有支撑台或固定架，所述支撑台或固定架上固定有多目相机，所述多目相机通过以太网与图像处理器GPU连接，所述图像处理器GPU与中央处理器CPU连接，对拍摄的图像进行处理。
3.根据权利要求2所述的多目相机的外参数两步联合在线标定方法，其特征是：所述中央处理器CPU通过无线通讯网分别与个人信息终端和上位机连接，多目相机外参数的标定结果通过所述无线通讯网分别传输到上位机和个人信息终端上。
4.根据权利要求1所述的多目相机的外参数两步联合在线标定方法，其特征是：所述已知基准点为设备的交叉点、设备标牌、设备线夹、套管顶端、标杆或杆塔，多目相机的安装架为固定式结构，或者为能够在竖直平面内转动的转动式结构，或为既能在竖直平面内转动又能在水平面内转动的转动式结构。
5.根据权利要求4所述的多目相机的外参数两步联合在线标定方法，其特征是：所述转动式结构包括弧形板或弧形齿条，所述弧形板或弧形齿轮分别与紧固螺栓或驱动电机的齿轮连接。
6.一种多目相机的外参数两步联合在线标定系统，包括双目相机、图像处理器GPU和中央处理器CPU，其特征是：变电站需要监控范围内的标定平面或线杆上布设有大量反光的已知基准点，多目相机设置在监控现场且通过以太网与所述图像处理器GPU连接，所述图像处理器GPU与所述中央处理器CPU连接，所述多目相机对布设于标定平面或线杆上的已知基准点P(Xw,Yw,Zw)进行拍摄，利用基于四元数的共线交会原理获取多目相机的初始外参数Posini，以及像点坐标的重投影误差σji，由不同位姿得到的基准点误差建立稀疏光束平差的赋权矩阵Σx，再根据双目定位原理获取多目相机共视下的环境特征不变点坐标P(Xk,Yk,Zk)；所述中央处理器CPU利用基于LM算法的稀疏光束平差，对上一步标定环节得到的相机初始外参数、像点坐标、已知基准点坐标以及环境特征不变点坐标进行联合平差，最终得到包括相机外参数Posopt在内的全部参数的精确估计，实现多目相机外参数的在线标定。
7.根据权利要求6所述的多目相机的外参数两步联合在线标定系统，其特征是：所述标定平面为经过加工并进行固定的铟钢板或平整墙面，所述标定平面上按照规律设置有所述已知基准点，所述标定平面的前方设置有支撑台或固定架，所述支撑台或固定架上固定有所述多目相机。
8.根据权利要求6所述的多目相机的外参数两步联合在线标定系统，其特征是：所述中央处理器CPU通过无线通讯网分别与个人信息终端和上位机连接，多目相机外参数的标定结果通过所述无线通讯网分别传输到上位机和个人信息终端上。
9.根据权利要求6所述的多目相机的外参数两步联合在线标定系统，其特征是：所述已知基准点为设备的交叉点、设备标牌、设备线夹、套管顶端、标杆或杆塔，多目相机的安装架为固定式结构，或者为能够在竖直平面内转动的转动式结构，或为既能在竖直平面内转动又能在水平面内转动的转动式结构。
10.根据权利要求9所述的多目相机的外参数两步联合在线标定系统，其特征是：所述转动式结构包括弧形板或弧形齿条，所述弧形板或弧形齿轮分别与紧固螺栓或驱动电机的齿轮连接。
CN201610625046.1A 2016-07-29 2016-07-29 多目相机的外参数两步联合在线标定方法及系统 Active CN106228564B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610625046.1A CN106228564B (zh) 2016-07-29 2016-07-29 多目相机的外参数两步联合在线标定方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610625046.1A CN106228564B (zh) 2016-07-29 2016-07-29 多目相机的外参数两步联合在线标定方法及系统

Publications (2)

Publication Number Publication Date
CN106228564A true CN106228564A (zh) 2016-12-14
CN106228564B CN106228564B (zh) 2023-04-07

Family

ID=57536556

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610625046.1A Active CN106228564B (zh) 2016-07-29 2016-07-29 多目相机的外参数两步联合在线标定方法及系统

Country Status (1)

Country Link
CN (1) CN106228564B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108734742A (zh) * 2017-04-20 2018-11-02 松下知识产权经营株式会社 摄像头参数组算出方法、程序及装置
CN112102417A (zh) * 2020-09-15 2020-12-18 北京百度网讯科技有限公司 确定世界坐标的方法和装置及用于车路协同路侧相机的外参标定方法
CN113112551A (zh) * 2021-04-21 2021-07-13 阿波罗智联(北京)科技有限公司 相机参数的确定方法、装置、路侧设备和云控平台
CN114205483A (zh) * 2022-02-17 2022-03-18 杭州思看科技有限公司 扫描仪精度校准方法、装置和计算机设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102721376A (zh) * 2012-06-20 2012-10-10 北京航空航天大学 一种大视场三维视觉传感器的标定方法
CN102982548A (zh) * 2012-12-11 2013-03-20 清华大学 多目立体视频采集系统及其相机参数标定方法
WO2015024407A1 (zh) * 2013-08-19 2015-02-26 国家电网公司 基于电力机器人的双目视觉导航系统及方法
CN105354854A (zh) * 2015-12-01 2016-02-24 国家电网公司 基于三维数字模型的相机参数动态联合标定方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102721376A (zh) * 2012-06-20 2012-10-10 北京航空航天大学 一种大视场三维视觉传感器的标定方法
CN102982548A (zh) * 2012-12-11 2013-03-20 清华大学 多目立体视频采集系统及其相机参数标定方法
WO2015024407A1 (zh) * 2013-08-19 2015-02-26 国家电网公司 基于电力机器人的双目视觉导航系统及方法
CN105354854A (zh) * 2015-12-01 2016-02-24 国家电网公司 基于三维数字模型的相机参数动态联合标定方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
范亚兵等: "三目立体摄影测量系统中相机标定技术研究", 《计量学报》 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108734742A (zh) * 2017-04-20 2018-11-02 松下知识产权经营株式会社 摄像头参数组算出方法、程序及装置
CN108734742B (zh) * 2017-04-20 2023-07-21 松下知识产权经营株式会社 摄像头参数组算出方法、程序及装置
CN112102417A (zh) * 2020-09-15 2020-12-18 北京百度网讯科技有限公司 确定世界坐标的方法和装置及用于车路协同路侧相机的外参标定方法
CN112102417B (zh) * 2020-09-15 2024-04-19 阿波罗智联(北京)科技有限公司 确定世界坐标的方法和装置
CN113112551A (zh) * 2021-04-21 2021-07-13 阿波罗智联(北京)科技有限公司 相机参数的确定方法、装置、路侧设备和云控平台
CN113112551B (zh) * 2021-04-21 2023-12-19 阿波罗智联(北京)科技有限公司 相机参数的确定方法、装置、路侧设备和云控平台
CN114205483A (zh) * 2022-02-17 2022-03-18 杭州思看科技有限公司 扫描仪精度校准方法、装置和计算机设备
CN114205483B (zh) * 2022-02-17 2022-07-29 杭州思看科技有限公司 扫描仪精度校准方法、装置和计算机设备

Also Published As

Publication number Publication date
CN106228564B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
CN106228564A (zh) 多目相机的外参数两步联合在线标定方法及系统
EP3260813B1 (en) Ranging system and ranging method
CN108828554B (zh) 无需激光落点的基于坐标变换的测量方法、系统及装置
CN103090845B (zh) 一种基于多影像的远程测距方法
CN107817003B (zh) 一种分布式大尺寸空间定位系统的外参数标定方法
CN108317999B (zh) 一种基于惯性传感器的通信铁塔倾角测量方法
CN102506825B (zh) 一种输变电设备外绝缘防污参数摄影测量方法
CN103698001B (zh) 一种基于单目视觉分析方法的输电线路舞动监测方法
CN104061876A (zh) 基于数字图像测量原理的建筑模板施工监测系统
CN104713491A (zh) 可获取边坡变形三维数据的边坡监测系统及其获取边坡变形三维数据的方法
CN108132029A (zh) 一种卫星天线展开系统装配的精测方法及装置
CN102506711A (zh) 线激光视觉三维旋转扫描方法
CN203432534U (zh) 工业光学三维坐标测量设备的相机三维调节装置
CN102353329A (zh) 模拟试验场地非接触三维坐标测量方法及所用的装置
CN111398936B (zh) 一种多路侧激光雷达点云配准装置及其使用方法
CN105157729A (zh) 一种用于室内空间测量定位系统的调平与校准方法
CN110992418B (zh) 一种导线覆冰厚度监测系统及方法
CN104215217A (zh) 一种基于伪像距的单目测距方法
CN103217303B (zh) 3d定位仪实现可移动测量的方法
CN210038155U (zh) 一种支模监测装置、系统
CN218865001U (zh) 一种预埋槽道智能检测系统
CN112013813A (zh) 一种建筑物沉降监测方法、监测装置和监测系统
CN106908078B (zh) 一种网络化大尺寸空间定位系统的现场标定方法
CN202133392U (zh) 一种结构物空间距离遥视测量仪
CN212721298U (zh) 一种基于多目立体视觉的大型管道尺寸偏差在位监测装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant