CN105744243A - 基于切交点特征实现的多投影拼接中全自动几何校正方法 - Google Patents

基于切交点特征实现的多投影拼接中全自动几何校正方法 Download PDF

Info

Publication number
CN105744243A
CN105744243A CN201610039965.0A CN201610039965A CN105744243A CN 105744243 A CN105744243 A CN 105744243A CN 201610039965 A CN201610039965 A CN 201610039965A CN 105744243 A CN105744243 A CN 105744243A
Authority
CN
China
Prior art keywords
projector
intersection point
spliced
correction
geometric correction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610039965.0A
Other languages
English (en)
Other versions
CN105744243B (zh
Inventor
刘凡美
宋智礼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Institute of Technology
Original Assignee
Shanghai Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Institute of Technology filed Critical Shanghai Institute of Technology
Priority to CN201610039965.0A priority Critical patent/CN105744243B/zh
Publication of CN105744243A publication Critical patent/CN105744243A/zh
Application granted granted Critical
Publication of CN105744243B publication Critical patent/CN105744243B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence

Landscapes

  • Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于切交点特征实现的多投影拼接中全自动几何校正方法。该方法采用高清摄像机与投影机相互配合，以摄像机采集的含切交点特征的校正图案作为输入，依据其中的切交点特征，实现了多投影拼接中几何校正的自动化，该方法具有稳定性强，精度高，运算快等优点，并且它具有对配置后对由外界引起投影仪的位置移动进行几何校正参数自动补偿的功能。

Description

基于切交点特征实现的多投影拼接中全自动几何校正方法
技术领域
本发明涉及投影拼接技术领域，具体的说，涉及一种基于切交点特征实现的多投影拼接中全自动几何校正方法。
背景技术
几何校正是多投影拼接中的关键技术，而传统的几何校正多为手工校正，费时，费力，而且校正精度低。
发明内容
针对多投影拼接中的传统的几何校正多为手工校正，费时，费力，而且校正精度低的技术问题，本发明的目的在于提供一种基于切交点特征实现的多投影拼接中全自动几何校正方法。该方法利用曲线与其切线的交点和切交点，有效地解决了多投影拼接中几何校正的特征点对匹配问题，实现了全自动几何校正，提高了校正精度。
本发明提供一种基于切交点特征实现的多投影拼接中全自动几何校正方法，具体步骤如下：
1)配置硬件，硬件包括摄像机C、和设置在摄像机C左右两侧的待拼接投影仪；待拼接投影仪包括左边的待拼接投影仪L和右边的待拼接投影仪R，需要时可扩充至多台投影仪；
2)设定校正模板图像，每个校正模板图像包含若干个校正特征；
3)投影仪L单独投校正图像JL，同时C启动拍下校正图像IL；
4)投影仪R单独投校正图像JR，同时C启动拍下校正图像IR；
5)分别从JL与IL中提取边界信息与直线信息，并计算出直线与曲线的交点和切交点，并依据交点与切交点分布规律找到它们的对应关系，从而计算出它们之间的映射矩阵HL C；
6)分别从JR与IR取边界信息与直线信息，并计算出直线与曲线的交点和切交点，并依据交点与切交点分布规律找到它们的对应关系，从而计算出它们之间的映射矩阵HR C；
7)投影仪L投影区域在摄像机C中成像区域为四边形SL，投影仪R投影区域在摄像机C中的成像区域为四边形SR，利用扫描法求得的最大内接显示区域，记为矩形s1s2s3s4；
8)计算待拼接投影仪L的输入图像和待拼接投影仪R的输入图像
给定一幅待投影图像,首先用其填充矩形s1s2s3s4得到图像IMc,利用前面计算得到平面投影矩阵HL C的逆矩阵扭曲IMc得到待拼接投影仪L的输入图像同理利用前面计算得到平面投影矩阵HR C的逆矩阵扭曲IMc得到得到待拼接投影仪R的输入图像 P R w = ( H R C ) - 1 IM c ;
9)投影仪L投放投影仪R投放便得到一幅经过几何校正后的投影图像，再经过颜色校正，便能得到一幅无缝拼接的图像。
上述全自动几何校正方法中，步骤2)中，每个校正模板图像是由若干个基于切交点的校正特征组成的，基于切交点的校正特征示例如图3所示，是由一条曲线和它的一条切线组成，图3(a)中所示基于切交点的校正特征的切交点的分布规律是：其中三个切交点位于切点的同一侧，图3(b)所示基于切交点的校正特征的切交点的分布规律是：两个切点，一个切交点，图3(c)所示基于切交点的校正特征的切交点的分布规律是：8个切交点，其中7个位于切点的一边，另一个位于另一边。
本发明的有益效果在于：该方法利用曲线与其切线的交点和切交点及其分布规律，有效地解决了多投影拼接中几何校正的特征点对匹配问题，实现了全自动几何校正，提高了校正精度。
附图说明
图1是硬件配置示意图。
图2是切交点计算示意图。
图3是基于切交点的校正特征示例。
图4是摄像机拍摄得到投影区域及求得最大内接矩形显示区域示意图。
具体实施方式
1)硬件实施方式：以两台投影仪拼接为例(需要时可扩充至多台投影仪)，其配置如图1所示，L,R为待拼接投影仪，C为摄像机；
2)软件实施方式：其基本原理是基于切交点的校正特征(如图3)之间的匹配关系从而计算出几何变换矩阵,并完成几何校正，其具体的实施方法及步骤详见本说明书中上面步骤2-9。
3)由于基于切交点的校正特征比较容易检测和找到它们之间的匹配关系，所以本方法具有简单、稳定性强，运算快等优点。
图2是切交点计算示意图：pr与ps是一对相互匹配的特征点对，Lr与Ls是在pr与ps周围找到的匹配的曲线对:(a)lrt是一条经过点pr与Lr在prt相切的一条直线，lrt与Lr的交点为切交点，所有切交点由符号+标识；(b)lst是一条经过点ps与Ls在pst相切的一条直线，lst与Ls的交点为切交点，所有切交点由符号+标识。

Claims (2)

1.一种基于切交点特征实现的多投影拼接中全自动几何校正方法，其具体步骤如下：
1)配置硬件，硬件包括摄像机C、和设置在摄像机C左右两侧的待拼接投影仪；待拼接投影仪包括左边的待拼接投影仪L和右边的待拼接投影仪R，需要时可扩充至多台投影仪；
2)设定校正模板图像，每个校正模板图像包含若干个校正特征；
3)投影仪L单独投校正图像JL，同时C启动拍下校正图像IL；
4)投影仪R单独投校正图像JR，同时C启动拍下校正图像IR；
5)分别从JL与IL中提取边界信息与直线信息，并计算出直线与曲线的交点和切交点，并依据交点与切交点分布规律找到它们的对应关系，从而计算出它们之间的映射矩阵HL C；
6)分别从JR与IR取边界信息与直线信息，并计算出直线与曲线的交点和切交点，并依据交点与切交点分布规律找到它们的对应关系，从而计算出它们之间的映射矩阵HR C；
7)待拼接投影仪L投影区域在摄像机C中的成像区域为四边形SL，待拼接投影仪R投影区域在摄像机C中的成像区域为四边形SR，利用扫描法求得的最大内接显示区域，记为矩形s1s2s3s4；
8)计算待拼接投影仪L的输入图像和待拼接投影仪R的输入图像
给定一幅待投影图像,首先用其填充矩形s1s2s3s4得到图像IMc,利用前面计算得到平面投影矩阵HL C的逆矩阵扭曲IMc得到待拼接投影仪L的输入图像同理利用前面计算得到平面投影矩阵HR C的逆矩阵扭曲IMc得到得到待拼接投影仪R的输入图像 P R w = ( H R C ) - 1 IM c ;
9)投影仪L投放投影仪R投放便得到一幅经过几何校正后的投影图像，再经过颜色校正，便能得到一幅无缝拼接的图像。
2.根据权利要求1所述的全自动几何校正方法，其特征在于，步骤2)中，每个校正模板图像是由若干个基于切交点的校正特征组成。
CN201610039965.0A 2016-01-21 2016-01-21 基于切交点特征实现的多投影拼接中全自动几何校正方法 Expired - Fee Related CN105744243B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610039965.0A CN105744243B (zh) 2016-01-21 2016-01-21 基于切交点特征实现的多投影拼接中全自动几何校正方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610039965.0A CN105744243B (zh) 2016-01-21 2016-01-21 基于切交点特征实现的多投影拼接中全自动几何校正方法

Publications (2)

Publication Number Publication Date
CN105744243A true CN105744243A (zh) 2016-07-06
CN105744243B CN105744243B (zh) 2017-08-29

Family

ID=56246405

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610039965.0A Expired - Fee Related CN105744243B (zh) 2016-01-21 2016-01-21 基于切交点特征实现的多投影拼接中全自动几何校正方法

Country Status (1)

Country Link
CN (1) CN105744243B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106507077A (zh) * 2016-11-28 2017-03-15 江苏鸿信系统集成有限公司 基于图像分析的投影仪画面矫正及遮挡避让方法
CN114276840A (zh) * 2021-12-30 2022-04-05 苏州海陆重工股份有限公司 气化炉煤粉枪找正方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101409790A (zh) * 2008-11-24 2009-04-15 浙江大学 一种高效的多投影仪拼接融合方法
EP2197018A1 (en) * 2008-12-12 2010-06-16 FEI Company Method for determining distortions in a particle-optical apparatus
CN101990078A (zh) * 2009-07-31 2011-03-23 三洋电机株式会社 投影型影像显示装置及图像调整方法
CN103533276A (zh) * 2013-10-21 2014-01-22 北京理工大学 一种平面多投影快速拼接方法
CN103888741A (zh) * 2014-02-25 2014-06-25 北京淳中视讯科技有限公司 投影图像的几何校正辅助方法、装置及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101409790A (zh) * 2008-11-24 2009-04-15 浙江大学 一种高效的多投影仪拼接融合方法
EP2197018A1 (en) * 2008-12-12 2010-06-16 FEI Company Method for determining distortions in a particle-optical apparatus
CN101990078A (zh) * 2009-07-31 2011-03-23 三洋电机株式会社 投影型影像显示装置及图像调整方法
CN103533276A (zh) * 2013-10-21 2014-01-22 北京理工大学 一种平面多投影快速拼接方法
CN103888741A (zh) * 2014-02-25 2014-06-25 北京淳中视讯科技有限公司 投影图像的几何校正辅助方法、装置及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
YUNXIANG LIU ET AL.: "A Novel Image Registration Approach by the Aid of Point and Curve Features", 《2012 5TH INTERNATIONAL CONGRESS ON IMAGE AND SIGNAL PROCESSING (CISP 2012)》 *
宋智礼: "基于特征点与边界信息的全自动多模态遥感图像配准方法", 《国土资源遥感》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106507077A (zh) * 2016-11-28 2017-03-15 江苏鸿信系统集成有限公司 基于图像分析的投影仪画面矫正及遮挡避让方法
CN106507077B (zh) * 2016-11-28 2018-07-24 江苏鸿信系统集成有限公司 基于图像分析的投影仪画面矫正及遮挡避让方法
CN114276840A (zh) * 2021-12-30 2022-04-05 苏州海陆重工股份有限公司 气化炉煤粉枪找正方法
CN114276840B (zh) * 2021-12-30 2022-09-23 苏州海陆重工股份有限公司 气化炉煤粉枪找正方法

Also Published As

Publication number Publication date
CN105744243B (zh) 2017-08-29

Similar Documents

Publication Publication Date Title
US10602102B2 (en) Projection system, image processing apparatus, projection method
EP3937486A1 (en) Projector keystone correction method, apparatus, and system, and readable storage medium
EP3340170A1 (en) Multi-depth image fusion method and apparatus
CN107993263B (zh) 环视系统自动标定方法、汽车、标定装置及存储介质
WO2021120422A1 (zh) 一种梯形校正方法、装置和电子设备及可读存储介质
US11076138B2 (en) Projection system, projection apparatus and calibrating method for displayed image thereof
US20110063420A1 (en) Image processing apparatus
CN104735465A (zh) 在视频画面中植入平面图案广告的方法及装置
US20190104288A1 (en) Three-dimensional printing system and fabrication method thereof
CN103727898A (zh) 利用查找表修正非线性畸变的快速三维测量系统及方法
WO2010061861A1 (ja) ステレオマッチング処理装置、ステレオマッチング処理方法および記録媒体
CN108028900A (zh) 投影设备、投影方法和程序存储介质
JP6935786B2 (ja) 幾何変換行列推定装置、幾何変換行列推定方法、及びプログラム
EP3547260A1 (en) Device, system and method for automatic calibration of image devices
CN103973997A (zh) 一种图像处理方法及装置
JP2019125943A (ja) 表示制御装置、画像投影システム、制御方法およびプログラム。
US11880993B2 (en) Image processing device, driving assistance system, image processing method, and program
CN105744243A (zh) 基于切交点特征实现的多投影拼接中全自动几何校正方法
CN203274682U (zh) 一种线结构光的光平面专用标定板
CN102982524A (zh) 玉米果穗有序图像的拼接方法
CN104735467A (zh) 视频画中画广告生成方法及装置
CN105915872A (zh) 图像的输出方法及投影装置
JP2020518913A (ja) マルチパス画像に基づくパノラマ画像のアライメント方法、装置および携帯端末
CN103455992B (zh) 拼接航空多元并扫图像的方法
CN103442183B (zh) 基于红外热成像原理的自动视觉导航方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Song Zhili

Inventor after: Liu Fanmei

Inventor before: Liu Fanmei

Inventor before: Song Zhili

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170829

Termination date: 20200121