CN107784627A - 车辆环景影像的建立方法 - Google Patents

车辆环景影像的建立方法 Download PDF

Info

Publication number
CN107784627A
CN107784627A CN201610799915.2A CN201610799915A CN107784627A CN 107784627 A CN107784627 A CN 107784627A CN 201610799915 A CN201610799915 A CN 201610799915A CN 107784627 A CN107784627 A CN 107784627A
Authority
CN
China
Prior art keywords
image
camera
demarcation
feature point
demarcation face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610799915.2A
Other languages
English (en)
Inventor
林孟昌
吴林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MOBILETRON ELECTRONICS (NINGBO) CO Ltd
Original Assignee
MOBILETRON ELECTRONICS (NINGBO) CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MOBILETRON ELECTRONICS (NINGBO) CO Ltd filed Critical MOBILETRON ELECTRONICS (NINGBO) CO Ltd
Priority to CN201610799915.2A priority Critical patent/CN107784627A/zh
Publication of CN107784627A publication Critical patent/CN107784627A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038Image mosaicing, e.g. composing plane images from plane sub-images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

一种车辆环景影像的建立方法,包括:提供多个标定件配置于车辆的周围,各所述标定件包含有两个标定面,各所述标定面上具有多个第一、第二特征点,且车辆上的每一摄影装置的视角范围涵盖相面对的两个所述标定面。依据两相面对的标定面的距离,以及摄影装置的影像中各所述标定面的第一特征点的位置,对影像进行畸变校正,以获得多个校正影像。辨识并记录各所述校正影像中第二特征点的位置;依据所记录的第二特征点的位置,将相邻两摄影装置的校正影像进行拼接,并以获得环景影像。藉此,效节省畸变校正及影像拼接的作业时间,并提高影像拼接的精度。

Description

车辆环景影像的建立方法
技术领域
本发明涉及车用的环景影像;特别涉及一种车辆环景影像的建立方法。
背景技术
车用的环景摄影系统装设于一车辆上,用以拍摄车辆四周围的景物并进行显示,以作为行车或停车的安全辅助机制。环景摄影系统包括有多个摄影装置分别装设于车辆上的不同位置,将各所述摄影装置所拍摄的影像拼接后,得到环景影像。
由于所述摄影装置采用广视角的镜头,摄影装置的影像会有畸变产生,畸变的影像将无法应用于影像拼接,因此,摄影装置在出厂前,业者必须先行对各所述摄影装置的进行影像的畸变校正,而后才将摄影装置装设到车辆上。
在所述摄影装置装设到车辆上后,又需将车辆移至一标定场地,以进行影像拼接的标定作业。所述标定场地的四周地面上铺有多个标定板(或标定布),标定板上具有多个特征点,利用各所述摄影装置拍摄所述标定板,辨识相邻摄影装置的影像中的特征点的位置,并依据将相邻摄影装置的影像的特征点位置进行影像拼接,以得到环景影像。
由于畸变校正与影像拼接的标定分别在不同场所进行,因此,相当耗费时间。此外,在影像拼接的标定作业时,标定板平铺于地面上,距离摄影装置越远的特征点的影像越模糊,将使得辨识后的特征点的位置产生误差,而影响影像拼接的精度。
发明内容
有鉴于此,本发明的目的在于提供一种车辆环景影像的建立方法,可减少畸变校正与影像拼接的时间,且提升影像拼接的精度。
为了达成上述目的,本发明提供的一种车辆环景影像的建立方法,应用于一环景摄影系统,所述环景摄影系统包含有多个摄影装置装设于一车辆上;所述方法包含下列步骤:A、提供多个标定件,各所述标定件包含有两个标定面,各所述标定面上具有多个第一特征点与多个第二特征点;B、将所述标定件配置于所述车辆的周围,其中,各所述标定件位于所述摄影装置其中两者的视角范围重叠的区域,且各所述标定件的其中一所述标定面对应视角范围重叠的两个所述摄影装置之一,另一所述标定面对应视角范围重叠的两个所述摄影装置的另一个;各所述标定件的其中一所述标定面与相邻标定件的其中一所述标定面相面对,且每一所述摄影装置的视角范围涵盖相面对的两个所述标定面;C、依据所述标定件相面对的标定面之间距离,以及各所述摄影装置所取得的影像中各所述标定面的所述第一特征点的位置,对所述摄影装置的影像进行畸变校正,以获得多个校正影像;D、辨识各所述校正影像中各所述标定面上的第二特征点,井记录各所述校正影像中第二特征点的位置;依据所记录的第二特征点的位置,将相邻两个所述摄影装置的校正影像进行拼接,并以获得一环景影像。
本发明效果在于,利用标定件进行影像畸变校正及影像拼接,有效节省畸变校正及影像拼接的作业时间。由于使用立体的标定件,第一特征点与第二特征点的影像清楚,位置易于辨识,有效提升影像拼接的精度。
附图说明
图1为本发明一较佳实施例的车辆环景影像的建立方法流程图。
图2为本发明上述较佳实施例的标定件立体图。
图3为一示意图,揭示标定件配置于标定场地外围。
图4为一示意图,揭示具有环景摄影系统的车辆停驻于标定场地。
【附图标记说明】
[本发明]
100 环景摄影系统
10 摄影装置
12 处理装置 122 存储器
14 显示器
20 标定件
22、22′ 标定面
22a 第一特征点 22b 第二特征点
24 网格
242 纵向线条 244 横向线条
26 第一色块
28 第二色块
30 第三色块
200 标定场地
V 车辆
θ 夹角
具体实施方式
为能更清楚地说明本发明,现列举一较佳实施例并配合附图详细说明如后。请参图1所示,为本发明一较佳实施例的车辆环景影像的建立方法的流程图,在后请配合图2至图4说明本实施例的车辆环景影像的建立方法步骤,所述方法应装设于图4所示的车辆V上的一环景摄影系统100,所述环景摄影系统100包含有多个摄影装置10、一处理装置12及一显示器14,其中所述摄影装置10分别装设于所述车辆V的车头、车尾、及左右两个后视镜上,所述处理装置12电性连接所述摄影装置10与所述显示器14。
首先,请配合图2,提供多个标定件20,各所述标定件20包含有两个标定面22,22’,所述两个标定面22,22’夹一夹角θ,本实施例为所述夹角90度,各所述标定面22,22’上具有多个第一特征点22a与多个第二特征点22b。本实施例中,各所述标定面22,22’上具有一矩形的网格24,所述网格24由多个纵向线条242与多个横向线条244构成者,各所述网格24的纵向线条242与横向线条244交汇处构成各所述标定面22,22’的所述第一特征点22a。本实施例为四条纵向线条242与四条横向线条244,所述纵向线条242及横向线条244围设成九宫格的矩阵,且第一特征点22a的数量为16个,相邻两个所述第一特征点22a的距离为30厘米,前述设计,是为了便于后续辨识影像中第一特征点22a的位置。
各所述网格24中具有交错配置的多个第一色块26与多个第二色块28,各所述第一色块26与各所述第二色块28的颜色相异,本实施例中第一色块26为白色,第二色块28为黑色。各所述标定面22,22’上具有一第三色块30,环绕所述网格24的四周围,所述第三色块30具有四个边及四个角,所述四个角构成各所述标定面22,22’的所述第二特征点22b。同一所述标定件20上的两个标定面22,22’的第三色块颜色相异,且第三色块30颜色也不同于第一色块26与第二色块28,本实例中,同一所述标定件20上的两个个标定面22,22’的第三色块30分别为蓝色及红色。实务上,除了以第三色块30的四个角作为第二特征点22b之外,也可直接以各所述网格24的四个角落作为第二特征点22b。
接着,请配合图3与图4,在一矩形的标定场地200的四个角落外围分别放置所述标定件20,所述标定场地200供所述车辆V停驻,以使所述标定件20位于所述车辆V的周围。各所述标定件20位于所述摄影装置10其中两者的视角范围重叠的区域,且各所述标定件20的其中一所述标定面22对应视角范围重叠的两个所述摄影装置10之一,另一所述标定面22’对应视角范围重叠的两个所述摄影装置10的另一个;各所述标定件20的其中一所述标定面22与相邻标定件20的其中一所述标定面22相面对,且相面对的标定面22,22’的第三色块30颜色相同。每一所述摄影装置10的视角范围至少涵盖两个标定件20相面对的标定面22,22’,且相面对的标定面22,22’的影像位于摄影装置10的影像接近边缘的区域。
举例而言,请配合图4,以位于车辆V右前方的标定件20为例,所述标定件20位于车头的摄影装置10及右后视镜的摄影装置10的视角范围重叠的区域,且其中一所述标定面22对应车头的摄影装置10,另一所述标定面22’对应右后视镜的摄影装置10。右前方的标定件20的一所述标定面22与左前方的标定件20的一所述标定面22相面对,车头的摄影装置10可拍摄到右前方及左前方的标定件20相面对的标定面。
摄影装置10的影像于接近边缘处会产生变形,因此,续进行摄影装置10的影像的畸变校正。由于两个标定件20相面对的标定面22,22’之间的距离(即所述标定场地200的长度或宽度)为已知,所述处理装置12依据相面对的标定面22,22’之间距离与各所述摄影装置10所取得的影像中各所述标定面22,22’的所述第一特征点22a的位置及间距,对各所述摄影装置10的影像进行畸变校正,以获得对应所述摄影装置10的多个校正影像。
本实施例中,先于所述处理装置12的存储器122中内建一对应表,所述对应表中记录有每个摄影装置10的影像中两相面对的标定面22,22’的各所述第一特征点22a的位移量与相面对的标定面22,22’之间距离的对应关系。所述处理装置12取得各所述摄影装置10的影像后,利用影像中所述第一、第二色块26,28辨识各所述标定面22,22’的第一特征点22a的位置,再依据相面对的标定面22,22’之间距离由所述对应表中取得各所述第一特征点22a的位移量,以对影像进行畸变校正。校正的顺序由各所述网格24最下列最左边的第一特征点22a开始进行位移,而后依序对右边的第一特征点22a进行位移,在最下列的第一特征点22a位移后,再依序往上一列且由左往右的顺序对第一特征点22a进行位移,直到所有第一特征点22a位移完成。影像中两个第一特征点22a之间的像素则可依据像素相对于两个第一特征点22a的位置及两个第一特征点22a的位移量的平均值进行位移。
实务上,除了以对应表作为畸变校正的基础,也可对各所述标定面22,22’的纵向线条242及横向线条244进行二次曲线的校正,以获得校正影像。此外,所述第一、第二色块26,28的作用是为了易于辨识影像中第一特征点22a的位置,实务上,也可不设置第一、第二色块26,28,而直接辨识影像中网格24的纵向线条242与横向线条244的交汇处。
在取得对应所述摄影装置10的校正影像后,即可进行影像拼接,其中,所述处理装置12辨识各所述校正影像中各所述标定面22,22’上的第二特征点22b,并记录各所述校正影像中第二特征点22b的位置,再依据所记录的第二特征点22b的位置,将所述摄影装置10两相邻两者的校正影像进行拼接,在所有的校正影像拼接完成后,形成一环景影像。举例而言,请配合图4,所述处理装置12将车头的摄影装置10的校正影像中右前方的标定件20的标定面22的第二特征点22b,与右后视镜的摄影装置10的校正影像中右前方的标定件20的另一标定面22’的第二特征点22b依序相叠合,即完成车头的摄影装置10及右后视镜的摄影装置10的校正影像的拼接。其它摄影装置的校正影像拼接方式相同,容不赘述。
实务上,若相邻两个所述摄影装置10的镜头焦距不同,使得影像尺寸不同,造成相邻两个所述校正影像中相对应的第二特征点22b无法位于同一位置,所述处理装置12于上述辨识第二特征点22b后,更调整相邻两个所述摄影装置10的校正影像的尺寸,使相邻两个所述摄影装置10之一的校正影像中相邻两个所述第二特征点22b的距离等于相邻两个所述摄影装置10的另一个的校正影像中对应的相邻两个所述第二特征点22b的距离,再将调整尺寸后的校正影像进行拼接,使调整尺寸后相邻两个所述校正影像中相对应的第二特征点22b重叠。此外,为了降低相邻两个所述校正影像的亮度差异,所述处理装置12更对相邻两个所述校正影像进行影像融合,调整相邻两个所述校正影像的亮度,使相邻两个所述校距影像整体亮度一致或相近。
所述摄影装置10所拍摄的影像持续传输至所述处理装置12后,所述处理装置12持续对各所述摄影装置10的影像进行上述的畸变校正,以及依据所记录的第二特征点22b的位置将所述校正影像拼接,以获得动态的环景影像,并透过所述显示器14显示环景影像,以供用户观看车辆四周围的景像。
据上所述,本发明的车辆环景影像的建立方法,利用标定件20进行影像畸变校正及影像拼接,有效节省畸变校正及影像拼接的作业时间。由于立体标定件20的标定面22,22’立于地面上,因此,第一特征点22a与第二特征点22b的影像清楚,位置更易于辨识,有效提升影像拼接的精度。配合第一色块26、第二色块28及第三色块30,更能让标定面22,22’与其周围景物有明显的对比,更易于区分,以排除周围景物颜色的干扰,更减少畸变校正及影像拼接的时间。
以上所述仅为本发明较佳的可行实施例而已,凡应用本发明说明书及权利要求所作的等效变化,理应包含在本发明的专利范围内。

Claims (9)

1.一种车辆环景影像的建立方法,应用于一环景摄影系统,所述环景摄影系统包含有多个摄影装置装设于一车辆上;所述方法包含下列步骤:
A、提供多个标定件,各所述标定件包含有两个标定面,各所述标定面上具有多个第一特征点与多个第二特征点;
B、将所述标定件配置于所述车辆的周围,其中,各所述标定件位于所述摄影装置其中两者的视角范围重叠的区域,且各所述标定件的其中一所述标定面对应视角范围重叠的两个所述摄影装置之一,另一所述标定面对应视角范围重叠的两个所述摄影装置的另一个;各所述标定件的其中一所述标定面与相邻标定件的其中一所述标定面相面对,且每一所述摄影装置的视角范围涵盖相面对的两个所述标定面;
C、依据所述标定件相面对的标定面之间距离,以及各所述摄影装置所取得的影像中各所述标定面的所述第一特征点的位置,对各所述摄影装置的影像进行畸变校正,以获得多个校正影像;以及
D、辨识各所述校正影像中各所述标定面上的第二特征点,并记录各所述校正影像中第二特征点的位置;依据所记录的第二特征点的位置,将相邻两个所述摄影装置的校正影像进行拼接,并以获得一环景影像。
2.如权利要求1所述的车辆环景影像的合成方法,其中步骤A中,各所述标定面上具有一网格,所述网格由多个纵向线条与多个横向线条构成;各所述网格的纵向线条与横向线条交汇处构成各所述标定面的所述第一特征点;步骤C中,依据所述标定件相面对的标定面之间的距离,以及各所述标定面的所述第一特征点的位置及间距,对各所述摄影装置的影像进行畸变校正。
3.如权利要求2所述的车辆环景影像的合成方法,其中步骤A中各所述网格中具有交错配置的多个第一色块与多个第二色块,各所述第一色块与各所述第二色块的颜色相异。
4.如权利要求2所述的车辆环景影像的合成方法,其中步骤A中,各所述标定面上具有一第三色块,环绕所述网格的四周围,所述第三色块具有的四个角构成各所述标定面的所述第二特征点。
5.如权利要求2所述的车辆环景影像的合成方法,其中步骤A中,各所述标定面的网格的四个角落构成所述第二特征点。
6.如权利要求2所述的车辆环景影像的合成方法,其中各所述网格的纵向线条与横向线条的数量分别为四条。
7.如权利要求6所述的车辆环景影像的合成方法,其中各所述标定面相邻两个所述第一特征点的距离为30厘米。
8.如权利要求1所述的车辆环景影像的合成方法,其中步骤D在辨识第二特征点后,包含调整相邻两个所述摄影装置的校正影像的尺寸,使相邻两个所述摄影装置之一的校正影像中相邻两个所述第二特征点的距离等于相邻两个所述摄影装置另一个的校正影像中对应的相邻两个所述第二特征点的距离;再将调整尺寸后的校正影像进行拼接,使调整尺寸后相邻两个所述校正影像中相对应的第二特征点重叠。
9.如权利要求8所述的车辆环景影像的合成方法,其中步骤D中包含有对相邻两个所述校正影像进行影像融合。
CN201610799915.2A 2016-08-31 2016-08-31 车辆环景影像的建立方法 Pending CN107784627A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610799915.2A CN107784627A (zh) 2016-08-31 2016-08-31 车辆环景影像的建立方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610799915.2A CN107784627A (zh) 2016-08-31 2016-08-31 车辆环景影像的建立方法

Publications (1)

Publication Number Publication Date
CN107784627A true CN107784627A (zh) 2018-03-09

Family

ID=61451807

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610799915.2A Pending CN107784627A (zh) 2016-08-31 2016-08-31 车辆环景影像的建立方法

Country Status (1)

Country Link
CN (1) CN107784627A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108665501A (zh) * 2018-07-12 2018-10-16 合肥晟泰克汽车电子股份有限公司 汽车环视系统三维标定场景及采用该场景的标定方法
CN111416951A (zh) * 2019-01-07 2020-07-14 先进光电科技股份有限公司 行动载具辅助系统及车辆辅助系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101425181A (zh) * 2008-12-15 2009-05-06 浙江大学 一种全景视觉辅助泊车系统的标定方法
CN102163331A (zh) * 2010-02-12 2011-08-24 王炳立 采用标定方法的图像辅助系统
WO2013109742A1 (en) * 2012-01-18 2013-07-25 Logos Technologies, Inc. Method, device, and system for computing a spherical projection image based on two-dimensional images
CN103593836A (zh) * 2012-08-14 2014-02-19 无锡维森智能传感技术有限公司 一种摄像头参数计算方法及相机确定车体姿态的方法
CN103871070A (zh) * 2014-04-03 2014-06-18 深圳市德赛微电子技术有限公司 车载全景成像系统的自动标定方法
CN103985118A (zh) * 2014-04-28 2014-08-13 无锡观智视觉科技有限公司 一种车载环视系统摄像头参数标定方法
CN104021551A (zh) * 2014-05-27 2014-09-03 无锡观智视觉科技有限公司 一种用于车载环视系统摄像头参数标定的校正标志物
TW201601952A (zh) * 2014-07-03 2016-01-16 Univ Shu Te 以距離參數調校圖形正確性之3d環車影像系統
CN105321160A (zh) * 2014-05-27 2016-02-10 穆阳 三维立体全景泊车的多摄像头标定方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101425181A (zh) * 2008-12-15 2009-05-06 浙江大学 一种全景视觉辅助泊车系统的标定方法
CN102163331A (zh) * 2010-02-12 2011-08-24 王炳立 采用标定方法的图像辅助系统
WO2013109742A1 (en) * 2012-01-18 2013-07-25 Logos Technologies, Inc. Method, device, and system for computing a spherical projection image based on two-dimensional images
CN103593836A (zh) * 2012-08-14 2014-02-19 无锡维森智能传感技术有限公司 一种摄像头参数计算方法及相机确定车体姿态的方法
CN103871070A (zh) * 2014-04-03 2014-06-18 深圳市德赛微电子技术有限公司 车载全景成像系统的自动标定方法
CN103985118A (zh) * 2014-04-28 2014-08-13 无锡观智视觉科技有限公司 一种车载环视系统摄像头参数标定方法
CN104021551A (zh) * 2014-05-27 2014-09-03 无锡观智视觉科技有限公司 一种用于车载环视系统摄像头参数标定的校正标志物
CN105321160A (zh) * 2014-05-27 2016-02-10 穆阳 三维立体全景泊车的多摄像头标定方法
TW201601952A (zh) * 2014-07-03 2016-01-16 Univ Shu Te 以距離參數調校圖形正確性之3d環車影像系統

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108665501A (zh) * 2018-07-12 2018-10-16 合肥晟泰克汽车电子股份有限公司 汽车环视系统三维标定场景及采用该场景的标定方法
CN111416951A (zh) * 2019-01-07 2020-07-14 先进光电科技股份有限公司 行动载具辅助系统及车辆辅助系统
TWI718466B (zh) * 2019-01-07 2021-02-11 先進光電科技股份有限公司 行動載具輔助系統及車輛輔助系統

Similar Documents

Publication Publication Date Title
CN107133988B (zh) 车载全景环视系统中摄像头的标定方法及标定系统
US6618076B1 (en) Method and apparatus for calibrating projector-camera system
CN109948398B (zh) 全景泊车的图像处理方法及全景泊车装置
CN111667538B (zh) 一种全景环视系统的标定方法、装置及系统
US9992481B2 (en) Method and apparatus for processing surrounding images of vehicle
JP5739584B2 (ja) 車両周辺視角化のための3次元映像合成装置およびその方法
TWI361396B (en) Image synthesis system for a vehicle and the manufacturing method thereof mage synthesis device and method
JP4495041B2 (ja) ピンホール投影により表示面上のレーザポイントと関連付けられるプロジェクタ画素を求める方法
CN106600644B (zh) 全景摄像机的参数矫正方法及装置
CN106846410B (zh) 基于三维的行车环境成像方法及装置
WO2013081287A1 (ko) 3d 차량 주변 영상 생성 방법 및 장치
CN105894549A (zh) 一种全景辅助泊车系统、装置及全景图像显示方法
CN110519498B (zh) 一种双光相机成像校准的方法、装置和双光相机
CN110264395B (zh) 一种车载单目全景系统的镜头标定方法及相关装置
CN109767473A (zh) 一种全景泊车装置标定方法及装置
CN101340566A (zh) 图像处理系统和方法
JP5178454B2 (ja) 車両周囲監視装置及び車両周囲監視方法
JP2011090367A (ja) 路面画像撮影・編集装置及び路面画像撮影・編集プログラム
US11393076B2 (en) Blurring panoramic image blurring method, terminal and computer readable storage medium
CN106534670A (zh) 一种基于固联鱼眼镜头摄像机组的全景视频生成方法
CN107018335A (zh) 图像拼接方法、装置及终端
CN107358577A (zh) 一种立方体全景图的快速拼接方法
CN111243034A (zh) 一种全景辅助泊车标定方法、装置、设备及存储介质
CN107784627A (zh) 车辆环景影像的建立方法
JP5448056B2 (ja) 歪み画像補正装置及び方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180309

WD01 Invention patent application deemed withdrawn after publication