CN110322513A - 一种相机外参标定方法、装置及电子设备 - Google Patents

一种相机外参标定方法、装置及电子设备 Download PDF

Info

Publication number
CN110322513A
CN110322513A CN201810298452.0A CN201810298452A CN110322513A CN 110322513 A CN110322513 A CN 110322513A CN 201810298452 A CN201810298452 A CN 201810298452A CN 110322513 A CN110322513 A CN 110322513A
Authority
CN
China
Prior art keywords
camera
pixel coordinate
coordinate
coordinate system
intersection points
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810298452.0A
Other languages
English (en)
Other versions
CN110322513B (zh
Inventor
冉盛辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201810298452.0A priority Critical patent/CN110322513B/zh
Priority to PCT/CN2019/079569 priority patent/WO2019184885A1/zh
Publication of CN110322513A publication Critical patent/CN110322513A/zh
Application granted granted Critical
Publication of CN110322513B publication Critical patent/CN110322513B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle

Abstract

本发明实施例提供了一种相机外参标定方法、装置及电子设备，其中，相机外参标定方法包括：基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图；在畸变矫正图中，获取四条直线形成的四个交点的像素坐标；基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。通过本方案可以提高相机外参标定的速度和标定结果的精确度。

Description

一种相机外参标定方法、装置及电子设备
技术领域
本发明涉及相机标定技术领域，特别是涉及一种相机外参标定方法、装置及电子设备。
背景技术
相机外参是一组表征相机在世界坐标系中的位置、旋转方向等属性的参数，包括相机的滚转角、俯仰角及偏航角等，相机外参标定就是获得相机外参的过程。在视觉测量领域，相机外参标定是一个非常关键的环节，其标定精度和稳定性将直接影响视觉测量结果的准确性。
视觉测量技术的应用场景较为广泛，例如，可应用于产品质量检测、车辆监控等场景中。目前，针对车辆监控的场景，相应的相机外参标定方法为，从实时图像中进行车道提取，然后对提取到的车道进行透视变换去除操作，再对透视变换去除后的结果进行最优值迭代，得到相机的滚转角、俯仰角及偏航角。
采用上述方法进行相机外参标定时，由于需要进行迭代处理，因此，计算过程不稳定，计算耗时长，计算结果精确度低，且有可能出现计算结果不收敛(即无法得到相机外参数)的情况。
发明内容
本发明实施例的目的在于提供一种相机外参标定方法、装置及电子设备，以提高相机外参标定的速度和标定结果的精确度。具体技术方案如下：
第一方面，本发明实施例提供了一种相机外参标定方法，所述方法包括：
基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，所述标定图片原图为通过所述相机对预先设定有四条直线的场景进行拍摄得到的图片，所述四条直线在所述场景中围成的闭合区域为矩形；
在所述畸变矫正图中，获取所述四条直线形成的四个交点的像素坐标，所述四个交点的像素坐标为所述四个交点在主点像素坐标系中的坐标；
基于所述四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。
进一步的，所述在所述畸变矫正图中，获取所述四条直线形成的四个交点的像素坐标，包括：
在所述畸变矫正图中，通过直线拟合的方式，分别获取所述四条直线在主点像素坐标系中的直线方程；
根据所述四条直线在主点像素坐标系中的直线方程，计算所述四条直线形成的四个交点的像素坐标。
进一步的，所述相机外参包括相机滚转角；
所述基于所述四个交点的像素坐标，通过预设坐标变换策略，标定相机外参，包括：
基于所述四个交点的像素坐标，利用矩形区域对边相等性质及所述主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角。
进一步的，在所述基于所述四个交点的像素坐标，利用矩形区域对边相等性质及所述主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角之后，所述方法还包括：
对所述相机滚转角进行修正运算，计算得到所述四个交点的修正像素坐标，所述四个交点的修正像素坐标为无相机滚转角的畸变矫正图上所述四个交点的像素坐标；
根据所述四个交点的修正像素坐标，确定指定消失点的像素坐标，所述指定消失点为无相机滚转角的畸变矫正图上所述四个交点组成的四边形的任意一组非平行对边形成的交点；
从所述相机内参中提取所述相机的纵向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的纵坐标；
基于所述相机的纵向焦距及所述指定消失点的纵坐标，计算相机俯仰角。
进一步的，所述对所述相机滚转角进行修正运算，计算得到所述四个交点的修正像素坐标，包括：
根据所述相机滚转角，采用修正计算公式，计算得到所述四个交点的修正像素坐标，所述修正计算公式为：
xA′＝cos s*xA+sin s*yA xB′＝coss*xB+sin s*yB
yA′＝-sin s*xA+cos s*yA yB′＝-sin s*xB+cos s*yB
xC′＝cos s*xC+sin s*yC xD′＝cos s*xD+sin s*yD
yC′＝-sin s*xC+cos s*yC yD′＝-sin s*xD+cos s*yD
其中，(xA，yA)、(xB，yB)、(xC，yC)及(xD，yD)分别为所述四个交点的像素坐标(xA′，yA′)、(xB′，yB′)、(xC′，yC′)及(xD′，yD′)分别为所述四个交点的修正像素坐标；所述s为所述相机滚转角。
进一步的，在所述基于所述相机的纵向焦距及所述指定消失点的纵坐标，计算相机俯仰角之后，所述方法还包括：
从所述相机内参中提取所述相机的横向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的横坐标；
基于所述相机的横向焦距、所述指定消失点的横坐标及所述相机俯仰角，计算相机偏航角。
进一步的，在所述基于所述相机的横向焦距、所述指定消失点的横坐标及所述相机俯仰角，计算相机偏航角之后，所述方法还包括：
获取在所述场景中，所述四条直线中的两条指定直线间的距离，所述两条指定直线为对应在所述畸变矫正图中存在所述指定消失点的两条直线；
基于所述四个交点的修正像素坐标，计算所述主点像素坐标系的横轴与所述两条指定直线相交后的截距；
基于所述四条直线中的两条指定直线间的距离、所述相机的横向焦距、所述相机偏航角、所述截距及所述相机俯仰角，计算相机安装高度。
进一步的，在所基于所述四条直线中的两条指定直线间的距离、所述相机的横向焦距、所述相机偏航角、所述截距及所述相机俯仰角，计算相机安装高度之后，所述方法还包括：
获取所述四条直线在所述场景中生成的四个交点中的第一交点在世界坐标系下的坐标，所述第一交点为所述四个交点中的任一交点；
基于所述相机安装高度、所述相机俯仰角及所述相机偏航角，计算所述相机在相机局部世界坐标系中的坐标；
基于所述第一交点在主点像素坐标系中的坐标、所述相机滚转角、所述相机俯仰角、所述相机偏航角、所述相机的横向焦距、所述相机的纵向焦距、所述相机在相机局部世界坐标系中的坐标、所述相机主点在像素坐标系中的坐标，计算所述第一交点在相机局部世界坐标系中的坐标；
基于所述第一交点在世界坐标系中的坐标、所述第一交点在世界坐标系中的坐标，计算所述相机局部世界坐标系原点在世界坐标系中的坐标；
基于所述相机局部世界坐标系原点在世界坐标系中的坐标、所述相机在相机局部世界坐标系中的坐标，计算相机在世界坐标系中的坐标。
第二方面，本发明实施例提供了一种相机外参标定装置，装置包括：
畸变校正图获取模块，用于基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，所述标定图片原图为通过所述相机对预先设定有四条直线的场景进行拍摄得到的图片，所述四条直线在所述场景中围成的闭合区域为矩形；
像素坐标获取模块，用于在所述畸变矫正图中，获取所述四条直线形成的四个交点的像素坐标，所述四个交点的像素坐标为所述四个交点在主点像素坐标系中的坐标；
外参标定模块，基于所述四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。
进一步的，所述像素坐标获取模块，具体用于：
在所述畸变矫正图中，通过直线拟合的方式，分别获取所述四条直线在主点像素坐标系中的直线方程；
根据所述四条直线在主点像素坐标系中的直线方程，计算所述四条直线形成的四个交点的像素坐标。
进一步的，所述相机外参包括相机滚转角；
所述外参标定模块，具体用于：
基于所述四个交点的像素坐标，利用矩形区域对边相等性质及所述主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角。
进一步的，所述外参标定模块还用于：
对所述相机滚转角进行修正运算，计算得到所述四个交点的修正像素坐标，所述四个交点的修正像素坐标为无相机滚转角的畸变矫正图上所述四个交点的像素坐标；
根据所述四个交点的修正像素坐标，确定指定消失点的像素坐标，所述指定消失点为无相机滚转角的畸变矫正图上所述四个交点组成的四边形的任意一组非平行对边形成的交点；
从所述相机内参中提取所述相机的纵向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的纵坐标；
基于所述相机的纵向焦距及所述指定消失点的纵坐标，计算相机俯仰角。
进一步的，所述外参标定模块具体用于：
根据所述相机滚转角，采用修正计算公式，计算得到所述四个交点的修正像素坐标，所述修正计算公式为：
xA′＝cos s*xA+sin s*yA xB′＝cos s*xB+sin s*yB
yA′＝-sin s*xA+cos s*yA yB′＝-sin s*xB+cos s*yB
xC′＝cos s*xC+sin s*yC xD′＝cos s*xD+sins*yD
yC′＝-sin s*xC+cos s*yC yD′＝-sin s*xD+cos s*yD
其中，(xA，yA)、(xB，yB)、(xC，yC)及(xD，yD)分别为所述四个交点的像素坐标；(xA′，yA′)、(xB′，yB′)、(xC′，yC′)及(xD′，yD′)分别为所述四个交点的修正像素坐标；所述s为所述相机滚转角。
进一步的，所述外参标定模块还用于：
从所述相机内参中提取所述相机的横向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的横坐标；
基于所述相机的横向焦距、指定消失点的横坐标及所述相机俯仰角，计算相机偏航角。
进一步的，所述外参标定模块还用于：
获取在所述场景中，所述四条直线中的两条指定直线间的距离，所述两条指定直线为对应在所述畸变矫正图中存在所述指定消失点的两条直线；
基于所述四个交点的修正像素坐标，计算所述主点像素坐标系的横轴与所述两条指定直线相交后的截距；
基于所述四条直线中的两条指定直线间的距离、所述相机的横向焦距、所述相机偏航角、所述截距及所述相机俯仰角，计算相机安装高度。
进一步的，所述外参标定模块还用于：
获取所述四条直线在所述场景中生成的四个交点中的第一交点在世界坐标系下的坐标，所述第一交点为所述四个交点中的任一交点；
基于所述相机安装高度、所述相机俯仰角及所述相机偏航角，计算所述相机在相机局部世界坐标系中的坐标；
基于所述第一交点在主点像素坐标系中的坐标、所述相机滚转角、所述相机俯仰角、所述相机偏航角、所述相机的横向焦距、所述相机的纵向焦距、所述相机在相机局部世界坐标系中的坐标、所述相机主点在像素坐标系中的坐标，计算所述第一交点在相机局部世界坐标系中的坐标；
根据所述第一交点在相机局部世界坐标系中的坐标、所述第一交点在世界坐标系中的坐标，计算所述相机局部世界坐标系原点在世界坐标系中的坐标；
基于所述相机局部世界坐标系原点在世界坐标系中的坐标、所述相机在相机局部世界坐标系中的坐标，计算相机在世界坐标系中的坐标。
第三方面，本发明实施例提供了一种电子设备，包括处理器和存储器；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述任一相机外参标定方法的步骤。
第四方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述任一相机外参标定方法。
本发明实施例提供的一种相机外参标定方法、装置及电子设备，基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，其中，标定图片原图为通过相机对预先设定有四条直线的场景进行拍摄得到的图片，四条直线在场景中围成的闭合区域为矩形；在畸变矫正图中，获取四条直线形成的四个交点的像素坐标，其中，四个交点的像素坐标为四个交点在主点像素坐标系中的坐标；基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。在畸变校正图中获取上述在所拍摄的场景中围成闭合矩形区域的四条直线形成的四个交点的像素坐标，通过预设的坐标变换策略，可以标定出相机外参，而无需通过迭代处理，计算过程稳定，计算耗时短，提高了相机外参标定的速度和标定结果的准确度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的相机外参标定方法的流程示意图；
图2为在场景中绘制的围成的闭合区域为矩形的四条直线的示意图；
图3为相机外参所表示的几何含义的示意图；
图4为本发明另一实施例提供的相机外参标定方法的流程示意图；
图5为本发明一实施例的指定消失点示意图；
图6为本发明另一实施例的指定消失点示意图；
图7为本发明又一实施例的指定消失点示意图；
图8为主点像素坐标系的横轴与两条指定直线相交后的截距的示意图；
图9为相机局部世界坐标系与世界坐标系相对位置关系示意图；
图10为本发明实施例提供的相机外参标定装置的结构示意图；
图11本发明实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为了提高相机外参标定结果的准确度，本发明实施例提供了一种相机外参标定方法、装置及电子设备。
下面对本发明实施例所提供的一种相机外参标定方法进行介绍。
该相机外参标定方法的执行主体可以为包含核心处理芯片的相机，也可以是独立于相机之外的控制设备。
如图1所示，本发明实施例所提供的一种相机外参方法，具体可以包括如下步骤：
步骤101，基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图。
其中，标定图片原图为通过相机对预先设定有四条直线的场景进行拍摄得到的图片，四条直线在场景中围成的闭合区域为矩形。
本步骤中预先设定的四条直线可以是在进行相机外参标定前在场景中绘制的围成的闭合区域为矩形的四条直线(如图2所示，l1、l2、l3及l4即为在场景中绘制的围成的闭合区域为矩形的四条直线，A、B、C、D为上述四条直线的交点)；也可以是从场景中某个物体的轮廓线所在直线中选择出的围成的闭合区域为矩形的四条直线，例如，当场景中包含有一座矩形建筑物时，由于其轮廓线所在直线围成的闭合区域即为矩形，因此可以将该建筑物的四条边所在直线作为本步骤中的预设四条直线。
对包含有预设直线的场景进行拍摄后，得到标定图片原图，由于拍摄视角及相机内参等原因，标定图片原图中会出现畸变现象，例如，实景中的直线对应在标定图片原图中，则可能变成弯曲的曲线。因此，需要根据相机的内参，对标定图片原图进行畸变矫正，得到畸变矫正图。
步骤102，在畸变矫正图中，获取四条直线形成的四个交点的主点像素坐标。
本发明实施例中的主点像素坐标系是以像素坐标系为基础建立的，在介绍主点像素坐标系之前，先明确像素坐标系的定义。像素坐标系位于相机的成像平面上，其原点位于图片的左上角，度量单位为像素，其中，四个交点的像素坐标为四个交点在像素坐标系中的坐标，交点的像素坐标即为交点在像素坐标系中的坐标，例如，对于图片中的某一像素点，当其坐标为(x，y)时，即表示该像素点位于图像的第x行第y列。
本步骤中的主点像素坐标系也位于相机的成像平面上，度量单位亦为像素，但与像素坐标系不同的是：主点像素坐标系原点位于相机主点，其X轴、Y轴分别与像素坐标系的X轴、Y轴平行。
因此，对于畸变矫正图中的指定一点M，其在像素坐标系中的坐标与其在主点像素坐标系中的坐标之间具有如下对应关系：
xm＝xM-cx
ym＝cy-yM
其中，(cx，cy)为相机主点在像素坐标系中的坐标；(xm，ym)为点M在主点像素坐标系中的坐标，即点M的像素坐标；(xM，yM)为点M在像素坐标系中的坐标。
获取四条直线形成的四个交点的像素坐标的方式，可以是直接从畸变矫正图中提取出上述四个交点的像素坐标，也可以是先提取出畸变矫正图中其他特征，再通过坐标运算，间接得到上述四个交点的像素坐标。
进一步的，在畸变矫正图中，获取四条直线形成的四个交点的像素坐标的步骤，可以包括：
在畸变矫正图中，通过直线拟合的方式，分别获取四条直线在主点像素坐标系中的直线方程；
根据四条直线在主点像素坐标系中的直线方程，计算四条直线形成的四个交点的像素坐标。
由于图像分辨率等因素的限制，若直接从畸变矫正图中提取上述四个交点的像素坐标，会导致结果不准确的问题。因此，可以先通过直线拟合的方式，得到上述四条直线在主点像素坐标系中的直线方程(通过直线拟合方法得到的四条直线在主点像素坐标系中的直线方程比通过直线上的两点确定出的直线方程的精确度高)，然后再通过坐标计算，得到四个交点的像素坐标，此时得到的四个交点的像素坐标是唯一的，精确度较高。
步骤103，基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。
相机外参可以包括相机滚转角、相机俯仰角、相机偏航角，还可以包括相机的安装高度以及相机的位置。如图3所示，其中C点为相机的主点，CO为相机的光轴，坐标系O-XYZ为以相机光轴与地面的交点为原点的相机局部世界坐标系，t为俯仰角，p为偏航角，s为滚转角，h为相机安装高度。
在进行相机外参标定时，涉及到相机局部世界坐标系、像素坐标系、主点像素坐标系及世界坐标系，四个交点的像素坐标为在主点像素坐标系中的参量，相机滚转角、相机俯仰角、相机偏航角、相机的安装高度以及相机的位置为在相机局部世界坐标系或者世界坐标系中的参量，因此，预设坐标变换策略可以理解为上述坐标系之间的映射关系，通过该映射关系，即可得到上述外参，完成相机外参标定。
采用本实施例提供的相机外参标定方法进行外参标定时，可以将相机滚转角、相机俯仰角、相机偏航角、相机的安装高度以及相机的位置均计算出来，也可以根据要求或者应用需要选择性的计算上述外参中的一部分。
在本发明实施例提供的图1所示的相机外参标定方法中，基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图；在畸变矫正图中，获取四条直线形成的四个交点的像素坐标；基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。在畸变校正图中获取上述在场景中围成闭合矩形区域的四条直线形成的四个交点的像素坐标，通过预设的坐标变换策略，可以标定出相机外参，而无需通过迭代处理，计算过程稳定，计算耗时短，且提高了相机外参标定结果的准确度。
下面，以相机外参包括相机滚转角、相机俯仰角、相机偏航角、相机的安装高度以及相机的位置为例，对本发明实施例提供的一种相机外参标定方法进行介绍，如图4所示，具体可以包括如下步骤：
步骤201，基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图。
步骤202，在畸变矫正图中，获取四条直线形成的四个交点的像素坐标。
步骤201、步骤202分别对应于步骤101、步骤102中的具体内容，在此不再赘述。
步骤203，基于四个交点的像素坐标，利用矩形区域对边相等性质及主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角。
本步骤中，可以根据利用矩形区域对边相等性质及主点像素坐标系与相机局部世界坐标系之间的预设映射关系，得到相机滚转角计算公式，该公式可以为：
其中，
(xA，yA)、(xB，yB)、(xC，yC)及(xD，yD)分别为四个交点的像素坐标；s为相机滚转角。
步骤204，对相机滚转角进行修正运算，计算得到四个交点的修正像素坐标。
其中，四个交点的修正像素坐标为无相机滚转角的畸变矫正图上四个交点的像素坐标。对相机滚转角的修正运算，可以是通过将相机的相机滚转角设定为0，对四个交点的像素坐标进行变换，修正像素坐标即为变换后得到的坐标。
进一步的，对相机滚转角进行修正运算，计算得到四个交点的修正像素坐标，包括：
根据相机滚转角，采用修正计算公式，计算得到四个交点的修正像素坐标，修正计算公式为：
xA′＝coS s*xA+sin s*yA xB′＝cos s*xB+sin s*yB
yA′＝-sin s*xA+cos s*yA yB′＝-sin s*xB+cos s*yB
xC′＝cos s*xC+sin s*yC xD′＝cos s*xD+sin s*yD
yC′＝-sin s*xC+cos s*yC yD′＝-sin s*xD+cos s*yD
其中，(xA，yA)、(xB，yB)、(xC，yC)及(xD，yD)分别为四个交点的像素坐标；(xA′，yA′)、(xB′，yB′)、(xC′，yC′)及(xD′，yD′)分别为四个交点的修正像素坐标；s为相机滚转角。
步骤205，根据四个交点的修正像素坐标，确定指定消失点的像素坐标。
其中，指定消失点为无相机滚转角的畸变矫正图上四个交点组成的四边形的任意一组非平行对边形成的交点。
步骤206，从相机内参中提取相机的纵向焦距，并从指定消失点的像素坐标中提取指定消失点的纵坐标。
步骤207，基于相机的纵向焦距及指定消失点的纵坐标，计算相机俯仰角。
步骤208，从相机内参中提取相机的横向焦距，并从指定消失点的像素坐标中提取指定消失点的横坐标。
，步骤209，基于相机的横向焦距、指定消失点的横坐标及相机俯仰角，计算相机偏航角。
关于步骤205中的消失点，存在如下四种情况：
(一)、由四个交点组成的四边形中，只有y轴方向的一组对边非平行，也就是说只有y轴方向存在消失点，如图5所示，(P)点为直线A′C＇与B′D＇的交点，也就是本步骤中的指定消失点，(u0，v0)为(P)点的像素坐标。
针对此种情况，在步骤207中，可以通过如下相机俯仰角计算公式，计算相机俯仰角：
其中：t为相机俯仰角；fy为相机的纵向焦距；v0为指定消失点(P)的纵坐标。
在步骤209中，可以通过如下相机偏航角计算公式，计算相机偏航角：
其中：p为相机偏航角；t为相机俯仰角；fx为相机的横向焦距；u0为指定消失点(P)的横坐标。
(二)、由四个交点组成的四边形中，x周和y轴方向的两组对边均不平行，也就是说在x轴和y轴方向共存在2个消失点，针对此种情况，可以通过上述2个消失点中的任一个的坐标，计算相机俯仰角和偏航角，其中，当通过y轴方向的消失点计算相机俯仰角和偏航角时，可以直接采用上述相机俯仰角计算公式和相机偏航角计算公式；当通过x轴方向的消失点计算相机俯仰角和偏航角时，可以基于消失点法则及坐标系之间的相对位置关系，推导出类似于上述计算公式的计算公式，在此，不再赘述。
(三)、由四个交点组成的四边形中，只有x轴方向的一组对边非平行，也就是说只有x轴方向存在消失点，如图6所示，(P′)点为直线A′C＇与B′D′的交点，也就是本步骤中的指定消失点，u1为(P′)点的横坐标，v1为(P′)点的纵坐标。针对此种情况，说明相机俯仰角为0，可以通过下述公式计算相机偏航角：
其中，p为相机偏航角；fx为相机的横向焦距；u1为(P′)点的横坐标。
(四)、由四个交点组成的四边形中，不存在非平行的对边，也就是说不存在消失点，如图7所示，此时，说明相机俯仰角和相机偏航角均为0。
步骤210，获取在场景中，四条直线中的两条指定直线问的距离。
其中，两条指定直线为在畸变矫正图中存在指定消失点的两条直线。
步骤211，基于四个交点的修正像素坐标，计算主点像素坐标系的横轴与两条指定直线相交后的截距。
步骤212，基于四条直线中的两条指定直线间的距离、相机的横向焦距、相机偏航角、截距及相机俯仰角，计算相机安装高度。
本步骤中可以通过如下三角函数关系，计算相机安装高度：
其中：fx为相机的横向焦距；w为四条直线中的两条指定直线间的距离；h为相机安装高度；t为相机俯仰角；p为相机偏航角；δ为主点像素坐标系的横轴与两条指定直线相交后的截距，如图8所示，C点为相机主点，x为主点像素坐标系的横轴，直线A′B′、A′D′、A′C＇及B′D′为由场景中预设四条直线的四个交点的修正像素坐标确定的四条直线。
步骤213，获取四条直线在场景中生成的四个交点中的第一交点在世界坐标系中的坐标。
其中，上述第一交点为四个交点中的任一交点。由于相机可安放在环境中的任意位置，在环境中选择一个基准坐标系来描述相机的位置，并用它描述环境中任何物体的位置，该坐标系即为世界坐标系。
步骤214，基于相机安装高度、相机俯仰角及相机偏航角，计算相机在相机局部世界坐标系中的坐标；
相机局部世界坐标系的原点为相机光轴与地面的交点，X轴、Y轴及Z轴分别与世界坐标系的X轴、Y轴及Z轴平行，如图9所示，其中，O-XYZ为相机局部世界坐标系，Ow-XwYwZw为世界坐标系。
本步骤中，可以采用如下三角函数关系，计算相机在相机局部世界坐标系中的坐标：
xcam＝h*cos p*cot t
ycam＝h*sin p*cot t
zcam＝h
其中，(xcam，ycam，zcam)为相机在相机局部世界坐标系中的坐标；h为相机安装高度；t为相机俯仰角；p为相机偏航角。
步骤215，基于第一交点在主点像素坐标系中的坐标、相机滚转角、相机俯仰角、相机偏航角、相机的横向焦距、相机的纵向焦距、相机在相机局部世界坐标系中的坐标、相机主点在像素坐标系中的坐标，计算第一交点在相机局部世界坐标系中的坐标。本步骤中，可以采用如下相机局部世界坐标系与畸变矫正图中的像素坐标系之间的坐标变换关系公式，计算上述指定交点在相机局部世界坐标系中的坐标：
其中：(u，y)为上述第一交点在畸变矫正图像素坐标系中的像素坐标；(xw，yw，0)为上述第一交点在相机局部世界坐标系中的坐标；λ为表征像素坐标系与相机局部世界坐标系间映射缩放比例关系的比例系数；p为相机偏航角；t为相机俯仰角；s为相机滚转角；(cx，cy)为相机主点在畸变矫正图像素坐标系中的像素坐标；fx为相机的横向焦距；fy为相机的纵向焦距；(xw，yw，0)为上述第一交点在相机局部世界坐标系中的坐标。
步骤216，根据第一交点在相机局部世界坐标系中的坐标、第一交点在世界坐标系中的坐标，计算相机局部世界坐标系原点在世界坐标系中的坐标。
本步骤中，可以通过如下坐标变换公式，计算出相机局部世界坐标系原点在世界坐标系中的坐标：
x0＝Xaw-xw
y0＝Yaw-yw
z0＝0
其中：(xw，yw，0)为第一交点在相机局部世界坐标系中的坐标；(x0，y0，z0)为相机局部世界坐标系原点在世界坐标系中的坐标；(Xaw，Yaw，0)为第一交点在世界坐标系中的坐标。
步骤217，基于相机局部世界坐标系原点在世界坐标系中的坐标、相机在相机局部世界坐标系中的坐标，计算相机在世界坐标系中的坐标。
然后再根据下述公式，计算出相机在世界坐标系中的坐标，即相机在世界坐标系中的真实安装位置：
Xcam＝xcam+x0
Ycam＝ycam+y0
Zcam＝zcam
其中：(x0，y0，z0)为相机局部世界坐标系原点在世界坐标系中的坐标；(xcam，ycam，zcam)为相机在相机局部世界坐标系中的坐标；(Xcam，Ycam，Zcam)为相机在世界坐标系中的坐标。
可以根据实际需要，按照图4中对应步骤，计算相机滚转角、相机俯仰角、相机偏航角、相机的安装高度以及相机的位置中的部分相机外参，在此不再赘述。
在本发明实施例提供的图4所示的相机外参标定方法中，基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图；在畸变矫正图中，获取四条直线形成的四个交点的像素坐标；基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。在畸变校正图中获取上述在场景中围成闭合矩形区域的四条直线形成的四个交点的像素坐标，通过预设的坐标变换策略，可以标定出相机外参，而无需通过迭代处理，计算过程稳定，计算耗时短，提高了相机外参标定的速度和标定结果的准确度。
基于同一发明构思，根据本发明上述实施例提供的一种相机外参标定方法，相应地，本发明实施例提供了一种相机外参标定装置，其结构示意图如图10所示，包括：
畸变校正图获取模块301，用于基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，标定图片原图为通过相机对预先设定有四条直线的场景进行拍摄得到的图片，四条直线在场景中围成的闭合区域为矩形；
像素坐标获取模块302，用于在畸变矫正图中，获取四条直线形成的四个交点的像素坐标，四个交点的像素坐标为四个交点在主点像素坐标系中的坐标；
外参标定模块303，基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。
进一步的，像素坐标获取模块302，具体用于：
在畸变矫正图中，通过直线拟合的方式，分别获取四条直线在主点像素坐标系中的直线方程；
根据四条直线在主点像素坐标系中的直线方程，计算四条直线形成的四个交点的像素坐标。
进一步的，相机外参包括相机滚转角；
外参标定模块303，具体用于：
基于四个交点的像素坐标，利用矩形区域对边相等性质及主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角。
进一步的，外参标定模块303，还用于：
对相机滚转角进行修正运算，计算得到四个交点的修正像素坐标，四个交点的修正像素坐标为无相机滚转角的畸变矫正图上四个交点的像素坐标；
根据四个交点的修正像素坐标，确定指定消失点的像素坐标，指定消失点为无相机滚转角的畸变矫正图上四个交点组成的四边形的任意一组非平行对边形成的交点；
从相机内参中提取相机的纵向焦距，并从指定消失点的像素坐标中提取指定消失点的纵坐标；
基于相机的纵向焦距及指定消失点的纵坐标，计算相机俯仰角。
进一步的，外参标定模块303，具体用于：
根据相机滚转角，采用修正计算公式，计算得到四个交点的修正像素坐标，修正计算公式为：
xA′＝cos s*xA+sin s*yA xB′＝cos s*xB+sin s*yB
yA′＝-sin s*xA+cos s*yA yB′＝-sins*xB+cos s*yB
xC′＝cos s*xC+sin s*yC xD′＝cos s*xD+sin s*yD
yC′＝-sin s*xC+cos s*yC yD′＝-sin s*xD+cos s*yD
其中，(xA，yA)、(xB，yB)、(xC，yC)及(xD，yD)分别为四个交点的像素坐标；(xA′，yA′)、(xB′，yB′)、(xC′，yC′)及(xD′，yD′)分别为四个交点的修正像素坐标；s为相机滚转角。
进一步的，外参标定模块303，还用于：
从相机内参中提取相机的横向焦距，并从指定消失点的像素坐标中提取指定消失点的横坐标；
基于指定相机的横向焦距、消失点的横坐标及相机俯仰角，计算相机偏航角。
进一步的，外参标定模块303，还用于：
获取在场景中，四条直线中的两条指定直线间的距离，两条指定直线为在畸变矫正图中存在指定消失点的两条直线；
基于四个交点的修正像素坐标，计算主点像素坐标系的横轴与两条指定直线相交后的截距；
基于四条直线中的两条指定直线间的距离、相机的横向焦距、相机偏航角、截距及相机俯仰角，计算相机安装高度。
进一步的，外参标定模块303，还用于：
获取四条直线在场景中生成的四个交点中的第一交点在世界坐标系下的坐标，第一交点为四个交点中的任一交点；
基于相机安装高度、相机俯仰角及相机偏航角，计算相机在相机局部世界坐标系中的坐标；
基于第一交点在主点像素坐标系中的坐标、相机滚转角、相机俯仰角、相机偏航角、相机的横向焦距、相机的纵向焦距、相机在相机局部世界坐标系中的坐标、相机主点在像素坐标系中的坐标，计算第一交点在相机局部世界坐标系中的坐标；
基于第一交点在世界坐标系中的坐标、第一交点在世界坐标系中的坐标，计算相机局部世界坐标系原点在世界坐标系中的坐标；
基于相机局部世界坐标系原点在世界坐标系中的坐标、相机在相机局部世界坐标系中的坐标，计算相机在世界坐标系中的坐标。
在发明实施例提供的相机外参标定装置中，畸变校正图获取模块301基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图；像素坐标获取模块302在畸变矫正图中，获取四条直线形成的四个交点的像素坐标；外参标定模块303基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。在畸变校正图中获取上述在场景中围成闭合矩形区域的四条直线形成的四个交点的像素坐标，通过预设的坐标变换策略，可以标定出相机外参，而无需通过迭代处理，计算过程稳定，计算耗时短，提高了相机外参标定的速度和标定结果的准确度。
基于同一发明构思，根据本发明上述实施例提供的相机外参标定方法，相应地，本发明实施例还提供了一种电子设备，如图11所示，包括处理器401和存储器402，其中，
存储器402，用于存放计算机程序；
处理器401，用于执行存储器402上所存放的程序时，实现本发明实施例提供的相机外参标定方法。
例如，可以包括如下步骤：
基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，标定图片原图为通过相机对预先设定有四条直线的场景进行拍摄得到的图片，四条直线在场景中围成的闭合区域为矩形；
在畸变矫正图中，获取四条直线形成的四个交点的像素坐标，四个交点的像素坐标为四个交点在主点像素坐标系中的坐标；
基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。
进一步的，还可以包括本发明实施例提供的相机外参标定方法中的其他处理流程，在此不再进行详细描述。存储器可以包括随机存取存储器(英文：Random AccessMemory，简称：RAM)，也可以包括非易失性存储器(英文：Non-volatile Memory，简称：NVM)，例如至少一个磁盘存储器。进一步的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(英文：Central ProcessingUnit，简称：CPU)、网络处理器(英文：Network Processor，简称：NP)等；还可以是数字信号处理器(英文：Digital Signal Processor，简称：DSP)、专用集成电路(英文：ApplicationSpecific Integrated Circuit，简称：ASIC)、现场可编程门阵列(英文：Field-Programmable Gate Array，简称：FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
上述处理器401和存储器402可以通过地址总线、数据总线、控制总线等通信总线连接，通信总线可以是外设部件互连标准(英文：Peripheral Component Interconnect，简称：PCI)总线或扩展工业标准结构(英文：Extended Industry Standard Architecture，简称：EISA)总线等。电子设备可以通过通信接口与其他外部设备进行通信。
当然，上述处理器401和存储器402之间、电子设备和其他外部设备之间还可以通过无线模块的无线连接方式进行通信。
本发明实施例提供的电子设备中，其采用的方法为：基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，标定图片原图为通过相机对预先设定有四条直线的场景进行拍摄得到的图片，四条直线在场景中围成的闭合区域为矩形；在畸变矫正图中，获取四条直线形成的四个交点的像素坐标，四个交点的像素坐标为四个交点在主点像素坐标系中的坐标；基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。通过上述方法，可以在畸变校正图中获取上述在场景中围成闭合矩形区域的四条直线形成的四个交点的像素坐标，通过预设的坐标变换策略，可以标定出相机外参，而无需通过迭代处理，计算过程稳定，计算耗时短，提高了相机外参标定的速度和标定结果的准确度。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一上述的相机外参标定方法。
本发明实施例提供的计算机可读存储介质中，其采用的方法为：基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，标定图片原图为通过相机对预先设定有四条直线的场景进行拍摄得到的图片，四条直线在场景中围成的闭合区域为矩形；在畸变矫正图中，获取四条直线形成的四个交点的像素坐标，四个交点的像素坐标为四个交点在主点像素坐标系中的坐标；基于四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。通过上述方法，可以在畸变校正图中获取上述在场景中围成闭合矩形区域的四条直线形成的四个交点的像素坐标，通过预设的坐标变换策略，可以标定出相机外参，而无需通过迭代处理，计算过程稳定，计算耗时短，提高了相机外参标定的速度和标定结果的准确度。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个......”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置、电子设备以及存储介质实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (18)

1.一种相机外参标定方法，其特征在于，所述方法包括：
基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，所述标定图片原图为通过所述相机对预先设定有四条直线的场景进行拍摄得到的图片，所述四条直线在所述场景中围成的闭合区域为矩形；
在所述畸变矫正图中，获取所述四条直线形成的四个交点的像素坐标，所述四个交点的像素坐标为所述四个交点在主点像素坐标系中的坐标；
基于所述四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。
2.根据权利要求1所述的方法，其特征在于，所述在所述畸变矫正图中，获取所述四条直线形成的四个交点的像素坐标，包括：
在所述畸变矫正图中，通过直线拟合的方式，分别获取所述四条直线在主点像素坐标系中的直线方程；
根据所述四条直线在主点像素坐标系中的直线方程，计算所述四条直线形成的四个交点的像素坐标。
3.根据权利要求1所述的方法，其特征在于，所述相机外参包括相机滚转角；
所述基于所述四个交点的像素坐标，通过预设坐标变换策略，标定相机外参，包括：
基于所述四个交点的像素坐标，利用矩形区域对边相等性质及所述主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角。
4.根据权利要求3所述的方法，其特征在于，在所述基于所述四个交点的像素坐标，利用矩形区域对边相等性质及所述主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角之后，所述方法还包括：
对所述相机滚转角进行修正运算，计算得到所述四个交点的修正像素坐标，所述四个交点的修正像素坐标为无相机滚转角的畸变矫正图上所述四个交点的像素坐标；
根据所述四个交点的修正像素坐标，确定指定消失点的像素坐标，所述指定消失点为无相机滚转角的畸变矫正图上所述四个交点组成的四边形的任意一组非平行对边形成的交点；
从所述相机内参中提取所述相机的纵向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的纵坐标；
基于所述相机的纵向焦距及所述指定消失点的纵坐标，计算相机俯仰角。
5.根据权利要求4所述的方法，其特征在于，所述对所述相机滚转角进行修正运算，计算得到所述四个交点的修正像素坐标，包括：
根据所述相机滚转角，采用修正计算公式，计算得到所述四个交点的修正像素坐标，所述修正计算公式为：
xA′＝cos s*xA+sin s*yA xB′＝cos s*xB+sin s*yB
yA′＝-sin s*xA+cos s*yA yB′＝-sin s*xB+cos s*yB
xC′＝cos s*xC+sin s*yC xD′＝cos s*xD+sin s*yD
yC′＝-sin s*xC+cos s*yC yD′＝-sin s*xD+cos s*yD
其中，(xA，yA)、(xB，yB)、(xC，yC)及(xD，yD)分别为所述四个交点的像素坐标；(xA′，yA′)、(xB′，yB′)、(xC′，yC′)及(xD′，yD′)分别为所述四个交点的修正像素坐标；所述s为所述相机滚转角。
6.根据权利要求4所述的方法，其特征在于，在所述基于所述相机的纵向焦距及所述指定消失点的纵坐标，计算相机俯仰角之后，所述方法还包括：
从所述相机内参中提取所述相机的横向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的横坐标；
基于所述相机的横向焦距、所述指定消失点的横坐标及所述相机俯仰角，计算相机偏航角。
7.根据权利要求6所述的方法，其特征在于，在所述基于所述相机的横向焦距、所述指定消失点的横坐标及所述相机俯仰角，计算相机偏航角之后，所述方法还包括：
获取在所述场景中，所述四条直线中的两条指定直线间的距离，所述两条指定直线为对应在所述畸变矫正图中存在所述指定消失点的两条直线；
基于所述四个交点的修正像素坐标，计算所述主点像素坐标系的横轴与所述两条指定直线相交后的截距；
基于所述四条直线中的两条指定直线间的距离、所述相机的横向焦距、所述相机偏航角、所述截距及所述相机俯仰角，计算相机安装高度。
8.根据权利要求7所述的方法，其特征在于，在所述基于所述四条直线中的两条指定直线间的距离、所述相机的横向焦距、所述相机偏航角、所述截距及所述相机俯仰角，计算相机安装高度之后，所述方法还包括：
获取所述四条直线在所述场景中生成的四个交点中的第一交点在世界坐标系下的坐标，所述第一交点为所述四个交点中的任一交点；
基于所述相机安装高度、所述相机俯仰角及所述相机偏航角，计算所述相机在相机局部世界坐标系中的坐标；
基于所述第一交点在主点像素坐标系中的坐标、所述相机滚转角、所述相机俯仰角、所述相机偏航角、所述相机的横向焦距、所述相机的纵向焦距、所述相机在相机局部世界坐标系中的坐标、所述相机主点在像素坐标系中的坐标，计算所述第一交点在相机局部世界坐标系中的坐标；
根据所述第一交点在相机局部世界坐标系中的坐标、所述第一交点在世界坐标系中的坐标，计算所述相机局部世界坐标系原点在世界坐标系中的坐标；
基于所述相机局部世界坐标系原点在世界坐标系中的坐标、所述相机在相机局部世界坐标系中的坐标，计算相机在世界坐标系中的坐标。
9.一种相机外参标定装置，其特征在于，所述装置包括：
畸变校正图获取模块，用于基于相机内参，对标定图片原图进行畸变矫正，得到畸变矫正图，所述标定图片原图为通过所述相机对预先设定有四条直线的场景进行拍摄得到的图片，所述四条直线在所述场景中围成的闭合区域为矩形；
像素坐标获取模块，用于在所述畸变矫正图中，获取所述四条直线形成的四个交点的像素坐标，所述四个交点的像素坐标为所述四个交点在主点像素坐标系中的坐标；
外参标定模块，基于所述四个交点的像素坐标，通过预设坐标变换策略，标定相机外参。
10.根据权利要求9所述的装置，其特征在于，所述像素坐标获取模块，具体用于：
在所述畸变矫正图中，通过直线拟合的方式，分别获取所述四条直线在主点像素坐标系中的直线方程；
根据所述四条直线在主点像素坐标系中的直线方程，计算所述四条直线形成的四个交点的像素坐标。
11.根据权利要求9所述的装置，其特征在于，所述相机外参包括相机滚转角；
所述外参标定模块，具体用于：
基于所述四个交点的像素坐标，利用矩形区域对边相等性质及所述主点像素坐标系与相机局部世界坐标系之间的预设映射关系，计算相机滚转角。
12.根据权利要求11所述的装置，其特征在于，所述外参标定模块还用于：
对所述相机滚转角进行修正运算，计算得到所述四个交点的修正像素坐标，所述四个交点的修正像素坐标为无相机滚转角的畸变矫正图上所述四个交点的像素坐标；
根据所述四个交点的修正像素坐标，确定指定消失点的像素坐标，所述指定消失点为无相机滚转角的畸变矫正图上所述四个交点组成的四边形的任意一组非平行对边形成的交点；
从所述相机内参中提取所述相机的纵向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的纵坐标；
基于所述相机的纵向焦距及所述指定消失点的纵坐标，计算相机俯仰角。
13.根据权利要求12所述的装置，其特征在于，所述外参标定模块具体用于：
根据所述相机滚转角，采用修正计算公式，计算得到所述四个交点的修正像素坐标，所述修正计算公式为：
xA′＝cos s*xA+sin s*yA xB′＝cos s*xB+sin s*yB
yA′＝-sin s*xA+cos s*yA yB′＝-sin s*xB+cos s*yB
xC′＝cos s*xC+sin s*yC xD′＝cos s*xD+sin s*yD
yC′＝-sin s*xC+cos s*yC yD′＝-sin s*xD+cos s*yD
其中，(xA，yA)、(xB，yB)、(xC，yC)及(xD，yD)分别为所述四个交点的像素坐标；(xA′，yA′)、(xB′，yB′)、(xC′，yC′)及(xD′，yD′)分别为所述四个交点的修正像素坐标；所述s为所述相机滚转角。
14.根据权利要求12所述的装置，其特征在于，所述外参标定模块还用于：
从所述相机内参中提取所述相机的横向焦距，并从所述指定消失点的像素坐标中提取所述指定消失点的横坐标；
基于所述相机的横向焦距、指定消失点的横坐标及所述相机俯仰角，计算相机偏航角。
15.根据权利要求14所述的装置，其特征在于，所述外参标定模块还用于：
获取在所述场景中，所述四条直线中的两条指定直线间的距离，所述两条指定直线为对应在所述畸变矫正图中存在所述指定消失点的两条直线；
基于所述四个交点的修正像素坐标，计算所述主点像素坐标系的横轴与所述两条指定直线相交后的截距；
基于所述四条直线中的两条指定直线间的距离、所述相机的横向焦距、所述相机偏航角、所述截距及所述相机俯仰角，计算相机安装高度。
16.根据权利要求9所述的装置，其特征在于，所述外参标定模块还用于：
获取所述四条直线在所述场景中生成的四个交点中的第一交点在世界坐标系下的坐标，所述第一交点为所述四个交点中的任一交点；
基于所述相机安装高度、所述相机俯仰角及所述相机偏航角，计算所述相机在相机局部世界坐标系中的坐标；
基于所述第一交点在主点像素坐标系中的坐标、所述相机滚转角、所述相机俯仰角、所述相机偏航角、所述相机的横向焦距、所述相机的纵向焦距、所述相机在相机局部世界坐标系中的坐标、所述相机主点在像素坐标系中的坐标，计算所述第一交点在相机局部世界坐标系中的坐标；
根据所述第一交点在相机局部世界坐标系中的坐标、所述第一交点在世界坐标系中的坐标，计算所述相机局部世界坐标系原点在世界坐标系中的坐标；
基于所述相机局部世界坐标系原点在世界坐标系中的坐标、所述相机在相机局部世界坐标系中的坐标，计算相机在世界坐标系中的坐标。
17.一种电子设备，其特征在于，包括处理器和存储器，其中，
所述存储器，用于存放计算机程序；
所述处理器，用于执行所述存储器上所存放的程序时，实现权利要求1-8任一所述的方法步骤。
18.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-8任一所述的方法步骤。
CN201810298452.0A 2018-03-30 2018-03-30 一种相机外参标定方法、装置及电子设备 Active CN110322513B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810298452.0A CN110322513B (zh) 2018-03-30 2018-03-30 一种相机外参标定方法、装置及电子设备
PCT/CN2019/079569 WO2019184885A1 (zh) 2018-03-30 2019-03-25 一种相机外参标定方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810298452.0A CN110322513B (zh) 2018-03-30 2018-03-30 一种相机外参标定方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN110322513A true CN110322513A (zh) 2019-10-11
CN110322513B CN110322513B (zh) 2022-03-04

Family

ID=68062488

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810298452.0A Active CN110322513B (zh) 2018-03-30 2018-03-30 一种相机外参标定方法、装置及电子设备

Country Status (2)

Country Link
CN (1) CN110322513B (zh)
WO (1) WO2019184885A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111652945A (zh) * 2020-06-03 2020-09-11 北京方程奇迹科技有限公司 一种相机标定方法
CN111751007A (zh) * 2020-06-24 2020-10-09 杭州海康消防科技有限公司 热成像测温方法、装置及存储介质
CN112070846A (zh) * 2020-09-14 2020-12-11 北京华严互娱科技有限公司 基于视频的实时人体动作跟踪方法和系统
CN112150559A (zh) * 2020-09-24 2020-12-29 深圳佑驾创新科技有限公司 图像采集装置的标定方法、计算机设备及存储介质
CN112614045A (zh) * 2020-12-16 2021-04-06 上海交通大学 农机前方作业环境视觉感知透视效应的消除方法和系统
CN112862895A (zh) * 2019-11-27 2021-05-28 杭州海康威视数字技术股份有限公司 一种鱼眼摄像头标定方法、装置及系统
CN112967344A (zh) * 2021-03-09 2021-06-15 北京百度网讯科技有限公司 相机外参标定的方法、设备、存储介质及程序产品
CN113516717A (zh) * 2020-04-10 2021-10-19 富华科精密工业（深圳）有限公司 摄像装置外参标定方法、电子设备及存储介质
CN113643358A (zh) * 2021-08-10 2021-11-12 追觅创新科技(苏州)有限公司 相机的外参标定方法、装置、存储介质及系统
CN115760620A (zh) * 2022-11-18 2023-03-07 荣耀终端有限公司 一种文档矫正方法、装置及电子设备

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111028296B (zh) * 2019-11-07 2023-05-12 浙江大华技术股份有限公司 球机焦距值估算方法、装置、设备及存储装置
CN110910410A (zh) * 2019-11-07 2020-03-24 河海大学 一种基于计算机视觉的球场定位系统及方法
CN111260736B (zh) * 2020-01-16 2023-04-11 中国科学院西安光学精密机械研究所 一种空间相机内参在轨实时标定方法
CN111340890B (zh) * 2020-02-20 2023-08-04 阿波罗智联(北京)科技有限公司 相机外参标定方法、装置、设备和可读存储介质
CN113376617B (zh) * 2020-02-25 2024-04-05 北京京东乾石科技有限公司 雷达标定结果准确性的评价方法、装置、存储介质及系统
CN113516718A (zh) * 2020-04-10 2021-10-19 富华科精密工业（深圳）有限公司 批量摄像装置外参标定方法及电子设备
CN111739104A (zh) * 2020-06-24 2020-10-02 深圳市道通科技股份有限公司 一种激光标定系统的标定方法、装置以及激光标定系统
CN112102416A (zh) * 2020-08-28 2020-12-18 中国科学院深圳先进技术研究院 用于多个相机的自动标定方法及系统
CN112150560B (zh) * 2020-09-27 2024-02-02 上海高德威智能交通系统有限公司 确定消失点的方法、装置及计算机存储介质
CN112738487B (zh) * 2020-12-24 2022-10-11 阿波罗智联(北京)科技有限公司 图像投射方法、装置、设备及存储介质
CN112991465A (zh) * 2021-03-26 2021-06-18 禾多科技（北京）有限公司 相机标定方法、装置、电子设备和计算机可读介质
CN113240752B (zh) * 2021-05-21 2024-03-22 中科创达软件股份有限公司 一种内参和外参协同标定方法和装置
CN113269824B (zh) * 2021-05-28 2023-07-07 陕西工业职业技术学院 一种基于图像的距离确定方法及系统
CN113465573A (zh) * 2021-06-30 2021-10-01 深圳市优必选科技股份有限公司 单目测距方法、装置及智能装置
CN113838138A (zh) * 2021-08-06 2021-12-24 杭州灵西机器人智能科技有限公司 一种优化特征提取的系统标定方法、系统、装置和介质
CN113610929B (zh) * 2021-08-09 2023-08-18 西安外事学院 一种相机与多线激光的联合标定方法
CN113781575B (zh) * 2021-08-09 2024-01-12 上海奥视达智能科技有限公司 一种相机参数的标定方法、装置、终端和存储介质
CN113870163B (zh) * 2021-09-24 2022-11-29 埃洛克航空科技（北京）有限公司 基于三维场景的视频融合方法以及装置、存储介质、电子装置
CN114018932B (zh) * 2021-11-02 2023-05-30 西安电子科技大学 基于矩形标定物的路面病害指标测量方法
CN114219850A (zh) * 2021-11-16 2022-03-22 英博超算(南京)科技有限公司 一种应用360全景环视技术的车辆测距系统
CN114419165B (zh) * 2022-01-17 2024-01-12 北京百度网讯科技有限公司 相机外参校正方法、装置、电子设备和存储介质
CN114596368B (zh) * 2022-05-10 2022-07-08 腾讯科技（深圳）有限公司 一种数据处理方法、装置、计算机设备以及可读存储介质
CN114830911B (zh) * 2022-05-19 2023-08-01 苏州大学 智能除草方法、装置和存储介质
CN115031696B (zh) * 2022-05-23 2023-05-09 深圳大学 基于倾斜成像结构的双目成像测量方法及系统
CN114926371B (zh) * 2022-06-27 2023-04-07 北京五八信息技术有限公司 一种全景图的垂直校正、灭点检测方法、设备及存储介质
CN115775282B (zh) * 2023-01-29 2023-06-02 广州市易鸿智能装备有限公司 一种高速在线矫正图像畸变的方法、装置及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101751672A (zh) * 2008-11-28 2010-06-23 索尼株式会社 图像处理系统
CN102136140A (zh) * 2010-12-24 2011-07-27 东南大学 一种基于矩形图样的视频图像距离检测方法
US20170069095A1 (en) * 2015-09-09 2017-03-09 Electronics And Telecommunications Research Institute Apparatus and method for restoring cubical object
CN106558080A (zh) * 2016-11-14 2017-04-05 天津津航技术物理研究所 一种单目相机外参在线标定系统及方法
CN106875448A (zh) * 2017-02-16 2017-06-20 武汉极目智能技术有限公司 一种车载单目摄像头外部参数自标定方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102013099B (zh) * 2010-11-26 2012-07-04 中国人民解放军国防科学技术大学 车载摄像机外参数交互式标定方法
JP6511406B2 (ja) * 2016-02-10 2019-05-15 クラリオン株式会社 キャリブレーションシステム、キャリブレーション装置
CN107292927B (zh) * 2017-06-13 2020-09-04 厦门大学 一种基于双目视觉的对称运动平台位姿测量方法
CN107767422B (zh) * 2017-09-18 2022-04-05 深圳开阳电子股份有限公司 一种鱼眼镜头的校正方法、装置及便携式终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101751672A (zh) * 2008-11-28 2010-06-23 索尼株式会社 图像处理系统
CN102136140A (zh) * 2010-12-24 2011-07-27 东南大学 一种基于矩形图样的视频图像距离检测方法
US20170069095A1 (en) * 2015-09-09 2017-03-09 Electronics And Telecommunications Research Institute Apparatus and method for restoring cubical object
CN106558080A (zh) * 2016-11-14 2017-04-05 天津津航技术物理研究所 一种单目相机外参在线标定系统及方法
CN106875448A (zh) * 2017-02-16 2017-06-20 武汉极目智能技术有限公司 一种车载单目摄像头外部参数自标定方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
JOO-HAENG LEE: "Camera Calibration from a Single Image based on Coupled Line Cameras and Rectangle Constraint", 《PROCEEDINGS OF THE 21ST INTERNATIONAL CONFERENCE ON PATTERN RECOGNITION（ICPR2012）》 *
WU WENHUAN, ET AL.: "A New Camera Calibration Method Based on Rectangle Constraint", 《2010 2ND INTERNATIONAL WORKSHOP ON INTELLIGENT SYSTEM AND APPLICATIONS》 *
张代明: "基于消失点的鲁棒逆透视变换", 《基于消失点的鲁棒逆透视变换》 *
徐嵩 等: "基于矩形的摄像机自标定几何方法", 《光学学报》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112862895B (zh) * 2019-11-27 2023-10-10 杭州海康威视数字技术股份有限公司 一种鱼眼摄像头标定方法、装置及系统
CN112862895A (zh) * 2019-11-27 2021-05-28 杭州海康威视数字技术股份有限公司 一种鱼眼摄像头标定方法、装置及系统
CN113516717A (zh) * 2020-04-10 2021-10-19 富华科精密工业（深圳）有限公司 摄像装置外参标定方法、电子设备及存储介质
CN111652945A (zh) * 2020-06-03 2020-09-11 北京方程奇迹科技有限公司 一种相机标定方法
CN111751007A (zh) * 2020-06-24 2020-10-09 杭州海康消防科技有限公司 热成像测温方法、装置及存储介质
CN112070846A (zh) * 2020-09-14 2020-12-11 北京华严互娱科技有限公司 基于视频的实时人体动作跟踪方法和系统
CN112150559A (zh) * 2020-09-24 2020-12-29 深圳佑驾创新科技有限公司 图像采集装置的标定方法、计算机设备及存储介质
CN112614045B (zh) * 2020-12-16 2022-05-31 上海交通大学 农机前方作业环境视觉感知透视效应的消除方法和系统
CN112614045A (zh) * 2020-12-16 2021-04-06 上海交通大学 农机前方作业环境视觉感知透视效应的消除方法和系统
CN112967344A (zh) * 2021-03-09 2021-06-15 北京百度网讯科技有限公司 相机外参标定的方法、设备、存储介质及程序产品
CN112967344B (zh) * 2021-03-09 2023-12-08 阿波罗智联(北京)科技有限公司 相机外参标定的方法、设备、存储介质及程序产品
CN113643358A (zh) * 2021-08-10 2021-11-12 追觅创新科技(苏州)有限公司 相机的外参标定方法、装置、存储介质及系统
CN113643358B (zh) * 2021-08-10 2023-07-07 追觅创新科技(苏州)有限公司 相机的外参标定方法、装置、存储介质及系统
CN115760620A (zh) * 2022-11-18 2023-03-07 荣耀终端有限公司 一种文档矫正方法、装置及电子设备
CN115760620B (zh) * 2022-11-18 2023-10-20 荣耀终端有限公司 一种文档矫正方法、装置及电子设备

Also Published As

Publication number Publication date
CN110322513B (zh) 2022-03-04
WO2019184885A1 (zh) 2019-10-03

Similar Documents

Publication Publication Date Title
CN110322513A (zh) 一种相机外参标定方法、装置及电子设备
CN102289804B (zh) 通过合并方向传感器读数和图像配准估计实现3d视频稳定的系统和方法
CN103473771B (zh) 一种摄相机标定方法
CN101303768B (zh) 圆形标志点在摄像机透视投影变换时圆心偏差的修正方法
US10771776B2 (en) Apparatus and method for generating a camera model for an imaging system
CN102609941A (zh) 基于ToF深度相机的三维注册方法
CN108510551A (zh) 一种远距离大视场条件下相机参数的标定方法及系统
CN112270719B (zh) 相机标定方法、装置及系统
WO2020119467A1 (zh) 高精度稠密深度图像的生成方法和装置
CN112819903A (zh) 基于l型标定板的相机和激光雷达联合标定的方法
CN103679693A (zh) 一种多相机单视图标定装置及其标定方法
CN106570907B (zh) 一种相机标定方法及装置
CN110940312A (zh) 一种结合激光设备的单目相机测距方法及系统
WO2013145880A1 (ja) カメラキャリブレーション装置
CN103795935A (zh) 一种基于图像校正的摄像式多目标定位方法及装置
CN111462245A (zh) 一种基于矩形结构的变焦相机姿态标定方法和系统
CN113095316B (zh) 基于多级融合和角点偏移的图像旋转目标检测方法
US9514526B2 (en) Device and method for detecting angle of rotation from normal position of image
CN104180794A (zh) 数字正射影像拉花区域的处理方法
CN103500448B (zh) 高密度封装元器件的仿射变换模型参数估计方法
CN103208120B (zh) 切向和径向双近似圆综合的全景环带图像校正展开方法
CN109902695B (zh) 一种面向像对直线特征匹配的线特征矫正与提纯方法
TWI424259B (zh) 相機擺置角度校正法
CN115018922A (zh) 畸变参数标定方法、电子设备和计算机可读存储介质
CN109919998B (zh) 卫星姿态确定方法、装置和终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant