CN104268887A - 一种适用于多场景切换的相机姿态标定方法和装置 - Google Patents

一种适用于多场景切换的相机姿态标定方法和装置 Download PDF

Info

Publication number
CN104268887A
CN104268887A CN201410526130.9A CN201410526130A CN104268887A CN 104268887 A CN104268887 A CN 104268887A CN 201410526130 A CN201410526130 A CN 201410526130A CN 104268887 A CN104268887 A CN 104268887A
Authority
CN
China
Prior art keywords
scene
feature
region
camera
under
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410526130.9A
Other languages
English (en)
Other versions
CN104268887B (zh
Inventor
王军
张欢
吴金勇
陈先开
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN KESONG ELECTRONIC CO Ltd
Original Assignee
SHENZHEN KESONG ELECTRONIC CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN KESONG ELECTRONIC CO Ltd filed Critical SHENZHEN KESONG ELECTRONIC CO Ltd
Priority to CN201410526130.9A priority Critical patent/CN104268887B/zh
Publication of CN104268887A publication Critical patent/CN104268887A/zh
Application granted granted Critical
Publication of CN104268887B publication Critical patent/CN104268887B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image

Abstract

本发明公开了一种适用于多场景切换的相机姿态标定方法和装置,属于相机领域。该适用于多场景切换的相机姿态标定方法包括:在世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的特写区域;根据相机在特写场景下标定的姿态,存储对应的姿态参数;计算特写场景中实际点的坐标与全景场景中对应的实际点的坐标之间的线性比例关系;检测到目标进入场景切换的触发区域时,根据线性比例关系、特写区域和对应场景的姿态参数,将当前场景切换到被触发的场景。本发明使得使用智能跟踪球机的相机在实际场景中能够有效的跟踪目标。

Description

一种适用于多场景切换的相机姿态标定方法和装置
技术领域
本发明涉及相机领域,具体涉及一种适用于多场景切换的相机姿态标定方法和装置。
背景技术
教育信息化目前是国家实现教育跨越式发展的必然选择,教学智能录播系统是教育信息化的基本和重要组成部分。录播系统需要对教师进行跟踪录像以记录教学过程中教师的教学行为,由于教师需要在讲台、讲台附近周边及讲台下面区域活动,故涉及到镜头切换以保证教师一直在视频画面内。因此在已有的固定多个场景切换策略的基础上,如何根据实际场景安装调试相机,标定相机对应的多场景姿态参数,并保证相机多场景切换和跟踪的有效进行具有很重要的作用。
现有技术公开了用于单枪机-多球机联动的空间建模方法,该专利主要提供一种适用于单枪机-多球机联动的空间建模方法,通过对监控场景进行3D空间建模计算出枪机的投影变换矩阵,再通过获得跟踪目标的空间位置信息来计算出球机的偏移量,最后球机转向目标。但是上述标定相机的方法主要适用于有球机联动的固定枪机,且用模型计算反而还需知道点的实际空间中的坐标,增加安装难度。
现有技术还公开了一种教学智能录播系统用教师位置检测方法,该专利主要通过对固定相机中的图像帧中标定讲台区域进行运动检测和目标检测,根据目标在讲台内还是讲台外,给自动导播模块信号以切换到对应的教师或者学生拍摄机位,该专利同样只适应于有球机联动的固定相机。
发明内容
有鉴于此,本发明提供一种适用于多场景切换的相机姿态标定方法和装置,以达到使用智能跟踪球机的相机在实际场景中有效跟踪目标的目的,克服上述现有跟踪方法的使用环境有限且安装难度大的缺陷。
本发明解决上述技术问题的技术方案如下。
一种适用于多场景切换的相机姿态标定方法,该方法包括:
在世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的特写区域;
根据相机在特写场景下标定的姿态,存储对应的姿态参数;
计算特写场景中实际点的坐标与全景场景中对应的实际点的坐标之间的线性比例关系;
检测到目标进入场景切换的触发区域时,根据线性比例关系、特写区域和对应场景的姿态参数,将当前场景切换到被触发的场景。
本发明的目的还在于提供一种适用于多场景切换的相机姿态标定装置,该装置包括:
场景绘制模块,用于在全景场景所在的世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的特写区域;
姿态参数存储模块,用于根据相机在特写场景下标定的姿态,存储对应的姿态参数;
计算模块,用于计算特写场景中实际点的坐标与全景场景中对应的实际点的坐标之间的线性比例关系;
场景切换模块,用于检测到目标进入场景切换的触发区域时,根据线性比例关系、特写区域和对应场景的姿态参数,将当前场景切换到被触发的场景。
在根据本发明的一个实施例提供的方法和装置中,通过预先绘制好的触发区域及特写场景的特写区域,借助外界标记物的辅助,标定相机对应特写场景和全景场景的姿态参数,并确保相机由全景到特写、特写与特写能准确切换,当检测到目标进入触发区域时,将相机的当前场景切换到触发对应的场景,使得本专利能够解决单个球机多个固定场景切换的问题,且由于特写中的点和全景中的点存在对应关系,只要计算出对应关系便可标定全景,操作起来,简单易行。
附图说明
图1为根据本发明的一个实施例的适用于多场景切换的相机姿态标定方法的流程图;
图2为根据本发明的另一个实施例的适用于多场景切换的相机姿态标定方法的流程图;
图3为根据本发明的一个实施例的中间特写场景的特写区域示意图;
图4为根据本发明的一个实施例的左边特写场景的特写区域示意图;
图5为根据本发明的一个实施例的右边特写场景的特写区域示意图;
图6为根据本发明的一个实施例的左、中、右三个特写场景拼接的示意图;
图7为根据本发明的一个实施例的全景场景的显示区域的示意图;
图8为根据本发明的一个实施例的适用于多场景切换的相机姿态标定装置的示范性结构框图。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚、明白,以下结合附图对本发明的原理和特征进行描述,所举实例只用于解释本发明,并非用于限定本发明的范围。
图1为根据本发明的一个实施例的适用于多场景切换的相机姿态标定方法的流程图,下面结合图1来描述根据本发明的一个实施例的适用于多场景切换的相机姿态标定方法,如图1所示,该方法包括以下步骤:
步骤S10、在世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的特写区域。
步骤S20、根据相机在特写场景下标定的姿态,存储对应的姿态参数。
步骤S30、计算特写场景中实际点的坐标与全景场景中对应的实际点的坐标之间的线性比例关系。
步骤S40、检测到目标进入场景切换的触发区域时,根据上述计算出的线性比例关系、特写区域和对应场景的姿态参数,将当前场景切换到被触发的场景。
在本发明的实施例中,由于特写中的点和全景中的点存在与实际位置点的对应关系,通过预先设计好的安装调试界面的软件和标定步骤,并借助外界标记物(教师)的辅助,标定相机对应特写场景和全景场景的姿态,并确保相机由全景到特写、特写与特写能准确切换,最后完成场景切换。
其中,场景切换的触发区域包括全景场景与特写场景之间的触发区域,当定义的特写场景有多个时,也包括不同的特写场景之间的触发区域;上述姿态参数包括但不限于相机的水平参数、俯仰参数以及相机的焦距。
作为优选地,为了在特写场景中更加准确的将相机的姿态调整到目标所在的位置,上述特写场景包括左边特写场景、右边特写场景和中间特写场景;触发区域对应的包括左边特写场景触发区域、右边特写场景触发区域和中间特写场景触发区域;特写场景的特写区域包括左边特写场景的特写区域、中间特写场景的特写区域和右边特写场景的特写区域。
针对上述步骤S10,根据本发明的实施例的方法还可以包括:
将左边特写场景的特写区域、中间特写场景的特写区域和右边特写场景的特写区域均绘制出来;
在特写场景拼接图中,选定左边特写场景的特写区域与中间特写场景的特写区域重叠部分的中线作为第一中线;选定中间特写场景的特写区域与右边特写场景的特写区域重叠部分的中线作为第二中线;
特写场景拼接图中的第一中线和第二中线对应到全景场景图中的第一中线和第二中线,将第一中线确定为在全景场景下左边特写场景的特写区域与中间特写场景的特写区域之间的分界线;将第二中线确定为中间特写场景的特写区域与右边特写场景的特写区域之间的分界线。
根据本实施例的一个示例,根据上述第一中线和第二中线将镜头从全景场景切换到合适的特写场景的方法包括:
在全景场景下,根据第一中线和第二中线判断目标所对应的特写场景;
根据预先绘制的特写场景的特写区域,将当前的全景场景切换到对应特写场景的特写区域。
以将镜头从全景场景切换到左边特写场景的特写区域为例,下面对照图6对该方案进行解释。
当检测到目标在第一中线m1n1的左边时,判断目标进入左边特写场景,此时根据预先存储的与左边特写场景对应的相机的姿态,将当前的全景场景切换到左边特写场景,切换后相机显示屏的显示如图4所示,与左边特写场景对应的左边特写场景的特写区域a1b1d1c1如图4所示显示。
在本发明的实施例中,由于相邻的特写场景的特写区域之间具有重叠的区域,本实施例的目的是为了使得当教师在相机处于全景姿态时从任意方向任何位置进入全景特写触发区域时,都可以切换到唯一的合适的特写场景,
实施例一
图2示出了根据本发明的另一个实施例的适用于多场景切换的相机姿态标定方法的流程图,为了便于说明,仅列出本发明实施例相关的内容,详述如下。
作为本发明的一优选实施例,上述特写场景的特写区域为矩形,当特写场景为两个以上时,上述步骤S30具体包括:
步骤S31、在世界坐标系下根据标定的顶点所表示的实际点确定特写场景的特写区域的顶点坐标;
步骤S32、在世界坐标系下,根据顶点坐标所对应的实际点绘制全景场景与特写场景的拼接画面;
步骤S33、根据全景场景中顶点与特写场景中顶点的坐标之间的线性比例关系,计算全景场景中的其它实际点对应特写场景中的其它实际点的坐标。
作为优选地,在特写场景下,场景切换的特写区域的侧边界与相机显示屏的侧边之间的宽度为一个人的身宽,范围可为25~50cm。
作为优选的,该方法还包括步骤S50:
步骤S50、将相机在全景场景下的姿态参数、在特写场景下的姿态参数以及顶点在不同的场景中的坐标均存储到相机的内部芯片中。
在本发明的实施例中,该实施例主要是提供计算全景场景画面中触发区域对应点的坐标计算方法,根据特写场景拼接图与全景场景画面与实际场景中点的对应关系。
实施例二
图3为根据本发明的一个实施例的中间特写场景的特写区域示意图,作为本发明的一优选实施例,为了便于说明,仅列出本发明实施例相关的内容,详述如下。
如图3所示,其中矩形A2B2D2C2表示相机视频画面边界所组成的图像,在图像上绘制矩形a2b2d2c2、矩形s2w2v2u2、线段RtRb及线段LtLb。当当前的场景为特写场景时,矩形a2b2d2c2表示在图像坐标系下特写场景的特写区域,超过该区域就会进入特写场景的触发区域,例如检测到目标进入线段a2b2的左侧时,将当前的中间特写场景切换到左边特写场景,检测到目标进入线段c2d2的右侧时,将当前的中间特写场景切换到右边特写场景,矩形s2w2v2u2所表示的图像区域所指代的是世界坐标系下的区域是全景场景切换到该特写场景的触发区域,但不包括全部的触发区域,线段RtRb表示中间特写场景和右边特写场景的转换线,线段LtLb表示中间特写场景和左边特写场景的转换线,暂时线段RtRb和矩形边u2v2重合,线段LtLb和矩形边s2w2重合。
同样的,如图4和图5所示,在左边特写场景的特写区域和右边特写场景的特写区域中也绘制对应的矩形和线段。
为确保教师在特写场景的画面中以合适的大小出现,如图3~图5所示,场景切换的特写区域的侧边界(a2b2d2c2的右侧边的线段)与相机显示屏的侧边之间的宽度L1为一个人的身宽,同时在这里取特写场景与特写场景的触发区域重叠区域的宽度L2=2L1,保证相机从一个特写场景切换到另一个特写场景后教师基本处于画面的中心附近。
需要说明的是,特写场景需要在实际场景中进行调试,以保证切换后目标大小合适和目标位置处于画面中心附近,故人为辅助标定更简单易行。作为优选的,该方法还可以包括:
教师跟踪球机软件调试界面的特写触发区域和全景特写触发区域的绘制以及各种触发线等的绘制;
教师跟踪球机对应特写场景的姿态标定。
具体地,教师跟踪球机标定教室中间特写场景、教师跟踪球机标定教室左边特写场景、教师跟踪球机标定教室右边特写场景。
在本发明的实施例中,该实施例的目的是为了提供在全景场景所在的世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的显示区域,供后续步骤使用。同时,在教师跟踪球机特写场景的软件画面中,特写场景中的全景切换到特写的触发区域的左右边界与特写场景切换线重合,并在左、右特写场景中对应的全景的触发区域的边界点标以标记物,为教师跟踪球机对应全景的姿态标定做准备。
实施例三
为了便于说明,仅列出本发明实施例相关的内容,详述如下。
针对上述步骤S30、根据相机在特写场景下标定的姿态,存储对应的姿态参数,当特写场景包括左边特写场景、右边特写场景和中间特写场景时,对应标定的在不同特写场景下相机的姿态也不相同,作为本发明的一优选实施例,具体的,标定中间特写场景时:
通过软件安装调试界面,调整相机的水平pan,将相机大概转向中间场景,使软件获取的相机获取图像上的绘制的水平线与实际场景中的水平线平行;
然后调整相机的焦距zoom,使得图4中表示的距离L1恰能容纳一个人的身位;
调整相机的俯仰tilt,使得目标(教师)的上半部分能落在矩形s2w2v2u2中;
中间特写场景的相机姿态参数已经调整完毕,此时用标记物标记线段RtRb和线段LtLb的端点Rb和Lb所对应的世界坐标系下的场景中的平面点位置,至此,对应中间特写场景的相机姿态和中间特写场景标定完毕,记录此时的相机姿态参数。
标定左边特写场景时:
通过软件安装调试界面,保持焦距zoom不变,先调整相机的水平pan,将相机移动到左边场景,并对俯仰tilt进行微调,使得图4所示的软件界面中的线段MltMlb的端点Mlb与对应中间特写场景端点Lb的标记物重合。
左边特写场景的相机姿态已经调整完毕,此时用标记物标记矩形s1w1v1u1的左上顶点s1所对应的世界坐标系下的场景中的平面点位置,至此,对应左边特写场景的相机姿态和左边特写场景标定完毕,记录此时的相机姿态参数。
标定右边特写场景时:
现通过软件安装调试界面,保持焦距zoom不变,先调整相机的水平pan,将相机移动到右边场景,并对俯仰tilt进行微调,使得图5所示的软件界面中的线段MrtMrb的端点Mrb与对应中间特写场景端点Rb的标记物重合。
右边特写场景的相机姿态已经调整完毕,此时用标记物标记矩形s3w3v3u3的左下顶点v3所对应的世界坐标系下的场景中的平面点位置,至此,对应右边特写场景的相机姿态和右边特写场景标定完毕,记录此时的相机姿态参数。
该实施例的目的在于结合附图,为标定左边特写场景、中间特写场景、右边特写场景时相机所需要保持的姿态提供一种具体可行的方案。
实施例四
为了便于说明,仅列出本发明实施例相关的内容,详述如下。
图6为根据本发明的一个实施例的左边特写场景、中间特写场景和右边特写场景的拼接示意图,为了便于说明,仅列出本发明实施例相关的内容,详述如下。
如图4~图6所示,作为本发明的一优选实施例,上述步骤S30的具体的计算过程如下。
首先,规定全景触发的区域位置:
将世界坐标系下的特写场景对应的软件界面按照世界坐标系下的位置排列,可以看到三个特写场景在世界坐标系下的粗略的位置分布,从左到右依次代表左、中、右特写场景,左边特写场景的线段MltMlb、c1d1矩形边分别和中间特写场景的矩形边a2b2、线段LtLb重合,中间特写场景的线段RtRb、矩形边c2d2分别和右边特写场景的矩形边a3b3、线段MrtMrb重合。
这里,点s1、w1、v3、u3组成了一个矩形s1w1v3u3,为了严格区分全景中左、中、右触发区域,取线段m1n1、m2n2如图5所示,m1n1为平分矩形a2b2d1c1的直线与矩形s1w1v3u3的交线(上述第一中线),同样m2n2为平分矩形a3b3d2c2的直线与矩形s1w1v3u3的交线(上述第二中线),在左、右特写场景中同时增加0.5倍a2c1长度宽的矩形,如图6所示,此时矩形s1w1v3u3扩增为矩形s1′w1′v3′u3′,矩形s1′w1′n1m1为在全景场景下切换到左边特写触发区域,矩形m1n1n2m2为在全景场景下切换到中间特写触发区域,矩形m2n2v3′u3′为在全景场景下切换到右边特写触发区域。
然后,再计算全景触发区域间的比例关系:
根据摄像机成像模型的特点,线段间的比例关系在成像过程中保持不变,因此,可以根据三个特写场景对应的图像画面来计算世界坐标系下的线段比例关系,从而该线段关系映射到全景姿态下的摄像机图像画面中后,线段比例关系仍然保持不变。参考图5,直接根据对应不同特写场景中的s1和v3的标记物来直接获取全景触发区域的划分情况,下面为计算过程:
1.获取特写场景中s1m1、m1m2、m2u3的长度关系
在本例中,线段MltMlb与矩形边s1u3、w1v3的交点分别为u1′、v1′,线段MltMlb与矩形边s1u3、w1v3的交点分别为u1′、v1′,线段LtLb与矩形边s1u3、w1v3的交点分别s2′、w2′,线段RtRb与矩形边s1u3、w1v3的交点分别u2′、v2′,线段MrtMrb与矩形边s1u3、w1v3的交点分别s3′、w3′。
s1m1=s1u1′+u1′m1
m1m2=m1s2′+s2′u2′+u2′m2=s2′u2′+2u1′m1
m2u3=m2s3′+s3′u3=s1u1′+u1′m1
其中,s1u1′=Mltxl-s1xl,s2′u2′=Rtxm-Ltxm其中Ltxl表示Lt点在左边特写场景下的坐标,其中Ltxm表示Lt点在中间特写场景下的坐标,其它点类似。通过上述公式的结果进一步可以求得s1m1、m1m2、m2u3三条线段之间的比例关系以及u1′m1和三条线段之间的比例关系:
r 1 = s 1 m 1 s 1 m 1 + m 1 m 2 + m 2 u 3 , r 2 = s 1 m 1 + m 1 m 2 s 1 m 1 + m 1 m 2 + m 2 u 3 , r 3 = u 1 ′ m 1 s 1 m 1 + m 1 m 2 + m 2 u 3
特写场景图像拼接成的图像中的s1m1、m1m2、m2u3三条线段之间的比例关系即为世界坐标系中s1m1、m1m2、m2u3三条线段对应的实际线段之间的比例关系。
2.计算全景画面中触发区域的位置
参阅图6,对照图5,矩形EFLK对应矩形s1w1v3u3,矩形E′F′L′K′对应矩形s1′w1′v3′u3′,矩形E′F′HG对应矩形s1′w1′n1m1,矩形GHJI对应矩形m1n1n2m2,矩形IJL′K′对应矩形m2n2v3′u3′,它们都对应真实场景中的同一区域和位置。
此时E点和L点对应图5中s1和v3,它们共同对应实际场景中的标记物,用鼠标或其他方式获取E、L点的坐标,此时计算其余各点的坐标的计算过程如下:
G x = EG EK × ( L x - E x ) + E x = r 1 × ( L x - E x ) + E x , G y = E y
I x = EI EK × ( L x - E x ) + E x = r 2 × ( L x - E x ) + E x , I y = E y
E ′ x = E x - E ′ E EK × ( L x - E x ) = E x - r 3 × ( L x - E x ) , E ′ y = E y
K ′ x = KK ′ EK × ( L x - E x ) + L x = r 3 × ( L x - E x ) + L x , K ′ y = E y
Hx=Gx,Hy=Ly;Jx=Ix,Jy=Ly
F′x=E′x,F′y=Ly;L′x=K′x,L′y=Ly
下标x表示点的横坐标,下标y表示点的纵坐标,上述公式中用到了图7与图6中对应线段间的比例关系,将这些点的坐标烧写到相机芯片里去。
本实施例为上述实施例一提供了一种进一步具体的算法,其目的在于计算出全景场景与特写场景之间进行切换后,图像中对应的实际点的坐标的线性比例关系。
实施例五
为了便于说明,仅列出本发明实施例相关的内容,详述如下。
由于相邻的特写场景间具有重叠的区域,必须对该部分重叠区域进行规定,使得当教师在相机处于全景姿态时从任意方向任何位置进入了全景特写触发区域可以切换到唯一的合适的特写场景。在这里,提出对重叠的特写场景的触发区域进行平分。
根据摄像机成像模型的特点,线段间的比例关系在成像过程中保持不变,参考图6(特写场景的画面拼接图),对照图7(全景画面),图6中左边特写场景的触发区域矩形框a1b1d1c1与中间特写场景的触发区域矩形框a2b2d2c2有重叠区域矩形框a2b2d1c1,该区域原来没有定义,故对该重叠区域进行平分,平分线与特写场景拼接图中的全景到特写的触发区域矩形s1′w1′v3′u3′的交线为m1n1,同样,右边特写场景与中间特写场景的触发区域的重叠区域的平分线与矩形s1′w1′v3′u3′的交线为m2n2。图6中的全景到特写的触发区域E′F′L′K′对应图5中的s1′w1′v3′u3′,同时线段EF、GH、IJ、KL对应线段s1w1、m1n1、m2n2、u3v3,这样在跟踪球机处于全景姿态时,教师进入全景到特写的触发区域后,只要进入位置在GH的左侧,球机将切换到左边特写场景,IJ的右侧,球机将切换到右边特写场景,如果在GH和IJ之间,球机将切换到中间特写场景。
本实施例的目的在于当教师在相机处于全景姿态时从任意方向任何位置进入了全景特写触发区域时,可以自动切换到唯一的合适的特写场景。
实施例六
图8示出了根据本发明的一个实施例的适用于多场景切换的相机姿态标定装置的示范性结构框图,如图8所示的一种适用于多场景切换的相机姿态标定装置,该装置包括:
场景绘制模块10,用于在全景场景所在的世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的特写区域;
姿态参数存储模块20,用于根据相机在特写场景下标定的姿态,存储对应的姿态参数;
计算模块30,用于计算特写场景中实际点的坐标与全景场景中对应的实际点的坐标之间的线性比例关系;
场景切换模块40,用于检测到目标进入场景切换的触发区域时,根据线性比例关系、特写区域和对应场景的姿态参数,将当前场景切换到被触发的场景。
其中,作为优选地,该适用于多场景切换的相机姿态标定装置还包括:
参数存储单元,用于将相机在全景场景下的姿态参数、在特写场景下的姿态参数、以及顶点在不同的场景中的坐标到相机的内部芯片中。
上述计算模块30具体包括:
顶点坐标对应单元31,用于在世界坐标系下根据标定的顶点所表示的实际点确定特写场景的特写区域的顶点坐标;
画面拼接单元32,用于在世界坐标系下,根据顶点坐标所对应的实际点绘制全景场景与特写场景的拼接画面;
计算单元33,用于根据全景场景中顶点与特写场景中顶点的坐标之间的线性比例关系,计算全景场景中的其它实际点对应特写场景中的其它实际点的坐标。
上述场景绘制模块10具体包括:
特写场景绘制模块,用于将左边特写场景的特写区域、中间特写场景的特写区域和右边特写场景的特写区域在全景场景所在的世界坐标系下均绘制出来;
中线选定模块,用于选定左边特写场景的特写区域与中间特写场景的特写区域重叠部分的中线作为第一中线;选定中间特写场景的特写区域与右边特写场景的特写区域重叠部分的中线作为第二中线;
分界线确定模块,将第一中线确定为在全景场景下左边特写场景的特写区域与中间特写场景的特写区域之间的分界线;将第二中线确定为在全景场景下中间特写场景的特写区域与右边特写场景的特写区域之间的分界线。
作为优选的,上述场景切换模块40具体包括:
目标判断单元,用于在全景场景下,根据第一中线和第二中线判断目标所对应的特写场景;
切换单元,根据预先绘制的特写场景的特写区域,将当前场景切换到对应特写场景的特写区域。
在根据本发明的一个实施例提供的方法和装置中,通过预先绘制好的触发区域及特写场景的显示区域,借助外界标记物的辅助,标定相机对应特写场景和全景场景的姿态参数,并确保相机由全景到特写、特写与特写能准确切换,当检测到目标进入触发区域时,将相机的当前场景切换到触发对应的场景,使得本专利能够解决单个球机多个固定场景切换的问题,且由于特写中的点和全景中的点存在对应关系,只要计算出对应关系便可标定全景,操作起来,简单易行。
本领域技术人员可以理解为上述实施例包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
本领域普通技术人员还可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以在存储于一计算机可读取存储介质中,所述的存储介质,包括ROM/RAM、磁盘、光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种适用于多场景切换的相机姿态标定方法,其特征在于,所述方法包括:
在世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的特写区域;
根据相机在特写场景下标定的姿态,存储对应的姿态参数;
计算特写场景中实际点的坐标与全景场景中对应的实际点的坐标之间的线性比例关系;
检测到目标进入所述场景切换的触发区域时,根据所述线性比例关系、所述特写区域和所述对应场景的姿态参数,将当前场景切换到被触发的场景。
2.根据权利要求1所述的方法,其特征在于,所述特写场景包括左边特写场景、右边特写场景和中间特写场景;所述触发区域包括左边特写场景触发区域、右边特写场景触发区域和中间特写场景触发区域;所述特写场景的特写区域包括左边特写场景的特写区域、右边特写场景的特写区域和中间特写场景的特写区域。
3.根据权利要求2所述的方法,其特征在于,在全景场景所在的世界坐标系下,针对所述根据预设的形状绘制场景切换的触发区域的方法还包括:
将所述左边特写场景的特写区域、中间特写场景的特写区域和右边特写场景的特写区域在全景场景所在的世界坐标系下均绘制出来;
选定所述左边特写场景的特写区域与所述中间特写场景的特写区域重叠部分的中线作为第一中线;选定所述中间特写场景的特写区域与所述右边特写场景的特写区域重叠部分的中线作为第二中线;
将所述第一中线确定为在全景场景下左边特写场景的特写区域与中间特写场景的特写区域之间的分界线;将所述第二中线确定为在全景场景下中间特写场景的特写区域与右边特写场景的特写区域之间的分界线。
4.根据权利要求3所述的方法,其特征在于,针对所述检测到目标进入所述场景切换的触发区域时,将当前场景切换到被触发的场景的方法还包括:
在全景场景下,根据所述第一中线和所述第二中线判断目标所对应的特写场景;
根据预先绘制的特写场景的特写区域,将当前场景切换到对应特写场景的特写区域。
5.根据权利要求1所述的方法,其特征在于,所述特写场景的特写区域为矩形,当所述特写场景为两个以上时,所述方法还包括:
在所述世界坐标系下根据标定的顶点所表示的实际点确定所述特写场景的特写区域的顶点坐标;
在所述世界坐标系下,根据所述顶点坐标所对应的实际点绘制所述全景场景与所述特写场景的拼接画面;
根据全景场景中顶点与特写场景中顶点的坐标之间的线性比例关系,计算全景场景中的其它实际点对应特写场景中的其它实际点的坐标。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
将相机在全景场景下的姿态参数、在特写场景下的姿态参数以及所述顶点在不同的场景中的坐标均存储到相机的内部芯片中。
7.根据权利要求1至6任一项所述的方法,其特征在于,在所述特写场景下,所述场景切换的特写区域的侧边界与所述相机显示屏的侧边之间的宽度范围为25~50cm。
8.一种适用于多场景切换的相机姿态标定装置,其特征在于,所述装置包括:
场景绘制模块,用于在世界坐标系下根据预设的形状绘制场景切换的触发区域以及特写场景的特写区域;
姿态参数存储模块,用于根据相机在特写场景下标定的姿态,存储对应的姿态参数;
计算模块,用于计算特写场景中实际点的坐标与全景场景中对应的实际点的坐标之间的线性比例关系;
场景切换模块,用于检测到目标进入所述场景切换的触发区域时,根据所述线性比例关系、所述特写区域和所述对应场景的姿态参数,将当前场景切换到被触发的场景。
9.根据权利要求8所述的装置,其特征在于,所述装置包括:
顶点坐标对应单元,用于在所述世界坐标系下根据标定的顶点所表示的实际点确定所述特写场景的特写区域的顶点坐标;
画面拼接单元,用于在所述世界坐标系下,根据所述顶点坐标所对应的实际点绘制所述全景场景与所述特写场景的拼接画面;
计算单元,用于根据全景场景中顶点与特写场景中顶点的坐标之间的线性比例关系,计算全景场景中的其它实际点对应特写场景中的其它实际点的坐标。
10.根据权利要求8或9所述的装置,其特征在于,所述装置还包括:
参数存储单元,用于将相机在全景场景下的姿态参数、在特写场景下的姿态参数以及所述顶点在不同的场景中的坐标到相机的内部芯片中。
CN201410526130.9A 2014-09-30 2014-09-30 一种适用于多场景切换的相机姿态标定方法和装置 Active CN104268887B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410526130.9A CN104268887B (zh) 2014-09-30 2014-09-30 一种适用于多场景切换的相机姿态标定方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410526130.9A CN104268887B (zh) 2014-09-30 2014-09-30 一种适用于多场景切换的相机姿态标定方法和装置

Publications (2)

Publication Number Publication Date
CN104268887A true CN104268887A (zh) 2015-01-07
CN104268887B CN104268887B (zh) 2017-07-11

Family

ID=52160406

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410526130.9A Active CN104268887B (zh) 2014-09-30 2014-09-30 一种适用于多场景切换的相机姿态标定方法和装置

Country Status (1)

Country Link
CN (1) CN104268887B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104869365A (zh) * 2015-06-02 2015-08-26 阔地教育科技有限公司 一种基于直录播系统的鼠标跟踪方法及装置
CN108230348A (zh) * 2016-12-22 2018-06-29 杭州海康威视数字技术股份有限公司 一种目标跟踪方法及装置
CN112308766A (zh) * 2020-10-19 2021-02-02 武汉中科通达高新技术股份有限公司 一种图像数据展示方法、装置、电子设备及存储介质
CN112907652A (zh) * 2021-01-25 2021-06-04 脸萌有限公司 相机姿态获取方法、视频处理方法、显示设备和存储介质
CN114125267A (zh) * 2021-10-19 2022-03-01 上海赛连信息科技有限公司 一种摄像头智能跟踪的方法和装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101183427A (zh) * 2007-12-05 2008-05-21 浙江工业大学 基于计算机视觉的违章停车检测装置
CN101198030A (zh) * 2007-12-18 2008-06-11 北京中星微电子有限公司 一种视频监控系统的摄像机定位方法及定位装置
CN102096929A (zh) * 2011-01-30 2011-06-15 吴柯维 一种教学智能录播系统用教师位置检测方法
CN102622767A (zh) * 2012-03-05 2012-08-01 广州乐庚信息科技有限公司 双目非标定空间定位方法
CN103093654A (zh) * 2013-01-28 2013-05-08 北京航空航天大学 一种双摄像机交互式智能跟踪教学系统
US20130285909A1 (en) * 2010-12-24 2013-10-31 Kevadiya, Inc. System and method for automated capture and compaction of instructional performances
CN103428461A (zh) * 2013-08-16 2013-12-04 北京中广上洋科技股份有限公司 一种授课影像录制的系统和方法
CN103777643A (zh) * 2012-10-23 2014-05-07 北京网动网络科技股份有限公司 一种基于图像定位的摄像机自动跟踪系统及跟踪方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101183427A (zh) * 2007-12-05 2008-05-21 浙江工业大学 基于计算机视觉的违章停车检测装置
CN101198030A (zh) * 2007-12-18 2008-06-11 北京中星微电子有限公司 一种视频监控系统的摄像机定位方法及定位装置
US20130285909A1 (en) * 2010-12-24 2013-10-31 Kevadiya, Inc. System and method for automated capture and compaction of instructional performances
CN102096929A (zh) * 2011-01-30 2011-06-15 吴柯维 一种教学智能录播系统用教师位置检测方法
CN102622767A (zh) * 2012-03-05 2012-08-01 广州乐庚信息科技有限公司 双目非标定空间定位方法
CN103777643A (zh) * 2012-10-23 2014-05-07 北京网动网络科技股份有限公司 一种基于图像定位的摄像机自动跟踪系统及跟踪方法
CN103093654A (zh) * 2013-01-28 2013-05-08 北京航空航天大学 一种双摄像机交互式智能跟踪教学系统
CN103428461A (zh) * 2013-08-16 2013-12-04 北京中广上洋科技股份有限公司 一种授课影像录制的系统和方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104869365A (zh) * 2015-06-02 2015-08-26 阔地教育科技有限公司 一种基于直录播系统的鼠标跟踪方法及装置
CN108230348A (zh) * 2016-12-22 2018-06-29 杭州海康威视数字技术股份有限公司 一种目标跟踪方法及装置
CN112308766A (zh) * 2020-10-19 2021-02-02 武汉中科通达高新技术股份有限公司 一种图像数据展示方法、装置、电子设备及存储介质
CN112308766B (zh) * 2020-10-19 2023-11-24 武汉中科通达高新技术股份有限公司 一种图像数据展示方法、装置、电子设备及存储介质
CN112907652A (zh) * 2021-01-25 2021-06-04 脸萌有限公司 相机姿态获取方法、视频处理方法、显示设备和存储介质
CN112907652B (zh) * 2021-01-25 2024-02-02 脸萌有限公司 相机姿态获取方法、视频处理方法、显示设备和存储介质
CN114125267A (zh) * 2021-10-19 2022-03-01 上海赛连信息科技有限公司 一种摄像头智能跟踪的方法和装置
CN114125267B (zh) * 2021-10-19 2024-01-19 上海赛连信息科技有限公司 一种摄像头智能跟踪的方法和装置

Also Published As

Publication number Publication date
CN104268887B (zh) 2017-07-11

Similar Documents

Publication Publication Date Title
EP3565739B1 (en) Rear-stitched view panorama for rear-view visualization
CN111046743B (zh) 一种障碍物信息标注方法、装置、电子设备和存储介质
JP4964801B2 (ja) 2次元実写映像から3次元モデルを生成する方法及び装置
CN104268887A (zh) 一种适用于多场景切换的相机姿态标定方法和装置
US8436904B2 (en) Method and apparatus for calibrating video camera
AU2008322565B2 (en) Method and apparatus of taking aerial surveys
CN112180373B (zh) 一种多传感器融合的智能泊车系统和方法
CN112444242B (zh) 一种位姿优化方法及装置
US10084994B2 (en) Live streaming video over 3D
CN103226838A (zh) 地理场景中移动监控目标的实时空间定位方法
CN108470379A (zh) 三维图像融合方法和装置
CN111737518A (zh) 基于三维场景模型的图像展示方法、装置及电子设备
CN103258329A (zh) 一种基于圆球一维特性的摄像机标定方法
CN101122464A (zh) 一种gps导航系统中道路显示方法、装置及设备
CN110084797B (zh) 平面检测方法、装置、电子设备和存储介质
US20230328400A1 (en) Auxiliary focusing method, apparatus, and system
CN104976968A (zh) 一种基于led标签跟踪的三维几何测量方法及系统
CN105469387A (zh) 一种拼接质量的量化方法和量化装置
CN105447865A (zh) 一种评估全景拼接算法静态拼接质量的方法和装置
TW565735B (en) Method for determining the optical parameters of a camera
Wang et al. A synthetic dataset for Visual SLAM evaluation
JP4527638B2 (ja) 広域監視パノラマシステム
WO2021115236A1 (zh) 一种标记场景用来定位的方法和装置
CN116862997A (zh) 相机标定计算并验证的方法、装置、设备及存储介质
Ai et al. A method for correcting non-linear geometric distortion in ultra-wide-angle imaging system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 518107 Guangdong province Shenzhen City Guangming Street million Daiheng high tech Industrial Park No. 5 Building 5 floor

Applicant after: Shenzhen City Zhongzhi Kechuang Robot Co.,Ltd.

Address before: 518107 Guangdong province Shenzhen City Guangming Street million Daiheng high tech Industrial Park No. 5 Building 5 floor

Applicant before: Shenzhen in the United States and the United States and science and Technology Co.,Ltd.

Address after: 518107 Guangdong province Shenzhen City Guangming Street million Daiheng high tech Industrial Park No. 5 Building 5 floor

Applicant after: Shenzhen in the United States and the United States and science and Technology Co.,Ltd.

Address before: 518107 Guangdong province Shenzhen City Guangming Street million Daiheng high tech Industrial Park No. 5 Building 5 floor

Applicant before: SHENZHEN COSON ELECTRONIC CO.,LTD.

COR Change of bibliographic data
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 518107 Guangdong province Shenzhen City Guangming Street million Daiheng high tech Industrial Park No. 5 Building 5 floor

Applicant after: SMART SECURITY & SURVEILLANCE ROBOT Co.,Ltd.

Address before: 518107 Guangdong province Shenzhen City Guangming Street million Daiheng high tech Industrial Park No. 5 Building 5 floor

Applicant before: Shenzhen City Zhongzhi Kechuang Robot Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
PP01 Preservation of patent right
PP01 Preservation of patent right

Effective date of registration: 20190327

Granted publication date: 20170711