CN105191278A - 广角镜头图像校正方法及其装置 - Google Patents

广角镜头图像校正方法及其装置 Download PDF

Info

Publication number
CN105191278A
CN105191278A CN201480002041.2A CN201480002041A CN105191278A CN 105191278 A CN105191278 A CN 105191278A CN 201480002041 A CN201480002041 A CN 201480002041A CN 105191278 A CN105191278 A CN 105191278A
Authority
CN
China
Prior art keywords
image
wide
coordinate
correcting
ellipse
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480002041.2A
Other languages
English (en)
Inventor
崔荣三
金旭泰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HINET CO Ltd
Original Assignee
HINET CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HINET CO Ltd filed Critical HINET CO Ltd
Publication of CN105191278A publication Critical patent/CN105191278A/zh
Pending legal-status Critical Current

Links

Classifications

    • G06T3/12—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G06T5/80—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"

Abstract

本发明涉及对基于广角镜头的图像的失真进行校正的方法及其装置，涉及能够以较小计算量、较少资源来迅速校正图像失真的图像校正方法及其装置。

Description

广角镜头图像校正方法及其装置
技术领域
本发明涉及对基于广角镜头的图像的失真进行校正的方法及其装置，涉及能够以较小计算量、较少资源来迅速校正图像失真的图像校正方法及其装置。
背景技术
鱼眼镜头一般是指具有180度程度视角的宽视野的镜头。相比于利用标准镜头时，配备例如鱼眼镜头的广角镜头的摄像头具有短焦距、宽视角的特性，并且所获得图像的放射性失真变得显著。由广角摄像头获得的图像具有非线性，为了校正由此发生的失真，一般使用对光学原理进行逆分析的方法。然而由于很难正确示出光心、焦距、折射率等失真因子和失真校正式，线性化倾向于不能完整地被实现。同时，根据失真校正式的失真校正消耗较多资源，因而很难实时地实现图像。
发明内容
技术问题
本发明的目的在于提供一种失真校正方法，其能够以较少资源实现失真图像的校正，并且无需获得失真因子而容易地适用于不同种类的广角镜头。
技术手段
根据本发明的失真校正方法，其用于对基于广角镜头的摄像区域的失真进行校正，并且可以包括步骤：设定经过所述摄像区域的中心的水平基准线和垂直基准线；以所述中心为基准来设定将所述水平基准线的一部分作为长轴并将所述垂直基准线的一部分作为短轴的椭圆曲线的一部分；将属于所述椭圆曲线的一部分中的像素的y值变换为所述短轴的y值；以及存储属于所述椭圆曲线的一部分中的像素的坐标值与所变换的坐标值之间的对应关系作为失真校正表格的条目。
而且，所述椭圆中的第一椭圆的短轴长度与第二椭圆的短轴长度之差可以为第一设定值的倍数。
而且，所述第一椭圆的长轴长度与所述第二椭圆的长轴长度之差可以为第二设定值的倍数，所述第二设定值可以小于所述第一设定值。
而且，所述第一椭圆和所述第二椭圆的交叉点可以为0个。
而且，所述椭圆曲线的一部分可以为直角坐标系的象限中的任意一个。
而且，所述失真校正表格的校正区域可以属于显示区域。
而且，还可以包括步骤：补充基于所述失真校正表格的条目关于所述水平基准线和所述垂直基准线中的至少一个基准线对称的追加条目。
而且，还可以包括步骤：与用户操作、用户动作和显示器的方向中的任意一个相对应地设定新的水平基准线和新的垂直基准线；以及通过与已有水平基准线与新的水平基准线之间的角度相对应地将所述失真校正表格的条目的坐标值进行旋转移动来生成第二失真校正表格。
而且，所述第二设定值可以基于所述广角镜头和所述广角镜头与被摄体之间的距离中的至少一个在预设定的范围内变化。
根据本发明实施例的图像校正装置，可以包括：基准设定部，其将通过广角镜头获得的样本图像划分为成像的摄像区域和没有成像的非摄像区域，并设定经过所述摄像区域的中心的水平基准线和垂直基准线；表格生成部，其以所述中心为基准来设定将所述水平基准线的一部分作为长轴并将所述垂直基准线的一部分作为短轴的椭圆曲线的一部分，并将属于所述椭圆曲线的一部分中的像素的y值变换为所述短轴的y值；以及存储部，其存储属于所述椭圆曲线的一部分中的像素的坐标值与所变换的坐标值之间的对应关系作为失真校正表格的条目。
根据本发明实施例的保安管理装置，包括：多个摄像头，其各自配备广角镜头；主服务器，其从所述多个摄像头分别接收广角图像，并将多个广角图像中的至少一个显示在显示装置上；以及附属服务器，其从所述主服务器接收校正命令，对所述多个广角图像中的至少一个广角图像进行校正并将校正图像传送至所述主服务器，所述主服务器和所述附属服务器中的任意一个服务器可以包括：基准设定部，其将所述多个广角图像划分为成像的摄像区域和没有成像的非摄像区域，并设定经过所述摄像区域的中心的水平基准线和垂直基准线；表格生成部，其以所述中心为基准来设定将所述水平基准线的一部分作为长轴并将所述垂直基准线的一部分作为短轴的椭圆曲线的一部分，并将属于所述椭圆曲线的一部分中的像素的y值变换为所述短轴的y值；存储部，其存储属于所述椭圆曲线的一部分中的像素的坐标值与所变换的坐标值之间的对应关系作为失真校正表格的条目；以及图像校正部，其利用所述失真校正表格来对要校正的图像进行校正，以生成校正图像。
而且，所述主服务器可以将所述多个广角图像以及所述多个广角图像分别被校正过的多个校正图像中的至少一个显示在所述显示装置上，根据用户的第一命令来使所述多个广角图像中的第一广角图像被校正过的校正图像和所述多个广角图像中的除所述第一广角图像之外的广角图像进行显示，并根据用户的第二命令来使所述多个校正图像进行显示。
而且，所述附属服务器可以为多个，并且所述主服务器可以检查主服务器的负载量和多个附属服务器中每一个的负载量，并按照负载量少的顺序使多个原始图像的校正处理执行。
技术效果
根据本发明的广角镜头的图像校正方法，无需进行复杂计算，计算量也较小，在消耗较少的装置资源的同时迅速执行校正，从而能够实时地显示图像。此外，能够容易地适用于现有的广角镜头，从而也可以适用于已设置的广角镜头。
附图说明
图1是基于广角镜头的样本图像。
图2是示出基于根据本发明实施例的基准设定部的校正基准的图。
图3至图7是示出根据本发明实施例的表格生成部的表格生成原理的图。
图8是根据本发明的失真校正的图像。
图9是示出根据本发明实施例的图像失真校正系统的框图。
图10是示出根据本发明另一实施例的对摄像区域的表格生成基础的图。
图11是根据本发明实施例的图像校正方法的流程图。
图12是针对用于处理用户动作的输入画面的图像。
图13是示出根据本发明实施例的保安管理系统的框图。
图14是示出针对根据本发明的保安管理系统的画面的实施例的图。
图15是示出根据本发明实施例的保安管理系统的图像处理方法的流程图。
具体实施方式
下文中，将参照附图来详细说明本发明。
第一、第二等术语可用于说明多种构成要素，但所述构成要素不限于所述术语。所述术语用于将一个构成要素区别于另一构成要素。例如，在不脱离本发明权利要求范围的情况下，可以将第一构成要素命名为第二构成要素，类似地将第二构成要素命名为第一构成要素。术语以及/或者包括多个相关记载项的组合或者多个相关记载项中的任意项。
当提及某一构成要素“连接”或“耦合”到另一构成要素时，其可以直接连接或耦合到该另一构成要素，也应当理解其中间可以存在其他构成要素。相比之下，当提及某一构成要素“直接连接”或“直接耦合”到另一构成要素时，应当理解中间不存在其他构成要素。此外，网络中的第一构成要素与第二构成要素连接或耦合是指在第一构成要素与第二构成要素之间可以通过有线或无线来收发数据。
此外，以下说明中使用的构成要素的后缀“模块”或“部”是仅考虑容易地撰写本说明书而给予的，并非通过其来赋予特别重要的意义或者作用。因此，所述“模块”和“部”可以混合使用。
这样的构成要素在实际应用中实现时，可以根据需要将2个或2个以上的构成要素合并为1个构成要素，或者可以将1个构成要素划分为2个或2个以上的构成要素。
根据本发明的广角镜头图像校正方法可以实现在多种装置中。
图1是基于广角镜头的样本图像，图2是示出基于根据本发明实施例的基准设定部的校正基准的图，图3至图7是示出根据本发明实施例的表格生成部的表格生成原理的图，图8是根据本发明的失真校正的图像，图9是示出根据本发明实施例的图像失真校正系统的框图，图10是示出根据本发明另一实施例的对摄像区域的表格生成基础的图，图12是针对用于处理用户动作的输入画面的图像。
参照图9，图像失真校正系统可以包括：摄像图像的广角镜头1；对从广角镜头1接收到的图像进行校正的图像校正装置2；以及将图像校正装置2的校正的图像进行显示的显示装置5。
图像校正装置2可以包括基准设定部10、表格生成部20、图像校正部30以及存储部50。
存储部50可以存储有用于基准设定部10、表格生成部20以及图像校正部30的处理和控制的程序，并且可以执行用于将输入或输出的数据(例如，广角镜头的图像、表格生成部20所生成的表格、校正的图像等)临时或永久存储的功能。
存储部50可以包括闪速存储器、硬盘、微型多媒体卡、卡型存储器(例如SD或XD存储器等)、RAM、ROM等中的至少一种类型的存储介质。此外，可以利用远程装置，例如通过互联网的网络存储装置等。
基准设定部10可以将通过广角镜头获得的样本图像区分为成像的摄像区域和没有成像的非摄像区域。图1的外围黑色部分为非摄像区域，其对应于通常以镜筒形态构成的摄像模块的壳体的内圆周表面。本实施例中摄像模块所获得的摄像区域具有圆形形状，但不限于此。例如，摄像区域可以具有横轴比竖轴长的椭圆形形状、或者圆形或椭圆形的一部分被切掉的形状。
为了区分摄像区域和非摄像区域，可以使用从图像检测出边缘的多种现有方法来区分非摄像区域的黑色与多种颜色的摄像区域。样本图像优选以白色为主，然而并不限于此。可以通过多个样本图像来求出区分摄像区域和非摄像区域的合适的最外轮廓线，或者可以利用上下或左右对称或点对称的点来求出合适的最外轮廓线。
参照图2，由基准设定部10求出的摄像区域的最外轮廓线100可以为圆形。基准设定部10可以确定摄像区域的中心O。基准设定部10可以将样本图像的中心设定为摄像区域的中心O，或者根据最外轮廓线100的坐标来求出中心O，或者将用户所选择的坐标设定为中心O。摄像区域为椭圆的情况由图10(a)示出。
基准设定部10可以设定穿过摄像区域的中心O的相互垂直的水平和垂直基准线。水平和垂直基准线可以对应于已设定的值、用户操作、用户动作和显示器装置的方向中的任意一个。例如，基准设定部10可以将对通过广角镜头入射的光进行检测的图像传感器所获得的图像本身的水平线和垂直线设定为水平基准线和垂直基准线，或者以预设定的方向设定水平基准线和垂直基准线。为了校正失真，可以将水平基准线和垂直基准线设定为1个或大于等于2个。
基准设定部10可以基于通过用户操作(例如通过鼠标、键盘、触摸屏等接口)接收的输入值来设定水平基准线和垂直基准线。基准设定部10可以基于用户动作(例如对通过摄像头接收的图像进行分析而得到的用户上肢的移动、或者图12示出的眼睛的移动)来设定水平基准线和垂直基准线。在显示装置5为大屏幕的情况下，基准设定部10可以设定水平基准线和垂直基准线，使得与用户眼睛所指示的地方的方向相对应的画面显示在大屏幕的一部分中。图像校正装置2还可以包括用于捕捉用户移动或眼睛的图像接收部(摄像头)(未示出)。在基于图像校正部30来显示图像的显示装置5为便携式装置的情况下，基准设定部10可以与显示装置5的方向相对应地设定水平基准线和垂直基准线。为此，显示装置5可以利用内置指南针将显示画面的方向所指示的方位发送到失真校正装置3。
若设定了水平基准线和垂直基准线，则基准设定部10可以求出作为长轴和短轴的基准的坐标。基准长轴可以作为基于最外轮廓线100的水平基准线，即横轴的最外轮廓线100的直径，基准短轴可以作为基于最外轮廓线100的垂直基准线，即竖轴的最外轮廓线100的直径。基准设定部10可以根据长轴a和短轴b的坐标求出长度。
本实施例中，为了便于说明，将中心O假设为直角坐标系的原点。
参照图3，表格生成部20在最外轮廓线100内部设定多个曲线。最外轮廓线100和内部曲线110、120、...、190中任意两个曲线没有交点或有两个交点。多个曲线100、110、120、...、190可以具有长度小于或等于最外轮廓线100的长轴的长度的长轴和长度小于最外轮廓线100的短轴的长度的短轴。内部曲线110、120、...、190的各个长轴优选小于最外轮廓线100的长轴。本实施例中，将圆(最外轮廓线100)视为长轴的长度等于短轴的长度的椭圆，将直线190视为短轴长度为0的椭圆。
相邻的第一和第二曲线110、120的短轴长度之差优选为已设定的常数。最内部曲线190的短轴的长度优选为0。
内部曲线110、120、...、190中任意曲线的长轴长度优选为大于等于最外轮廓线100的长轴长度的0.95倍且小于1倍。这样的比例可根据广角镜头的特性和种类、与被摄体之间的距离等而不同。相邻的第一和第二曲线110、120的长轴长度之差可以为已设定的常数。相邻内部曲线的长轴长度之差优选小于短轴长度之差。
参照图4，表格生成部20可以针对一个象限的坐标生成查询表(失真校正表)。这可以节约资源并减小负担。表格生成部20可以求出内部曲线的长轴坐标a0～a9以及短轴坐标b0～b8、O。
参照图5，表格生成部20可以将属于同一曲线的像素的坐标垂直移动至经过对应曲线的短轴的水平线，并且生成将移动前坐标和移动后坐标设定为一个条目的失真校正表格。表格生成部20可获知第四曲线的长轴的一端的坐标为(a4,0)，短轴的一端的坐标为(0,b4)。作为条目的示例，可以将第四曲线的点P4-0的坐标以及点P4-0被垂直移动到的点Q4-0的坐标设定为一个条目，可以将点P4-j被垂直移动到的点Q4-j的各个坐标设定为一个条目。表格生成部20可以将水平基准线上的点P4-0的坐标设定为(a4,0)，并且将Q4-0的坐标设定为(a4,b4)。表格生成部20可以利用任意点P4-j的椭圆方程式的极坐标系来以直角坐标系进行计算。因而，点P4-j的坐标为(a4*cosθj,b4*sinθj)。点P4-j被垂直移动到的点Q4-j的坐标为(a4*cosθj,b4)。
表格生成部20通过如下编码分别求出摄像区域的坐标和校正平面的坐标，从而生成查询表。
1.定义
n为内部曲线的个数；
m为各内部曲线的一个象限中要求出的坐标的个数；
Δx为内部曲线的x轴减量(a/n>Δx>＝0.95a/n)；
Δy为内部曲线的y轴减量(Δy＝b/n)；
2.摄像区域(P(x,y))的坐标
fori＝0～n
{forj＝0～m
{θ＝π/2*j/m
x[i][j]＝(a-Δx*i)*cosθ
y[i][j]＝(b-Δy*i)*sinθ
}
}
3.校正区域(Q(u,v))的坐标
fori＝0～n
{forj＝0～m
Q(u[i][j],v[i][j])＝P(x[i][j],b-Δy*i)
}
通过上述编码，表格生成部20可以生成失真校正表格的各条目(P[i][j]->Q[i][j])。
这样的失真校正表格是基于在将属于多个曲线100、110、120、...、190中相同曲线的各像素的y值改变为对应组的最大y值的情况下通过广角镜头获得的图像被用户看起来变好的事实。相比于广角镜头的中心，离轮廓越近，失真越严重，因而如果将离轮廓区域近的图像远离摄像区域的中心，则很难看懂的失真图像校正为容易看懂的图像。在内部曲线110、120、...、190的长轴长度比最外轮廓线的长轴长度小一点的情况下，失真校正效果更好。
参照图6，可以看出圆形的摄像区域变换为四角形形状的校正区域。图6(a)为将水平线设定为水平基准线之后的校正区域，图6(b)为将垂直线设定为水平基准线之后的校正区域。图6(a)中的各线条的像素坐标与图3的多个曲线100、110、120、...、190相关。
表格生成部20在不进行上面提及的计算的情况下，也可以对通过图4和图5求出的失真校正表格的各条目进行水平对称、垂直对称以及90度旋转对称，以生成图6中(a)和(b)所示的校正区域。图10(b)和图10(c)示出了摄像区域为椭圆的情况。
参照图7，表格生成部20可以修改失真校正表格，从而不显示整个校正区域的图像而仅显示一部分区域。
参照图7(a)，表格生成部20进行设定使得仅校正区域中以垂直基准线为中心的一部分区域成为显示区域210、230。这是因为离中心距离越远失真越严重。此外，由于基于广角镜头的图像覆盖很宽的范围，优选以多个画面来显示。图7(b)的显示区域220、240也是为了离中心近的区域为主的显示以及多种范围的显示而设定。这是因为离第一显示区域210的垂直基准线远的位置处的图像的失真程度较高。
表格生成部20可以在失真校正表格的条目中删除校正平面的坐标不属于图7的显示区域的条目，以设定显示区域210、220、230、240。
图像校正部30利用失真校正表格对通过广角镜头获得的图1的图像进行校正来生成校正的图像。失真校正表格具有原始图像(广角图像)的各像素的坐标、以及要移动到与各个像素坐标对应的校正图像时的对应坐标。原始图像的像素坐标可以由摄像区域尤其是将要显示的区域的坐标构成。图像校正部30通过将原始图像中的失真校正表格的原始图像像素坐标相对应的值记录到新图像中的失真校正表格的对应坐标相对应的坐标，来生成校正图像。针对原始图像中的与之前帧图像相差不大的区域，图像校正部30可以不利用失真校正表格而直接利用与之前帧的校正图像相对应的区域。例如，在原始图像与之前帧图像之间存在像素差异的地方为一点Pd-1的情况下，图像校正部30利用失真校正表格求出与该点Pd-1对应的校正图像的坐标Qd-1和像素值Vd，将之前帧的校正图像中具有差异的相应坐标Qd-1代替成相应像素值Vd，并将其作为当前帧的校正图像来生成。
图像校正部30使校正的图像如图8所示地显示在显示装置5上。优选地，图像校正部30改变方向使得垂直基准线垂直地呈现，如图8所示的第二和第四显示区域220、240，以使得用户直观地观看。
图11是根据本发明实施例的图像校正方法的流程图。参照图1至图10。
参照图11，基准设定部10将广角镜头的图像划分为摄像区域和非摄像区域，并且设定中心O、最外轮廓线、水平基准线和垂直基准线(S310)。
表格生成部20在最外轮廓线内部设定多个内部曲线(S320)。内部曲线优选为椭圆形。
表格生成部20算出位于一个象限中的多个曲线上的坐标移动到各曲线的短轴上的坐标，生成将位于多个曲线上的坐标与移动得到的坐标进行相互关联的条目，并生成由多个条目构成的失真校正表格(S330)。
表格生成部20增加基于垂直基准线或水平基准线与失真校正表格的各条目的坐标对称的条目、以及旋转得到的条目，以准备生成基于所有区域的以及基于根据用户操作等的水平基准线移动的校正过的将要显示的画面(S340)。
图像校正部30利用由表格生成部20生成的存储在存储部50中的失真校正表格，来校正从广角镜头获得的图像，并将其传送到显示装置(S350)。
图13是示出根据本发明实施例的保安管理系统的框图，图14是示出针对根据本发明的保安管理系统的画面的实施例的图，图15是根据本发明实施例的保安管理系统的图像处理方法的流程图。参照图1至图12。
参照图13，保安管理系统可以包括多个摄像头C1～C4、主服务器400和多个附属服务器410、412、414。
多个摄像头C1～C4分别为配备图1的广角镜头1的摄像头，其将经由广角镜头1入射的光通过内部CCD或CMOS等图像传感器变换为数字图像，并将其发送到主服务器400。本实施例中，多个摄像头C1～C4与主服务器400之间的通信或者主服务器400与多个附属服务器410、412、414之间的通信可以为无线或有线通信。多个摄像头C1～C4可以适当地布置在需要安全、监视或管理的地方。尽管在本图中示出了4个摄像头，但摄像头个数不限于此。
主服务器400可以使与主服务器400连接的显示装置显示基于广角镜头的失真图像即校正前的图像(以下为“原始图像”)或者校正过的图像。主服务器400可以将原始图像或校正图像数据发送到多个附属服务器410、412、414中的至少一个。第一附属服务器410可以使与第一附属服务器410连接的显示装置显示原始图像和校正图像中的至少一种。
原始图像的校正可以在主服务器400和多个附属服务器410、412、414中的至少一个中实现。例如，多个原始图像中，对于第一原始图像(基于摄像头C1的图像)，可以在主服务器400中进行校正，对于第二至第四原始图像(基于摄像头C2、C3、C4的图像)，可以在第一至第三附属服务器410、412、414中进行校正。然而并不限于此，多个原始图像可以在一个服务器中被校正，或者一个服务器可以校正2个或2个以上的原始图像。
主服务器400和多个附属服务器410、412、414可以设置在安排了安全或监视人员的地方。为了中央管理，可能仅需要一个服务器，但在规模大的情况下可以在多个位置进行管理。此时，可以在中央管理室中布置中央服务器，可以在其他地方(例如，大楼入口等)布置附属服务器。多个附属服务器410、412、414不限于布置在简易管理室，也可以作为预备资源而存在。附属服务器可以与主服务器400进行近距离通信或远距离通信，并且可以以云服务器提供为虚拟机VM。
参照图14(a)，主服务器400或第一附属服务器410基本上将第一至第四原始图像A、B、C、D以画面分割地显示在连接的显示装置上。主服务器400可以根据用户命令校正第一图像A，并将校正图像A1～A4显示在显示装置的分割区域的一部分中(参照图14(b))。主服务器400可以将校正图像A1～A4与其他第二至第四原始图像B～D一起进行显示，或者在整个画面中进行显示。主服务器400可以独自校正第一原始图像A，或者在将原始图像传送到第一附属服务器410之后接收校正图像，并显示接收到的校正图像A1～A4。在显示第一附属服务器410的第一校正图像A1～A4的情况下，可以与主服务器400相对应地进行操作。参照图14(c)，主服务器400响应于用户命令，将第一至第四原始图像A～D全部被校正的第一至第四校正图像A1～A4、B1～B4、C1～C4、D1～D4显示在显示装置上。校正作业可以在主服务器400和多个附属服务器410、412、414中分担地进行，或者可以与各服务器的负载相对应地进行。
图15示出了主服务器400的图像失真校正以及显示步骤的方法。参照图15，主服务器400可以从多个摄像头C1～C4接收第一至第四原始图像A～D，并将其存储在存储部(未图示)中(S610)。存储部可以设置在主服务器100的内部，或者可以设置在远程网络服务器或云服务器。为了减小存储容量的负担，主服务器400优选仅存储原始图像。
主服务器400可以判断主服务器400和多个附属服务器410、412、414的负载的轻重，并确定在哪个服务器中执行图像校正处理(S620)。由此，主服务器400能够调节负载，以将负载从受到过重负载的服务器转移到其他服务器或者防止服务器处于空闲状态。例如，主服务器400在要校正图像的作业为一个的情况下，可以将空闲状态的服务器或负载量最少的服务器选择为执行校正的服务器。在要校正图像的作业为多个的情况下，主服务器400使空闲状态或负载量最少的服务器装载第一校正作业，并重新检验负载量，以使负载量最少的服务器装载第二校正作业。在要校正图像的作业为多个的情况下，主服务器400可以按照负载量少的顺序和处理能力来分配校正作业。
主服务器400可以向要执行校正处理的服务器发出校正指示(S630)。之后，主服务器400接收校正过的图像数据(S640)，并使其显示在显示装置上(S650)。在主服务器400中执行校正的情况下，可以省略校正指示步骤(S630)和校正图像数据接收步骤(S640)。
上述本发明也可以在计算机可读的记录介质中以计算机可读的代码来实现。计算机可读的记录介质包括存储有基于计算机系统读取的数据的所有类型的记录装置。计算机可读的记录介质例如为ROM、RAM、CD-ROM、磁带、软盘、光数据存储装置等，也可以包括以载波(例如通过互联网的传送)形态的实现。此外，计算机可读的记录介质可以分散到通过互联网连接的计算机系统中，并且计算机以分散方式可读取的代码可在记录介质上存储和执行。另外，用于实现本发明的功能程序、代码和代码段可以由本技术领域中的程序员容易地推理得到。
此外，尽管示出并说明了本发明的优选实施例，本发明不限于上述特定的实施例，在不脱离权利要求所要求的本发明的要点的情况下，具有本发明所属技术领域的通常知识的人员不仅可以作出多种变型例，而且不应当从本发明技术思想和展望中个别地理解这样的变型例。

Claims (12)

1.一种失真校正方法，其用于对基于广角镜头的摄像区域的失真进行校正，并且包括步骤：
设定经过所述摄像区域的中心的水平基准线和垂直基准线；
以所述中心为基准来设定将所述水平基准线的一部分作为长轴并将所述垂直基准线的一部分作为短轴的椭圆曲线的一部分；
将属于所述椭圆曲线的一部分中的像素的y值变换为所述短轴的y值；以及
存储属于所述椭圆曲线的一部分中的像素的坐标值与所变换的坐标值之间的对应关系作为失真校正表格的条目。
2.根据权利要求1所述的失真校正方法，其中
所述椭圆中的第一椭圆的短轴长度与第二椭圆的短轴长度之差为第一设定值的倍数。
3.根据权利要求2所述的失真校正方法，其中
所述第一椭圆的长轴长度与所述第二椭圆的长轴长度之差为第二设定值的倍数，所述第二设定值小于所述第一设定值，并且
所述第一椭圆和所述第二椭圆的交叉点为0个。
4.根据权利要求1所述的失真校正方法，其中
所述椭圆曲线的一部分为直角坐标系的象限中的任意一个，并且所述失真校正表格的校正区域属于显示区域。
5.根据权利要求4所述的失真校正方法，还包括步骤：
补充基于所述失真校正表格的条目关于所述水平基准线和所述垂直基准线中的至少一个基准线对称的追加条目。
6.根据权利要求1所述的失真校正方法，还包括步骤：
与用户操作、用户动作和显示器的方向中的任意一个相对应地设定新的水平基准线和新的垂直基准线；以及
通过与已有水平基准线与新的水平基准线之间的角度相对应地将所述失真校正表格的条目的坐标值进行旋转移动来生成第二失真校正表格。
7.根据权利要求3所述的失真校正方法，其中
所述第二设定值基于所述广角镜头和所述广角镜头与被摄体之间的距离中的至少一个在预设定的范围内变化。
8.一种图像校正装置，包括：
基准设定部，其将通过广角镜头获得的样本图像划分为成像的摄像区域和没有成像的非摄像区域，并设定经过所述摄像区域的中心的水平基准线和垂直基准线；
表格生成部，其以所述中心为基准来设定将所述水平基准线的一部分作为长轴并将所述垂直基准线的一部分作为短轴的椭圆曲线的一部分，并将属于所述椭圆曲线的一部分中的像素的y值变换为所述短轴的y值；以及
存储部，其存储属于所述椭圆曲线的一部分中的像素的坐标值与所变换的坐标值之间的对应关系作为失真校正表格的条目。
9.根据权利要求8所述的图像校正装置，其中
所述椭圆中的第一椭圆的短轴长度与第二椭圆的短轴长度之差为第一设定值的倍数，
所述第一椭圆的长轴长度与所述第二椭圆的长轴长度之差为第二设定值的倍数，所述第二设定值小于所述第一设定值，
所述第一椭圆和所述第二椭圆的交叉点为0个，
所述椭圆曲线的一部分为直角坐标系的象限中的任意一个，并且
所述失真校正表格的校正区域属于显示区域。
10.一种保安管理装置，包括：
多个摄像头，其各自配备广角镜头；
主服务器，其从所述多个摄像头分别接收广角图像，并将多个广角图像中的至少一个显示在显示装置上；以及
附属服务器，其从所述主服务器接收校正命令，对所述多个广角图像中的至少一个广角图像进行校正并将校正图像传送至所述主服务器，
所述主服务器和所述附属服务器中的任意一个服务器包括：
基准设定部，其将所述多个广角图像划分为成像的摄像区域和没有成像的非摄像区域，并设定经过所述摄像区域的中心的水平基准线和垂直基准线；
表格生成部，其以所述中心为基准来设定将所述水平基准线的一部分作为长轴并将所述垂直基准线的一部分作为短轴的椭圆曲线的一部分，并将属于所述椭圆曲线的一部分中的像素的y值变换为所述短轴的y值；
存储部，其存储属于所述椭圆曲线的一部分中的像素的坐标值与所变换的坐标值之间的对应关系作为失真校正表格的条目；以及
图像校正部，其利用所述失真校正表格来对要校正的图像进行校正，以生成校正图像。
11.根据权利要求10所述的保安管理装置，其中
所述主服务器将所述多个广角图像以及所述多个广角图像分别被校正过的多个校正图像中的至少一个显示在所述显示装置上，根据用户的第一命令来使所述多个广角图像中的第一广角图像被校正过的校正图像和所述多个广角图像中的除所述第一广角图像之外的广角图像进行显示，并根据用户的第二命令来使所述多个校正图像进行显示。
12.根据权利要求11所述的保安管理装置，其中
所述附属服务器为多个，并且
所述主服务器检查主服务器的负载量和多个附属服务器中每一个的负载量，并按照负载量少的顺序使多个原始图像的校正处理执行。
CN201480002041.2A 2014-04-16 2014-10-15 广角镜头图像校正方法及其装置 Pending CN105191278A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20140045611A KR101493946B1 (ko) 2014-04-16 2014-04-16 광각 렌즈 이미지 보정 방법 및 그 장치
KR10-2014-0045611 2014-04-16
PCT/KR2014/009658 WO2015160052A1 (ko) 2014-04-16 2014-10-15 광각 렌즈 이미지 보정 방법 및 그 장치

Publications (1)

Publication Number Publication Date
CN105191278A true CN105191278A (zh) 2015-12-23

Family

ID=52593830

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480002041.2A Pending CN105191278A (zh) 2014-04-16 2014-10-15 广角镜头图像校正方法及其装置

Country Status (5)

Country Link
US (1) US20170041538A1 (zh)
EP (1) EP3133804A4 (zh)
KR (1) KR101493946B1 (zh)
CN (1) CN105191278A (zh)
WO (1) WO2015160052A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110312120A (zh) * 2018-03-20 2019-10-08 株式会社东芝 图像处理装置、驾驶辅助系统及图像处理方法
CN112312056A (zh) * 2019-08-01 2021-02-02 普兰特龙尼斯公司 利用自适应镜头失真校正和图像变形减少的视频会议

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6568374B2 (ja) * 2015-03-27 2019-08-28 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
JP6552255B2 (ja) * 2015-04-23 2019-07-31 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法、及び、コンピュータプログラム
CN106993133B (zh) * 2015-06-30 2019-08-30 Oppo广东移动通信有限公司 一种畸变校正方法及终端
KR102468729B1 (ko) 2017-09-29 2022-11-21 삼성전자주식회사 전자 장치 및 전자 장치의 객체 센싱 방법
US10757324B2 (en) * 2018-08-03 2020-08-25 Semiconductor Components Industries, Llc Transform processors for gradually switching between image transforms

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101500077A (zh) * 2008-01-28 2009-08-05 株式会社理光 图像处理方法、图像处理装置、以及成像装置
KR20110116387A (ko) * 2010-04-19 2011-10-26 클레어픽셀 주식회사 촬상 장치 및 영상 왜곡 보정 방법
CN102469254A (zh) * 2010-10-29 2012-05-23 日立信息通讯工程有限公司 图像校正装置、校正图像生成方法、校正表生成装置
CN102682431A (zh) * 2012-05-04 2012-09-19 中国科学院深圳先进技术研究院 广角图像校正方法和系统
US20140009568A1 (en) * 2012-07-03 2014-01-09 Digitaloptcs Corporation Europe Limited Method and System for Correcting a Distorted Input Image

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2827680B1 (fr) * 2001-07-20 2003-10-10 Immervision Internat Pte Ltd Procede de capture d'une image panoramique au moyen d'un capteur d'image de forme rectangulaire
JP4207125B2 (ja) 2003-12-25 2009-01-14 ノーリツ鋼機株式会社 画像補正決定方法とその方法を用いた画像処理装置
KR100859001B1 (ko) * 2007-03-26 2008-09-18 주식회사 아이닉스 영상 왜곡 보정방법 및 보정장치
KR101014572B1 (ko) * 2007-08-27 2011-02-16 주식회사 코아로직 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치
KR101011704B1 (ko) * 2009-09-04 2011-01-31 씨엠아이텍주식회사 광각의 이미지를 생성하는 영상 처리 장치 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101500077A (zh) * 2008-01-28 2009-08-05 株式会社理光 图像处理方法、图像处理装置、以及成像装置
KR20110116387A (ko) * 2010-04-19 2011-10-26 클레어픽셀 주식회사 촬상 장치 및 영상 왜곡 보정 방법
CN102469254A (zh) * 2010-10-29 2012-05-23 日立信息通讯工程有限公司 图像校正装置、校正图像生成方法、校正表生成装置
CN102682431A (zh) * 2012-05-04 2012-09-19 中国科学院深圳先进技术研究院 广角图像校正方法和系统
US20140009568A1 (en) * 2012-07-03 2014-01-09 Digitaloptcs Corporation Europe Limited Method and System for Correcting a Distorted Input Image

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110312120A (zh) * 2018-03-20 2019-10-08 株式会社东芝 图像处理装置、驾驶辅助系统及图像处理方法
CN112312056A (zh) * 2019-08-01 2021-02-02 普兰特龙尼斯公司 利用自适应镜头失真校正和图像变形减少的视频会议

Also Published As

Publication number Publication date
KR101493946B1 (ko) 2015-02-17
US20170041538A1 (en) 2017-02-09
WO2015160052A1 (ko) 2015-10-22
EP3133804A4 (en) 2017-04-12
EP3133804A1 (en) 2017-02-22

Similar Documents

Publication Publication Date Title
CN105191278A (zh) 广角镜头图像校正方法及其装置
CN107659774B (zh) 一种基于多尺度相机阵列的视频成像系统及视频处理方法
WO2019105154A1 (en) Image processing method, apparatus and device
KR102143456B1 (ko) 심도 정보 취득 방법 및 장치, 그리고 이미지 수집 디바이스
US20190289055A1 (en) Method and system for interactive transmission of panoramic video
CN108805938B (zh) 一种光学防抖模组的检测方法、移动终端及存储介质
JP2016201668A (ja) 画像処理装置、画像処理方法およびプログラム
CN103247020A (zh) 一种基于径向特征的鱼眼图像展开方法
JP2014222825A (ja) 映像処理装置および映像処理方法
JP5310837B2 (ja) 画像生成装置、デジタルカメラ、方法、及びプログラム
JP5183152B2 (ja) 画像処理装置
JP2015213299A (ja) 画像処理装置および画像処理方法
CN103327254A (zh) 一种自动对焦方法及对焦系统
CN105354813A (zh) 驱动云台生成拼接图像的方法及装置
CN109785390B (zh) 一种用于图像矫正的方法和装置
CN111343360A (zh) 一种校正参数获得方法
Lin et al. Real-time low-cost omni-directional stereo vision via bi-polar spherical cameras
CN110533577B (zh) 鱼眼图像校正方法及装置
CN109785225B (zh) 一种用于图像矫正的方法和装置
WO2015141185A1 (ja) 撮像制御装置、撮像制御方法および記録媒体
WO2015159791A1 (ja) 測距装置および測距方法
CN111353945A (zh) 鱼眼图像校正方法、装置及存储介质
JP2018129025A (ja) 決定装置、画像処理装置、決定方法及び決定プログラム
US11272209B2 (en) Methods and apparatus for determining adjustment parameter during encoding of spherical multimedia content
CN113108919A (zh) 人体温度检测方法、装置和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151223

WD01 Invention patent application deemed withdrawn after publication