CN105744254B - 校正导引系统和校正导引系统的操作方法 - Google Patents

校正导引系统和校正导引系统的操作方法 Download PDF

Info

Publication number
CN105744254B
CN105744254B CN201511016901.0A CN201511016901A CN105744254B CN 105744254 B CN105744254 B CN 105744254B CN 201511016901 A CN201511016901 A CN 201511016901A CN 105744254 B CN105744254 B CN 105744254B
Authority
CN
China
Prior art keywords
precalculated position
feature point
point group
image
fisrt feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201511016901.0A
Other languages
English (en)
Other versions
CN105744254A (zh
Inventor
李季峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eys 3d Co Ltd
Original Assignee
Eys 3d Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eys 3d Co Ltd filed Critical Eys 3d Co Ltd
Publication of CN105744254A publication Critical patent/CN105744254A/zh
Application granted granted Critical
Publication of CN105744254B publication Critical patent/CN105744254B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/246Calibration of cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/67Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)

Abstract

本发明公开了一种校正导引系统和校正导引系统的操作方法。所述操作方法包含一特征获取单元对一多摄像机系统所获取的包含一第一对象的第一图像组执行一特征获取操作以产生对应所述多摄像机系统的图像获取范围内一预定位置的第一特征点组;及当所述第一特征点组的特征点的数目大于一预定数目时,一导引单元根据对应所述预定位置的第一特征点组的特征点的区块与一预定区块之间的第一比较结果,决定是否产生一方向指示导引所述第一对象至所述图像获取范围内另一预定位置。因此,本发明并不需要特定校正图案和特定校正设备即可对所述多摄像机系统执行图像矫正操作。

Description

校正导引系统和校正导引系统的操作方法
技术领域
本发明涉及一种校正导引系统和校正导引系统的操作方法,尤其涉及一种不需特定校正图案以校正多摄像机系统的校正导引系统和校正导引系统的操作方法。
背景技术
在立体摄像机出厂前,立体摄像机的制造商会在立体摄像机出厂前利用自动化校正以维持立体摄像机所需的机构准度。然而在立体摄像机出厂后,上述立体摄像机所需的机构准度会因为立体摄像机的使用环境或使用方法(例如立体摄像机的使用环境或使用方法可造成立体摄像机的左/右眼图像获取单元的位置或获取图像角度产生改变)而无法维持。因此,在立体摄像机出厂且用户操作一段时间后,立体摄像机需要再进行图像矫正以补偿立体摄像机的机构准度的漂移。
现有技术所公开的校正方法是主要利用棋盘格等特定校正图案,让用户利用棋盘格等校正图案重复地对立体摄像机执行图像矫正动作。然而现有技术所公开的校正方法大部分是适合由专业受过训练的技术员和校正设备在立体摄像机的制造工厂中执行。因此,当用户操作立体摄像机一段时间后,立体摄像机需要图像矫正时,用户可能需要送回立体摄像机至立体摄像机的制造商。如此,对于用户而言,现有技术是不方便、旷日费时且需要额外的花费。
发明内容
本发明的一实施例公开一种校正导引系统的操作方法,所述校正导引系统包含一特征获取单元、一导引单元及一运算单元。所述操作方法包含所述特征获取单元对一多摄像机系统所获取的包含一第一对象的第一图像组执行一特征获取操作以产生对应所述多摄像机系统的图像获取范围内一预定位置的第一特征点组;当对应所述预定位置的第一特征点组的特征点的数目大于一预定数目时,所述导引单元根据对应所述预定位置的第一特征点组的特征点的区块与一预定区块之间的第一比较结果,决定是否产生一方向指示导引所述第一对象至所述图像获取范围内的另一预定位置。
本发明的另一实施例公开一种校正导引系统。所述校正导引系统包含一特征获取单元和一导引单元。所述特征获取单元是用于对一多摄像机系统所获取的包含一第一对象的第一图像组执行一特征获取操作以产生对应所述多摄像机系统的图像获取范围内一预定位置的第一特征点组;所述导引单元是用于当对应所述预定位置的第一特征点组的特征点的数目大于一预定数目时,根据对应所述预定位置的第一特征点组的特征点的区块与一预定区块之间的第一比较结果,决定是否产生一方向指示导引所述第一对象至所述图像获取范围内另一预定位置。
本发明的另一实施例公开一种校正导引系统的操作方法,所述校正导引系统包含一特征获取单元和一导引单元。所述操作方法包含所述特征获取单元对一多摄像机系统所获取的包含一第一对象的第一图像组执行一特征获取操作以产生对应所述多摄像机系统的图像获取范围内一预定位置的第一特征点组;当对应所述预定位置的第一特征点组的特征点的数目大于一预定数目时,所述导引单元根据一预定条件,决定是否产生一方向指示导引所述第一对象至所述图像获取范围内另一预定位置。
本发明公开一种校正导引系统和校正导引系统的操作方法。所述校正导引系统和所述操作方法是利用一导引单元导引一具有足够特征点的对象或依多摄像机系统使所述对象位于所述多摄像机系统的图像获取范围内的至少一预定位置,利用一特征获取单元产生对应所述至少一预定位置的特征点组,以及利用一运算单元根据对应所述至少一预定位置的特征点组,产生所述多摄像机系统的多个新图像矫正参数。因此,相较于现有技术,由于本发明可利用所述引单元导引所述对象或所述多摄像机系统使所述对象位于所述多摄像机系统的图像获取范围内的至少一预定位置,所以本发明并不需要特定校正图案、特定校正设备以及专业受过训练的技工即可对所述多摄像机系统执行图像矫正操作。
附图说明
图1是本发明第一实施例公开一种多摄像机系统的校正导引系统的示意图。
图2A、2B是本发明第二实施例公开一种校正导引系统的操作方法的流程图。
图3是说明第一图像对的示意图。
图4是说明第一对象内对应第一特征点对的特征点的区块与多摄像机系统的图像获取范围在所述深度的面积的示意图。
图5是说明用户可使第一对象移动至图像获取范围的左上方、左下方、右上方和右下方的示意图。
图6是说明多摄像机系统的显示屏显示方向指示为向左的箭头的示意图。
图7是说明显示屏显示向左的箭头以及强调对应第一预定位置的区块的示意图。
其中,附图标记说明如下:
100 多摄像机系统
102 左眼图像获取单元
104 右眼图像获取单元
106 扬声器
108 显示屏
120 校正导引系统
150 第一对象
160 用户
1082 箭头
1084 区块
1202 特征获取单元
1204 导引单元
1206 运算单元
DI 方向指示
FI 第一图像
FCP 第一特征点对
PL 预定位置
FIP 第一图像对
FCPB 区块
ICR 图像获取范围
ICRA 面积
SI 第二图像
200-216 步骤
具体实施方式
请参照图1,图1是本发明第一实施例公开一种多摄像机系统100的校正导引系统120的示意图,其中多摄像机系统100包含一左眼图像获取单元102和一右眼图像获取单元104,且校正导引系统120包含一特征获取单元1202、一导引单元1204及一运算单元1206。但本发明并不受限于多摄像机系统100包含左眼图像获取单元102和右眼图像获取单元104,也就是说多摄像机系统100可包含超过二以上的图像获取单元。请参照图1、2A、2B、3-7,图2A、2B是本发明第二实施例公开一种校正导引系统的操作方法的流程图,图3是说明一第一图像对FIP的示意图,图4是说明一第一对象150内对应第一特征点对FCP的特征点的区块FCPB与多摄像机系统100的图像获取范围ICR在所述深度的面积的示意图,图5是说明一用户160可使第一对象150移动至图像获取范围ICR的左上方、左下方、右上方和右下方的示意图,图6是说明多摄像机系统100的显示屏108显示一方向指示DI为一向左的箭头1082的示意图,以及图7是说明显示屏108显示向左的箭头1082以及强调对应预定位置PL的区块1084的示意图。图2A、2B的操作方法是利用图1的多摄像机系统100与校正导引系统120说明,详细步骤如下:
步骤200:开始;
步骤202:多摄像机系统100获取包含第一对象150的第一图像对FIP;步骤204:特征获取单元1202对第一图像对FIP执行一特征获取操作以产生对应多摄像机系统100的图像获取范围ICR内一预定位置PL的第一特征点对FCP;
步骤206:对应预定位置PL的第一特征点对FCP的特征点的数目是否大于一预定数目;如果是,进行步骤208;如果否,跳回步骤202;步骤208:对应第一特征点对FCP的特征点的区块FCPB是否小于一预定区块;如果是,进行步骤210;如果否,进行步骤218;
步骤210:导引单元1204产生方向指示DI导引第一对象150至图像获取范围ICR内另一预定位置;
步骤212:当第一对象150位于所述另一预定位置时,特征获取单元1202对多摄像机系统100所获取的包含第一对象150的第二图像对执行所述特征获取操作以产生对应所述另一预定位置的第一特征点对;
步骤214:是否第一对象150已被导引至图像获取范围ICR内多个预定位置;如果是,进行步骤216;如果否,跳回步骤210;
步骤216:运算单元1206根据对应图像获取范围ICR内多个预定位置的第一特征点对,产生对应多摄像机系统100的多个第一图像矫正参数(image rectificationparameter),进行步骤220;
步骤218:运算单元1206直接根据对应预定位置PL的第一特征点对FCP,产生对应多摄像机系统100的多个第二图像矫正参数,进行步骤220;
步骤220:结束。
在步骤202中,如图3所示,第一图像对FIP包含一第一图像FI和一第二图像SI,其中第一图像FI是左眼图像获取单元102所获取的一左眼图像和第二图像SI是右眼图像获取单元104所获取的一右眼图像,第一图像FI和第二图像SI是用于组成一立体图像,以及在第一图像FI和第二图像SI中是由用户160握住第一对象150。但本发明并不受限于由用户160握住第一对象150,也就是说只要任何可使第一对象150在多摄像机系统100的图像获取范围ICR内移动的方式都落入本发明的范围。另外,本发明并不受限于第一对象150是单一物体,也就是说第一对象150也可为任何具有多个特征点的环境或物体群组。另外,因为多摄像机系统100包含左眼图像获取单元102和右眼图像获取单元104,所以多摄像机系统100是产生包含第一对象150的第一图像对FIP。但在本发明的另一实施例中,因为多摄像机系统100包含超过二以上的图像获取单元,所以多摄像机系统100是产生包含第一对象150的第一图像组。另外,第一对象150在第一图像FI和第二图像SI中是处于一静止状态,也就是说当第一对象150在第一图像FI和第二图像SI的移动程度超过一预定程度时,特征获取单元1202会舍弃第一图像对FIP。另外,第一对象150是位于图像获取范围ICR内的预定位置PL,其中当用户160是使第一对象150位于图像获取范围ICR内的相同一深度移动时,图像获取范围ICR内预定位置的数目可由第一对象150内对应第一特征点对FCP的特征点(例如第一对象150的左眼、右眼、鼻尖和双唇)的区块FCPB(如图4所示,区块FCPB是第一对象150的左眼、右眼、鼻尖和双唇所形成的凸多边形)与图像获取范围ICR在所述深度的面积的比值决定。但本发明并不受限于区块FCPB是第一对象150的左眼、右眼、鼻尖和双唇所形成的凸多边形,也就是说区块FCPB可为第一对象150内任一包含第一对象150的左眼、右眼、鼻尖和双唇的区块。另外,在本发明的另一实施例中,对应所述任一包含第一对象150的左眼、右眼、鼻尖和双唇的区块的单位面积的特征点的数目必须大于一预定值。例如当用户160是使第一对象150于图像获取范围ICR内深度一公尺的位置移动时,此时区块FCPB与图像获取范围ICR在深度一公尺的面积ICRA的比值是1/4(如图4所示)。但本发明并不受限于区块FCPB与图像获取范围ICR在深度一公尺的面积ICRA的比值是1/4。如图4所示,因为区块FCPB与图像获取范围ICR在深度一公尺的面积ICRA的比值约为1/4,所以图像获取范围ICR内预定位置的数目约可等于4,也就是说当用户160是使第一对象150于图像获取范围ICR内深度一公尺的位置移动时,用户160可移动第一对象150至图像获取范围ICR的左上方、左下方、右上方和右下方(如图5所示)即可使特征获取单元1202获取到对应同一深度(也就是说深度一公尺)的图像获取范围ICR的大部分的第一特征点对。然而在本发明的另一实施例中,图像获取范围ICR内预定位置的数目是由不同深度的数目所决定。例如用户160可直线地移动第一对象150至图像获取范围ICR内深度一公尺、二公尺以及三公尺的位置,所以此时图像获取范围ICR内预定位置的数目是等于3。另外,在本发明的另一实施例中,图像获取范围ICR内预定位置的数目可由不同深度以及对应不同深度中的每一深度的不同位置所决定。例如图像获取范围ICR内预定位置的数目等于对应图像获取范围ICR内深度一公尺的4个位置,对应图像获取范围ICR内深度二公尺的8个位置,以及对应图像获取范围ICR内深度三公尺的12个位置的总和(也就是说图像获取范围ICR内预定位置的数目等于24)。在步骤204中,如图3所示,特征获取单元1202对第一图像对FIP执行所述特征获取操作以产生对应预定位置PL的第一特征点对FCP(例如第一图像FI中第一对象150的左眼、右眼、鼻尖和双唇分别和第二图像SI中第一对象150的左眼、右眼、鼻尖和双唇形成第一特征点对FCP),也就是说特征获取单元1202根据第一图像对FIP所包含的第一图像FI和第二图像SI,以及一特征匹配算法(feature matching algorithm),产生对应预定位置PL的第一特征点对FCP,其中特征匹配算法是一现有技术所公开的算法(例如尺度不变特征转换(Scale-invariant featuretransform,SIFT)和加速强健特征(Speeded-Up Robust Features;SURF)等算法),在此不再赘述。在步骤206中,如果对应预定位置PL的第一特征点对FCP的特征点的数目小于所述预定数目,则代表第一对象150并不适合校正多摄像机系统100。因此,用户160可选一第二对象以及校正导引系统120可对所述第二对象执行步骤202、204以产生对应预定位置PL的第二特征点对。然后,如果所述第二特征点对的特征点的数目还是小于所述预定数目,则代表所述第二对象也不适合校正多摄像机系统100。因此,用户160可继续选其他对象直到所述其他对象适合校正多摄像机系统100。
在步骤210中,如果对应预定位置PL的第一特征点对FCP的特征点的数目大于所述预定数目,则代表第一对象150适合校正多摄像机系统100,所以导引单元1204可产生方向指示DI导引第一对象150至图像获取范围ICR内另一预定位置,其中方向指示DI是一声音指示、一文字指示或一图像指示。当方向指示DI是声音指示时,方向指示DI可通过多摄像机系统100的扬声器106输出;当方向指示DI是文字指示或图像指示时,方向指示DI可通过多摄像机系统100的显示屏108显示。例如,如图4、6所示,当多摄像机系统100的显示屏108显示的方向指示DI为向左的箭头1082时,用户160将根据方向指示DI的导引,使第一对象150移动至图像获取范围ICR的左上方(也就是说图像获取范围ICR内另一预定位置)。另外,在本发明的另一实施例中,当方向指示DI是文字指示或图像指示时,方向指示DI是通过耦接于多摄像机系统100的一主机(未绘示于图1)的显示屏输出。另外,在本发明的另一实施例中,校正导引系统120是应用在耦接于多摄像机系统100的主机(未绘示于图1),所以当方向指示DI是声音指示时,方向指示DI可通过所述主机的扬声器(未绘示于图1)输出;当方向指示DI是文字指示或图像指示时,方向指示DI可通过所述主机的显示屏(未绘示于图1)显示。另外,在本发明的另一实施例中,当多摄像机系统100的显示屏108显示的方向指示DI为向左的箭头1082时,第一对象150被固定以及多摄像机系统100被移动以使第一对象150位于图像获取范围ICR的左上方(也就是说图像获取范围ICR内另一预定位置)。
在步骤212中,当第一对象150位于图像获取范围ICR的左上方(也就是说图像获取范围ICR内另一预定位置)时,特征获取单元1202即可对多摄像机系统100所获取的包含第一对象150的第二图像对执行所述特征获取操作以产生对应图像获取范围ICR的左上方(也就是说图像获取范围ICR内另一预定位置)的第一特征点对。另外,在本发明的另一实施例中,当对应预定位置PL的第一特征点对FCP的特征点的数目大于所述预定数目时,导引单元1204不仅可产生箭头1082导引第一对象150至图像获取范围ICR的左上方(也就是说图像获取范围ICR内另一预定位置),也可使显示屏108中产生强调(highlight)对应预定位置PL的区块1084(如图7所示),其中显示屏108中的区块1084是用于提示特征获取单元1202已产生对应预定位置PL的第一特征点对FCP,且区块1084具有一异于显示屏108中其他区块的颜色或亮度。
在步骤214中,第一对象150将被导引单元1204所产生的方向指示DI导引至图像获取范围ICR内所有预定位置(例如图像获取范围ICR的左上方、左下方、右上方和右下方)。在步骤216中,运算单元1206可根据特征获取单元1202所产生的对应图像获取范围ICR内所有预定位置的第一特征点对(也就是说特征获取单元1202所产生的对应图像获取范围ICR的左上方、左下方、右上方和右下方的第一特征点对),产生对应多摄像机系统100的多个第一图像矫正参数。在运算单元1206产生对应多摄像机系统100的多个第一图像矫正参数后,如果多摄像机系统100根据多个第一图像矫正参数所产生的一矫正立体图像不能满足多摄像机系统100的用户160的需求,则多摄像机系统100的用户160可重复执行上述步骤直到多摄像机系统100所产生的所述矫正立体图像可满足多摄像机系统100的用户160的需求。例如在本发明的一实施例中,当多摄像机系统100根据所述多个第一图像矫正参数,产生所述矫正立体图像(其中所述矫正立体图像包含一第一矫正图像和一第二矫正图像)后,如果在所述第一矫正图像中所有特征点与所述第二矫正图像中所有对应特征点之间的水平位置的差值总和大于一默认值,则多摄像机系统100的用户160可重复执行上述步骤直到在所述第一矫正图像中所有特征点与所述第二矫正图像中所有对应特征点之间的水平位置的差值总和小于所述默认值。但本发明并不受限于上述判断多摄像机系统100所产生的矫正立体图像是否满足多摄像机系统100的用户160的需求的方法。
另外,在步骤208中,对应第一特征点对FCP的特征点的区块FCPB是否小于所述预定区块即为一预定条件。但本发明并不受限于所述预定条件为对应第一特征点对FCP的特征点的区块FCPB是否小于所述预定区块。在步骤208中,在本发明的一实施例中,所述预定区块是图像获取范围ICR在深度一公尺的面积ICRA的一半。因此,在步骤218中,当第一对象150中对应预定位置PL的第一特征点对FCP的特征点的区块FCPB大于所述预定区块(也就是说图像获取范围ICR在深度一公尺的面积ICRA的一半)时,则因为第一对象150中对应预定位置PL的第一特征点对FCP的特征点的区块FCPB可占据图像获取范围ICR在深度一公尺的面积ICRA的一半以上,所以此时运算单元1206可直接根据对应预定位置PL的第一特征点对FCP,产生对应多摄像机系统100的多个第二图像矫正参数。另外,本发明并不受限于所述预定区块是图像获取范围ICR在深度一公尺的面积ICRA的一半。另外,步骤208的概念与判断对应预定位置PL的第一特征点对FCP的特征点是否分散于图像获取范围ICR的概念相同。
综上所述,本发明所公开的校正导引系统和校正导引系统的操作方法是利用导引单元导引具有足够特征点的对象或多摄像机系统使所述对象位于所述多摄像机系统的图像获取范围内的至少一预定位置,利用特征获取单元产生对应所述至少一预定位置的特征点组,以及利用运算单元根据对应所述至少一预定位置的特征点组,产生所述多摄像机系统的多个图像矫正参数。因此,相较于现有技术,由于本发明可利用导引单元导引所述对象或所述多摄像机系统使所述对象位于所述多摄像机系统的图像获取范围内的至少一预定位置,所以本发明并不需要特定校正图案、特定校正设备以及专业受过训练的技工即可对所述多摄像机系统执行图像矫正操作。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (19)

1.一种校正导引系统的操作方法,所述校正导引系统包含一特征获取单元、一导引单元及一运算单元,所述操作方法包含:
所述特征获取单元对一多摄像机系统所获取的包含一第一对象的第一图像组执行一特征获取操作以产生对应所述多摄像机系统的图像获取范围内一预定位置的第一特征点组;
其特征在于,还包含:
当对应所述预定位置的第一特征点组的特征点的数目大于一预定数目时,所述导引单元根据对应所述预定位置的第一特征点组的特征点的区块与一预定区块之间的第一比较结果,决定是否产生一方向指示导引所述第一对象至所述图像获取范围内另一预定位置;及
所述运算单元根据对应所述图像获取范围内至少一预定位置的第一特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
2.如权利要求1所述的操作方法,其特征在于,所述特征获取操作包含:
所述特征获取单元根据所述第一图像组所包含的多个图像以及一特征匹配算法,产生对应所述预定位置的第一特征点组。
3.如权利要求1所述的操作方法,其特征在于,所述方向指示是一声音指示、一文字指示或一图像指示。
4.如权利要求1所述的操作方法,其特征在于,当所述第一对象位于所述另一预定位置时,所述特征获取单元对所述多摄像机系统所获取的包含所述第一对象的第二图像组执行所述特征获取操作以产生对应所述另一预定位置的第一特征点组。
5.如权利要求4所述的操作方法,其特征在于,所述第一图像组中的第一对象以及所述第二图像组中的第一对象是处于一静止状态。
6.如权利要求1所述的操作方法,其特征在于,当所述第一比较结果为对应所述预定位置的第一特征点组的特征点的区块小于所述预定区块时,所述导引单元产生所述方向指示导引所述第一对象至所述另一预定位置,所述特征获取单元产生对应所述另一预定位置的第一特征点组,及所述运算单元根据对应所述图像获取范围内多个预定位置的第一特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
7.如权利要求1所述的操作方法,其特征在于,当所述第一比较结果为对应所述预定位置的第一特征点组的特征点的区块大于所述预定区块时,所述导引单元不产生所述方向指示,且所述运算单元根据对应所述预定位置的第一特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
8.如权利要求1所述的操作方法,其特征在于,还包含:
当对应所述预定位置的第一特征点组的特征点的数目小于所述预定数目时,所述特征获取单元对所述多摄像机系统所获取的包含一第二对象的第三图像组执行所述特征获取操作以产生对应所述预定位置的第二特征点组;
当对应所述预定位置的第二特征点组的特征点的数目大于所述预定数目时,所述导引单元根据对应所述预定位置的第二特征点组的特征点的区块与所述预定区块之间的第二比较结果,决定是否产生所述方向指示导引所述第二对象至所述另一预定位置;及
所述运算单元根据对应所述图像获取范围内至少一预定位置的第二特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
9.一种校正导引系统,包含:
一特征获取单元,用于对一多摄像机系统所获取的包含一第一对象的第一图像组执行一特征获取操作以产生对应所述多摄像机系统的图像获取范围内一预定位置的第一特征点组;
其特征在于,还包含:
一导引单元,用于当对应所述预定位置的第一特征点组的特征点的数目大于一预定数目时,根据对应所述预定位置的第一特征点组的特征点的区块与一预定区块之间的第一比较结果,决定是否产生一方向指示导引所述第一对象至所述图像获取范围内另一预定位置;及
一运算单元根据对应所述图像获取范围内至少一预定位置的第一特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
10.如权利要求9所述的校正导引系统,其特征在于,所述特征获取单元对所述第一图像组执行所述特征获取操作以产生对应所述预定位置的第一特征点组,是所述特征获取单元根据所述第一图像组所包含的多个图像以及一特征匹配算法,产生对应所述预定位置的第一特征点组。
11.如权利要求9所述的校正导引系统,其特征在于,所述方向指示是一声音指示、一文字指示或一图像指示。
12.如权利要求9所述的校正导引系统,其特征在于,当所述第一对象位于所述另一预定位置时,所述特征获取单元对所述多摄像机系统所获取的包含所述第一对象的第二图像组执行所述特征获取操作以产生对应所述另一预定位置的第一特征点组。
13.如权利要求12所述的校正导引系统,其特征在于,所述第一图像组中的第一对象以及所述第二图像组中的第一对象是处于一静止状态。
14.如权利要求9所述的校正导引系统,其特征在于,当所述第一比较结果为对应所述预定位置的第一特征点组的特征点的区块小于所述预定区块时,所述导引单元产生所述方向指示导引所述第一对象至所述另一预定位置,所述特征获取单元产生对应所述另一预定位置的第一特征点组,
及所述运算单元根据对应所述图像获取范围内多个预定位置的第一特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
15.如权利要求9所述的校正导引系统,其特征在于,当所述第一比较结果为对应所述预定位置的第一特征点组的特征点的区块大于所述预定区块时,所述运算单元根据对应所述预定位置的第一特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
16.如权利要求9所述的校正导引系统,其特征在于,当对应所述预定位置的第一特征点组的特征点的数目小于所述预定数目时,所述特征获取单元另用于对所述多摄像机系统所获取的包含一第二对象的第三图像组执行所述特征获取操作以产生对应所述预定位置的第二特征点组。
17.如权利要求16所述的校正导引系统,其特征在于,当对应所述预定位置的第二特征点组的特征点的数目大于所述预定数目时,所述导引单元另用于根据对应所述预定位置的第二特征点组的特征点的区块与所述预定区块之间的第二比较结果,决定是否产生所述方向指示导引所述第二对象至所述另一预定位置。
18.如权利要求17所述的校正导引系统,其特征在于,所述运算单元根据对应所述图像获取范围内至少一预定位置的第二特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
19.一种校正导引系统的操作方法,所述校正导引系统包含一特征获取单元、一导引单元和一运算单元,所述操作方法包含:
所述特征获取单元对一多摄像机系统所获取的包含一第一对象的第一图像组执行一特征获取操作以产生对应所述多摄像机系统的图像获取范围内一预定位置的第一特征点组;
其特征在于,还包含:
当对应所述预定位置的第一特征点组的特征点的数目大于一预定数目时,所述导引单元根据一预定条件,决定是否产生一方向指示导引所述第一对象至所述图像获取范围内另一预定位置;及
所述运算单元根据对应所述图像获取范围内至少一预定位置的第一特征点组,产生对应所述多摄像机系统的多个图像矫正参数。
CN201511016901.0A 2014-12-30 2015-12-29 校正导引系统和校正导引系统的操作方法 Active CN105744254B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201462098268P 2014-12-30 2014-12-30
US62/098,268 2014-12-30

Publications (2)

Publication Number Publication Date
CN105744254A CN105744254A (zh) 2016-07-06
CN105744254B true CN105744254B (zh) 2017-12-29

Family

ID=56287206

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511016901.0A Active CN105744254B (zh) 2014-12-30 2015-12-29 校正导引系统和校正导引系统的操作方法

Country Status (3)

Country Link
US (1) US10931933B2 (zh)
CN (1) CN105744254B (zh)
TW (1) TWI576647B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9628778B2 (en) * 2013-10-14 2017-04-18 Eys3D Microelectronics, Co. Calibration system of a stereo camera and calibration method of a stereo camera
KR102529928B1 (ko) * 2016-09-22 2023-05-09 삼성전자주식회사 스테레오 카메라의 교정 방법 및 이를 수행하는 전자 장치
US10846838B2 (en) 2016-11-25 2020-11-24 Nec Corporation Image generation device, image generation method, and storage medium storing program
US10324363B2 (en) * 2017-02-23 2019-06-18 Eys3D Microelectronics, Co. Image device capable of compensating image variation
US20190387165A1 (en) * 2018-06-07 2019-12-19 Eys3D Microelectronics, Co. Image device for generating depth images and related electronic device
CN109120918B (zh) * 2018-08-14 2020-09-22 上海常仁信息科技有限公司 基于机器人的投影效果自评系统和方法
EP3640767A1 (de) * 2018-10-17 2020-04-22 Siemens Schweiz AG Verfahren zum bestimmen mindestens eines bereichs in mindestens einem eingabemodell für mindestens ein zu platzierendes element
CN113615155B (zh) * 2019-03-11 2023-03-24 上海诺基亚贝尔股份有限公司 用于显示控制的装置和方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW452723B (en) * 1998-07-29 2001-09-01 Intel Corp Method and apparatus for three-dimensional input entry
CN103797779A (zh) * 2011-09-13 2014-05-14 京瓷株式会社 摄像机校正设备、摄像机和摄像机校正方法
WO2014168992A1 (en) * 2013-04-08 2014-10-16 Amazon Technologies, Inc. Automatic rectification of stereo imaging cameras

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6542840B2 (en) * 2000-01-27 2003-04-01 Matsushita Electric Industrial Co., Ltd. Calibration system, target apparatus and calibration method
KR100834637B1 (ko) * 2006-11-27 2008-06-02 삼성전자주식회사 스테레오 카메라 장치에서 이미지들을 정렬하기 위한 장치및 방법
US8624962B2 (en) * 2009-02-02 2014-01-07 Ydreams—Informatica, S.A. Ydreams Systems and methods for simulating three-dimensional virtual interactions from two-dimensional camera images
JP5127787B2 (ja) * 2009-07-30 2013-01-23 富士フイルム株式会社 複眼撮影装置及びその制御方法
JP4911230B2 (ja) * 2010-02-01 2012-04-04 カシオ計算機株式会社 撮影装置、並びに制御プログラム及び制御方法
CN102428707B (zh) * 2010-03-19 2015-03-11 松下电器产业株式会社 立体视用图像对位装置和立体视用图像对位方法
EP2375376B1 (en) * 2010-03-26 2013-09-11 Alcatel Lucent Method and arrangement for multi-camera calibration
US9344701B2 (en) * 2010-07-23 2016-05-17 3Dmedia Corporation Methods, systems, and computer-readable storage media for identifying a rough depth map in a scene and for determining a stereo-base distance for three-dimensional (3D) content creation
EP2600624A1 (en) * 2010-07-27 2013-06-05 Panasonic Corporation Image capturing device
JP5588812B2 (ja) * 2010-09-30 2014-09-10 日立オートモティブシステムズ株式会社 画像処理装置及びそれを用いた撮像装置
TW201216692A (en) * 2010-10-12 2012-04-16 Univ Nat Chiao Tung An object tracking and linking system under multiple distributed cameras with non-overlapping views and method thereof
US8866889B2 (en) * 2010-11-03 2014-10-21 Microsoft Corporation In-home depth camera calibration
US9070042B2 (en) * 2011-01-13 2015-06-30 Panasonic Intellectual Property Management Co., Ltd. Image processing apparatus, image processing method, and program thereof
US9519976B1 (en) * 2011-01-28 2016-12-13 Lucasfilm Entertainment Company Ltd. Calibrating stereoscopic cameras
JP5672112B2 (ja) * 2011-03-30 2015-02-18 富士通株式会社 ステレオ画像較正方法、ステレオ画像較正装置及びステレオ画像較正用コンピュータプログラム
US8897502B2 (en) * 2011-04-29 2014-11-25 Aptina Imaging Corporation Calibration for stereoscopic capture system
JP5875272B2 (ja) * 2011-07-22 2016-03-02 キヤノン株式会社 3次元計測方法
KR20130027727A (ko) * 2011-09-08 2013-03-18 삼성전자주식회사 깊이정보 생성장치, 깊이정보 생성방법 및 그 저장매체
US8941750B2 (en) * 2011-12-27 2015-01-27 Casio Computer Co., Ltd. Image processing device for generating reconstruction image, image generating method, and storage medium
US9002098B1 (en) * 2012-01-25 2015-04-07 Hrl Laboratories, Llc Robotic visual perception system
US20130286161A1 (en) * 2012-04-25 2013-10-31 Futurewei Technologies, Inc. Three-dimensional face recognition for mobile devices
JP5962394B2 (ja) * 2012-09-28 2016-08-03 株式会社デンソーウェーブ キャリブレーション装置、および撮像装置のキャリブレーション方法
US20150256815A1 (en) * 2012-10-01 2015-09-10 Telefonaktiebolaget L M Ericsson (Publ) 3d camera calibration
US9503703B1 (en) * 2012-10-05 2016-11-22 Amazon Technologies, Inc. Approaches for rectifying stereo cameras
CN103792667B (zh) * 2012-10-30 2016-06-01 财团法人工业技术研究院 立体摄像装置、自动校正装置与校正方法
US9503677B1 (en) * 2012-11-29 2016-11-22 Amazon Technologies, Inc. Rectifying camera pairs
US8866912B2 (en) * 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US20150103147A1 (en) * 2013-10-14 2015-04-16 Etron Technology, Inc. Image calibration system and calibration method of a stereo camera
US9282326B2 (en) * 2013-10-28 2016-03-08 The Regents Of The University Of Michigan Interactive camera calibration tool
TWI511081B (zh) * 2014-01-28 2015-12-01 Altek Semiconductor Corp 影像擷取裝置及其影像形變校正方法
US9729865B1 (en) * 2014-06-18 2017-08-08 Amazon Technologies, Inc. Object detection and tracking
US9866820B1 (en) * 2014-07-01 2018-01-09 Amazon Technologies, Inc. Online calibration of cameras

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW452723B (en) * 1998-07-29 2001-09-01 Intel Corp Method and apparatus for three-dimensional input entry
CN103797779A (zh) * 2011-09-13 2014-05-14 京瓷株式会社 摄像机校正设备、摄像机和摄像机校正方法
WO2014168992A1 (en) * 2013-04-08 2014-10-16 Amazon Technologies, Inc. Automatic rectification of stereo imaging cameras

Also Published As

Publication number Publication date
TWI576647B (zh) 2017-04-01
TW201624096A (zh) 2016-07-01
US10931933B2 (en) 2021-02-23
US20160198145A1 (en) 2016-07-07
CN105744254A (zh) 2016-07-06

Similar Documents

Publication Publication Date Title
CN105744254B (zh) 校正导引系统和校正导引系统的操作方法
US10455217B2 (en) Electronic apparatus and method of generating depth map
US20150116529A1 (en) Automatic effect method for photography and electronic apparatus
US20170293998A1 (en) Image generating apparatus and method for generation of 3d panorama image
JP2018092580A5 (ja) 画像処理装置および画像処理方法、プログラム
EP2413607A3 (en) Mobile terminal and method of controlling a three-dimensional image therein
US20190122383A1 (en) Image processing apparatus and method
JP6750500B2 (ja) 情報処理装置および認識支援方法
US10991340B2 (en) Image processing apparatus and image processing method
CN102402694A (zh) 显示控制装置及显示控制方法
CN108885339A (zh) 用于使用自适应焦平面渲染虚拟现实的配置
CN103870138A (zh) 一种信息处理方法及电子设备
JP2014239384A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
RU2020103459A (ru) Устройство и способ для формирования изображения
CN110611800A (zh) 一种投影调节方法、装置、投影仪及投影系统
US20150187051A1 (en) Method and apparatus for estimating image noise
US10750080B2 (en) Information processing device, information processing method, and program
JP6575999B2 (ja) 照明情報取得装置、照明復元装置、およびこれらのプログラム
CN102215410A (zh) 信号处理器件、信号处理方法、显示器件和程序产品
CN106355559B (zh) 一种图像序列的去噪方法及装置
CN103888674B (zh) 影像撷取装置及影像撷取方法
WO2018150086A3 (en) Methods and apparatuses for determining positions of multi-directional image capture apparatuses
JP2019047418A (ja) 情報処理装置、情報処理方法、コンピュータプログラム
JP2016162034A (ja) 3次元モデル生成システム、3次元モデル生成装置および3次元モデル生成方法
JP2015219634A (ja) 画像処理プログラム、画像処理方法および画像処理装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant