CN108886575B - 图像处理装置、图像处理系统及图像处理方法 - Google Patents

图像处理装置、图像处理系统及图像处理方法 Download PDF

Info

Publication number
CN108886575B
CN108886575B CN201780016871.4A CN201780016871A CN108886575B CN 108886575 B CN108886575 B CN 108886575B CN 201780016871 A CN201780016871 A CN 201780016871A CN 108886575 B CN108886575 B CN 108886575B
Authority
CN
China
Prior art keywords
image
image processing
correction reference
rotation
correction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780016871.4A
Other languages
English (en)
Other versions
CN108886575A (zh
Inventor
成濑洋介
椚濑高志
林健吉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN108886575A publication Critical patent/CN108886575A/zh
Application granted granted Critical
Publication of CN108886575B publication Critical patent/CN108886575B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • G03B17/12Bodies with means for supporting objectives, supplementary lenses, filters, masks, or turrets
    • G03B17/14Bodies with means for supporting objectives, supplementary lenses, filters, masks, or turrets interchangeably
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B43/00Testing correct operation of photographic apparatus or parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/242Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/22Character recognition characterised by the type of writing
    • G06V30/224Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/663Remote control of cameras or camera parts, e.g. by remote control devices for controlling interchangeable camera parts based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker

Abstract

本发明提供一种能够根据透镜镜筒的旋转方向的位置轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化的图像处理装置、图像处理系统及图像处理方法。本发明的图像处理装置具备:通信部(42),输入表示透镜镜筒(24)的旋转方向的校正基准位置的第1图像及校正对象的第2图像,所述第1图像及第2图像通过摄像装置(10)的拍摄来获得;旋转位置识别部(62),根据第1图像,识别旋转方向的校正基准位置;校正信息获取部(66),根据旋转方向的校正基准位置,获取校正信息;及图像校正部(68),根据校正信息,对第2图像进行校正。

Description

图像处理装置、图像处理系统及图像处理方法
技术领域
本发明涉及一种对通过摄像装置的拍摄来获得的图像进行与透镜的光学特性对应的校正的图像处理装置、图像处理系统及图像处理方法。
背景技术
已知有对通过摄像装置的拍摄来获得的图像,校正由于透镜的光学特性引起的像劣化的图像处理技术。例如,点像复原处理是如下图像处理:预先求出透镜的相差引起的像劣化的特性,通过与该特性相应的复原滤波器消除图像的像劣化。这种图像处理在透镜的成本降低及抑制图像品质的偏差方面有效。
专利文献1中记载有如下内容:按每个成像透镜的种类,预先对针对成像透镜的畸变相差的校正参数进行二维码化来印刷于透镜盖,通过数码相机,进行二维码的拍摄及解码与针对摄像图像的畸变相差校正。
并且,专利文献2中记载有如下内容:在原稿台与数码相机的接合部位设置信号收发电路,通过原稿台的角度传感器检测原稿的旋转角度(倾斜度)并对数码相机发送,通过数码相机向图像数据的标签部分写入旋转角度信息。
以往技术文献
专利文献
专利文献1:日本特开2009-302697号公报
专利文献2:日本特开2005-354301号公报
发明内容
发明要解决的技术课题
透镜镜筒对摄像装置装卸自如时,为了进行与该透镜镜筒的光学特性相应的图像处理,不仅需要与透镜镜筒的种类对应的校正信息,有时还需要透镜镜筒的旋转方向的位置信息。例如,以拧入式安装的透镜镜筒中,透镜镜筒的旋转方向的安装位置通常不确定,因此为了进行针对透镜的环绕光轴不均匀的光学特性的校正,需要表示透镜镜筒的旋转方向的安装位置的信息。并且,即使旋转方向的安装位置恒定,由于为了对焦的伸出动作而透镜镜筒旋转时,还需要表示该透镜镜筒的旋转方向的伸出停止位置的信息。
然而,在透镜镜筒与摄像装置的连接部位(支架部)没有电通信功能时,无法从透镜镜筒对摄像装置传递校正所需的信息。并且,即使在透镜镜筒与摄像装置的连接部位具有电通信功能时,不是共同的通信方式时,也无法从透镜镜筒对摄像装置传递校正所需的信息。即,无法将校正所需的信息传递至图像处理装置。
还有由人输入校正所需的信息的方法,但进行校正的图像处理装置并不一定在透镜镜筒附近,并且,图像处理装置有可能未与网络连接。这种情况下,由人直接移动至图像处理装置附近来进行信息输入是非常麻烦的,因此并不现实。
专利文献1中,印刷于透镜盖的二维码是表示按每个成像透镜的种类来确定的校正参数的信息,不是表示成像透镜的旋转方向的位置(安装位置或伸出停止位置)的信息,也不是表示由于该成像透镜的旋转方向的位置而改变的校正参数的信息。
专利文献2中,必需在原稿台与数码相机的接合部位具有电通信功能。因此,透镜镜筒与摄像装置不通信时,无法应用专利文献2的技术。
本发明是鉴于这种情况而完成的,其目的在于提供一种能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化的图像处理装置、图像处理系统及图像处理方法。
用于解决技术课题的机构
为了实现上述目的,本发明的第1方式所涉及的图像处理装置具备:图像输入部,输入表示安装于摄像装置的透镜镜筒的旋转方向的校正基准位置的第1图像及校正对象的第2图像,其中,所述第1图像及所述第2图像通过摄像装置的拍摄来获得;旋转位置识别部,根据第1图像,识别旋转方向的校正基准位置;校正信息获取部,根据旋转方向的校正基准位置,获取与保持于透镜镜筒的透镜的环绕光轴不均匀的光学特性对应的校正信息;及图像校正部,根据校正信息,对第2图像进行校正。
根据本方式,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
本发明的第2方式所涉及的图像处理装置中,第1图像中包含表示校正基准位置的标记,旋转位置识别部检测第1图像的画面内的标记的倾斜度,并根据该倾斜度,识别校正基准位置。
本发明的第3方式所涉及的图像处理装置中,标记是一维或二维的条形码。在此,“条形码”是指进行编码的图案(编码图案),有时简单称为“编码”。“二维条形码”中包含被称为“二维码”的编码图案。
本发明的第4方式所涉及的图像处理装置中,条形码中包含校正信息及识别信息中的至少一个,校正信息获取部根据条形码的解码结果与第1图像的画面内的条形码的倾斜度,获取与校正基准位置相应的校正信息。
本发明的第5方式所涉及的图像处理装置中,标记是表示显示于图像显示装置的标记或印刷于物体的标记。
本发明的第6方式所涉及的图像处理装置中,第1图像中包含用图像显示装置获取到的校正基准位置信息,旋转位置识别部通过从第1图像提取校正基准位置信息来识别校正基准位置。
本发明的第7方式所涉及的图像处理装置中,校正基准位置信息为用图像显示装置检测出的表示图像显示装置的姿势的姿势信息,校正信息获取部根据姿势信息,获取校正信息。
本发明的第8方式所涉及的图像处理装置中,校正基准位置信息为用图像显示装置接受的用户输入信息,校正信息获取部根据用户输入信息,获取校正信息。
本发明的第9方式所涉及的图像处理装置中,第1图像中包含基于光源的发光的光学像,旋转位置识别部检测第1图像的画面内的光量分布,并根据该光量分布,识别校正基准位置。
本发明的第10方式所涉及的图像处理装置中,旋转位置识别部根据第1图像的画面内的光学像的位置,识别校正基准位置。
本发明的第11方式所涉及的图像处理装置中,光源为点光源,旋转位置识别部根据第1图像中的点光源的光学像的位置,识别旋转方向的校正基准位置。
本发明的第12方式所涉及的图像处理装置中,光量分布通过第1图像中的透光区域与遮光区域之间的光量差而产生,旋转位置识别部通过检测第1图像中的透光区域及遮光区域中的至少一个,来识别校正基准位置。
本发明的第13方式所涉及的图像处理装置中,旋转位置识别部还根据第1图像中的光量的时间变化,识别旋转方向的校正基准位置。
本发明的第14方式所涉及的图像处理装置中,校正信息获取部通过转换与单一的校正基准位置相应的校正信息,来获取与其他校正基准位置相应的校正信息。
本发明的第15方式所涉及的图像处理装置中,校正信息获取部从多个校正信息选择与通过旋转位置识别部识别出的校正基准位置相应的校正信息。
本发明的第16方式所涉及的图像处理装置中,校正信息包含点像复原处理用校正信息。
本发明的第17方式所涉及的图像处理系统,其具备:透镜装置,包含透镜及透镜镜筒;摄像装置;及图像处理装置。
本发明的第18方式所涉及的图像处理方法中,包含:输入表示安装于摄像装置的透镜镜筒的旋转方向的校正基准位置的第1图像及校正对象的第2图像的工序,其中,第1图像及第2图像通过摄像装置的拍摄来获得;根据第1图像,识别旋转方向的校正基准位置的工序;根据旋转方向的校正基准位置,获取与保持于透镜镜筒的透镜的环绕光轴不均匀的光学特性对应的校正信息的工序;及根据校正信息,对第2图像进行校正的工序。另外,以下,“工序”还称为“步骤”。
发明效果
根据本发明,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
附图说明
图1是表示包含第1实施方式中的图像处理装置的图像处理系统的结构例的框图。
图2是用于说明透镜镜筒的校正基准位置的说明图。
图3是用于说明透镜镜筒的校正基准位置与成像元件的成像面之间的关系的说明图。
图4是表示第1实施方式中的图像处理例的流程的第1流程图。
图5是表示第1实施方式中的图像处理例的流程的第2流程图。
图6是用于说明对第1实施方式中的二维码的方向与校正基准位置建立对应关联的一例的说明图。
图7是用于说明对第1实施方式中的二维码的方向与校正基准位置建立对应关联的另一例的说明图。
图8是用于说明示出第1实施方式中的校正基准位置的第1图像的一例的说明图。
图9是用于说明第1实施方式中的效果的说明图。
图10是表示包含第2实施方式中的图像处理装置的图像处理系统的结构例的框图。
图11是表示第2实施方式中的图像处理例的流程的流程图。
图12是用于说明第2实施方式中的效果的说明图。
图13是表示包含第3实施方式中的图像处理装置的图像处理系统的结构例的框图。
图14是表示第3实施方式中的图像处理例的流程的流程图。
图15是用于说明第3实施方式中的效果的说明图。
图16是表示包含第4实施方式的图像处理装置的图像处理系统的结构例的框图。
图17是表示第4实施方式中的图像处理例的流程的流程图。
图18是表示用户输入例的说明图。
图19是表示包含第5实施方式中的图像处理装置的图像处理系统的结构例的框图。
图20是表示第5实施方式中的图像处理例的流程的流程图。
图21是用于说明对第5实施方式中的笔式灯的前端与校正基准位置建立对应关联的一例的说明图。
图22是表示第5实施方式中的第1图像的例子的说明图。
图23是用于说明第5实施方式中的效果的说明图。
图24是表示包含第6实施方式中的图像处理装置的图像处理系统的结构例的框图。
图25是表示第6实施方式中的图像处理例的流程的流程图。
图26是用于说明第6实施方式中的透镜镜筒的点光源的一例的说明图。
图27是表示第6实施方式中的第1图像的例子的说明图。
图28是用于说明第6实施方式中的效果的说明图。
图29是表示包含第7实施方式中的图像处理装置的图像处理系统的结构例的框图。
图30是表示第7实施方式中的顶盖的一例的图。
图31是表示第7实施方式中的图像处理例的流程的流程图。
图32是表示第7实施方式中的第1图像的例子的说明图。
图33是用于说明第7实施方式中的效果的说明图。
图34是智能手机的一例的外观图。
图35是表示智能手机的一例的结构例的框图。
具体实施方式
以下,根据附图,对本发明所涉及的图像处理装置、图像处理系统及图像处理方法进行说明。
[第1实施方式]
图1是表示包含第1实施方式中的图像处理装置的图像处理系统的结构例的框图。
本例的图像处理系统由摄像装置10、透镜装置20、智能手机30、计算机装置40(为图像处理装置的一例)及数据库80构成。
摄像装置10包含成像元件12而构成。本例的摄像装置10为透镜可换式相机。作为成像元件12,例如使用CMOS(互补金属氧化物半导体,complementary metal oxidesemiconductor)摄像传感器或CCD(电荷耦合元件,charge coupled device)摄像传感器。也可以使用其他摄像器件。摄像装置10并不限定于透镜可换式相机。只要是具有摄像功能且能够安装后述的透镜装置20,则可以使用任何装置。
透镜装置20包含透镜22及保持透镜22的透镜镜筒24。本例的透镜镜筒24能够对摄像装置10的支架部14安装及拆卸。透镜镜筒24例如由拧入摄像装置10的支架部14来安装的拧入式透镜镜筒24构成。拧入安装式透镜镜筒例如安装于CCTV(闭路电视,closed circuittelevision)相机、FA(工厂自动化,factory automation)相机、MV(机器视觉,machinevision)相机。但是,也可以将透镜镜筒24拧入安装于任何摄像装置10。也可以通过卡口(bayonet)式等其他安装方式安装于摄像装置10的支架部14。
智能手机30为本发明中的“图像显示装置”的一例。智能手机30的结构例将进行后述。
计算机装置40为本发明中的“图像处理装置”的一例。本例的计算机装置40为将摄像装置10作为客户终端来进行图像处理及应用处理的服务器装置。计算机装置40并不限定于服务器装置。也可以是所谓的个人计算机。
计算机装置40包含:通信部42,通过网络NW与外部装置(本例中为摄像装置10及数据库80)进行信息的输出及输入;显示部44,进行显示;命令输入部46,从用户接受指令输入;存储部48,存储各种信息;及控制部50,根据存储于存储部48的程序控制计算机装置40的各部。
通信部42由有线或无线的通信器件构成。通信部42为“图像输入部”的一例。
显示部44为能够显示图像的显示器件,例如由LCD(液晶显示器,liquidcrystaldisplay)构成。也可以使用有机电致发光显示器等其他显示器件。
命令输入部46例如由键盘及指示器件(例如鼠标)构成。也可以由触摸面板构成。也可以使用语音输入器件、手势输入器件等其他输入器件。
存储部48例如包含ROM(只读存储器,read only memory)、RAM(随机存取存储器,random access memory)及EEPROM(电可擦可编程只读存储器,electrically erasableprogrammable read only memory)而构成。也可以使用其他存储器件。
控制部50例如由CPU(中央处理器,central processing unit)构成。
控制部50包含如下而构成:驱动器52,通过控制通信部42进行对摄像装置10的输入输出控制;图像处理部54,对通过摄像装置10的拍摄来获得的图像(以下,称为“摄像图像”)进行图像处理;及应用部56,利用已图像处理的摄像图像(以下,称为“应用图像”)进行应用处理。
图像处理部54包含:旋转位置识别部62,根据第1摄像图像(还称为“第1图像”)的画面内的二维码(还称为“二维条形码”)的倾斜度,识别透镜镜筒24的旋转方向的校正基准位置;解码部64,对第1摄像图像中的二维码进行解码;校正信息获取部66,根据二维码的解码结果与透镜镜筒24的旋转方向的校正基准位置,获取与保持于透镜镜筒24的透镜22的环绕光轴不均匀的光学特性对应的校正信息;及图像校正部68,根据校正信息对第2摄像图像(还称为“第2图像”)进行校正。
“校正信息”例如为用于点像复原处理(还称为“图像恢复处理”)的校正信息。“校正信息”可以是畸变相差校正用的校正信息、阴影(shading)校正(周边光量校正)用的校正信息及色彩校正用的校正信息中的任一个或其组合。
也可以使用一维编码(还称为“一维条形码”)来代替二维码。
另外,二维码或一维编码的“倾斜度”是第1图像的画面内的倾斜度,并非光轴方向的歪斜。
图2是用于说明透镜镜筒的校正基准位置的说明图。特定记号M标注于透镜镜筒24,以便能够判别透镜镜筒24在旋转方向R上的安装位置(为校正基准位置的一例)。另外,关于记号M,只要是能够辨认的方法,则例如可通过印刷、贴付、附设等任意方法标注于透镜镜筒24。
本例的透镜镜筒24通过拧入于摄像装置10的支架部14来安装。即,本例的透镜镜筒24为拧入式安装。并且,本例的透镜镜筒24无法与摄像装置10通信。作为透镜镜筒24无法与摄像装置10通信的情况,可举出如下情况。第1,有透镜镜筒24中没有实际安装与摄像装置10进行通信的机构的情况。第2,有摄像装置10中没有实际安装与透镜镜筒24进行通信的机构的情况。第3,有即使透镜镜筒24及摄像装置10双方中实际安装有通信机构,但不具有共同的通信方式的情况。第4,有即使透镜镜筒24及摄像装置10具有共同的通信方式,但由于计算机装置40的驱动器52不具有利用透镜镜筒24与摄像装置10的通信内容的功能,因此透镜镜筒24与摄像装置10实际上无法通信的情况。
将透镜镜筒24拧入安装于摄像装置10的支架部14时,透镜镜筒24绕光轴Ax的旋转方向R上的透镜镜筒24的安装位置(为校正基准位置Pc)变得不确定。图2的透镜镜筒24的旋转方向R上,校正基准位置Pc位于从检查基准位置P0(检查保持于透镜镜筒24的透镜22的光学特性时的基准位置)旋转角度θL的位置。如此,校正基准位置Pc不确定,且透镜镜筒24与摄像装置10无法通信时,计算机装置40无法从摄像装置10获得校正基准位置Pc。因此,计算机装置40的旋转位置识别部62根据第1摄像图像(第1图像),对校正基准位置Pc进行图像识别。
如图2所示,透镜镜筒24中在检查基准位置P0与校正基准位置Pc上存在角度θL的偏离时,如图3所示,在成像元件12的成像面上,在检查基准位置P0与校正基准位置Pc上也产生角度θL的偏离。
因此,计算机装置40的校正信息获取部66进行在旋转方向R上将与检查基准位置P0对应的单一的校正信息转换角度θL的量的偏移转换。由此,能够获得与现实的校正基准位置Pc(为本发明中的“其他校正基准位置”)对应的适当的校正信息。
或者,通过校正信息获取部66,预先根据与检查基准位置P0对应的校正信息,生成分别与多个角度θLi(i=1~N)对应的多个校正信息,并存储于数据库80(或存储部48)。并且,通过校正信息获取部66,从多个校正信息选择与现实的校正基准位置Pc对应的校正信息。由此,能够获得与现实的校正基准位置Pc对应的适当的校正信息。
另外,将透镜镜筒24为拧入安装式的情况为例进行了说明,但即使是其他安装式,有时在检查基准位置P0与校正基准位置Pc上也会产生偏离。例如,即使是卡口式安装时,为了对焦而进行伸出旋转的类型的透镜镜筒24的情况下,绕光轴Ax的旋转方向R上,透镜镜筒24的伸出位置(为校正基准位置Pc的其他例)也会变得不确定。
图4及图5是表示第1实施方式中的图像处理例的流程的流程图。
图4中,首先,通过智能手机30从透镜镜筒24读取透镜固有信息(步骤S102)。透镜固有信息例如为透镜镜筒24(或者透镜装置20)的识别信息或检查时校正信息的识别信息。透镜固有信息也可以是与检查基准位置P0对应的校正信息(检查时校正信息)。透镜固有信息例如可以是表示特定的像劣化特性的数值列,也可以是表示特定的像劣化图案的ID(识别,identification)编号。
接着,通过智能手机30,对透镜固有信息进行编码来显示二维码(步骤S104)。二维码例如为QR编码(注册商标)(QR来源于“快速响应,quick re sponse”)。
接着,对显示于智能手机30的二维码的方向与透镜镜筒24的旋转方向的校正基准位置建立对应关联(步骤S106)。如图2所示,由于在透镜镜筒24标注有记号M,因此例如通过用手对智能手机30的框体的方向与记号M的位置建立对应关联,能够使显示于智能手机30的二维码的方向与校正基准位置Pc对应。
如图6所示,记号M存在于透镜镜筒24的朝上位置(为图中的Y轴上的位置)时,沿着透镜镜筒24的朝上方向(为图中的Y轴方向)配置二维码Cd。即,使智能手机30的画面的上端朝向朝上方向Y。
如图7所示,记号M存在于从透镜镜筒24的朝上位置(为图中的Y轴上的位置)倾斜角度θL的位置时,使二维编码Cd相对于透镜镜筒24的朝上方向(为图中的Y轴方向)倾斜大致角度θL来配置。即,使智能手机30的画面的上端相对于朝上方向Y倾斜大致角度θL。但是,二维码Cd的倾斜度无需与记号M在旋转方向R上的位置完全一致。例如,可以通过二维码Cd的倾斜度示出记号M的角度θL最接近45度间隔的多个角度(0度、45度、90度、……、315度)中的哪一个。
接着,通过摄像装置10获取包含二维码的第1图像(步骤S108)。例如,获取图8所示的第1图像。
接着,从摄像装置10对计算机装置40发送包含二维码的第1图像(步骤S110)。第1图像通过计算机装置40的通信部42输入。
接着,通过计算机装置40的旋转位置识别部62,根据第1图像的画面内的二维码的倾斜度,识别透镜镜筒24的旋转方向的校正基准位置(步骤S112)。
接着,通过计算机装置40的解码部64,对二维码进行解码来获取透镜固有信息(步骤S114)。
接着,通过计算机装置40的校正信息获取部66,根据透镜固有信息与透镜镜筒24的旋转方向的校正基准位置,从数据库80获取校正信息(步骤S116)。
从图4(示出步骤S102~S116)过渡到图5(示出步骤S122~S126),接着,通过摄像装置10拍摄目标被摄体,获取包含该被摄体像的第2图像(步骤S122)。第2图像为校正对象的图像。
接着,从摄像装置10对计算机装置40发送包含被摄体像的校正对象的第2图像(步骤S124)。第2图像通过计算机装置40的通信部42输入。
接着,通过计算机装置40的图像校正部68,根据校正信息,对第2图像进行校正(步骤S126)。
如图9所示,本实施方式中,作为对透镜装置20的透镜固有信息进行编码的二维码Cd且以画面上的倾斜度表示透镜镜筒24的校正基准位置的二维码Cd显示于智能手机30。通过摄像装置10的通常的摄影Ph获取包含二维码Cd的第1图像DI,通过计算机装置40的驱动器52的通常的处理提交到计算机装置40的图像处理部54。并且,通过计算机装置40的图像处理部54,从第1图像DI中的二维码Cd的解码结果获取透镜固有信息,且从二维码Cd的画面上的倾斜度识别校正基准位置。如此,无需对从摄像装置10至计算机装置40的驱动器52的传输路径Rc(为依赖于摄像装置的厂商的图像传输路)追加用于传输透镜固有信息及校正基准位置信息的新的硬件及新的软件。即,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
另外,以条形码(为标记的一方式)为显示于智能手机30(为图像显示装置的一方式)的条形码的情况为例进行了说明,但也可以通过摄像装置10拍摄印刷于物体的条形码。即,本发明中的拍摄对象的“标记”并不限定于显示于图像显示装置的标记,也可以是印刷于物体(例如盒子)的标记。
[第2实施方式]
图10是表示包含第2实施方式中的图像处理装置的图像处理系统的结构例的框图。本图中,对与图1中示出的第1实施方式中的图像处理装置相同的构成要件标注相同符号,以下中省略已说明的内容。
图11是表示第2实施方式中的图像处理例的流程的流程图。
首先,如图12所示,通过智能手机30显示标记MP(标记图案)(步骤S202),对该标记MP的方向与透镜镜筒24的旋转方向的校正基准位置建立对应关联(步骤S204)。如图2所示,由于在透镜镜筒24上标注有记号M,因此例如通过用手对智能手机30的框体的方向与记号M的位置建立对应关联,能够使显示于智能手机30的标记MP的方向与校正基准位置Pc对应。
接着,通过摄像装置10拍摄所显示的标记MP,获取包含该标记MP的第1图像(步骤S206)。
接着,从摄像装置10对计算机装置40发送包含标记MP的第1图像(步骤S208)。第1图像通过计算机装置40的通信部42输入。
接着,通过计算机装置40的旋转位置识别部62,根据第1图像的画面内的标记MP的倾斜度,识别透镜镜筒24的旋转方向的校正基准位置(步骤S210)。
接着,通过计算机装置40的校正信息获取部66,根据摄像装置10的识别信息,获取透镜装置20的透镜固有信息(步骤S212)。关于摄像装置10的识别信息,只要是能够识别摄像装置10的信息,则可以使用任何信息。也可以使用摄像装置10的通信用地址。并且,设为数据库80中,摄像装置10的识别信息与透镜装置20的透镜固有信息建立有关联。校正信息获取部66能够通过参考数据库80,根据摄像装置10的识别信息,获取透镜固有信息。
接着,通过计算机装置40的校正信息获取部66,根据透镜固有信息与透镜镜筒24的旋转方向的校正基准位置,从数据库80获取校正信息(步骤S214)。
如图12所示,本实施方式中,以画面上的倾斜度表示透镜镜筒24的校正基准位置的标记MP(标记图案)显示于智能手机30。通过摄像装置10的通常的摄影Ph获取包含标记MP的第1图像DI,通过计算机装置40的驱动器52的通常的处理提交至计算机装置40的图像处理部54。并且,通过计算机装置40的图像处理部54,从第1图像DI中的标记MP的画面上的倾斜度识别校正基准位置。如此,无需对从摄像装置10至计算机装置40的驱动器52的传输路径Rc(为依赖于摄像装置的厂商的图像传输路)追加用于传输校正基准位置信息的新的硬件及新的软件。即,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
[第3实施方式]
图13是表示包含第3实施方式中的图像处理装置的图像处理系统的结构例的框图。本图中,对与图1中示出的第1实施方式中的图像处理装置相同的构成要件标注相同符号,以下中省略已说明的内容。
智能手机30具备检测智能手机30的姿势的姿势传感器32。姿势传感器32例如由陀螺仪传感器构成。本实施方式中,校正基准位置信息为表示用姿势传感器32检测的智能手机30的姿势的信息,校正信息获取部66从第1图像提取表示智能手机30的姿势的信息(为校正基准位置信息),根据表示该智能手机30的姿势的信息获取校正信息。
图14是表示第3实施方式中的图像处理例的流程的流程图。
首先,通过智能手机30,从透镜镜筒24读取透镜固有信息(步骤S302)。步骤S302与第1实施方式的步骤S102相同。
接着,对智能手机30的方向与透镜镜筒24的旋转方向的校正基准位置建立对应关联(步骤S304)。如图2所示,由于在透镜镜筒24上标注有记号M,因此例如用手对智能手机30的框体的方向与记号M的位置建立对应关联。
接着,通过智能手机30的姿势传感器32,检测智能手机30的姿势来获取校正基准位置信息(步骤S306)。
接着,通过智能手机30,对透镜固有信息及校正基准位置信息进行编码来显示二维码(步骤S308)。
接着,通过摄像装置10拍摄二维码,获取包含该二维码的第1图像(步骤S310)。
接着,从摄像装置10对计算机装置40发送包含二维码的第1图像(步骤S312)。第1图像通过计算机装置40的通信部42输入。
接着,通过计算机装置40的解码部64,对二维码进行解码来获取透镜固有信息及校正基准位置信息(步骤S314)。
接着,通过计算机装置40的校正信息获取部66,根据透镜固有信息与透镜镜筒24的旋转方向的校正基准位置,从数据库80获取校正信息(步骤S316)。即,本例的校正信息获取部66根据通过智能手机30的姿势传感器32检测出的姿势信息,获取校正信息。
本实施方式中,通过智能手机30的姿势传感器32获取校正基准位置,如图15所示,对透镜镜筒24的透镜固有信息及校正基准位置进行编码的二维码Cd显示于智能手机30。通过摄像装置10的通常的摄影Ph获取包含二维码Cd的第1图像DI,通过计算机装置40的驱动器52的通常的处理提交至计算机装置40的图像处理部54。并且,通过计算机装置40的图像处理部54,从第1图像DI中的二维码Cd的解码结果获取透镜固有信息及校正基准位置。如此,无需对从摄像装置10至计算机装置40的驱动器52的传输路径Rc(为依赖于摄像装置的厂商的图像传输路)追加用于传输透镜固有信息及校正基准位置信息的新的硬件及新的软件。即,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
[第4实施方式]
图16是表示包含第4实施方式中的图像处理装置的图像处理系统的结构例的框图。本图中,对与图1中示出的第1实施方式中的图像处理装置相同的构成要件标注相同符号,以下中省略已说明的内容。
智能手机30具备接受用户的指令输入的操作部34。操作部34例如由触摸面板构成。通过操作部34接受校正基准位置信息的输入。本实施方式中,校正基准位置信息为用智能手机30接受的用户输入信息,校正信息获取部66从第1图像提取智能手机30中的用户输入信息(为校正基准位置信息),根据该智能手机30中的用户输入信息获取校正信息。
图17是表示第4实施方式中的图像处理例的流程的流程图。
首先,通过智能手机30,从透镜镜筒24读取透镜固有信息(步骤S402)。步骤S402与第1实施方式的步骤S102相同。
接着,通过智能手机30的操作部34,接受透镜镜筒24的旋转方向的校正基准位置的用户输入(步骤S404)。另外,如图18所示,也可以接受校正基准位置以外的信息(本例中,为焦距及光圈值)的输入。
步骤S408至步骤S416与第3实施方式中的步骤S308至步骤S316相同,省略说明。
其中,本例的校正信息获取部66根据用智能手机30接受的用户输入信息获取校正信息。
本实施方式中,也与第3实施方式相同,无需对从摄像装置10至计算机装置40的驱动器52的传输路径Rc(为依赖于摄像装置的厂商的图像传输路)追加用于传输透镜固有信息及校正基准位置信息的新的硬件及新的软件。即,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
另外,第3实施方式及第4实施方式中,以将透镜固有信息及校正基准位置信息编码为二维码的情况为例进行了说明,但也可以编码为其他信号。作为其他编码,并不限定于空间上的编码,也可以使用时间上的编码(例如,用闪烁编码的信号,例如莫尔斯信号(Morse signal))。
[第5实施方式]
图19是表示包含第5实施方式中的图像处理装置的图像处理系统的结构例的框图。本图中,对与图1中示出的第1实施方式中的图像处理装置相同的构成要件标注相同符号,以下中省略已说明的内容。
本实施方式中,通过笔式灯PL的发光表示透镜镜筒24的校正基准位置。旋转位置识别部62检测第1图像的画面内的光量分布,根据该光量分布识别校正基准位置。
图20是表示第5实施方式中的图像处理例的流程的流程图。
首先,对笔式灯PL(发光体)的光学像的画面内位置与透镜镜筒24的旋转方向的校正基准位置建立对应关联(步骤S502)。即,如图21所示,对笔式灯PL的前端与透镜镜筒24的记号M的位置建立对应关联。另外,也可以使笔式灯PL闪烁。
接着,通过摄像装置10,拍摄笔式灯PL的光学像来获取第1图像(步骤S504)。即,如图22所示,获取包含从笔式灯PL发光的光的光学像LI的第1图像。
接着,从摄像装置10对计算机装置40发送包含笔式灯PL的光学像的第1图像(步骤S506)。第1图像通过计算机装置40的通信部42输入。
接着,通过计算机装置40的旋转位置识别部62,根据第1图像的画面内的笔式灯PL的光学像的位置,识别透镜镜筒24的旋转方向的校正基准位置(步骤S508)。使笔式灯PL闪烁时,还根据第1图像中的光量的时间变化,识别透镜镜筒24的旋转方向的校正基准位置。
接着,通过计算机装置40的校正信息获取部66,根据摄像装置10的识别信息,获取透镜固有信息(步骤S510)。
接着,通过计算机装置40的校正信息获取部66,根据透镜固有信息与透镜镜筒24的旋转方向的校正基准位置,从数据库80获取校正信息(步骤S512)。
如图23所示,本实施方式中,通过摄像装置10的通常的摄影Ph获取包含以画面上的位置表示透镜镜筒24的校正基准位置的笔式灯PL的光学像LI(点光源像)的第1图像DI,通过计算机装置40的驱动器52的通常的处理提交至计算机装置40的图像处理部54。并且,通过计算机装置40的图像处理部54,从第1图像DI中的光学像LI的画面中的位置识别校正基准位置。如此,无需对从摄像装置10至计算机装置40的驱动器52的传输路径Rc(为依赖于摄像装置的厂商的图像传输路)追加用于传输校正基准位置信息的新的硬件及新的软件。即,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
[第6实施方式]
图24是表示包含第6实施方式中的图像处理装置的图像处理系统的结构例的框图。本图中,对与图1中示出的第1实施方式中的图像处理装置相同的构成要件标注相同符号,以下中省略已说明的内容。
透镜装置20在透镜镜筒24的内周具备点光源26。也可以在透镜镜筒24的外周设置点光源26。透镜装置20的点光源26例如由LED(发光二极管,light emitting diode)构成。旋转位置识别部62检测第1图像的画面内的光量分布,根据该光量分布,识别校正基准位置。
图25是表示第5实施方式中的图像处理例的流程的流程图。
首先,如图26所示,点亮安装于透镜镜筒24的点光源26(步骤S602)。例如,事先在透镜镜筒24设置发出点亮点光源26的指令的开关(省略图示),对该开关进行打开操作。本例的点光源26相当于图2的记号M,表示透镜镜筒24的校正基准位置。也可以使点光源26闪烁。
接着,通过摄像装置10,拍摄透镜镜筒24的光学像来获取第1图像(步骤S604)。即,如图27所示,获取包含从透镜镜筒24的点光源26发光的光的光学像LI的第1图像。
接着,从摄像装置10对计算机装置40发送包含透镜镜筒24的点光源26的光学像的第1图像(步骤S606)。第1图像通过计算机装置40的通信部42输入。
接着,通过计算机装置40的旋转位置识别部62,根据第1图像的画面内的透镜镜筒24的点光源26的光学像的位置,识别透镜镜筒24的旋转方向的校正基准位置(步骤S608)。使点光源26闪烁时,还根据第1图像中的光量的时间变化,识别透镜镜筒24的旋转方向的校正基准位置。
步骤S610及步骤S620与第5实施方式中的步骤S510及步骤S512相同,省略说明。
如图28所示,本实施方式中,通过摄像装置10的通常的摄影Ph获取包含以画面上的位置表示透镜镜筒24的校正基准位置的点光源26的光学像LI(点光源像)的第1图像DI,通过计算机装置40的驱动器52的通常的处理提交至计算机装置40的图像处理部54。并且,通过计算机装置40的图像处理部54,从第1图像DI中的光学像LI的画面中的位置识别校正基准位置。如此,无需对从摄像装置10至计算机装置40的驱动器52的传输路径Rc(为依赖于摄像装置的厂商的图像传输路)追加用于传输校正基准位置信息的新的硬件及新的软件。即,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
[第7实施方式]
图29是表示包含第7实施方式中的图像处理装置的图像处理系统的结构例的框图。本图中,对与图1中示出的第1实施方式中的图像处理装置相同的构成要件标注相同符号,以下中省略已说明的内容。
顶盖28安装于透镜镜筒24的前端。如图30所示,顶盖28具有:透光部28L,包含使外光透射的开口部分;及遮光部28M,与透光部28L相比,屏蔽外光。即,由于第1图像中的透光区域与遮光区域之间的光量差,产生第1图像内的光量分布。旋转位置识别部62通过检测第1图像的画面内的透光区域及遮光区域中的至少一个,识别校正基准位置。
图31是表示第7实施方式中的图像处理例的流程的流程图。
首先,在将具有透光部28L(透光区域)及遮光部28M(遮光区域)的顶盖28安装于透镜镜筒24的状态下,通过摄像装置10进行拍摄来获取第1图像(步骤S702)。即,如图32所示,获取包含与顶盖28的透光部28L对应的光学像LI的第1图像。另外,透镜镜筒24的旋转方向上的顶盖28的透光部28L的位置与透镜镜筒24的旋转方向上的记号M的位置建立对应关联。因此,第1图像中的光学像LI的位置与透镜镜筒24中的记号M的位置对应。
接着,从摄像装置10对计算机装置40发送包含透镜镜筒24的点光源26的光学像的第1图像(步骤S704)。第1图像通过计算机装置40的通信部42输入。
接着,通过计算机装置40的旋转位置识别部62,根据第1图像的画面内的光学像LI(透光区域)的位置,识别透镜镜筒24的旋转方向的校正基准位置(步骤S706)。也可以根据第1图像的画面内的遮光区域的位置,识别校正基准位置。
步骤S708及步骤S710与第5实施方式中的步骤S510及步骤S512相同,省略说明。
如图33所示,本实施方式中,通过摄像装置10的通常的摄影Ph获取包含以画面上的位置表示透镜镜筒24的校正基准位置的顶盖28的光学像LI的第1图像DI,通过计算机装置40的驱动器52的通常的处理提交至计算机装置40的图像处理部54。并且,通过计算机装置40的图像处理部54,从第1图像DI中的光学像LI的画面中的位置识别校正基准位置。如此,无需对从摄像装置10至计算机装置40的驱动器52的传输路径Rc(为依赖于摄像装置的厂商的图像传输路)追加用于传输校正基准位置信息的新的硬件及新的软件。即,能够根据透镜镜筒的旋转方向的位置,轻松地校正由于透镜的环绕光轴不均匀的光学特性引起的像劣化。
[智能手机的结构例]
图34表示作为图像显示装置的一例的智能手机30的外观。图34所示的智能手机30具有平板状框体502,在框体502的一侧的面具备作为显示部的显示面板521与作为输入部的操作面板522成为一体的显示输入部520。并且,框体502具备扬声器531、麦克风532、操作部540及相机部541。另外,框体502的结构并不限定于此,例如,还能够采用显示部与输入部独立的结构,或具有折叠结构或滑动机构的结构。
图35是表示图34所示的智能手机30的结构的框图。如图35所示,作为智能手机的主要构成要件,具备无线通信部510、显示输入部520、通话部530、操作部540、相机部541、存储部550、外部输入输出部560、GPS(全球定位系统,global positioning system)接收部570、动作传感器部580、电源部590及主控制部501。并且,作为智能手机30的主要功能,具备进行经由基站装置BS与移动通信网的移动无线通信的无线通信功能。
无线通信部510根据主控制部501的命令,对容纳于移动通信网的基站装置BS进行无线通信。使用该无线通信,进行语音数据、图像数据等各种文件数据、电子邮件数据等的收发或Web数据或流数据等的接收。
显示输入部520是所谓的触摸面板,其具备显示面板521及操作面板522,所述显示输入部通过主控制部501的控制,显示图像(静态图像及动态图像)或字符信息等来视觉性地向用户传递信息,并且检测对所显示的信息的用户操作。另外,显示输入部520相当于图16所示的智能手机30的操作部34。
显示面板521将LCD(液晶显示器,liquid crystal display)、OELD(有机发光二极管,organic electro-luminescence display)等用作显示器件。操作面板522是以能够识别显示于显示面板521的显示面上的图像的方式载置,并检测通过用户的手指或笔型输入装置操作的一个或多个坐标的器件。若通过用户的手指或笔型输入装置操作该器件,则将因操作而产生的检测信号输出至主控制部501。接着,主控制部501根据所接收的检测信号检测显示面板521上的操作位置(坐标)。
如图34所示,作为本发明的摄像装置的一实施方式来例示的智能手机30的显示面板521与操作面板522成为一体而构成显示输入部520,配置成操作面板522完全覆盖显示面板521。采用该配置时,操作面板522可以对显示面板521以外的区域也具备检测用户操作的功能。换言之,操作面板522可以具备针对与显示面板521重叠的重叠部分的检测区域(以下,称为显示区域)及针对除此以外的不与显示面板521重叠的外缘部分的检测区域(以下,称为非显示区域)。
另外,可使显示区域的大小与显示面板521的大小完全一致,但无需一定要使两者一致。并且,操作面板522可具备外缘部分及除此以外的内侧部分这两个感应区域。而且,外缘部分的宽度根据框体502的大小等而适当设计。此外,作为在操作面板522中采用的位置检测方式,可举出矩阵开关方式、电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式、静电电容方式等,还可以采用任意方式。
通话部530具备扬声器531和麦克风532,所述通话部将通过麦克风532输入的用户的语音转换成能够在主控制部501中处理的语音数据来输出至主控制部501,或者对通过无线通信部510或者外部输入输出部560接收的语音数据进行解码来从扬声器531输出。并且,如图34所示,例如,能够将扬声器531搭载于与设置有显示输入部520的面相同的面,并将麦克风532搭载于框体502的侧面。
操作部540为使用键开关等的硬件键,接受来自用户的命令。例如,如图34所示,操作部540搭载于智能手机30的框体502的侧面,是用手指等按下时开启,手指离开时通过弹簧等的复原力而成为关闭状态的按钮式开关。
存储部550存储主控制部501的控制程序和控制数据、应用软件、将通信对象的名称和电话号码等建立对应关联的地址数据、所收发的电子邮件的数据、通过Web浏览下载的Web数据及已下载的内容数据,并且临时存储流数据等。并且,存储部550由内置于智能手机的内部存储部551及具有装卸自如的外部存储器用的插槽的外部存储部552构成。另外,构成存储部550的各个内部存储部551与外部存储部552通过使用闪存类型(flash memorytype)、硬盘类型(hard disk type)、微型多媒体卡类型(multimedia card micro type)、卡类型的存储器(例如,MicroSD(注册商标)存储器等)、RAM(随机存取存储器,randomaccess memory)、ROM(只读存储器,read only memory)等存储介质来实现。
外部输入输出部560发挥与连结于智能手机30的所有外部设备的接口的作用,用于通过通信等(例如,通用串行总线(USB)等)或网络(例如,互联网、无线LAN(局域网,localarea network)、蓝牙(bluetooth)(注册商标)、RFID(射频识别,radio frequency identification)、红外线通信(红外线数据协会,infrared data association:IrDA)(注册商标)、UWB(超宽带,ultra wideband)(注册商标)、紫蜂(ZigBee)(注册商标)等)直接或间接地与其他外部设备连接。
作为与智能手机30连结的外部设备,例如有:有/无线头戴式耳机、有/无线外部充电器、有/无线数据端口、经由卡插槽连接的存储卡(Memory card)或SIM(订户识别模块,Subscriber Identity Module)/UIM(用户识别模块,User Identity Module)卡、经由语音/视频I/O(Input/Output)端子连接的外部语音/视频设备、无线连接的外部语音/视频设备、有/无线连接的智能手机、有/无线连接的个人计算机、有/无线连接的PDA(掌上电脑,personal digital assistant)、耳机等。外部输入输出部能够将从这种外部设备接收到传输的数据传递至智能手机30的内部的各构成要件、或将智能手机30内部的数据传输至外部设备。
GPS接收部570根据主控制部501的命令,接收从GPS卫星ST1~STn发送的GPS信号,执行基于所接收的多个GPS信号的测位运算处理,检测包含智能手机30的纬度、经度、高度的位置。GPS接收部570在能够从无线通信部510或外部输入输出部560(例如,无线LAN)获取位置信息时,还能够利用该位置信息检测位置。
动作传感器部580例如具备三轴加速度传感器等,根据主控制部501的命令,检测智能手机30的物理动作。通过检测智能手机30的物理动作,可检测智能手机30的移动方向或加速度。该检测结果被输出至主控制部501。
本例的动作传感器部580能够用作图13的姿势传感器32。
电源部590根据主控制部501的命令,向智能手机30的各部供给积蓄在电池(未图示)中的电力。
主控制部501具备微处理器,根据存储部550所存储的控制程序或控制数据进行动作,集中控制智能手机30的各部。并且,主控制部501为了通过无线通信部510进行语音通信或数据通信,具备控制通信系统的各部的移动通信控制功能及应用处理功能。
应用处理功能能够通过主控制部501根据存储部550所存储的应用软件进行动作来实现。作为应用处理功能,例如有控制外部输入输出部560来与对象设备进行数据通信的红外线通信功能、进行电子邮件的收发的电子邮件功能、浏览Web页的Web浏览功能等。
并且,主控制部501具备根据接收数据或所下载的流数据等图像数据(静态图像或动态图像的数据)在显示输入部520显示影像等的图像处理功能。图像处理功能是指主控制部501对上述图像数据进行解码,对该解码结果实施图像处理并将图像显示于显示输入部520的功能。
而且,主控制部501执行对显示面板521的显示控制及检测通过操作部540、操作面板522进行的用户操作的操作检测控制。
通过执行显示控制,主控制部501显示用于启动应用软件的图标或滚动条等软件键,或者显示用于创建电子邮件的窗口。另外,滚动条是指用于使无法落入显示面板521的显示区域的较大图像等,接受使图像的显示部分移动的命令的软件键。
并且,通过执行操作检测控制,主控制部501检测通过操作部540进行的用户操作,或者通过操作面板522接受对上述图标的操作或对上述窗口的输入栏输入字符串,或者接受通过滚动条进行的显示图像的滚动请求。
而且,通过执行操作检测控制,主控制部501具备判定对操作面板522操作的位置是与显示面板521重叠的重叠部分(显示区域)还是除此以外的不与显示面板521重叠的外缘部分(非显示区域),并控制操作面板522的感应区域或软件键的显示位置的触摸面板控制功能。
并且,主控制部501还能够检测对操作面板522的手势操作,并根据检测出的手势操作执行预先设定的功能。手势操作表示并非以往的简单的触摸操作,而是通过手指等描绘轨迹、或者同时指定多个位置、或者组合这些来从多个位置对至少一个描绘轨迹的操作。
相机部541是利用CMOS(互补型金属氧化物半导体,complementary metal oxidesemiconductor)摄像传感器或CCD(电荷耦合元件,charge coupled device)摄像传感器等成像元件进行电子摄影的数码相机。并且,相机部541通过主控制部501的控制,将通过拍摄来获得的图像数据转换为例如JPEG(联合摄影编码专家组,joint photographic codingexperts group)等压缩的图像数据,存储于存储部550或者通过外部输入输出部560或无线通信部510输出。图35所示的智能手机30中,相机部541搭载于与显示输入部520相同的面,但相机部541的搭载位置并不限于此,可以搭载于显示输入部520的背面,或者搭载有多个相机部541。另外,搭载有多个相机部541时,还能够切换供摄影的相机部541来单独摄影,或者同时使用多个相机部541来摄影。
并且,相机部541能够用于智能手机30的各种功能。例如,在显示面板521显示用相机部541获取的图像,或作为操作面板522的操作输入之一,利用相机部541的图像。并且,GPS接收部570检测位置时,还能够参考来自相机部541的图像来检测位置。而且,还能够参考来自相机部541的图像,不使用三轴加速度传感器或与三轴加速度传感器同时使用来判断智能手机30的相机部541的光轴方向或判断当前的使用环境。当然,还能够在应用软件内利用来自相机部541的图像。
另外,还能够在静态图像或动态图像的图像数据上附加通过GPS接收部570获取的位置信息、通过麦克风532获取的语音信息(可通过主控制部等进行语音文本转换而成为文本信息)、通过动作传感器部580获取的姿勢信息等而记录于存储部550或者通过外部输入输出部560或无线通信部510输出。
以上,对用于实施本发明的方式进行了说明,但本发明并不限定于上述实施方式及变形例,能够在不脱离本发明的宗旨的范围内进行各种变形。
符号说明
10-摄像装置,12-成像元件,14-支架部,20-透镜装置,22-透镜,24-透镜镜筒,26-点光源,28-顶盖,28L-透光部,28M-遮光部,30-智能手机,32-姿势传感器,34-操作部,40-计算机装置,42-通信部,44-显示部,46-命令输入部,48-存储部,50-控制部,52-驱动器,54-图像处理部,56-应用部,62-旋转位置识别部,64-解码部,66-校正信息获取部,68-图像校正部,80-数据库,501-主控制部,502-框体,510-无线通信部,520-显示输入部,521-显示面板,522-操作面板,530-通话部,531-扬声器,532-麦克风,540-操作部,541-相机部,550-存储部,551-内部存储部,552-外部存储部,560-外部输入输出部,570-GPS接收部,580-动作传感器部,590-电源部,BS-基站装置,Cd-二维码,DI-第1图像,LI-光学像,M-记号,MP-标记,NW-网络,P0-检查基准位置,PL-笔式灯,Pc-校正基准位置,Ph-摄影,R-旋转方向,Rc-传输路径,ST-GPS卫星。

Claims (18)

1.一种图像处理装置,其特征在于,具备:
图像输入部,输入表示安装于摄像装置的透镜镜筒的旋转方向的校正基准位置的第1图像及校正对象的第2图像,其中,所述第1图像及所述第2图像通过所述摄像装置的拍摄来获得,所述校正基准位置为所述透镜镜筒的所述旋转方向的位置;
旋转位置识别部,根据所述第1图像,识别所述旋转方向的校正基准位置;
校正信息获取部,根据透镜固有信息与所述旋转方向的校正基准位置,获取与保持于所述透镜镜筒的透镜的环绕光轴不均匀的光学特性对应的校正信息;及
图像校正部,根据所述校正信息,对所述第2图像进行校正。
2.根据权利要求1所述的图像处理装置,其中,
所述第1图像中包含表示所述校正基准位置的标记,
所述旋转位置识别部检测所述第1图像的画面内的所述标记的倾斜度,并根据该倾斜度,识别所述校正基准位置。
3.根据权利要求2所述的图像处理装置,其中,
所述标记是一维或二维的条形码。
4.根据权利要求3所述的图像处理装置,其中,
所述条形码对所述透镜固有信息进行编码,
所述校正信息获取部根据所述条形码的解码结果与所述第1图像的画面内的所述条形码的倾斜度,获取与所述校正基准位置相应的所述校正信息。
5.根据权利要求2至4中任一项所述的图像处理装置,其中,
所述标记是显示于图像显示装置的标记或印刷于物体的标记。
6.根据权利要求1所述的图像处理装置,其中,
所述第1图像中包含用图像显示装置获取到的校正基准位置信息,
所述旋转位置识别部通过从所述第1图像提取所述校正基准位置信息来识别所述校正基准位置。
7.根据权利要求6所述的图像处理装置,其中,
所述校正基准位置信息为用所述图像显示装置检测出的表示所述图像显示装置的姿势的姿势信息,
所述校正信息获取部根据所述姿势信息,获取所述校正信息。
8.根据权利要求6所述的图像处理装置,其中,
所述校正基准位置信息为用所述图像显示装置接受的用户输入信息,
所述校正信息获取部根据所述用户输入信息,获取所述校正信息。
9.根据权利要求1所述的图像处理装置,其中,
所述第1图像中包含基于光源的发光的光学像,
所述旋转位置识别部检测所述第1图像的画面内的光量分布,并根据该光量分布,识别所述校正基准位置。
10.根据权利要求9所述的图像处理装置,其中,
所述旋转位置识别部根据所述第1图像的画面内的所述光学像的位置,识别所述校正基准位置。
11.根据权利要求9所述的图像处理装置,其中,
所述光源为点光源,
所述旋转位置识别部根据所述第1图像中的所述点光源的光学像的位置,识别所述旋转方向的校正基准位置。
12.根据权利要求9所述的图像处理装置,其中,
所述光量分布通过所述第1图像中的透光区域与遮光区域之间的光量差而产生,
所述旋转位置识别部通过检测所述第1图像中的所述透光区域及所述遮光区域中的至少一个,来识别所述校正基准位置。
13.根据权利要求9至11中任一项所述的图像处理装置,其中,
所述旋转位置识别部还根据所述第1图像中的光量的时间变化,识别所述旋转方向的校正基准位置。
14.根据权利要求1至4、6至12中任一项所述的图像处理装置,其中,
所述校正信息获取部通过转换与单一的所述校正基准位置相应的校正信息,来获取与其他所述校正基准位置相应的所述校正信息。
15.根据权利要求1至4、6至12中任一项所述的图像处理装置,其中,
所述校正信息获取部从多个所述校正信息选择与通过所述旋转位置识别部识别出的所述校正基准位置相应的所述校正信息。
16.根据权利要求1至4、6至12中任一项所述的图像处理装置,其中,
所述校正信息包含点像复原处理用校正信息。
17.一种图像处理系统,其特征在于,具备:
透镜装置,包含所述透镜及所述透镜镜筒;
所述摄像装置;及
权利要求1至16中任一项所述的图像处理装置。
18.一种图像处理方法,其特征在于,包含:
输入表示安装于摄像装置的透镜镜筒的旋转方向的校正基准位置的第1图像及校正对象的第2图像的工序,其中,所述第1图像及所述第2图像通过所述摄像装置的拍摄来获得,所述校正基准位置为所述透镜镜筒的所述旋转方向的位置;
根据所述第1图像,识别所述旋转方向的校正基准位置的工序;
根据透镜固有信息与所述旋转方向的校正基准位置,获取与保持于所述透镜镜筒的透镜的环绕光轴不均匀的光学特性对应的校正信息的工序;及
根据所述校正信息,对所述第2图像进行校正的工序。
CN201780016871.4A 2016-03-17 2017-02-28 图像处理装置、图像处理系统及图像处理方法 Active CN108886575B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016054291 2016-03-17
JP2016-054291 2016-03-17
PCT/JP2017/007874 WO2017159353A1 (ja) 2016-03-17 2017-02-28 画像処理装置、画像処理システム、及び画像処理方法

Publications (2)

Publication Number Publication Date
CN108886575A CN108886575A (zh) 2018-11-23
CN108886575B true CN108886575B (zh) 2019-11-26

Family

ID=59851571

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780016871.4A Active CN108886575B (zh) 2016-03-17 2017-02-28 图像处理装置、图像处理系统及图像处理方法

Country Status (4)

Country Link
US (1) US10594909B2 (zh)
JP (1) JP6450498B2 (zh)
CN (1) CN108886575B (zh)
WO (1) WO2017159353A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7612805B2 (en) 2006-07-11 2009-11-03 Neal Solomon Digital imaging system and methods for selective image filtration
EP3934231A4 (en) * 2019-03-18 2022-04-06 Sony Group Corporation IMAGING DEVICE, INFORMATION PROCESSING METHOD, AND PROGRAM
CN111158485B (zh) * 2019-12-30 2022-03-04 维沃移动通信有限公司 一种屏幕控制方法及电子设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103400131A (zh) * 2013-08-16 2013-11-20 徐宁 一种图像识别中的校正装置及其方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6191406B1 (en) * 1998-07-24 2001-02-20 Eastman Kodak Company Data reader and reader system having visible centerless targeting
JP2005354301A (ja) 2004-06-09 2005-12-22 Canon Inc 画像処理装置、画像処理方法、プログラム、記憶媒体、画像処理システムおよび撮像装置
JP4940661B2 (ja) * 2006-01-11 2012-05-30 ソニー株式会社 画像処理装置、画像処理方法および撮像装置
JP2009302697A (ja) 2008-06-11 2009-12-24 Sony Corp 撮像システム、撮像装置、撮像レンズ、歪み補正方法及びプログラム
JP2010087859A (ja) * 2008-09-30 2010-04-15 Fujifilm Corp 画像処理パラメータ算出装置、画像処理パラメータ算出方法、製造方法、撮像装置、撮像方法、およびプログラム
JP2010087893A (ja) * 2008-09-30 2010-04-15 Fujifilm Corp 撮像装置、撮像方法、およびプログラム
JP5344647B2 (ja) * 2011-08-01 2013-11-20 キヤノン株式会社 画像処理方法、画像処理装置および画像処理プログラム
JP5646705B1 (ja) 2013-07-18 2014-12-24 アキュートロジック株式会社 画像処理装置、画像処理方法、及び、画像処理プログラム
WO2016014718A1 (en) * 2014-07-23 2016-01-28 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US10218911B2 (en) * 2017-03-22 2019-02-26 Htc Corporation Mobile device, operating method of mobile device, and non-transitory computer readable storage medium

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103400131A (zh) * 2013-08-16 2013-11-20 徐宁 一种图像识别中的校正装置及其方法

Also Published As

Publication number Publication date
CN108886575A (zh) 2018-11-23
JPWO2017159353A1 (ja) 2019-01-10
JP6450498B2 (ja) 2019-01-09
US20190014244A1 (en) 2019-01-10
US10594909B2 (en) 2020-03-17
WO2017159353A1 (ja) 2017-09-21

Similar Documents

Publication Publication Date Title
CN106688228B (zh) 摄像控制装置、摄像控制方法、相机、及相机系统
KR102627612B1 (ko) 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치
CN108886575B (zh) 图像处理装置、图像处理系统及图像处理方法
CN103597500A (zh) 用于辨识对象中的文本信息的系统和方法
WO2008063822A1 (en) Text detection on mobile communications devices
CN106716989A (zh) 摄像装置、摄像方法及程序
TWI470549B (zh) A method of using an image recognition guide to install an application, and an electronic device
CN108881875B (zh) 图像白平衡处理方法、装置、存储介质及终端
US10412277B2 (en) Dome-type camera and dome cover
CN104751419A (zh) 一种照片显示调节方法及终端
CN103518156A (zh) 用于反射补偿的方法和装置
CN106506945A (zh) 一种控制方法及终端
CN115525140A (zh) 手势识别方法、手势识别装置及存储介质
JP2013054542A (ja) 画像表示装置、画像表示システム、及びプログラム
CN106412546A (zh) 配备有相机的移动终端及其控制方法
CN109040729B (zh) 图像白平衡校正方法、装置、存储介质及终端
CN102780842B (zh) 手持式电子装置以及适用于其的双重影像撷取方法
EP2793458B1 (en) Apparatus and method for auto-focusing in device having camera
WO2017188030A1 (ja) 画像処理装置及び画像処理方法
CN105683959A (zh) 信息处理设备、信息处理方法及信息处理系统
JP2019148940A (ja) 学習処理方法、サーバ装置及び反射検知システム
KR102292595B1 (ko) Qr 코드와 워터마크를 통합한 이미지를 이용한 워터마크 인식 장치 및 그 방법
US10514591B2 (en) Camera apparatus, image processing device, and image processing method
CN207218885U (zh) 一种用于无线光通信的智能终端自动曝光控制结构
US8351657B2 (en) Method for the viewing of visual information with an electronic device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant