CN110191277B - 图像传感器 - Google Patents

图像传感器 Download PDF

Info

Publication number
CN110191277B
CN110191277B CN201811344289.3A CN201811344289A CN110191277B CN 110191277 B CN110191277 B CN 110191277B CN 201811344289 A CN201811344289 A CN 201811344289A CN 110191277 B CN110191277 B CN 110191277B
Authority
CN
China
Prior art keywords
information
module
image sensor
light amount
body module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811344289.3A
Other languages
English (en)
Other versions
CN110191277A (zh
Inventor
渡辺浩介
上辻康人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Publication of CN110191277A publication Critical patent/CN110191277A/zh
Application granted granted Critical
Publication of CN110191277B publication Critical patent/CN110191277B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/663Remote control of cameras or camera parts, e.g. by remote control devices for controlling interchangeable camera parts based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/51Housings
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • H04N25/611Correction of chromatic aberration

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)

Abstract

本发明提供一种图像传感器,不论所使用的镜头模块与拍摄模块的组合如何,均能对拍摄结果进行良好的渐晕修正。图像传感器包括本体模块和被安装于本体模块的镜头模块及拍摄模块,本体模块包括:修正部件,依照所设定的渐晕修正信息来对安装于本体模块的拍摄模块所输出的图像数据进行渐晕修正;获取部件,获取与被安装于本体模块的拍摄模块内的拍摄元件的大小相关的信息,并且获取光量比信息,所述光量比信息来自被安装于本体模块的镜头模块,且表示拍摄元件的拍摄面上的至少两个以上的位置的光量的比率;以及生成/设定部件,基于由获取部件所获取的信息,生成渐晕修正信息并对修正部件进行设定。

Description

图像传感器
技术领域
本发明涉及一种包含多个模块(module)的组合的模块化(modular)型的图像传感器(sensor)。
背景技术
在工场的制造线中,为了实现制造物的检查或管理的自动化或省力化,多采用被称作图像传感器的系统(system)。以往,一般采用将摄像机(camera)与图像处理装置通过电缆(cable)予以连接的结构(参照专利文献1),但最近,处理一体型图像传感器也已面世,所述处理一体型图像传感器是将摄像机与图像处理装置一体化,利用单个装置来进行拍摄至图像处理。此种处理一体型图像传感器也被称作“智能摄像机(smart camera)”,也有照明或镜头成为一体者。
现有技术文献
专利文献
专利文献1:日本专利特开2007-214682号公报
发明内容
发明所要解决的问题
根据检查对象的尺寸、图像传感器的设置环境等,对智能摄像机期望的视角或拍摄结果(图像数据)的分辨率不同。因此,提供智能摄像机的厂家(maker)以往是列出(lineup)视角等规格不同的多个产品,以便用户能够选择最佳的规格(spec)者。
此外,在工场的物联网(Internet of Things,IoT)化加速的过程中,智能摄像机的适用范围扩大,网罗多样化的用户需求(needs)的产品变化(variation)的提供逐渐变得困难。而且,因检查对象的变更进入短周期,例如为了在商品竞争中与竞争对手差异化而扩大符合各个顾客喜好的大规模定制(mass customization)或季节限定商品的提供、以智能电话为代表的数字设备商品的生命周期(life cycle)的缩短等,因而,配合检查来部分地变更照明/镜头等以使其达到最佳的需求也在增加。因此,考虑将智能摄像机的光学系统、拍摄元件分别模块化,在用户侧将光学系统与拍摄元件自由组合。但是,根据光学系统与拍摄元件的组合,应对拍摄结果实施的光量比修正的内容不同,因此,如果只是简单地将智能摄像机模块化,则无法实现不论所使用的光学系统与拍摄元件的组合如何,均能对拍摄结果进行良好的光量比修正的智能摄像机。
本发明是有鉴于所述实际情况而完成,其目的在于提供一种图像传感器,所述图像传感器包含本体模块和被安装于所述本体模块的镜头模块及拍摄模块,且不论所使用的镜头模块与拍摄模块的组合如何,均能对拍摄结果进行良好的光量比修正。
解决问题的技术手段
本发明的一观点的图像传感器包括本体模块和被安装于所述本体模块的镜头模块及拍摄模块。并且,图像传感器的本体模块包括:修正部件,是能够设定渐晕修正信息的修正部件,且依照所设定的渐晕修正信息来对安装于所述本体模块的所述拍摄模块所输出的图像数据进行渐晕修正;获取部件,获取与被安装于所述本体模块的所述拍摄模块内的拍摄元件的大小相关的信息,并且获取光量比信息,所述光量比信息来自被安装于所述本体模块的镜头模块,且表示所述拍摄元件的拍摄面上的至少两个以上的位置的光量的比率;以及生成/设定部件,基于由所述获取部件所获取的信息,生成渐晕修正信息并对所述修正部件进行设定,所述渐晕修正信息用于对因所述光量的比率导致所述图像数据中产生的渐晕进行修正。
若对图像传感器采用所述结构,则能够对拍摄结果(来自拍摄模块的图像数据)实施与安装于本体模块的镜头模块和拍摄模块的组合相应的内容的渐晕修正。因而,无论安装于本体模块的镜头模块及拍摄模块的组合为何种组合,均能够获得良好地进行了渐晕修正的图像数据。
另外,本体模块的获取部件所获取的“来自被安装于所述本体模块的镜头模块的、表示所述拍摄元件的拍摄面上的至少两个以上的位置的光量比率的光量比信息”是与跟拍摄元件相关的信息一同使用,由此,只要是能够生成渐晕修正信息的信息,则也可为任何形式的信息。而且,作为本体模块的获取部件,也可采用“在被安装于所述本体模块的镜头模块为能调整光圈的第二种镜头模块的情况下,获取与光圈的当前设定值对应的光量比信息”的部件。只要采用这样动作的获取部件,便能够获得无论将光圈调整为何种大小,渐晕(亮度不均)也不会变得过大的图像传感器。
获取部件无论从何处获取所述光量比信息皆可。例如,将针对所述光圈的每个设定值而存储有所述光量比信息的存储器搭载于第二种镜头模块中,作为获取部件,也可采用下述部件,即,在被安装于所述本体模块的镜头模块为所述第二种镜头模块的情况下,从所述第二种镜头模块内的所述存储器,获取与所述光圈的当前设定值关联的所述光量比信息。
而且,对于图像传感器,也可采用下述结构:“所述第二种镜头模块能够变焦,在所述第二种镜头模块的所述存储器中,对应于所述光圈的设定值和变焦设定值的不同组合而存储有所述光量比信息,所述本体模块的所述获取部件从被安装于所述本体模块的所述第二种镜头模块的所述存储器,获取与所述光圈的当前设定值和当前变焦设定值的组合关联的所述光量比信息”。若采用此结构,则能够获得下述图像传感器,即,无论如何调整第二种镜头模块的光圈、变焦倍率,渐晕均不会变得过大。
图像传感器的获取部件所获取的“与拍摄模块内的拍摄元件相关的信息”(以下称作拍摄元件信息)只要是能够通过与光量比信息组合而生成光量比修正信息的信息即可。因而,作为拍摄元件信息,能够采用拍摄元件的像素尺寸及像素数。而且,在各拍摄模块内的拍摄元件的像素尺寸相同的情况下,也可仅将拍摄元件的像素数设为拍摄元件信息,在各拍摄模块内的拍摄元件的像素数相同的情况下,也可仅将拍摄元件的像素尺寸设为拍摄元件信息。
而且,所述本体模块的所述获取部件也可在被安装于所述本体模块的镜头模块为能变焦者的情况下,获取与变焦的当前设定值相应的所述光量比信息。另外,与变焦的当前设定值相应的光量比信息既可为存储于镜头模块内的存储器中的信息,也可为其他装置所保持的信息。
而且,图像传感器的获取部件对与拍摄元件的大小相关的信息的获取方法也无特别限定。例如,作为获取部件,也可采用从所述拍摄模块内的存储器获取与拍摄元件的大小相关的信息的部件。而且,作为获取部件,也可采用下述部件,即,从拍摄模块内的存储器获取拍摄模块或拍摄元件的形式信息,并从其他存储装置获取与跟所述形式信息关联的拍摄元件的大小相关的信息。而且,与拍摄元件的大小相关的信息也可包含所述拍摄元件的像素尺寸、像素数、元件尺寸中的至少两个以上。
发明的效果
根据本发明,能够提供一种图像传感器,无论所使用的镜头模块与拍摄模块的组合如何,均能够对拍摄结果进行良好的渐晕修正。
附图说明
图1是第1实施方式的图像传感器的概略结构的说明图。
图2是图像传感器的使用例的说明图。
图3A与图3B是第一种镜头模块与第二种镜头模块的说明图。
图4是出瞳直径/位置信息的说明图。
图5是出瞳直径/位置信息的结构例的说明图。
图6是瞳径缩小率信息的说明图。
图7是瞳径缩小率信息的结构例的说明图。
图8是第1实施方式的图像传感器的本体模块的功能框图。
图9是渐晕修正信息的一例的说明图。
图10是本体模块内的修正部的功能框图。
图11是第1实施方式的图像传感器的本体模块所执行的X方向修正信息生成处理的流程图。
图12A是用于说明X方向修正信息生成处理的步骤S101的处理内容的图。
图12B是用于说明X方向修正信息生成处理的步骤S101的处理内容的图。
图13是用于说明X方向修正信息生成处理的步骤S102的内容的图。
图14是用于说明X方向修正信息生成处理的步骤S103的内容的图。
图15是第2实施方式的图像传感器的本体模块的功能框图。
图16是拍摄元件信息表的结构例的说明图。
图17是出瞳信息表的结构例的说明图。
图18是瞳径缩小率表的结构例的说明图。
图19是用于说明图像传感器的变形例的图。
符号的说明
1:图像传感器
10:本体模块
11:修正部
12:处理部
13:通信处理部
14:设定部
17Y:Y方向修正表
17X:X方向修正表
19:变焦/光圈调整部
20:镜头模块
21:光学系统
22、32:非易失性存储器
30:拍摄模块
31:拍摄元件
40:存储部
41:拍摄元件信息表
42:出瞳信息表
43:瞳径缩小率表
44:周边光量比信息表
50:信息处理装置
具体实施方式
以下,参照附图来说明本发明的实施方式。
《第1实施方式》
图1表示本实施方式的图像传感器1的概略结构,图2表示图像传感器1的使用例。
如图1所示,本实施方式的图像传感器1是通过在本体模块10中安装镜头模块20与拍摄模块30而构成的装置。而且,如图2所示,图像传感器1是设想为设在制造线等的多处部位的形态,并且,以由一台信息处理装置50来收集各图像传感器1的处理结果的形态来使用而开发的图像传感器。
拍摄模块30(图1)是包括互补金属氧化物半导体(Complementary Metal-Oxide-Semiconductor,CMOS)影像传感器(image sensor)、电荷耦合器件(Charge CoupledDevice,CCD)影像传感器等拍摄元件31的模块。作为图像传感器1用的拍摄模块30,准备有规格(拍摄元件31的像素尺寸、入射角特性等)不同的M种拍摄模块301~30M。而且,在各拍摄模块30内,设有串行(serial)电可擦可编程只读存储器(Electrically ErasableProgrammable Read Only Memory,EEPROM)等非易失性存储器32(用途将后述)。
镜头模块20是包括光学系统21的模块,所述光学系统21用于使来自拍摄对象的光成像于拍摄元件31的拍摄面。作为镜头模块20,准备有规格不同的N种镜头模块201~20N,在各镜头模块20内,设有串行EEPROM等非易失性存储器22(用途将后述)。
本体模块10是如下所述的模块,即:对来自拍摄模块30的图像数据实施渐晕修正,并对渐晕修正后的图像数据进行分析,由此来进行各种处理(条形码(bar code)等的读取处理、异常的有无判定处理等)。
以下,进一步具体说明本实施方式的图像传感器1的结构及动作。另外,以下的说明中,也将镜头模块称作LM。
首先,对存储在各拍摄模块30的非易失性存储器32、各镜头模块20的非易失性存储器22中的信息进行说明。
在图像传感器1用的各拍摄模块30的非易失性存储器32中,存储有表示自身拍摄模块30内的拍摄元件31的入射角特性的入射角特性信息与所述拍摄元件31的像素尺寸、X方向像素数及Y方向像素数。此处,所谓X方向像素数,是指拍摄元件31的长边方向的像素数,所谓Y方向像素数,是指拍摄元件31的、与X方向正交的方向的像素数。存储在非易失性存储器32中的入射角特性信息通常包含表示X方向的入射角特性的信息、及表示Y方向的入射角特性的信息。但是,在X方向的入射角特性与Y方向的入射角特性大致一致的情况下,入射角特性信息也可为仅表示X方向的入射角特性的信息。
而且,如图3A与图3B所示,图像传感器1用的镜头模块20存在:第一种LM20,包括不具有可调整大小的光圈且无法变焦的光学系统21;以及第二种LM20,包括具有可调整大小的光圈且可变焦的光学系统21。并且,在各第一种LM20的非易失性存储器22中,存储有自身模块内的光学系统21的入瞳直径、入瞳位置及周边光量比信息。而且,在各第二种LM20的非易失性存储器22中,存储有出瞳直径/位置信息、瞳径缩小率信息及多个周边光量比信息。
以下,对第二种LM20的非易失性存储器22上的各信息进行说明。
出瞳直径/位置信息是表示自身LM中的变焦设定值(变焦倍率的设定值)与出瞳直径及出瞳位置之间的关系的信息。即,当变焦设定值(如变焦设定值α、β)受到变更时,如图4示意性地所示,出瞳的直径及位置会发生变化。出瞳直径/位置信息是表示变焦设定值与出瞳直径及出瞳位置间的所述关系的信息。作为出瞳直径/位置信息,例如使用图5所示的结构(数据结构)的信息。
而且,当第二种LM20的光圈的大小受到变更时,如图6中示意性地所示,朝向拍摄元件31的光的照射源范围的直径对应于光圈设定值(F值)而变小。瞳径缩小率信息是表示光圈设定值(F值的设定值)、与“实际的照射源范围的直径”/“无光圈时的照射源范围(即,出瞳)的直径”(以下称作出瞳缩小率)之间的关系的信息。作为所述瞳径缩小率信息,例如使用图7所示的结构的信息。
第二种LM20的非易失性存储器22上的各周边光量比信息是表示自身LM内的光学系统21的周边光量比的信息。非易失性存储器22上的各周边光量比信息是与变焦设定值和光圈设定值的一个或多个组合相关联。而且,非易失性存储器22上的、与变焦设定值和光圈设定值的某组合关联的周边光量比信息,表示进行了符合所述组合的设定时的光学系统21的周边光量比。
接下来,对本体模块10的结构及功能进行说明。
图8表示本体模块10的功能框图。如图所示,本体模块10包括修正部11、处理部12、通信处理部13、设定部14及变焦/光圈调整部19。另外,本体模块10的修正部11例如是通过图像处理用集成电路(Integrated Circuit,IC)(现场可编程门阵列(Field ProgrammableGate Array,FPGA)、专用集成电路(Application Specific Integrated Circuit,ASIC)等)来实现,通信处理部13例如是通过网络接口(network interface)电路来实现。而且,处理部12、设定部14及变焦/光圈调整部19例如是通过存储有图像传感器1用的程序的微控制器(micro controller)来实现。
修正部11是如下所述的单元,即,对来自拍摄模块30的图像数据,实施由所设定的渐晕修正信息所规定的内容的渐晕修正。作为此修正部11,例如使用设定有图9所示的结构的渐晕修正信息的、图10所示的结构的单元。
所述渐晕修正信息(图9)是具备像素数为640×480个的拍摄元件31的拍摄模块30用的渐晕修正信息。如图所示,渐晕修正信息包含:X方向修正信息(图9上段的信息),对应于不同的x坐标来规定应乘以y坐标为240的各像素的亮度值的修正增益(gain);以及Y方向修正信息(图9下段的信息),对应于不同的y坐标来规定应乘以x坐标为320的各像素的亮度值的修正增益。
修正部11(图10)所具备的X方向修正表17X、Y方向修正表17Y是分别设定渐晕修正信息(图9)中的X方向修正信息、Y方向修正信息的表(所谓的查找表(lookup table))。乘法器M1是将坐标x、y的像素的亮度值Pin乘以X方向修正信息中的与坐标x关联的修正增益GX(x)的单元。乘法器M2是将乘法器M1的输出乘以Y方向修正信息中的与坐标y关联的修正增益GY(y),并输出作为处理结果Pout的单元。
返回图8,继续本体模块10的说明。
处理部12是通过对渐晕修正后的图像数据进行分析而进行各种处理(代码(code)的读取处理、异常有无的判定处理等)的单元。通信处理部13是为了处理部12与外部装置(信息处理装置50)之间进行通信而利用的单元。
变焦/光圈调整部19是进行第二种LM20的变焦设定、光圈设定的单元。所述变焦/光圈调整部19具有:在变焦/光圈的设定变更时,将当前的(变更后的)变焦设定值及光圈设定值通知给设定部14的功能;以及响应来自设定部14的规定请求,而将当前的变焦设定值及光圈设定值通知给设定部14的功能。
设定部14是生成渐晕修正信息并对修正部11进行设定的单元,所述渐晕修正信息用于使修正部11进行渐晕修正,所述渐晕修正适合于被安装于本体模块10时来自拍摄模块30的图像数据。
具体而言,设定部14在本体模块10的电源被接通时,从安装于本体模块10的拍摄模块30的非易失性存储器32,读出拍摄模块30内的拍摄元件31的规格信息(像素尺寸、X方向像素数、Y方向像素数及入射角特性信息)。而且,设定部14通过判断在安装于本体模块10的镜头模块20(以下称作安装LM20)的非易失性存储器22中是否存储有出瞳直径/位置信息等,从而判断安装LM20是第二种LM20还是第一种LM20。
若安装LM20为第一种LM20,则设定部14从安装LM20(第一种LM20)的非易失性存储器22读出出瞳直径、出瞳位置及周边光量比信息。另一方面,若安装LM20为第二种LM20,则设定部14从变焦/光圈调整部19获取安装LM20(第二种LM20)当前的变焦设定值(以下称作当前变焦设定值)及当前的光圈设定值(以下称作当前光圈设定值)。
继而,设定部14从安装LM20(第二种LM20)的非易失性存储器22,读出与当前变焦设定值关联的出瞳直径及出瞳位置、及与当前光圈设定值关联的出瞳缩小率。更具体而言,设定部14从非易失性存储器22上的出瞳直径/位置信息(参照图5),读出与当前变焦设定值关联的出瞳直径及出瞳位置,并从非易失性存储器22上的出瞳直径/位置信息(参照图7),读出与当前光圈设定值关联的出瞳缩小率。
而且,设定部14从安装LM20(第二种LM20)的非易失性存储器22,也读出与当前变焦设定值和当前光圈设定值的组合关联的周边光量比信息。
总而言之,设定部14在安装LM20为第一种LM20的情况下,收集出瞳直径、出瞳位置及周边光量比信息,以作为与安装LM20(光学系统21)相关的信息。而且,设定部14在安装LM20为第二种LM20的情况下,收集出瞳直径、出瞳位置及周边光量比信息与出瞳缩小率,以作为与安装LM20相关的信息。
并且,设定部14在安装LM20为第一种LM20的情况下,通过图11所示的流程的X方向修正信息生成处理,生成X方向修正信息。另外,如已说明的那样,所谓X方向修正信息,是指渐晕修正信息的要素信息(参照图9上段的信息)。
即,在X方向修正信息的生成时,设定部14首先基于所收集的信息群(像素尺寸、X方向像素数、入射角特性信息、出瞳直径及出瞳位置),针对拍摄元件31的Y方向中央线的每个像素而算出受光量积分值(步骤S101)。
此处,所谓Y方向中央线,是指如图12A所示,拍摄元件31的位于Y方向中央的像素群31c。在步骤S101中,设定部14基于像素尺寸、X方向像素数、出瞳直径及出瞳位置,来确定朝向Y方向中央线的各像素(如像素A、像素B)的入射角范围(如入射角范围θA-~θA+、入射角范围θB-~θB+)(参照图12A)。并且,设定部14如图12B所示,对入射角特性信息所表示的、朝向Y方向中央线的各像素的入射角范围内的受光量进行积分,由此,针对每个像素而算出受光量积分值。
完成了步骤S101的处理的设定部14算出将最大受光量积分值除以各像素的受光量积分值所得的值,以作为构成X方向修正信息的各像素用的第1修正增益(步骤S102)。即,设定部14如图13示意性地所示,算出最大受光量积分值Lmax/受光量积分值L(x),以作为Y方向中央线的各像素用的第1修正增益G1X(x)。
继而,设定部14基于像素尺寸、X方向像素数及周边光量比信息,算出Y方向中央线的各像素中的周边光量比(步骤S103)。如图14示意性地所示,此步骤S103的处理是根据周边光量比信息,来算出Y方向中央线的各像素中的周边光量比(单位为%)的处理,所述周边光量比信息表示从光学中心计起的距离与周边光量比的关系。
完成了步骤S103的处理的设定部14通过运算100/“各像素的周边光量比”,从而算出关于Y方向中央线的各像素的第2修正增益(步骤S104)。然后,设定部14针对每个像素来运算第1修正增益×第2修正增益,从而算出构成X方向修正信息的各像素用的修正增益(步骤S105)。
设定部14也以同样的流程来生成Y方向修正信息。另外,在拍摄元件31的X方向的入射角特性与Y方向的入射角特性大致一致的情况下,也可取代通过如上所述的流程生成Y方向修正信息,而通过导出X方向修正信息的一部分(中央的Y方向像素数的量的信息)来生成Y方向修正信息。
设定部14在安装LM20为第一种LM20的情况下,通过所述流程来生成渐晕修正信息。
在安装LM20为第二种LM20的情况下,设定部14也通过同样的流程来生成渐晕修正信息。但是,此时,由于光圈,朝向拍摄元件31的光的照射源范围的直径会变得小于出瞳直径(参照图6),从瞳径缩小率信息(图7)读出的瞳径缩小率表示其比例。因此,设定部14构成为,在安装LM20为第二种LM20的情况下,以将从出瞳直径/位置信息(图5)读出的出瞳直径乘以从瞳径缩小率信息(图7)读出的瞳径缩小率所得的值,作为所述X方向修正信息生成处理中的“出瞳直径”来处理的形态,而生成渐晕修正信息。
设定部14在从变焦/光圈调整部19通知有变更后的变焦设定值及光圈设定值的情况下,也通过同样的流程来生成渐晕修正信息并对修正部11进行设定。
如以上所说明的那样,本实施方式的图像传感器1中,基于镜头模块20内的光学系统21的周边光量比、拍摄模块30内的拍摄元件31的入射角特性等,生成适合于所使用的模块组合的内容的渐晕修正信息,并依据所述渐晕修正信息对来自拍摄模块30的图像数据进行渐晕修正。因而,根据图像传感器1,无论被安装于本体模块10的镜头模块20及拍摄模块30的组合为何种组合,均能够获得良好地进行了渐晕修正的图像数据。
《第2实施方式》
以下,使用与第1实施方式的图像传感器1的说明时所用者相同的符号,以与第1实施方式的图像传感器1不同的部分为中心来说明第2实施方式的图像传感器1的结构及动作。另外,为了便于说明,以下,将第L(L=1、2)实施方式的图像传感器1、第L实施方式的图像传感器1的本体模块10分别称作第L图像传感器1、第L本体模块10。
图15表示第2图像传感器1(第2实施方式的图像传感器1)的概略结构。
第2图像传感器1也与第1图像传感器1同样,是准备有各种规格的镜头模块20及拍摄模块30来作为可利用模块的装置。而且,作为第2图像传感器1用的镜头模块20,也与第1图像传感器1同样,存在第一种LM20与第二种LM20。
但是,如图所示,在第2图像传感器1用的各镜头模块20的非易失性存储器22中,存储有表示自身镜头模块20的形式的形式信息。而且,在第2图像传感器1用的各拍摄模块30的非易失性存储器32中,也存储有表示自身拍摄模块30的形式的形式信息。
在第2本体模块10(第2图像传感器1的本体模块10)中,设有存储拍摄元件信息表41、出瞳信息表42、瞳径缩小率表43及周边光量比信息表44的存储部40。
图16、图17、图18分别表示拍摄元件信息表41、出瞳信息表42、瞳径缩小率表43的结构例。如图16所示,拍摄元件信息表41是以与各拍摄模块30的形式信息关联的形态,而存储有各拍摄模块30内的拍摄元件31的像素尺寸、X方向像素数、Y方向像素数及入射角特性信息的表。
出瞳信息表42(图17)是以与各镜头模块20的形式信息关联的形态,关于第二种LM20而存储有表示变焦设定值与出瞳直径及出瞳位置之间的关系的信息,关于第一种LM20而存储有出瞳直径及出瞳位置的表。瞳径缩小率表43(图18)是以与各第二种LM20的形式信息关联的形态,而存储有表示各第二种LM20的光圈设定值(F值的设定值)与出瞳缩小率之间的关系的信息的表。
周边光量比信息表44(图15)是以与各LM20的形式信息关联的形态,关于第二种LM20,对应于变焦设定值与光圈设定值的每个组合而存储有表示进行了符合此组合的设定时的光学系统21的周边光量比的周边光量比信息,且关于第一种LM20,而存储有表示所述第一种LM20内的光学系统21的周边光量比的周边光量比信息的表。
即,在第2本体模块10的存储部40中,对应于不同的形式信息而存储有与第1图像传感器1用的各镜头模块20的非易失性存储器22中所存储者相同的信息。而且,在存储部40中,对应于不同的形式信息而存储有与第1图像传感器1用的各拍摄模块30的非易失性存储器32中所存储者相同的信息。
并且,第2本体模块10的设定部14是对第1本体模块10的设定部14进行变形,以基于镜头模块20的非易失性存储器22上的形式信息(以下称作LM形式信息)、与拍摄模块30的非易失性存储器32上的形式信息(以下称作CM形式信息),来从存储部40收集渐晕修正信息的生成所需的信息。
具体而言,第2本体模块10的设定部14在第2本体模块10的电源被接通时,从镜头模块20的非易失性存储器22获取LM形式信息,从拍摄模块30的非易失性存储器32获取CM形式信息。随后,设定部14从拍摄元件信息表41(图5)读出与所获取的CM形式信息关联的信息(像素尺寸等)。而且,设定部14基于所获取的LM形式信息,来判断安装LM20(被安装于第2本体模块10的镜头模块20)是否为第二种LM20。
若安装LM20为第一种LM20,则设定部14从出瞳信息表42读出与LM形式信息关联的出瞳直径及出瞳位置,并且从周边光量比信息表44读出与LM形式信息关联的周边光量比信息。
另一方面,若安装LM20为第二种LM20,则设定部14从变焦/光圈调整部19获取安装LM20(第二种LM20)当前的变焦设定值(以下称作当前变焦设定值)及当前的光圈设定值(以下称作当前光圈设定值)。并且,设定部14从出瞳信息表42读出与当前变焦设定值关联的出瞳直径及出瞳位置,从瞳径缩小率表43读出与当前光圈设定值关联的出瞳缩小率。而且,设定部14也从周边光量比信息表44读出与LM形式信息、当前变焦设定值及当前光圈设定值关联的周边光量比信息。
这样收集了各种信息的设定部14基于所收集的信息,通过与第1本体模块10内的设定部14相同的流程来生成渐晕修正信息。并且,设定部14对修正部11设定所生成的渐晕修正信息。
如以上所说明的那样,本实施方式的图像传感器1也具有下述结构,即:基于镜头模块20内的光学系统21的周边光量比、拍摄模块30内的拍摄元件31的入射角特性等,生成适合于所使用的模块组合的内容的渐晕修正信息,并依据所述渐晕修正信息对来自拍摄模块30的图像数据进行渐晕修正。因而,根据此图像传感器1,无论被安装于本体模块10的镜头模块20及拍摄模块30的组合为何种组合,也均能够获得良好地进行了渐晕修正的图像数据。
《变形例》
所述各实施方式的图像传感器1是进行各种变形者。例如,在各拍摄模块30内的拍摄元件31为输出的入射角依存性少的拍摄元件等的情况下,可将各实施方式的图像传感器1的本体模块10变形为如下所述者,即,不考虑拍摄元件31的入射角特性,而生成用于对因周边光量降低导致所述图像数据中产生的渐晕进行修正的渐晕修正信息。而且,也可将第2实施方式的图像传感器1变形为将与拍摄元件31相关的信息存储于拍摄模块30的非易失性存储器32中的装置。
也可将周边光量比信息设为其中所含的光量比数更少者。而且,也可将周边光量比信息设为其中所含的光量比数更少者,并且在本体模块10侧通过插值等来算出各位置的光量比。
也可通过在拍摄模块30侧设置相当于修正部11的单元,而将各实施方式的图像传感器1变形为在拍摄模块30侧进行针对图像数据的修正的装置。
也可准备好保持有拍摄元件信息表41、出瞳信息表42、瞳径缩小率表43及周边光量比信息表44的外部装置(信息处理装置50、其他图像传感器1、国际互联网(Internet)上的贮存器(storage)等),将第2实施方式的图像传感器1的本体模块10变形为通过访问所述外部装置来获取渐晕修正信息的生成所需的信息的模块。
而且,也可将镜头模块20变形为具备被摄物照明用的光源(发光二极管(LightEmitting Diode,LED)等)的模块。如图19示意性地所示,也可将本体模块10变形为也能安装照明模块60者,所述照明模块60具备被摄物照明用的光源。进而,当然也可将图像传感器1变形为将包括具有可调整的光圈但无法变焦的光学系统21的镜头模块20作为构成元件的装置,或者也可使渐晕修正信息的具体生成流程不同于所述流程等。另外,作为智能摄像机的提供形态(交货形态),有各别地提供模块并在用户侧进行装配的形态、与以将照明模块或镜头模块装入传感器本体中的状态来提供的形态。在后者的提供形态的情况下,由于不需要用户侧的光学条件的调整等,因此有能够更简单地进行图像传感器的导入的优点。
《附注》
(1)一种图像传感器1,其包括本体模块10和被安装于所述本体模块10的镜头模块20及拍摄模块30,其中,
所述本体模块10包括:
修正部件,是能够设定渐晕修正信息的修正部件,且依照所设定的渐晕修正信息来对安装于所述本体模块10的所述拍摄模块30所输出的图像数据进行渐晕修正;
获取部件,获取与被安装于所述本体模块10的所述拍摄模块30内的拍摄元件的大小相关的信息,并且获取光量比信息,所述光量比信息来自被安装于所述本体模块10的镜头模块20,且表示所述拍摄元件的拍摄面上的至少两个以上的位置的光量的比率;以及
生成/设定部件,基于由所述获取部件所获取的信息,生成渐晕修正信息并对所述修正部件进行设定,所述渐晕修正信息用于对因所述光量的比率导致所述图像数据中产生的渐晕进行修正。

Claims (8)

1.一种图像传感器,其包括本体模块和被安装于所述本体模块的镜头模块及拍摄模块,所述图像传感器的特征在于,
所述本体模块包括:
修正部件,是能够设定渐晕修正信息的修正部件,且依照所设定的所述渐晕修正信息来对安装于所述本体模块的所述拍摄模块所输出的图像数据进行渐晕修正;
获取部件,获取与被安装于所述本体模块的所述拍摄模块内的拍摄元件的大小相关的信息以及表示入射角特性的入射角特性信息,并且获取与被安装于所述本体模块的所述镜头模块相关的,表示所述拍摄元件的拍摄面上的至少两个以上的位置的光量的比率的光量比信息、出瞳直径信息以及出瞳位置信息;以及
生成/设定部件,基于与所述拍摄元件的大小相关的信息、所述入射角特性信息、所述出瞳直径信息和所述出瞳位置信息,计算基于各像素的入射角范围内的受光量积分值算出的第1修正增益以及基于与所述拍摄元件的大小相关的信息和所述光量比信息算出的第2修正增益,生成基于所述第1修正增益和所述第2修正增益的值作为所述渐晕修正信息并对所述修正部件进行设定。
2.根据权利要求1所述的图像传感器,其特征在于,
所述本体模块的所述获取部件在被安装于所述本体模块的所述镜头模块为能调整光圈的第二种镜头模块的情况下,获取与所述光圈的当前设定值对应的光量比信息。
3.根据权利要求2所述的图像传感器,其特征在于,
所述第二种镜头模块具备对应于所述光圈的每个设定值而存储有所述光量比信息的存储器,
所述本体模块的所述获取部件在被安装于所述本体模块的所述镜头模块为所述第二种镜头模块的情况下,从所述第二种镜头模块内的所述存储器,获取与所述光圈的当前设定值关联的所述光量比信息。
4.根据权利要求2所述的图像传感器,其特征在于,
所述第二种镜头模块能够变焦,
在所述第二种镜头模块的存储器中,对应于所述光圈的设定值和变焦设定值的不同组合而存储有所述光量比信息,
所述本体模块的所述获取部件从被安装于所述本体模块的所述第二种镜头模块的所述存储器,获取与所述光圈的当前设定值和当前变焦设定值的组合关联的所述光量比信息。
5.根据权利要求1所述的图像传感器,其特征在于,
所述本体模块的所述获取部件在被安装于所述本体模块的所述镜头模块为能变焦者的情况下,获取与变焦的当前设定值相应的所述光量比信息。
6.根据权利要求5所述的图像传感器,其特征在于,
所述本体模块的所述获取部件从所述镜头模块所具备的存储器,获取与所述变焦的当前设定值相应的所述光量比信息。
7.根据权利要求1至6中任一项所述的图像传感器,其特征在于,
所述获取部件从所述拍摄模块内的存储器获取与所述拍摄元件的大小相关的信息。
8.根据权利要求1至6中任一项所述的图像传感器,其特征在于,
与所述拍摄元件的大小相关的信息包含所述拍摄元件的像素尺寸、像素数、元件尺寸中的至少两个以上。
CN201811344289.3A 2018-02-23 2018-11-13 图像传感器 Active CN110191277B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-031119 2018-02-23
JP2018031119A JP6935771B2 (ja) 2018-02-23 2018-02-23 画像センサ

Publications (2)

Publication Number Publication Date
CN110191277A CN110191277A (zh) 2019-08-30
CN110191277B true CN110191277B (zh) 2022-04-05

Family

ID=64331649

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811344289.3A Active CN110191277B (zh) 2018-02-23 2018-11-13 图像传感器

Country Status (4)

Country Link
US (1) US10863107B2 (zh)
EP (1) EP3531683B1 (zh)
JP (1) JP6935771B2 (zh)
CN (1) CN110191277B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1227669A2 (en) * 2001-01-17 2002-07-31 Canon Kabushiki Kaisha Image sensing apparatus, shading correction method, program, and storage medium
CN101971610A (zh) * 2008-03-11 2011-02-09 佳能株式会社 摄像设备和图像处理方法
CN102103304A (zh) * 2009-11-05 2011-06-22 株式会社理光 照相机机身和成像单元、以及成像设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005217504A (ja) * 2004-01-27 2005-08-11 Fujinon Corp 周辺光量補正機能付き撮像システム
JP2006191282A (ja) * 2005-01-05 2006-07-20 Pentax Corp デジタル一眼レフカメラ
EP1981285A4 (en) * 2006-02-03 2010-07-07 Nikon Corp IMAGE PROCESSING DEVICE, IMAGE PROCESSING METHOD, AND IMAGE PROCESSING PROGRAM
JP4775013B2 (ja) 2006-02-07 2011-09-21 オムロン株式会社 撮像装置
JP2007306433A (ja) * 2006-05-12 2007-11-22 Fujifilm Corp レンズ交換式カメラ
US20110205383A1 (en) * 2010-02-24 2011-08-25 Research In Motion Limited Eye blink avoidance during image acquisition in a mobile communications device with digital camera functionality
JP2011253058A (ja) * 2010-06-02 2011-12-15 Olympus Corp 情報処理装置およびカメラ
JP2017102240A (ja) * 2015-12-01 2017-06-08 キヤノン株式会社 画像処理装置および画像処理方法、撮像装置、プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1227669A2 (en) * 2001-01-17 2002-07-31 Canon Kabushiki Kaisha Image sensing apparatus, shading correction method, program, and storage medium
CN101971610A (zh) * 2008-03-11 2011-02-09 佳能株式会社 摄像设备和图像处理方法
CN102103304A (zh) * 2009-11-05 2011-06-22 株式会社理光 照相机机身和成像单元、以及成像设备

Also Published As

Publication number Publication date
JP6935771B2 (ja) 2021-09-15
US10863107B2 (en) 2020-12-08
EP3531683B1 (en) 2021-04-07
CN110191277A (zh) 2019-08-30
US20190268549A1 (en) 2019-08-29
EP3531683A1 (en) 2019-08-28
JP2019146122A (ja) 2019-08-29

Similar Documents

Publication Publication Date Title
CN107277480B (zh) 白平衡同步方法、装置和终端设备
KR20200017172A (ko) 복수의 이미지들이 합성된 이미지를 깊이 정보에 기반하여 흐림 처리하는 전자 장치 및 상기 전자 장치의 구동 방법
WO2006013945A1 (ja) 撮像装置、撮像方法および撮像制御プログラム
US20050275904A1 (en) Image capturing apparatus and program
CN111935413A (zh) 一种光圈控制方法及摄像机
CN108419026A (zh) 相机曝光时间调整方法、装置及设备
CN112929623B (zh) 一种校正过程中应用于整屏的镜头阴影修复方法及装置
CN110191258B (zh) 图像传感器
CN110191277B (zh) 图像传感器
CN110191260B (zh) 图像传感器以及本体模块
CN108777769A (zh) 相机曝光时间调整方法、装置及设备
CN101273621A (zh) 生产期间的照相机特性的内部存储
JP6758964B2 (ja) 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体
CN114697628B (zh) 图像采集方法、装置、设备和介质
US10979609B2 (en) Image sensor comprising lens module and imaging module mounted on body module
JP2000333076A (ja) デジタルカメラにおけるフレア成分除去方法
JP6700747B2 (ja) 撮像装置、その制御方法、および制御プログラム
US10897561B2 (en) Image sensor comprising an imaging module installed in a body module and a lens module
CN113096084B (zh) 基于阵列相机成像的视觉检测方法、设备及系统
KR20210140945A (ko) 멀티 카메라를 이용하여 화질 개선하는 전자 장치 및 방법
JP2020134547A (ja) 撮像装置、レンズ装置、カメラシステムおよび撮像装置の制御方法
JP2000122128A (ja) カメラにおけるストロボの発光量調整方法
JP2002354489A (ja) 撮影システム及びデジタルカメラ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant