CN109842750A - 摄像装置系统 - Google Patents

摄像装置系统 Download PDF

Info

Publication number
CN109842750A
CN109842750A CN201811434014.9A CN201811434014A CN109842750A CN 109842750 A CN109842750 A CN 109842750A CN 201811434014 A CN201811434014 A CN 201811434014A CN 109842750 A CN109842750 A CN 109842750A
Authority
CN
China
Prior art keywords
image
forming component
area
controller
camera system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811434014.9A
Other languages
English (en)
Other versions
CN109842750B (zh
Inventor
村尾俊和
清水信寿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Publication of CN109842750A publication Critical patent/CN109842750A/zh
Application granted granted Critical
Publication of CN109842750B publication Critical patent/CN109842750B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/665Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • H04N25/531Control of the integration time by controlling rolling shutters in CMOS SSIS

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

一种摄像装置系统,包括:第一成像元件(11);第二成像元件(12),其与第一成像元件不同;振荡器(30),其用于向第一成像元件和第二成像元件提供时钟信号;以及控制器(40),其控制第一成像元件的操作和第二成像元件的操作,并获取通过第一成像元件和第二成像元件输出的图像信号。控制器将第一区域(R1)的图像数据和第二区域(R2)的图像数据进行同步并输出,第一区域(R1)是第一成像元件的有效像素区域的一部分,第二区域(R2)是第二成像元件的有效像素区域的一部分或全部。

Description

摄像装置系统
技术领域
本公开内容涉及一种摄像装置系统。
背景技术
常规地,已知安装在车辆的风挡的内侧并且被配置成对车辆的外部进行拍摄的摄像装置模块。专利文献1公开了摄像装置模块作为这样的摄像装置模块。
专利文献1:JP-5316562-B
发明内容
近年来,为了支持车辆的高级驾驶辅助或自主驾驶,需要摄像装置系统捕获外部的宽范围的图像以识别图像。也就是说,在摄像装置系统中,具有相对广角的透镜被用于与预定成像元件相对应的透镜。然而,当通过使用广角透镜确保宽视角时,在作为宽视角的一部分的具有小视角的区域中,分辨率相对较低。由于驾驶支持中的图像分析的准确度取决于图像的分辨率,因此期望的是在摄像装置系统中获取的图像的分辨率尽可能高。
因此,尽管可以考虑采用具有大量像素的成像元件。在这种情况下,帧速率可能降低,或者每像素的单元尺寸可能减小,并且由于这些减小,灵敏度可能降低。因此,在无论白天或夜晚均要求进行实时分析的驾驶支持系统中,这种权衡关系可能是瓶颈难点。
为了应对这种难点,考虑提供一种复眼摄像装置系统,其包括用于拍摄广角范围的成像元件和用于拍摄远摄图像的成像元件,并且这些成像元件分别具有广角透镜和远摄透镜。
在具有这种配置的摄像装置系统中,图像数据分别由多个成像元件获取。在车辆的高级驾驶支持或自主驾驶中,需要实时的图像分析,并且还需要同时进行图像获取。
另外,由于成像元件的数量是两个或更多,因此与系统仅包括一个成像元件的情况相比,用于与处理器等互连的布线增加。
因此,本公开内容的一个方面是提供一种摄像装置系统,其能够在使用多个成像元件的复眼摄像装置系统中实现多个成像元件之间的拍摄的同时性的同时减少信号线的数量。
根据本公开内容的一个方面,一种摄像装置系统包括:第一成像元件;第二成像元件,其与第一成像元件分开;振荡器,其被配置成向第一成像元件和第二成像元件提供时钟信号;控制器,其被配置成控制第一成像元件的操作和第二成像元件的操作,并获得来自第一成像元件的第一信号和来自第二成像元件的第二信号。控制器同步地输出与第一区域相对应的第一图像数据和与第二区域相对应的第二图像数据,第一区域是第一成像元件的有效像素区域的一部分,第二区域是第二成像元件的有效像素区域的一部分或全部。
根据上述系统,由于两个独立的图像数据可以被同步地输出,因此可以确保图像获取的同时性。另外,由于可以在车辆运动期间同时分析所述两个图像而没有任何时间差,因此可以应对自主驾驶操作期间的瞬时情况变化。
此外,当振荡器向第一成像元件和第二成像元件提供公共时钟信号时,第一成像元件和第二成像元件可以由一个振荡器驱动,因此,可以减少布线的数量。
附图说明
根据以下参照附图的详细描述,本公开内容的上述和其他目的、特征和优点将变得更加明显。在附图中:
图1是示出根据第一实施方式的摄像装置系统的示意性配置的框图;
图2是示出通过第一成像元件和第二成像元件拍摄的图像的视角的图;
图3是示出读取线与时间之间的关系的图;
图4是示出根据第二实施方式的摄像装置系统的示意性配置的框图;
图5是示出根据第三实施方式的摄像装置系统的示意性配置的框图;以及
图6是示出根据第四实施方式的摄像装置系统的示意性配置的框图。
具体实施方式
在下文中,将参照附图来描述用于实现本公开内容的实施方式。在每个实施方式中,与前述实施方式中描述的元件相对应的部分由相同的附图标记表示,并且可以省略多余的说明。当在实施方式中描述配置的仅一部分时,可以将另一前述实施方式应用于该配置的其他部分。不仅可以组合其组合在实施方式中明确地描述的部件,而且还可以组合各个实施方式的其组合未明确描述的部件,如果组合所述各个实施方式的部件时没有特别发生任何障碍的话。
(第一实施方式)
首先,将参照图1和图2描述根据该实施方式的摄像装置系统的示意性配置。
根据本实施方式的摄像装置系统例如安装在车辆的风挡的内侧(即,车厢内),并且是至少获取车辆前方的图像作为电子数据的系统。所获取的图像数据被作为车辆前方的交通状况数据进行分析,并且用于诸如自主驾驶功能和行人识别功能的各种系统。
如图1所示,根据本实施方式的摄像装置系统100包括作为成像元件10的第一成像元件11和第二成像元件12。相位同步电路或锁相环(即,PLL)20布置在第一成像元件11和第二成像元件12中的每一个中。另外,摄像装置系统100包括振荡器30和作为处理器的控制器40。此外,透镜50设置有用于在第一成像元件11上形成图像的第一透镜51和用于在第二成像元件12上形成图像的第二透镜52。
成像元件10是通过光电转换将光转换成电信号的元件,并且成像元件10例如是CCD或CMOS图像传感器。如在本实施方式中那样,当安装在车辆上并且需要实时处理视频图像时,优选的是帧速率高,并且在这方面,优选的是采用CMOS图像传感器。在成像元件10的成像表面中,像素以二维矩阵布置,并接收彩色或单色的外部光并将光转换成电荷。
当采用CMOS图像传感器作为成像元件10时,成像元件10具有水平扫描电路和竖向扫描电路(未示出),使得可以选择像素的列和行,并且可以执行对像素的随机访问。也就是说,稍后描述的控制器40可以任意地获取特定像素的电压。
成像元件10的光接收表面包括:光入射到其上的有效像素;限定通过被屏蔽而免受光从而处于黑暗的参考电压的光学黑(OB)像素;以及除有效像素和OB像素之外的虚设像素。这些像素的总和被定义为像素的总数,并且有效像素的总和被定义为有效像素数。
根据本实施方式的摄像装置系统100具有两个成像元件:第一成像元件11和第二成像元件12。例如,第一成像元件11和第二成像元件12可以具有不同的规格,其中像素的总数、封装的尺寸、滤色器的光谱特性、针对每个像素设置的微透镜的聚光特性等彼此不同。在本实施方式中,第一成像元件11和第二成像元件12由相同类型的具有相同规格的元件形成。
第一成像元件11例如是具有预定总像素数的1/4型CMOS图像传感器。用于在第一成像元件11上形成图像的第一透镜51例如是具有约3mm至8mm的焦距的所谓的单焦距广角透镜。第一透镜51的整个视角在第一成像元件11的整个有效像素上形成图像。摄像装置系统100通过分析由第一成像元件11捕获的广角图像来获得关于周围地面特征、交通信号、结构等的信息。然后,通过与卫星定位系统、地图信息等一起分析所述信息来实现自主驾驶功能。
第二成像元件12是具有与第一成像元件11相同规格的CMOS图像传感器。用于在第二成像元件12上形成图像的第二透镜52是例如焦距为约8mm至30mm的单焦点透镜。第二透镜52被布置成使得其整个视角在第二成像元件12的整个有效像素上形成图像,并且与第一透镜51相比,第二透镜52形成远摄图像。
如图1所示,第一成像元件11和第二成像元件12安装在电路板60的同一表面上,以面向相同的方向。与该配置一起,第一透镜51和第二透镜52也被定向成使得光轴彼此平行并且可以对相同方向上的景象进行拍摄。第一透镜51和第二透镜52固定至设置在电路板60上的安装件(未示出)。与第一透镜51相比,第二透镜52具有远摄规格,并且如图2所示,由第二成像元件12成像的视角等于通过第一成像元件11拾取的图像的预定中心部分的视角。所述中心部分是从第一成像元件11的图像中切取的。作为与第二成像元件12的视角相对应并且从第一成像元件11的图像切取的部分的、第一成像元件11的有效像素区域的部分被称为第一区域R1。
此外,作为与第一成像元件11的视角相对应并且从第二成像元件12的图像切取的部分的、第二成像元件12的有效像素区域的部分被称为第二区域R2。在本实施方式中,第一区域R1和第二区域R2的纵横比相同,第二区域R2与第二成像元件12的整个有效像素区域匹配。
如图2所示,当第一区域R1的V方向上的线的数量被定义为N1,并且第二区域R2的V方向上的线的数量被定义为N2时(N2等于在V方向上的像素数),建立N1<N2的表达式。在第二区域R2中成像与第一区域R1相同的视角。由于满足N1<N2的关系,因此第二区域R2具有比第一区域R1更高的分辨率。
锁相环(即PLL)20是通常已知的PLL,并且具有例如相位比较器(未示出)、低通滤波器、压控振荡器和分频器,并且执行来自压控振荡器的输出信号到相位比较器的负反馈。PLL 20布置在成像元件10内部,并且用于使输入信号的相位符合输出信号的相位。具体地,PLL 20用于使由振荡器31(稍后描述)提供的时钟信号与成像元件10中的操作时钟相匹配。PLL 20包括第一PLL 21和第二PLL 22,第一PLL 21和第二PLL 22整体地结合在第一成像元件11中。应当注意,第一PLL 21和第二PLL 22彼此等效,并且在接收从稍后描述的振荡器30输入的参考时钟信号时输出的时钟信号对于第一成像元件11和第二成像元件12是相同的。
振荡器30使用例如晶体振荡器来生成摄像装置系统100的参考时钟信号。振荡器30将时钟信号输出到形成在第一成像元件11中的第一PLL 21。因此,第一PLL 21在第一成像元件11内部生成时钟信号。类似地,振荡器30将时钟信号输出到形成在第二成像元件12中的第二PLL 22,并且第二PLL 22在第二成像元件12内部生成时钟信号。也就是说,振荡器30将公共时钟信号输出到第一成像元件11和第二成像元件12。
控制器40是处理器,并且执行第一成像元件11和第二成像元件12的控制。具体地,控制器40调整像素的电子快门的定时以控制曝光时间、选择读取线、执行选择与所选择的读取线相对应的像素行和列以及控制成像装置10以获取期望的图像。
此外,控制器40执行经由AFE(未示出)从成像装置10输入的图像数据的处理。在本实施方式中,作为处理器的控制器和作为图像分析单元的处理单元被示为图1中的集成控制器40。可替选地,这些可以独立地布置在控制器40中。也就是说,可以使用专用处理器诸如GPU来用于图像分析。
控制器40、第一成像元件11和第二成像元件12经由总线相互连接。特别地,在本实施方式中,连接控制器40、第一成像元件11和第二成像元件12的总线是串行总线。例如,总线可以是I2C。可替选地,也可以采用除了I2C之外的能够进行串行通信的总线。
注意,连接振荡器30和控制器40的线、或者以可通信的方式连接振荡器30和成像元件10的线以及连接控制器40和成像元件10的线可以被安装在其上设置有成像元件10的电路板60上。可替选地,线可以设置在另一基板上或另一模块中。
接下来,将参照图3描述控制器40对第一成像元件11和第二成像元件12的驱动操作。要注意的是,控制器40将被描述为其中第一成像元件11和第二成像元件12通过控制器40在焦平面快门操作中被驱动(卷帘式快门驱动)的示例。
从图3中所示的时刻t0到时刻t3的时间是用于获得一个帧的时间间隔,并且控制器40以每单位时间的预定数字次数来周期性地重复该一个帧。因此,摄像装置系统100可以捕获运动图像。
控制器40在时刻t0开始读取第一成像元件11的有效像素的第一线。然后,在时刻t1,读取第一区域R1的第一读取线。此后,在时刻t2,完成第一区域R1的最后读取线的读取。也就是说,在(t2-t1)的时间间隔内读取N1个线。在第一成像元件11中,此后继续读取剩余的读取线,并且通过控制器40获取广角侧的一个帧。
另一方面,控制器40操作第二成像元件12,使得第二成像元件12设置在消隐时段中,在消隐时段中,从时刻t0到时刻t1不执行第二成像元件12的有效像素区域的读取线的读取。也就是说,从时刻t0到时刻t1的时段是甚至在一个帧内不存在图像数据的时段。控制器40在第一成像元件11中开始第一区域R1的读取的时刻t1处开始第二成像元件12的有效像素的第一线的读取。也就是说,开始第二区域R2的读取。此后,在与第一区域R1的读取的完成相同的时刻t2,完成第二区域R2的最后读取线的读取。也就是说,完成第二成像元件12的有效像素区域的所有线的读取,并且在(t2-t1)的时间间隔读取N2个线。在时刻t2之后,消隐时段开始直到下一帧的读取开始时刻t3。
为了实现上述操作,控制器40驱动第二成像元件12,使得第二成像元件12的读取速度被设置成通过将读取速度乘以N2/N1倍而获得的值。每个线的曝光时间被设置成对于第一成像元件11和第二成像元件12是相同的。
接下来,将描述通过采用根据本实施方式的摄像装置系统100获得的效果。
如上所述,在从时刻t1到时刻t2的时段期间,控制器40读取第一成像元件11中的第一区域R1以及在相同时段读取具有与第一区域R1的视角相同的视角的第二区域R2。也就是说,可以同步读取第一区域R1和第二区域R2。因此,例如,由于可以使用分辨率比第一区域R1高的第二区域R2的图像数据(在图像信号中的)执行图像处理,因此与使用单个成像元件拍摄广角侧的情况相比,拍摄远摄图像时的分辨率增加,并且通过修剪获得用于图像处理的远摄图像。因此,甚至对于远摄图像侧的图像处理,也可以保持高准确度。
应当注意,第二区域R2的读取的开始时间并不总是需要与第一区域R1的读取的开始时间(在时刻t1)一致。另外,第二区域R2的读取的结束时间不一定与第一区域R1的读取的结束时间(时刻t2)一致。当在一帧内完成第一区域R1和第二区域R2的读取时,可以在一帧中同步地获得广角图像和远摄图像的两个图像数据。
特别是在焦平面快门驱动的CMOS传感器中,优选的是,第二区域R2的读取的开始时间和第一区域R1的读取的开始时间可以如该实施方式中一样彼此一致。据此,由于曝光的开始时间可以在第一区域R1与第二区域R2之间匹配,因此可以确保两个成像元件10之间的同时性,并且可以降低归因于焦平面快门的图像失真。
此外,在本实施方式中,由于在第二区域R2中要读取的线的数量大于第一区域R1中要读取的线的数量并且是第一区域R1中要读取的线的数量的N2/N1倍,所以控制器40将第二成像元件12的读取速度设置成大于第一成像元件11的读取速度并且是第一成像元件11的读取速度的N2/N1倍,使得第二区域R2中的读取的结束时间和第一区域R1中的读取的结束时间可以相匹配。因此,曝光的开始时间和曝光的结束时间可以在第一区域R1和第二区域R2之间匹配,使得可以在两个成像元件10之间确保同时性。
此外,在根据本实施方式的摄像装置系统100中,通过一个振荡器30将公共时钟信号输入到第一成像元件11和第二成像元件12两者中。因此,与通过多个振荡器将时钟信号独立地提供给第一成像元件11和第二成像元件12的配置相比,可以减少布线的数量和布线长度。此外,由于可以简化布线布局,因此例如可以降低由于时钟信号的干扰引起的噪声。
此外,在根据本实施方式的摄像装置系统100中,控制器40、第一成像元件11和第二成像元件12经由I2C标准串行总线彼此连接。因此,可以用单个信号线以可通信的方式连接控制器40和成像元件10,可以减少布线的数量并且还可以以相同的信号线发送用于控制成像元件10的驱动信号和从成像元件10输出的图像信号(具有图像数据)。
此外,由于可以如上所述减少布线的数量,所以可以减小摄像装置系统100的整体尺寸。由于摄像装置系统100通常附接至车辆前方的风挡,因此可以通过减小系统100的整体尺寸来提高车辆前方的可视性。
由于控制器40、第一成像元件11和第二成像元件12之间的相互通信是经由串行总线执行的,因此控制器40、第一成像元件11和第二成像元件12中的至少一个可以被设置成主设备,或者同一总线中的另一块(未示出)可以被设置成主设备,并且除主设备之外的块可以被设置成从设备,从而操作系统。
主设备块输出同步信号,从设备根据主设备发出的同步信号来同步时钟。因此,实现了第一成像元件11与第二成像元件12之间的同步,并且如上所述可以在两个成像元件10之间确保同时性。另外,由于这些同步信号可以经由串行总线传输,所以可以减少布线的数量,因此,可以简化布线布局并且降低由时钟信号的干扰引起的噪声。
具体地,在除控制器40之外的块是主设备的情况下,控制器40检测并反馈第一成像元件11与第二成像元件12之间的同步偏移,并进行控制以最小化它们之间的同步偏移。例如,由于通信长度或噪声引起的延迟导致同步偏移。关于这种同步偏移,例如,控制器40通过将开始时间延迟或前提同步偏移来校正第一成像元件11和第二成像元件12中的任一个的读取的开始时间。由此,可以更准确地同步第一区域R1和第二区域R2。
(第二实施方式)
如图4所示,组装有成像元件10和透镜50的摄像装置模块70以及控制器40可以分开布置。也就是说,根据本实施方式的摄像装置系统110包括摄像装置模块70和控制器40。摄像装置模块70包括成像元件10、相位同步电路或PLL 20、振荡器30和透镜50。如第一实施方式,第一成像元件11和第二成像元件12通过串行总线可通信地彼此连接。另外,振荡器30将公共时钟信号提供给第一成像元件11和第二成像元件12。
将第一成像元件11和第二成像元件12彼此连接的串行总线被引出到摄像装置模块70的外部,并且经由连接器90连接至控制器40。
也就是说,控制器40经由串行总线连接至第一成像元件11和第二成像元件12。因此,控制器40可以使用相同的总线执行串行通信,以发送驱动信号和图像信号。换句话说,由于可以连同驱动信号一起使用单个总线作为反向通道(back channel)来发送和接收图像信号,所以可以减少布线的数量,并且因此,可以减少由于布线布局的简化和时钟信号的干扰而引起噪声。
例如,局域网(LAN)的以太网(注册商标)可以用作用于连接控制器40和摄像装置模块70使得它们可以彼此通信的装置。
(第三实施方式)
如图5所示,在根据本实施方式的摄像装置系统120中,控制器40具有串行器80。因此,由第一成像元件11和第二成像元件12获得的图像数据被输入到控制器40中的串行器80,然后串行器80输出到系统的外部。本实施方式中的控制器40是结合在摄像装置模块70中作为包括识别处理IC和串行器IC的元件的示例,使得例如控制器40即这些IC安装在待组装在摄像装置模块70中的板上。摄像装置模块70可以包括作为独立的IC的控制器40和串行器80,其中控制器40控制成像元件10的驱动操作并执行图像识别处理。
串行器80例如将包括在图像数据中的8位并行数据转换为可以通过一个串行总线传输的串行数据,并经由连接器91将其输出至外部。此时,与通过第一成像元件11获得的一帧相对应的图像数据和通过与第一成像元件11同步获得的第二成像元件12的图像数据被作为数据集合来串行发送。因此,第一区域R1和第二区域R2的同步图像数据可以在保持同步的同时被输出至外部。串行化的图像数据由安装在摄像装置系统120外部的解串器(未示出)并行化,并且通过例如外部GPU等被处理。
以这种方式,当需要将图像输出到布置在系统120外部的图像处理设备诸如GPU等时,可以提供串行器80以将同步的图像数据作为集合串行地发送。要注意的是,通过第一成像元件11和第二成像元件12捕获的用于作为集合发送的图像数据的发送方式不限于特定的一种。例如,可以首先发送通过第一成像元件11获得的数据,然后可以发送通过第二成像元件12获得的数据。可替选地,可以交替地发送通过第一成像元件11获得的与一条线相对应的数据。
(第四实施方式)
在上述实施方式的每一个中,摄像装置系统100、110和120具有作为成像元件10的两个成像元件11和12以及分别与两个成像元件11和12相对应的透镜51和52。可替选地,摄像装置系统中的成像元件10的数量可以不限于两个。
如图6所示,在根据本实施方式的摄像装置系统130中,除了第一成像元件11和第二成像元件12之外,还布置有第三成像元件13和第三透镜53。第三透镜53将外部光收集在第三成像元件13上,并且第三透镜53在第三成像元件13上形成图像。作为对应的相位同步电路20的第三PLL 23形成在第三成像元件13中,并且振荡器30还连接至第三PLL 23并向其输出时钟信号。也就是说,第一PLL21、第二PLL 22和第三PLL 23从公共振荡器30接收公共时钟信号。
另外,第一成像元件11、第二成像元件12、第三成像元件13和控制器40经由例如根据I2C标准的串行总线相互连接。因此,如第一实施方式至第三实施方式,可以用单个线相互发送和接收成像元件10的驱动信号和图像信号诸如图像数据。
这里,第三成像元件13的像素规格可以与第一成像元件11和第二成像元件12的像素规格不同或相同。作为示例,第一成像元件11、第二成像元件12和第三成像元件13都具有相同的像素规格,第一透镜51是广角透镜,第二透镜52是标准透镜,第三透镜53是远摄透镜,因此远摄图像侧的分辨率可以较高。
例如,假设通过第三成像元件13捕获的视角是与第二成像元件12的有效像素区域的中心周围的预定第三区域相对应的视角。第三成像元件13的有效像素区域被称为第四区域。第三区域的读取线的数量被定义为N3,第四区域的读取线的数量被定义为N4。优选的是,第三成像元件13的读取速度可以大于第二成像元件12的读取速度并且是第二成像元件12的读取速度的N4/N3倍。另外,分别通过同时设置第三区域中的读取的开始时间和第四区域中的读取的开始时间以及通过同时设置第三区域中的读取的结束时间和第四区域中的读取的结束时间,可以在第三区域和第四区域的图像数据的获取中确保并发性。
如第一实施方式至第三实施方式中所例示的,只要确保第一区域R1和第二区域R2的同时性,通过采用本实施方式的方面,第一成像元件至第三成像元件彼此同步以获取图像数据。
此外,例如,当第一透镜51的焦距与第三透镜53的焦距相同时,通过使用通过第一成像元件11获得的图像数据和通过第三成像元件13获得的图像数据,可以在使用视差执行距离分析的同时使用通过第二成像元件12获得的高分辨率远摄图像数据来分析障碍物等。
(其它实施方式)
本说明书和附图等中的公开内容不限于示例性实施方式。本公开内容包括示例性实施方式和本领域技术人员基于示例性实施方式的修改。例如,本公开内容不限于实施方式中示出的部件和/或元件的组合。本公开内容可以以各种组合实施。本公开内容可以具有可以添加至实施方式的附加部分。本公开内容包括对实施方式的部件和/或元件的省略。本公开内容包括一个实施方式与另一实施方式之间的部件和/或元件的替换或组合。所公开的技术范围不限于对实施方式的描述。
在上述实施方式的每一个中,两个或三个成像元件10安装在电路板60上。可替选地,要安装的成像元件10的数量不受限制。在具有两个或更多个成像元件10的摄像装置系统中,可以采用本公开内容的技术构思。
在上述实施方式的每一个中,已经描述了具有相同像素规格的多个成像元件10的示例。可替选地,多个成像元件10可以分别具有不同的像素规格。可替选地,封装等的尺寸可以是任何尺寸。如在第一实施方式中所述,例如,在摄像装置系统中,相应的透镜50的焦距有意地彼此不同,并且广角图像数据和远摄图像数据分别通过多个成像元件10获得。在该系统中,成像元件10的像素规格可以被确定成使得远摄图像的V方向上的像素的数量大于当广角图像的中心附近被修剪时V方向上的像素的数量。因此,由于可以获得具有更高的分辨率的远摄图像侧的像素,因此可以提高远摄图像侧的分析准确度。
在上述实施方式的每一个中,描述了第一成像元件11和第二成像元件12安装在同一电路板60上的实施方式。可替选地,一个成像元件可以安装在一个电路板上。
在第三实施方式中,控制器40包括识别处理IC和串行器IC。可替选地,控制成像元件10的驱动并执行识别处理的控制器40和串行器80可以分别布置成单独的IC。可替选地,控制器40可以被配置成包括识别处理功能和串行器的功能的集成IC。
另外,将控制器40和成像元件10彼此连接的总线可以不限于I2C标准总线。除了I2C标准之外,可以采用DDC(显示数据信道)、USB(通用串行总线)、使用光纤的光纤通道等作为总线。
存储在有形存储器中的软件和执行软件的计算机、仅软件、仅硬件或它们的组合可以提供由控制器40提供的方法和/或功能。例如,当控制器40由作为硬件的电子电路提供时,可以通过包括多个逻辑电路或模拟电路的数字电路来提供。
本公开内容中描述的控制器和方法可以由专用计算机实现,其中专用计算机是通过配置存储器和被编程为执行在计算机程序中实施的一个或更多个特定功能的处理器而创建的。可替选地,本公开内容中描述的控制器和方法可以由专用计算机来实现,其中专用计算机是通过配置由一个或更多个专用硬件逻辑电路提供的处理器而创建的。可替选地,本公开内容中描述的控制器和方法可以由一个或更多个专用计算机来实现,其中专用计算机是通过配置存储器和被编程为执行一个或更多个特定功能的处理器以及由一个或更多个硬件逻辑电路提供的处理器的组合而创建的。计算机程序可以作为由计算机执行的指令存储在有形的非暂态计算机可读介质中。
尽管已经参照本公开内容的实施方式描述了本公开内容,但是应当理解,本公开内容不限于这些实施方式和构造。本公开内容意在覆盖各种修改和等同布置。此外,各种组合和配置、包括更多、更少或仅单个元件的其他组合和配置也在本公开内容的精神和范围内。

Claims (11)

1.一种摄像装置系统,包括:
第一成像元件(11);
第二成像元件(12),其与所述第一成像元件不同;
振荡器(30),其用于向所述第一成像元件和所述第二成像元件提供时钟信号;以及
控制器(40),其控制所述第一成像元件的操作和所述第二成像元件的操作,并获取通过所述第一成像元件和所述第二成像元件输出的图像信号,其中:
所述控制器将第一区域(R1)的图像数据和第二区域(R2)的图像数据进行同步并输出,所述第一区域(R1)是所述第一成像元件的有效像素区域的一部分,所述第二区域(R2)是所述第二成像元件的有效像素区域的一部分或全部。
2.根据权利要求1所述的摄像装置系统,其中:
所述振荡器向所述第一成像元件和所述第二成像元件提供公共时钟信号。
3.根据权利要求1所述的摄像装置系统,还包括:
第一透镜(51),其具有预定的焦距,并将外部光引导至所述第一成像元件;以及
第二透镜(52),其具有比所述第一透镜的焦距长的焦距,并将外部光引导至所述第二成像元件,其中:
投射在所述第二区域上的视角等于投射在所述第一区域上的视角;以及
所述第二区域中的读取线的数量大于所述第一区域中的读取线的数量。
4.根据权利要求3所述的摄像装置系统,其中:
所述第一区域的读取的开始时间等于所述第二区域的读取的开始时间。
5.根据权利要求3所述的摄像装置系统,其中:
所述第一区域中的读取线的数量被定义为N1;
所述第二区域中的读取线的数量被定义为N2;以及
所述控制器将所述第二区域的读取速度设置成大于所述第一区域的读取速度并且是所述第一区域的读取速度的N2/N1倍。
6.根据权利要求1所述的摄像装置系统,其中:
所述第一成像元件和所述控制器经由串行总线可通信地彼此连接;以及
所述第二成像元件和所述控制器经由串行总线可通信地彼此连接。
7.根据权利要求1所述的摄像装置系统,其中:
所述第一成像元件和所述第二成像元件经由公共总线连接至所述控制器;以及
用于控制所述第一成像元件和所述第二成像元件的驱动信号以及通过所述第一成像元件和所述第二成像元件输出的图像信号被串行传输。
8.根据权利要求1所述的摄像装置系统,其中:
所述控制器、所述第一成像元件和所述第二成像元件中的至少一个是主设备;
所述第一区域的图像数据和所述第二区域的图像数据被同步输出;以及
当所述第一成像元件或所述第二成像元件是主设备时,所述控制器输出用于校正同步偏差的校正信号。
9.根据权利要求1所述的摄像装置系统,其中:
所述控制器将所述第一区域的图像信号和所述第二区域的图像信号进行叠加或合成,并输出针对每个帧的叠加或合成图像信号。
10.根据权利要求1所述的摄像装置系统,其中:
所述第一成像元件和所述第二成像元件安装在同一电路板(60)上以面向相同的方向。
11.根据权利要求1至10中任一项所述的摄像装置系统,还包括:
至少一个或更多个成像元件(10);以及
与各个成像元件相对应的多个透镜(50)。
CN201811434014.9A 2017-11-29 2018-11-28 摄像装置系统 Active CN109842750B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017229425A JP2019102889A (ja) 2017-11-29 2017-11-29 カメラシステム
JP2017-229425 2017-11-29

Publications (2)

Publication Number Publication Date
CN109842750A true CN109842750A (zh) 2019-06-04
CN109842750B CN109842750B (zh) 2021-06-18

Family

ID=66442554

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811434014.9A Active CN109842750B (zh) 2017-11-29 2018-11-28 摄像装置系统

Country Status (4)

Country Link
US (1) US10887512B2 (zh)
JP (1) JP2019102889A (zh)
CN (1) CN109842750B (zh)
DE (1) DE102018220424A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965742B (zh) * 2018-08-14 2021-01-22 京东方科技集团股份有限公司 异形屏显示方法、装置、电子设备及计算机可读存储介质
JP7271215B2 (ja) * 2019-02-18 2023-05-11 キヤノン株式会社 同期制御装置、同期制御方法、及びプログラム
GB2583704B (en) * 2019-04-19 2023-05-24 Jaguar Land Rover Ltd Imaging system and method
JP7321987B2 (ja) * 2020-10-01 2023-08-07 ダイハツ工業株式会社 車両用複眼カメラ

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100097707A1 (en) * 2006-10-17 2010-04-22 Samsung Digital Imaging Co., Ltd. Dual lens optical system and digital camera module including the same
CN104050621A (zh) * 2013-03-14 2014-09-17 三星电子株式会社 用于图像处理的电子设备和方法
CN104717415A (zh) * 2013-12-12 2015-06-17 华为技术有限公司 一种摄像装置
US20150271483A1 (en) * 2014-03-20 2015-09-24 Gopro, Inc. Target-Less Auto-Alignment Of Image Sensors In A Multi-Camera System
US20150293328A1 (en) * 2013-10-18 2015-10-15 The Lightco Inc. Methods and apparatus for supporting zoom operations

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5472078B2 (ja) 2010-12-21 2014-04-16 株式会社デンソー 車載カメラ
US8897633B2 (en) 2010-12-21 2014-11-25 Denso Corporation In-vehicle camera unit having camera built into body
JP5316562B2 (ja) 2011-02-10 2013-10-16 株式会社デンソー 車載カメラ
US10046716B2 (en) 2011-02-10 2018-08-14 Denso Corporation In-vehicle camera and vehicle control system
CN108989647B (zh) * 2013-06-13 2020-10-20 核心光电有限公司 双孔径变焦数字摄影机
JP2016540418A (ja) * 2013-10-18 2016-12-22 ザ ライト・コ インコーポレイテッド 画像のキャプチャおよび/または結合のための方法および装置
JP2017169111A (ja) * 2016-03-17 2017-09-21 ソニー株式会社 撮像制御装置、および撮像制御方法、ならびに撮像装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100097707A1 (en) * 2006-10-17 2010-04-22 Samsung Digital Imaging Co., Ltd. Dual lens optical system and digital camera module including the same
CN104050621A (zh) * 2013-03-14 2014-09-17 三星电子株式会社 用于图像处理的电子设备和方法
US20150293328A1 (en) * 2013-10-18 2015-10-15 The Lightco Inc. Methods and apparatus for supporting zoom operations
CN104717415A (zh) * 2013-12-12 2015-06-17 华为技术有限公司 一种摄像装置
US20150271483A1 (en) * 2014-03-20 2015-09-24 Gopro, Inc. Target-Less Auto-Alignment Of Image Sensors In A Multi-Camera System

Also Published As

Publication number Publication date
JP2019102889A (ja) 2019-06-24
CN109842750B (zh) 2021-06-18
US10887512B2 (en) 2021-01-05
DE102018220424A1 (de) 2019-05-29
US20190166307A1 (en) 2019-05-30

Similar Documents

Publication Publication Date Title
CN109842750A (zh) 摄像装置系统
US10122998B2 (en) Real time sensor and method for synchronizing real time sensor data streams
US8890942B2 (en) Camera module, image processing apparatus, and image processing method
US20160014360A1 (en) Area scan interline transfer ccd imaging device and apparatus with tdi scanning mode
JP6834976B2 (ja) マルチカメラシステム、マルチカメラシステムの制御方法およびカメラ
CN106664357B (zh) 成像装置、成像-显示装置及其控制方法
CN103108125B (zh) 一种多相机系统的取像同步控制设备及其方法
CN111198445B (zh) 一种分光偏振成像的设备和方法
US10225468B2 (en) Imaging systems and methods with image data path delay measurement
US10148936B2 (en) Multi-band image sensor for providing three-dimensional color images
CN109835266B (zh) 摄像装置模块
CN107235008B (zh) 一种车载辅助驾驶全景图像系统及获取全景图像的方法
CN106134173B (zh) 显示控制装置和显示设备
KR20180121879A (ko) 촬상 제어 장치, 및 촬상 제어 방법, 및 촬상 장치
US7619195B2 (en) Imaging device driver, imaging device driving method, and image signal processor
CN110326285A (zh) 图像传感器和控制系统
US11218654B2 (en) Photoelectric conversion device, imaging system, and movable body
US6118481A (en) Solid state image pick-up device and image pick-up apparatus
US9848131B2 (en) Imaging display device and control method thereof
US20140313381A1 (en) Image pickup apparatus
RU2530879C1 (ru) Устройство панорамного телевизионного наблюдения &#34;день-ночь&#34;
RU2600308C1 (ru) Устройство компьютерной системы панорамного телевизионного наблюдения
RU2523858C1 (ru) Устройство панорамного телевизионного наблюдения
JPH06105224A (ja) ダイナミックレンジ拡大装置
JP2003283906A (ja) 高解像度撮像装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant