CN109328457B - 摄像装置及摄像装置的控制方法 - Google Patents

摄像装置及摄像装置的控制方法 Download PDF

Info

Publication number
CN109328457B
CN109328457B CN201780036255.5A CN201780036255A CN109328457B CN 109328457 B CN109328457 B CN 109328457B CN 201780036255 A CN201780036255 A CN 201780036255A CN 109328457 B CN109328457 B CN 109328457B
Authority
CN
China
Prior art keywords
addition
data
mode
unit
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780036255.5A
Other languages
English (en)
Other versions
CN109328457A (zh
Inventor
饭沼隆弘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN109328457A publication Critical patent/CN109328457A/zh
Application granted granted Critical
Publication of CN109328457B publication Critical patent/CN109328457B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/42Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/74Circuitry for scanning or addressing the pixel array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75Circuitry for providing, modifying or processing image signals from the pixel array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Abstract

本发明减少了用于检测是否存在事件的摄像装置的功耗。在像素阵列单元中设置有多个传输晶体管,所述传输晶体管用于将电荷从互不相同的光电转换器件传输至浮动扩散层。扫描电路在用于进行像素相加的像素相加模式下同时控制多个传输晶体管传输电荷,并在不进行像素相加的正常模式下顺序地控制多个传输晶体管传输电荷。事件检测单元基于相加信号来检测是否存在预定事件并生成检测结果,所述预定事件是在正常模式下生成的模拟信号。模式控制单元基于检测结果将模式设定至像素相加模式或正常模式。

Description

摄像装置及摄像装置的控制方法
技术领域
本技术涉及摄像装置以及摄像装置的控制方法。详细地,本技术涉 及用于检测是否存在诸如被摄体的移动等事件的摄像装置以及摄像装置 的控制方法。
背景技术
按照惯例,通过图像处理检测是否存在诸如被摄体的移动等事件的 摄像装置被广泛用于诸如测量、交通和预防犯罪等领域中。例如,已经 提出一种摄像装置,其以恒定的摄像间隔拍摄多个图像数据(帧),并根据 当前帧的亮度的积分值与前一帧的亮度的积分值之间的差来检测是否存 在事件(例如,见专利文献1)。例如,该摄像装置用于在事件发生之前不 在存储器中记录帧并且在事件发生时开始记录帧以节省存储器容量的应 用等。
引用列表
专利文献
专利文献1:日本专利申请特开第2004-274533号
发明内容
本发明要解决的问题
在上述摄像装置中,从提高帧的图像质量的角度来看,在事件检测 之前和之后,在没有像素相加的情况下拍摄帧。然而,当在没有像素相 加的情况下进行摄像时,与像素相加的情况相比,存在模数 (analog-to-digital,AD)转换的次数增加以及功耗增大的难题。如果通过 像素相加降低帧的分辨率,则能够使AD转换的次数更小,从而减少功 耗,但是,由于在事件检测之后要记录的帧的图像质量劣化,因此这是 不期望的。
本技术是鉴于上述情况而作出的,并且本技术的目的是为了降低用 于检测是否存在事件的摄像装置中的功耗。
解决问题的方法
本技术是为了消除上述难题而作出的,并且本技术的第一方面是摄 像装置及其控制方法,所述摄像装置包括:像素阵列单元,其设置有多 个传输晶体管,所述多个传输晶体管用于将来自于互不相同的光电转换 器件的电荷传输至浮动扩散层;扫描电路,其在进行像素相加的像素相 加模式下同时控制多个传输晶体管传输电荷,并且在不进行像素相加的 正常模式下顺序地控制多个传输晶体管传输电荷;事件检测单元,其基 于相加信号来检测是否存在预定事件,所述相加信号是在像素相加模式 中生成的模拟信号,并生成检测结果;以及模式控制单元,其基于检测 结果设置像素相加模式或正常模式。这产生的效果是,基于对事件的检 测结果来设置像素相加模式或正常模式。
此外,在所述第一方面中,还可以包括模数转换单元,所述模数转 换单元用于对相加信号进行模数转换,从而将其作为相加数据输出。这 产生的效果是,对相加信号进行模数转换。
此外,在所述第一方面中,可以在像素阵列单元中布置预定数量的 浮动扩散层,并且还可以包括曝光控制单元,所述曝光控制单元基于对 所述预定数量的相加信号进行积分而获得的亮度积分数据来控制像素阵 列单元的曝光量。这产生的效果是,基于所述亮度积分数据控制曝光量。
此外,在所述第一方面中,所述事件检测单元可以将是否存在所述 被摄体的移动作为是否存在所述预定事件来检测。这产生的效果是,基 于针对是否存在所述被摄体的移动的检测结果设定像素相加模式或正常 模式。
此外,在所述第一方面中,所述事件检测单元可以包括:亮度积分 数据保持单元,其用于保持作为过去的积分数据的亮度积分数据;以及 运动检测单元,其用于根据新的亮度积分数据与过去的积分数据之间的 差值是否超过预定阈值来检测是否存在所述被摄体的移动。这产生的效 果是,根据新的亮度积分数据与过去的积分数据之间的差值来检测是否 存在所述被摄体的移动。
此外,在所述第一方面中,所述事件检测单元还可以包括:相加数 据保持单元,其用于保持作为过去的相加数据的所述预定数量的相加数 据;以及差分获取单元,其用于获取新的相加数据和与所述新的相加数 据对应的过去的相加数据之间的差值,并生成对应于所述差值的权重, 而且所述亮度积分数据可以是所述相加数据和与该相加数据对应的权重 的加权相加值。这产生的效果是,基于相加数据和与所述相加数据对应 的权重的加权相加值来控制曝光量。
此外,在所述第一方面中,所述像素阵列单元可以在正常模式下生 成包括模拟信号的图像信号,并且模式控制单元可以在检测到预定事件 已经发生的情况下设定所述正常模式,并且可以在生成一定数量的图像 信号的情况下设定所述像素相加模式。这产生的效果是,在生成一定数 量的图像信号的情况下设定所述像素相加模式。
此外,在所述第一方面中,可以在所述固态摄像器件中布置像素阵 列单元、扫描电路、事件检测单元和模式控制单元。这产生的效果是, 利用所述固态摄像器件检测事件。
此外,在所述第一方面中,可以在所述固态摄像器件中布置像素阵 列单元和扫描电路,并且可以在所述固态摄像器件外部布置事件检测单 元和模式控制单元。这产生的效果是,在所述固态摄像器件外部检测事 件。
本发明的效果
根据本技术,能够实现如下优异效果:能够降低在用于检测是否存 在事件的摄像装置中的功耗。注意,这里说明的效果不一定是限制性的, 并且可以应用本公开中说明的任何效果。
附图说明
图1是示出根据本技术的第一实施例的摄像装置的构成例的框图。
图2是示出根据本技术的第一实施例的固态摄像器件的构成例的框 图。
图3是示出根据本技术的第一实施例的像素阵列单元的构成例的平 面图。
图4是示出根据本技术的第一实施例的像素块的构成例的电路图。
图5是示出根据本技术的第一实施例的事件检测单元的构成例的框 图。
图6是示出根据本技术的第一实施例的模式控制单元的构成例的框 图。
图7是示出根据本技术的第一实施例的模式信号生成单元的动作示 例的图。
图8是根据本技术的第一实施例的摄像装置的状态转换图的示例。
图9是示出根据本技术的第一实施例的AD转换单元的构成例的框 图。
图10是示出根据本技术的第一实施例的数字信号处理(digital signalprocessing,DSP)电路的构成例的框图。
图11是示出根据本技术的第一实施例的被摄体图像的示例的图。
图12是示出根据本技术的第一实施例的相加数据和权重的分布的示 例的图。
图13是示出根据本技术的第一实施例的固态摄像器件在像素相加模 式下的动作的示例的时序图。
图14是示出根据本技术的第一实施例的固态摄像器件在正常模式下 的动作的示例的时序图。
图15是示出根据本技术的第一实施例的摄像装置的动作的示例的时 序图。
图16是示出根据本技术的第二实施例的固态摄像器件的构成例的框 图。
图17是示出根据本技术的第二实施例的DSP电路的构成例的框图。
图18是示出根据本技术的第三实施例的事件检测单元的构成例的框 图。
图19是示出根据本技术的第三实施例的权重的分布的示例的图。
具体实施方式
下面将说明本技术的实施方式(以下,称为实施例)。将按以下顺序进 行说明。
1.第一实施例(在检测到事件之前执行像素相加的示例)
2.第二实施例(在DSP电路检测到事件之前执行像素相加的示例)
3.第三实施例(在检测到事件之前执行像素相加并且被摄体移动区 域被重点测光的示例)
<1.第一实施例>
[摄像装置的构成例]
图1是示出根据本技术的第一实施例的摄像装置100的构成例的框 图。该摄像装置100包括光学单元110、固态摄像器件200、DSP电路 120、显示单元130、操作单元140、总线150、电源单元160、记录单元 170和帧存储器180。假设将具有摄像功能的信息处理设备或智能电话、 数码相机等作为摄像装置100。
光学单元110收集来自被摄体的入射光,并将收集的入射光引导到 固态摄像器件200。例如,光学单元110由多个透镜、光圈和快门等构成。
固态摄像器件200对入射光进行光电转换,从而获取图像数据。该 固态摄像器件200将所生成的图像数据(帧)提供给DSP电路120。
DSP电路120对来自固态摄像器件200的帧执行预定的数字信号处 理。例如,执行各种数字信号处理,包括去马赛克处理、白平衡处理、 滤波处理等。在这些处理中,DSP电路120使帧存储器180根据需要保 持帧。然后,DSP电路120将处理后的帧输出到显示单元130和记录单 元170。
显示单元130显示帧等。操作单元140根据用户的操作生成操作信 号。
总线150是固态摄像器件200、DSP电路120、显示单元130、操作 单元140、电源单元160、记录单元170和帧存储器180彼此交换数据的 公共路径。
电源单元160向摄像装置100中的电路供电。记录单元170记录帧。 帧存储器180保持帧。
注意,尽管光学单元110、固态摄像器件200、DSP电路120、显示 单元130、操作单元140、总线150、电源单元160、记录单元170和帧 存储器180设置在同一装置中,但是这些部件也可以以分散的方式设置 在多个装置中。例如,可以在摄像装置中布置光学单元110和固态摄像 器件200,而可以在信息处理装置中布置DSP电路120等。
[固态摄像器件的构成例]
图2是示出根据本技术的第一实施例的固态摄像器件200的构成例 的框图。该固态摄像器件200包括行扫描电路210、像素阵列单元220、 时序控制单元211、AD转换单元260、列扫描电路212、开关213、曝光 控制单元270、事件检测单元280和模式控制单元290。
此外,在像素阵列单元220中,多个像素以二维点阵图案布置。以 下,在预定方向(例如,水平方向)上布置的一组像素被称为“行”,并且 在垂直于所述行的方向上布置的一组像素被称为“列”。
时序控制单元211控制行扫描电路210、AD转换单元260和列扫描 电路212的动作时序。预定频率fVSYNC(例如,30Hz)的垂直同步信号 VSYNC经由总线150输入到时序控制单元211。该垂直同步信号VSYNC 由锁相环(未示出)、DSP电路120等生成。
时序控制单元211与垂直同步信号VSYNC同步地产生指示行扫描 电路210、AD转换单元260和列扫描电路212的各个相应操作时序的时 序信号,并将相应的时序信号提供给每个部件。
行扫描电路210驱动像素生成具有曝光量的电平的模拟信号。曝光 控制信号和模式信号MODE被输入到该行扫描电路210。曝光控制信号 是用于控制曝光时间的信号。同时,模式信号MODE是指示执行像素相 加的像素相加模式或不执行像素相加的正常模式的信号。
在像素相加模式下,行扫描电路210控制像素阵列单元220通过像 素相加产生模拟相加信号。同时,在正常模式下,行扫描电路210控制 像素阵列单元220针对每个像素产生模拟像素信号。注意,行扫描电路 210是权利要求中描述的扫描电路的示例。
AD转换单元260对来自像素阵列单元220的模拟信号(相加信号或 像素信号)进行AD转换。AD转换单元260对相加信号进行AD转换以 生成相加数据,并对像素信号进行AD转换以生成像素数据。然后,AD 转换单元260将生成的数据(相加数据或像素数据)提供到开关213。
这里,在1/fVSYNC的周期内生成的相加数据的数量由图像数据的分 辨率和相加单位决定。例如,在行数为I,列数为J,并且对每8个像素 进行相加的情况下,在摄像间隔T(=1/fVSYNC)内生成的相加数据的个数M 由下式表示。这里,I、J和M都是整数。注意,相加单位并不限于8个 像素,并且还可以是四个像素等。
M=(I×J)/8
开关213根据模式信号MODE切换来自AD转换单元260的数据的 输出目的地。在像素相加模式下,该开关213将来自AD转换单元260 的相加数据提供给事件检测单元280。同时,在正常模式下,开关213 将包括像素数据的图像数据从AD转换单元260提供到DSP电路120作 为RAW图像数据。
事件检测单元280基于相加数据检测是否存在预定事件,从而生成 检测结果DET。例如,被摄体的移动被检测作为事件。此外,事件检测 单元280将M个相加数据积分以作为亮度积分数据提供给曝光控制单元 270。该亮度积分数据表示整个图像的测光量。
曝光控制单元270基于亮度积分数据(测光量)来控制像素阵列单元 220的曝光量。该曝光控制单元270将亮度积分数据转换成曝光值 EV(exposure value),并例如通过下式计算出曝光时间。然后,曝光控制 单元270生成用于控制算出的曝光时间的曝光控制信号,并将生成的曝 光控制信号提供给行扫描电路210。
EV=AV+TV
在上式中,AV表示F值的对数,并且TV表示曝光时间的对数。
注意,尽管曝光控制单元270控制曝光时间,但是还可以控制光圈 而不是曝光时间。
模式控制单元290设置像素相加模式或正常模式。当用户进行预定 操作时,该模式控制单元290首先将模式信号MODE设置为像素相加模 式。该模式信号MODE被提供给行扫描电路210和开关213。
然后,当在设定的像素相加模式期间发生预定事件时,模式控制单 元290将模式信号MODE设置为正常模式。接着,当在正常模式期间获 取一定数量的图像数据时,模式控制单元290将模式信号MODE设置为 像素相加模式。
如前所述,在正常模式中,由于对每个像素进行AD转换,因此, 通过I×J次得到AD转换次数。另一方面,在像素相加模式下,对像素相 加的每个相加单元执行AD转换。因此,在每8个像素相加的情况下所 需的AD转换次数仅为(M×N)/8次。此外,在正常模式下,在后级处由 DSP电路120执行图像处理,但在像素相加模式下,相加数据不被输出 到DSP电路120,并且不执行图像处理。如上所述,由于AD转换的次 数较少,并且用于图像处理的处理量减少,因此,与正常模式相比,摄 像装置100在像素相加模式下的功耗降低。
然后,在检测到事件之前,摄像装置100以像素相加模式工作,并 且当检测到事件时,摄像装置100转换到正常模式。因此,不管事件是 否存在,与摄像装置100在不进行像素相加而是一直工作的情况下(换句 话说,在正常模式下)相比,能够降低摄像装置100的功耗。
例如,假设在像素相加模式下的功耗为每小时1.5毫瓦(mW),并且 在正常模式下的功耗为每小时34.8毫瓦(mW)。此外,假设垂直同步信号 VSYNC的频率fVSYNC为30赫兹(Hz),并且在正常模式下在一小时内获 取60个图像数据。在这种情况下,摄像装置100每小时的功耗可以通过 下式计算出来。
34.8(mW)×60/{30(Hz)×3600(秒)}
+1.5(mW)×(30×3600-60)/{30(Hz)×3600(秒)}
≈1.52(mW)
以这种方式,与总是在正常模式下工作的情况下的值(34.8mW)相 比,可以大大降低功耗。
[像素阵列单元的构成例]
图3是示出根据本技术的第一实施例的像素阵列单元220的构成例 的平面图。在该像素阵列单元220中,多个像素块230以二维点阵图案 布置。每个像素块230设置有多个像素(例如,8个像素)。
以下,在预定方向(例如,水平方向)上排布的一组像素块230被称为 “块行”并且在垂直于块行的方向上排布的一组像素块230被称为“块 列”。
此外,针对每个块行布置10条水平信号线,并且针对每个块列布置 一条垂直信号线229。每行的十条水平信号线中的一条信号线发送复位信 号RSTi(i是从0至I-1的整数),另一条信号线发送选择信号SELi,并 且其余8条信号线发送传输信号TRGi0至TRGi7。
水平信号线连接到相应块行中的像素块230和行扫描电路210。同 时,垂直信号线229连接到相应块列中的像素块230和AD转换单元260。
[像素块的构成例]
图4是示出根据本技术的第一实施例的像素块230的构成例的电路 图。该像素块230包括传输晶体管231、232、235、236、242、243、247 和248以及光电转换器件233、234、237、238、245、246、249和250。 像素块230还包括复位晶体管239、浮动扩散层240、放大晶体管241和 选择晶体管244。
光电转换器件233、234、237、238、245、246、249和250对入射 光进行光电转换以产生电荷。这些光电转换器件连接到互不相同的传输 晶体管。
传输晶体管231、232、235、236、242、243、247和248根据传输 信号TRGi0至TRGi7将电荷从相应的光电转换器件传输至浮动扩散层 240。浮动扩散层240累积电荷以产生根据累积的电荷量的电压。
复位晶体管239根据复位信号RSTi将浮动扩散层240中的电荷扫至 电源,从而初始化电荷量。
放大晶体管241放大来自浮动扩散层240的电压信号。选择晶体管 244根据选择信号SELi将放大晶体管241放大的信号作为像素信号输出 到垂直信号线229。
在正常模式下,行扫描电路210顺序地选择像素行,并提供与选择 的行对应的复位信号RSTi以开始该行的曝光。此外,行扫描电路210提 供与选择的行对应的选择信号SELi。然后,当经过了设定的曝光时间时, 行扫描电路210提供相应的传输信号TRG0i以终止曝光。当从前一行开 始经过了特定时间段时,开始该行的各个曝光动作。
同时,在像素相加模式下,行扫描电路210顺序地选择块行,并提 供与选择的块行对应的复位信号RSTi从而开始块行的曝光。此外,行扫 描电路210提供与选择的块行对应的选择信号SELi。然后,当经过了设 定的曝光时间时,行扫描电路210提供与选择的块行对应的传输信号 TRG0i从而终止曝光。当从前一个块行开始经过了特定时间段时,开始 所述块行的各个曝光动作。通过该控制,以像素块230(8个像素)为单位 执行像素相加。
如上所述,在正常模式下,以像素行为单位执行曝光,而在像素相 加模式下,以块行为单位顺序执行曝光。
[事件检测单元的构成例]
图5是示出根据本技术的第一实施例的事件检测单元280的构成例 的框图。该事件检测单元280包括权重保持单元281、积分单元282、亮 度积分数据保持单元283、差分计算单元284和比较单元285。
权重保持单元281针对每一个相加数据保持用于乘以一个相加数据 的权重。例如,针对中心附近的一个相加数据,设定具有比周围的值更 大的值的权重。具有这种设置的测光法被称为中心加权测光法。注意, 摄像装置100可以执行除了中心加权测光法之外的其它测光技术,例如 多区域测光或点测光。
积分单元282对M个相加数据进行积分。在积分中,积分单元282 从权重保持单元281读取权重,并根据用户的设置执行加权相加。积分 单元282将进行了加权相加的数据作为亮度积分数据提供给差分计算单 元284、亮度积分数据保持单元283和曝光控制单元270。
亮度积分数据保持单元283保存作为过去亮度积分数据的亮度积分 数据。
差分计算单元284计算来自积分单元282的当前亮度积分数据与来 自亮度积分数据保持单元283的过去亮度积分数据之间的差值。差分计 算单元284将计算的差值提供给比较单元285。
比较单元285将该差值与预定阈值进行比较。该比较单元285将比 较结果作为检测结果DET提供给模式控制单元290。例如,在该差值超 过预定阈值的情况下,检测到被摄体中存在移动(换句话说,存在事件), 并且,在该差值未超过预定阈值的情况下,检测到被摄体中不存在移动。 注意,比较单元285是权利要求中描述的运动检测单元的示例。
另外,尽管权重保持单元281和积分单元282布置在事件检测单元 280中,但是这些部件也可以布置在曝光控制单元270中。在这种情况下, 事件检测单元280从曝光控制单元270接收亮度积分数据。
此外,尽管事件检测单元280根据当前亮度积分数据与过去亮度积 分数据之间的差值来检测是否存在被摄体的移动,但是事件检测单元280 不限于该配置。例如,事件检测单元280可以使用背景扣除法或比较过 去帧和当前帧的帧扣除法等来检测是否存在被摄体的移动,在背景扣除 法中,获取M个相加数据作为帧而不对这些相加数据进行积分并且将该 帧与背景帧进行比较。
此外,尽管事件检测单元280检测被摄体的移动作为事件,但是只 要可以使用相加数据检测事件,待检测的事件就不限于被摄体的移动。 例如,事件检测单元280可以执行图像识别以检测是否存在特定被摄体 (例如人)。
此外,当事件检测单元280检测到摄像装置100中没有移动时,模 式控制单元290可以将模式转换到像素相加模式。可替代地,事件检测 单元280可以聚焦于图像的一部分而不是整个图像上,以检测在图像的 该部分中是否存在变化。另外,事件检测单元280可以通过对每种颜色 的亮度数据进行积分来检测特定颜色有无变化。可替代地,事件检测单元280可以通过背景扣除法、帧减法等计算出移动体的移动速度,以检 测计算出的速度是否超过一定速度。
[模式控制单元的构成例]
图6是示出根据本技术的第一实施例的模式控制单元290的构成例 的框图。该模式控制单元290包括模式信号生成单元291和计数器292。
计数器292与垂直同步信号VSYNC同步地对计数器值CNT进行计 数。此外,计数器292根据复位信号RST将计数器值CNT改变为初始 值。
模式信号生成单元291基于检测结果DET和计数器值CNT生成模 式信号MODE。该模式信号生成单元291将生成的模式信号MODE提供 给行扫描电路210和开关213。
图7是示出根据本技术的第一实施例的模式信号生成单元291的动 作的示例的图。例如,在像素相加模式下设置“0”作为模式信号MODE, 并且在正常模式下设置“1”作为模式信号MODE。此外,在检测结果DET 中,例如,在没有事件的情况下设置“0”,并且在事件发生的情况下设置 “1”。
当模式信号MODE为“0”(像素相加模式)同时检测结果DET变为“1” (有事件)时,模式信号生成单元291将“1”(正常模式)设置为模式信号 MODE,并且将计数器值CNT初始化为“0”。
此外,当计数器值CNT变为等于或大于N(N是整数)同时模式信号 MODE为“1”(正常模式)时,模式信号生成单元291将“0”(像素相加模式) 设置为模式信号MODE。注意,当计数器值CNT为N时(换句话说,当 拍摄N个图像时),固态摄像器件200从正常模式转换到像素相加模式, 但是固态摄像器件200可以通过来自固态摄像器件200外部的微型计算 机等的触发信号(而不是拍摄的图像数量)而转换到像素相加模式。例 如,该触发信号是根据正常模式下拍摄的图像的分析结果、用户的操作 等而生成的。
图8是根据本技术的第一实施例的摄像装置100的状态转换图的示 例。摄像装置100的状态分为三种状态,即,初始状态610、像素相加模 式620和正常模式630。初始状态610是固态摄像器件200停止工作的状 态,而像素相加模式620是固态摄像器件200正在工作并执行像素相加 的状态。此外,正常模式630是固态摄像器件200正在工作并且在不执行像素相加的情况下进行摄像的状态。
在初始状态610下,当进行用于开始预定应用的开始操作时,摄像 装置100使固态摄像器件200工作并转换到像素相加模式620。
在像素相加模式620下,摄像装置100与垂直同步信号VSYNC同 步地通过像素相加获取亮度积分数据。然后,摄像装置100根据该亮度 积分数据检测是否存在事件。在发生事件的情况下,摄像装置100转换 到正常模式630。
在正常模式630下,摄像装置100在不执行像素相加的情况下获取 图像数据,在拍摄N个图像之后,转换到像素相加模式620。此外,在 像素相加模式620和正常模式630下,当进行用于终止应用的预定终止 操作时,摄像装置100使固态摄像器件200停止工作,并转换到初始状 态610。
[AD转换单元的构成例]
图9是示出根据本技术的第一实施例的AD转换单元260的构成例 的框图。在该AD转换单元260中,针对每个块列设置AD转换器261。
AD转换器261经由垂直信号线229从对应的块列获取模拟信号,并 且与预定的时钟信号CLK同步地执行AD转换。该AD转换器261在列 扫描电路212的控制下将经过AD转换的数据输出到开关213。
[DSP电路的构成例]
图10是示出根据本技术的第一实施例的DSP电路120的构成例的 框图。该DSP电路120包括去马赛克处理单元121和后期处理单元122。
去马赛克处理单元121对固态摄像器件200的RAW图像数据进行去 马赛克处理。这里,去马赛克处理是从每个像素的周边插入红色(R)、绿 色(G)和蓝色(B)这三种颜色中缺失的颜色的处理。去马赛克处理单元121 将去马赛克处理之后的图像数据作为YC图像数据提供给后期处理单元 122。
后期处理单元122对YC图像数据执行各种图像处理,例如白平衡 处理和滤波处理。该后期处理单元122经由总线150将处理后的YC图 像数据输出到显示单元130和记录单元170。
图11是示出根据本技术的第一实施例的被摄体图像500的示例的 图。如图11所示,跑步的人作为被摄体出现。
图12是示出根据本技术的第一实施例的相加数据和权重的分布的示 例的图。在图12中,a示出了由基于被摄体图像500生成的M个相加数 据构成的亮度分布数据510的示例。在图12中,b示出了权重分布的示 例。此外,图12中由虚线界定的每个部分表示与像素块对应的区域。
针对每个像素块,固态摄像器件200基于一个像素块的相加信号生 成相加数据。例如,从左上像素块的相加信号生成相加数据B00,并且 从与左上像素块相邻的两个像素块的相加信号生成相加数据B01和相加 数据B10。
此外,将比周围的值更大的值设为靠近中心的权重。然后,通过相 加数据和对应于该相加数据的权重之间的加权相加来计算亮度积分数 据。例如,将相加数据B00乘以相应的权重W00。将相加数据B01乘以 权重W01,并且将相加数据B10乘以权重W10。
图13是示出根据本技术的第一实施例的固态摄像器件200在像素相 加模式下的动作的示例的时序图。假设,在T0时刻处设定像素相加模式。
行扫描电路210在预定脉冲周期内将对应于第零个块行的复位信号 RST0控制为高电平。通过该控制,开始第零个块行的曝光。然后,在经 过了一定曝光时间的时刻T1处,行扫描电路210在脉冲周期内将对应于 第零个块行的所有传输信号TRG00至TRG07控制为导通(ON)状态。 通过该控制,终止第零个块行的曝光。
此外,行扫描电路210在从时刻T0至时刻T2的时段期间将对应于 第零个块行的选择信号SEL0控制为导通(ON)状态。通过该控制,读 取第零个块行的相加信号。
在时刻T2之后,顺序执行第一和后续的块行的曝光和读取。在每个 块行中,当从前一个块行的曝光和读取起经过了一段时间的时候,开始 曝光和读取。然后,与垂直同步信号VSYNC同步地多次执行所有块行 的读取。
图14是示出根据本技术的第一实施例的固态摄像器件200在正常模 式下的动作的示例的时序图。假设在时刻T0之后的时刻T10处检测到事 件并且设定正常模式。
行扫描电路210在预定脉冲周期内将对应于第0行像素的复位信号 RST0控制为高电平。通过该控制,第0行中的一些像素开始曝光。然后, 在经过了一定曝光时间的时刻T11处,行扫描电路210在脉冲周期内将 对应于第0行的传输信号TRG00控制为导通(ON)状态。通过该控制, 第0行中的一些像素终止曝光。
然后,在时刻T12处,行扫描电路210再次在预定脉冲周期内将复 位信号RST0控制为高电平,并且,在曝光周期过去之后的时刻T13处, 在脉冲周期内将传输信号TRG01控制为导通(ON)状态。通过该控制, 第0行中的剩余像素曝光。
此外,在从T0时刻开始直到第0行至第3行被读取的期间内,行扫 描电路210将对应于这些行的选择信号SEL0控制为导通ON状态。
在时刻T13之后,顺序执行第1行和后续行的曝光和读取。在每行 中,从前一行的曝光和读取开始经过一段时间后,开始曝光和读取。然 后,与垂直同步信号VSYNC同步地多次执行所有行的读取.
[摄像装置的动作的示例]
图15是示出根据本技术的第一实施例的摄像装置100的动作的示例 的流程图。例如,当执行预定的应用时,该动作开始。
首先,将摄像装置100转换到像素相加模式(步骤S901),并通过像 素相加获取亮度积分数据(步骤S902)。然后,基于获取的亮度积分数据, 摄像装置100判定是否已经发生预定事件(步骤S903)。在没有发生事件 的情况下(步骤S903:否),摄像装置100重复执行步骤S902和后续步骤。
另一方面,在发生了事件的情况下(步骤S903:是),摄像装置100 转换到正常模式,并将计数器值CNT初始化为“0”(步骤S904)。然后, 摄像装置100在不进行像素相加的情况下获取图像数据,并且递增计数 器值CNT(步骤S905)。摄像装置100判定计数器值CNT是否等于或大于 N(步骤S906)。在计数器值CNT小于N的情况下(步骤S906:否),摄像 装置100重复执行步骤S905和后续步骤。
另一方面,在计数器值CNT等于或大于N的情况下(步骤S906:是), 摄像装置100重复执行步骤S901和后续步骤。
如上所述,根据本技术的第一实施例,由于在检测到事件之前固态 摄像器件200通过像素相加生成相加数据,因此,与在不进行像素相加 的情况下一直进行摄像的情况相比,能够降低功耗。
<2.第二实施例>
在上述第一实施例中,固态摄像器件200执行曝光控制和事件检测。 然而,从减少固态摄像器件200的处理量的角度来看,可以采用以下配 置,其中,这些处理通过固态摄像器件200外部的部件(例如,DSP电路 120)来执行。根据第二实施例的这种摄像装置100与第一实施例的不同 之处在于,通过固态摄像器件200外部的电路执行曝光控制和事件检测。
图16是示出根据本技术的第二实施例的固态摄像器件200的构成例 的框图。第二实施例的该固态摄像器件200与第一实施例的不同之处在 于,固态摄像器件200不包括开关213、曝光控制单元270、事件检测单 元280和模式控制单元290。
图17是示出根据本技术的第二实施例的DSP电路120的构成例的 框图。第二实施例的该DSP电路120与第一实施例的DSP电路的不同之 处在于,DSP电路120还包括开关123、曝光控制单元124、事件检测单 元125和模式控制单元126。
在DSP电路120中的开关123、曝光控制单元124、事件检测单元 125和模式控制单元126具有与第一实施例的开关213、曝光控制单元 270、事件检测单元280和模式控制单元290类似的构成。注意,虽然曝 光控制单元124、事件检测单元125和模式控制单元126布置在DSP电 路120中,但是这些部件也可以布置在除了DSP电路120之外的电路中, 只要该电路位于固态摄像器件200外部即可。
如上所述,根据本技术的第二实施例,由于曝光控制单元124和事 件检测单元125设置在DSP电路120中,因此,与这些部件设置在固态 摄像器件200中的情况相比,能够减少固态摄像器件200的处理量。
<3.第三实施例>
在上述第一实施例中,先前设定的区域(例如,中心附近的区域)被重 点测光。然而,在被摄体正在移动的情况下,可能无法获得适当的测光 量。在这种情况下,希望对被摄体移动的区域进行重点测光。根据第三 实施例的这种摄像装置100与第一实施例的摄像装置的不同之处在于, 对被摄体移动的区域进行重点测光。
图18是示出根据本技术的第三实施例的事件检测单元280的构成例 的框图。根据第三实施例的该事件检测单元280与第一实施例的事件检 测单元的不同之处在于,事件检测单元280还包括相加数据保持单元 286、差分计算单元287和权重保持单元288。
相加数据保持单元286保持M个相加数据作为过去的相加数据。
差分计算单元287针对每个像素块计算来自开关213的当前相加数 据与相加数据保持单元286中的相应的相加数据之间的差值。在像素块 的数量为M的情况下,计算M个差值。差值越大(从不同的角度看,即 运动越大),差分计算单元287生成越大值的权重,并且将生成的权重保 存在权重保持单元288中。权重保持单元288保存由差分计算单元287 生成的权重。注意,差分计算单元287是权利要求中描述的差分获取单 元的示例。
此外,第三实施例的积分单元282在第一次测光中根据权重保持单 元281内的权重进行加权相加,并且在第二次以及后续的测光中根据权 重保持单元288内的权重进行加权相加。
图19是示出根据本技术的第三实施例的权重的分布的示例的图。在 图19中,亮区表示被摄体移动的区域。摄像装置100将被摄体移动的区 域的权重(例如,W24)设定为大于其他区域的权重(例如,W00)的值。利 用该设置,摄像装置100能够对被摄体移动的区域进行重点测光,并将 曝光量控制为适当的量。
如上所述,根据本技术的第三实施例,由于摄像装置100使用根据 当前的相加数据与过去的相加数据之间的差值的权重进行加权相加,因 此,可以对被摄体移动的区域进行重点测光。
注意,上述实施例示出了用于实施本技术的示例,并且实施例中的 事项与权利要求中的发明特定事项分别具有对应关系。同样地,权利要 求中的发明特定事项和本技术的实施例中用与权利要求中相同的名称表 示的事项分别具有对应关系。然而,本技术不限于这些实施例,并且可 以通过在不脱离其主旨的情况下对实施例进行各种修改来实现。
此外,以上实施例中描述的处理过程可以被视为具有这一系列过程 的方法,另外,可以被视为用于使计算机执行这一系列过程的程序,或 者可以被视为存储该程序的记录介质。作为该记录介质,例如,能够使 用光盘(CD:compact disc)、迷你盘(MD:minidisc)、数字通用盘(DVD: digital versatile disc)、存储卡、蓝光(Blu-ray,注册商标)盘等。
注意,本说明书中描述的效果仅仅作为示例,并且不被认为是受限 制的。可以还存在其它效果。
注意,本技术还能够如下构成。
(1)一种摄像装置,其包括:
像素阵列单元,所述像素阵列单元设置有多个传输晶体管,所述多 个传输晶体管用于将来自互不相同的光电转换器件的电荷传输至浮动扩 散层;
扫描电路,所述扫描电路在进行像素相加的像素相加模式下同时控 制所述多个传输晶体管传输所述电荷,并且在不进行像素相加的正常模 式下顺序地控制所述多个传输晶体管传输所述电荷;
事件检测单元,所述事件检测单元基于相加信号检测是否存在预定 事件并且生成检测结果,所述相加信号是在所述像素相加模式下生成的 模拟信号;以及
模式控制单元,所述模式控制单元基于所述检测结果设定所述像素 相加模式或所述正常模式。
(2)根据上面(1)所述的摄像装置,其还包括模数转换单元,所 述模数转换单元对所述相加信号进行模数转换并且作为相加数据输出。
(3)根据上面(2)所述的摄像装置,其中
在所述像素阵列单元中布置有预定数量的所述浮动扩散层,
所述摄像装置还包括曝光控制单元,所述曝光控制单元基于亮度积 分数据来控制所述像素阵列单元的曝光量,所述亮度积分数据是通过对 所述预定数量的所述相加数据进行积分而获得的。
(4)根据上面(3)所述的摄像装置,其中
所述事件检测单元将是否存在被摄体的移动作为是否存在所述预定 事件来进行检测。
(5)根据上面(4)所述的摄像装置,其中
所述事件检测单元包括:
亮度积分数据保持单元,其保持所述亮度积分数据作为过去的积分 数据;以及
运动检测单元,其根据新的亮度积分数据与所述过去的积分数据之 间的差值是否超过预定阈值来检测是否存在所述被摄体的移动。
(6)根据上面(5)所述的摄像装置,其中
所述事件检测单元还包括:
相加数据保持单元,其保持所述预定数量的相加数据,作为过去的 相加数据;以及
差分获取单元,其获取新的相加数据和与所述新的相加数据对应的 所述过去的相加数据之间的差值,并生成对应于所述差值的权重,并且
所述亮度积分数据是所述相加数据和与所述相加数据对应的所述权 重的加权相加值。
(7)根据上面的(1)至(6)中任一项所述的摄像装置,其中
所述像素阵列单元在所述正常模式下生成包括所述模拟信号的图像 信号,并且
所述模式控制单元在检测到所述预定事件已发生的情况下设定所述 正常模式,并且在生成一定数量的所述图像信号的情况下设定所述像素 相加模式。
(8)根据上面的(1)至(7)中任一项所述的摄像装置,其中
所述像素阵列单元、所述扫描电路、所述事件检测单元和所述模式 控制单元布置在固态摄像器件中。
(9)根据上面的(1)至(8)中任一项所述的摄像装置,其中
所述像素阵列单元和所述扫描电路布置在固态摄像器件中,并且
所述事件检测单元和所述模式控制单元布置在所述固态摄像器件外 部。
(10)一种摄像装置的控制方法,其包括:
扫描步骤:在设置有多个传输晶体管的像素阵列单元中,在进行像 素相加的像素相加模式下同时控制所述多个传输晶体管传输电荷,并且 在不进行像素相加的正常模式下顺序地控制所述多个传输晶体管传输所 述电荷,所述多个传输晶体管用于将来自互不相同的光电转换器件的所 述电荷传输至浮动扩散层;
事件检测步骤:基于相加信号检测是否存在预定事件并且生成检测 结果,所述相加信号是在所述像素相加模式下生成的模拟信号;以及
模式控制步骤:基于所述检测结果设定所述像素相加模式或所述正 常模式。
附图标记列表
100 摄像装置
110 光学单元
120 DSP电路
121 去马赛克处理单元
122 后期处理单元
123,213 开关
124,270 曝光控制单元
125,280 事件检测单元
126,290 模式控制单元
130 显示单元
140 操作单元
150 总线
160 电源单元
170 记录单元
180 帧存储器
200 固态摄像器件
210 行扫描电路
211 时序控制单元
212 列扫描电路
220 像素阵列单元
230 像素块
231,232,235,236,242,243,247,248 传输晶体管
233,234,237,238,245,246,249,250 光电转换器件
239 复位晶体管
240 浮动扩散层
241 放大晶体管
244 选择晶体管
260 AD转换单元
261 AD转换器
281,288 权重保持单元
282 积分单元
283 亮度积分数据保持单元
284,287 差分计算单元
285 比较单元
286 相加数据保持单元
291 模式信号生成单元
292 计数器

Claims (7)

1.一种摄像装置,其包括:
像素阵列单元,所述像素阵列单元设置有多个传输晶体管,所述多个传输晶体管用于将来自互不相同的光电转换器件的电荷传输至浮动扩散层,其中,在所述像素阵列单元中布置有预定数量的所述浮动扩散层;
扫描电路,所述扫描电路在进行像素相加的像素相加模式下同时控制所述多个传输晶体管传输所述电荷,并且在不进行像素相加的正常模式下顺序地控制所述多个传输晶体管传输所述电荷;
模数转换单元,所述模数转换单元对相加信号进行模数转换以作为相加数据输出,所述相加信号是在所述像素相加模式下生成的模拟信号;
事件检测单元,所述事件检测单元基于所述相加数据检测是否存在预定事件并且生成检测结果;
曝光控制单元,所述曝光控制单元基于亮度积分数据来控制所述像素阵列单元的曝光量,所述亮度积分数据是通过对所述预定数量的所述相加数据进行积分而获得的;以及
模式控制单元,所述模式控制单元基于所述检测结果设定所述像素相加模式或所述正常模式,
其中,所述事件检测单元包括:
亮度积分数据保持单元,其保持所述亮度积分数据作为过去的积分数据;
相加数据保持单元,其保持所述预定数量的所述相加数据,作为过去的相加数据;以及
差分获取单元,其获取新的相加数据和与所述新的相加数据对应的所述过去的相加数据之间的差值,并生成对应于所述差值的权重,并且
所述亮度积分数据是所述相加数据和与所述相加数据对应的所述权重的加权相加值。
2.根据权利要求1所述的摄像装置,其中
所述事件检测单元将是否存在被摄体的移动作为是否存在所述预定事件来进行检测。
3.根据权利要求2所述的摄像装置,其中
所述事件检测单元还包括:
运动检测单元,其根据新的亮度积分数据与所述过去的积分数据之间的差值是否超过预定阈值来检测是否存在所述被摄体的移动。
4.根据权利要求1至3中任一项所述的摄像装置,其中
所述像素阵列单元在所述正常模式下生成包括所述模拟信号的图像信号,并且
所述模式控制单元在检测到所述预定事件已发生的情况下设定所述正常模式,并且在生成一定数量的所述图像信号的情况下设定所述像素相加模式。
5.根据权利要求1至3中任一项所述的摄像装置,其中
所述像素阵列单元、所述扫描电路、所述事件检测单元和所述模式控制单元布置在固态摄像器件中。
6.根据权利要求1至3中任一项所述的摄像装置,其中
所述像素阵列单元和所述扫描电路布置在固态摄像器件中,并且
所述事件检测单元和所述模式控制单元布置在所述固态摄像器件外部。
7.一种摄像装置的控制方法,其包括:
扫描步骤:在设置有多个传输晶体管的像素阵列单元中,在进行像素相加的像素相加模式下同时控制所述多个传输晶体管传输电荷,并且在不进行像素相加的正常模式下顺序地控制所述多个传输晶体管传输所述电荷,所述多个传输晶体管用于将来自互不相同的光电转换器件的所述电荷传输至浮动扩散层,其中,在所述像素阵列单元中布置有预定数量的所述浮动扩散层;
模数转换步骤:对相加信号进行模数转换以作为相加数据输出,所述相加信号是在所述像素相加模式下生成的模拟信号;
事件检测步骤:基于所述相加数据检测是否存在预定事件并且生成检测结果;
曝光控制步骤:基于亮度积分数据来控制所述像素阵列单元的曝光量,所述亮度积分数据是通过对所述预定数量的所述相加数据进行积分而获得的;以及
模式控制步骤:基于所述检测结果设定所述像素相加模式或所述正常模式,
其中,所述事件检测步骤包括:
保持所述亮度积分数据作为过去的积分数据;
保持所述预定数量的所述相加数据,作为过去的相加数据;以及
获取新的相加数据和与所述新的相加数据对应的所述过去的相加数据之间的差值,并生成对应于所述差值的权重,并且
所述亮度积分数据是所述相加数据和与所述相加数据对应的所述权重的加权相加值。
CN201780036255.5A 2016-08-01 2017-05-16 摄像装置及摄像装置的控制方法 Active CN109328457B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016150946A JP2018022935A (ja) 2016-08-01 2016-08-01 撮像装置、および、撮像装置の制御方法
JP2016-150946 2016-08-01
PCT/JP2017/018270 WO2018025465A1 (ja) 2016-08-01 2017-05-16 撮像装置、および、撮像装置の制御方法

Publications (2)

Publication Number Publication Date
CN109328457A CN109328457A (zh) 2019-02-12
CN109328457B true CN109328457B (zh) 2021-12-14

Family

ID=61073006

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780036255.5A Active CN109328457B (zh) 2016-08-01 2017-05-16 摄像装置及摄像装置的控制方法

Country Status (6)

Country Link
US (1) US11025822B2 (zh)
EP (1) EP3493526B1 (zh)
JP (1) JP2018022935A (zh)
KR (1) KR102327355B1 (zh)
CN (1) CN109328457B (zh)
WO (1) WO2018025465A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI815841B (zh) 2018-03-15 2023-09-21 日商尼康股份有限公司 控制裝置、控制方法以及程式
JP2019193184A (ja) * 2018-04-27 2019-10-31 ソニーセミコンダクタソリューションズ株式会社 撮像装置及び撮像装置の駆動方法
JP2020010323A (ja) * 2018-07-09 2020-01-16 シャープ株式会社 撮像装置
JP6635222B1 (ja) 2018-08-31 2020-01-22 ソニー株式会社 撮像装置、撮像システム、撮像方法および撮像プログラム
JP2020088676A (ja) * 2018-11-28 2020-06-04 ソニーセミコンダクタソリューションズ株式会社 センサ及び制御方法
JP7222736B2 (ja) 2019-02-04 2023-02-15 キヤノン株式会社 撮像素子及びその制御方法、及び撮像装置
JP7325211B2 (ja) * 2019-04-09 2023-08-14 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
JP7433792B2 (ja) 2019-07-19 2024-02-20 キヤノン株式会社 撮像装置およびその制御方法
JP7433793B2 (ja) 2019-07-19 2024-02-20 キヤノン株式会社 撮像装置およびその制御方法
US11343454B2 (en) * 2019-08-16 2022-05-24 Semiconductor Components Industries, Llc Imaging systems and methods for performing pixel binning and variable integration for analog domain regional feature extraction
JP7446091B2 (ja) 2019-11-21 2024-03-08 キヤノン株式会社 撮像装置、撮像装置の制御方法
CN114902648A (zh) * 2020-01-30 2022-08-12 索尼半导体解决方案公司 固态成像装置、电子设备和成像系统
EP3962069A1 (en) * 2020-08-31 2022-03-02 IniVation AG Event sensor and method for generating a signal stream comprising event data
EP4322516A1 (en) * 2021-04-09 2024-02-14 Sony Semiconductor Solutions Corporation Information processing device and information processing method
FR3131163B1 (fr) * 2021-12-21 2024-01-05 Commissariat Energie Atomique Système d’observation et procédé d’observation associé

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0946596A (ja) * 1995-08-02 1997-02-14 Canon Inc 固体撮像装置と画像撮像装置
CN101304489A (zh) * 2008-06-20 2008-11-12 北京中星微电子有限公司 一种自动曝光方法及装置
CN101552873A (zh) * 2008-04-04 2009-10-07 索尼株式会社 成像设备、图像处理设备以及曝光控制方法
CN104333710A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 相机曝光方法、装置及设备
EP3046320A1 (en) * 2015-01-19 2016-07-20 Thomson Licensing Method for generating an hdr image of a scene based on a tradeoff between brightness distribution and motion

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004274533A (ja) 2003-03-11 2004-09-30 Sony Corp 動き検出装置、動き検出方法および撮像装置
JP4277216B2 (ja) 2005-01-13 2009-06-10 ソニー株式会社 撮像装置及び撮像結果の処理方法
US7714890B2 (en) 2005-04-26 2010-05-11 Olympus Imaging Corp. Image pickup apparatus and method for controlling pixel reading using a shake determination
JP2010171666A (ja) 2009-01-21 2010-08-05 Panasonic Corp 固体撮像素子の駆動方法および固体撮像素子
JP2012010055A (ja) * 2010-06-24 2012-01-12 Sony Corp 固体撮像装置
JP2013115793A (ja) * 2011-12-01 2013-06-10 Canon Inc 撮像装置
US9936132B2 (en) * 2012-10-26 2018-04-03 The Regents Of The University Of Michigan CMOS image sensors with feature extraction
JP5604700B2 (ja) * 2012-10-29 2014-10-15 弘一 関根 動き検出用撮像装置、動き検出カメラおよび動き検出システム
US9674469B2 (en) * 2012-12-25 2017-06-06 Sony Corporation Solid-state imaging device, method of driving the same, and electronic apparatus
JP6070283B2 (ja) * 2013-03-04 2017-02-01 株式会社リコー 撮像装置、露出制御方法およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0946596A (ja) * 1995-08-02 1997-02-14 Canon Inc 固体撮像装置と画像撮像装置
CN101552873A (zh) * 2008-04-04 2009-10-07 索尼株式会社 成像设备、图像处理设备以及曝光控制方法
CN101304489A (zh) * 2008-06-20 2008-11-12 北京中星微电子有限公司 一种自动曝光方法及装置
CN104333710A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 相机曝光方法、装置及设备
EP3046320A1 (en) * 2015-01-19 2016-07-20 Thomson Licensing Method for generating an hdr image of a scene based on a tradeoff between brightness distribution and motion

Also Published As

Publication number Publication date
KR20190029615A (ko) 2019-03-20
US20190268532A1 (en) 2019-08-29
US11025822B2 (en) 2021-06-01
JP2018022935A (ja) 2018-02-08
EP3493526A1 (en) 2019-06-05
EP3493526B1 (en) 2023-06-28
CN109328457A (zh) 2019-02-12
WO2018025465A1 (ja) 2018-02-08
EP3493526A4 (en) 2019-07-24
KR102327355B1 (ko) 2021-11-16

Similar Documents

Publication Publication Date Title
CN109328457B (zh) 摄像装置及摄像装置的控制方法
US9319614B2 (en) Image pickup device with a group of focus detection pixels associated with a dedicated readout circuit and image pickup apparatus including the image pickup device
US9160934B2 (en) Image capturing apparatus obtaining high-exposure and low-exposure images, and method for controlling the same
CN101795345B (zh) 摄像装置、摄像方法
JP6929403B2 (ja) 撮像素子及び撮像装置
JP4948090B2 (ja) 撮像装置及び駆動制御方法
JP5455798B2 (ja) 画像処理装置
US10771724B2 (en) Image capturing apparatus
US10063762B2 (en) Image sensor and driving method thereof, and image capturing apparatus with output signal control according to color
US9948850B2 (en) Image sensor, control method for the same, and image capture apparatus
US10027919B2 (en) Signal processing apparatus, image capturing apparatus, control apparatus, signal processing method, and control method
JP6872956B2 (ja) 撮像システム及び撮像システムの制御方法
CN104301602A (zh) 摄像元件、焦点检测装置
US20160105623A1 (en) Image sensor and image capturing apparatus
CN105407299A (zh) 摄像装置及控制摄像装置的方法
JP5452269B2 (ja) 撮像装置
JP2009124238A (ja) 撮像装置及びそのフリッカ検出方法
JP2008072512A (ja) 撮像装置及びその制御方法、撮像システム
JP6393087B2 (ja) 撮像素子及び撮像装置
US11368610B2 (en) Image capture apparatus and control method therefor
JP5202713B2 (ja) 撮像装置及びその制御方法
JP2011114786A (ja) 固体撮像装置およびカメラシステム
JP2010141730A (ja) 撮像装置及びその制御方法
JP2011229040A (ja) 固体撮像装置および電子カメラ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant