CN109151265B - 摄像设备、控制方法和存储介质 - Google Patents

摄像设备、控制方法和存储介质 Download PDF

Info

Publication number
CN109151265B
CN109151265B CN201810680812.3A CN201810680812A CN109151265B CN 109151265 B CN109151265 B CN 109151265B CN 201810680812 A CN201810680812 A CN 201810680812A CN 109151265 B CN109151265 B CN 109151265B
Authority
CN
China
Prior art keywords
image
display
period
readout
exposure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810680812.3A
Other languages
English (en)
Other versions
CN109151265A (zh
Inventor
玉木嘉人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN109151265A publication Critical patent/CN109151265A/zh
Application granted granted Critical
Publication of CN109151265B publication Critical patent/CN109151265B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/62Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels
    • H04N25/626Reduction of noise due to residual charges remaining after image readout, e.g. to remove ghost images or afterimages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/42Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • H04N25/533Control of the integration time by using differing integration times for different sensor regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/703SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75Circuitry for providing, modifying or processing image signals from the pixel array

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

本发明提供一种摄像设备、控制方法和存储介质。提供一种摄像设备。摄像控制单元获取需要不同时间段来读出由于曝光而累积的电荷的第一图像和第二图像。显示控制单元控制从图像传感器读出的图像在显示单元上的显示。与第一图像相比,第二图像具有较低的分辨率并且需要较短的读出时间段。在使显示单元循环显示第一图像和第二图像的情况下,显示控制单元基于用于读出第一图像的时间段和用于读出第二图像的时间段之间的差,来设置从第二图像的读出到第二图像在显示单元上的显示开始的第一时间段。

Description

摄像设备、控制方法和存储介质
技术领域
本发明涉及一种摄像设备、控制方法和存储介质。
背景技术
诸如数字照相机等的摄像设备有时设置有在针对主被摄体进行采用摄像面相位差方式的自动焦点检测(摄像面相位差AF)的同时连续拍摄静止图像的连拍功能。在执行该连拍功能期间,摄像设备顺次读出要在背面监视器等上作为实时取景(LV)图像显示的图像、以及来自图像传感器的静止图像记录用的图像,并且进行实时显示和记录。
已知如下技术,其中该技术用于将在连拍期间进行焦点检测时从图像传感器获取到的图像作为LV图像显示在监视器画面上的情况下提高主被摄体的追踪的技术。日本特开2015-144346提出了如下技术,其中该技术用于根据帧频来进行对是将具有不同分辨率的图像依次显示在监视器上还是仅将高分辨率图像显示在监视器上的切换。根据日本特开2015-144346,即使以低帧频进行连拍,也可以缩短LV图像的显示时间段之间的时间间隔,并且提高取景期间对主被摄体的跟踪。
从图像传感器获取图像数据所需的时间根据分辨率而不同。因此,从曝光开始定时到获取完成定时的图像获取时间段根据图像数据的分辨率而变化。在日本特开2015-144346中,具有不同分辨率的图像数据以低帧频依次显示,因此图像获取时间在各图像数据之间将有所不同,并且将使用以不均等的时间间隔所获取到的图像数据来进行LV显示,这可能使用户有不协调感。
发明内容
本发明是有鉴于上述情形而作出的,并且提供用于在顺次显示从曝光开始到获取完成需要不同时间段的图像时减轻用户感觉到的不协调感的技术。
根据本发明的第一方面,提供一种摄像设备,包括:图像传感器;摄像控制单元,其被配置为能够通过对使用所述图像传感器执行的曝光和读出进行控制,来获取用于读出由于曝光所累积的电荷所需的时间段不同的第一图像和第二图像;以及显示控制单元,其被配置为对从所述图像传感器读出的图像在显示单元上的显示进行控制,其中,与所述第一图像相比,所述第二图像具有较低的分辨率并且需要较短的读出时间段,以及在使所述显示单元循环显示所述第一图像和所述第二图像的情况下,所述显示控制单元基于用于读出所述第一图像的时间段和用于读出所述第二图像的时间段之间的差,来设置从所述第二图像的读出到所述第二图像在所述显示单元上的显示开始的第一时间段。
根据本发明的第二方面,提供一种控制方法,其由包括图像传感器的摄像设备来执行,所述控制方法包括:通过对使用所述图像传感器执行的曝光和读出进行控制,来获取用于读出由于曝光所累积的电荷所需的时间段不同的第一图像和第二图像;以及对从所述图像传感器读出的图像在显示单元上的显示进行控制,其中,与所述第一图像相比,所述第二图像具有较低的分辨率并且需要较短的读出时间段,以及在所述控制中,在使所述显示单元循环显示所述第一图像和所述第二图像的情况下,基于用于读出所述第一图像的时间段和用于读出所述第二图像的时间段之间的差,来设置从所述第二图像的读出到所述第二图像在所述显示单元上的显示开始的第一时间段。
根据本发明的第三方面,提供一种计算机可读存储介质,其存储用于使计算机执行控制方法的程序,所述控制方法包括:通过对使用图像传感器执行的曝光和读出进行控制,来获取用于读出由于曝光所累积的电荷所需的时间段不同的第一图像和第二图像;以及
对从所述图像传感器读出的图像在显示单元上的显示进行控制,其中,与所述第一图像相比,所述第二图像具有较低的分辨率并且需要较短的读出时间段,以及在所述控制中,在使所述显示单元循环显示所述第一图像和所述第二图像的情况下,基于用于读出所述第一图像的时间段和用于读出所述第二图像的时间段之间的差,来设置从所述第二图像的读出到所述第二图像在所述显示单元上的显示开始的第一时间段。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是示出摄像设备的结构的框图。
图2是示出图像传感器122的像素阵列的图。
图3是由照相机主体120所执行的连拍处理的流程图。
图4是传统连拍处理的时序图。
图5是根据第一实施例的连拍处理的时序图。
图6是根据第二实施例的连拍处理的时序图。
具体实施方式
在下文中,将参考附图来描述本发明的实施例。应该注意,本发明的技术范围由权利要求限定,并且不限于以下各实施例。此外,并非实施例中描述的方面的所有组合对于本发明都是必需的。此外,在各实施例中描述的方面可以适当地组合。
此外,为了便于本发明的理解和描述,实施例具有具体和特定的结构,但是本发明并不局限于这种特定结构。例如,尽管下面将描述将本发明应用于镜头可更换型单镜头反光数字照相机的实施例,但是本发明还可以应用于镜头不可更换型数字照相机或摄像机。此外,本发明可以在设置有照相机的任何电子设备中实现,例如,该电子设备的示例包括移动电话、个人计算机(膝上型计算机、平板终端或台式计算机等)或游戏机等。
第一实施例
摄像设备(镜头单元)的结构的描述
图1是示出具有照相机系统的形式的摄像设备的结构的框图,其中照相机系统包括可更换多个拍摄透镜的照相机主体和拍摄透镜。本实施例的照相机系统(摄像设备)是镜头可更换型单镜头反光照相机,并且具有照相机主体120和包括拍摄透镜的镜头单元100。镜头单元100经由图1的中央处的虚线表示的安装件M而安装在照相机主体120上。
镜头单元100具有光学系统(第一透镜组101、光圈102、第二透镜组103和第三透镜组(调焦透镜104))以及驱动/控制系统。第一透镜组101设置在镜头单元100的前端,并以在光轴方向OA上可移动的方式被保持。光圈102具有用于调节摄像期间的光量的功能,并且具有作为用于控制静止图像拍摄期间的曝光时间段的机械快门的功能。光圈102和第二透镜组103可在光轴方向OA上一体地移动,并通过与第一透镜组101连动移动而实现变焦功能。调焦透镜104也在光轴方向OA上可移动,并且镜头单元100聚焦的被摄体距离(焦距)根据位置而改变。可以通过控制调焦透镜104在光轴方向OA上的位置来进行调节镜头单元100的焦点距离的焦点调节。
驱动/控制系统具有变焦致动器111、光圈致动器112、调焦致动器113、变焦驱动电路114、光圈驱动电路115、调焦驱动电路116、镜头MPU 117(处理器)和镜头存储器118。
变焦驱动电路114使用变焦致动器111沿光轴方向OA驱动第一透镜组101和第二透镜组103,并控制镜头单元100的光学系统的视角。光圈驱动电路115使用光圈致动器112驱动光圈102,并且控制光圈102的开口大小和开闭光圈102的操作。调焦驱动电路116使用调焦致动器113沿光轴方向OA驱动调焦透镜104,并且控制镜头单元100的光学系统的焦距。此外,调焦驱动电路116使用调焦致动器113来检测调焦透镜104的当前位置。
镜头MPU 117进行与镜头单元100有关的整体计算和控制,并控制变焦驱动电路114、光圈驱动电路115和调焦驱动电路116。此外,镜头MPU 117通过安装件M而连接到照相机MPU 125,并且通信命令和数据。例如,镜头MPU 117检测调焦透镜104的位置,并且响应于来自照相机MPU 125的请求来通信透镜位置信息。该透镜位置信息包括诸如调焦透镜104在光轴方向OA上的位置、在光学系统不移动的状态下出射光瞳在光轴方向OA上的位置和直径、以及用于限制出射光瞳在光轴方向OA上的光束的透镜框的位置和直径等的信息。此外,镜头MPU 117响应于来自照相机MPU 125的请求而控制变焦驱动电路114、光圈驱动电路115和调焦驱动电路116。将摄像面相位差AF所需的光学信息预先存储在镜头存储器118中。例如,镜头MPU 117通过执行存储在内置非易失性存储器或镜头存储器118中的程序来控制镜头单元100的操作。
摄像设备(照相机主体)的结构的说明
照相机主体120具有光学系统(光学低通滤波器121和图像传感器122)以及驱动/控制系统。光学低通滤波器121减少拍摄图像的伪色和摩尔纹。图像传感器122包括CMOS图像传感器和周围电路,并在水平方向上配置m个像素且在垂直方向上配置n个像素(n和m是2以上的整数)。本实施例的图像传感器122具有光瞳分割功能,并且可以使用具有视差的图像数据来进行摄像面相位差AF。
驱动/控制系统具有图像传感器驱动电路123、图像处理电路124、照相机MPU 125(处理器)、显示单元126、操作开关组127、存储器128和摄像面相位差焦点检测单元129。图像处理电路124根据从图像传感器122输出的图像数据来生成焦点检测信号以及用于显示和记录的图像数据。
图像传感器驱动电路123控制图像传感器122的操作,并且对所获取的图像数据进行A/D转换,并将所得到的图像数据发送到照相机MPU 125。图像处理电路124对由图像传感器122获取的图像数据执行在数字照相机中进行的一般图像处理,诸如伽马转换、白平衡调节处理、颜色插值处理和压缩编码处理等。
照相机MPU 125进行与照相机主体120有关的整体计算和控制,并且控制图像传感器驱动电路123、图像处理电路124、显示单元126、操作开关组127、存储器128和摄像面相位差焦点检测单元129。照相机MPU 125经由安装件M而连接到镜头MPU 117,并且将命令和数据通信到镜头MPU 117。照相机MPU 125向镜头MPU 117发出镜头位置获取请求,处于预定驱动量的光圈、调焦透镜、变焦驱动请求,以及用于获取镜头单元100固有的光学信息的请求等。照相机MPU 125包括存储用于控制照相机主体120的操作的程序的ROM 125a,存储变量的RAM 125b以及存储各种参数的EEPROM 125c。
显示单元126由LCD等构成,并显示与照相机主体120的拍摄模式有关的信息、拍摄前的预览图像和拍摄后的确认图像、以及焦点检测时的聚焦状态图像等。操作开关组127由电源开关、释放(拍摄触发)开关、变焦操作开关和拍摄模式选择开关等构成。存储器128是可移除的闪速存储器,并记录拍摄图像。
摄像面相位差焦点检测单元129基于由图像处理电路124获得的摄像面相位差AF信号来进行通过摄像面相位差AF的焦点检测处理。具体而言,图像处理电路124生成由穿过拍摄光学系统的一对光瞳区域的光束形成的一对图像数据作为摄像面相位差AF信号,并且摄像面相位差焦点检测单元129基于这对图像数据的偏移量来检测焦点偏移量(散焦量)。以这种方式,本实施例的摄像面相位差焦点检测单元129在无需使用专用AF传感器的情况下,基于来自图像传感器122的输出来进行摄像面相位差AF。
焦点检测操作的描述(摄像面相位差AF)
将参考图2来详细描述摄像面相位差焦点检测单元129的操作。图2是示出本实施例中的图像传感器122的像素阵列的图,并且示出从镜头单元100侧观看具有二维C-MOS区域传感器的垂直(Y方向)6行和水平(X方向)8列的范围的状态。图像传感器122设置有采用拜尔阵列的滤色器。在本实施例的拜耳阵列中,按照从左侧起的顺序在X方向上的奇数行的像素中交替配置绿色(G)滤色器和红色(R)滤色器,并且按照从左侧起的顺序在X方向上的偶数行的像素中交替配置蓝色(B)滤色器和绿色(G)滤色器。在像素211中,由附图标记211i表示的圆代表片上微透镜,并且配置在片上微透镜211i内部的多个矩形(附图标记211a和211b)各自代表光电转换部。
本实施例的图像传感器122具有接收分别穿过拍摄光学系统的不同部分光瞳区域的光束的第一焦点检测像素和第二焦点检测像素。注意,本实施例具有如下配置:图像传感器122中的所有像素的光电转换部各自在X方向上被分割成两个区域,并且可以独立读出分割区域之一的光电转换信号以及两个光电转换信号的总和。然而,可以是光电转换部各自可以在X方向和Y方向上被分割成多个部分的结构。此外,关于独立读出的信号,获得两个光电转换信号的总和与一个分割区域的光电转换信号之间的差,由此可以获得与在另一光电转换区域中获得的信号对应的信号。这些分割区域的光电转换信号通过后述的方法而在相位差焦点检测中使用,并且可以生成由具有视差信息的多个图像构成的3D(3维)图像。另一方面,两个光电转换信号的总和用作正常拍摄图像。
在此,将描述摄像面相位差AF信号。在本实施例中,图2所示的片上微透镜211i和分割的光电转换部211a和211b对拍摄光学系统的出射光束进行光瞳分割。然后,关于配置在同一像素行中的预定范围内的多个像素211,将通过连接和组织来自光电转换部211a的输出而获得的图像设置为摄像面相位差AF用的图像A(AF用的图像A)。此外,将通过连接和组织来自光电转换部211b的输出而获得的图像设置为摄像面相位差AF用的图像B(AF用的图像B)。将通过将包括在滤色器的单位阵列中的绿色、红色、蓝色和绿色输出相加而计算的伪亮度(Y)信号用作光电转换部211a和211b的输出。然而,可以针对红色、蓝色和绿色中的各种颜色来组织AF用的图像A和AF用的图像B。通过经由相关操作检测以这种方式生成的AF用的图像A和AF用的图像B之间的相对图像偏移量,可以检测预定区域的焦点偏移量(散焦量)。在本实施例中,假设从图像传感器122读出来自光电转换部之一的输出和来自两个光电转换部的输出的总和。例如,如果读出光电转换部211a的输出和光电转换部211a和211b的输出的总和,则通过从总和减去光电转换部211a的输出而获获取到光电转换部211b的输出。因此,可以获得AF用的图像A和AF用的图像B这两者,并且可以实现摄像面相位差AF。例如,在日本特开2004-134867中公开了这种图像传感器,因此将省略其进一步的详细描述。
注意,尽管这里作为一个示例描述了出射光瞳在水平方向上被分割成两个区域的结构,但是可以是如下结构:针对图像传感器122中的一些像素,出射光瞳在垂直方向上被分割成两个区域。此外,可以是如下结构:可以在水平方向和垂直方向这两者上都对出射光瞳进行分割。通过设置出射光瞳在垂直方向上被分割的像素,不仅可以在水平方向上而且还可以在垂直方向上进行与被摄体的对比度相对应的摄像面相位差AF。
如上所述,图像传感器122不仅具有摄像功能,还可以用作焦点检测设备。注意,作为焦点检测方法,设置出射光瞳被分割并且接收光束的焦点检测像素,因此可以进行摄像面相位差AF。
连拍处理
接着,将参考图3来描述由照相机主体120执行的连拍处理。在图3的连拍处理中,照相机主体120交替地获取并显示记录图像和AF图像。AF图像的分辨率比记录图像低。因此,针对AF图像的从曝光开始到获取完成所需的时间段比针对记录图像的从曝光开始到获取完成所需的时间段短。换句话说,与记录图像(静止图像)相比,AF图像(LV图像)需要更短的时间段来读出由于曝光而在图像传感器122中累积的电荷。因此,即使记录图像和AF图像的曝光时间段大致相同,图像数据的读出时间段也根据分辨率(读出行数的差等)而不同。
注意,本实施例的连拍处理中所获取并显示的图像不限于记录图像和AF图像,并且仅需要包括从曝光开始到获取完成需要不同时间段的至少两种类型的图像。例如,可以是如下结构:如果在显示图像的依次显示期间(LV显示期间)指示静止图像的连续获取,则交替显示记录图像和LV显示图像。为了减少在获取LV显示图像的情况下的处理负荷,与获取记录图像时所累积/读出的行相比,照相机主体120通过对图像传感器122的累积/读出行进行间隔剔除或将读出行进行相加来获取图像。因此,即使LV显示图像具有与记录图像(静止图像)相同的曝光时间段,LV显示图像也需要比记录图像更短的从曝光开始到获取完成的时间段。即,对于AF图像(LV图像),从曝光结束到读出完成所需的时间段比记录图像(静止图像)短。如果采用这样的结构,则可以是图像传感器122不设置焦点检测用的像素的结构。
此外,本实施例不限于交替地获取并显示记录图像和AF图像的结构。例如,照相机主体120可以在一个记录图像的获取之后获取两个以上的AF图像。
图3是由照相机主体120执行的连拍处理的流程图。在该流程图中,除非另有说明,否则通过照相机MPU 125根据ROM 125a中所存储的程序和与镜头MPU 117的通信控制照相机主体120的各单元来实现步骤的处理。
在步骤S301中,照相机MPU 125等待用于开始连拍的指示,并在被指示开始连拍时,照相机125MPU使处理进入步骤S302。例如,用户可以通过操作操作开关组127来指示照相机主体120开始连拍。在步骤S302中,照相机MPU 125设置诸如快门第二时间Tv和光圈值F等的拍摄条件。在步骤S303中,照相机MPU 125确定用于显示记录图像和AF图像的定时。注意,可以采用如下结构:例如,作为在未指示开始连拍的情况下的操作,仅连续显示稍后将描述的AF图像(LV图像)或记录图像(静止图像)。
这里,将参考图4和5来描述步骤S303的详细处理。图4示出传统连拍处理的时序图,以及图5示出根据第一实施例的连拍处理的时序图。
在图4和图5中,阴影块表示与记录图像有关的处理,以及白色块表示与AF图像有关的处理。Tr1和Tr2分别表示记录图像和AF图像的曝光、读出和图像获取的时间段(从曝光开始到获取完成所需的时间段)。tr1和tr1'表示记录图像的曝光开始时刻,以及tr2表示AF图像的曝光开始时刻。td1和td1'表示记录图像的显示开始时刻,以及td2表示AF图像的显示开始时刻。注意,在本实施例中,调整从图像数据的曝光开始到图像数据的读出完成所需的时间段的重心(换句话说,曝光重心),以使其位于对于记录图像和对于AF图像的大致相等间隔的位置。这是为了防止例如在被摄体是移动体的情况下、由于从曝光开始到读出所需的时间段的差而导致显示单元126上显示的被摄体的运动不规律地改变。
此外,在图4中,Td1_0表示记录图像的显示时间段,以及Td2_0表示AF图像的显示时间段。在图5中,Td1表示记录图像的显示时间段,以及Td2表示AF图像的显示时间段。图5中的ΔTd1表示记录图像的显示延迟时间段(从记录图像的获取完成到记录图像的显示开始的时间段),以及ΔTd2表示AF图像的显示延迟时间段(从AF图像的获取完成到AF图像的显示开始的时间段)。注意,尽管在图5的示例中ΔTd1=0,但是本实施例不限于ΔTd1=0。图5中的t11到t18各自表示时间。注意,尽管图5中示出时间t11到时间t18,但是如果在稍后将描述的步骤S308中判断为继续连拍,则连拍处理在时间t18以后也继续。此外,在本实施例中,尽管可以使用驱动图像传感器122的情况下的垂直同步信号的1V时间段作为一个单位来控制与各图像的显示有关的延迟时间段,但是还可以以其它时间段为基准来设置延迟时间。
在步骤S303中,照相机MPU 125确定记录图像和AF图像的显示定时。更具体地,照相机MPU 125确定记录图像的显示延迟时间段ΔTd1、AF图像的显示延迟时间段ΔTd2、记录图像的显示时间段Td1以及AF图像的显示时间段Td2。注意,在本实施例中,假设记录图像的显示时间段Td1持续到AF图像的显示开始时刻td2为止,并且AF图像的显示时间段Td2持续到记录图像的显示开始时刻td1'为止。因此,如果显示延迟时间段ΔTd1和ΔTd2被确定,则显示时间段Td1和Td2也被自动确定,因此照相机MPU 125实质上仅需要确定显示延迟时间段ΔTd1和ΔTd2。
在图5的示例中,照相机MPU 125确定显示延迟时间段ΔTd1和ΔTd2,使得从AF图像的曝光开始时刻tr2到AF图像的显示开始时刻td2的时间段(td2-tr2=Tr2+ΔTd2)等于从记录图像的曝光开始时刻tr1到记录图像的显示开始时刻td1的时间段(td1-tr1=Tr1+ΔTd1)。此外,照相机MPU 125基于显示延迟时间段ΔTd1和ΔTd2来计算显示时间段Td1和Td2。利用该配置,即使两种图像的读出时间段不同,也可以减少直到显示AF图像和记录图像为止所需的时间差(该时间差是由读出时间段之间的差引起的)。具体而言,照相机MPU125基于步骤S302中设置的拍摄条件,获取从记录图像的曝光开始到记录图像的获取完成的时间段Tr1、以及从AF图像的曝光开始到AF图像的获取完成的时间段Tr2。然后,照相机MPU 125将记录图像的显示延迟时间段ΔTd1确定为0(如上所述,其可以不是0)。然后,照相机MPU 125根据下面的等式1来计算AF图像的显示延迟时间段ΔTd2。
Tr2+ΔTd2=Tr1+ΔTd1
ΔTd2=Tr1+ΔTd1-Tr2=Tr1-Tr2(1)
接着,照相机MPU 125计算在记录图像的显示时间段Td1和AF图像的显示时间段Td2。具体而言,照相机MPU 125基于步骤S302中设置的拍摄条件来获取在不存在显示延迟时间段ΔTd1和ΔTd2的情况下的显示时间段Td1_0和Td2_0(参见图4)。然后,照相机MPU125根据下面的等式2来计算显示时间段Td1和Td2。
Td1=Td1_0+(ΔTd2-ΔTd1)=Td1_0+ΔTd2
Td2=Td2_0+(ΔTd1-ΔTd2)=Td1_0-ΔTd2(2)
在步骤S304到步骤S307中,根据步骤S303中确定的显示定时,依次获取并依次显示记录图像和AF图像。重复执行从步骤S304到步骤S307的处理,直到在步骤S308中判断为不继续连拍为止。此外,与从步骤S304到步骤S307的处理并行地,照相机MPU 125将记录图像记录在存储器128中,并且基于AF图像来进行摄像面相位差AF。
在步骤S304中,照相机MPU 125进行用于获取记录图像的摄像控制(图像传感器122的曝光或读出等)。使用卷帘快门或全局快门来对图像传感器122进行曝光。在曝光开始时刻tr1(t11)和获取完成时刻t12之间获取记录图像。
在步骤S305中,照相机MPU 125基于已在步骤S303中确定的显示延迟时间段ΔTd1和显示时间段Td1来设置记录图像的显示开始时刻和记录图像的显示时间段,并指示显示单元126进行显示。具体而言,照相机MPU 125在时刻t12开始记录图像的显示,并且在时刻t16之前给出用于继续显示的显示指示。
注意,严格地说,在步骤S304和步骤S30期间,照相机MPU 125进行用于将所获取的记录图像转换成适合于在显示单元126上的显示的数据格式的处理。该转换处理所需的时间段可以被处理为包括在从记录图像的曝光开始到记录图像的获取完成所需的时间段Tr1中。此外,在步骤S305中,还与其并行地进行用于将所获取的记录图像转换成适当的数据格式并记录在存储器128中的处理。
在步骤S306中,照相机MPU 125进行用于获取AF图像的摄像控制(图像传感器122的曝光或读出等)。除了与AF图像和记录图像之间的差异有关的部分之外,这里的摄像控制与步骤S304中的摄像控制相同。在曝光开始时刻tr2(t13)和获取完成时刻t14之间获取AF图像。
在步骤S307中,照相机MPU 125基于已在步骤S303中确定的显示延迟时间段ΔTd2和显示时间段Td2来设置AF图像的显示开始时刻和AF图像的显示时间段,并指示显示单元126进行显示。具体而言,照相机MPU 125在时刻t16开始AF图像的显示,并且在时刻t17之前给出用于继续显示的显示指示。
注意,严格地说,在步骤S306和步骤S307期间,照相机MPU 125进行用于将所获取的AF图像转换成适合于在显示单元126上的显示的数据格式的处理。该转换处理所需的时间段可以被处理为包括在从AF图像的曝光开始到AF图像的获取完成所需的时间段Tr2中。此外,在步骤S307中,还并行地进行基于所获取的AF图像的摄像面相位差AF。
在步骤S308中,照相机125MPU判断是否继续连拍。例如,用户可以通过操作操作开关组127来在连拍的继续和结束之间切换。如果继续连拍,则照相机MPU 125使处理返回至步骤S304,以及如果不继续连拍,则该流程图的处理结束。
如上所述,根据第一实施例,照相机主体120在依次获取并依次显示多个图像的处理(显示控制)中,获取从曝光开始到获取完成需要不同时间段(用于读出的不同时间段)的记录图像和AF图像。然后,当显示接着获取的记录图像和AF图像时,照相机主体120进行控制,使得从AF图像的曝光开始到AF图像的显示开始的时间段等于从记录图像的曝光开始到记录图像的显示开始的时间段。因此,可以减少用户感觉到的不协调感。
注意,尽管以上描述了进行控制以使得从AF图像的曝光开始到AF图像显示开始的时间段等于从记录图像的曝光开始到记录图像的显示开始的时间段的结构,但本实施例不限于该结构。通过进行控制以使得从AF图像的曝光开始到AF图像的显示开始的时间段与从记录图像的曝光开始到记录图像的显示开始的时间段之间的差的绝对值减小任何可能的量,可以在一定程度上减少用户感觉到的不协调感。如图4所示,传统上,该差的绝对值等于通过自从记录图像的曝光开始到记录图像的获取完成的时间段减去从AF图像的曝光开始到AF图像的获取完成的时间段所获得的时间段(Tr1-Tr2)。因此,照相机主体120进行控制,使得差的绝对值小于通过自从记录图像的曝光开始到记录图像的获取完成的时间段减去从AF图像的曝光开始到AF图像的获取完成的时间段所获得的时间段。在这种情况下,照相机主体120可以进一步执行控制,使得从AF图像的曝光开始到AF图像的显示开始所需的时间段小于或等于从记录图像的曝光开始到记录图像的显示开始所需的时间段。这种控制使得可以在一定程度上减少用户感觉到的不协调感。
第二实施例
在第二实施例中,将描述通过记录图像的显示开始时刻和AF图像的显示开始时刻之间的间隔相等来减少用户感觉到的不协调感的结构。在本实施例中,摄像设备的基本结构(图1)与第一实施例的基本结构相同。在下文中,将主要描述第一实施例与第二实施例之间的不同。
第二实施例与第一实施例的不同之处在于在图3的步骤S303中用于确定记录图像的显示定时和AF图像的显示定时的处理。图6示出根据第二实施例的连拍处理的时序图。图6与图5不同之处在于:记录图像的显示时间段Td1和AF图像的显示时间段Td2以及AF图像的显示开始时刻td2。图6中的t21到t27各自表示时刻。注意,尽管与第一实施例同样地在图6中示出时刻t21到时刻t27,但是如果在步骤S308中判断为继续连拍,则连拍处理在时间t27之后也继续。在第二实施例中,照相机MPU 125进行控制,使得从记录图像的显示开始时刻td1到AF图像的显示开始时刻td2的时间段等于从AF图像的显示开始时刻td2到记录图像的显示开始时刻td1'。
图3所示的步骤S301和步骤S302的处理与第一实施例的处理相同。在步骤S303中,照相机MPU 125确定记录图像的显示延迟时间段ΔTd1、AF图像的显示延迟时间段ΔTd2、记录图像的显示时间段Td1以及AF的显示时间段Td2。具体而言,照相机MPU 125确定记录图像的显示延迟时间段ΔTd1。这里,与第一实施例相同,假设ΔTd1=0成立。然后,基于步骤S302中设置的拍摄条件,照相机MPU 125将ΔTd1与记录图像的获取完成时刻相加,由此计算记录图像的显示开始时刻td1和td1'。然后,照相机MPU 125将AF图像的显示开始时刻td2确定为记录图像的显示开始时刻td1和td1'之间的中间时刻。照相机MPU 125基于显示开始时刻td1、td2和td1'来计算AF图像的显示延迟时间段ΔTd2、记录图像的显示时间段Td1以及AF图像的显示时间段Td2。
除了在步骤S303中确定的显示定时与第一实施例不同以外,步骤S304以后的处理与第一实施例相同。如图6所示,记录图像和AF图像以相等的间隔依次显示。
如上所述,根据第二实施例,照相机主体120进行控制,使得从记录图像的显示开始时刻td1到AF图像的显示开始时刻td2的时间段等于从AF图像的显示开始时刻td2到记录图像的显示开始时刻td1'的时间段。因此,多个图像的显示间隔变得相等,因此可以减少用户感觉到的不协调感。
注意,在上述实施例中,描述了如下结构:AF图像设置有基于从记录图像(静止图像)的曝光开始到记录图像的显示结束的时间段与从AF图像(LV图像)的曝光开始到AF图像的显示结束的时间段之间的差的显示延迟时间段。本发明至少具有以下结构就足够了:例如,在预定时间段内按顺序显示具有不同读出时间段的多种类型的图像的情况下,基于各读出时间段之间的差,来调整从LV图像的读出完成(获取完成)到LV图像的显示开始所需的延迟时间段(第一时间段)。例如,即使交替地显示具有不同读出时间段的多个图像,该调整也使得可以减小针对这些图像的从曝光开始到显示开始的时间差,因此抑制由观看这些图像显示的用户感觉到的不协调感。
此外,尽管在上述实施例中描述了交替显示从曝光结束到读出完成需要不同时间段的两种类型的图像的示例,但本发明不限于此。例如,上述实施例的结构甚至可以应用于从曝光结束到读出完成需要不同时间段的两种图像以预定间隔按顺序循环显示的情况。
其它实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。

Claims (8)

1.一种摄像设备,包括:
图像传感器;
摄像控制单元,其被配置为能够通过对使用所述图像传感器执行的曝光和读出进行控制,来获取用于读出由于曝光所累积的电荷所需的时间段不同的第一图像和第二图像;以及
显示控制单元,其被配置为对从所述图像传感器读出的图像在显示单元上的显示进行控制,
其中,与所述第一图像相比,所述第二图像具有较低的分辨率并且需要较短的读出时间段,
其中,在使所述显示单元循环显示所述第一图像和所述第二图像的情况下,所述显示控制单元基于用于读出所述第一图像的时间段和用于读出所述第二图像的时间段之间的差,来设置从所述第二图像的读出完成到所述第二图像在所述显示单元上的显示开始的第一时间段,以及
其中,所述第一时间段长于从所述第一图像的读出完成到所述第一图像在所述显示单元上的显示开始的第二时间段。
2.根据权利要求1所述的摄像设备,其中,
在显示所述第一图像和所述第二图像的情况下,所述显示控制单元进行控制,使得从所述第二图像的读出开始到所述第二图像的显示所需的时间段小于或等于从所述第一图像的读出开始到所述第一图像的显示所需的时间段。
3.根据权利要求1所述的摄像设备,其中,
在显示所述第一图像和所述第二图像的情况下,所述显示控制单元进行控制,使得在所述显示单元上显示所述第二图像的时间段大致等于在所述显示单元上显示所述第一图像的时间段。
4.根据权利要求1所述的摄像设备,其中,
所述显示控制单元以循环方式交替地显示所述第一图像和所述第二图像。
5.根据权利要求1所述的摄像设备,其中,
所述摄像控制单元进行控制,使得使用所述图像传感器依次获取到的所述第一图像和所述第二图像的曝光重心之间的间隔大致相同。
6.根据权利要求1所述的摄像设备,其中,
所述图像传感器具有多个焦点检测像素,所述多个焦点检测像素被配置为接收分别穿过拍摄光学系统的不同部分光瞳区域的光束,
所述第一图像是用于记录的图像数据,以及
所述第二图像是用于具有视差的焦点检测的图像数据。
7.一种控制方法,其由包括图像传感器的摄像设备来执行,所述控制方法包括:
通过对使用所述图像传感器执行的曝光和读出进行控制,来获取用于读出由于曝光所累积的电荷所需的时间段不同的第一图像和第二图像;以及
对从所述图像传感器读出的图像在显示单元上的显示进行控制,
其中,与所述第一图像相比,所述第二图像具有较低的分辨率并且需要较短的读出时间段,
其中,在所述控制中,在使所述显示单元循环显示所述第一图像和所述第二图像的情况下,基于用于读出所述第一图像的时间段和用于读出所述第二图像的时间段之间的差,来设置从所述第二图像的读出完成到所述第二图像在所述显示单元上的显示开始的第一时间段,以及
其中,所述第一时间段长于从所述第一图像的读出完成到所述第一图像在所述显示单元上的显示开始的第二时间段。
8.一种计算机可读存储介质,其存储用于使计算机执行控制方法的程序,所述控制方法包括:
通过对使用图像传感器执行的曝光和读出进行控制,来获取用于读出由于曝光所累积的电荷所需的时间段不同的第一图像和第二图像;以及
对从所述图像传感器读出的图像在显示单元上的显示进行控制,
其中,与所述第一图像相比,所述第二图像具有较低的分辨率并且需要较短的读出时间段,
其中,在所述控制中,在使所述显示单元循环显示所述第一图像和所述第二图像的情况下,基于用于读出所述第一图像的时间段和用于读出所述第二图像的时间段之间的差,来设置从所述第二图像的读出完成到所述第二图像在所述显示单元上的显示开始的第一时间段,以及
其中,所述第一时间段长于从所述第一图像的读出完成到所述第一图像在所述显示单元上的显示开始的第二时间段。
CN201810680812.3A 2017-06-27 2018-06-27 摄像设备、控制方法和存储介质 Active CN109151265B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017125585A JP6917803B2 (ja) 2017-06-27 2017-06-27 撮像装置、制御方法、及びプログラム
JP2017-125585 2017-06-27

Publications (2)

Publication Number Publication Date
CN109151265A CN109151265A (zh) 2019-01-04
CN109151265B true CN109151265B (zh) 2021-01-05

Family

ID=64693820

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810680812.3A Active CN109151265B (zh) 2017-06-27 2018-06-27 摄像设备、控制方法和存储介质

Country Status (3)

Country Link
US (1) US10694127B2 (zh)
JP (1) JP6917803B2 (zh)
CN (1) CN109151265B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019207568A1 (en) * 2018-04-23 2019-10-31 ContinUse Biometrics Ltd. System and method for monitoring a sample
CN113824902B (zh) * 2021-09-30 2024-06-18 杭州海康汽车软件有限公司 红外摄像机系统时延确定方法、装置、系统、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6985185B1 (en) * 1999-08-17 2006-01-10 Applied Vision Systems, Inc. Dynamic range video camera, recording system, and recording method
CN1720720A (zh) * 2002-12-02 2006-01-11 奥林巴斯株式会社 图像拾取装置
CN102158622A (zh) * 2010-01-22 2011-08-17 佳能株式会社 图像读取装置及其控制方法
CN106775403A (zh) * 2016-12-14 2017-05-31 北京小米移动软件有限公司 获取卡顿信息的方法及装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004134867A (ja) 2002-10-08 2004-04-30 Canon Inc 固体撮像装置、その駆動方法、及び撮像システム
JP2009111518A (ja) * 2007-10-26 2009-05-21 Casio Comput Co Ltd 撮像装置、画像再生装置及びそのプログラム、画像ファイルのデータ構造
JP5157757B2 (ja) * 2008-08-29 2013-03-06 株式会社ニコン 電子カメラ
JP2011223426A (ja) * 2010-04-13 2011-11-04 Panasonic Corp 撮像装置
JP5630146B2 (ja) * 2010-08-23 2014-11-26 ソニー株式会社 撮像装置、撮像装置の制御方法およびプログラム。
KR20130003139A (ko) * 2011-06-30 2013-01-09 삼성디스플레이 주식회사 입체 영상 표시 방법 및 입체 영상 표시 장치
JP5835996B2 (ja) * 2011-08-08 2015-12-24 オリンパス株式会社 撮像装置
CN104620572B (zh) * 2012-09-19 2016-06-29 富士胶片株式会社 摄像装置及其控制方法
CN104737528B (zh) * 2012-10-05 2018-03-02 富士胶片株式会社 摄像装置以及图像显示方法
JP6300076B2 (ja) * 2014-01-31 2018-03-28 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6985185B1 (en) * 1999-08-17 2006-01-10 Applied Vision Systems, Inc. Dynamic range video camera, recording system, and recording method
CN1720720A (zh) * 2002-12-02 2006-01-11 奥林巴斯株式会社 图像拾取装置
CN102158622A (zh) * 2010-01-22 2011-08-17 佳能株式会社 图像读取装置及其控制方法
CN106775403A (zh) * 2016-12-14 2017-05-31 北京小米移动软件有限公司 获取卡顿信息的方法及装置

Also Published As

Publication number Publication date
CN109151265A (zh) 2019-01-04
US10694127B2 (en) 2020-06-23
JP6917803B2 (ja) 2021-08-11
JP2019009694A (ja) 2019-01-17
US20180376086A1 (en) 2018-12-27

Similar Documents

Publication Publication Date Title
JP6263035B2 (ja) 撮像装置
JP5424679B2 (ja) 撮像装置及び信号処理装置
US8520059B2 (en) Stereoscopic image taking apparatus
US9077976B2 (en) Single-eye stereoscopic image capturing device
CN108737696B (zh) 摄像设备、控制方法和非暂时性存储介质
US20150281556A1 (en) Focus detection apparatus and control method thereof
US8823778B2 (en) Imaging device and imaging method
KR101889932B1 (ko) 촬영 장치 및 이에 적용되는 촬영 방법
US9124875B2 (en) Stereoscopic imaging apparatus
JP2013008004A (ja) 撮像装置
US8902294B2 (en) Image capturing device and image capturing method
CN109151265B (zh) 摄像设备、控制方法和存储介质
JP6238578B2 (ja) 撮像装置およびその制御方法
JP7077156B2 (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP5014267B2 (ja) 撮像装置
US9693037B2 (en) Imaging apparatus having an imaging element in which a plurality of light receiving elements is arranged with respect to a micro lens and method for controlling same
JP5457240B2 (ja) 立体撮像装置
JP2012124650A (ja) 撮像装置および撮像方法
JP7307837B2 (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP2024084476A (ja) 焦点/フリッカー検出装置、撮像装置および焦点/フリッカー検出方法
JP5720382B2 (ja) 撮像装置
JP2014228727A (ja) 撮像装置およびその制御方法
JP2014236251A (ja) 撮像装置
JP2018170608A (ja) 撮像装置およびその制御方法ならびにプログラム
US20120075426A1 (en) Image pickup system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant