CN101536491B - 图像捕捉装置和图像捕捉方法 - Google Patents

图像捕捉装置和图像捕捉方法 Download PDF

Info

Publication number
CN101536491B
CN101536491B CN2007800405383A CN200780040538A CN101536491B CN 101536491 B CN101536491 B CN 101536491B CN 2007800405383 A CN2007800405383 A CN 2007800405383A CN 200780040538 A CN200780040538 A CN 200780040538A CN 101536491 B CN101536491 B CN 101536491B
Authority
CN
China
Prior art keywords
sampling rate
view data
recording medium
camera signal
seizure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2007800405383A
Other languages
English (en)
Other versions
CN101536491A (zh
Inventor
小坂井良太
相木胜年
佐藤伸行
永滨裕喜
佐濑昌利
米田丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101536491A publication Critical patent/CN101536491A/zh
Application granted granted Critical
Publication of CN101536491B publication Critical patent/CN101536491B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B31/00—Arrangements for the associated working of recording or reproducing apparatus with related apparatus
    • G11B31/006—Arrangements for the associated working of recording or reproducing apparatus with related apparatus with video camera or receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape
    • H04N5/783—Adaptations for reproducing at a rate different from the recording rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • H04N9/69—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits for modifying the colour signals by gamma correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/7904—Processing of colour television signals in connection with recording using intermediate digital signal processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0105—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level using a storage device with different write and read speed

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

在高速图像捕捉状态下，相机信号处理电路不需要按照高画面速率执行信号处理，而是按照常规画面速率执行信号处理。在高速图像捕捉模式下，通过变换处理部分201和记录设备控制电路210把从图像传感器101接收到的240fps的原始数据记录在记录设备111上。通过预处理电路202把经抽取和大小变换的原始数据提供给相机信号处理电路203，并且利用经相机处理的信号把正在捕捉的图像显示在显示部分112上。在再现状态下，根据显示部分112的显示性能按照低画面速率从记录设备111读取原始数据，并且通过预处理电路202和相机信号处理电路203来处理已经读取的原始数据，并且通过显示部分112来显示再现图像。

Description

图像捕捉装置和图像捕捉方法
技术领域
本发明涉及图像捕捉装置和图像捕捉方法，具体涉及使用高速图像传感器捕捉图像的图像捕捉装置和图像捕捉方法。
背景技术
在过去，可以高速捕捉图像的高速摄像机已经公知。例如，一种摄像机通过把将被以高速率处理的每幅图像的图像大小转换为标准图像大小的1/4并且将这样的四幅图像放在常规速率的图像中而实现了高速图像捕捉(见专利文献“日本专利特开平8-88833”)。另一种摄像机使用如下电路结构实现了高速图像捕捉，所述电路结构并行地处理从传感器接收到的数据，以增大每单位时间的处理量(见专利文献“日本专利特开平8-251492”)。
然而，在专利文献“日本专利特开平8-88833”或专利文献“日本专利特开平8-251492”中描述的高速图像捕捉针对于将所捕捉的图像存储在诸如VTR或半导体存储器之类的存储设备中，以慢动作再现所捕捉的图像，并分析非常高速的动作，并且设备自身具有复杂的结构并且很昂贵。因此，从便携性和功耗的观点来看，难以把如在专利文献1或专利文献2中描述的高速图像捕捉系统应用于作为家用设备而广泛普及的便携式图像捕捉设备、所谓的摄录机(设备的产品名，其中摄像机和录像机被集成在一个单元中)、数码相机等等。
参考图1，将描述考虑到这些点而设计的图像捕捉装置。图1所示的结构具有与现有摄录机相同的结构。换言之，图1所示的图像捕捉装置100包括图像传感器101、预处理电路102、相机信号处理电路103、转换处理部分104、压缩解压缩电路105、存储器控制电路106、存储器107、显示处理电路108、压缩解压缩电路109、记录设备控制电路110、记录设备111、显示部分112和控制部分113。
图像传感器101可以选择高速图像捕捉模式或常规图像捕捉模式，在高速图像捕捉模式中图像传感器101基于NTSC规范以60fps(场/秒)或更高的第一画面速率(也称作帧速率)读取信号，在常规图像捕捉模式中图像传感器101以常规的第二画面速率读取信号。高速图像捕捉模式下的画面速率是240fps，这是常规速率的四倍。图像传感器101配备有CDS(相关双采样)和A/D变换器，并且图像传感器101输出所捕捉的图像数据。
预处理电路102对从图像传感器101输出的所捕捉图像数据执行诸如阴影校正之类的光学校正处理，并输出数字图像信号。相机信号处理电路103对从预处理电路102接收到的所捕捉图像数据执行诸如白平衡调节处理之类的相机信号处理。
变换处理部分104执行显示抽取和大小调节，以将从相机信号处理电路103接收到的图像信号转换为具有适合于显示部分112的显示的画面速率和画面大小的图像信号。仅当从相机信号处理电路103接收到的图像信号被输出到显示处理电路108时执行显示抽取。显示抽取从由图像捕捉装置100在高速图像捕捉模式下捕捉的图像信号的单位时间的场数中进行抽取，以达到在显示设备的显示标准中定义的每单位时间的场数(在这种情况下是60fps)。
压缩解压缩电路105根据静态图像编码系统(例如JPEG(联合图像专家组)等)对从变换处理部分104接收到的所捕捉图像数据执行压缩编码处理。另外，压缩解压缩电路105对从存储器控制电路106提供的静态图像的经编码数据执行解压缩解码处理。存储器控制电路106控制对存储器107写入图像数据和从存储器107读取图像数据。存储器107是FIFO(先入先出)型缓冲存储器，其临时存储从存储器控制电路106接收到的图像数据，并且例如SDRAM(同步动态随机存取存储器)等被用于存储器107。
显示处理电路108根据从变换处理部分104或压缩解压缩电路109接收到的图像信号生成将在显示部分112上显示的图像信号，将该信号提供给显示部分112，并且使其显示图像。显示部分112例如包括LCD(液晶显示器)并且显示正在捕捉的通过相机的图像或者已经记录在记录设备111中的数据的再现图像。
压缩解压缩电路109根据运动图像编码系统(例如MPEG(运动图像专家组)等)对从变换处理部分104接收到的图像数据执行压缩编码处理。另外，压缩解压缩电路109对从记录设备111提供的运动图像的经编码数据执行解压缩解码处理，并将由此得到的数据输出到显示处理电路108。显示部分112显示从显示处理电路108接收到的运动图像。
控制部分113是例如包括CPU(中央处理器)、ROM(只读存储器)、RAM(随机存取存储器)等的微型计算机，并且通过执行在ROM等中存储的程序来控制图像捕捉装置的每个部分。
在图1所示的图像捕捉装置中，在高速图像捕捉模式下，从图像传感器101接收到的240fps的所捕捉图像信号通过预处理电路102被提供给相机信号处理电路103。变换处理部分104从相机信号处理电路103的输出图像信号中抽取1/4，使得得到60fps的输出信号。经抽取且经大小变换的图像信号被提供给显示处理电路108。显示处理电路108生成将在显示部分112上显示的图像信号，将由此得到的图像信号提供给显示部分112，并且使其显示图像。
当根据用户操作从控制部分113接收到对高速捕捉图像的记录请求时，变换处理部分104将240fps的图像信号发送到压缩解压缩电路105。如有必要，那么变换处理部分104减小从相机信号处理电路103接收到的图像信号的大小，并将该图像信号发送到压缩解压缩电路105。
压缩解压缩电路105根据JPEG格式对从变换处理部分104接收到的图像信号进行压缩编码。存储器控制电路106把从压缩解压缩电路105接收到的经编码数据临时存储在存储器107中。按照这种方式，预定时段内的图像数据被存储在存储器107中。
当从控制部分113接收到对存储器107中存储的经编码数据的读请求时，存储器控制电路106以60fps读取存储器107中存储的经编码数据，并且将经编码数据发送到压缩解压缩电路105。压缩解压缩电路105对从存储器控制电路106接收到的经编码数据进行解压缩解码，并且将经解码数据发送到变换处理部分104。当从控制部分113接收到对记录设备111的记录请求时，变换处理部分104把从压缩解压缩电路105接收到的图像信号发送到压缩解压缩电路109。压缩解压缩电路109根据MPEG格式来压缩从变换处理部分104接收到的图像信号，并通过记录设备控制电路110将经压缩编码的信号存储到记录设备111。变换处理部分104调节从压缩解压缩电路105接收到的60fps的图像信号的大小，将由此得到的图像信号发送到显示处理电路108，并且使显示部分112显示所再现的图像。
在图1所示的先前提出的图像捕捉装置中，在图像传感器101的高速图像捕捉模式下，因为输出的所捕捉信号的画面速率较高，因此需要预处理电路102和相机信号处理电路103以高速操作。如果系统是由LSI等实现的，那么因为预处理电路102和相机信号处理电路103的计算规模在整个系统中较大，因此从电路领域和功耗的观点来看，高速处理或并行处理不是有利的。另外，在图1所示的结构中，因为所捕捉的图像信号被临时存储在存储器107中，因此存在如下问题：在高速图像捕捉模式停止之后，要花费处理时间来解码存储器107中临时存储的数据并根据常规记录格式对数据进行重新编码。
发明内容
因此，本发明的一个目的是提供一种图像捕捉装置和图像捕捉方法，其不需要使相机信号处理电路以高速画面速率执行处理并且易于操作、以低成本制造，并因此具有卓越的便携性。
为了解决上述问题，本发明是一种图像捕捉装置，包括：
记录介质控制装置，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据记录到记录介质，并且从记录介质中读取具有低于第一画面速率的第二画面速率的捕捉图像数据；
变换装置，用于把从所述固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据变换为具有第二画面速率的捕捉图像数据；
相机信号处理装置，用于对从变换装置或记录介质控制装置获得的具有第二画面速率的捕捉图像数据执行相机信号处理；以及
显示处理装置，用于根据从相机信号处理装置获得的图像信号来生成用于显示的图像信号。
本发明是一种图像捕捉装置，包括：
记录介质控制装置，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据记录到记录介质，并且从记录介质中读取具有低于第一画面速率的第二画面速率的捕捉图像数据；
变换装置，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据变换为具有第二画面速率的捕捉图像数据；
第一相机信号处理装置，用于对从变换装置获得的具有第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理装置，用于对从记录介质控制装置获得的具有第二画面速率的捕捉图像数据执行相机信号处理；以及
显示处理装置，用于根据从第一相机信号处理装置或第二相机信号处理装置获得的图像信号来生成用于显示的图像信号，
其中，与第二相机信号处理装置相比，第一相机信号处理装置是简单构造的。
本发明是一种图像捕捉装置，包括：
第一记录介质控制装置，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据记录到第一记录介质，并且从第一记录介质中读取具有低于所述第一画面速率的第二画面速率的捕捉图像数据；
变换装置，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据变换为具有第二画面速率的捕捉图像数据；
第一相机信号处理装置，用于对从变换装置获得的具有第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理装置，用于对从第一记录介质控制装置获得的具有第二画面速率的捕捉图像数据执行相机信号处理；
第二记录介质控制装置，用于将第二相机信号处理装置的输出图像信号记录到第二记录介质并且按照第二画面速率从第二记录介质读取图像信号；以及
显示处理装置，用于根据从第一相机信号处理装置获得的输出图像信号或第二记录介质控制装置的输出图像信号来生成用于显示的图像信号；
其中，与第二相机信号处理装置相比，第一相机信号处理装置是简单构造的。
本发明是一种图像捕捉方法，包括：
记录介质控制步骤，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据记录到记录介质，并且从所述记录介质中读取具有低于所述第一画面速率的第二画面速率的捕捉图像数据；
变换步骤，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据变换为具有第二画面速率的捕捉图像数据；
相机信号处理步骤，用于对从变换步骤或记录介质控制步骤获得的具有第二画面速率的捕捉图像数据执行相机信号处理；以及
显示处理步骤，用于根据从相机信号处理步骤获得的图像信号来生成用于显示的图像信号。
本发明是一种图像捕捉方法，包括：
记录介质控制步骤，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据记录到记录介质，并且从所述记录介质中读取具有低于第一画面速率的第二画面速率的捕捉图像数据；
变换步骤，用于把所述从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据变换为具有第二画面速率的捕捉图像数据；
第一相机信号处理步骤，用于对从变换步骤获得的具有第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理步骤，用于对从记录介质控制步骤获得的具有第二画面速率的捕捉图像数据执行相机信号处理；以及
显示处理步骤，用于根据从第一相机信号处理步骤或第二相机信号处理步骤获得的图像信号来生成用于显示的图像信号，
其中，与第二相机信号处理步骤相比，第一相机信号处理步骤是简单构造的。
本发明是一种图像捕捉方法，包括：
第一记录介质控制步骤，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据记录到第一记录介质，并且从所述第一记录介质中读取具有低于第一画面速率的第二画面速率的捕捉图像数据；
变换步骤，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据变换为具有第二画面速率的捕捉图像数据；
第一相机信号处理步骤，用于对从变换步骤获得的具有第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理步骤，用于对从第一记录介质控制步骤获得的具有第二画面速率的捕捉图像数据执行相机信号处理；
第二记录介质控制步骤，用于将第二相机信号处理步骤的输出图像信号记录到第二记录介质并且按照第二画面速率从所述第二记录介质读取图像信号；以及
显示处理步骤，用于根据从第一相机信号处理步骤获得的输出图像信号或第二记录介质控制步骤的输出图像信号来生成用于显示的图像信号，
其中，与第二相机信号处理步骤相比，第一相机信号处理步骤是简单构造的。
在根据本发明的图像捕捉装置中，虽然图像捕捉器件的画面速率较高，但是相机信号处理电路仅需要总是满足根据显示部分的显示性能的画面速率。因此，不需要仅针对高速图像捕捉执行高频驱动和并行处理，从而可以减小功耗和电路规模。
附图说明
图1是示出已经提出的图像捕捉装置的示例的框图；
图2是示出根据本发明第一实施例的图像捕捉装置的框图；
图3A和图3B是用于描述根据本发明的图像传感器的一个示例的示意图；
图4是示出本发明第一实施例的一部分的更详细结构的框图；
图5是根据本发明第一实施例的高速图像捕捉模式下的数据流程图；
图6是本发明第一实施例的图像再现状态下的数据流程图；
图7是示出根据本发明第二实施例的图像捕捉装置的框图；
图8是本发明第二实施例的高速图像捕捉模式下的数据流程图；
图9是本发明第二实施例的图像再现状态下的数据流程图；
图10是示出根据本发明第三实施例的图像捕捉装置的框图；
图11是根据本发明第三实施例的高速图像捕捉模式下的数据流程图；
图12是本发明第三实施例的图像再现状态下的数据流程图；
图13是示出根据本发明第四实施例的图像捕捉装置的框图；
图14是本发明第四实施例的高速图像捕捉模式下的数据流程图；并且
图15是本发明第四实施例的图像再现状态下的数据流程图。
具体实施方式
接下来将参考附图描述本发明的第一实施例。如图2所示，从图像传感器101接收到的所捕捉图像信号被提供给根据本发明第一实施例的图像捕捉装置200。
图像传感器101根据光电变换将通过光学系统(包括透镜、红外抑制滤光器、光学低通滤光器等)捕捉的对象的入射光变换为电信号。例如CMOS(互补金属氧化物半导体)型图像捕捉器件被用作图像传感器101。在CMOS型图像捕捉器件中，光电二极管、行列选择MOS晶体管、信号线等被二维地布置，以形成垂直扫描电路、水平扫描电路、噪声降低电路、时序发生电路等。可以高速捕捉图像的CCD(电荷耦合器件)可以用作图像传感器101。
图像传感器101可以在高速图像捕捉模式和常规图像捕捉模式之间切换，在高速图像捕捉模式下以比基于NTSC系统规范的常规画面速率(60fps(场/秒))更高的第一画面速率(亦称作帧速率)读取信号，在常规图像捕捉模式下以作为常规画面速率的第二画面速率读取信号。高速图像捕捉模式的画面速率需要是240fps，这是常规速率的四倍。图像传感器101在内部配备有CDS(相关双采样)、A/D变换器等并且输出与图像传感器101的像素矩阵相对应的数字捕捉图像信号。
图像传感器101使用输出例如三原色的捕捉图像信号的三种图像捕捉器件，并且每个图像捕捉器件的每四个输出行就获取一个输出行，以实现240fps的画面速率，这是常规画面速率(60fps)的四倍。假定常规画面速率的一帧的像素数目例如是640万像素，则高速图像捕捉模式下的像素数目是160万像素。
图3A示出根据本发明的滤色器阵列的一个示例。方格阵列倾斜45°并且R和B滤色器中的每一个被G滤色器围绕。在该结构中，当为人类视觉灵敏度的R和B成分获取了必要和充分的空间频率特性时，比人类灵敏度的R和B成分中的每一个的空间频率特性更高的G成分的空间频率特性较之传统的拜耳阵列可以得到改善。G成分变为用于生成亮度信号的主要成分。因此，不仅无色对象的亮度分辨率得到提高，而且彩色对象的亮度分辨率也得到提高，图像质量由此得到提高。
图3A所示的滤色器阵列基于如下方法，即如虚线所示以常规画面速率在一个水平期间内交替地读取两个相邻行的像素。换言之，在常规图像捕捉模式下，按照这种顺序来扫描和读取像素。
另一方面，在高画面速率时，以每四个水平扫描行发生一次的速率来抽取和读取水平扫描行。为了处理高画面速率，如图3B所示，假定六个相邻列像素的读输出分别由CH1至CH6表示，两个A/D变换器与三个交替列(CH1、CH3和CH5，以及CH2、CH4和CH6)共同布置。A/D变换器例如将一个样本变换为14位的数字数据。作为替代，可以将各A/D变换器布置在列像素处。按照与A/D变换器相同的方式来布置CDS(未示出)，使得可以执行高速读取。其中为一个图像捕捉器件安排三原色滤色器的另一种结构可被用作图像传感器101。作为替代，使用补色滤色器的图像捕捉器件可被使用。
图像捕捉装置200包括变换处理部分201、预处理电路202、相机信号处理电路203、显示处理电路208、记录设备控制电路210、记录设备111、显示部分112和控制部分213。
变换处理部分201对从图像传感器101接收到的数字图像信号执行信号分路和显示抽取。仅当信号被输出到显示处理电路208时执行显示抽取。显示抽取是对满足在图像捕捉装置200的高速图像捕捉模式下的显示标准中定义的每单位时间的场数目(在这种情况下是60fps)的场进行的抽取。
预处理电路202对从图像传感器101输出的数字图像信号执行诸如阴影校正之类的光学校正处理，并输出由此得到的数字图像信号。相机信号处理电路203对从预处理电路202接收到的图像信号执行诸如白平衡调节处理(亦称作显影处理、图像创建处理等等)之类的相机信号处理。相机信号处理电路203的输出信号被提供给显示处理电路208。
显示处理电路208根据从相机信号处理电路203接收到的图像信号来生成将在显示部分112上显示的图像信号，并将由此得到的信号提供给显示部分112以使其显示图像。显示部分112例如包括LCD(液晶显示器)，并且显示正在捕捉的通过相机的图像、在记录设备111上记录的数据的再现图像等等。显示部分112可被布置在图像捕捉装置200外部，并且图像捕捉装置200可设有用于外部输出的接口来代替显示部分112。
与变换处理部分201相连的记录设备控制电路210控制向记录设备111写入图像数据和从记录设备111读取图像数据。记录设备111中存储的数据是未经上述预处理电路202和相机信号处理电路203处理的捕捉图像数据，并且在本说明书中被称作原始数据。
磁带、诸如闪存之类的半导体存储器、硬盘等可被用作记录设备111。基本上使用不可附接/不可分离类型作为记录设备111。然而，记录设备111可以是可附接/可分离的，使得原始数据可被取回到外部。当原始数据被取回到外部时，优先取回在预处理电路202中处理过的原始数据。例如根据外部个人计算机的软件来执行相机信号处理。
控制部分213是例如包括CPU(中央处理单元)、ROM(只读存储器)、RAM(随机存取存储器)等的微型计算机，并且通过执行ROM等中存储的程序来整体控制图像捕捉装置的每个部分。
图4示出变换处理部分201、预处理电路202和相机信号处理电路203的结构示例。从图像传感器101(包括CDS和A/D变换器)接收到的捕捉图像数据被提供给变换处理部分201。变换处理部分201包括开关SW1和SW2、抽取部分221和大小调节部分222。抽取部分221执行显示抽取。大小调节部分222把将要显示的图像的大小改变为适当大小。抽取部分221或抽取部分221和大小调节部分222两者将高速图像捕捉状态下的原始数据的画面速率减小为常规速率。开关SW1和SW2在记录状态和再现状态之间切换，在记录状态下选择的终端由r表示，在再现状态下选择的终端由p表示。
变换处理部分201的大小调节部分222的输出图像信号被提供给预处理电路202的阴影校正电路231。阴影校正电路231校正画面附近的明度，使得其不变暗。阴影校正电路231的输出信号被提供给相机信号处理电路203。
相机信号处理电路203例如包括按照从输入侧的顺序排列的同时形成电路241、白平衡校正部分242、孔径校正部分243、伽玛校正部分244和YC发生部分245。但是，相机信号处理电路203的结构不限于图4所示的结构。例如可以改变这些结构元件的排列顺序，或者可以省略其中一部分。
同时形成电路241插入每种颜色成分的丢失像素。同时形成电路241并行输出三原色信号(R、G、B)。同时形成电路241的输出信号被提供给白平衡校正部分242。白平衡校正部分242校正由对象的不同色温环境和传感器的滤色器的不同灵敏度引起的颜色失衡。
白平衡校正部分242的输出被提供给孔径校正部分243。孔径校正部分243将执行轮廓校正，该轮廓校正提取信号极大改变的部分并且加强该部分。孔径校正部分243的输出信号被提供给伽玛校正部分244。
伽玛校正部分244校正输入和输出特性，使得当捕捉图像信号被输出到显示部分112时灰度级被正确地再现。伽玛校正部分244的输出信号被提供给YC发生部分245。
YC发生部分245生成亮度信号(Y)和色差信号(C)。亮度信号是通过按照预定组成比来组合经伽玛校正的RGB信号而生成的。色差信号是通过按照预定组成比来组合经伽玛校正的RGB信号而生成的。所生成的亮度信号和色差信号通过显示处理电路208被提供给显示部分112。
在图2所示的图像捕捉装置中，在高速图像捕捉模式下，如图4所示，控制部分213控制变换处理部分201的开关SW1和SW2以选择r端子侧。图5示出高速图像捕捉模式下的信号流。如图5所示，从图像传感器101接收到的240fps的原始数据通过开关SW1的r端子和记录设备控制电路210被提供给记录设备111。当根据用户操作从控制部分213接收到对以高速捕捉到的图像的记录请求时，原始数据被记录在记录设备111上。
变换处理部分201的抽取部分221从原始数据中抽取1/4，从而得到60fps的原始数据。经抽取和大小变换的原始数据通过预处理电路202被提供给相机信号处理电路203。已经在相机信号处理电路203中经过相机信号处理的信号通过显示处理电路208被提供给显示部分112并且正在捕捉的图像被显示在显示部分112上。
在图2所示的图像捕捉装置中，在再现状态下，控制部分213控制变换处理部分201的开关SW1和SW2以选择p端子侧。图6示出再现状态下的信号流。如图6所示，在记录设备控制电路210的控制下，根据显示部分112的显示性能，从记录设备111读取低画面速率(例如，60fps)的原始数据。所读取的原始数据从记录设备控制电路210通过变换处理部分201的开关SW1和SW2及大小调节部分222被提供给预处理电路202。
预处理电路202的输出信号通过相机信号处理电路203和显示处理电路208而被提供给显示部分112，并且再现图像被显示部分112显示。例如，仅当画面速率已经改变时，再现图像才变为慢动作再现图像，其时间轴已经扩展为记录状态下的四倍。作为替代，可以通过改变图像捕捉条件(曝光条件等)来捕捉图像，并且当图像被再现时，四类捕捉图像(静态图像或运动图像中的任一种)可被比较。作为替代，可以抽取从记录设备111中读取的信号，以获取逐帧的再现图像。
接着将参考图7来描述根据本发明第二实施例的图像捕捉装置300。在图像捕捉装置300中，压缩解压缩电路301被布置在变换处理部分201和记录设备控制电路210之间。压缩解压缩电路301根据例如JPEG(联合图像专家组)等编码系统对从编码处理部分201接收到的高画面速率的原始数据执行压缩编码处理。在记录设备控制电路210的控制下，经压缩编码的数据被写入到记录设备111。二进制数据编码系统可被用作压缩解压缩编码系统，以替代JPEG。
图8示出记录状态下的信号流。在高速图像捕捉模式下获得的高画面速率的原始数据被压缩解压缩电路301压缩编码，并且经压缩编码的数据通过记录设备控制电路210而被记录在记录设备111上。像第一实施例一样，画面速率被变换处理部分201变换为常规画面速率并且经预处理电路202和相机信号处理电路203处理的图像信号被显示在显示部分112上。
如图9所示，在再现状态下，已经从记录设备111中读取并且从记录设备控制电路210提供的原始数据的编码数据被压缩解压缩电路301扩展解码。经扩展解码的原始数据被从变换处理部分201通过预处理电路202、相机信号处理电路203和显示处理电路208而被提供给显示部分112，并且再现图像被显示在显示部分112上。记录设备111的读取速度被设置为使得常规画面速率的原始数据被读取。
接着将参考图10来描述根据本发明第三实施例的图像捕捉装置400。在图像捕捉装置400中，简单预处理电路401和简单相机信号处理电路402被布置在变换处理部分201的信号的下游，以在显示部分112上显示正在捕捉的通过相机的图像。“简单”意味着这些电路生成仅在显示部分112上显示的图像，并且将要显示的图像的图像质量可以低至只要满足检查正在捕捉的对象图像的目的即可。例如，在显示部分112上显示的信号的位数需要小于预处理电路401的A/D变换器的输出数据的位数。简单预处理电路401可被省略。利用该简单结构，在高速图像捕捉状态下监控图像所用的功耗和发热可被减少。
图11示出图像捕捉装置400的记录状态中的信号流。在高速图像捕捉模式下，从图像传感器101接收到的具有240fps的画面速率的原始数据被变换处理部分201转换为具有60fps的常规画面速率的原始数据。具有常规画面速率的原始数据通过简单预处理电路401、简单相机信号处理电路402和开关SW3的r端子而被提供给显示处理电路208，并且原始数据被显示部分112显示。在高速图像捕捉模式下，当记录命令被发出时，具有高画面速率的原始数据通过记录设备控制电路210而被记录在记录设备111上。
如图12所示，在再现状态下，从记录设备111读取的原始数据被从记录设备控制电路210提供给预处理电路202，原始数据被相机信号处理电路203处理，并通过开关SW3的p端子和显示处理电路208而被发送到显示部分112。预处理电路202和相机信号处理电路203具有与上述第一和第二实施例的那些相同的结构，并且具有比正在捕捉的图像更高质量的再现图像被显示在显示部分112上。
接着将参考图13来描述根据本发明第四实施例的图像捕捉装置500。图像捕捉装置500具有布置在变换处理部分201的信号下游的简单预处理电路401和简单相机信号处理电路402，以在显示部分112上显示正在捕捉的通过相机的图像。因此，像上述第三实施例一样，在监控图像时发生的功耗和发热可被减少。另外，在非记录时间段内，可以按照常规画面速率从存储器502中读取原始数据并且可以对该原始数据执行相机信号处理，从而将由此得到的数据记录在记录设备505上。
在图像捕捉装置500中，从变换处理部分201接收到的原始数据通过存储器控制电路501被提供给存储器502。存储器控制电路501控制对存储器502写入图像数据和从存储器502读取图像数据。存储器502是临时存储从存储器控制电路501接收到的图像数据的FIFO(先入先出)型存储器，例如SDRAM(同步动态随机存取存储器)等。存储器502执行与预处理电路202和相机信号处理电路203的吞吐量相对应的缓冲。
相机信号处理电路203的输出信号被提供给开关SW4的r端子。开关SW4的p端子和开关SW3的p端子被共同连接。开关SW4被连接到记录设备控制电路504。与记录设备控制电路504相连的是记录设备505。
记录设备控制电路504通过开关SW4控制对记录设备505写入图像数据和从记录设备505读取图像数据。在记录设备505中存储的数据是经预处理电路202和相机信号处理电路203处理的亮度信号和色差信号。记录设备505可以是磁带、诸如闪存之类的半导体存储器、可记录光盘、硬盘等等。记录设备505基本上是可附接/可分离型的。作为替代，记录设备505可以不是可附接/可分离型的，并且记录的数据可以通过通信接口被输出到外部。
图14示出图像捕捉装置500的记录状态的信号流。在高速图像捕捉模式下，从图像传感器101接收到的具有240fps的画面速率的原始数据被变换处理部分201变换为具有60fps的常规画面速率的原始数据。具有常规画面速率的原始数据通过简单预处理电路401、简单相机信号处理电路402和开关SW3的r端子而被提供给显示处理电路208，并且原始数据被显示部分112显示。当在高速图像捕捉模式下发出记录命令时，通过存储器控制电路501把具有高画面速率的原始数据记录在存储器502上。
在高速图像捕捉模式中的记录暂停时间段内，例如在其中从记录按钮上松开手的记录待机状态下，从存储器502读取原始数据并且通过预处理电路202和相机信号处理电路203来处理该原始数据，并且通过开关SW4的r端子和记录设备控制电路504将相机信号处理电路203的输出信号记录在记录设备505上。按照60fps的常规画面速率或者更低的速率从存储器502读取原始数据。
如图15所示，在再现状态下，从记录设备505读取的具有常规画面速率的原始数据通过记录设备控制电路504、开关SW4的p端子和显示处理电路208而被发送到显示部分112。从记录设备505再现的再现图像被显示部分112显示。在图像捕捉装置500中，当原始数据被再现时，与上述实施例相比不需要相机信号处理，因此当原始数据被再现时，功耗可被降低。
本发明不限于上述实施例。相反地，可以基于本发明的精神对这些实施例进行各种修改。例如，在第三实施例的图像捕捉装置400的记录设备111(图10)中存储的数据或在第四实施例的图像捕捉装置500的记录设备505或存储器502(图13)中存储的数据可被压缩。
另外，本发明可被应用于诸如移动电话和PDA(个人数字助理)以及摄录机和数字静态相机之类的具有图像捕捉功能的设备。另外，本发明可被应用于处理设备和记录设备，其用于与个人计算机等相连的电视电话或游戏软件应用的小相机的捕捉图像信号。

Claims (8)

1.一种图像捕捉装置，包括：
记录介质控制装置，用于进行控制使得把从固态图像捕捉器件获得的具有第一画面速率的第一捕捉图像数据记录到记录介质，并且进行控制使得以低于所述第一画面速率的第二画面速率从所述记录介质读取所述第一捕捉图像数据作为第三捕捉图像数据；
变换装置，用于把从所述固态图像捕捉器件获得的具有所述第一画面速率的第一捕捉图像数据变换为具有所述第二画面速率的第二捕捉图像数据；
相机信号处理装置，用于对从所述变换装置或所述记录介质控制装置获得的具有所述第二画面速率的第二或第三捕捉图像数据执行相机信号处理；
显示处理装置，用于根据从所述相机信号处理装置获得的图像信号来生成用于显示的图像信号；以及
控制装置，用于
在记录所述第一捕捉图像数据时，至少控制所述记录介质控制装置、变换装置、相机信号处理装置，使得所述变换装置对来自所述固态图像捕捉器件的所述第一画面速率的第一捕捉图像数据执行信号分路，其中第一路所述第一捕捉图像数据在未经相机信号处理的情况下通过所述记录介质控制装置被记录到所述记录介质，第二路所述第一捕捉图像数据被所述变换装置变换为具有所述第二画面速率的第二捕捉图像数据，并且使得所述相机信号处理装置以所述第二画面速率对所述第二捕捉图像数据执行相机信号处理并输出用于显示，并且
在再现所述第一捕捉图像数据时，至少控制所述记录介质控制装置以及所述相机信号处理装置，使得所述记录介质控制装置以所述第二画面速率读取被记录到所述记录介质的第一捕捉图像数据作为所述第三捕捉图像数据，并使得所述相机信号处理装置以所述第二画面速率对所述第三捕捉图像数据执行所述相机信号处理并输出用于显示。
2.如权利要求1所述的图像捕捉装置，还包括：
压缩解压缩装置，用于
在记录时对来自所述固态图像捕捉器件的所述第一画面速率的第一捕捉图像数据进行压缩编码，之后通过所述记录介质控制装置将经压缩的捕捉图像数据记录在所述记录介质上，以及
在再现时对通过所述记录介质控制装置从所述记录介质读取的经压缩的捕捉图像数据进行解压缩解码。
3.一种图像捕捉装置，包括：
记录介质控制装置，用于把从固态图像捕捉器件获得的具有第一画面速率的捕捉图像数据记录到记录介质，并且从所述记录介质读取具有低于所述第一画面速率的第二画面速率的捕捉图像数据；
变换装置，用于把从所述固态图像捕捉器件获得的具有所述第一画面速率的捕捉图像数据变换为具有所述第二画面速率的捕捉图像数据；
第一相机信号处理装置，用于对从所述变换装置获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理装置，用于对从所述记录介质控制装置获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；以及
显示处理装置，用于根据从所述第一相机信号处理装置或所述第二相机信号处理装置获得的图像信号来生成用于显示的图像信号，
其中，与所述第二相机信号处理装置相比，所述第一相机信号处理装置是简单构造的，这意味着所述第一相机信号处理装置生成仅在显示部分上显示的图像，并且将要显示的图像的图像质量能够低至只要满足检查正在捕捉的对象图像的目的即可。
4.一种图像捕捉装置，包括：
第一记录介质控制装置，用于把从固态图像捕捉器件中获得的具有第一画面速率的捕捉图像数据记录到第一记录介质，并且从所述第一记录介质读取具有低于所述第一画面速率的第二画面速率的捕捉图像数据；
变换装置，用于把从所述固态图像捕捉器件获得的具有所述第一画面速率的捕捉图像数据变换为具有所述第二画面速率的捕捉图像数据；
第一相机信号处理装置，用于对从所述变换装置获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理装置，用于对从所述第一记录介质控制装置获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；
第二记录介质控制装置，用于将所述第二相机信号处理装置的输出图像信号记录到第二记录介质并且按照所述第二画面速率从所述第二记录介质读取图像信号；以及
显示处理装置，用于根据从所述第一相机信号处理装置获得的输出图像信号或所述第二记录介质控制装置的输出图像信号来生成用于显示的图像信号，
其中，与所述第二相机信号处理装置相比，所述第一相机信号处理装置是简单构造的，这意味着所述第一相机信号处理装置生成仅在显示部分上显示的图像，并且将要显示的图像的图像质量能够低至只要满足检查正在捕捉的对象图像的目的即可。
5.一种图像捕捉方法，包括：
记录介质控制步骤，用于进行控制使得把从固态图像捕捉器件获得的具有第一画面速率的第一捕捉图像数据记录到记录介质，并且进行控制使得以低于所述第一画面速率的第二画面速率从所述记录介质读取所述第一捕捉图像数据作为第三捕捉图像数据；
变换步骤，用于把从所述固态图像捕捉器件获得的具有所述第一画面速率的第一捕捉图像数据变换为具有所述第二画面速率的第二捕捉图像数据；
相机信号处理步骤，用于对从所述变换步骤或所述记录介质控制步骤获得的具有所述第二画面速率的第二或第三捕捉图像数据执行相机信号处理；
显示处理步骤，用于根据从所述相机信号处理步骤获得的图像信号来生成用于显示的图像信号；以及
控制步骤，用于
在记录所述第一捕捉图像数据时，至少控制所述记录介质控制步骤、变换步骤、相机信号处理步骤，使得所述变换步骤对来自所述固态图像捕捉器件的所述第一画面速率的第一捕捉图像数据执行信号分路，其中第一路所述第一捕捉图像数据在未经相机信号处理的情况下通过所述记录介质控制步骤被记录到所述记录介质，第二路所述第一捕捉图像数据通过所述变换步骤被变换为具有所述第二画面速率的第二捕捉图像数据，并且使得所述相机信号处理步骤以所述第二画面速率对所述第二捕捉图像数据执行相机信号处理并输出用于显示，并且
在再现所述第一捕捉图像数据时，至少控制所述记录介质控制步骤以及所述相机信号处理步骤，使得所述记录介质控制步骤以所述第二画面速率读取被记录到所述记录介质的第一捕捉图像数据作为所述第三捕捉图像数据，并使得在所述相机信号处理步骤中以所述第二画面速率对所述第三捕捉图像数据执行所述相机信号处理并输出用于显示。
6.如权利要求5所述的图像捕捉方法，还包括：
压缩解压缩步骤，用于
在记录时对来自所述固态图像捕捉器件的所述第一画面速率的第一捕捉图像数据进行压缩编码，之后通过所述记录介质控制步骤将经压缩的捕捉图像数据记录在所述记录介质上，以及
在再现时对通过所述记录介质控制步骤从所述记录介质读取的经压缩的捕捉图像数据进行解压缩解码。
7.一种图像捕捉方法，包括：
记录介质控制步骤，用于把从固态图像捕捉器件获得的具有第一画面速率的捕捉图像数据记录到记录介质，并且从所述记录介质读取具有低于所述第一画面速率的第二画面速率的捕捉图像数据；
变换步骤，用于把从所述固态图像捕捉器件获得的具有所述第一画面速率的捕捉图像数据变换为具有所述第二画面速率的捕捉图像数据；
第一相机信号处理步骤，用于对从所述变换步骤获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理步骤，用于对从所述记录介质控制步骤获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；以及
显示处理步骤，用于根据从所述第一相机信号处理步骤或所述第二相机信号处理步骤获得的图像信号来生成用于显示的图像信号，
其中，与所述第二相机信号处理步骤相比，所述第一相机信号处理步骤是简单构造的，这意味着所述第一相机信号处理步骤生成仅在显示部分上显示的图像，并且将要显示的图像的图像质量能够低至只要满足检查正在捕捉的对象图像的目的即可。
8.一种图像捕捉方法，包括：
第一记录介质控制步骤，用于把从固态图像捕捉器件获得的具有第一画面速率的捕捉图像数据记录到第一记录介质，并且从所述第一记录介质读取具有低于所述第一画面速率的第二画面速率的捕捉图像数据；
变换步骤，用于把从所述固态图像捕捉器件获得的具有所述第一画面速率的捕捉图像数据变换为具有所述第二画面速率的捕捉图像数据；
第一相机信号处理步骤，用于对从所述变换步骤获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；
第二相机信号处理步骤，用于对从所述第一记录介质控制步骤获得的具有所述第二画面速率的捕捉图像数据执行相机信号处理；
第二记录介质控制步骤，用于将所述第二相机信号处理步骤的输出图像信号记录到第二记录介质并且按照所述第二画面速率从所述第二记录介质读取图像信号；以及
显示处理步骤，用于根据从所述第一相机信号处理步骤获得的输出图像信号或所述第二记录介质控制步骤的输出图像信号来生成用于显示的图像信号，
其中，与所述第二相机信号处理步骤相比，所述第一相机信号处理步骤是简单构造的，这意味着所述第一相机信号处理步骤生成仅在显示部分上显示的图像，并且将要显示的图像的图像质量能够低至只要满足检查正在捕捉的对象图像的目的即可。
CN2007800405383A 2006-10-30 2007-10-12 图像捕捉装置和图像捕捉方法 Active CN101536491B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006293836A JP4680166B2 (ja) 2006-10-30 2006-10-30 撮像装置および撮像方法
JP293836/2006 2006-10-30
PCT/JP2007/070389 WO2008053716A1 (en) 2006-10-30 2007-10-12 Imaging device and imaging method

Publications (2)

Publication Number Publication Date
CN101536491A CN101536491A (zh) 2009-09-16
CN101536491B true CN101536491B (zh) 2012-11-28

Family

ID=39344059

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800405383A Active CN101536491B (zh) 2006-10-30 2007-10-12 图像捕捉装置和图像捕捉方法

Country Status (6)

Country Link
US (12) US8849090B2 (zh)
EP (2) EP2398228A1 (zh)
JP (1) JP4680166B2 (zh)
KR (1) KR101395433B1 (zh)
CN (1) CN101536491B (zh)
WO (1) WO2008053716A1 (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4680166B2 (ja) 2006-10-30 2011-05-11 ソニー株式会社 撮像装置および撮像方法
BRPI0809662A2 (pt) 2007-04-11 2014-10-14 Red Com Inc Câmaras de vídeo e métodos de gravação de vídeo de movimento com câmara e de processamento de imagens
US8237830B2 (en) 2007-04-11 2012-08-07 Red.Com, Inc. Video camera
CN102812698B (zh) * 2010-05-28 2015-07-22 松下电器产业株式会社 摄像装置
KR101714050B1 (ko) * 2010-11-01 2017-03-08 삼성전자주식회사 휴대단말기의 데이터 표시장치 및 방법
EP2716039A4 (en) * 2011-05-27 2014-11-05 Looxcie Inc SCALABLE AUDIOVISUAL STREAMING METHOD AND DEVICE THEREFOR
US9288413B2 (en) * 2012-07-12 2016-03-15 Gopro, Inc. Image capture accelerator
JP2016508700A (ja) 2013-02-14 2016-03-22 レッド．コム，インコーポレイテッド ビデオカメラ
EP2974265B1 (en) * 2013-03-15 2019-02-13 Canon Kabushiki Kaisha Imaging apparatus and imaging apparatus control method
JP2015053644A (ja) * 2013-09-09 2015-03-19 オリンパス株式会社 撮像装置
US8879858B1 (en) 2013-10-01 2014-11-04 Gopro, Inc. Multi-channel bit packing engine
US10360660B2 (en) * 2014-09-12 2019-07-23 Canon Kabushiki Kaisha Image processing apparatus and image processing method for handling raw images
JP6465613B2 (ja) * 2014-10-10 2019-02-06 キヤノン株式会社 画像処理装置、撮像装置、画像処理装置の制御方法、コンピュータプログラム
CN107409194B (zh) * 2015-03-03 2020-11-13 索尼半导体解决方案公司 信号处理装置、信号处理系统和信号处理方法
US9591254B2 (en) * 2015-03-26 2017-03-07 Qualcomm Incorporated Device and method for processing video data
US10863131B2 (en) * 2015-05-20 2020-12-08 Samsung Electronics Co., Ltd. Image sensor including parallel output of pixel signals from a pixel unit and image processing system including the same
DE102016109179B4 (de) * 2015-05-29 2023-08-03 Canon Kabushiki Kaisha Bildaufnahmeeinrichtung und Bildgebungsvorrichtung
CN107710757B (zh) * 2015-06-04 2021-08-10 英特尔公司 用于缓慢运动视频记录的自适应批量编码
CN105323556B (zh) * 2015-11-11 2019-05-17 深圳市阿格斯科技有限公司 监控摄像机影像多通道传送方法及装置
WO2017143522A1 (en) 2016-02-23 2017-08-31 Intel Corporation Graphics processor workload acceleration using a command template for batch usage scenarios
KR102664014B1 (ko) 2016-12-23 2024-05-09 삼성전자주식회사 이미지를 촬영하는 센서 및 그 제어 방법
WO2019010233A1 (en) 2017-07-05 2019-01-10 Red. Com, Llc PROCESSING VIDEO IMAGE DATA IN ELECTRONIC DEVICES
US11533450B2 (en) * 2017-09-25 2022-12-20 Comcast Cable Communications, Llc Anti-piracy video transmission and display
KR102499033B1 (ko) * 2018-01-31 2023-02-13 삼성전자주식회사 스택형 이미지 센서 및 스택형 이미지 센서를 포함하는 전자 장치
KR102449185B1 (ko) 2018-02-14 2022-09-29 삼성전자주식회사 피사체와 기준 영역 사이간의 거리에 따라 변경된 프레임 레이트로 획득된 이미지 데이터를 이용하여 선택적으로 동영상을 생성하는 전자 장치 및 그의 운용 방법
KR102531128B1 (ko) 2018-02-23 2023-05-10 삼성전자주식회사 카메라를 이용하여 복수의 프레임 레이트에 따라 영상을 촬영하는 전자 장치 및 그 작동 방법
CN108600668B (zh) * 2018-03-27 2020-09-29 维沃移动通信有限公司 一种录屏帧率调整方法及移动终端
JP2019184725A (ja) * 2018-04-05 2019-10-24 シャープ株式会社 表示装置
RU2716005C2 (ru) * 2018-06-29 2020-03-05 Закрытое акционерное общество "МНИТИ" (ЗАО "МНИТИ") Способ видеосопровождения с улучшенными динамическими характеристиками и устройство для его осуществления

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1812503A (zh) * 2005-01-24 2006-08-02 佳能株式会社 图像传感装置及其控制方法

Family Cites Families (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4496995A (en) * 1982-03-29 1985-01-29 Eastman Kodak Company Down converting a high frame rate signal to a standard TV frame rate signal by skipping preselected video information
US5557424A (en) * 1988-08-26 1996-09-17 Panizza; Janis M. Process for producing works of art on videocassette by computerized system of audiovisual correlation
JPH03154487A (ja) 1989-11-10 1991-07-02 Konica Corp ディジタルスチルビデオカメラ
US5196938A (en) * 1989-11-20 1993-03-23 Eastman Kodak Company Solid state fast frame recorder having independently selectable frame rate and exposure
US5442718A (en) 1992-09-07 1995-08-15 Sony Corporation Apparatus and method for storing and reproducing digital image data yielding high resolution and high quality video image data
US5856845A (en) 1993-01-28 1999-01-05 Sanyo Electric Co., Ltd. Imaging device for recording and reproducing slow motion pictures
USRE43462E1 (en) * 1993-04-21 2012-06-12 Kinya (Ken) Washino Video monitoring and conferencing system
JP3764493B2 (ja) 1993-09-20 2006-04-05 ソニー株式会社 電子スチルカメラ及び画像データ処理方法
US5640202A (en) 1994-04-26 1997-06-17 Canon Kabushiki Kaisha Imaging system which changes the frame rate of the image signal
JP3129599B2 (ja) 1994-04-26 2001-01-31 キヤノン株式会社 動画撮像システム
JPH0888833A (ja) 1994-09-19 1996-04-02 Fuotoron:Kk 変換装置および逆変換装置ならびにこれらを具備したスローモーション表示装置
JP3707820B2 (ja) 1995-03-07 2005-10-19 株式会社フォトロン 高速撮影装置
US5625412A (en) 1995-07-13 1997-04-29 Vision Research High-frame rate image acquisition and motion analysis system
US5568192A (en) 1995-08-30 1996-10-22 Intel Corporation Method and apparatus for processing digital video camera signals
JPH09224221A (ja) 1996-02-19 1997-08-26 Sanyo Electric Co Ltd スロー再生装置
JP4281161B2 (ja) 1999-07-28 2009-06-17 株式会社ニコン 電子カメラ
JP2000050205A (ja) 1998-07-24 2000-02-18 Sony Corp 撮像システム
JP2001036848A (ja) 1999-07-15 2001-02-09 Victor Co Of Japan Ltd カムコーダ
JP4326637B2 (ja) 1999-09-30 2009-09-09 独立行政法人理化学研究所 高速ビデオカメラ
JP2001112012A (ja) 1999-10-06 2001-04-20 Sony Corp 撮像信号処理装置、撮像信号処理方法、データ復号装置、及び撮像装置
JP4323685B2 (ja) 2000-06-09 2009-09-02 キヤノン株式会社 再生装置及び再生方法
DE10033751B4 (de) * 2000-07-12 2004-09-16 Lenz, Reimar, Dr. Digitale, hochauflösende Kinofilm-Kamera
DE10043961C2 (de) * 2000-09-06 2003-03-27 Fraunhofer Ges Forschung Kombinierte Standard-Video- und High-Speed-Kamera
JP2002320203A (ja) 2001-04-19 2002-10-31 Matsushita Electric Ind Co Ltd 映像信号記録装置および映像信号再生装置
JP3924755B2 (ja) 2001-09-13 2007-06-06 本田技研工業株式会社 高速事象撮影装置
US6907345B2 (en) * 2002-03-22 2005-06-14 Maptech, Inc. Multi-scale view navigation system, method and medium embodying the same
WO2003085969A1 (fr) 2002-04-04 2003-10-16 Sony Corporation Systeme d'enregistrement d'image captee, dispositif d'enregistrement de signal et procede d'enregistrement de signal
JP2003324644A (ja) 2002-05-07 2003-11-14 Canon Inc 映像信号処理装置、画像表示制御方法、記憶媒体、及びプログラム
JP2003348429A (ja) 2002-05-27 2003-12-05 Nikon Corp 電子カメラ、および画像処理プログラム
JP2004120384A (ja) 2002-09-26 2004-04-15 Photron Ltd 高速度撮像装置及び撮像速度の変更方法
EP1420407B1 (en) 2002-11-15 2012-01-04 Sony Corporation Method and apparatus for controlling editing image display
US7557838B2 (en) 2002-11-15 2009-07-07 Sony Corporation Imaging method and imaging apparatus
JP4222869B2 (ja) 2002-12-10 2009-02-12 株式会社ソニー・コンピュータエンタテインメント 画像再生装置
JP3818260B2 (ja) 2003-01-15 2006-09-06 松下電器産業株式会社 高速撮像信号記録装置
US7259734B2 (en) * 2003-02-13 2007-08-21 Jae-Jin Lim Multi-scanning control process and LED displaying device
JP3720812B2 (ja) * 2003-02-24 2005-11-30 松下電器産業株式会社 テレビジョンカメラ
JP2005006198A (ja) 2003-06-13 2005-01-06 Canon Inc 撮像装置、その制御方法、プログラム及び記録媒体
JP3729189B2 (ja) 2003-07-18 2005-12-21 ソニー株式会社 撮像装置
JP4518757B2 (ja) 2003-07-18 2010-08-04 ソニー株式会社 撮像装置
JP3800207B2 (ja) 2003-07-18 2006-07-26 ソニー株式会社 撮像装置
JP4007276B2 (ja) * 2003-07-18 2007-11-14 ソニー株式会社 撮像装置とその制御装置
JP3731589B2 (ja) * 2003-07-18 2006-01-05 ソニー株式会社 撮像装置と同期信号発生装置
KR101081000B1 (ko) * 2003-10-23 2011-11-09 소니 가부시키가이샤 화상 처리 장치 및 화상 처리 방법과 기록 매체
JP4140518B2 (ja) * 2003-12-15 2008-08-27 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP2005241787A (ja) * 2004-02-25 2005-09-08 Victor Co Of Japan Ltd 画像表示装置
JP2005295423A (ja) 2004-04-05 2005-10-20 Matsushita Electric Ind Co Ltd 撮像装置
KR100457325B1 (ko) 2004-07-09 2004-11-17 엔에이치엔(주) 메세지 송수신 및 게시 시스템 및 송수신 및 게시 방법
JP2006094145A (ja) 2004-09-24 2006-04-06 Casio Comput Co Ltd 撮影装置及びそのプログラム
JP2006121479A (ja) 2004-10-22 2006-05-11 Sony Corp 信号処理装置およびその方法
JP4569275B2 (ja) 2004-11-25 2010-10-27 ソニー株式会社 撮像装置と撮像方法
JP4424174B2 (ja) 2004-11-25 2010-03-03 ソニー株式会社 撮像装置と撮像方法
JP2006180315A (ja) 2004-12-24 2006-07-06 Matsushita Electric Ind Co Ltd 動画撮影装置、動画再生装置および動画撮影方法、動画再生方法
EP1721457A1 (en) 2004-12-24 2006-11-15 Matsushita Electric Industrial Co., Ltd. Moving-image shooting device, method of shooting moving-image, recording medium in which video signals are recorded by the same shooting device, moving-image reproducing device for reproducing the video signals recorded in the same medium, and method of reproducing the moving-image
JP4306638B2 (ja) 2005-04-14 2009-08-05 ソニー株式会社 画像処理システム，撮像装置，撮像方法，画像再生装置および画像再生方法
JP4282645B2 (ja) * 2005-08-31 2009-06-24 株式会社東芝 撮像装置
US7831137B2 (en) * 2006-03-28 2010-11-09 Nikon Corporation Image apparatus with selective image compensation
JP4680166B2 (ja) 2006-10-30 2011-05-11 ソニー株式会社 撮像装置および撮像方法
JP4958807B2 (ja) * 2008-01-24 2012-06-20 株式会社キーエンス 画像処理装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1812503A (zh) * 2005-01-24 2006-08-02 佳能株式会社 图像传感装置及其控制方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JP特开2005-295423A 2005.10.20
JP特开平11-313230A 1999.11.09

Also Published As

Publication number Publication date
US9025929B2 (en) 2015-05-05
US20140355948A1 (en) 2014-12-04
US20180124369A1 (en) 2018-05-03
US20220279154A1 (en) 2022-09-01
EP2398228A1 (en) 2011-12-21
US20100061707A1 (en) 2010-03-11
US20230353887A1 (en) 2023-11-02
US8849090B2 (en) 2014-09-30
US20170019650A1 (en) 2017-01-19
US20210203902A1 (en) 2021-07-01
WO2008053716A1 (en) 2008-05-08
US10313648B2 (en) 2019-06-04
US11750937B2 (en) 2023-09-05
US11388380B2 (en) 2022-07-12
US20200296342A1 (en) 2020-09-17
US9661291B2 (en) 2017-05-23
KR101395433B1 (ko) 2014-05-14
US10708563B2 (en) 2020-07-07
US9866811B2 (en) 2018-01-09
JP2008113126A (ja) 2008-05-15
EP2169947A4 (en) 2011-04-06
US20190281268A1 (en) 2019-09-12
US10986323B2 (en) 2021-04-20
CN101536491A (zh) 2009-09-16
JP4680166B2 (ja) 2011-05-11
US9538153B1 (en) 2017-01-03
EP2169947A1 (en) 2010-03-31
EP2169947B1 (en) 2013-12-25
US20150201126A1 (en) 2015-07-16
US20160142694A1 (en) 2016-05-19
US20170230629A1 (en) 2017-08-10
KR20090074067A (ko) 2009-07-03

Similar Documents

Publication Publication Date Title
CN101536491B (zh) 图像捕捉装置和图像捕捉方法
CN100525425C (zh) 图像摄取装置和图像处理方法
CN101232559B (zh) 具有图像模糊减少机制的图像传感器
KR100347508B1 (ko) 촬상 장치
JP2008124671A (ja) 撮像装置および撮像方法
US20040145668A1 (en) MOS solid-state imaging element and imaging device provided with the same
US7236194B2 (en) Image signal processing apparatus
EP1496698A1 (en) Recording and reproducing device
JP2000050127A (ja) 電子スチルカメラ及びその制御方法
JP2000115693A (ja) 画像データ記録方法、画像データ記録装置、画像データ再生方法、画像データ再生装置、情報記録媒体及びコンピュータ読み取り可能な記録媒体
KR100254081B1 (ko) 화상 데이타 처리 장치 및 그 방법
KR0137459B1 (ko) 디지탈 스틸 비디오 카메라에서 피사체 이미지 기록 및 재생회로
KR20080041857A (ko) 해상도가 다른 영상을 저장하는 촬영장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant