CN101540867A - 摄像设备 - Google Patents

摄像设备 Download PDF

Info

Publication number
CN101540867A
CN101540867A CNA200910129411XA CN200910129411A CN101540867A CN 101540867 A CN101540867 A CN 101540867A CN A200910129411X A CNA200910129411X A CN A200910129411XA CN 200910129411 A CN200910129411 A CN 200910129411A CN 101540867 A CN101540867 A CN 101540867A
Authority
CN
China
Prior art keywords
image data
data
still image
unit
record
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA200910129411XA
Other languages
English (en)
Other versions
CN101540867B (zh
Inventor
藤井昭雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN101540867A publication Critical patent/CN101540867A/zh
Application granted granted Critical
Publication of CN101540867B publication Critical patent/CN101540867B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/333Mode signalling or mode changing; Handshaking therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • H04N1/212Motion video recording combined with still video recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/21Intermediate information storage
    • H04N2201/212Selecting different recording or reproducing modes, e.g. high or low resolution, field or frame
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/333Mode signalling or mode changing; Handshaking therefor
    • H04N2201/33307Mode signalling or mode changing; Handshaking therefor of a particular mode
    • H04N2201/33342Mode signalling or mode changing; Handshaking therefor of a particular mode of transmission mode
    • H04N2201/33357Compression mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/7921Processing of colour television signals in connection with recording for more than one processing mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H04N9/8047Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction using transform coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

一种摄像设备,包括:信号处理单元,用于使用从摄像单元输出的图像数据生成运动图像数据和静止图像数据;运动图像编码单元,用于编码运动图像数据;静止图像编码单元,用于编码静止图像数据;记录单元,用于将编码后的运动图像数据和静止图像数据记录在记录介质上;设置单元,用于设置编码后的运动图像数据的数据率;以及控制单元,用于控制运动图像编码单元和静止图像编码单元。该控制单元基于所设置的数据率来控制运动图像编码单元以调整运动图像数据的数据率,并且基于所设置的数据率和记录介质的记录数据率来控制静止图像编码单元以调整静止图像数据的数据量。

Description

摄像设备
技术领域
本发明总的来说涉及一种摄像设备。更特别地,本发明涉及一种适合于拍摄运动图像和静止图像的技术。
背景技术
已经存在用于拍摄图像并将图像记录在诸如存储卡等的记录介质上的摄像机。随着近来摄像机的摄像元件的像素数量的增多,已经实现了高清晰静止图像以及运动图像的拍摄。另外,一些摄像机可以在运动图像的拍摄期间拍摄静止图像。在这种摄像机内,可以在运动图像的记录期间响应于快门按钮的按下而拍摄静止图像。
例如,在日本特开平7-284058号公报中公开的摄像机在记录运动图像之前根据MPEG标准来编码运动图像。响应于在运动图像的记录期间发出的静止图像拍摄指令,摄像机将运动图像编码为内帧(I帧)。摄像机将I帧作为静止图像数据记录在存储器中,然后在运动图像的拍摄终止之后将静止图像数据记录在记录介质上。
另外,在日本特开平9-233410号公报中公开的摄像机具有用于静止图像的缓冲存储器。响应于在运动图像的记录期间发出的静止图像拍摄请求,摄像机将静止图像数据临时存储在缓冲存储器内。在运动图像数据的记录终止后,摄像机从缓冲存储器读出静止图像数据,并将静止图像数据记录在记录介质上。
在日本特开2005-12378号公报中公开的图像记录设备将运动图像数据记录在第一记录介质上。响应于在运动图像数据的记录期间发出的静止图像拍摄请求,图像记录设备将静止图像数据记录在第二记录介质上。在运动图像数据的记录终止后,图像记录设备将记录在第二记录介质上的静止图像数据复制在第一记录介质上。
然而,在日本特开平7-284058号公报中公开的摄像机将与在运动图像的拍摄期间发出的静止图像拍摄指令的定时相对应的帧记录为I帧。因此,所再现的运动图像数据的图像质量不利地降低。
另外,在日本特开平9-233410号公报中公开的摄像机响应于在运动图像的拍摄期间发出的静止图像拍摄指令而将静止图像数据记录在缓冲存储器内,然后在运动图像的拍摄终止后将静止图像数据记录在记录介质上。如果摄像机在运动图像的拍摄期间用完了可用的缓冲存储器,则不利地,摄像机不再能够拍摄静止图像。另外,由于摄像机在运动图像的拍摄终止后将存储在缓冲器内的静止图像数据记录在记录介质上,因而用户可能不能立即进行诸如图像拍摄等的后续操作,直到摄像机结束在记录介质上记录静止图像数据为止。
此外,在日本特开2005-12378号公报中公开的图像记录设备响应于在运动图像的拍摄期间发出的静止图像拍摄指令而在与用于存储运动图像数据的记录介质不同的另一记录介质上记录静止图像数据。在运动图像的拍摄终止后,图像记录设备将记录在另一记录介质上的静止图像数据记录在存储有运动图像数据的记录介质上。因此,用户可能不能立即进行诸如图像拍摄等的后续操作,直到在运动图像的拍摄终止后图像记录设备结束在存储有运动图像数据的记录介质上记录静止图像数据为止。另外,图像记录设备须能够将运动图像和静止图像记录在多个记录介质上。
如上所述,在上述文献所公开的技术中,响应于在运动图像的拍摄期间发出的静止图像拍摄指令而在缓冲存储器中临时存储静止图像。然后,在运动图像的记录终止后记录静止图像。因此,如果在运动图像的拍摄期间用完了用于静止图像的可用缓冲存储器,则引起不能拍摄其他静止图像的限制以及用户在运动图像的记录终止后不能立即进行后续操作的限制。
因此,可用性在相关技术中不佳。
发明内容
本发明提高了当记录运动图像和静止图像时的可用性。
根据本发明的一个方面,一种摄像设备包括:摄像单元;信号处理单元,用于使用从所述摄像单元输出的图像数据生成运动图像数据和静止图像数据;运动图像编码单元,用于编码所述运动图像数据以压缩所述运动图像数据的信息量;静止图像编码单元,用于编码所述静止图像数据以压缩所述静止图像数据的信息量;记录单元,用于将由所述运动图像编码单元编码后的所述运动图像数据和由所述静止图像编码单元编码后的所述静止图像数据记录在记录介质上;设置单元,用于设置要由所述运动图像编码单元编码的所述运动图像数据的数据率;以及控制单元,用于控制所述运动图像编码单元和所述静止图像编码单元。所述控制单元基于由所述设置单元设置的所述数据率来控制所述运动图像编码单元,以调整所述运动图像数据的数据率。所述控制单元基于由所述设置单元设置的所述数据率和所述记录介质的记录数据率来控制所述静止图像编码单元,以调整所述静止图像数据的数据量。
根据本发明的另一个方面,一种摄像设备包括:摄像单元;信号处理单元,用于使用从所述摄像单元输出的图像数据生成运动图像数据和静止图像数据;运动图像编码单元,用于编码所述运动图像数据以压缩所述运动图像数据的信息量;静止图像编码单元,用于编码所述静止图像数据以压缩所述静止图像数据的信息量;记录单元,用于将由所述运动图像编码单元编码后的所述运动图像数据和由所述静止图像编码单元编码后的所述静止图像数据记录在记录介质上;设置单元,用于设置要由所述静止图像编码单元编码的所述静止图像数据的图像质量;以及控制单元,用于控制所述运动图像编码单元和所述静止图像编码单元。所述控制单元基于由所述设置单元设置的所述图像质量来控制所述静止图像编码单元,以调整所述静止图像数据的数据量。所述控制单元基于根据所设置的所述图像质量而编码的所述静止图像数据的数据量和所述记录介质的记录数据率来控制所述运动图像编码单元,以调整所述运动图像数据的数据率。
根据又一个方面,一种摄像设备包括:摄像单元;信号处理单元,用于使用从所述摄像单元输出的图像数据生成运动图像数据和静止图像数据;运动图像编码单元,用于编码所述运动图像数据以压缩所述运动图像数据的信息量;静止图像编码单元,用于编码所述静止图像数据以压缩所述静止图像数据的信息量;记录单元,用于将由所述运动图像编码单元编码后的所述运动图像数据和由所述静止图像编码单元编码后的所述静止图像数据记录在记录介质上;设置单元,用于设置要由所述运动图像编码单元编码的所述运动图像数据的数据率和要由所述静止图像编码单元编码的所述静止图像数据的图像质量;选择单元,用于选择第一模式和第二模式的其中一个;以及控制单元,用于根据由所述选择单元选择的模式来控制所述运动图像编码单元和所述静止图像编码单元。在所述第一模式中,所述控制单元基于由所述设置单元设置的所述数据率来控制所述运动图像编码单元以调整所述运动图像数据的数据率,并且基于所设置的所述数据率和所述记录介质的记录数据率来控制所述静止图像编码单元以调整所述静止图像数据的数据量。在所述第二模式中,所述控制单元基于由所述设置单元设置的所述图像质量来控制所述静止图像编码单元以调整所述静止图像数据的数据量,并且基于根据所设置的所述图像质量而编码的所述静止图像数据的数据量和所述记录介质的记录数据率来控制所述运动图像编码单元以调整所述运动图像数据的数据率。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得清楚。
附图说明
图1是示出根据本发明典型实施例的摄像设备的结构的框图。
图2是示出运动图像编码单元的结构的框图。
图3是示出静止图像编码单元的结构的框图。
图4是示出静止图像编码单元的结构的框图。
图5是示出静止图像编码单元的结构的框图。
图6是示出用于设置运动图像质量模式的处理的流程图。
图7是示出记录处理的流程图。
图8是示出静止图像记录处理的流程图。
图9是示出根据本发明典型实施例的摄像设备的结构的框图。
图10是示出记录处理的流程图。
图11是示出静止图像编码处理的流程图。
图12是示出记录处理的流程图。
图13是示出静止图像编码单元的结构的框图。
具体实施方式
将参考图1来说明本发明的第一典型实施例。
图1是示出根据本典型实施例的摄像设备100的结构的示例的框图。
参考图1,摄像单元101包括诸如电荷耦合器件(chargecoupled device,CCD)等的摄像元件以及用于将图像信号转换成数字信号的模数(A/D)转换器。摄像单元101拍摄被摄体的图像,并输出运动图像数据。运动图像信号处理单元102对从摄像单元101输出的运动图像数据进行下述处理。运动图像编码单元103接收从运动图像信号处理单元102输出的运动图像数据,并且根据给定的编码方法来编码运动图像数据,以压缩其信息量。
多路复用器104选择从运动图像编码单元103提供的运动图像数据和从静止图像编码单元108提供的静止图像数据的其中一个,并向记录处理单元105输出所选择的数据。记录处理单元105对从多路复用器104输出的运动图像数据或者静止图像数据进行处理,以将数据的格式转换成适合于记录的格式,并且在记录介质106上记录该数据。记录介质106被随机地存取,并且可以例如是存储卡、硬盘驱动器(HDD)或光盘。在本典型实施例中,记录介质106的记录数据率高于运动图像数据的数据率(data rate)。另外,在本典型实施例内,将海量HDD用作记录介质106。在本典型实施例中,用作记录介质106的HDD包括在摄像设备100内,并且不容易从摄像设备100取出该HDD。然而,可以使用未示出的机构来容易地交换HDD。
静止图像信号处理单元107响应于由系统控制单元111发出的静止图像拍摄指令,选择从摄像单元101输出的运动图像数据中的一帧作为静止图像,以生成静止图像数据。静止图像信号处理单元107在对静止图像数据进行处理之后向静止图像编码单元108输出所选择的帧的静止图像数据。静止图像编码单元108根据给定的编码方法来编码从静止图像信号处理单元107输出的静止图像数据,以压缩其信息量。
编码量控制单元109以下述的方式来控制由运动图像编码单元103和静止图像编码单元108进行的编码处理。显示单元110显示基于从摄像单元101输出的运动图像数据的运动图像、与静止图像拍摄指令相对应的静止图像、以及各种信息。
系统控制单元111控制摄像设备100的各个单元。操作单元112包括电源开关、用于指示开始和终止记录运动图像的运动图像记录开关、以及用于指示拍摄静止图像的静止图像记录开关。如稍后所述,操作单元112还包括用于在给定的菜单画面上对运动图像质量模式、连续拍摄的静止图像的数量和静止图像质量进行设置的菜单开关以及操纵杆。
在本典型实施例中,用户可以从多个图像质量中选择要记录的运动图像的图像质量。
例如,在本典型实施例中准备了标准图像质量模式和高图像质量模式。用户选择上述图像质量模式的其中一个。更具体地,用户可以通过在不进行记录或者图像拍摄时操作操作单元112来选择要记录的运动图像的图像质量模式。另外,要以高图像质量模式记录的运动图像数据的数据率(每单位时间的数据量)与要以标准图像质量模式记录的运动图像数据的数据率不同。更具体地,运动图像编码单元103将以高图像质量模式记录的运动图像数据的上限数据率值设置得比标准图像质量模式的高,并且根据所设置的数据率来编码运动图像数据。
现在将说明用于随着摄像设备100对图像质量模式的设置而设置运动图像数据的数据率和要在运动图像的拍摄期间记录的静止图像数据的数据量的处理。图6是示出在图像质量模式设置处理时执行的过程的流程图。系统控制单元111控制各个单元,由此执行图6所示的处理。
如上所述,响应于用户对于运动图像数据的图像质量模式的选择,系统控制单元111向编码量控制单元109输出表示所选择的图像质量模式的信息(S601)。编码量控制单元109基于从系统控制单元111提供的图像质量模式信息来确定运动图像数据的数据率Rmv(比特/秒),并向运动图像编码单元103输出关于数据率Rmv的信息。如上所述,由于在每个图像质量模式下的运动图像数据的上限数据率值Rmv是预定的,因此系统控制单元111选择与所设置的图像质量模式相对应的数据率Rmv。
然后,编码量控制单元109获取与当记录处理单元105在记录介质106上记录数据时设置的最大数据率Rmax(比特/秒)有关的信息(S602)。在本典型实施例中,由于在摄像设备100中所包括的HDD被用作记录介质106,因此记录处理单元105预先存储可以在将数据记录在HDD上时使用的最大数据率。当诸如存储卡等的可交换记录介质被用作记录介质106时,可以通过从记录介质读出关于最大数据率的信息来获取关于最大数据率Rmax的信息。
然后,编码量控制单元109以下述的方式,基于运动图像数据的数据率Rmv和记录介质的记录数据率Rmax来计算要在运动图像数据的拍摄期间记录的静止图像数据的一帧的数据量Vst(S603)。
首先,以下面的方式来计算作为数据率Rmax和数据率Rmv之间的差的数据率Rst(比特/秒)。
Rst=Rmax-Rmv
当在运动图像数据的记录期间记录了除运动图像数据以外的数据时,数据率Rst表示除运动图像数据以外的数据的上限数据率值。这里,假定在运动图像数据的记录期间记录静止图像数据。
然后,编码量控制单元109以下面的方式,基于数据率Rst来计算要在运动图像数据的记录期间记录的静止图像数据的一帧的数据量Vst(比特)。
Vst=Rst/N
这里,“N”表示可以由摄像设备100在诸如1秒等的单位时间内拍摄的静止图像的数量。在本典型实施例中,值“N”是预定的。然而,例如可以通过操作单元112的操作来自由地将值“N”向上改变到上限值。以这种方式,在单位时间期间拍摄的N个帧均具有相同的等于数据量Vst的静止图像数据量。
在以这种方式来计算数据量Vst后,编码量控制单元109向静止图像编码单元108输出关于数据量Vst的信息。
在本典型实施例中,响应于运动图像的图像质量模式的设置,基于所设置的图像质量模式和记录介质的记录数据率来确定要在记录运动图像数据的同时记录的一个静止图像的数据量Vst。
因此,当将标准图像质量模式设置为运动图像数据的图像质量模式时,要在运动图像的拍摄期间记录的静止图像的数据量变得大于高图像质量模式下的数据量。即,可以拍摄高质量静止图像。
现在将说明摄像设备100的记录操作。图7是示出根据本典型实施例的记录处理的流程图。系统控制单元111控制各个单元以执行图7所示的处理。
当通过操作单元112指示开始拍摄运动图像时,系统控制单元111控制各个块以开始记录运动图像数据(S701)。摄像单元101向运动图像信号处理单元102输出运动图像数据。运动图像信号处理单元102对所输出的运动图像数据进行诸如白平衡调整、颜色处理、伽马处理和轮廓校正等的处理,然后向运动图像编码单元103输出处理后的运动图像数据。运动图像编码单元103根据给定的编码方法来编码所提供的运动图像数据。
在本典型实施例中,运动图像编码单元103根据MPEG标准来编码运动图像数据。MPEG标准用于使用帧内编码(I图片)、前向预测帧间编码(P图片)和双向预测帧间编码(B图片)来编码运动图像数据。
图2是示出运动图像编码单元103的结构的框图。
参考图2,分块电路201将所提供的运动图像数据分割成各自包括在水平和垂直方向上排列的8×8像素的多个块。然后,分块电路201向减法器202和运动补偿电路210提供分割后的运动图像数据。
运动补偿电路210根据要编码的帧是I图片、P图片还是B图片来向减法器202输出参考数据。更具体地,当编码I图片(帧内编码)时,运动补偿电路210向减法器202输出“0”。当编码P图片或者B图片时,运动补偿电路210将在存储器209内存储的参考帧的数据与从分块电路201输出的数据进行比较。然后运动补偿电路210从存储器209读出产生最小差的块的数据,并且向减法器202输出该数据作为参考数据。
首先,将说明帧内编码。
由于“0”被输入到减法器202作为参考数据,因此将所输入的图像数据输出到正交变换电路203。正交变换电路203对每个块正交变换从减法器202所提供的运动图像数据。然后正交变换电路203向量化电路204输出运动图像数据。
编码量控制单元109向编码量控制电路211提供关于运动图像数据的数据率Rmv的信息。编码量控制电路211根据数据率Rmv来设置当量化电路204量化运动图像数据时使用的初始量化步长值。量化电路204根据所设置的量化步长,对每个块量化从正交变换电路203提供的正交变换后的数据。然后量化电路204向编码电路205和逆量化电路(dequantization circuit)207输出量化后的数据。
逆量化电路207对每个块逆量化并逆正交变换从量化电路204输出的量化后的数据。然后逆量化电路207向加法器208输出数据。当进行帧内编码时,如上所述,从运动补偿电路210提供“0”。因此,加法器208向存储器209输出从逆量化电路207提供的数据。所提供的帧的数据被存储在存储器209中作为参考帧的数据。
编码电路205使用霍夫曼编码对从量化电路204提供的数据进行可变长度编码,并且向缓冲存储器206输出数据。缓冲存储器206临时存储编码后的数据,并在预定定时向多路复用器104输出所存储的数据作为编码后的运动图像数据。
编码量控制电路211还监视在缓冲存储器206中存储的数据的累积速度。编码量控制电路211控制量化电路204的量化步长,从而使得运动图像数据的数据率不超过设置值Rmv。
现在将说明帧间编码。
在这种情况下,运动补偿电路210向减法器202提供参考数据。减法器202从自分块电路201提供的数据中减去从运动补偿电路210提供的参考数据,以确定预测误差。然后减法器202向正交变换电路203提供预测误差。正交变换电路203对每个块正交变换从减法器202提供的数据,并向量化电路204输出正交变换后的数据。
量化电路204根据由编码量控制电路211控制的量化步长来量化从正交变换电路203提供的数据,并向编码电路205和逆量化电路207提供量化后的数据。逆量化电路207逆量化并逆正交变换从量化电路204提供的数据,并向加法器208输出该数据。
当进行帧间编码时,运动补偿电路210向加法器208提供参考数据。加法器208将从逆量化电路207提供的数据与从运动补偿电路210提供的参考数据相加,并向存储器209输出结果。以这种方式,所提供的帧的数据被存储在存储器209中作为参考帧的数据。在进行帧间预测编码的数据中,仅将P图片的数据存储在存储器209中作为参考帧的数据。
编码电路205使用霍夫曼编码对从量化电路204提供的数据进行可变长度编码,并向缓冲存储器206输出编码后的数据。如上所述,编码量控制电路211控制量化电路204的量化步长,从而使得运动图像数据的数据率不超过值Rmv。
返回参考图1,如果没有指示拍摄静止图像,则多路复用器104选择从运动图像编码单元103提供的编码后的运动图像数据,并向记录处理单元105输出所选择的数据。记录处理单元105在内部存储器中临时存储从多路复用器104输出的运动图像数据。如果在存储器中存储的运动图像数据量达到预定值,则记录处理单元105从存储器读出运动图像数据,并在向所读出的数据添加预定数据后将该数据记录在记录介质106上。如果在存储器中存储的数据量减少到预定值,则记录处理单元105停止在记录介质106上记录数据。以这种方式,在本典型实施例中,运动图像数据被间歇地记录在记录介质上。
返回参考图7,系统控制单元111判断在运动图像数据的记录期间是否通过操作单元112指示拍摄静止图像(S702)。如果没有指示拍摄静止图像(S702为“否”),则系统控制单元111判断是否指示终止记录运动图像(S703)。如果没有指示终止记录运动图像(S703为“否”),则处理返回到步骤S701。在步骤S701,系统控制单元111继续记录运动图像数据。
如果指示了终止记录运动图像(S703为“是”),则系统控制单元111终止在记录介质106上记录运动图像数据(S704)。在本典型实施例中,运动图像数据被作为文件而记录。更具体地,在记录的开始和终止之间拍摄的一个场景的运动图像数据被作为一个文件而管理。
将说明当在S702在拍摄运动图像期间指示拍摄静止图像时进行的处理。如果在运动图像的记录期间指示拍摄静止图像(S702为“是”),则处理进入步骤S705。在步骤S705,系统控制单元111执行静止图像记录处理。
图8是示出在步骤S705执行的静止图像记录处理的流程图。
响应于静止图像拍摄指令,系统控制单元111指示静止图像信号处理单元107拍摄静止图像。响应于静止图像拍摄指令,静止图像信号处理单元107在与静止图像拍摄指令相对应的定时从自摄像单元101输出的运动图像数据中选择一个帧,并在内部存储器中临时存储所选择的帧的数据(S801)。然后静止图像信号处理单元107对从摄像单元101输出的图像信号进行诸如白平衡调整、颜色处理、伽马处理和轮廓校正等的处理,并向静止图像编码单元108输出处理后的数据。
静止图像编码单元108根据给定的编码方法来编码所提供的静止图像数据。在本典型实施例中,静止图像编码单元108根据JPEG标准来编码静止图像数据。
图3是示出静止图像编码单元108的结构的框图。
参考图3,分块电路301将所提供的静止图像数据分割成各自包括在水平和垂直方向上排列的8×8像素的多个块。然后分块电路301向正交变换电路302输出分割后的数据。正交变换电路302对每个块正交变换静止图像数据,并在存储器303中存储正交变换后的静止图像数据。
对编码量控制电路307提供来自编码量控制单元109的一个静止图像的数据量Vst。编码量控制电路307考虑到静止图像的大小(像素的数量)和一个像素的比特宽度来设置量化电路304中的初始量化步长值。
量化电路304从存储器303读出正交变换后的静止图像数据。根据编码量控制电路307的指令,量化电路304对每个块量化正交变换后的静止图像数据,并向编码电路305提供量化后的数据。针对每个块,编码电路305对量化后的静止图像数据进行可变长度编码,并在缓冲存储器306中存储编码后的静止图像数据。编码电路305还向编码量控制电路307输出关于编码长度的信息(S802)。
根据从编码电路305输出的信息,编码量控制电路307计算一个静止图像的数据量(S803)。然后编码量控制电路307判断计算出的数据量是否超过所设置的数据量Vst(S804)。
如果计算出的数据量超过所设置的数据量Vst(S804为“是”),则编码量控制电路307增大量化电路304的量化步长(S807)。然后对从存储器303读出的正交变换后的静止图像数据进行量化和编码(S808)。然后处理返回到步骤S803。在步骤S803,编码量控制电路307再次计算数据量。以这种方式,进行编码,从而使得静止图像数据量不超过所设置的数据量Vst。
如果静止图像数据量没有超过数据量Vst(S804为“否”),则编码量控制电路307从缓冲存储器306读出编码后的静止图像数据,并向多路复用器104输出所读出的静止图像数据(S805)。
如果响应于从系统控制单元111提供的静止图像拍摄指令而从静止图像编码单元108输出编码后的静止图像数据,则多路复用器104选择该静止图像数据,并向记录处理单元105输出该静止图像数据。
记录处理单元105在存储器中临时存储从多路复用器104输出的静止图像数据。然后记录处理单元105在没有记录运动图像数据的预定定时从所述存储器读出静止图像数据,并在记录介质106上记录静止图像数据(S806)。在本典型实施例中,响应于一个静止图像拍摄指令而记录的一帧的静止图像数据被作为一个文件而管理。
如上所述,根据本典型实施例,基于记录介质106的记录数据率和要记录的运动图像数据的数据率来确定要在运动图像的拍摄期间记录的静止图像的数据量。
因此,可以在正在记录运动图像数据的同时记录静止图像数据,并且可以保证最小的静止图像拍摄间隔。
因此,即使在拍摄一个场景的运动图像的同时指示拍摄静止图像,也可以省略用于在终止拍摄运动图像之前存储静止图像数据的缓冲存储器。另外,可以去除对能够在运动图像的拍摄期间拍摄的静止图像的数量的限制。
另外,由于在终止拍摄运动图像之后没有记录静止图像数据,因此用户可以在终止拍摄之后立即进行后续操作。
此外,由于根据由用户设置的图像质量模式来确定运动图像数据的数据率,因此可以抑制一个场景的运动图像数据的编码量的变化,并且可以提供较好的图像质量。
在本典型实施例中,对静止图像数据进行编码,从而使得当在运动图像数据的记录期间记录静止图像数据时静止图像数据量不超过值Vst。另一方面,在本典型实施例中,可以在没有记录运动图像数据时记录静止图像数据。
更具体地,如果在没有进行记录时用户操作操作单元112以发出静止图像拍摄指令,则系统控制单元111控制静止图像信号处理单元107和静止图像编码单元108以生成和编码一帧的静止图像数据。然后记录处理单元105在记录介质106上记录该静止图像数据。
此时,与运动图像数据的图像质量(数据率)无关地设置静止图像数据量。更具体地,可以将静止图像数据量设置为预定值。可选地,当仅记录静止图像时,用户可以独立于运动图像数据的图像质量模式来设置静止图像数据的图像质量模式。这样,当仅记录静止图像时,系统控制单元111根据静止图像数据的图像质量模式来调整静止图像数据量。
尽管在本典型实施例中准备了运动图像数据的两种图像质量模式,然而图像质量模式不局限于这些示例。可以准备三种或更多中图像质量模式。用户可以选择图像质量模式。
现在将说明本发明第二典型实施例。在本典型实施例中,静止图像编码单元108包括多个编码量计算电路。
图4是示出根据本典型实施例的静止图像编码单元108的结构的框图。摄像设备100和运动图像编码单元103具有与在第一典型实施例中所述的结构类似的结构。下面将说明与第一典型实施例的区别。
参考图4,由于分块电路401和正交变换电路402分别具有与分块电路301和正交变换电路302相同的功能,因此省略对其的详细说明。
编码量计算电路407a-407c中的每一个通过使用不同的量化步长量化正交变换后的静止图像数据来计算在存储器403中存储的正交变换后的静止图像数据的编码量。编码量计算电路407a-407c中的每一个从存储器403读出正交变换后的静止图像数据,并对每个块量化所读出的静止图像数据。在本典型实施例中,编码量控制电路408基于值Vst来设置在编码量计算电路407a-407c中的不同的量化步长。
编码量计算电路407a-407c中的每一个对量化后的数据进行可变长度编码,并计算一个静止图像的编码量。编码量计算电路407a-407c中的每一个向编码量控制电路408输出所计算出的一个静止图像的编码量的信息。
编码量控制电路408从多个静止图像数据中选择具有不大于值Vst的数据量但具有最大编码量的静止图像数据,其中,编码量计算电路407a-407c计算了上述多个静止图像数据的每一个的编码量。然后编码量控制电路408设置当在量化电路404中编码所选择的静止图像数据时所使用的量化步长。量化电路404量化从存储器403读出的正交变换后的静止图像数据,并向编码电路405输出量化后的数据。
编码电路405对所提供的数据进行可变长度编码,并向缓冲存储器406输出编码后的数据以存储编码后的数据。将在缓冲存储器406中存储的数据输出到多路复用器104。
如上所述,根据本典型实施例,由于并行地估计静止图像数据的编码量,因此可以减少用于编码静止图像数据的时间。因此,可以缩短在运动图像的拍摄期间的静止图像拍摄间隔。
尽管在图4中包括三个编码量计算电路407a-407c并且各个编码量计算电路并行地量化静止图像数据,然而可以包括两个或者四个或者更多个编码量计算电路。
现在将说明本发明第三典型实施例。在本典型实施例中,将说明具有与第一典型实施例和第二典型实施例不同的结构的静止图像编码单元108。
图5是示出了根据本典型实施例的静止图像编码单元108的结构的框图。摄像设备100和运动图像编码单元103具有与在第一典型实施例中所述的结构类似的结构。下面将说明与第一典型实施例的区别。
参考图5,由于分块电路501和正交变换电路502分别具有与分块电路301和正交变换电路302相同的功能,因此省略对其的详细说明。
量化电路504a-504c中的每一个从存储器503读出正交变换后的静止图像数据,并对每个块量化所读出的静止图像数据。在本典型实施例中,编码量控制电路508基于值Vst来设置量化电路504a-504c中的不同的量化步长。
编码电路505a-505c中的每一个对所提供的数据进行可变长度编码,并分别在缓冲存储器506a-506c中存储编码后的数据。编码电路505a-505c中的每一个还向编码量控制电路508输出关于编码长度的信息。编码量控制电路508对编码电路505a-505c中的每一个计算一个静止图像的数据量。
编码量控制电路508从由编码电路505a-505c编码后的多个静止图像数据中选择具有不超过值Vst的数据量但是具有最大编码量的静止图像数据。编码量控制电路508控制选择器507以从存储有所选择的静止图像数据的缓冲存储器506a-506c的其中一个读出静止图像数据并将所读出的数据输出到多路复用器104。
根据本典型实施例,由于并行地估计静止图像数据的编码量并且在缓冲器中存储编码后的数据,因此可以进一步减少用于编码静止图像数据的时间,并且可以缩短在拍摄运动图像期间的静止图像拍摄间隔。
尽管在图5中示出了三个量化电路504a-504c,并且由量化电路504a-504c中的每一个量化静止图像数据,但是可以包括两个或者四个或者更多个量化电路。
现在将说明本发明第四典型实施例。在本典型实施例中,用户可以自由地设置要在运动图像的拍摄期间记录的静止图像的图像质量(数据量)。
图9是示出根据本典型实施例的摄像设备100a的结构的示例的框图。图9所示的摄像设备100a具有与图1所示的摄像设备100中所包括的功能块类似的功能块。摄像设备100a具有运动图像和静止图像拍摄功能。下面将说明与第一典型实施例的区别。
在本典型实施例中,用户可以通过操作操作单元112来设置要在运动图像的拍摄期间记录的静止图像数据的图像质量。
例如,在本典型实施例中,准备了两种图像质量模式,即标准图像质量模式和高图像质量模式作为静止图像的图像质量模式。用户选择图像质量模式的其中一种。用户可以通过在没有进行拍摄操作时操作操作单元112来选择静止图像的图像质量模式。
系统控制单元111向编码量控制单元109a输出关于由用户选择的图像质量模式的信息。编码量控制单元109a基于从系统控制单元111提供的关于静止图像的图像质量模式的信息来确定要在运动图像的拍摄期间记录的静止图像数据的量化步长。然后编码量控制单元109a向静止图像编码单元108a输出关于量化步长的信息。
如第一典型实施例中那样,编码量控制单元109a还根据由用户选择的运动图像数据的图像质量模式来确定运动图像数据的数据率Rmv。编码量控制单元109a向运动图像编码单元103输出与数据率Rmv有关的信息。此外,编码量控制单元109a获取与记录介质106的记录数据率Rmax有关的信息。
现在将说明摄像设备100a的记录操作。图10是示出根据本典型实施例的记录处理的流程图。系统控制单元111控制各个单元以执行图10所示的处理。
如果通过操作单元112来指示开始拍摄运动图像,则系统控制单元111控制各个单元以开始编码和记录运动图像数据(S1001)。此时,如在第一典型实施例中那样,编码量控制单元109a向运动图像编码单元103输出关于运动图像数据的数据率Rmv的信息。运动图像编码单元103调整编码量,从而使得要编码的运动图像数据的数据率不超过数据率Rmv。
系统控制单元111判断在运动图像数据的记录期间是否通过操作单元112指示拍摄静止图像(S1002)。如果没有指示拍摄静止图像(S1002中为“否”),则系统控制单元111判断是否指示终止记录运动图像(S1010)。如果没有指示终止记录(S1010为“否”),则处理返回到S1001。继续运动图像数据的记录。如果指示了终止记录运动图像(S1010中为“是”),则系统控制单元111终止在记录介质106上记录运动图像数据(S1011)。
现在将说明当在运动图像的拍摄期间指示拍摄静止图像时在步骤S1002进行的处理。如果在运动图像的记录期间指示拍摄静止图像(S1002中为“是”),则处理进入步骤S1003。在步骤S1003,执行静止图像编码处理。
图13是示出根据本典型实施例的静止图像编码单元108a的结构的图。在图13中,相同或者类似的附图标记表示图3中共同示出的结构,并且省略对其的详细说明。图11是示出在步骤S1003进行的静止图像记录处理的流程图。
参考图11,系统控制单元111响应于静止图像拍摄指令而指示静止图像信号处理单元107拍摄静止图像。响应于静止图像拍摄指令,静止图像信号处理单元107从自摄像单元101输出的运动图像数据中选择与静止图像拍摄指令的定时相对应的一帧,并在内部存储器中临时存储所选择的帧的数据(S1101)。然后静止图像信号处理单元107对在存储器中存储的一帧的静止图像数据进行诸如白平衡调整、颜色处理、伽马处理和轮廓校正等的处理,并向静止图像编码单元108a输出处理后的静止图像数据。
静止图像编码单元108a的编码量控制电路1307基于从编码量控制单元109a提供的关于静止图像的图像质量模式的信息来设置量化电路304的量化步长(S1102)。静止图像编码单元108a根据所设置的量化步长来编码静止图像数据(S1103),并在缓冲存储器306中存储编码后的静止图像数据(S1104)。
在本典型实施例中,编码量控制电路1307还从编码电路305顺序获取静止图像数据的编码结果,并计算一帧的静止图像数据量Sv。编码量控制电路1307向编码量控制单元109a输出关于数据量Sv(比特)的信息。
在完成静止图像数据的编码之后,处理进入图10所示的步骤S1004。在步骤S1004,编码量控制单元109a从静止图像编码单元108a获取关于静止图像数据量Sv的信息。编码量控制单元109a根据数据量Sv来判断是否改变运动图像数据的数据率Rmv(S1005)。
例如,当静止图像拍摄间隔N被设置为等于1时,编码量控制单元109a判断是否满足下面的表达式。
Rmax-Rmv>Sv
更具体地,编码量控制单元109a判断通过从记录介质的数据率减去运动图像数据的数据率而获得的值是否大于静止图像数据的数据量Sv。如果满足所述表达式,则编码量控制单元109a判断为可以在不改变运动图像数据的数据率Rmv的情况下在运动图像数据的记录期间来实现静止图像数据的记录。然后处理进入步骤S1010。
如果在步骤S1005静止图像数据的数据量Sv满足下面的表达式Rmax-Rmv≤Sv,则编码量控制单元109a判断为必须降低运动图像数据的数据率以在运动图像数据的记录期间记录静止图像数据。然后处理进入步骤S1006。在步骤S1006,编码量控制单元109a以下面的方式来计算运动图像数据的数据率Rmv’。
Rmv’=Rmv×α(其中,0<α<1)
然后编码量控制单元109a向运动图像编码单元103输出关于数据率Rmv’的信息,以将运动图像数据的数据率改变为值Rmv’。如果值α极小,则运动图像的图像质量大大降低。因此,值α期望被设置为大约0.7-0.9。
运动图像编码单元103编码运动图像数据,从而使得编码后的运动图像数据的数据率不超过新设置的数据率Rmv’。记录处理单元105通过多路复用器104读出存储在缓冲存储器306中的静止图像数据,并在记录介质106上记录该静止图像数据和编码后的运动图像数据(S1007)。
在开始记录静止图像数据后,系统控制单元111等待记录静止图像数据的终止(S1008)。在终止记录静止图像后,系统控制单元111将运动图像的数据率设置回前一数据率Rmv,并向运动图像编码单元103输出关于数据率Rmv的信息。然后运动图像编码单元103编码运动图像数据,从而使得编码后的运动图像数据的数据率不超过数据率Rmv。然后在记录介质106上记录编码后的运动图像数据(S1009)。
通过下面的等式来表示用于记录数据量Sv的静止图像数据的时间T。
T=Sv/(Rmax-Rmv×α)(秒)
如上所述,根据本典型实施例,用户事先设置要在运动图像的拍摄期间记录的静止图像数据的图像质量。响应于在运动图像的拍摄期间发出的静止图像拍摄指令,在记录运动图像数据和静止图像数据之前,基于编码后的静止图像数据量来改变运动图像数据的数据率。
因此,响应于在运动图像的拍摄期间发出的静止图像拍摄指令,可以在记录运动图像的同时记录具有由用户设置的图像质量的静止图像。
即使在拍摄一个场景的运动图像期间发出了静止图像拍摄指令,也可以省略用于在终止拍摄运动图像之前存储静止图像数据的缓冲存储器。另外,可以去除对能够在运动图像的拍摄期间拍摄的静止图像的数量的限制。
由于在终止拍摄运动图像后没有记录静止图像数据,因此用户可以在终止拍摄之后立即进行后续操作。
如果在运动图像的拍摄期间拍摄静止图像时用户不想降低运动图像的数据率,则用户可以对静止图像设置较低的图像质量。
尽管在本典型实施例中准备了两种模式作为要在运动图像的拍摄期间记录的静止图像的图像质量模式,然而模式的数量不局限于该特定示例。可以准备三种或更多种图像质量模式。用户可以选择上述模式的其中一种。
现在将说明本发明第五典型实施例。在第一典型实施例~第三典型实施例中,当在运动图像的拍摄期间拍摄静止图像时,在不改变运动图像数据的数据率的情况下设置静止图像数据量。另一方面,在第四典型实施例中,当在运动图像的拍摄期间拍摄静止图像时,在不改变所设置的静止图像数据的图像质量(数据量)的情况下设置运动图像数据的数据率。
本典型实施例准备了如下模式:第一模式,用于当在运动图像的拍摄期间拍摄静止图像时,在不改变运动图像数据的数据率的情况下设置静止图像数据量;以及第二模式,用于在不改变静止图像的图像质量的情况下设置运动图像数据的数据率。
用户可以选择和设置第一模式或者第二模式。
根据本典型实施例的摄像设备具有与图1或图9中所示的摄像设备的结构类似的结构。摄像设备还使用类似的基本记录处理。更具体地,用户通过操作单元112来设置要记录的运动图像数据的图像质量模式,并设置要在运动图像的拍摄期间记录的静止图像数据的图像质量模式。另外,用户通过操作操作单元112来选择第一模式(运动图像优先模式)和第二模式(静止图像优先模式)的其中一个。
系统控制单元111响应于在运动图像的拍摄期间发出的静止图像拍摄指令,根据由用户设置的模式来控制各个单元。
图12是示出根据本典型实施例的记录处理的流程图。系统控制单元111控制各个单元以执行图12所示的处理。
如果用户指示开始记录运动图像,则系统控制单元111判断选择了运动图像优先模式还是静止图像优先模式(S1201)。如果选择了运动图像优先模式,则系统控制单元111在步骤S1202执行运动图像优先模式的处理。
在该运动图像优先模式中,执行与在第一典型实施例中所述的图7和图8所示的处理类似的处理。
如果选择了静止图像优先模式,则在步骤S1203执行静止图像优先模式的处理。在该静止图像优先模式中,执行与在第四典型实施例中所述的图10和图11所示的处理类似的处理。
现在将说明本发明的其它典型实施例。可以通过执行存储在计算机的随机存取存储器(RAM)或者只读存储器(ROM)中的程序,实现根据本发明上述典型实施例的设备中所包括的各个单元和方法的各个步骤。本发明还包括程序和用于存储该程序的计算机可读记录介质。
本发明可以实施为例如系统、设备、方法、程序或者记录介质。更具体地,可以将本发明应用于包括多个装置的系统或包括一个装置的设备。
本发明还包括这样一种情况,在该情况下,直接地或者从远处向系统或设备提供用于实现上述典型实施例的功能的软件程序(与典型实施例的图6-8和图10-12中所示的流程图相对应的程序)。包括在系统或设备中的计算机读出并执行所提供的软件程序的程序代码,由此实现上述典型实施例的功能。本发明也包括这种情况。
因此,本发明还包括要被安装在计算机中以在该计算机中实现本发明的功能的程序代码。即,本发明包括用于实现本发明的功能的计算机程序。
在这种情况下,计算机程序可以是任何形式,诸如目标代码、由解释器执行的程序或向OS提供的脚本数据,只要该程序具有程序的功能即可。
用于提供计算机程序的计算机可读记录介质的类型包括例如软盘、硬盘、诸如CD-ROM、CD-R、CD-W或DVD(DVD-ROM、DVD-R)等的光盘、诸如MO等的磁光盘、磁带、非易失性存储卡以及ROM。
另外,程序提供方法包括这样一种情况,在该情况下,用户使用客户计算机的浏览器访问因特网网站,并从该网站将根据本发明典型实施例的计算机程序下载到诸如硬盘等的记录介质上。在这种情况下,所下载的程序可以是具有自动安装功能的压缩文件。
另外,可以将构成根据本发明典型实施例的程序的程序代码分割成多个文件,并可以从不同的网站下载所述多个文件中的每一个,由此可以实现本发明。即,本发明还包括允许多个用户将用于实现本发明的功能的程序文件下载到计算机中的WWW服务器。
根据本发明典型实施例的程序可以被加密并记录在诸如CD-ROM等的记录介质上,并且将该记录介质分发给用户。在这种情况下,可以允许满足预定条件的用户通过因特网从网站下载用于解密所述加密的密钥信息,使用密钥信息执行加密后的程序,并且在计算机中安装该程序。
除了通过计算机执行所读出的程序代码来实现根据上述典型实施例的功能之外,运行在计算机上的操作系统可以基于程序代码的指令执行部分或全部实际处理,由此可以实现典型实施例的功能。
此外,可以将从记录介质读出的程序写入插入计算机的功能扩展板或连接到计算机的功能扩展单元的存储器中。包括在功能扩展板或功能扩展单元中的CPU等可以基于程序的指令来执行部分或全部实际处理,由此实现上述典型实施例的功能。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有修改、等同结构和功能。

Claims (22)

1.一种摄像设备,包括:
摄像单元;
信号处理单元,用于使用从所述摄像单元输出的图像数据生成运动图像数据和静止图像数据;
运动图像编码单元,用于编码所述运动图像数据以压缩所述运动图像数据的信息量;
静止图像编码单元,用于编码所述静止图像数据以压缩所述静止图像数据的信息量;
记录单元,用于将由所述运动图像编码单元编码后的所述运动图像数据和由所述静止图像编码单元编码后的所述静止图像数据记录在记录介质上;
设置单元,用于设置要由所述运动图像编码单元编码的所述运动图像数据的数据率;以及
控制单元,用于控制所述运动图像编码单元和所述静止图像编码单元,其中,所述控制单元基于由所述设置单元设置的所述数据率来控制所述运动图像编码单元,以调整所述运动图像数据的数据率,所述控制单元基于由所述设置单元设置的所述数据率和所述记录介质的记录数据率来控制所述静止图像编码单元,以调整所述静止图像数据的数据量。
2.根据权利要求1所述的摄像设备,其特征在于,所述控制单元基于所述记录介质的记录数据率和所设置的所述数据率之间的差来调整所述静止图像数据的数据量。
3.根据权利要求1所述的摄像设备,其特征在于,
所述信号处理单元在单位时间内生成N帧的静止图像数据,以及
所述控制单元调整所述静止图像数据的数据量,从而使得N帧中的每一帧的静止图像数据具有相同的信息量。
4.根据权利要求1所述的摄像设备,其特征在于,所述设置单元根据用户操作来选择多个预定数据率的其中一个。
5.根据权利要求1所述的摄像设备,其特征在于,
所述信号处理单元响应于在所述运动图像数据的记录期间发出的静止图像拍摄指令,生成所述静止图像数据,以及
所述记录单元在所述运动图像数据的记录期间在所述记录介质上记录所述静止图像数据。
6.根据权利要求5所述的摄像设备,其特征在于,所述控制单元基于所设置的所述数据率和所述记录介质的记录数据率,调整在所述运动图像数据的记录期间生成的所述静止图像数据的数据量。
7.根据权利要求6所述的摄像设备,其特征在于,
所述信号处理单元响应于在没有记录所述运动图像数据时发出的静止图像拍摄指令,生成所述静止图像数据,以及
所述控制单元控制所述静止图像编码单元,从而使得在没有记录所述运动图像数据时,与所设置的所述数据率无关地对由所述信号处理单元生成的所述静止图像数据进行编码。
8.根据权利要求7所述的摄像设备,其特征在于,
所述设置单元将在没有记录所述运动图像数据时要记录的所述静止图像数据的图像质量设置为给定值,以及
所述控制单元基于由所述设置单元设置的所述静止图像数据的所述图像质量,来控制所述静止图像编码单元。
9.根据权利要求8所述的摄像设备,其特征在于,
所述静止图像编码单元包括用于量化所述静止图像数据的量化器,以及
所述控制单元基于所设置的所述图像质量来调整所述量化器的量化步长。
10.根据权利要求1所述的摄像设备,其特征在于,
所述信号处理单元响应于在所述运动图像数据的记录期间发出的静止图像拍摄指令,生成所述静止图像数据,以及
所述控制单元调整要由所述静止图像编码单元编码的所述静止图像数据的数据量,从而使得能够在所述运动图像数据的记录期间记录编码后的所述静止图像数据。
11.一种摄像设备,包括:
摄像单元;
信号处理单元,用于使用从所述摄像单元输出的图像数据生成运动图像数据和静止图像数据;
运动图像编码单元,用于编码所述运动图像数据以压缩所述运动图像数据的信息量;
静止图像编码单元,用于编码所述静止图像数据以压缩所述静止图像数据的信息量;
记录单元,用于将由所述运动图像编码单元编码后的所述运动图像数据和由所述静止图像编码单元编码后的所述静止图像数据记录在记录介质上;
设置单元,用于设置要由所述静止图像编码单元编码的所述静止图像数据的图像质量;以及
控制单元,用于控制所述运动图像编码单元和所述静止图像编码单元,其中,所述控制单元基于由所述设置单元设置的所述图像质量来控制所述静止图像编码单元,以调整所述静止图像数据的数据量,所述控制单元基于根据所设置的所述图像质量而编码的所述静止图像数据的数据量和所述记录介质的记录数据率来控制所述运动图像编码单元,以调整所述运动图像数据的数据率。
12.根据权利要求11所述的摄像设备,其特征在于,所述控制单元基于所述记录介质的记录数据率和所述静止图像数据的数据量之间的差来调整所述运动图像数据的数据率。
13.根据权利要求11所述的摄像设备,其特征在于,所述设置单元根据用户操作来选择多个预定图像质量的其中一个。
14.根据权利要求11所述的摄像设备,其特征在于,
所述信号处理单元响应于在所述运动图像数据的记录期间发出的静止图像拍摄指令,生成所述静止图像数据,以及
所述记录单元在所述运动图像数据的记录期间在所述记录介质上记录所述静止图像数据。
15.根据权利要求14所述的摄像设备,其特征在于,所述控制单元基于在所述运动图像数据的记录期间编码的所述静止图像数据的数据量和所述记录介质的记录数据率来调整所述运动图像数据的数据率。
16.根据权利要求15所述的摄像设备,其特征在于,
所述设置单元将所述运动图像数据的数据率设置为给定值,以及
所述控制单元响应于用于开始记录所述运动图像数据的指令,基于由所述设置单元设置的所述数据率来调整所述运动图像数据的数据率,并且响应于在所述运动图像数据的记录期间发出的静止图像拍摄指令,基于在所述运动图像数据的记录期间编码的所述静止图像数据的数据量和所述记录介质的记录数据率来调整所述运动图像数据的数据率。
17.根据权利要求16所述的摄像设备,其特征在于,所述控制单元在所述记录单元结束记录所述静止图像数据后,基于由所述设置单元设置的所述数据率来调整所述运动图像数据的数据率。
18.根据权利要求11所述的摄像设备,其特征在于,
所述静止图像编码单元包括用于量化所述静止图像数据的量化器,以及
所述控制单元基于所设置的所述图像质量来调整所述量化器的量化步长。
19.根据权利要求11所述的摄像设备,其特征在于,
所述信号处理单元响应于在所述运动图像数据的记录期间发出的静止图像拍摄指令,生成所述静止图像数据,以及
所述控制单元调整要由所述运动图像编码单元编码的所述运动图像数据的数据率,从而使得能够在所述运动图像数据的记录期间记录编码后的所述静止图像数据。
20.一种摄像设备,包括:
摄像单元;
信号处理单元,用于使用从所述摄像单元输出的图像数据生成运动图像数据和静止图像数据;
运动图像编码单元,用于编码所述运动图像数据以压缩所述运动图像数据的信息量;
静止图像编码单元,用于编码所述静止图像数据以压缩所述静止图像数据的信息量;
记录单元,用于将由所述运动图像编码单元编码后的所述运动图像数据和由所述静止图像编码单元编码后的所述静止图像数据记录在记录介质上;
设置单元,用于设置要由所述运动图像编码单元编码的所述运动图像数据的数据率和要由所述静止图像编码单元编码的所述静止图像数据的图像质量;
选择单元,用于选择第一模式和第二模式的其中一个;以及
控制单元,用于根据由所述选择单元选择的模式来控制所述运动图像编码单元和所述静止图像编码单元,
其中,在所述第一模式中,所述控制单元基于由所述设置单元设置的所述数据率来控制所述运动图像编码单元以调整所述运动图像数据的数据率,并且基于所设置的所述数据率和所述记录介质的记录数据率来控制所述静止图像编码单元以调整所述静止图像数据的数据量,以及
其中,在所述第二模式中,所述控制单元基于由所述设置单元设置的所述图像质量来控制所述静止图像编码单元以调整所述静止图像数据的数据量,并且基于根据所设置的所述图像质量而编码的所述静止图像数据的数据量和所述记录介质的记录数据率来控制所述运动图像编码单元以调整所述运动图像数据的数据率。
21.根据权利要求20所述的摄像设备,其特征在于,
所述信号处理单元响应于在所述运动图像数据的记录期间发出的静止图像拍摄指令,生成所述静止图像数据,以及
所述控制单元调整要由所述静止图像编码单元编码的所述静止图像数据的数据量,从而使得能够在所述第一模式中在所述运动图像数据的记录期间记录编码后的所述静止图像数据。
22.根据权利要求20所述的摄像设备,其特征在于,
所述信号处理单元响应于在所述运动图像数据的记录期间发出的静止图像拍摄指令,生成所述静止图像数据,以及
所述控制单元调整要由所述运动图像编码单元编码的所述运动图像数据的数据率,从而使得能够在所述第二模式中在所述运动图像数据的记录期间记录编码后的所述静止图像数据。
CN200910129411XA 2008-03-18 2009-03-18 摄像设备 Expired - Fee Related CN101540867B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2008-070420 2008-03-18
JP2008070420 2008-03-18
JP2008070420 2008-03-18
JP2009046424 2009-02-27
JP2009046424A JP5230483B2 (ja) 2008-03-18 2009-02-27 撮像装置及びその制御方法
JP2009-046424 2009-02-27

Publications (2)

Publication Number Publication Date
CN101540867A true CN101540867A (zh) 2009-09-23
CN101540867B CN101540867B (zh) 2012-01-25

Family

ID=41088478

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910129411XA Expired - Fee Related CN101540867B (zh) 2008-03-18 2009-03-18 摄像设备

Country Status (3)

Country Link
US (2) US8279298B2 (zh)
JP (1) JP5230483B2 (zh)
CN (1) CN101540867B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102215403A (zh) * 2010-04-05 2011-10-12 佳能株式会社 图像处理设备及其控制方法和摄像设备
CN104427283A (zh) * 2013-08-23 2015-03-18 佳能株式会社 图像记录设备和方法、以及图像重放设备和方法
CN105659159A (zh) * 2013-11-08 2016-06-08 富士胶片株式会社 相机系统、相机机身及通信方法
CN106210463A (zh) * 2015-05-29 2016-12-07 佳能株式会社 摄像装置和摄像设备

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4137085B2 (ja) * 2005-04-21 2008-08-20 キヤノン株式会社 撮像装置
US20110066979A1 (en) * 2009-09-14 2011-03-17 Olympus Corporation Nondestructive testing apparatus
KR101711009B1 (ko) * 2010-08-26 2017-03-02 삼성전자주식회사 영상 저장장치, 영상 재생장치, 영상 저장방법, 영상 제공방법, 저장매체 및 촬영장치
JP2014095781A (ja) * 2012-11-08 2014-05-22 Olympus Imaging Corp ズームレンズ及びそれを備えた撮像装置
JP6021594B2 (ja) * 2012-11-08 2016-11-09 オリンパス株式会社 撮像装置及びプログラム
JP6489879B2 (ja) * 2015-03-09 2019-03-27 キヤノン株式会社 画像再生装置及び画像再生方法
CN116760988B (zh) * 2023-08-18 2023-11-10 瀚博半导体(上海)有限公司 基于人类视觉系统的视频编码方法和装置

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4774562A (en) * 1987-06-02 1988-09-27 Eastman Kodak Company Image transmission system with preview mode
JP3182289B2 (ja) 1994-04-06 2001-07-03 三洋電機株式会社 画像記録方法及び画像記録装置
US7058721B1 (en) * 1995-07-14 2006-06-06 Broadband Royalty Corporation Dynamic quality adjustment based on changing streaming constraints
JPH09233410A (ja) 1996-02-27 1997-09-05 Olympus Optical Co Ltd デジタルビデオカメラ
US7110025B1 (en) * 1997-05-28 2006-09-19 Eastman Kodak Company Digital camera for capturing a sequence of full and reduced resolution digital images and storing motion and still digital image data
US6151069A (en) * 1997-11-03 2000-11-21 Intel Corporation Dual mode digital camera for video and still operation
US6545601B1 (en) * 1999-02-25 2003-04-08 David A. Monroe Ground based security surveillance system for aircraft and other commercial vehicles
JP2001211425A (ja) * 2000-01-27 2001-08-03 Hitachi Ltd 情報処理装置
JP2002290908A (ja) * 2001-03-28 2002-10-04 Minolta Co Ltd 撮影装置、動画および静止画の記録制御方法、画像編集装置
US7024045B2 (en) * 2001-08-21 2006-04-04 Sun Microsystems, Inc. Dynamic bandwidth adaptive image compression/decompression scheme
JP2005303336A (ja) * 2001-10-25 2005-10-27 Matsushita Electric Ind Co Ltd 映像信号記録装置および映像信号再生装置
US6888891B2 (en) * 2002-01-09 2005-05-03 Octa Technology, Inc. Wavelet domain half-pixel motion compensation
JP4189627B2 (ja) * 2002-04-24 2008-12-03 富士フイルム株式会社 画像サーバ並びに画像表示システム
EP1535239A2 (en) * 2002-06-25 2005-06-01 Quix Technologies Ltd. Image processing using probabilistic local behavior assumptions
JP2005012378A (ja) 2003-06-17 2005-01-13 Fuji Photo Film Co Ltd 画像記録装置及び画像記録方法
JP2005217493A (ja) * 2004-01-27 2005-08-11 Canon Inc 撮像装置
WO2005088572A1 (en) * 2004-03-11 2005-09-22 Ultrawaves Design Holding B.V. Transmitter and receiver for a surveillance system
JP4337758B2 (ja) * 2004-03-30 2009-09-30 カシオ計算機株式会社 撮像装置、動画撮影時の静止画表示方法、及びプログラム
EP1751970A4 (en) * 2004-05-01 2010-04-21 Eliezer Jacob DIGITAL CAMERA WITH NON-UNIFORM IMAGE RESOLUTION
SE0401574D0 (sv) * 2004-06-18 2004-06-18 Henrik Ehrnlund Trådlöst sensornätverk
US8018489B2 (en) * 2005-02-04 2011-09-13 Mccutchen David Surveillance system
US20070047642A1 (en) * 2005-08-31 2007-03-01 Erlandson Erik E Video data compression
JP2007259156A (ja) * 2006-03-23 2007-10-04 Olympus Imaging Corp カメラ、カメラの画像処理方法、プログラム、記録媒体
US7689062B2 (en) * 2006-07-16 2010-03-30 Seambi Ltd. System and method for virtual content placement
US20080165843A1 (en) * 2007-01-03 2008-07-10 Human Monitoring Ltd. Architecture for image compression in a video hardware

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102215403A (zh) * 2010-04-05 2011-10-12 佳能株式会社 图像处理设备及其控制方法和摄像设备
US8493462B2 (en) 2010-04-05 2013-07-23 Canon Kabushiki Kaisha Image processing apparatus, photographing apparatus and control method for compressing images
CN102215403B (zh) * 2010-04-05 2013-12-04 佳能株式会社 图像处理设备及其控制方法和摄像设备
CN104427283A (zh) * 2013-08-23 2015-03-18 佳能株式会社 图像记录设备和方法、以及图像重放设备和方法
US9990955B2 (en) 2013-08-23 2018-06-05 Canon Kabushiki Kaisha Image recording apparatus and method, and image playback apparatus and method
CN104427283B (zh) * 2013-08-23 2018-08-31 佳能株式会社 图像记录设备和方法、以及图像重放设备和方法
CN105659159A (zh) * 2013-11-08 2016-06-08 富士胶片株式会社 相机系统、相机机身及通信方法
CN105659159B (zh) * 2013-11-08 2019-04-16 富士胶片株式会社 相机系统、相机机身及通信方法
CN106210463A (zh) * 2015-05-29 2016-12-07 佳能株式会社 摄像装置和摄像设备
CN106210463B (zh) * 2015-05-29 2019-06-28 佳能株式会社 摄像装置和摄像设备

Also Published As

Publication number Publication date
US8587683B2 (en) 2013-11-19
US8279298B2 (en) 2012-10-02
CN101540867B (zh) 2012-01-25
JP5230483B2 (ja) 2013-07-10
JP2009260943A (ja) 2009-11-05
US20120321274A1 (en) 2012-12-20
US20090237519A1 (en) 2009-09-24

Similar Documents

Publication Publication Date Title
CN101540867B (zh) 摄像设备
CN100544435C (zh) 图像编码方法和成像装置
JP3161614B2 (ja) 動画像復号化装置
US20100050221A1 (en) Image Delivery System with Image Quality Varying with Frame Rate
JP2008283560A (ja) 画像処理装置およびその方法
US8184700B2 (en) Image decoder
CN102630003B (zh) 图像数据记录设备及其控制方法
CN101185339B (zh) 图像解码设备和图像数据解码方法、图像编码设备及方法
US20070115366A1 (en) Moving image generating apparatus, moving image generating method and program therefore
US7844123B2 (en) Orthogonal transformation apparatus and imaging system
JP2008182527A (ja) 画像符号化装置及び方法、並びに撮像システム
CN101753943B (zh) 图像处理设备和图像处理方法
JP6929044B2 (ja) 撮像装置、撮像装置の制御方法、及び、プログラム
CN103517071A (zh) 图像编码设备和图像编码方法
CN1922871A (zh) 文件访问装置
JP2007109329A (ja) 画像データ記録装置、画像データ再生装置、画像データ記録方法、プログラム及び記録媒体
JP2009100106A (ja) 画像再生装置,およびその処理方法およびそのプログラム
JP2006024993A (ja) 撮像信号処理装置
US20090096893A1 (en) Moving image reproducing apparatus and processing method therefor
KR0166719B1 (ko) 디지탈카메라의 영상부호화방법 및 장치
JP5355234B2 (ja) 符号化装置及び符号化方法
JP5004745B2 (ja) 動画像再生装置,およびその制御方法およびそのプログラム
JP2006174025A (ja) 動画静止画同時記録可能な撮像記録再生装置
JP2005260440A (ja) 画像音声記録再生装置
CN111182304A (zh) 视频数据处理方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120125

Termination date: 20200318

CF01 Termination of patent right due to non-payment of annual fee