CN102215403B - 图像处理设备及其控制方法和摄像设备 - Google Patents

图像处理设备及其控制方法和摄像设备 Download PDF

Info

Publication number
CN102215403B
CN102215403B CN2011100860131A CN201110086013A CN102215403B CN 102215403 B CN102215403 B CN 102215403B CN 2011100860131 A CN2011100860131 A CN 2011100860131A CN 201110086013 A CN201110086013 A CN 201110086013A CN 102215403 B CN102215403 B CN 102215403B
Authority
CN
China
Prior art keywords
image data
cut zone
image
unit
compression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2011100860131A
Other languages
English (en)
Other versions
CN102215403A (zh
Inventor
参纳雅人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN102215403A publication Critical patent/CN102215403A/zh
Application granted granted Critical
Publication of CN102215403B publication Critical patent/CN102215403B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H04N23/651—Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

本发明涉及一种图像处理设备及其控制方法和摄像设备。在该图像处理设备中，与运动图像的分片区域相对应地对紧挨在拍摄运动图像之前的静止图像进行分割编码，并基于静止图像的相应的分割编码的压缩数据量来确定运动图像的一帧中的分片区域的压缩表。因此，该图像处理设备针对运动图像的各分片区域确定压缩表，以使得在不进行试验压缩的情况下实现压缩数据量相对于运动图像的一个整体帧为恒定。

Description

图像处理设备及其控制方法和摄像设备
技术领域
本发明涉及一种确定用于压缩运动图像的压缩表的方法。
背景技术
在日本特开2000-050263号公报中，已经公开了一种具有与运动图像和静止图像相对应的压缩表的图像编码设备。如果在运动图像的被摄体与静止(被摄体)图像的被摄体相同的情况下，例如在运动图像拍摄期间拍摄静止图像等的情况下，使用这种压缩表，则可以利用同一压缩表来实现运动图像和静止图像的压缩。在MPEG运动图像中，可以以分片区域为单位确定运动图像的一帧的压缩表。在确定压缩表以将压缩数据量设置为相对于运动图像的一帧为恒定的情况下，需要进行以试验为基础的压缩(测试压缩)，从而需要长的处理时间。如果期望基于紧挨在要压缩的运动图像之前所拍摄的静止图像的压缩结果获得压缩表以减少处理时间，则由于要对全体图像设置静止图像的压缩表，因而发生了在静止图像中压缩表可以适用的图像区域与在MPEG运动图像中压缩表可以适用的图像区域不同这一情况。因此，难以在短时间内对MPEG运动图像的各分片区域确定最优的压缩表。
发明内容
本发明的一个方面在于提供一种能够解决背景技术的上述问题的图像处理设备。根据本发明的一方面，本发明的图像处理设备被配置成使得基于紧接之前所拍摄的静止图像的压缩结果来获得运动图像的压缩表，从而可以在不执行测试压缩等的情况下，在短的处理时间内确定每一分片区域的运动图像的压缩表。另外，本发明的图像处理设备被配置成能够针对运动图像的一帧中的每个分片区域来确定最优的压缩表，以使得即使在诸如在运动图像的一帧中部分地包含高频成分的图像等的被摄体的情况下，也可以将运动图像的一帧的压缩数据量设置为恒定。
根据本发明的一个方面，提供一种图像处理设备，包括：获得单元，用于获得静止图像数据和运动图像数据；静止图像压缩单元，用于压缩所述静止图像数据；运动图像压缩单元，用于以每帧的多个第一分割区域中的所述第一分割区域为单位来压缩所述运动图像数据；静止图像压缩控制单元，用于将所述静止图像数据分割为与所述第一分割区域相对应的第二分割区域，并且利用所述静止图像压缩单元以所述第二分割区域为单位来压缩所述静止图像数据；以及运动图像压缩控制单元，用于基于各所述第二分割区域的静止图像数据的压缩结果来确定与各所述第二分割区域相对应的所述第一分割区域的压缩表，并且通过使用所确定出的压缩表，利用所述运动图像压缩单元压缩相应的所述第一分割区域的运动图像数据。
根据本发明的另一方面，提供一种摄像设备，包括：拍摄单元，用于拍摄被摄体以获得静止图像数据和运动图像数据；静止图像压缩单元，用于压缩所述静止图像数据；运动图像压缩单元，用于以每帧的多个第一分割区域中的所述第一分割区域为单位来压缩所述运动图像数据；静止图像压缩控制单元，用于将所述静止图像数据分割为与所述第一分割区域相对应的第二分割区域，并且利用所述静止图像压缩单元以所述第二分割区域为单位来压缩所述静止图像数据；运动图像压缩控制单元，用于基于各所述第二分割区域的静止图像数据的压缩结果来确定与各所述第二分割区域相对应的所述第一分割区域的压缩表，并且通过使用所确定出的压缩表，利用所述运动图像压缩单元压缩相应的所述第一分割区域的运动图像数据；以及记录单元，用于记录由所述静止图像压缩单元所生成的静止图像数据和由所述运动图像压缩单元所生成的运动图像数据。
根据本发明的另一方面，提供一种图像处理设备的控制方法，所述图像处理设备具有：静止图像压缩单元，用于压缩静止图像数据；以及运动图像压缩单元，用于分片压缩运动图像数据，所述控制方法包括以下步骤：获得所述静止图像数据和所述运动图像数据；以每帧的多个第一分割区域中的所述第一分割区域为单位来压缩所述运动图像数据；将所述静止图像数据分割为与所述第一分割区域相对应的第二分割区域，并且利用所述静止图像压缩单元以所述第二分割区域为单位来压缩所述静止图像数据；以及基于各所述第二分割区域的静止图像数据的压缩结果来确定与各所述第二分割区域相对应的所述第一分割区域的压缩表，并且通过使用所确定出的压缩表，利用所述运动图像压缩单元压缩相应的所述第一分割区域的运动图像数据。
根据本发明的又一方面，提供一种存储有包括用于使计算机执行上述控制方法的代码的程序的非瞬态计算机可读存储介质。
通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。
附图说明
图1是根据本发明实施例的数字照相机的框图。
图2是根据本发明实施例的图像压缩处理的流程图。
图3是示出根据本发明实施例的运动图像中静止图像拍摄(still image-in-moving image photographing)的帧序列的图。
图4A和4B是示出根据本发明实施例的静止图像的分割区域和运动图像的分片区域的例子的图。
图5是示出根据本发明实施例的运动图像压缩表的确定方法的例子的图。
具体实施方式
现在将根据附图详细说明本发明的优选实施例。
实施例涉及将本发明的图像处理设备应用于数字照相机的情况的实施例。图1是示出数字照相机的结构的框图。
在图1中，图像处理设备100包括：拍摄镜头10；具有光圈功能的机械快门12；用于将光学图像转换为电信号的摄像元件14；以及用于将摄像元件14的模拟信号输出转换为数字信号的A/D转换器16。时序发生电路18将时钟信号和控制信号提供至摄像元件14、A/D转换器16和D/A转换器26。通过存储器控制电路22和系统控制电路50来控制时序发生电路18。除机械快门12以外，可以使用能够通过控制摄像元件14的复位定时来控制累积时间的电子快门来进行运动图像拍摄等。
图像处理电路20对从A/D转换器16输出的数据和从存储器控制电路22输出的数据执行预定像素插值处理和颜色转换处理。通过由图像处理电路20执行图像裁切和变倍处理，实现了电子变焦功能。
图像处理电路20还执行通过镜头(TTL)系统的自动调焦(AF)处理、自动曝光(AE)处理和曝光融合(exposure fusion，EF)处理。根据该系统，通过使用所拍摄图像数据执行预定算术运算处理，并且系统控制电路50基于所获得的算术运算结果来控制曝光控制单元40和距离测量控制单元42。
此外，图像处理电路20通过使用所拍摄图像数据执行预定算术运算处理，并基于所获得的算术运算结果来执行TTL系统的自动白平衡(AWB)处理。
存储器控制电路22控制A/D转换器16、时序发生电路18、图像处理电路20、图像显示存储器24、D/A转换器26、存储器30和压缩展开电路32。
通过图像处理电路20和存储器控制电路22将A/D转换器16的数据写入图像显示存储器24或存储器30中。通过存储器控制电路22将A/D转换器16的数据直接写入图像显示存储器24或存储器30中。
设置图像显示存储器和D/A转换器26。由薄膜晶体管(TFT)液晶显示器(LCD)等构成图像显示单元28。图像显示单元28通过D/A转换器26显示写入至图像显示存储器24中的显示图像数据。
如果通过使用图像显示单元28顺次显示所拍摄图像数据，则可以实现电子取景器功能。
图像显示单元28可以通过来自系统控制电路50的指示任意地打开/关闭(on/off)显示。当显示关闭时，可以显著降低图像处理设备100的功耗。
存储器30用于存储所拍摄静止图像和运动图像，并且具有足以存储预定数量的静止图像和预定时间的运动图像的存储容量。
因此，即使在连续拍摄多个静止图像的连拍或全景拍摄的情况下，也可以高速将大量图像写入至存储器30中。
还可以使用存储器30作为系统控制电路50的工作区域。
压缩展开电路32利用自适应离散余弦变换(ADCT)等，对图像数据进行压缩或展开。压缩展开电路32读取存储在存储器30中的图像，执行压缩处理或展开处理，并且将处理后的数据写入存储器30中。压缩展开电路32可以将运动图像分割成分片区域并对分片区域进行压缩编码。
曝光控制单元40控制具有光圈功能的快门12，并且还具有与闪光灯48相关联的闪光灯发光调整功能。
距离测量控制单元42控制拍摄镜头10的聚焦。变焦控制单元44控制拍摄镜头10的变焦。挡板控制单元46控制用作挡板的保护单元102的操作。
闪光灯48还具有AF辅助光的光投影功能和闪光灯发光调整功能。
通过使用TTL系统来控制曝光控制单元40和距离测量控制单元42。基于通过图像处理电路20对所拍摄图像数据进行算术运算而获得的算术运算结果，系统控制电路50控制曝光控制单元40和距离测量控制单元42。
系统控制电路50控制整体图像处理设备100。存储器52存储系统控制电路50的操作用的常数、变量和程序等。
显示单元54是诸如液晶显示设备或扬声器等，用于根据系统控制电路50中的程序的执行结果，通过使用字符、图像或声音等来显示或生成操作状态或消息等的。将显示单元54设置在图像处理设备100的操作单元附近的视觉上可识别的位置，并且显示单元54由例如LCD、LED和发音元件等的组合构成。
将显示单元54的功能的一部分设置在光学取景器104中。
在显示单元54所显示的内容中，在LCD等中显示以下内容：单拍/连拍显示；自拍显示；压缩率显示；记录像素数显示；记录帧数显示；以及剩余可拍摄帧数的显示。还可以显示以下内容：快门速度显示；光圈值显示；曝光校正显示；闪光灯显示；红眼减轻显示；以及微距拍摄显示。除此以外，还可以显示以下内容：蜂鸣器设置显示；剩余电池容量显示；错误显示；由多位数字表示的信息显示；记录介质200和210各自的安装/拆卸状态；以及通信I/F操作显示等。
在显示单元54所显示的内容中，将以下内容显示在光学取景器104中：对焦显示；照相机抖动警告显示；闪光灯充电显示；快门速度显示；光圈值显示；以及曝光校正显示等。
例如，使用EEPROM等作为电可擦除可记录非易失性存储器56。
设置操作单元60、62、64、66、70、72和74来输入系统控制电路50的各种操作指示。操作单元是由诸如开关、拨盘、触摸面板、基于视线检测的指示装置、以及语音识别装置等的多个装置中的一个或其组合所构成的。
这里将具体说明这些操作单元。
可以由模式拨盘开关60来切换和设置以下功能模式：电源断开(OFF)；自动拍摄模式；拍摄模式；全景拍摄模式；运动图像拍摄模式；再现模式；多画面再现/擦除模式；PC连接模式；以及电视接收模式等。
快门开关SW1 62在快门按钮的操作途中被接通，并且指示开始诸如AF处理、AE处理、AWB处理和EF(闪光灯预发光)处理等的操作。
快门开关SW2 64在完成快门按钮操作时被接通，并且指示开始诸如曝光处理、显影处理和记录处理等的一系列处理的操作。曝光处理是用于通过A/D转换器16和存储器控制电路22发送从摄像元件14所读出的信号并将所获得的图像数据写入存储器30中的处理。显影处理是基于图像处理电路20或存储器控制电路22中的算术运算的处理。记录处理是用于从存储器30读出图像数据、在压缩展开电路32中对该图像数据进行压缩、并将所获得的图像数据写入记录介质200或210中的处理。
显示切换开关66可以切换图像显示单元28的显示。
根据这种功能，当通过使用光学取景器104进行拍摄时，可以通过切断对包括TFT LCD等的图像显示单元的电流供给来实现省电。
操作单元70由以下的各种按钮和触摸面板等构成：菜单按钮；设置按钮；微距按钮；多画面再现翻页按钮；闪光灯设置按钮；以及单拍/连拍/自拍切换按钮等。除了这些以外，还设置有以下按钮：菜单移动+(加)按钮；菜单移动-(减)按钮；再现图像移动+(加)按钮；再现图像移动-(减)按钮；拍摄画质选择按钮；曝光校正按钮；以及日期/时间设置按钮等。
变焦开关单元72是用户用于指示所拍摄图像的倍率变化的变焦操作单元。变焦开关单元72在以下还被称为变焦开关72。变焦开关72由以下开关构成：远摄开关，用于将摄像视角改变到远摄侧；以及广角开关，用于将摄像视角改变到广角侧。因此，该变焦开关72用作用于指示变焦控制单元44改变拍摄镜头10的摄像视角并执行光学变焦操作的触发器。变焦开关72还可以用作用于利用图像处理电路20的图像裁切或像素插值处理等电子地改变摄像视角的触发器。被摄体检测单元74由用于检测要拍摄的被摄体的元件等构成。还考虑了检测面部的情况作为被摄体检测。
电源控制单元80由电池检测电路、DC/DC转换器和用于切换通电的块的切换电路等构成。电源控制单元80检测电池的安装和拆卸、电池的类型、以及剩余电池容量。基于检测结果和来自系统控制电路50的指示，电源控制单元80控制DC/DC转换器，并且在必要的时间段内向包括记录介质的各单元提供必要的电压。
设置有连接器82和84。电源单元86由以下电池构成：诸如碱性电池或锂电池等的一次电池；诸如镍镉(NiCd)电池、镍氢(NiMH)电池或Li离子电池等的二次电池；以及AC适配器等。
设置有与诸如存储卡或硬盘等的记录介质的接口90和94。使用连接器92和96来连接至诸如存储卡或硬盘等的记录介质。
在假定设置有2组用于安装记录介质的接口和连接器的情况下说明本实施例。当然，可以设置一组或多组用于安装记录介质的接口和连接器。还可以结合并设置不同规格的接口和不同规格的连接器。
可以使用符合SD卡或紧致型闪存(注册商标)(CF)卡等的规格的接口和连接器。
此外，作为接口90和94以及连接器92和96，可以使用符合PCMCIA卡或CF卡等的规格的接口和连接器。即，通过连接各种通信卡，可以将图像数据和附加至该图像数据的管理信息传送至其它计算机或诸如打印机等的外围设备，或者从其它计算机或诸如打印机等的外围设备传送该图像数据和该管理信息。作为通信卡，可以应用LAN卡、调制解调器卡、USB卡、IEEE1394卡、SCSI卡和PHS等。
用作挡板的保护单元102覆盖包括图像处理设备100的镜头10的摄像单元，从而防止摄像单元的弄脏或损坏。
可以在不使用图像显示单元28的电子取景器功能的情况下，仅使用光学取景器104来进行拍摄。将显示单元54的功能的例如以下部分设置在光学取景器104中：对焦显示；照相机抖动警告显示；闪光灯充电显示；快门速度显示；光圈值显示；以及曝光校正显示等。
通信单元110具有诸如USB、IEEE 1394、LAN和无线通信等的各种通信功能。
设置有连接器或(无线通信情况下的)天线112，以通过通信单元110将图像处理设备100连接至其它设备。
记录介质200由存储卡或硬盘等构成。
记录介质200具有：由半导体存储器或磁盘等构成的记录单元202；图像处理设备100用的接口204；以及用于连接至图像处理设备100的连接器206。
记录介质210由存储卡或硬盘等构成。
记录介质210具有：由半导体存储器或磁盘等构成的记录单元212；图像处理设备100用的接口214；以及用于连接至图像处理设备100的连接器216。
随后，参考图2的流程图说明本实施例的图像处理。由以下方法执行该图像处理，在该方法中，例如包括在系统控制电路中的CPU载入并执行存储在存储器中的控制程序。
图2示出在从运动图像中静止图像拍摄序列中的静止图像拍摄直到作为随后的运动图像拍摄的头帧(图3中的帧5)的I帧的编码为止的时间段期间所执行的图像处理的流程图。图3示出应用了图像处理的运动图像中静止图像拍摄的序列的例子。在图3所示的运动图像中静止图像拍摄的序列中，根据图2的流程图来执行从静止图像的分割编码(静止图像压缩控制)直到运动图像的帧5的编码(运动图像压缩控制)为止的图像处理。
首先，在步骤S201中，拍摄静止图像，并且进入步骤S202以设置静止图像的压缩表。随后，在步骤S203中，对静止图像数据进行分割编码。为了对静止图像数据进行分割编码，与运动图像的分片相对应地分割静止图像区域。图4A和4B示出分割编码时的分割方法的例子。分别地，图4A示出静止图像的分割区域，并且图4B示出运动图像的分片区域。如果在运动图像中静止图像拍摄的情况下，运动图像的被摄体与静止图像的被摄体相同，则在组合了静止图像的分割区域A1和A2的区域和运动图像的分片区域B1的每一个中拍摄相同被摄体。类似地，组合了分割区域A3和A4的区域与运动图像的分片区域B2相对应。组合了分割区域A5和A6的区域与分片区域B3相对应。组合了分割区域A7和A8的区域与分片区域B4相对应。静止图像的分割方法不限于图4A所示的分割方法，还可以使用其它方法，只要实现了静止图像的分割区域和运动图像的分片区域之间的对应关系即可。
在静止图像分割编码中，首先，在步骤S203中，通过使用针对静止图像所设置的压缩表来对与运动图像的分片区域B1相对应的分割区域A1和A2的静止图像区域进行编码。随后，进入步骤S204，以判断静止图像的整个区域的压缩是否已经完成。由于在该阶段尚未完成压缩，因此进入步骤S205以选择下一分割区域，即与分片区域B2相对应的A3和A4。在步骤S203中压缩这些区域。类似地，重复静止图像数据的编码处理，直到对与运动图像的分片区域B4相对应的分割区域A7和A8进行了压缩为止。
如果在步骤S204中判断为所有分割区域的压缩已经完成，则进入步骤S206，以将压缩后的静止图像数据记录到记录介质200中。随后，进入步骤S207，以开始对紧挨在运动图像中静止图像的静止图像拍摄之后的运动图像的I帧的编码。
首先，在步骤S208中，计算与图4B中的分片区域B1相对应的静止图像的压缩数据量。与图4B中的分片区域B1相对应的静止图像的分割区域为A1和A2。假定A1的静止图像的压缩数据量等于“a”，并且A2的静止图像的压缩数据量等于“b”，则与图4B中的分片区域B1相对应的静止图像压缩数据量等于(a+b)。之后，进入步骤S209，以基于步骤S208中计算出的静止图像压缩数据量来确定图4B中的分片区域B1的压缩表。
参考图5说明压缩表的确定方法的例子。根据图中所示的方法，假定k是基准值，并且将对k加权预定系数所获得的结果与步骤S208中计算出的静止图像压缩数据量进行比较，从而确定要使用的压缩表。例如，在确定分片区域B1的压缩表的情况下，首先，将分割区域A1的压缩数据量“a”和分割区域A2的压缩数据量“b”的相加结果(a+b)与基准值k×0.5进行比较。如果比较示出(a+b)较小，则使用Q1的压缩表。如果(a+b)等于或大于基准值k×0.5，则将(a+b)与k×0.8进行比较。因此，如果确定为(a+b)较小，则使用Q2的压缩表。这样，根据图5所示的方法确定了压缩表。以压缩率为Q5、Q4、Q3、Q2和Q1的高低顺序定义压缩表，以使得如果静止图像的压缩数据量大，则提高运动图像数据的压缩率。因此，运动图像压缩数据量在各分片区域上可以是恒定的。可以考虑目标代码量等来适当地设置基准值k。可以与图像(场景)的特征相对应地选择性设置和使用多个基准值。
一旦确定了运动图像的分片区域B1的压缩表，则在步骤S210中设置该表。随后，进入步骤S211，以通过使用所设置的压缩表来压缩分片区域B1(分片压缩)。之后，在步骤S212中判断对一帧的运动图像的所有分片区域的压缩是否已经完成。如果判断为压缩尚未完成，则处理通过步骤S213返回至步骤S208。确定下一分片区域(在该情况下为B2)的压缩表，并进行压缩。还针对其它分片区域重复进行相同的处理。当对一帧的所有分片区域的压缩完成时，处理结束。
以这种方式根据所拍摄静止图像针对每个分片确定紧挨在静止图像拍摄之后所拍摄的运动图像的帧的压缩率，以使得即使在运动图像的头帧的情况下，也可以调整压缩数据量。
尽管已经针对运动图像中静止图像说明了本发明的实施例，但可以在拍摄静止图像之后拍摄运动图像这一功能中实施本发明。在这种情况下，可以根据拍摄条件来确定是否基于静止图像的压缩结果确定运动图像的压缩表。例如，在对场景进行判断以确定为被摄体正在移动的情况下，或者在静止图像的拍摄和下一运动图像的拍摄之间的间隔等于或长于指定时间的情况下，不根据静止图像压缩结果等来确定运动图像的压缩表。
尽管以上基于典型实施例详细说明了本发明，但本发明不限于这些特定实施例，而不脱离本发明的实质的范围内的各种变形例也包含在本发明中。可以适当地对上述实施例的一部分进行组合。
例如，尽管针对作为例子的、将本发明的图像处理设备应用于具有运动图像中静止图像拍摄模式的数字照相机的情况说明了本实施例，但本发明不限于此。本发明也可以应用于任意设备，只要这些设备需要进行对通过拍摄相同被摄体所获得的运动图像和静止图像的压缩处理即可。在这种情况下，通过添加关于是否如上所述应用本发明的图像处理的条件，可以更有效地实施本发明。
其它实施例
还可以通过读出并执行记录在存储器装置上的程序以进行上述实施例的功能的系统或设备的计算机(或者CPU或MPU等的装置)以及通过以下方法来实现本发明的各方面，其中，系统或设备的计算机通过例如读出并执行记录在存储器装置上的程序以进行上述实施例的功能，来进行该方法的各步骤。由于该目的，例如经由网络或者从用作存储器装置的各种类型的记录介质(例如，计算机可读介质)向计算机提供该程序。
尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (7)

1.一种图像处理设备，包括：
获得单元，用于获得静止图像数据和运动图像数据；
静止图像压缩单元，用于压缩所述静止图像数据；
运动图像压缩单元，用于以每帧的多个第一分割区域中的所述第一分割区域为单位来压缩所述运动图像数据；
静止图像压缩控制单元，用于将所述静止图像数据分割为与所述第一分割区域相对应的第二分割区域，并且利用所述静止图像压缩单元以所述第二分割区域为单位来压缩所述静止图像数据；以及
运动图像压缩控制单元，用于基于与所述第一分割区域相对应的所述第二分割区域的静止图像数据的压缩结果来确定所述第一分割区域的运动图像数据的压缩表，并且通过使用所确定出的压缩表，利用所述运动图像压缩单元压缩相应的所述第一分割区域的运动图像数据。
2.根据权利要求1所述的图像处理设备，其特征在于，所述静止图像数据和所述运动图像数据是通过运动图像中静止图像拍摄所拍摄的静止图像和运动图像的数据，并且所述运动图像压缩控制单元对在所拍摄的静止图像之后所拍摄的运动图像的帧的所述第一分割区域进行控制。
3.根据权利要求1所述的图像处理设备，其特征在于，所述运动图像的帧是紧挨在所拍摄的静止图像之后所拍摄的运动图像的帧。
4.根据权利要求1所述的图像处理设备，其特征在于，各所述第二分割区域的静止图像数据的压缩结果是压缩数据量，并且所述运动图像压缩控制单元判断所述压缩数据量的值，并且从多个压缩表中确定要使用的压缩表。
5.根据权利要求1所述的图像处理设备，其特征在于，还包括判断单元，所述判断单元用于基于拍摄条件来判断是否进行所述压缩表的确定，以及
其中，根据所述判断单元的判断结果来控制所述运动图像数据的分片压缩。
6.一种摄像设备，包括：
拍摄单元，用于拍摄被摄体以获得静止图像数据和运动图像数据；
静止图像压缩单元，用于压缩所述静止图像数据；
运动图像压缩单元，用于以每帧的多个第一分割区域中的所述第一分割区域为单位来压缩所述运动图像数据；
静止图像压缩控制单元，用于将所述静止图像数据分割为与所述第一分割区域相对应的第二分割区域，并且利用所述静止图像压缩单元以所述第二分割区域为单位来压缩所述静止图像数据；
运动图像压缩控制单元，用于基于与所述第一分割区域相对应的所述第二分割区域的静止图像数据的压缩结果来确定所述第一分割区域的运动图像数据的压缩表，并且通过使用所确定出的压缩表，利用所述运动图像压缩单元压缩相应的所述第一分割区域的运动图像数据；以及
记录单元，用于记录由所述静止图像压缩单元所生成的静止图像数据和由所述运动图像压缩单元所生成的运动图像数据。
7.一种图像处理设备的控制方法，所述图像处理设备具有：静止图像压缩单元，用于压缩静止图像数据；以及运动图像压缩单元，用于分片压缩运动图像数据，所述控制方法包括以下步骤：
获得所述静止图像数据和所述运动图像数据；
以每帧的多个第一分割区域中的所述第一分割区域为单位来压缩所述运动图像数据；
将所述静止图像数据分割为与所述第一分割区域相对应的第二分割区域，并且利用所述静止图像压缩单元以所述第二分割区域为单位来压缩所述静止图像数据；以及
基于与所述第一分割区域相对应的所述第二分割区域的静止图像数据的压缩结果来确定所述第一分割区域的运动图像数据的压缩表，并且通过使用所确定出的压缩表，利用所述运动图像压缩单元压缩相应的所述第一分割区域的运动图像数据。
CN2011100860131A 2010-04-05 2011-04-06 图像处理设备及其控制方法和摄像设备 Expired - Fee Related CN102215403B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010086734A JP2011223079A (ja) 2010-04-05 2010-04-05 画像処理装置
JP2010-086734 2010-04-05

Publications (2)

Publication Number Publication Date
CN102215403A CN102215403A (zh) 2011-10-12
CN102215403B true CN102215403B (zh) 2013-12-04

Family

ID=44709237

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011100860131A Expired - Fee Related CN102215403B (zh) 2010-04-05 2011-04-06 图像处理设备及其控制方法和摄像设备

Country Status (3)

Country Link
US (1) US8493462B2 (zh)
JP (1) JP2011223079A (zh)
CN (1) CN102215403B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533358B (zh) * 2013-10-14 2016-07-06 上海纬而视科技股份有限公司 自适用图像采集传输显示装置
KR20210013492A (ko) * 2019-07-26 2021-02-04 삼성디스플레이 주식회사 표시 장치 및 이를 이용한 표시 패널의 구동 방법
CN112464034A (zh) * 2020-12-08 2021-03-09 深圳市欢太科技有限公司 用户数据提取方法、装置、电子设备及计算机可读介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1628486A1 (en) * 2004-08-18 2006-02-22 Olympus Corporation Image transmission apparatus
CN101079990A (zh) * 2006-05-25 2007-11-28 株式会社日立制作所 图像处理装置
US7312821B2 (en) * 2003-06-03 2007-12-25 Hewlett-Packard Development Company, L.P. Time-sliced still image generation
CN101299801A (zh) * 2007-05-02 2008-11-05 佳能株式会社 摄像设备及其控制方法
CN101540867A (zh) * 2008-03-18 2009-09-23 佳能株式会社 摄像设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000050263A (ja) 1998-07-28 2000-02-18 Hitachi Ltd 画像符号化並びに復号化装置及びこれを用いた撮像装置
JP4254017B2 (ja) * 2000-03-10 2009-04-15 ソニー株式会社 画像符号化装置及び方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7312821B2 (en) * 2003-06-03 2007-12-25 Hewlett-Packard Development Company, L.P. Time-sliced still image generation
EP1628486A1 (en) * 2004-08-18 2006-02-22 Olympus Corporation Image transmission apparatus
CN101079990A (zh) * 2006-05-25 2007-11-28 株式会社日立制作所 图像处理装置
CN101299801A (zh) * 2007-05-02 2008-11-05 佳能株式会社 摄像设备及其控制方法
CN101540867A (zh) * 2008-03-18 2009-09-23 佳能株式会社 摄像设备

Also Published As

Publication number Publication date
JP2011223079A (ja) 2011-11-04
CN102215403A (zh) 2011-10-12
US8493462B2 (en) 2013-07-23
US20110242343A1 (en) 2011-10-06

Similar Documents

Publication Publication Date Title
CN101631195B (zh) 摄像装置及其控制方法
CN1848915B (zh) 摄像装置及其控制方法
US8451347B2 (en) Image processing apparatus, image playing method, image pick-up apparatus, and program and storage medium for use in displaying image data
US7443425B2 (en) Image pickup apparatus, control method therefor, control program for implementing the control method, and storage medium storing the control program
CN103905725B (zh) 图像处理设备和图像处理方法
CN1856118A (zh) 图像传感装置和图像传感控制方法
CN101150661B (zh) 图像处理设备、摄像设备及其控制方法
CN1322347C (zh) 图像摄取装置及其控制方法、其控制程序以及存储媒体
CN101494715B (zh) 图像编辑设备和图像编辑方法
CN104717424B (zh) 图像处理设备、摄像设备及其控制方法
CN102244792A (zh) 图像处理设备和图像处理方法
US7218345B2 (en) Notifying available capacity of image-data recording medium
CN102215403B (zh) 图像处理设备及其控制方法和摄像设备
US20040075762A1 (en) Color balance adjustment of image sensed upon emitting flash light
CN101577793B (zh) 摄像设备
CN105323467A (zh) 图像处理设备及图像处理方法
JP2015097322A (ja) 撮像装置及びその制御方法、プログラム、並びに記憶媒体
US7778429B2 (en) Audio processor, audio processing method, computer program, and computer readable storage medium
JP2011130198A (ja) 撮像装置、その制御方法及びプログラム
JP2021158513A (ja) 画像処理装置及びその制御方法、撮像装置、プログラム、記憶媒体
JP2015210467A (ja) 撮像装置、撮像制御方法、プログラムおよび記録媒体
JP2016092787A (ja) 画像処理装置
CN103581594B (zh) 运动图像重放设备以及用于该设备的控制方法
JP2006090735A (ja) 電子機器の制御方法
JP2016082454A (ja) 撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20131204

Termination date: 20210406

CF01 Termination of patent right due to non-payment of annual fee