CN105187714B - 图像处理设备及其控制方法 - Google Patents

图像处理设备及其控制方法 Download PDF

Info

Publication number
CN105187714B
CN105187714B CN201510472257.1A CN201510472257A CN105187714B CN 105187714 B CN105187714 B CN 105187714B CN 201510472257 A CN201510472257 A CN 201510472257A CN 105187714 B CN105187714 B CN 105187714B
Authority
CN
China
Prior art keywords
raw
image frame
frame
image
datas
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510472257.1A
Other languages
English (en)
Other versions
CN105187714A (zh
Inventor
森智和
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN105187714A publication Critical patent/CN105187714A/zh
Application granted granted Critical
Publication of CN105187714B publication Critical patent/CN105187714B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3242Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of processing required or performed, e.g. for reproduction or before recording

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Color Television Image Signal Generators (AREA)
  • Endoscopes (AREA)

Abstract

本发明提供一种图像处理设备及其控制方法,所述图像处理设备将与多个RAW图像帧中满足预定条件的多个第一RAW图像帧相对应的显影参数和与多个RAW图像帧中与RAW运动图像数据的最终图像帧相对应的最终RAW图像帧相对应的显影参数、与RAW运动图像数据一起记录在记录介质上。

Description

图像处理设备及其控制方法
本申请是申请日为2011年4月22日、申请号为201110103630.8、发明名称为“图像处理设备及其控制方法”的申请的分案申请。
技术领域
本发明涉及图像处理设备及其控制方法。
背景技术
对静止图像的编辑利用了RAW显影处理,该RAW显影处理可以在用户针对通过记录由摄像装置生成的图像信号而获得的RAW格式的图像数据、指定各种显影参数时,获得与显影参数相对应的图像。注意,显影参数是例如对比度、曝光校正、白平衡和色相等的调整图像(的图像质量)所需的信息。
另外,近来,随着数字摄像机的普及和个人计算机的性能的改善,对运动图像进行编辑也成为通常的做法。在这种情况下,与静止图像一样,针对运动图像处理RAW格式的图像数据。也就是说,认为将会广泛地使用能够记录RAW格式的文件的数字摄像机。
与静止图像数据不同,运动图像数据包括许多帧的图像数据(图像帧)。为了适当地表示RAW格式的运动图像数据(RAW运动图像数据),需要预先在构成RAW运动图像数据的全部RAW图像帧中记录(添加)显影参数。然而,在一个运动图像内容中,特别在同一场景中,显影参数几乎不会以帧为单位显著变化,因此针对构成运动图像内容的全部RAW图像帧记录显影参数不是有效率的。
因此,日本特开2009-55335提出了一种当记录RAW运动图像数据时,仅针对预定间隔的RAW图像帧记录显影参数的技术。日本特开2009-55335中公开的技术在对RAW运动图像数据进行再现(显影)时,通过使用预定间隔的RAW图像帧的显影参数进行插值处理来生成没有记录显影参数的RAW图像帧的显影参数。
图12是示出现有技术中要被记录的RAW运动图像数据的图,其中,沿时间轴配置构成RAW运动图像数据的RAW图像帧和显影参数(色温)。根据现有技术,如图12所示,仅针对多个RAW图像帧中以预定间隔出现的RAW图像帧F1和Fm记录显影参数P1和Pm
当对这种RAW运动图像数据进行再现时,可以通过使用显影参数P1和Pm进行插值处理,针对RAW图像帧F1和RAW图像帧Fm之间的区间Z1中的RAW图像帧来生成适当的显影参数。
然而,针对RAW图像帧Fm和最终RAW图像帧Ff之间的区间Z2中的RAW图像帧,没有记录插值处理所需的显影参数(用于最终RAW图像帧Ff的显影参数)。因此,不能生成用于对区间Z2中的RAW图像帧进行显影的适当的显影参数,因此不能以所期望的图像质量对RAW运动图像数据进行再现。
发明内容
本发明提供一种能够记录可以生成与构成RAW运动图像数据的多个RAW图像帧相对应的显影参数的RAW运动图像数据的技术。
根据本发明的一个方面,提供一种图像处理设备,用于记录由多个RAW图像帧构成的RAW运动图像数据,所述图像处理设备包括:生成单元,用于生成与在所述RAW运动图像数据中包括的RAW图像帧相对应的显影参数;记录单元,用于将所述RAW运动图像数据和由所述生成单元针对在所述RAW运动图像数据中包括的RAW图像帧而生成的显影参数记录在记录介质上;以及控制单元,用于控制所述生成单元的操作和所述记录单元的操作,其中,所述控制单元控制所述生成单元和所述记录单元,以将如下显影参数与所述RAW运动图像数据一起记录在所述记录介质上:与满足预定条件的数个RAW图像帧相对应的显影参数;以及与所述多个RAW图像帧中与所述RAW运动图像数据的最终图像帧相对应的最终RAW图像帧相对应的显影参数。
根据本发明的第二方面,提供一种图像处理设备,用于将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧中的部分RAW图像帧相关联的RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据,所述图像处理设备包括:指定单元,用于从所述多个RAW图像帧中指定与所述第一RAW运动图像数据的最终图像帧相对应的最终RAW图像帧,或者从所述多个RAW图像帧中指定与所述第二RAW运动图像数据的开头图像帧相对应的开头RAW图像帧;生成单元,用于通过使用与所述部分RAW图像帧相关联的显影参数进行插值处理,生成与所述第一RAW运动图像数据的最终RAW图像帧相对应的显影参数和与所述第二RAW运动图像数据的开头RAW图像帧相对应的显影参数;以及分割单元,用于在将所述第一RAW运动图像数据的最终RAW图像帧与由所述生成单元生成的与该最终RAW图像帧相对应的显影参数相关联、并且将所述第二RAW运动图像数据的开头RAW图像帧与由所述生成单元生成的与该开头RAW图像帧相对应的显影参数相关联的情况下,将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据。
根据本发明的第三方面,提供一种控制图像处理设备的方法,所述图像处理设备记录由多个RAW图像帧构成的RAW运动图像数据,所述方法包括以下步骤:生成步骤,用于生成与在所述RAW运动图像数据中包括的RAW图像帧相对应的显影参数;记录步骤,用于将所述RAW运动图像数据和在所述生成步骤中针对在所述RAW运动图像数据中包括的RAW图像帧而生成的显影参数记录在记录介质上;以及控制步骤,用于控制所述生成步骤和所述记录步骤,其中,在所述控制步骤中,控制所述生成步骤和所述记录步骤,以将如下显影参数与所述RAW运动图像数据一起记录在所述记录介质上:与满足预定条件的数个RAW图像帧相对应的显影参数;以及与所述多个RAW图像帧中与所述RAW运动图像数据的最终图像帧相对应的最终RAW图像帧相对应的显影参数。
根据本发明的第四方面,提供一种控制图像处理设备的方法,所述图像处理设备将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧中的部分RAW图像帧相关联的RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据,所述方法包括以下步骤:指定步骤,用于从所述多个RAW图像帧中指定与所述第一RAW运动图像数据的最终图像帧相对应的最终RAW图像帧,或者从所述多个RAW图像帧中指定与所述第二RAW运动图像数据的开头图像帧相对应的开头RAW图像帧;生成步骤,用于通过使用与所述部分RAW图像帧相关联的显影参数进行插值处理,生成与所述第一RAW运动图像数据的最终RAW图像帧相对应的显影参数和与所述第二RAW运动图像数据的开头RAW图像帧相对应的显影参数;以及分割步骤,用于在将所述第一RAW运动图像数据的最终RAW图像帧与在所述生成步骤中生成的与该最终RAW图像帧相对应的显影参数相关联、并且将所述第二RAW运动图像数据的开头RAW图像帧与在所述生成步骤中生成的与该开头RAW图像帧相对应的显影参数相关联的情况下,将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是示出用作作为本发明的一个方面的图像处理设备的摄像设备的结构的示意框图。
图2是用于说明图1中示出的摄像设备在第一实施例中的操作的流程图。
图3A和3B是示出通过图1中示出的摄像设备在第一实施例中的操作所记录的RAW运动图像数据的图。
图4A和4B是用于说明当对图3A和3B中示出的RAW运动图像数据进行再现(显影)时进行的插值处理的图。
图5是用于说明图1中示出的摄像设备在第二实施例中的操作的流程图。
图6A和6B是用于说明通过图1中示出的摄像设备在第二实施例中的操作所记录的RAW运动图像数据的图。
图7是用于说明图1中示出的摄像设备在第三实施例中的操作的流程图。
图8A和8B是用于说明通过图1中示出的摄像设备在第三实施例中的操作所记录的RAW运动图像数据的图。
图9是示出作为本发明的一个方面的图像处理设备的结构的示意框图。
图10是用于说明图9中示出的图像处理设备的操作的流程图。
图11A和11B是用于说明通过图9中示出的图像处理设备的操作所记录的RAW运动图像数据的图。
图12是示出现有技术中所记录的RAW运动图像数据的图。
具体实施方式
以下将参考附图来说明本发明的优选实施例。注意,在图中相同的附图标记表示相同的构件,并且不给出其重复的说明。
在该实施例中,将以RAW格式记录的运动图像数据称为RAW运动图像数据或RAW运动图像文件。另外,将构成RAW运动图像数据或RAW运动图像文件的图像帧称为RAW图像帧或RAW图像数据。
第一实施例
图1是示出用作作为本发明的一个方面的图像处理设备的摄像设备100的结构的示意框图。摄像设备100是有选择地生成和记录RAW格式的运动图像数据(RAW运动图像数据)和RAW格式的静止图像数据(RAW静止图像数据)的摄像设备,并且在本实施例中具体实现为数字摄像机。注意,RAW运动图像数据是由多个RAW图像帧构成的图像数据。
摄像设备100包括摄像单元101、A/D转换单元102、参数生成单元103、RAW运动图像文件生成单元104和显影参数文件生成单元105。摄像设备100还包括操作单元106、记录/再现单元107、控制单元108、存储器109和记录介质110。
摄像单元101包括包含摄像透镜和可以改变焦距的调焦透镜的摄像光学系统、可以改变光圈值的光圈机构和诸如CCD或CMOS装置(光电转换装置)等的摄像装置。摄像单元101将来自被摄体的光(入射光)转换成电信号。A/D转换单元102将以帧为单位从摄像单元101顺序地输出的电信号转换(数字转换)成RAW图像数据。
参数生成单元103基于从A/D转换单元102输出的RAW图像数据、针对各帧来生成对RAW图像数据进行再现(显影)所需要的显影参数。换句话说,参数生成单元103生成分别与构成RAW运动图像数据的多个RAW图像帧相对应的显影参数。更具体地,显影参数包括诸如对比度、白平衡、颜色空间、色调曲线和轮廓强调等的用于调整图像(的图像质量)的信息。
RAW运动图像文件生成单元104基于以帧为单位从A/D转换单元102输出的RAW图像数据,来生成RAW运动图像文件。经由记录/再现单元107将由RAW运动图像文件生成单元104生成的RAW运动图像文件记录在记录介质110上。
显影参数文件生成单元105基于从参数生成单元103输出的显影参数来生成显影参数文件。注意,将构成由显影参数文件生成单元105生成的显影参数文件的显影参数分别与从A/D转换单元102输出的RAW图像数据所对应的RAW图像帧相关联。
操作单元106由用于接受用户的操作(输入操作指示)的各种按钮等构成。例如,操作单元106包括摄像开始按钮和摄像结束按钮。用户可以通过操作摄像开始按钮来发出生成RAW运动图像数据的指示,并且可以通过操作摄像结束按钮来发出停止生成RAW运动图像数据的指示。
记录/再现单元107将图像数据写入记录介质110中,以及读出在记录介质110中记录的图像数据。在该实施例中,如后面所述,记录/再现单元107具有将RAW运动图像数据和与构成RAW运动图像数据的RAW图像帧相对应的显影参数记录在记录介质110上的功能。
控制单元108包括CPU,并控制摄像设备100的全部操作。控制单元108控制摄像设备100的各单元以将与构成RAW运动图像数据的多个RAW图像帧中满足预定条件的RAW图像帧相对应的显影参数、和RAW运动图像数据一起记录在记录介质110上。控制单元108还控制摄像设备100的各单元以将与RAW运动图像数据的最终图像帧所对应的最终RAW图像帧相对应的显影参数、和RAW运动图像数据一起记录在记录介质110上。
由诸如SDRAM(同步动态随机存取存储器)等的半导体存储装置形成存储器109,并且存储器109暂时存储从摄像设备100的各单元输出的数据。
将参考图2说明摄像设备100的操作,更具体地,将由多个RAW图像帧构成的RAW运动图像数据记录在记录介质110上的操作。控制单元108整体地控制摄像设备100的各单元以执行该操作。
在步骤S202中,控制单元108检测到用户经由操作单元106发出了生成RAW运动图像数据的指示(即,已经操作了摄像开始按钮)。这使得摄像设备100开始拍摄运动图像。
在步骤S204中,控制单元108对与运动图像的拍摄相关联的标志和变量等进行初始化。更具体地,控制单元108对针对各帧重复进行的一系列处理中的帧编号n进行初始化(n=0)。控制单元108还对用于存储表示用户发出了停止生成RAW运动图像数据的指示(即,已经操作了摄像结束按钮)的信息的摄像结束标志end_flag进行初始化(end_flag=0)。
在步骤S206中,控制单元108使帧编号n增加+1(n=n+1)。例如,针对已开始运动图像的拍摄的帧,将帧编号n设置为1。
在步骤S208中,摄像单元101和A/D转换单元102在控制单元108的控制下生成帧编号n的RAW图像数据(RAW图像帧)。
在步骤S210中,参数生成单元103在控制单元108的控制下,基于在步骤S208中生成的帧编号n的RAW图像数据来生成显影参数(即帧编号n的RAW图像帧的显影参数)。
在步骤S212中,RAW运动图像文件生成单元104在控制单元108的控制下,通过将在步骤S208中生成的帧编号n的RAW图像数据记录(写入)在文件中来生成RAW运动图像文件。注意,在生成RAW图像文件时,可以如图2所示针对各帧将RAW图像数据记录在文件中,或者可以将RAW图像数据缓存在存储器109中并以预定时间间隔将数据记录在文件中。
在步骤S214中,控制单元108判断用户是否经由操作单元106发出了停止生成RAW运动图像数据的指示(即,是否已经操作了摄像结束按钮)。如果用户没有发出停止生成RAW运动图像数据的指示,即在运动图像的拍摄继续的情况下,则处理进入步骤S216。
在步骤S216中,控制单元108判断帧编号n的RAW图像数据是否满足预定条件,即帧编号n的RAW图像数据是否是满足预定条件的RAW图像帧(第一RAW图像帧)。在这种情况下,满足预定条件的RAW图像帧是以预定帧间隔从构成RAW运动图像数据的多个RAW图像帧中提取的RAW图像帧、或者在检测到场景变化前后的RAW图像帧(与场景变化相对应的RAW图像帧)。可以将以预定帧间隔从构成RAW运动图像数据的多个RAW图像帧中提取的RAW图像帧和与场景变化相对应的RAW图像帧都判断为满足预定条件的RAW图像帧。另外,满足预定条件的RAW图像帧可以包括例如最终RAW图像帧和紧挨在最终RAW图像帧之前以预定帧间隔提取的RAW图像帧之间存在的预定数量的RAW图像帧。如果帧编号n的RAW图像数据不满足预定条件,则在不记录任何显影参数的情况下,处理进入步骤S206。如果帧编号n的RAW图像数据满足预定条件,则处理进入步骤S218以记录显影参数。
在步骤S218中,显影参数文件生成单元105在控制单元108的控制下,通过将在步骤S210中生成的帧编号n的RAW图像帧的显影参数记录(写入)在文件中来生成显影参数文件。注意,在生成显影参数文件时,可以如图2所示针对各帧将显影参数记录在文件中,或者可以将显影参数缓存在存储器109中并以预定时间间隔将该显影参数记录在文件中。
在步骤S220中,控制单元108判断摄像结束标志end_flag是否为1(end_flag=1)。如果摄像结束标志end_flag不为1,则处理进入步骤S206。如果摄像结束标志end_flag为1,则处理进入步骤S224。
该设备在持续拍摄运动图像时(即,直到用户发出停止生成RAW运动图像数据的指示为止),以帧为单位执行步骤S206~S220中的处理。
在步骤S214中,如果控制单元108判断为用户发出了停止生成RAW运动图像数据的指示,则处理进入步骤S222。在步骤S222中,控制单元108将摄像结束标志end_flag设置为1,并且处理进入步骤S218。在这种情况下,控制单元108使摄像单元101和A/D转换单元102停止生成RAW运动图像数据。注意,如果用户发出了停止生成RAW运动图像数据的指示,则帧编号n的RAW图像帧变成最后生成的RAW图像帧(最终RAW图像帧)。在步骤S218中,显影参数文件生成单元105通过将作为最终RAW图像帧的帧编号n的RAW图像帧的显影参数记录在文件中来生成显影参数文件。
在步骤S224中,记录/再现单元107在控制单元108的控制下,将在步骤S212中生成的RAW运动图像文件和在步骤S218中生成的显影参数文件记录在记录介质110上。
图3A和3B是示出在该实施例的摄像设备100中要记录的RAW运动图像数据(即,通过图2中示出的操作生成的RAW运动图像数据)的图。参考图3A和3B,沿时间轴配置构成RAW运动图像数据的RAW图像帧和显影参数(该实施例中的白平衡)。
图3A示出在步骤S216中满足预定条件的RAW图像帧是以预定帧间隔从构成RAW运动图像数据的多个RAW图像帧中提取的RAW图像帧的情况。参考图3A,将时刻t1时的RAW图像帧Ft1和时刻t2时的RAW图像帧Ft2判断为以预定帧间隔提取的RAW图像帧,并记录与各帧相对应的白平衡Pt1和Pt2。假定用户在时刻t3发出了停止生成RAW运动图像数据的指示。在这种情况下,将在时刻t3生成的RAW图像帧Ft3判断为最终RAW图像帧,并记录与RAW图像帧Ft3相对应的白平衡Pt3
另外,如图3B所示,将显影参数缓存在存储器109中使得不仅可以针对以预定帧间隔提取的RAW图像帧、还可以针对任意RAW图像帧记录显影参数。图3B示出将最终RAW图像帧之前的两个RAW图像帧添加为满足预定条件的RAW图像帧的情况。参考图3B,该设备不仅记录白平衡Pt1至Pt3,还记录分别与最终RAW图像帧Ft3之前的两个RAW图像帧Ft4和Ft5相对应的白平衡Pt4和Pt5
将参考图4A和4B说明记录/再现单元107对在该实施例的摄像设备100中记录的RAW运动图像数据进行再现(显影)的情况。然而,注意,用户可以将复制有RAW运动图像数据和显影参数文件的存储器卡等插入至外部再现设备中以对RAW运动图像数据进行再现(显影)。当对RAW运动图像数据进行再现时,需要通过使用针对RAW运动图像数据所记录的显影参数进行插值处理,来针对没有记录显影参数的RAW图像帧生成适当的显影参数。注意,图4A示出用于对图3A中示出的RAW运动图像数据进行再现的插值处理。图4B示出用于对图3B中示出的RAW运动图像数据进行再现的插值处理。参考图4A和4B,沿时间轴配置构成RAW运动图像数据的RAW图像帧和显影参数(该实施例中的白平衡)。
参考图4A,如上所述,将由实线表示的、分别与RAW图像帧Ft1、Ft2和Ft3相对应的显影参数Pt1、Pt2和Pt3记录在RAW运动图像数据中。另外,通过插值处理生成由虚线表示的与RAW图像帧相对应的显影参数Pt1-t2和Pt2-t3。更具体地,设备通过使用显影参数Pt1和Pt2的插值处理、针对在RAW图像帧Ft1和RAW图像帧Ft2之间存在的RAW图像帧来生成适当的显影参数Pt1-t2。设备还通过使用显影参数Pt2和Pt3的插值处理、针对在RAW图像帧Ft2和RAW图像帧Ft3之间存在的RAW图像帧来生成适当的显影参数Pt2-t3
参考图4B,如上所述,将由实线表示的、分别与RAW图像帧Ft1~Ft5相对应的显影参数Pt1~Pt5记录在RAW运动图像数据中。另外,通过插值处理生成由虚线表示的与RAW图像帧相对应的显影参数Pt1-t2和显影参数Pt2-t4。更具体地,设备通过使用显影参数Pt1和Pt2的插值处理、针对在RAW图像帧Ft1和RAW图像帧Ft2之间存在的RAW图像帧来生成适当的显影参数Pt1-t2。设备还通过使用显影参数Pt2、Pt3、Pt4和Pt5的插值处理、针对在RAW图像帧Ft2和RAW图像帧Ft4之间存在的RAW图像帧来生成适当的显影参数Pt2-t4
如上所述,根据该实施例,可以与RAW运动图像数据相关联地记录与满足预定条件的RAW图像帧相对应的显影参数和与最终RAW图像帧相对应的显影参数。因此,当对这种RAW运动图像数据进行再现时,可以通过插值处理针对没有记录显影参数的RAW图像帧来生成适当的显影参数,并以所期望的图像质量对RAW运动图像数据进行再现。
第二实施例
将参考图5说明摄像设备100的操作,更具体地,将由多个RAW图像帧构成的RAW运动图像数据记录在记录介质110上的操作。控制单元108通过整体地控制摄像设备100的各单元来执行该操作。假定在该实施例中,RAW运动图像文件生成单元104已经生成了记录构成RAW运动图像数据的RAW图像帧的RAW图像文件。还假定显影参数文件生成单元105已经生成了记录分别与构成RAW运动图像数据的RAW图像帧相对应的显影参数(该实施例中的白平衡)的显影参数文件。
在步骤S502中,控制单元108检测到用户经由操作单元106发出了记录RAW运动图像数据的指示。这开始了将RAW图像文件和显影参数文件记录在记录介质110上。
在步骤S504中,控制单元108对针对各帧重复进行的一系列处理中的帧编号n进行初始化(n=0)。帧编号n与在RAW运动图像文件中记录的多个RAW图像帧的记录顺序相对应。在步骤S506中,控制单元108使帧编号n增加+1(n=n+1)。例如,针对最初在RAW运动图像文件中记录的RAW图像帧,将帧编号n设置为1。
在步骤S508中,控制单元108判断帧编号n的RAW图像帧是否是最终RAW图像帧。如果帧编号n的RAW图像帧不是最终RAW图像帧,则处理进入步骤S510。
在步骤S510中,控制单元108判断帧编号n的RAW图像帧是否满足预定条件。即,控制单元108判断帧编号n的RAW图像帧是否是满足预定条件的RAW图像帧。注意,如在第一实施例中一样,例如,满足预定条件的RAW图像帧是以预定帧间隔从构成RAW运动图像数据的多个RAW图像帧中提取的RAW图像帧。如果帧编号n的RAW图像数据不满足预定条件,则处理进入步骤S512。
在步骤S512中,显影参数文件生成单元105在控制单元108的控制下,从显影参数文件中删除与帧编号n的RAW图像帧相对应的显影参数。然后,处理进入步骤S506。
在步骤S510中,如果帧编号n的RAW图像数据满足预定条件,则处理在不从显影参数文件中删除与帧编号n的RAW图像帧相对应的显影参数的情况下进入步骤S506。
设备针对各帧执行步骤S506~S512中的处理,直到帧编号n的RAW图像帧到达最终RAW图像帧。当帧编号n的RAW图像帧到达最终RAW图像帧时(即,步骤S508中为“是”),处理进入步骤S514。
在步骤S514中,记录/再现单元107在控制单元108的控制下将RAW运动图像文件和显影参数文件记录在记录介质110上。在这种情况下,记录/再现单元107将从中删除了除与满足预定条件的RAW图像帧相对应的显影参数和与最终RAW图像帧相对应的显影参数以外的显影参数的显影参数文件记录在记录介质110上。
图6A和6B是用于说明在该实施例的摄像设备100中记录的RAW运动图像数据的图。参考图6A和6B,沿时间轴配置构成RAW运动图像数据的RAW图像帧和显影参数(该实施例中的白平衡)。
图6A示出在图5中示出的操作(即,记录分别与构成RAW运动图像数据的RAW图像帧相对应的显影参数)之前的RAW运动图像数据。图6B示出通过图5中示出的操作生成的RAW运动图像数据的显影参数。参考图6B,在RAW图像帧Ft1和RAW图像帧Ft2之间存在的RAW图像帧既不是以预定帧间隔提取的RAW图像帧,也不是最终RAW图像帧。删除与在RAW图像帧Ft1和RAW图像帧Ft2之间存在的RAW图像帧相对应的显影参数Pt1-t2。同样,在RAW图像帧Ft2和RAW图像帧Ft3之间存在的RAW图像帧既不是以预定帧间隔提取的RAW图像帧,也不是最终RAW图像帧。因此,删除与在RAW图像帧Ft2和RAW图像帧Ft3之间存在的RAW图像帧相对应的显影参数Pt2-t3
如上所述,在该实施例中,在记录了与所有RAW图像帧相对应的显影参数之后,删除除了与满足预定条件的RAW图像帧相对应的显影参数和与最终RAW图像帧相对应的显影参数以外的显影参数。因此,可以与RAW运动图像数据相关联地记录与满足预定条件的RAW图像帧相对应的显影参数和与最终RAW图像帧相对应的显影参数。因此,当对这种RAW运动图像数据进行再现时,可以通过插值处理针对没有记录显影参数的RAW图像帧来生成适当的显影参数,并以所期望的图像质量对RAW运动图像数据进行再现。
第三实施例
第一实施例已经例示了当用户发出停止生成RAW运动图像数据的指示时,设备立即停止生成RAW运动图像数据的情况。第三实施例将例示即使用户发出停止生成RAW运动图像数据的指示时,设备也继续生成RAW运动图像数据直到生成满足预定条件的RAW图像帧为止的情况。
将参考图7说明摄像设备100的操作,更具体地,将由多个RAW图像帧构成的RAW运动图像数据记录在记录介质110上的操作。控制单元108通过整体地控制摄像设备100的各单元来执行该操作。
以编号顺序进行的从步骤S702至步骤S720的处理示出当用户没有发出停止生成RAW运动图像数据的指示时(即,设备继续拍摄运动图像)要进行的处理。注意,由于步骤S702~S720中的处理与步骤S202~S220中的处理相同,因此将省略对处理的详细说明。
以下是当用户发出停止生成RAW运动图像数据的运动图像数据的指示(即,用户发出停止拍摄运动图像的指示)时要进行的处理。
当用户发出停止生成RAW运动图像数据的指示时,处理进入步骤S722。在步骤S722中,控制单元108将摄像结束标志end_flag设置为1,并且处理进入步骤S716。在这种情况下,控制单元108没有使摄像单元101和A/D转换单元102停止生成RAW运动图像数据。在步骤S716中,控制单元108判断帧编号n的RAW图像帧,即当用户发出停止生成RAW运动图像数据的指示时所生成的RAW图像帧是否满足预定条件。
如果当用户发出停止生成RAW运动图像数据的指示时所生成的RAW图像帧满足预定条件,则处理进入步骤S718。在这种情况下,控制单元108使摄像单元101和A/D转换单元102停止生成RAW运动图像数据。在步骤S718中,在控制单元108的控制下,显影参数文件生成单元105通过将当用户发出停止生成RAW运动图像数据的指示时所生成的RAW图像帧的显影参数记录(写入)在文件中来生成显影参数文件。由于用户发出了停止生成RAW运动图像数据的指示(摄像结束标志end_flag=1),因此处理通过步骤S720进入步骤S724。在步骤S724中,在控制单元108的控制下,记录/再现单元107将在步骤S712中生成的RAW运动图像文件和在步骤S718中生成的显影参数文件记录在记录介质110上。
如果当用户发出停止生成RAW运动图像数据的指示时所生成的RAW图像帧不满足预定条件,则处理进入步骤S706以重复以上处理,直到生成满足预定条件的RAW图像帧为止。当生成了满足预定条件的RAW图像帧时,在步骤S718中生成记录(写入)了RAW图像帧和显影参数的显影参数文件。由于用户发出了停止生成RAW运动图像数据的指示(摄像结束标志end_flag=1),因此处理通过步骤S720进入步骤S724。在步骤S724中,在控制单元108的控制下,记录/再现单元107将在步骤S712中生成的RAW运动图像文件和在步骤S718中生成的显影参数文件记录在记录介质110上。
图8A和8B是示出在该实施例的摄像设备100中的RAW运动图像数据(即,通过图7中示出的操作所生成的RAW运动图像数据)的图。参考图8A和8B,沿时间轴配置构成RAW运动图像数据的RAW图像帧和显影参数(该实施例中的白平衡)。
图8A示出当用户在时刻t3发出停止生成RAW运动图像数据的指示并且时刻t3时的RAW图像帧Ft3满足预定条件的情况下、要被记录的RAW运动图像数据。参考图8A,将时刻t1时的RAW图像帧Ft1和时刻t2时的RAW图像帧Ft2判断为以预定帧间隔提取的RAW图像帧,并记录与各帧相对应的白平衡Pt1和Pt2。另外,当用户发出停止生成RAW运动图像数据的指示时所生成的时刻t3时的RAW图像帧Ft3满足预定条件,并将RAW图像帧Ft3判断为以预定帧间隔提取的RAW图像帧。因此,设备将RAW图像帧Ft3设置为最终RAW图像帧,并记录与RAW图像帧Ft3相对应的白平衡Pt3
图8B示出当用户在时刻t3发出停止生成RAW运动图像数据的指示并且时刻t3时的RAW图像帧Ft3不满足预定条件的情况下、要被记录的RAW运动图像数据。参考图8B,将时刻t1时的RAW图像帧Ft1和时刻t2时的RAW图像帧Ft2判断为以预定帧间隔提取的RAW图像帧,并记录与各帧相对应的白平衡Pt1和Pt2。然而要注意,由于当用户发出停止生成RAW运动图像数据的指示时所生成的时刻t3时的RAW图像帧Ft3不满足预定条件,因此不将该帧判断为以预定帧间隔提取的RAW图像帧。因此,设备继续生成RAW运动图像数据,直到生成满足预定条件的RAW图像帧为止。在时刻t7时生成的RAW图像帧Ft7满足预定条件,因此将RAW图像帧Ft7判断为以预定帧间隔提取的RAW图像帧。结果,设备将RAW图像帧Ft7设置为最终RAW图像帧,并记录与RAW图像帧Ft7相对应的白平衡Pt7
如上所述,在该实施例中,当用户发出停止生成RAW运动图像数据的指示时,设备继续生成RAW运动图像数据,直到生成满足预定条件的RAW图像帧为止(即,偏移停止拍摄运动图像的时刻)。这使得可以将最后生成的满足预定条件的RAW图像帧判断为最终RAW图像帧,并与RAW运动图像数据相关联地记录与RAW图像帧相对应的显影参数。因此,当对这种RAW运动图像数据进行再现时,可以通过插值处理针对没有记录显影参数的RAW图像帧来生成适当的显影参数,并以所期望的图像质量对RAW运动图像数据进行再现。
第四实施例
图9是示出作为本发明的一个方面的图像处理设备900的结构的示意框图。图像处理设备900将RAW运动图像数据分割成多个RAW运动图像数据(该实施例中的第一RAW运动图像数据和第二RAW运动图像数据)。例如,假定摄像设备100记录由图像处理设备900分割后的RAW运动图像数据,以及该RAW运动图像数据由多个RAW图像帧构成,并且显影参数分别与一些RAW图像帧相关联。
图像处理设备900包括记录介质901、记录/再现单元902、操作单元903、控制单元904和存储器905。另外,图像处理设备900包括RAW运动图像处理单元906、RAW运动图像文件生成单元907、显影参数处理单元908和显影参数文件生成单元909。
例如,记录介质901包括光学记录介质或半导体记录介质。将RAW运动图像数据记录在记录介质901上,在该实施例中将RAW运动图像文件和显影参数文件记录在记录介质901上。
例如,记录/再现单元902读出在记录介质901上记录的图像数据,以及将图像数据写入记录介质901中。在该实施例中,记录/再现单元902具有从记录介质901中读出在记录介质901上记录的RAW运动图像数据和与构成RAW运动图像数据的RAW图像帧相对应的显影参数的功能。记录/再现单元902还具有将RAW运动图像数据和与构成RAW运动图像数据的RAW图像帧相对应的显影参数记录在记录介质901上的功能。
操作单元903由用于接受用户的操作(输入操作指示)的各种按钮等构成。例如,操作单元903包括分割开始按钮和分割位置按钮。用户可以通过操作分割开始按钮来发出开始对RAW运动图像数据进行分割的指示。另外,用户可以通过操作分割位置按钮来指定RAW运动图像数据的分割位置,即第一RAW运动图像数据的最终RAW图像帧或第二RAW运动图像数据的开头RAW图像帧。
控制单元904包括CPU,并控制图像处理设备900的全部操作。例如,当对RAW运动图像数据进行分割时,控制单元904控制图像处理设备900的各单元以记录与分割操作后的RAW运动图像数据的最终RAW图像帧或开头RAW图像帧相对应的显影参数。
例如,存储器905包括诸如SDRAM等的半导体存储装置,并暂时存储从RAW运动图像处理单元906输出的RAW运动图像数据和从显影参数处理单元908输出的显影参数。
RAW运动图像处理单元906从由记录/再现单元902所读出的RAW运动图像文件中针对各帧提取RAW图像数据。控制单元904控制RAW运动图像处理单元906以单独输出构成第一RAW运动图像数据的RAW图像帧和构成第二RAW运动图像数据的RAW图像帧。
RAW运动图像文件生成单元907基于从RAW运动图像处理单元906输出的RAW图像数据,来生成与第一RAW图像数据相对应的第一运动图像文件和与第二RAW图像数据相对应的第二运动图像文件。记录/再现单元902将由RAW运动图像文件生成单元907生成的第一运动图像文件和第二运动图像文件记录在记录介质901上。
显影参数处理单元908从由记录/再现单元902读出的显影参数文件中针对各帧提取显影参数。控制单元904控制显影参数处理单元908进行用于生成显影参数的插值处理。显影参数处理单元908输出从显影参数文件中提取的显影参数和通过插值处理生成的显影参数。
显影参数文件生成单元909基于从显影参数处理单元908输出的显影参数来生成显影参数文件。记录/再现单元902将由显影参数文件生成单元909生成的显影参数文件记录在记录介质901上。
将参考图10说明图像处理设备900的操作,即,将在记录介质901上记录的RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据的操作。控制单元904通过整体地控制图像处理设备900的各单元来执行该操作。注意,针对分割操作前的RAW运动图像数据中与开头图像帧相对应的开头RAW图像帧,将帧编号n设置为1(n=1),以及针对与最终图像帧相对应的最终RAW图像帧,将帧编号n设置为N(n=N)。
在步骤S1002中,控制单元904检测到用户经由操作单元903发出了对RAW运动图像数据进行分割的指示(即,已经操作了分割开始按钮)。这使得图像处理设备900开始对RAW运动图像数据进行分割,并且记录/再现单元902读出在记录介质901上记录的RAW运动图像数据。
在步骤S1004中,控制单元904根据用户对分割位置按钮的操作来指定RAW运动图像数据的分割位置,即第一RAW运动图像数据的最终RAW图像帧或第二RAW运动图像数据的开头RAW图像帧。假定在该实施例中,控制单元904将帧编号M(1<M<N)的RAW图像帧指定为第二RAW运动图像数据的开头RAW图像帧。
在步骤S1006中,RAW运动图像文件生成单元907在控制单元904的控制下、基于在步骤S1004中指定的分割位置来生成第一RAW运动图像文件和第二RAW运动图像文件。第一RAW运动图像文件与第一RAW运动图像数据相对应,并由从开头RAW图像帧到帧编号(M-1)的RAW图像帧的RAW图像帧构成。第二RAW运动图像文件由从帧编号M的RAW图像帧到帧编号N的最终RAW图像帧的RAW图像帧构成。注意,将在假定生成第一RAW运动图像文件和第二RAW运动图像文件的情况下说明该实施例。然而,可以在没有生成新的RAW运动图像文件的情况下仅记录分割位置的信息。
在步骤S1008中,控制单元904对与RAW运动图像数据分割操作相关联的标志和变量等进行初始化。更具体地,控制单元904对在显影参数的插值处理中的帧编号n进行初始化。该实施例将例示针对帧编号(M-1)的RAW图像帧和帧编号M的RAW图像帧通过插值处理来生成显影参数的情况。因此,首先,将帧编号n设置为M-1。
在步骤S1010中,控制单元904判断是否存在与帧编号n的RAW图像帧相对应的显影参数。如果存在与帧编号n的RAW图像帧相对应的显影参数,则处理进入步骤S1018。如果不存在与帧编号n的RAW图像帧相对应的显影参数,则处理进入步骤S1012。
在步骤S1012中,在控制单元904的控制下,显影参数处理单元908获取记录了显影参数的RAW图像帧中的、紧挨在帧编号n的RAW图像帧之前的RAW图像帧的显影参数。
在步骤S1014中,在控制单元904的控制下,显影参数处理单元908获取记录了显影参数的RAW图像帧中的、紧挨在帧编号n的RAW图像帧之后的RAW图像帧的显影参数。
在步骤S1016中,在控制单元904的控制下,显影参数处理单元908通过使用在步骤S1012和S1014中获取的显影参数进行插值处理,来生成与帧编号n的RAW图像帧相对应的显影参数。
在步骤S1018中,在控制单元904的控制下,显影参数文件生成单元909通过将针对帧编号n的RAW图像帧的显影参数记录(写入)在文件中来生成显影参数文件。更具体地,如果存在帧编号n的RAW图像帧的显影参数,则记录该显影参数。如果不存在帧编号n的RAW图像帧的显影参数,则记录在步骤S1016中生成的显影参数。
在步骤S1020中,控制单元904判断帧编号n是否为M(n=M)。如果帧编号n不为M,则处理进入步骤S1008,其中控制单元904将帧编号n增加1。在该实施例中,如果帧编号n为(M-1),则处理进入步骤S1008以将帧编号n设置为M-1+1=M(n=M)并执行步骤S1010~S1018中的处理。如果帧编号n为M,则处理进入步骤S1022。
在步骤S1022中,在控制单元904的控制下,记录/再现单元902将在步骤S1006中生成的第一RAW图像文件和第二RAW图像文件以及在步骤S1018中生成的显影参数文件记录在记录介质901上。换句话说,在步骤S1022中,将RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据并记录在记录介质901上。在这种情况下,在第一RAW运动图像数据中,相互关联地记录帧编号(M-1)的RAW图像帧(第一RAW运动图像数据的最终RAW图像帧)和与该RAW图像帧相对应的显影参数。在第二RAW运动图像数据中,相互关联地记录帧编号M的RAW图像帧(第二RAW运动图像数据的开头RAW图像帧)和与该RAW图像帧相对应的显影参数。
图11A和11B是示出由图像处理设备900分割后的RAW运动图像数据(即,通过图10中示出的操作而生成的第一RAW运动图像数据和第二RAW运动图像数据)的图。参考图11A和11B,沿时间轴配置构成RAW运动图像数据的RAW图像帧和显影参数(该实施例中的白平衡)。
图11A示出将由图像处理设备900分割的RAW运动图像数据(即,分割操作前的RAW运动图像数据)。参考图11A,在分割操作前的RAW运动图像数据中,记录分别与帧编号2的RAW图像帧F2和帧编号(N-2)的RAW图像帧FN-2相对应的白平衡P2和PN-2
图11B示出由图像处理设备900分割后的RAW运动图像数据(即,第一RAW运动图像数据和第二RAW运动图像数据)。将RAW运动图像数据分割成由帧编号1至(M-1)的RAW图像帧F1~FM-1构成的第一RAW运动图像数据和由帧编号M至N的RAW图像帧FM~FN构成的第二RAW运动图像数据。在这种情况下,该设备通过使用RAW图像帧F2和FN-2的白平衡P2和PN-2进行插值处理、来生成与作为第一RAW运动图像数据的最终RAW图像帧的RAW图像帧FM-1相对应的白平衡PM-1。同样,该设备通过使用RAW图像帧F2和FN-2的白平衡P2和PN-2进行插值处理、来生成与作为第二RAW运动图像数据的开头RAW图像帧的RAW图像帧FM相对应的白平衡PM。在第一RAW运动图像数据中,除了记录RAW图像帧F2的白平衡P2以外,还记录RAW图像帧FM-1的白平衡PM-1。同样,在第二RAW运动图像数据中,除了记录RAW图像帧FN-2的白平衡PN-2以外,还记录RAW图像帧FM的白平衡PM
以这种方式,在该实施例中,当将RAW运动图像数据分割成多个RAW运动图像数据时,设备通过插值处理来生成与分割操作后的RAW运动图像数据的最终RAW图像帧或开头RAW图像帧相对应的显影参数。这使得可以相互关联地记录分割操作后的RAW运动图像数据和与分割操作后的RAW运动图像数据的最终RAW图像帧或开头RAW图像帧相对应的显影参数。因此,当对分割操作后的RAW运动图像数据进行再现时,设备可以通过插值处理、针对没有记录显影参数的RAW图像帧来生成适当的显影参数,并以所期望的图像质量对RAW运动图像数据进行再现。
如上所述,根据本发明,可以与RAW运动图像数据相关联地记录与RAW运动图像数据的最终RAW图像帧相对应的显影参数。因此,当对RAW运动图像数据进行再现(显影)时,设备可以通过插值处理、针对最终RAW图像帧附近的RAW图像帧来生成适当的显影参数。这使得与不控制记录与RAW运动图像数据的最终RAW图像帧相对应的显影参数的现有技术相比,可以以所期望的图像质量对RAW运动图像数据进行再现。
注意,在该实施例中,与RAW运动图像数据(RAW运动图像文件)相分离地将显影参数记录为显影参数文件。然而,可以与RAW运动图像数据在同一文件中记录显影参数。另外,当记录显影参数时,设备还可以记录相应的RAW图像帧的帧编号和表示摄像时刻的时刻信息等。
还可以利用读出并执行记录在存储器装置上的程序以进行上述实施例的功能的系统或设备的计算机(或者CPU或MPU等装置)和通过下面的方法实现本发明的方面,其中,利用系统或设备的计算机通过例如读出并执行记录在存储器装置上的程序以进行上述实施例的功能来进行上述方法的步骤。为此,例如,通过网络或者通过用作存储器装置的各种类型的记录介质(例如,计算机可读介质)将该程序提供给计算机。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。

Claims (22)

1.一种图像处理设备,用于将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧中的部分RAW图像帧相关联的RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据,所述图像处理设备的特征在于包括:
生成单元,用于通过使用与所述部分RAW图像帧中的第一RAW图像帧和第二RAW图像帧相关联的显影参数进行插值处理,生成与最终RAW图像帧相对应的显影参数,其中,所述最终RAW图像帧与所述第一RAW运动图像数据的最终图像帧相对应,所述第一RAW图像帧在所述最终RAW图像帧之前并且所述第二RAW图像帧在所述最终RAW图像帧之后;以及
分割单元,用于在将所述第一RAW运动图像数据的最终RAW图像帧与所述生成单元所生成的与所述最终RAW图像帧相对应的显影参数相关联的情况下,将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据,其中,所述第一RAW运动图像数据存储于第一RAW运动图像文件并且所述第二RAW运动图像数据存储于第二RAW运动图像文件。
2.根据权利要求1所述的图像处理设备,其中,所述生成单元所生成的与所述最终RAW图像帧相对应的显影参数存储于显影参数文件。
3.根据权利要求1所述的图像处理设备,其中,所述生成单元所生成的与所述最终RAW图像帧相对应的显影参数存储于所述第一RAW运动图像文件。
4.根据权利要求1所述的图像处理设备,其中,所述部分RAW图像帧是以预定帧间隔从所述多个RAW图像帧中提取的RAW图像帧或者与场景变化相对应的RAW图像帧。
5.根据权利要求1所述的图像处理设备,其中,所述显影参数包括与对比度、曝光校正、白平衡、色相、颜色空间、色调曲线和轮廓强调有关的参数中的至少一个。
6.根据权利要求1所述的图像处理设备,其中,
所述生成单元通过使用与所述部分RAW图像帧中的第一RAW图像帧和第二RAW图像帧相关联的显影参数进行插值处理,生成与开头RAW图像帧相对应的显影参数,其中,所述开头RAW图像帧与所述第二RAW运动图像数据的开头图像帧相对应;以及
所述分割单元在将所述第二RAW运动图像数据的开头RAW图像帧与所述生成单元所生成的与所述开头RAW图像帧相对应的显影参数相关联的情况下,将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据。
7.一种图像处理设备,用于将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧的部分RAW图像帧相关联的RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据,所述图像处理设备的特征在于包括:
生成单元,用于通过使用与所述部分RAW图像帧中的第一RAW图像帧和第二RAW图像帧相关联的显影参数进行插值处理,生成与开头RAW图像帧相对应的显影参数,其中,所述开头RAW图像帧与所述第二RAW运动图像数据的开头图像帧相对应,所述第一RAW图像帧在所述开头RAW图像帧之前并且所述第二RAW图像帧在所述开头RAW图像帧之后;以及
分割单元,用于在将所述第二RAW运动图像数据的开头RAW图像帧与所述生成单元所生成的与所述开头RAW图像帧相对应的显影参数相关联的情况下,将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据,其中,所述第一RAW运动图像数据存储于第一RAW运动图像文件并且所述第二RAW运动图像数据存储于第二RAW运动图像文件。
8.根据权利要求7所述的图像处理设备,其中,所述生成单元所生成的与所述开头RAW图像帧相对应的显影参数存储于显影参数文件。
9.根据权利要求7所述的图像处理设备,其中,所述生成单元所生成的与所述开头RAW图像帧相对应的显影参数存储于所述第二RAW运动图像文件。
10.根据权利要求7所述的图像处理设备,其中,所述部分RAW图像帧是以预定帧间隔从所述多个RAW图像帧中提取的RAW图像帧或者与场景变化相对应的RAW图像帧。
11.根据权利要求7所述的图像处理设备,其中,所述显影参数包括与对比度、曝光校正、白平衡、色相、颜色空间、色调曲线和轮廓强调有关的参数中的至少一个。
12.一种图像处理设备的控制方法,所述图像处理设备将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧的部分RAW图像帧相关联的RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据,所述控制方法的特征在于包括以下步骤:
生成步骤,用于通过使用与所述部分RAW图像帧中的第一RAW图像帧和第二RAW图像帧相关联的显影参数进行插值处理,生成与最终RAW图像帧相对应的显影参数,其中,所述最终RAW图像帧与所述第一RAW运动图像数据的最终图像帧相对应,所述第一RAW图像帧在所述最终RAW图像帧之前并且所述第二RAW图像帧在所述最终RAW图像帧之后;以及
分割步骤,用于在将所述第一RAW运动图像数据的最终RAW图像帧与所述生成步骤中所生成的与所述最终RAW图像帧相对应的显影参数相关联的情况下,将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据,其中,所述第一RAW运动图像数据存储于第一RAW运动图像文件并且所述第二RAW运动图像数据存储于第二RAW运动图像文件。
13.根据权利要求12所述的控制方法,其中,所述生成步骤中所生成的与所述最终RAW图像帧相对应的显影参数存储于显影参数文件。
14.根据权利要求12所述的控制方法,其中,所述生成步骤中所生成的与所述最终RAW图像帧相对应的显影参数存储于所述第一RAW运动图像文件。
15.根据权利要求12所述的控制方法,其中,所述部分RAW图像帧是以预定帧间隔从所述多个RAW图像帧中提取的RAW图像帧或者与场景变化相对应的RAW图像帧。
16.根据权利要求12所述的控制方法,其中,所述显影参数包括与对比度、曝光校正、白平衡、色相、颜色空间、色调曲线和轮廓强调有关的参数中的至少一个。
17.根据权利要求12所述的控制方法,其中,
所述生成步骤通过使用与所述部分RAW图像帧中的第一RAW图像帧和第二RAW图像帧相关联的显影参数进行插值处理,生成与开头RAW图像帧相对应的显影参数,其中,所述开头RAW图像帧与所述第二RAW运动图像数据的开头图像帧相对应;以及
在将所述第二RAW运动图像数据的开头RAW图像帧与所述生成步骤中所生成的与所述开头RAW图像帧相对应的显影参数相关联的情况下,所述分割步骤将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据。
18.一种图像处理设备的控制方法,所述图像处理设备将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧的部分RAW图像帧相关联的RAW运动图像数据分割成第一RAW运动图像数据和第二RAW运动图像数据,所述控制方法的特征在于包括以下步骤:
生成步骤,用于通过使用与所述部分RAW图像帧中的第一RAW图像帧和第二RAW图像帧相关联的显影参数进行插值处理,生成与开头RAW图像帧相对应的显影参数,其中,所述开头RAW图像帧与所述第二RAW运动图像数据的开头图像帧相对应,所述第一RAW图像帧在所述开头RAW图像帧之前并且所述第二RAW图像帧在所述开头RAW图像帧之后;以及
分割步骤,用于在将所述第二RAW运动图像数据的开头RAW图像帧与所述生成步骤中所生成的与所述开头RAW图像帧相对应的显影参数相关联的情况下,将所述RAW运动图像数据分割成所述第一RAW运动图像数据和所述第二RAW运动图像数据,其中,所述第一RAW运动图像数据存储于第一RAW运动图像文件并且所述第二RAW运动图像数据存储于第二RAW运动图像文件。
19.根据权利要求18所述的控制方法,其中,所述生成步骤中所生成的与所述开头RAW图像帧相对应的显影参数存储于显影参数文件。
20.根据权利要求18所述的控制方法,其中,所述生成步骤中所生成的与所述开头RAW图像帧相对应的显影参数存储于所述第二RAW运动图像文件。
21.根据权利要求18所述的控制方法,其中,所述部分RAW图像帧是以预定帧间隔从所述多个RAW图像帧中提取的RAW图像帧或者与场景变化相对应的RAW图像帧。
22.根据权利要求18所述的控制方法,其中,所述显影参数包括与对比度、曝光校正、白平衡、色相、颜色空间、色调曲线和轮廓强调有关的参数中的至少一个。
CN201510472257.1A 2010-04-23 2011-04-22 图像处理设备及其控制方法 Active CN105187714B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010100361A JP5603641B2 (ja) 2010-04-23 2010-04-23 撮像装置、画像処理装置、制御方法及びプログラム
JP2010-100361 2010-04-23
CN201110103630.8A CN102238333B (zh) 2010-04-23 2011-04-22 图像处理设备及其控制方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201110103630.8A Division CN102238333B (zh) 2010-04-23 2011-04-22 图像处理设备及其控制方法

Publications (2)

Publication Number Publication Date
CN105187714A CN105187714A (zh) 2015-12-23
CN105187714B true CN105187714B (zh) 2018-10-02

Family

ID=44260778

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201110103630.8A Active CN102238333B (zh) 2010-04-23 2011-04-22 图像处理设备及其控制方法
CN201510472257.1A Active CN105187714B (zh) 2010-04-23 2011-04-22 图像处理设备及其控制方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201110103630.8A Active CN102238333B (zh) 2010-04-23 2011-04-22 图像处理设备及其控制方法

Country Status (5)

Country Link
US (2) US8848067B2 (zh)
EP (1) EP2381449B1 (zh)
JP (1) JP5603641B2 (zh)
KR (1) KR101283421B1 (zh)
CN (2) CN102238333B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5791244B2 (ja) * 2010-07-29 2015-10-07 キヤノン株式会社 画像処理装置、表示装置及びそれらの制御方法
US9521315B2 (en) * 2011-11-01 2016-12-13 Nokia Technologies Oy Apparatus and method for forming new images by determining stylistic settings of existing images
US9106936B2 (en) * 2012-01-25 2015-08-11 Altera Corporation Raw format image data processing
JP5940004B2 (ja) * 2013-03-04 2016-06-29 株式会社ドッドウエル ビー・エム・エス カメラ監視システム及びカメラ監視方法
JP6190236B2 (ja) * 2013-10-10 2017-08-30 キヤノン株式会社 画像表示装置、撮像装置、画像表示方法
CN107835362B (zh) * 2017-10-30 2019-12-31 Oppo广东移动通信有限公司 图像存储方法、图像显示方法及电子设备
GB2582422B (en) * 2019-02-05 2022-01-26 Canon Kk Video processing progress bar, indicating which parts have already been processed and which are yet to be processed
JP2023001629A (ja) * 2021-06-21 2023-01-06 キヤノン株式会社 撮像装置、情報処理装置及びその制御方法並びにプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101378459A (zh) * 2007-08-27 2009-03-04 索尼株式会社 图像处理设备和显影装置及其方法以及原始运动图像格式
JP2009147832A (ja) * 2007-12-17 2009-07-02 Samsung Techwin Co Ltd 動画像記録装置、動画像再生装置及びプログラム
CN101568039A (zh) * 2009-06-03 2009-10-28 广东威创视讯科技股份有限公司 一种白平衡调整方法、调整装置及摄像装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7027086B1 (en) * 1999-04-15 2006-04-11 Sony Corporation Photographing apparatus and signal processing method that allow data of still pictures to be converted into a moving picture file
GB2356509B (en) 1999-11-16 2004-02-11 Sony Uk Ltd Video data formatting and storage
US7286724B2 (en) * 1999-12-06 2007-10-23 Hyundai Curitel, Inc. Method and apparatus for searching, browsing and summarizing moving image data using fidelity for tree-structure moving image hierarchy
US7287222B2 (en) 2002-01-31 2007-10-23 Canon Kabushiki Kaisha Information processing apparatus and method that determines effectiveness of metadata for editing information content
JP4335492B2 (ja) * 2002-03-05 2009-09-30 キヤノン株式会社 動画像管理方法及び装置
US20050099499A1 (en) 2003-11-10 2005-05-12 Ariel Braunstein Recyclable, digital one time use video camera
JP2006174412A (ja) 2004-11-18 2006-06-29 Fuji Photo Film Co Ltd 撮像装置
TWI300159B (en) 2004-12-24 2008-08-21 Sony Taiwan Ltd Camera system
JP4148228B2 (ja) * 2005-02-10 2008-09-10 ソニー株式会社 画像記録装置、画像再生制御装置、画像記録再生制御装置、これらの装置の処理方法およびその方法をコンピュータに実行させるプログラム
JP4035543B2 (ja) 2005-04-04 2008-01-23 キヤノン株式会社 撮像装置
JP2006303595A (ja) 2005-04-15 2006-11-02 Sony Corp 素材記録装置および素材記録方法
JPWO2006126679A1 (ja) * 2005-05-27 2008-12-25 三洋電機株式会社 データ記録装置、及びデータ記録装置におけるデータファイルの送信方法
JP4720387B2 (ja) * 2005-09-07 2011-07-13 ソニー株式会社 撮像装置、画像処理装置、および方法、並びにコンピュータ・プログラム
JP4743179B2 (ja) * 2006-09-28 2011-08-10 セイコーエプソン株式会社 画像表示制御装置、撮影装置、画像表示方法及びそのプログラム
JP4743180B2 (ja) * 2006-09-28 2011-08-10 セイコーエプソン株式会社 画像表示制御装置、撮影装置、画像表示方法及びそのプログラム
US7676146B2 (en) 2007-03-09 2010-03-09 Eastman Kodak Company Camera using multiple lenses and image sensors to provide improved focusing capability
JP2008301357A (ja) 2007-06-01 2008-12-11 Fujifilm Corp 撮像装置及びその制御方法
JP4958758B2 (ja) 2007-12-14 2012-06-20 三星電子株式会社 記録装置、再生装置、記録方法、再生方法及びプログラム
JP5118465B2 (ja) * 2007-12-14 2013-01-16 三星電子株式会社 記録装置、再生装置、記録方法、再生方法及びプログラム
JP5025498B2 (ja) * 2008-01-11 2012-09-12 キヤノン株式会社 画像処理装置およびその制御方法
US20090290645A1 (en) 2008-05-21 2009-11-26 Broadcast International, Inc. System and Method for Using Coded Data From a Video Source to Compress a Media Signal
JP5035292B2 (ja) * 2009-05-11 2012-09-26 株式会社ニコン 撮像装置、データ生成装置、およびデータ生成プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101378459A (zh) * 2007-08-27 2009-03-04 索尼株式会社 图像处理设备和显影装置及其方法以及原始运动图像格式
JP2009147832A (ja) * 2007-12-17 2009-07-02 Samsung Techwin Co Ltd 動画像記録装置、動画像再生装置及びプログラム
CN101568039A (zh) * 2009-06-03 2009-10-28 广东威创视讯科技股份有限公司 一种白平衡调整方法、调整装置及摄像装置

Also Published As

Publication number Publication date
JP5603641B2 (ja) 2014-10-08
EP2381449A2 (en) 2011-10-26
EP2381449A3 (en) 2012-04-11
US8848067B2 (en) 2014-09-30
CN102238333A (zh) 2011-11-09
EP2381449B1 (en) 2016-02-10
JP2011233986A (ja) 2011-11-17
US9443554B2 (en) 2016-09-13
US20110261216A1 (en) 2011-10-27
KR101283421B1 (ko) 2013-07-08
CN105187714A (zh) 2015-12-23
KR20110118566A (ko) 2011-10-31
US20140363136A1 (en) 2014-12-11
CN102238333B (zh) 2015-08-12

Similar Documents

Publication Publication Date Title
CN105187714B (zh) 图像处理设备及其控制方法
JP4987129B2 (ja) 画像処理装置及びその制御方法
CN101189869B (zh) 摄像装置、摄像结果处理方法和图像处理装置
CN101378459B (zh) 图像处理设备和显影装置及其方法
KR101007508B1 (ko) 비디오 신호 처리 장치, 비디오 신호 기록 장치, 비디오신호 재생 장치, 비디오 신호 처리 장치의 처리 방법,비디오 신호 기록 장치의 처리 방법, 비디오 신호 재생장치의 처리 방법, 기록 매체
CN1981305B (zh) 图像处理器
JP4881210B2 (ja) 撮像装置、画像処理装置及びそれらの制御方法
US10033931B2 (en) Image processing apparatus and image processing method for processing still image data
CN101682788B (zh) 信号处理方法和信号处理系统
CN105052126A (zh) 摄像设备和摄像设备的控制方法
JP5213503B2 (ja) 記憶再生装置
CN102045507A (zh) 图像处理装置、摄像装置、以及图像处理方法
JP2010237911A (ja) 電子機器
JP2014049882A (ja) 撮像装置
JP2015126252A (ja) 画像処理装置、画像処理方法及びプログラム
JP4401711B2 (ja) 画像処理装置及び画像処理方法
JP5141626B2 (ja) 画像処理装置および画像再生装置
JP6376813B2 (ja) 画像処理装置、画像処理方法およびプログラム、並びに撮像装置
JP2008066839A (ja) デジタルカメラ
JP2002152674A (ja) 画像表示装置および画像表示方法、可読記録媒体
US20100253786A1 (en) Image file generating device and image reproducing device
JP2009159396A (ja) 撮像装置
JP2007158563A (ja) 画像編集システム、電子機器および画像送信方法、画像編集装置および画像編集方法、プログラム、並びにプログラム記録媒体
JP2003101931A (ja) 画像処理装置および方法、記録媒体、並びにプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant