CN101990060A - 摄像装置和图像记录方法 - Google Patents

摄像装置和图像记录方法 Download PDF

Info

Publication number
CN101990060A
CN101990060A CN201010243995.6A CN201010243995A CN101990060A CN 101990060 A CN101990060 A CN 101990060A CN 201010243995 A CN201010243995 A CN 201010243995A CN 101990060 A CN101990060 A CN 101990060A
Authority
CN
China
Prior art keywords
image
image data
data
view data
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201010243995.6A
Other languages
English (en)
Other versions
CN101990060B (zh
Inventor
南刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2009178679A external-priority patent/JP4807446B2/ja
Priority claimed from JP2010060096A external-priority patent/JP5152233B2/ja
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN101990060A publication Critical patent/CN101990060A/zh
Application granted granted Critical
Publication of CN101990060B publication Critical patent/CN101990060B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明提供一种摄像装置和图像记录方法,该摄像装置(100)包括摄像部(1)、指定部(4b)、缩小图像生成部(4a)和记录介质(9)。摄像部(1)连续拍摄被摄体。指定部(4b)将从通过摄像部(1)连续拍摄的多个图像数据中设定一幅图像数据来作为基础图像。缩小图像生成部(4a)对由摄像部(1)连续拍摄的多个图像数据,进行预定的图像处理。记录介质(9)将由该缩小图像生成部(4a)图像处理后的基础图像数据之外的多个图像数据和所述基础图像数据作为一个文件进行记录。

Description

摄像装置和图像记录方法
技术领域
本发明涉及拍摄被摄体的摄像装置和图像记录方法。
背景技术
现有技术中,在日本的公开特许申请2006-345188号公报中已知从连续拍摄的所有多个图像中生成缩小图像并传送到外部设备,并且将用户从该缩小图像中选出的缩小图像作为基础图像传送到外部设备的技术。
另外,日本公开专利申请2006-5452号公报公开了连续拍摄存在移动的被摄体的多个图像,从这些连续拍摄的多个图像中仅截出被摄体图像,并仅将这些截出的被摄体图像粘在所述背景图像上加以合成的技术。由此,可得到粘贴了随时间依次变化的被摄体图像的多重合成图像。因此,根据该上述技术,由于可以将例如运动员的运动轨迹连续叠加在一个图像上进行合成显示,所以可以容易把握运动员的运动轨迹来加以表现。
但是,在上述特开2006-345188号公报记载的技术的情况下,由于将作为基础图像加以选择的图像和缩小图像作为不同的图像文件存储在外部设备中,所以有图像文件的管理麻烦的问题。
在特开2006-5452号公报所记载的技术的情况下,对于把握运动员等的被摄体的运动轨迹有用,但是由于是合成图像,有对于没有运动的区域反倒把握运动有困难的问题。
发明内容
因此,本发明的所要解决的技术问题是可简单进行图像文件的管理,且可容易把握拍摄图像时的状况,进一步,可生成通过一次拍摄,用户便可以可靠把握被摄体的运动推移的连拍图像和多重合成图像。
为了实现上述目的,本申请的摄像装置,其特征在于,包括:摄像单元,连续拍摄被摄体;设定单元,从通过该摄像单元连续拍摄的多个图像数据中设定一幅图像数据来作为基础图像数据;图像处理单元,对除了通过该设定单元设定的基础图像数据的其他多个图像数据,进行预定的图像处理;和记录单元,将通过该图像处理单元图像处理后的基础图像数据以外的多个图像数据和所述基础图像数据作为一个文件进行记录。
本申请的图像记录方法,其特征在于,包括:摄像步骤,连续拍摄被摄体;设定步骤,从通过该摄像步骤连续拍摄的多个图像数据中设定一幅图像数据来作为基础图像数据;图像处理步骤,对通过所述摄像步骤连续拍摄的多个图像数据,进行预定的图像处理;和记录步骤,将通过该图像处理步骤进行图像处理后的基础图像数据之外的多个图像数据和所述基础图像数据作为一个文件进行记录。
附图说明
图1是表示本发明的实施例1的摄像装置的电路结构框图;
图2是表示基于图1的摄像装置的记录控制处理的动作的一例的流程图;
图3是表示图2的记录控制处理的继续的流程图;
图4是图像文件的数据结构图;
图5是用于说明对连续拍摄的多个连拍图像中的其中一个连拍图像进行指定的动作的图;
图6是变形例1的图像文件的数据结构图;
图7是本发明的实施例2的摄像装置的电路结构的框结构图;
图8是表示连拍模式下的处理顺序的流程图;
图9是表示显示装置的显示状态的一例的显示图;
图10是说明多重合成的顺序的说明图;
图11是表示存储装置的存储状态的示意图。
具体实施方式
(第1实施例)
下面,使用附图对本发明说明具体的方式。但是,发明的范围并不限于图示例子。
图1是表示使用了本发明的本实施方式的摄像装置100的示意结构框图。
本实施方式的摄像装置100根据由摄像部1连续拍摄的多个静止图像的图像数据,分别生成缩小了该多个静止图像后的缩略图像(缩小图像)。摄像装置100将多个图像中其中一个静止图像指定为基础图像。摄像装置100将基础图像和多个缩略图像相对应地记录在记录介质9中。
具体而言,如图1所示,摄像装置100包括摄像部1、图像数据生成部235、图像存储器3、图像处理部4、显示控制部5、显示部6、文件生成部7、记录控制部8、记录介质9、操作输入部10、CPU11和ROM12。
摄像部1由透镜部1a、电子摄像部1b和摄像控制部10等构成。
透镜部1a由多个透镜构成,包括变焦透镜和聚焦透镜等。虽然省略了图示,但是透镜部1a也可包括在拍摄被摄体时,使变焦透镜沿光轴方向移动的变焦驱动部、使聚焦透镜沿光轴方向移动的聚焦驱动部等。
电子摄像部1b例如由CCD(电荷耦合器件)或CMOS(complementaryMetal-oxide Semiconductor)等的图像传感器构成。电子摄像部1b将通过透镜部1a的各种透镜后的光学像转换为二维的图像信号。
虽然省略了图示,摄像控制部1c包括定时发生器、驱动器等。摄像控制部1c通过定时发生器、驱动器,扫描驱动电子摄像部1b,并按每个预定周期将光学像通过电子摄像部1b转换为二维图像信号。摄像控制部1c从该电子摄像部1b的摄像区域中一个画面一个画面地读出图像帧,并输出到图像数据生成部2。
摄像控制部1c进行AE(自动曝光处理)、AF(自动聚焦处理)、AWB(自动白平衡)等的摄像条件的调整控制。
由此,摄像部1作为摄像单元,通过以预定的帧率连续拍摄被摄体,而依次生成而取得多个图像帧。
图像数据生成部2生成与被摄体的连续拍摄有关的多个图像帧的各自的YUV数据。即、图像数据生成部2对从电子摄像部1b传送来的各图像帧的模拟值的信号,按RGB的每个颜色成分适当调整增益,然后通过取样保持电路(图示略)进行取样保持,并通过A/D转换器(图示略)转换为数字数据后,通过颜色处理电路(图示略>进行包含像素内插处理和γ校正处理的颜色处理后,生成数字值的亮度信号Y和色差信号Cb,Gr(YUV数据)。
从颜色处理电路输出的亮度信号Y和色差信号Cb,Cr经未图示的DMA控制器,DMA传送到作为缓存储器使用的图像存储器3。
图像存储器3例如由DRAM等构成。图像存储器3暂时存储由图像处理部4和CPU11等进行处理的数据等。
图像处理部4包括缩小图像生成部4a、指定部4b和图像压缩部4c。
缩小图像生成部4a复制由摄像部1的摄像生成,且在图像存储器3中暂时存储的静止图像的图像数据。缩小图像生成部4a根据复制后的图像数据,生成水平和垂直并且以预定的比值缩小后的缩略图像(缩小图像)。例如,缩小图像生成部4a在以摄像部1的连拍顺序,水平和垂直并且以预定的比值缩小复制了各个静止图像后的图像数据而生成缩略图像后,将该缩略图像送到图像存储器3。
由此,缩小图像生成部4a作用为根据由摄像部1连续拍摄的多个静止图像的图像数据,分别生成缩小了该多个静止图像的缩略图像的缩小图像生成单元。
指定部4b将由摄像部1连续拍摄的多个静止图像中的至少其中一个静止图像指定为基础图像。
具体而言,在显示部6上可选择地显示多个缩略图像(例如10幅缩略图像)的状态(参考图5)下,在通过用户对操作输入部10的选择指示用按钮10b(后述)的操作而选择指示希望的缩略图像(例如,缩略图像H2)后,若用户操作了操作输入部10的决定按钮10d(后述),则指定部4b将与该希望的缩略图像对应的静止图像(连拍图像)指定为基础图像。
由此,指定部4b作用为将由摄像部1连续拍摄的多个静止图像中的至少其中一个静止图像指定为基础图像的指定单元。具体而言,指定部4b将由摄像部1连续拍摄的多个静止图像中,与由操作输入部10选择的缩略图像(缩小图像)对应的静止图像指定为基础图像。
图像压缩部4c以预定的编码方式(例如,JPEG方式等)压缩由图像数据生成部2生成的基础图像(静止图像)的图像数据、由缩小图像生成部4a生成的缩略图像的图像数据。
显示控制部5进行读出在图像存储器3中暂时存储的图像数据而使其显示在显示部6的控制。
具体而言,显示控制部5具有VRAM、VRAM控制器和数字视频编码器等。数字视频编码器在CPU11的控制下,经VRAM控制器从VRAM定期读出从图像存储器3读出并在VRAM(图示略)中存储的亮度信号Y和色差信号Cb、Cr,并以这些数据为基础生成视频信号而输出到显示部6。
显示部6例如是液晶显示装置,根据来自显示控制部5的视频信号,将所拍摄的图像等显示在显示屏幕上。
具体而言,显示部6在摄像模式下,根据由摄像部1进行的被摄体的摄像而生成的多个图像帧,显示实时取景(live view)图像,或显示作为记录用图像拍摄的图像。
显示部6作为显示单元,通过由用户进行的操作输入部10的预定操作可选择地显示由缩小图像生成部4a生成的缩略图像。例如,在连拍模式下,拍摄了多幅(例如,10幅)的静止图像,而不能一览显示与各个静止图像对应的缩略图像的情况下,显示部6如图5所示,进行左右滚动改变显示内容的滚动显示。即,显示部6根据由用户进行的选择指示用按钮10b的预定操作,左右滚动显示内容,从而对没有显示的缩略图像也可加以选择。
显示部6在使显示框W重叠在一个缩略图像(例如,缩略图像H2)的边缘的状态下来进行显示,并且,将该缩略图像显示在比显示部6上显示的其他缩略图像(例如,缩略图像H1,H3,H4)高的位置上。由此,表示由用户选择了重叠显示框W而加以显示的缩略图像。
文件生成部7作为文件生成单元,生成包含通过指定部4b从由摄像都1连续拍摄的多个静止图像中指定的基础图像和这些多个静止图像各自的缩略图像在内的一个图像文件F(参考图4)。
图像文件F如图4所示,为由预定的形式(例如,Exif形式)构成的数据结构,例如,包含基础图像信息F0、图像附属信息F1、缩略图像数据F2、图像数据F3、缩略图像数据F4a1,F4a2...。
基础图像信息F0中存储了与指定部4b指定的基础图像有关的图像信息。具体而言,基础图像信息F0中包含例如,该基础图像的摄影信息、图像大小、图像参数、缩小基础图像而生成的缩略图像的图像大小、该基础图像的地址等的信息。
图像附属信息F1中包含与多个静止图像有关的多个缩略图像的图像大小、各缩略图像的起始地址等的信息。
缩略图像数据F2是缩小了基础图像后的缩略图像的图像数据。
图像数据F3是通过图像压缩部4c压缩由指定部4b指定的基础图像后的图像数据。
缩略图像数据F4a1,F4a2,...是通过图像压缩部4c压缩多个静止图像各自的缩略图像后的图像数据。具体而言,缩略图像数据F4a1,F4a2,...按连拍顺序使起始地址分别相对应地存储到预定区域中。
图像文件F的数据结构并不限于此,若存储有基础图像信息F0、图像附属信息F1、缩略图像数据F2、图像数据F3、缩略图像数据F4a1,F4a2,...等,则也可以是其他数据结构。
记录控制部8使由指定部4b指定的基础图像和由缩小图像生成部4a生成的多个缩略图像相对应地记录到记录介质9的预定区域中。
具体而言,记录控制部8在由文件生成部7生成包含由指定部4b指定的基础图像和由缩小图像生成部4a生成的多个缩略图像的图像文件F后,将该图像文件F记录到记录介质9的预定区域中。
由此,记录控制部8作用为记录控制单元,其将由指定部4b指定的基础图像和由缩小图像生成部4a生成的多个缩略图像相对应记录到记录介质9。
记录介质9例如由非易失性存储器(闪存器)等构成。记录介质9存储由图像压缩部4c编码后的静止图像的图像数据等。记录介质9存储由文件生成部7生成的图像文件F。
记录介质9可以是在摄像装置100上可装卸的外部存储器,也可以是摄像装置100的内置存储器。
操作输入部10进行该摄像装置100的预定操作。具体而言操作输入部10如图5所示,例如包括与被摄体的拍摄指示有关的快门按钮10a、与摄像模式和功能等的选择指示有关的选择指示用按钮10b和决定按钮10c,10d等,根据这些按钮的操作来将预定的操作信号输出到CPU11。
CPU11控制摄像装置100的各部分。具体而言,CPU11根据ROM12中存储的摄像装置100用的各种处理程序(图示略)来进行各种的控制动作。
接着,参考图2和图3来说明与摄像装置100的记录控制方法有关的动作处理。
图2和图3是表示与图像数据的记录控制处理有关的动作的一例的流程图。
记录控制处理是根据由用户进行的操作输入部10的选择指示用按钮10b和决定按钮10c,10d的预定操作,从菜单画面上显示的多个摄像模式中选择指示连拍模式的情况下加以执行的处理。
如图2所示,首先,摄像部1在CPU11的控制下,判断是否操作了快门按钮10a(步骤S1)。
这里,如判断为操作了快门按钮10a(步骤S1:是),则摄像部1使由透镜部1a成像的光学像通过电子摄像部1b以预定的拍摄帧率连续拍摄预定幅数(例如,10幅),而取得连拍图像(步骤S2)。例如,如图5所示,摄像部1连续拍摄海豚从水中向空中跳跃后,再次潜入水中的状况。
若判断为没有按下快门按钮10a(步骤S1:否),则摄像部1重复步骤S1的判断处理直到判断为按下了快门按钮10a。
接着,摄像部1读出由电子摄像部1b取得的连拍图像(步骤S3),并将该连拍图像按拍摄顺序存储到图像存储器3中(步骤S4)。然后,摄像部1判断是否终止了预定幅数的连拍图像的存储(步骤S5)。
这里,摄像部1重复步骤S3和步骤S4的处理直到判断为终止了预定幅数的连拍图像的存储(步骤S5:否)。若判断为终止了预定幅数的连拍图像的存储(步骤S5:是),摄像部1终止电子摄像部1b进行的连拍图像的取得(步骤S6)。
接着,缩小图像生成部4a在CPU11的控制下,一幅接一幅地读出图像存储器3中暂时存储的预定幅数的连拍图像(步骤S7),并向显示部6生成显示用的缩略图像(缩小图像)(步骤S8)。然后,缩小图像生成部4a判断是否终止了预定幅数的连拍图像各自的缩略图像的生成(步骤S9)。
这里,缩小图像生成部4a重复步骤S7和步骤S8的处理直到预定幅数的连拍图像各自的缩略图像的生成终止(步骤S9:否)。并且,若由缩小图像生成部4a判断为预定幅数的连拍图像各自的缩略图像的生成终止(步骤S9:是),则如图3所示,显示控制部5将由缩小图像生成部4a生成的缩略图像(例如,缩略图像H1-H4)显示在显示部6上(步骤S10:参考图5)。例如,如图5所示,显示部6以拍摄的顺序(例如,显示部6的左到右)显示连续拍摄了海豚从水中向空中跳跃后,再次潜入水中的状况后的多幅(例如,10幅)连拍图像各自的缩略图像中,预定幅数(例如,4幅)的缩略图像H1~H4。
接着,CPU11进行用户是否操作了选择指示用按钮10b的判断(步骤S11)。即,显示部6可由用户加以选择地显示多个连拍图像(例如,10幅)各自的缩略图像,在该状态下,若判断为用户操作了选择指示用按钮10b(步骤S11:是),则CPU11进行用户是否操作了决定按钮10d,即进行是否选择了多个缩略图像中的其中一个缩略图像的判断(步骤S12)。具体而言,如图5所示,若由用户操作了与表示一幅静止图像的保存的图标相对应的决定按钮10d,则决定按钮10d将预定的信号输出到CPU11,该预定的信号用来指示与重叠显示框W加以显示的一个缩略图像(例如,缩略图像H2)相对应的静止图像的保存。然后,CPU11根据是否检测出该预定的信号,来进行是否选择了与多个缩略图像中的其中之一缩略图像对应的静止图像的判断(步骤S12)。
若选择了与多个缩略图像中的其中一个缩略图像对应的静止图像(步骤S12:是),图像压缩部4c从图像存储器3读出与由用户选出的缩略图像对应的静止图像(基础图像)(步骤S13),并例如以JPEG形式压缩该基础图像的图像数据(步骤S14)。
接着,缩小图像生成部4a从图像存储器3中一幅一幅地读出预定幅数的连拍图像,并生成向图像文件F的保存用的缩略图像(缩小图像)(步骤S15)。
这里,也可以不新生成缩略图像,而将步骤S8中生成的显示用的缩略图像兼用作向图像文件F的保存。
然后,图像压缩部4c例如以JPEG形式压缩向图像文件F的保存用的缩略图像(步骤S16),并判断是否终止了预定幅数(例如,10幅)的连拍图像各自的缩略图像的压缩(步骤S17)。
这里,图像压缩部4c重复步骤S15和步骤S16的处理,直到预定幅数(例如10幅)的连拍图像各自的缩略图像的压缩终止(步骤S17:否),若判断为预定幅数的连拍图像各自的缩略图像的压缩终止(步骤S17;是),则文件生成部7生成一个图像文件F,该一个图像文件F包含与由用户选出的缩略图像对应的基础图像被压缩后的图像数据、和预定幅数的连拍图像各自的压缩后的缩略图像数据(步骤S18)。
然后,记录控制部8使由文件生成部7生成的图像文件F记录在记录介质9中(步骤S19)。缩小图像生成部4a删除图像存储器3中暂时存储的预定幅数的连拍图像的图像数据、显示用缩略图像数据等(步骤S20)后,终止记录控制处理。
若还没有选择与多个缩略图像中其中一个缩略图像对应的静止图像(步骤S12;否),则图像压缩部4c进行是否选择了与多个缩略图像对应的所有静止图像的判断(步骤S21)。具体而言,如图5所示,若由用户操作了与表示所有静止图像的保存的图标相对应的决定按钮10c,则决定按钮10c将指示所有静止图像的保存的预定信号输出到CPU11。然后,CPU11根据是否检测出该预定信号,来进行是否选择了所有多个静止图像的判断(步骤S21)。
这里,若选择所有多个静止图像(步骤S21;是),则图像压缩部4c从图像存储器3中读出与所有缩略图像分别对应的静止图像,并例如以JPEG形式压缩静止图像的各图像数据(步骤S22)后,进入步骤S19。之后,记录控制部8将由图像压缩部4c压缩后的静止图像的图像数据记录到记录介质9中(步骤S19)。缩小图像生成部4a删除在图像存储器3中暂时存储的预定幅数的静止图像的图像数据、显示用缩略图像数据等(步骤S20),而终止记录控制处理。
这样,根据本实施方式的摄像装置100,可以将从连续拍摄的多个静止图像中指定的基础图像和缩小了该多个静止图像后的多个缩略图像相对应地记录在记录介质9中。具体而言,可以将从连拍摄像的多个静止图像中指定的基础图像和缩小了该多个静止图像后的多个缩略图像集中在一个图像文件中记录到记录介质9中。
因此,可以有效防止基础图像和多个缩略图像的各图像文件分散,可以简单进行图像文件的管理。另外,由于读出基础图像的同时也能立即读出多个缩略图像,所以可通过参考该多个缩略图像,容易把握拍摄基础图像时的状况。
作为基础图像,由于可选择用户希望的连拍图像,所以可以根据用户的意图进行该基础图像的记录,可以提供使用便利性高的摄像装置。
〔变形例1〕
接着,说明本实施方式的摄像装置100的变形例1。
图6是变形例1中的图像文件F的数据结构图。如图6所示,变形例1的图像文件F其特征在于,代替缩略图像数据F4a1,F4a2...,而存储根据缩略图像数据F4a1,F4a2...生成的运动图像数据F5。
具体而言,图像处理部4作为运动图像生成单元,根据由缩小图像生成部4a生成的多个缩略图像的图像数据,以预定的文件形式(例如,Motion-JPEG形式)生成运动图像。
文件生成部7将由图像处理部4生成的运动图像的运动图像数据作为多个缩略图像数据包含在图像文件F中。
图像文件F的结构、图像处理部4和文件生成部7以之外的结构与上述实施方式大致相同,而省略其详细的说明。
因此,根据变形例1的摄像装置100,通过观看与基础图像相对应存储的运动图像,与参考多个缩略图像的情形相比,可以更有效把握拍摄该基础图像时的状况。
上述实施方式中,指定部4b将与由用户选出的一个缩略图像对应的静止图像指定为基础图像,但是并不限于此,也可通过进行考虑了被摄体条件和拍摄条件的图像分析,从连续拍摄的多个静止图像中自动地确定其中一个静止图像来加以指定。另外,在指定部4b不能自动指定一个静止图像的情况下,例如,10幅静止图像中,自动选择了3幅的静止图像的情况下,也可以由用户从该3幅静止图像中指定其中一个静止图像。
上述实施方式中,指定部4b从连续拍摄的多个静止图像中指定其中一个静止图像,但是并不限于此,也可指定多幅静止图像。
变形例1中,根据分别缩小了连拍摄像的多个连拍图像后得到的缩放图像的图像数据,来生成运动图像,但是并不限于此,也可根据连拍拍摄的多个拍摄图像各自的静止图像数据来生成运动图像。
上述实施方式中,在CPU11的控制下,通过驱动缩小图像生成部4a、指定部4b、记录控制部8来实现作为缩小图像生成单元、指定单元、和记录控制单元的功能的结构,但是并不限于此,也可以是通过CPU11来执行预定的程序等而加以实现的结构。
即,在存储程序的程序存储器(图示略)中预先存储包含缩小图像生成处理子程序(routine)、指定处理子程序、记录控制处理子程序的程序。并且,可以通过缩小图像生成处理子程序,使CPU11作用为缩小图像生成单元,该缩小图像生成单元根据通过摄像单元连拍的多个静止图像的图像数据,来分别生成缩小了该多个静止图像而得到的缩小图像。另外,可以通过指定处理子程序,使CPU11作用为指定单元,该指定单元将由摄像单元连续拍摄的所述多个静止图像中的至少其中一个静止图像指定为基础图像。另外,可以通过记录控制处理子程序使CPU11作用为记录控制单元,该记录控制单元使通过指定处理子程序指定的所述基础图像和由缩小图像生成处理子程序生成的多个缩小图像相对应而记录在记录介质9中。
(第2实施例)
下面,说明本发明的实施方式。
图7是表示本发明的一实施方式的摄像装置200的电路结构的示意框结构图。该摄像装置200具有AE(Automatic Exposure自动曝光)、AF(Auto Focus自动聚焦)功能和连拍功能,主要由下面各部分构成。即,摄像装置200具有摄像元件109,作为将通过摄像透镜8成像后的被摄体的光学像光电转换为摄像信号并输出的摄像单元。摄像元件109通过驱动信号被驱动,该驱动信号是基于相机控制部110具有的定时生成器(TG)生成的定时信号的驱动信号。
所述摄像透镜108中包含聚焦透镜和使其在光轴上移动用的透镜电机。并且,透镜电机通过根据相机控制部110的指令来进行驱动,从而控制聚焦透镜在光轴上的位置。
所述摄像元件109的输出信号通过具有A/D(模拟/数字)转换器等的信号转换部111被转换为数字信号后,被送到相机控制部110。相机控制部110使A/D转换后的摄像数据存储到RAM(随机访问存储器)112中。信号处理部114在RAM12中存储的图像数据中,进行生成每个像素的R(红)、G(绿)、B(蓝)的颜色成分数据(RGB数据)的RGB内插处理,从RGB数据中按每个像素生成由亮度信号(Y)和色差信号(U、V)构成的YUV数据的YUV变换处理,进一步进行自动白平衡和边缘强调等的用于提高图像质量的数字信号处理。
在设定拍摄用的模式时,RAM112中存储的YUV数据在RAM112中每存储1帧时,在控制部113中变换为视频信号后,在所述显示装置104(液晶监视器)中作为直通图像来进行画面显示。并且,在拍摄时,在RAM112中暂时存储的图像数据在信号处理部114中通过JPEG(联合图像专家组)方式进行压缩编码后,将该图像数据经外部存储控制部115作为静止图像文件记录在例如由各种存储卡构成的外部存储装置116中。
所述外部存储装置116中记录的静止图像文件在再现模式下根据用户的选择操作来适当读出,并且在信号处理部114中解压后作为YUV数据解压到RAM112中,之后通过显示控制部113由显示装置104作为静止图像加以显示。
键输入块117包含图9的菜单键102、模式拨盘103、指针键105、SET键106、快门按钮107等多个键和按钮,各键和按钮的操作状态由CPU(中央处理单元)118随时扫描。
菜单键2在显示装置4中显示菜单画面时被操作,该菜单画面显示要选择的菜单,模式拨盘3在显示装置4中显示通常拍摄模式、连拍模式、再现模式等的可选择模式时被操作。
指针键(cursor key)5是通过指针(cursor)指定在菜单选择或模式设定等时显示装置4上显示的菜单或图标等时操作的键,是印刷了四个方向的箭头的压板式的键。该指针键5中,通过按下箭头部分,可以上下或左右移动指针。SET键6是选择设定通过指针键5指针显示的项目时按下的键。还可将SET键6作为确认键使用。快门按钮7是响应于按下而生成摄像开始指示信号的键。
CPU118进行构成该摄像装置200的各部分的控制、基于摄像信号中含有的亮度信息的AE控制、基于对比度检测方式的AF控制等。用于使CPU118进行这些控制的各种程序和各种控制所需的各种数据存储在ROM(只读存储器)119中。ROM119还存储有与该摄像装置200的各种功能有关的设定标志信息等,该设定标志信息包括检测出用户进行的模式选择操作,并通过标志信息存储其结果的标志信息。
外部I/F(接口)120上连接所述USB端子连接部。
在以上结构的本实施方式中,在用户操作菜单键102而在显示装置104中显示菜单画面后,若从菜单画面选择连拍模式,操作SET键106,则设定了连拍模式。由此,CPU118根据ROM119中存储的程序,来执行图8的流程图所示的连拍模式处理。
即,CPU118判断是否按下了快门按钮107(步骤S101)。最好通过三脚架等来固定摄像装置200,若用户按下了快门按钮107,则CPU118控制相机控制部10来开始摄像元件109的曝光(步骤S102)。接着,CPU118从摄像元件109中读出伴随该曝光开始而生成的图像数据(步骤S103),并写入到存储器(RAM112)中加以保持(步骤S104)。
进一步,CPU118判断是否终止了预定的连拍幅数(例如30~60幅范围内的预定幅数)的连拍,即是否在RAM112中终止了预定幅数的图像数据的保持(步骤S105)。CPU118重复步骤S103和步骤S104的处理直到终止预定幅数的连拍。通过重复这些处理,若在RAM112中保持预定幅数的图像数据(步骤S105:是),则终止曝光(步骤S106)。
由此,成为在RAM112中保持了预定连拍幅数的图像数据的状态。这时RAM112中添加1、2、3...连续序号,来依次保存图像数据。接着,CPU118依次读出该RAM112中保持的预定连拍幅数的图像数据(步骤S107)。然后,CPU118缩小处理该读出的图像数据,并作为与用于在显示装置104上显示用的显示图像对应的缩略图数据,保存在RAM112中(步骤S108)。
进一步,CPU118判断是否终止了对在上述步骤S104中在RAM112中保持的预定连拍幅数的图像数据的缩小处理(步骤S109),重复步骤S107和步骤S108的处理,直到终止对预定幅数的图像数据的缩小处理。因此,若终止了对预定幅数的图像数据的缩小处理,而在步骤S109的判断为“是”,则成为在RAM112中保存了预定连拍幅数的缩略图数据的状态。
由此,CPU118从RAM112中读出所述缩略图数据,控制显示控制部113,并在显示装置104上基于各缩略图数据来显示连拍图像(步骤S110)。通过该步骤S110的处理,如图9所示那样,按时间序列顺序在显示装置4上显示基于各缩略图数据的连拍图像中的一部分图像P1、P2、P3、P4。
另外,CPU118在该步骤S110的显示处理时,如图9所示,还在显示装置104上显示左方向箭头401、右方向箭头402、基础图像选择按钮403、多重合成按钮404等。并且,在通过指针键105和SET键106的操作,选择了左方向箭头401时,CPU118执行使连拍图像沿左方向进行滚动显示,在选择了右方向箭头402时,执行使连拍图像向右方向滚动显示的处理。因此,通过该滚动显示,可以在由有限显示面积构成的显示装置104中,显示连拍的所有图像。
进一步,CPU118在该步骤S110的显示处理中,如图像P2所示那样,还执行使通过指针键105和SET键106的操作选择的图像变位到比其他图像P1、P3高的位置等的处理。由此,用户可以将所选的图像与其他图像相区分,可明确识别。
接着,CPU118判断是否通过用户进行了基础图像选择操作(步骤S111)。这里,所谓基础图像是指在抽出后述的差值图像时作为基准的图像,该基础图像和其他图像的差值是差值图像。所谓基础图像数据是指表示所述基础图像的图像数据,所谓差值图像数据是指表示所述差值图像的图像数据。
所谓基础图像选择操作是指在选择了显示装置104上显示的其中一个图像的状态下指定基础图像选择按钮403的操作。因此,若在用户在选择了仅由图9所示的背景构成的图像P1的状态下,指定基础图像选择按钮403,则从步骤S111进入步骤S112,而将仅由背景构成的图像P1决定作为基础图像M。
接着,为了指定对基础图像进行比较的对象的比较对象图像,而将计数值N复位为“0”(步骤S113)。进一步,增加该计数值N,并通过该增加后的计数值N+1,CPU118从RAM112中读出所述步骤S104中在RAM112中依次存储的第N+1幅的图像(步骤S114)。
其中,在从该RAM112进行图像读出时,CPU118除了步骤S112中决定的基础图像之外,还从其余图像中依次读出第N+1幅的图像。
接着,CPU118抽出该读出的第N+1幅的图像和所述基础图像M的差值图像,并将表示该差值图像的差值图像数据保存在RAM112中(步骤S115)。另外,将该抽出的差值图像粘贴在基础图像M上(步骤S116)。
进一步,判断是否终止了对所述步骤S104中在RAM112中保持的预定连拍幅数的图像(除了基础图像)的差值图像抽出和差值图像粘贴处理(步骤S117),重复步骤S114~S116的处理直到终止对预定幅数的图像数据的处理。
因此,如图9所示,通过第一次的步骤S115的处理,从所拍摄的图像P2中抽出差值图像PP2,通过第二次的步骤S115的处理,从所拍摄的图像P3中抽出差值图像PP3,通过第三次的步骤S115的处理,从所拍摄的图像P3中抽出差值图像PP3。
通过第一次的步骤S116的处理,如图10A所示,在基础图像M(所拍摄的图像P1)上粘贴差值图像PP2,通过第二次的步骤S116的处理,如图10B所示,在粘贴了差值图像PP2后的基础图像M上进一步粘贴差值图像PP3。进一步,通过第三次的步骤S116的处理,如图10C所示,在粘贴了差值图像PP2、PP3的基础图像M上进一步粘贴差值图像PP4。
由此,如图10D所示,在RAM112中生成在基础图像M(所拍摄的图像P1)上粘贴了差值图像PP2、PP3、PP4后而得到的多重合成图像MM。
然后,终止对预定幅数的图像的差值图像抽出和差值图像粘贴处理,若在步骤S117的判断为“是”,压缩多重合成图像MM的图像数据(步骤S118)。另外,缩小处理多重合成图像MM而生成作为多重合成图像MM的缩略图数据的MM缩略图数据(步骤S119)。然后,压缩处理该MM缩略图数据(步骤S120)。
接着,读出基础图像数据和差值图像数据(步骤S121),并压缩处理这些基础图像和差值图像的图像数据(步骤S122)。进一步,判断是否终止了对所述步骤S104中在RAM112中保持的预定连拍幅数的图像的图像数据压缩处理(步骤S123),重复步骤S121和步骤S122的处理直到终止对预定幅数的图像数据的所述处理。
这样,若终止了与连拍幅数对应的基础图像数据和差值图像数据的压缩处理(步骤S123→是),读出基础图像数据和差值图像数据而进行缩小处理(步骤S124)。然后,压缩处理这些基础图像缩略图数据和差值图像缩略图数据(步骤S125)。
进一步,判断是否终止了对所述步骤S104中在RAM112中保持的预定连拍幅数的图像的缩略图像数据压缩处理(步骤S126),并重复步骤S124和步骤S125的处理,直到终止对预定幅数的图像数据的所述处理。
因此,若步骤S126的判断变为“是”,终止所述处理,则在RAM112中至少分别压缩下述数据[1]~[6]来加以保存。
[1]“MM图像数据”:通过步骤S118的处理而被压缩后的多重合成图像MM的图像数据;
[2]“MM缩略图数据”:通过步骤S120的处理而被压缩后的MM缩略的图像数据;
[3]“基础图像数据”:通过步骤S122的处理而被压缩后的基础图像的图像数据;
[4]“差值图像数据”:通过步骤S122的处理而被压缩后的差值图像的图像数据;
[5]“基础图像缩略图数据”:通过步骤S125的处理而被压缩后的基础图像缩略的图像数据;
[6]“差值图像缩略图数据”:通过步骤S125的处理而被压缩后的差值图像缩略的图像数据。
并且,若步骤S126的判断为“是”,而终止了所述处理,则使用所述数据[1]~[6],生成EXIF(可交换图像文件格式)文件(步骤S127)。
通过该步骤S127的处理,如图12所示,生成由图像信息F10、图像附属信息F11、MM缩略图数据F12、MM图像数据F13、基础图像数据F20、差值图像数据(1)F21~差值图像数据(N)F2N、基础图像缩略图数据F30、差值图像缩略图数据(1)F31~差值图像缩略图数据(N)F3N构成的EXIF文件。
在构成这些EXIF文件的各数据中,图像信息F10是与MM缩略图数据F12有关的信息,是摄像信息、图像大小、图像参数等的信息。图像附属信息F11是与基础图像数据F20、差值图像数据(1)F21~差值图像数据(N)F2N、基础图像缩略图数据F30、差值图像缩略图数据(1)F31~差值图像缩略图数据(N)F3N有关的信息,是与这些有关的图像大小、各图像的地址等的信息。
之后,CPU18经外部存储控制部115,将该生成的EXIF文件写入到外部存储装置116中(步骤S128)。由于通过EXIF文件的生成和向外部存储装置116的写入,在RAM112中不需要图像数据或显示数据,所以从RAM112中删除这些图像数据、显示数据(步骤S129)后终止处理。
因此,由于在外部存储控制部115中保存了EXIF文件F,所以用户今后可以自由使用在该外部存储控制部115中保存的EXIF文件F。由此,通过将数目比从基础图像数据F20所对应的基础图像和差值图像数据(1)F21~差值图像数据(N)F2N所对应的各差值图像中任意选出的总数N少的差值图像粘贴在基础图像上,从而可生成用户能可靠把握如被摄体的运动推移这种任何变化下被摄体像连续的多重合成图像。
另外,根据对多重合成按钮404的指定操作,来再现MM图像数据F13或MM缩略图数据F12,从而用户可以通过显示装置4观赏多重合成图像。
还可使用差值图像缩略图数据(1)F31~差值图像缩略图数据(N)F3N,在显示装置4上缩略显示依次变化的被摄体,用户由此可以明确识别被摄体各自的运动。
本实施方式中,虽然记录差值图像的缩略图数据,但是也可进一步记录连拍的各图像本身的缩略图数据。由此,即使再现装置不具有根据基础图像缩略图数据和差值图像缩略图数据合成而生成缩略图数据的功能,也可根据连拍图像的缩略图数据来再现图像,由此可以提高连拍图像的利用价值。
本实施例的S118~S122中,在压缩处理MM缩略图数据后进行基础图像数据和差值图像数据的压缩处理,但是也可在进行了基础图像数据和差值图像数据的压缩处理后进行MM缩略图数据的压缩处理。

Claims (6)

1.一种摄像装置,其特征在于,包括:
摄像单元,连续拍摄被摄体;
设定单元,从通过该摄像单元连续拍摄的多个图像数据中设定一幅图像数据来作为基础图像数据;
图像处理单元,对除了通过该设定单元设定的基础图像数据之外的其他多个图像数据,进行预定的图像处理;和
记录单元,将通过该图像处理单元图像处理后的多个图像数据和通过所述设定单元设定的基础图像数据作为一个文件进行记录。
2.根据权利要求1所述的摄像装置,其特征在于,
所述图像处理单元对所述多个图像数据进行缩小处理。
3.根据权利要求1所述的摄像装置,其特征在于,
所述图像处理单元根据被设定作为所述基础图像数据的图像数据和没有被设定作为所述基础图像数据的多个图像数据,抽出差值图像数据,该差值图像数据表示被设定作为所述基础图像数据的图像数据和没有被设定作为所述基础图像数据的多个图像数据的差值。
4.根据权利要求3所述的摄像装置,其特征在于,
进一步包括生成单元,该生成单元将由所述图像处理单元抽出的差值图像数据和由所述设定单元设定的基础图像数据合成而生成一个合成图像数据;
所述记录单元将所述基础图像数据、所述合成图像数据和所述差值图像数据作为一个文件进行记录。
5.根据权利要求1所述的摄像装置,其特征在于,
进一步包括:
显示单元,显示与由所述摄像单元连续拍摄的图像数据对应的缩小图像数据;和
选择单元,选择在该显示单元上显示的所述缩小图像数据中的至少其中一个缩小图像数据;
所述设定单元将由所述摄像单元连续拍摄的所述多个图像数据中,与通过所述选择单元选出的所述缩小图像数据对应的图像数据设定作为所述基础图像数据。
6.一种图像记录方法,其特征在于,包括步骤:
摄像步骤,连续拍摄被摄体;
设定步骤,从通过该摄像步骤连续拍摄的多个图像数据中设定一幅图像数据来作为基础图像数据;
图像处理步骤,对通过所述摄像步骤连续拍摄的多个图像数据,进行预定的图像处理;和
记录步骤,将通过该图像处理步骤进行图像处理后的基础图像数据之外的多个图像数据和所述基础图像数据作为一个文件进行记录。
CN2010102439956A 2009-07-31 2010-07-30 摄像装置和图像记录方法 Expired - Fee Related CN101990060B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2009178679A JP4807446B2 (ja) 2009-07-31 2009-07-31 撮像装置、記録制御方法及びプログラム
JP2009-178679 2009-07-31
JP2010-060096 2010-03-17
JP2010060096A JP5152233B2 (ja) 2010-03-17 2010-03-17 撮像装置、撮像制御方法及びプログラム

Publications (2)

Publication Number Publication Date
CN101990060A true CN101990060A (zh) 2011-03-23
CN101990060B CN101990060B (zh) 2013-11-27

Family

ID=43526653

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010102439956A Expired - Fee Related CN101990060B (zh) 2009-07-31 2010-07-30 摄像装置和图像记录方法

Country Status (3)

Country Link
US (1) US8659680B2 (zh)
CN (1) CN101990060B (zh)
HK (1) HK1153068A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5436975B2 (ja) * 2009-08-21 2014-03-05 オリンパスイメージング株式会社 カメラ、カメラの表示制御方法、表示装置、及び表示方法
JP5377768B2 (ja) * 2010-06-30 2013-12-25 富士フイルム株式会社 画像処理方法及び装置
EP2617008A4 (en) * 2010-09-14 2014-10-29 Nokia Corp MULTI-FRAME IMAGE PROCESSING DEVICE
JP5145444B2 (ja) * 2011-06-27 2013-02-20 株式会社コナミデジタルエンタテインメント 画像処理装置、画像処理装置の制御方法、及びプログラム
JP5803467B2 (ja) * 2011-09-14 2015-11-04 株式会社リコー 画像処理装置および撮像装置、ならびに画像処理方法
TWI541785B (zh) * 2014-12-23 2016-07-11 敦泰電子股份有限公司 Lcd白平衡即時切換選擇之最佳化方法與系統

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006238311A (ja) * 2005-02-28 2006-09-07 Casio Comput Co Ltd 撮影装置及びプログラム
US20070269119A1 (en) * 2006-05-22 2007-11-22 Hewlett-Packard Development Company, L.P. Method and apparatus for composing a composite still image
CN101472119A (zh) * 2007-12-26 2009-07-01 奥林巴斯映像株式会社 图像文件生成装置、图像文件生成方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004164563A (ja) * 2002-09-26 2004-06-10 Toshiba Corp 画像解析方法、画像解析装置、画像解析プログラム
JP4068485B2 (ja) * 2002-09-30 2008-03-26 株式会社東芝 画像合成方法、画像合成装置、画像合成プログラム
JP4082318B2 (ja) * 2003-09-04 2008-04-30 カシオ計算機株式会社 撮像装置、画像処理方法及びプログラム
JP2006005452A (ja) 2004-06-15 2006-01-05 Nippon Hoso Kyokai <Nhk> 画像合成装置及び画像合成システム
JP2006345188A (ja) 2005-06-08 2006-12-21 Canon Inc 撮像装置及びその制御方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006238311A (ja) * 2005-02-28 2006-09-07 Casio Comput Co Ltd 撮影装置及びプログラム
US20070269119A1 (en) * 2006-05-22 2007-11-22 Hewlett-Packard Development Company, L.P. Method and apparatus for composing a composite still image
CN101472119A (zh) * 2007-12-26 2009-07-01 奥林巴斯映像株式会社 图像文件生成装置、图像文件生成方法

Also Published As

Publication number Publication date
CN101990060B (zh) 2013-11-27
HK1153068A1 (en) 2012-03-16
US8659680B2 (en) 2014-02-25
US20110025885A1 (en) 2011-02-03

Similar Documents

Publication Publication Date Title
US6812967B1 (en) Digital camera having multiple displays
CN100579175C (zh) 摄影装置及摄影方法
US6781629B2 (en) Digital camera and image reproducing apparatus and method
JP2001320610A (ja) 電子スチルカメラ
JP2006345296A (ja) 画像表示装置及びソート方法
CN101990060B (zh) 摄像装置和图像记录方法
JP4725854B2 (ja) 画像表示装置及び画像表示方法
JP2004215157A (ja) 撮像装置、およびプログラム
US20050212943A1 (en) Digital camera
JP4041407B2 (ja) デジタルカメラ
JP2007325152A (ja) 撮像装置及びそのプログラム
JP4678273B2 (ja) 撮像装置、動画記憶方法および動画記憶プログラム
US20050162520A1 (en) Digital camera and method of controlling the same
JP5195317B2 (ja) カメラ装置、及び撮影方法、撮影制御プログラム
JP4655660B2 (ja) デジタルカメラ、動画編集方法、及びプログラム
JP5151947B2 (ja) 撮影装置及びそのプログラム
CN101267502A (zh) 成像装置以及图像数据记录方法
JP4375540B2 (ja) 撮影装置及びそのプログラム
JP2006287377A (ja) 画像記憶装置、画像記憶方法および画像記憶プログラム
JP5916984B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP3551268B2 (ja) フイルム画像入力方法
JP4807446B2 (ja) 撮像装置、記録制御方法及びプログラム
JP2000299800A (ja) 撮像方法及び装置並びに記憶媒体
JP5621834B2 (ja) 記録制御装置、記録制御方法及びプログラム
JP2007213231A (ja) 画像処理装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1153068

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1153068

Country of ref document: HK

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20131127

Termination date: 20210730

CF01 Termination of patent right due to non-payment of annual fee