CN103179346A - 数字图像处理设备及其控制方法 - Google Patents
数字图像处理设备及其控制方法 Download PDFInfo
- Publication number
- CN103179346A CN103179346A CN2012105680411A CN201210568041A CN103179346A CN 103179346 A CN103179346 A CN 103179346A CN 2012105680411 A CN2012105680411 A CN 2012105680411A CN 201210568041 A CN201210568041 A CN 201210568041A CN 103179346 A CN103179346 A CN 103179346A
- Authority
- CN
- China
- Prior art keywords
- image
- edit tool
- processing apparatus
- image processing
- effect
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 73
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000000694 effects Effects 0.000 claims abstract description 56
- 230000033001 locomotion Effects 0.000 claims abstract description 37
- 238000004519 manufacturing process Methods 0.000 claims description 9
- 239000000284 extract Substances 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 11
- 238000003384 imaging method Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 7
- 238000010422 painting Methods 0.000 description 7
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 230000006837 decompression Effects 0.000 description 3
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000001052 transient effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010428 oil painting Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 239000003610 charcoal Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种数字图像处理设备和一种控制数字图像处理设备的方法。所述数字图像处理设备包括:显示单元,显示图像;工具产生单元,产生将图像编辑效果应用于显示的图像的编辑工具;效果产生单元,根据编辑工具的移动产生图像编辑效果;内容产生单元,产生包括图像编辑效果的产生过程和编辑工具的移动的运动图像。
Description
本申请要求于2011年12月23日在韩国知识产权局提交的第10-2011-0141730号韩国专利申请的优先权权益,该申请通过引用全部包含于此。
技术领域
本发明涉及一种数字图像处理设备以及一种控制该数字图像处理设备的方法。
背景技术
由于诸如数字照相机或摄像机的数字图像处理设备的小型化以及例如电池的技术发展,所以数字图像处理设备易于携带,因此,数字图像处理设备可容易地在任何地方捕获图像。另外,数字图像处理设备提供即使是外行也能够容易地捕获图像的各种功能。
另外,数字图像处理设备提供了各种功能,例如,在图像捕获期间或在图像捕获之后编辑捕获的图像的功能,从而用户可容易地获得期望的图像。
发明内容
本发明提供了一种产生与静止图像相关的运动图像的数字图像处理设备。
本发明还提供了一种控制数字图像处理设备的方法。
根据本发明的一方面,提供了一种数字图像处理设备,所述数字图像处理设备包括:显示单元,显示图像;工具产生单元,产生将图像编辑效果应用于显示的图像的编辑工具;效果产生单元,根据编辑工具的移动产生图像编辑效果;内容产生单元,产生包括图像编辑效果的产生过程和编辑工具的移动的运动图像。
显示的图像和运动图像可存储在单个文件中。
内容产生单元可把将显示的图像与运动图像相关联的信息记录在单个文件的可交换图像文件格式(EXIF)区域中。
显示的图像和运动图像可存储在单独的文件中。
所述图像可以是在静止图像捕获之后暂时显示在显示单元上的快速浏览图像。
可在由于静止图像捕获而执行图像信号处理的期间,在显示单元上显示编辑工具。
所述图像可以是从存储的图像再现的图像。
所述数字图像处理设备还可包括移动编辑工具的操作单元。
操作单元可包括触摸面板。
操作单元可包括输入键。
编辑工具可包括水彩画笔刷、油画笔刷和铅笔中的至少一个。
工具产生单元可根据用户的操作信号产生编辑工具,然后可显示编辑工具。
工具产生单元可显示从显示的编辑工具中选择的编辑工具,并且效果产生单元可产生选择的编辑工具的固有图像编辑效果。
根据本发明的另一方面,提供了一种控制数字图像处理设备的方法,所述方法包括:显示图像;显示用于产生图像编辑效果的编辑工具;根据编辑工具的移动显示图像编辑效果;产生包括图像编辑效果的产生过程和编辑工具的移动的运动图像。
显示编辑工具的步骤可包括:根据用户的操作信号产生编辑工具,然后显示编辑工具;显示从显示的编辑工具中选择的编辑工具。
显示图像编辑效果的步骤可包括:产生选择的编辑工具的固有的图像编辑效果。
所述方法还可包括:将显示的图像和运动图像存储在单独的文件中。
所述方法还可包括:将显示的图像和运动图像存储在单个文件中。
所述方法还可包括:捕获静止图像,其中,显示图像的步骤包括显示快速浏览图像,快速浏览图像在捕获静止图像之后暂时显示在显示单元上。
所述方法还可包括提取存储的图像,其中,显示图像步骤包括显示提取的图像。
根据本发明的另一方面,提供了一种数字图像处理设备,所述数字图像处理设备包括:存储单元,存储静止图像和与静止图像相关的运动图像;显示单元,显示存储的静止图像和运动图像;控制单元,控制显示单元,其中,运动图像包括针对静止图像由用户产生的图像编辑效果的产生过程以及产生图像编辑效果的编辑工具的移动。
静止图像或运动图像可被选择性地再现。
当再现静止图像时,可首先再现运动图像,并且可在完成运动图像的再现之后,再现静止图像。
存储单元可将静止图像和运动图像存储为单个文件。
在再现静止图像的期间,可显示执行运动图像的再现的用户接口。
存储单元可将静止图像和运动图像存储为单独的文件。
数字图像处理设备还可包括内容产生单元,当再现运动图像时,内容产生单元通过根据捕获信号捕获运动图像的帧来产生另一静止图像。
根据本发明的另一方面,提供了一种控制数字图像处理设备的方法,所述数字图像处理设备存储静止图像和与静止图像有关的运动图像,所述方法包括:当再现运动图像时,再现用户产生的图像编辑效果的产生过程和产生图像编辑效果的编辑工具的移动。
静止图像或运动图像可被选择性地再现。
在再现静止图像的期间,可显示执行运动图像的再现的用户接口。
当再现静止图像时,可首先再现运动图像,并可在完成运动图像的再现之后,再现静止图像。
当再现运动图像时,可通过根据捕获信号捕获运动图像的帧来产生另一静止图像。
附图说明
在参照附图阅读本发明的详细的示例性实施例时,本发明的上述和其它特点和优点将变得更清楚,在附图中:
图1是根据本发明实施例的数字图像处理设备的框图;
图2是根据本发明实施例的图1中的中央处理单元(CPU)的框图;
图3和图4是示出根据本发明实施例的控制数字图像处理设备的方法的流程图;
图5A、图5B、图6A、图6B、图7A和图7B是示出根据本发明实施例的图像编辑模式的图像;
图8是示出根据本发明另一实施例的控制数字图像处理设备的方法的流程图;
图9是示出根据本发明另一实施例的控制数字图像处理设备的方法的流程图;
图10是示出根据本发明实施例的数字图像处理设备的再现模式的图像;
图11是示出根据本发明另一实施例的数字图像处理设备的再现模式的图像;
图12是示出根据本发明另一实施例的数字图像处理设备的再现模式的图像;
图13是示出根据本发明另一实施例的控制数字图像处理设备的方法的流程图。
具体实施方式
在下文中,将参照附图更充分地描述本发明,在附图中示出了本发明的示例性实施例。然而,可以以很多不同的形式实施本发明,并且本发明不应被解释为限于在此阐述的实施例;相反,提供这些实施例,使得本公开将是彻底的和完整的,并将把本发明的构思充分地传达给本领域的技术人员。在附图中,相同的标号表示相同的元件。
如这里所使用的,术语“和/或”包括一个或多个相关所列项目的任意一个和全部组合。当诸如“…中的至少一个”的表述位于一列元件之后时,其修饰整列元件而不是修饰列出的单个元件。
这里使用的术语仅出于描述特定实施例的目的,而不意在限制示例实施例。如这里所使用的,除非上下文清楚地指示,否则单数形式也意在包括复数形式。将进一步理解的是,当在说明书中使用术语“包括”时,说明存在所述特征、整体、步骤、操作、元件和/或组件,但不排除存在或添加一个或多个其它特征、整体、步骤、操作、元件、组件和/或它们的组合。
在下文中,将通过参照附图解释本发明的示例性实施例来详细描述本发明。附图中相同的标号表示相同的元件,并将省略相同的元件的详细描述。
图1是根据本发明实施例的数字图像处理设备1的框图。图2是根据本发明实施例的图1中的中央处理单元(CPU)106的框图。
参照图1,数字图像处理设备1包括成像透镜101、透镜驱动单元103、透镜位置检测单元104、透镜控制单元105、CPU106、成像装置控制单元107、成像装置108、模拟信号处理器109、模拟/数字(A/D)转换器110、图像输入控制器111、数字信号处理器(DSP)112、压缩/解压缩单元113、显示控制器114、显示单元115、自动白平衡(AWB)检测单元116、自动曝光(AE)检测单元117、自动对焦(AF)检测单元118、随机存取存储器(RAM)119、存储器控制器120、存储卡121、电可擦除可编程只读存储器(EEPROM)122、操作单元123、发光控制单元124和发光设备125。
成像透镜101包括聚焦透镜102,并可执行通过驱动聚焦透镜102控制焦点的功能。
透镜驱动单元103在透镜控制单元105的控制下驱动聚焦透镜102,并且透镜位置检测单元104检测聚焦透镜102的位置并将检测结果发送到透镜控制单元105。
透镜控制单元105控制透镜驱动单元103的操作,并从透镜位置检测单元104接收位置信息。另外,透镜控制单元105与CPU106进行通信,并将关于焦点检测的信息发送到CPU106或者从CPU106接收关于焦点检测的信息。
CPU106控制数字图像处理设备1的全部操作。参照图2,CPU106包括控制单元200、工具产生单元201、效果产生单元202和内容产生单元203。
控制单元200控制CPU106的内部元件和外部元件的操作。控制单元200可控制显示控制器114在显示单元115上显示各种图像。例如,在拍摄模式下,控制单元200控制显示控制器114显示实时取景图像、快速浏览图像等。另外,在再现模式下,控制单元200控制显示控制器114再现由用户选择的图像。
工具产生单元201产生关于图像编辑效果的编辑工具。例如,编辑工具可包括水彩画笔刷、油画笔刷、铅笔等。另外,编辑工具可包括诸如刀具、凿子、彩色铅笔、炭笔、粉笔(pastel pencil)、蜡笔(conte crayon)、东方绘画笔刷(oriental painting brush)等的各种艺术工具。
效果产生单元202根据由工具产生单元201产生的编辑工具的移动产生各种图像编辑效果。例如,在产生铅笔作为编辑工具并在显示单元115上显示铅笔的情况下,当用户进行操作来移动铅笔时,根据铅笔的移动产生一条线。也就是说,效果产生单元202根据产生的编辑工具的移动使产生的编辑工具的固有效果显示在显示单元115上。
内容产生单元203产生与产生的编辑工具以及由于产生的编辑工具的移动而产生的图像编辑效果相关的内容。产生的内容是包括由用户操作的编辑工具的移动的运动图像,并且所述运动图像包括根据编辑工具的移动产生图像编辑效果的过程。
当再现产生的运动图像时,如果用户施加图像捕获信号,则当施加图像捕获信号时,内容产生单元203通过捕获帧图像来产生静止图像。
内容产生单元203可产生包括静止图像和从静止图像产生的运动图像的单个文件,然后可存储该单个文件。内容产生单元203可将把静止图像与运动图像相关联的信息记录在该单个文件的可交换图像文件格式(EXIF)区域中。例如,内容产生单元203可将把静止图像与运动图像相关联的信息记录在EXIF区域中的用户可任意记录内容的制造商注释区域(maker note area)中。
另外,内容产生单元203可将静止图像和从静止图像产生的运动图像产生为单独的文件,然后可存储单独的文件。
参照图1,成像装置控制单元107产生时序信号并将时序信号施加到成像装置108,因而控制成像装置108的成像操作。另外,当在成像装置108的每条扫描线中电荷的积累完成时,成像装置控制单元107控制成像装置108顺序地读取图像信号。
成像装置108捕获已经经过成像透镜101的对象的图像光,以产生图像信号。成像装置108可包括以矩阵形式布置的多个光电转换装置、用于从光电转换装置传输电荷的电荷传输路径等。
模拟信号处理器109从由成像装置108产生的图像信号中去除噪声或者将该图像信号的大小放大到任意等级。A/D转换器110将从模拟信号处理器109输出的模拟图像信号转换成数字图像信号。图像输入控制器111对从A/D转换器110输出的图像信号进行处理,从而可在每个后续的组件中对图像信号执行图像处理。
AWB检测单元116、AE检测单元117和AF检测单元118分别对从图像输入控制器111输出的图像信号执行AWB处理、AE处理和AF处理。
可将从图像输入控制器111输出的图像信号暂时存储在包括同步动态随机存取存储器(SDRAM)等的RAM119中。
DSP112对从图像输入控制器111输出的图像信号执行一系列图像信号处理操作(诸如伽马校正),以产生在显示单元115上可显示的实时取景图像或捕获的图像。另外,DSP112可根据由AWB检测单元116检测的白平衡增益执行捕获的图像的白平衡调整。也就是说,DSP112和AWB检测单元116可以是白平衡控制单元的示例。
压缩/解压缩单元113对已经执行图像信号处理的图像信号执行压缩或解压缩。关于压缩,以例如JPEG压缩格式或H.264压缩格式压缩图像信号。包括通过压缩处理产生的图像数据的图像文件被传输到存储器控制器120,并且存储器控制器120将图像文件存储在存储卡121中。
显示控制器114进行控制,使得显示单元115输出图像。显示单元115显示各种图像(诸如,捕获的图像、实时取景图像和快速浏览图像)及各种设置信息等,其中,在图像捕获后暂时显示所述快速浏览图像。显示单元115和显示控制器114可分别包括液晶显示器(LCD)和LCD驱动器。然而,本发明不限于此,显示单元115和显示控制器114可分别包括例如有机发光二极管(OLED)显示器和它的驱动单元。
RAM119可包括视频RAM(VRAM),VRAM暂时存储将显示在显示单元115上的诸如图像的信息。
存储器控制器120控制输入到存储卡121中的数据和从存储卡121输出的数据。
存储卡121可存储包括静止图像或运动图像的文件。存储卡121可根据内容产生单元230的内容产生方法将静止图像和与静止图像相关的运动图像存储为单个文件或单独的文件。
EEPROM122可存储用于控制数字图像处理设备1的执行程序或管理信息。
操作单元123是用户输入用于操作数字图像处理设备1的各种命令的单元。操作单元123可包括各种输入键,诸如快门释放按钮、主开关、模式转盘、菜单按钮、四个方向按钮、滚轮按钮(jog dial)等。另外,操作单元123可感测用户的触摸,并可包括用于根据触摸产生命令的触摸面板。当工具产生单元201产生编辑工具并且编辑工具显示在显示单元115上时,操作单元123可根据用户的操作移动显示的编辑工具。
发光控制单元124是用于驱动发光设备125以照亮拍摄辅助光或AF辅助光的电路。
发光设备125是用于发出在AF驱动或拍摄期间必需的辅助光的设备。发光设备125在发光控制单元124的控制下在拍摄或AF驱动期间将光照射到对象。
虽然在当前的实施例中CPU106包括控制单元200、工具产生单元201、效果产生单元202和内容产生单元203,但是本发明不限于此。例如,DSP112可包括工具产生单元201或效果产生单元202,压缩/解压缩单元113可包括内容产生单元203。
在下文中,解释控制数字图像处理设备1的各种方法。
图3和图4是示出根据本发明实施例的控制数字图像处理设备1的方法的流程图。图5A、图5B、图6A、图6B、图7A和图7B是示出根据本发明实施例的图像编辑模式的图像。
图3中的实施例涉及在拍摄模式下捕获静止图像并且在图像信号处理的过程中针对快速浏览图像执行图像编辑模式的情况。
参照图3,在数字图像处理设备1是拍摄设备的情况下,当启动拍摄模式时,显示实时取景图像(操作S300至S301)。确定用户是否已经施加了用于捕获图像的捕获信号(操作S302)。如果还没有施加捕获信号,则连续显示实时取景图像,并且保持用于图像捕获的待机状态。
否则,如果已经施加了捕获信号,则在执行必要的调整(诸如焦点调整和曝光调整)之后捕获图像(操作S303)。然后,对捕获的图像执行图像信号处理(操作S304)。
在图像信号处理期间产生快速浏览图像,并随后显示快速浏览图像(操作S305),在完成图像信号处理之前确定是否执行(例如,初始化或进入)图像编辑模式(操作S306)。在确定不执行图像编辑模式的情况下,当完成图像信号处理时,存储已经完成图像信号处理的捕获的静止图像(操作S307)。
另一方面,在确定执行图像编辑模式的情况下,拍摄设备进入图像编辑模式。也就是说,可在捕获图像并随后执行图像处理的同时(即,在完成图像信号处理之前)执行图像编辑模式。
在下文中,更详细地解释图3中示出的控制数字图像处理设备1的方法。
参照图5A,数字图像处理设备1显示实时取景图像的画面500。画面500的左下角上的图标510是菜单图标“菜单”,当用户选择菜单图标510时,显示在拍摄模式下可选择的各种菜单。画面500的右下角上的图标511是图像图标“图像”,当用户选择图像图标511时,可再现存储的图像。
当用户在如图5A中的左图像的状态下执行图像编辑模式时,显示示出用户可选择的编辑工具的画面501。画面501的左上角上的图标512是图像编辑模式图标“艺术笔刷”,图像编辑模式图标“艺术笔刷”表示正执行图像编辑模式。
可用的编辑工具(即,用户可选择的编辑工具)显示在画面501的中心部分。素描编辑工具(素描)520、油画编辑工具(油画)521和水彩画编辑工具(水彩画)522可以以框的形状被示出为编辑工具。用户选择的编辑工具可用粗线表示,而用户未选择的编辑工具可用细线表示。然而,这仅是个示例,可改变编辑工具的框的颜色和形状,以区分选择的编辑工具和未选择的编辑工具。
参照图5B,数字图像处理设备1显示实时取景图像的画面500。当用户执行图像编辑模式时,显示示出可用的编辑工具(即,用户可选择的编辑工具)的画面502。在当前的实施例中,可在画面502的中心部分示出铅笔530、油画笔刷531和水彩画笔刷532作为用户可选择的编辑工具。另外,可显示用于表示已选择哪一个编辑工具的区别标记。
如上所述,当在拍摄模式下显示实时取景图像时,用户可执行图像编辑模式,然后可选择特定的编辑工具。可在捕获图像之前执行图像编辑模式的运行,或者可在已经捕获图像之后执行图像编辑模式的运行。
参照图4,如果进入图像编辑模式,则显示编辑工具(操作S400),并确定用户是否已经选择特定的编辑工具(操作S401)。然而,如上述解释,可在捕获图像之前执行操作S400和S401。
当用户选择编辑工具时,在显示快速浏览图像时,产生并显示选择的编辑工具(操作S402)。然后,根据用户的操作来移动产生的编辑工具(操作S403)。
当移动产生的编辑工具时,根据产生的编辑工具的移动产生其固有的图像编辑效果(操作S404)。然后,显示产生的图像编辑效果(操作S405)。例如,图像编辑效果可以是铅笔绘制的线的形状或油画笔刷、水彩画笔刷等涂画的颜色的形状。也就是说,图像编辑效果不是静态的效果,而是根据编辑工具的移动实时改变的效果。
接下来,确定是否已经完成图像编辑(操作S406)。当确定仍未完成图像编辑时,重复操作S403至S405。另一方面,当确定已经完成图像编辑时,产生与图像编辑相关的运动图像(操作S407)。也就是说,产生根据编辑工具的移动而产生的图像编辑效果的实时变化过程作为运动图像。产生的运动图像包括编辑工具的移动以及图像的变化的形状。
当产生运动图像时,可将捕获的图像和运动图像存储在单个文件或单独的文件中(操作S408)。
在下文中,更详细地解释图4中示出的控制数字图像处理设备1的方法。
参照图6A,当用户执行图像编辑模式并选择铅笔530作为编辑工具时,如画面600,显示铅笔530和快速浏览图像。
参照图6B,当用户执行图像编辑模式并选择水彩画笔刷532作为编辑工具时,如画面601,显示水彩画笔刷532和快速浏览图像。
参照图7A,当铅笔530被选择为编辑工具时,如在画面700至画面702中所示,通过用户的操作移动铅笔530,产生根据铅笔530的移动绘制线的图像编辑效果,并随后显示所述图像编辑效果。
参照图7B,当水彩画笔刷532被选择为编辑工具时,如画面710至画面712所示,通过用户的操作移动水彩画笔刷532,产生根据水彩画笔刷532的移动绘制线的图像编辑效果,并随后显示所述图像编辑效果。
如图7A和图7B中所示,内容产生单元203产生包括编辑工具的移动以及由于编辑工具的移动而产生的图像编辑效果的运动图像。
虽然在图7A和图7B中示出仅使用单个编辑工具的情况,但本发明不限于此。例如,当通过使用铅笔530产生图像编辑效果时,可通过用户的操作将编辑工具从铅笔530改变为油画笔刷531,从而产生新的图像编辑效果。
图8是示出根据本发明的另一实施例的控制数字图像处理设备1的方法的流程图。图8中的实施例涉及在再现模式下静止图像的再现以及之后图像编辑模式的执行。
参照图8,启动再现模式(操作S801),提取用户选择的图像,然后显示该图像(操作S802)。
接下来,确定是否执行(即,初始化)图像编辑模式(操作S803)。如果确定还未执行图像编辑模式,则执行根据用户的操作的操作(操作S804)。例如,可执行再现图像的放大或缩小、再现图像的改变或再现模式的结束。
另一方面,如果确定执行图像编辑模式,则执行参照图4解释的图像编辑模式。
如上所述,在数字图像处理设备1以及控制数字图像处理设备1的方法中,用户可直接对先前存储的图像或新捕获的图像执行图像编辑,可作为新的内容产生包括编辑工具的移动以及由于图像编辑而导致的图像编辑效果的产生过程的运动图像。因此,可满足对于产生新且独特的内容的用户的期望。
图9是示出根据本发明另一实施例的控制数字图像处理设备1的方法的流程图。图10至图12是示出根据本发明实施例的数字图像处理设备1的再现模式的图像。
图9中的实施例涉及在通过如针对图4所解释的图像编辑模式已经将静止图像和与静止图像有关的运动图像存储在单个文件或单独的文件中时静止图像或运动图像的再现。在当前的实施例中,为了便于解释,排除了选择普通的静止图像和普通运动图像的情况。
参照图9,公开了静止图像和运动图像已经被存储为单独的文件的情况。首先,启动再现模式(操作S901),并确定用户是否已经将静止图像选择为再现图像(操作S902)。
如果已经将静止图像选择为再现图像,则显示选择的静止图像(操作S903)。然后,确定是否已经施加图像改变信号(操作S904),如果已经施加图像改变信号,则改变再现图像(操作S905)。由于此时正再现静止图像,所以可执行如参照图4和图8解释的图像编辑模式。
否则,在操作S902,如果还没将静止图像选择为再现图像,则确定是否已经将运动图像选择为再现图像(操作S906)。如果已经选择运动图像,则显示选择的运动图像的代表性图像(操作S907)。然后,确定是否已经施加再现信号(操作S908),并且当施加再现信号时,再现运动图像(操作S909)。然而,可省略操作S907和S908,并且当在操作S906选择运动图像时,可直接再现运动图像。
如果已经再现运动图像,则确定用户是否已经施加捕获信号(操作S910)。如果还没施加捕获信号,则确定是否已经完成运动图像的再现(操作S913)。如果没有完成运动图像的再现,则再次启动操作S910。否则,如果完成运动图像的再现,则结束所有过程。
另一方面,当施加捕获信号时,捕获运动图像的帧(操作S911),并存储捕获的静止图像(操作S912)。可将捕获的静止图像存储在与现有的静止图像或运动图像的文件不同的文件中,或者可将捕获的静止图像存储在与现有的静止图像或运动图像的文件相同的文件中。
接下来,确定是否已经完成运动图像的再现(操作S913)。如果没有完成运动图像的再现,则再次启动操作S910。否则,如果完成运动图像的再现,则结束所有过程。
参照图10,示出了再现静止图像的画面1000。在再现模式下,显示用户从存储的图像中选择的图像。在再现模式下,可在画面1000的左上方按顺序显示指示再现模式的再现模式图标1010、用于文件删除的删除图标(删除)1011、用于自动浏览再现图像的幻灯片图标(幻灯片)1012以及用于同时显示多个缩略图图像的缩略图图标1013。
参照图11,示出了可选择运动图像的画面1100。当选择运动图像时,可显示与选择的运动图像相关的代表性图像。在画面1100的中心部分中,可产生用于再现运动图像的再现图标“播放”,随后显示用于再现运动图像的再现图标“播放”。在画面1100的一侧中,可显示表示运动图像的再现状态的状态条1014。
参照图12,依次示出再现选择的图像的画面。当再现运动图像时,可产生用于结束运动图像的再现的结束图标(返回)1015,然后显示结束图标(返回)1015,并且可产生用于使运动图像的再现暂停的暂停图标1016,然后显示暂停图标1016。
当在运动图像的再现期间施加图像捕获信号时,可捕获施加图像捕获信号时的帧图像,然后将该帧图像存储在单独的文件中或存储在现有的静止图像文件或运动图像文件中。
图13是示出根据本发明另一实施例的控制数字图像处理设备1的方法的流程图。
参照图13,公开了一种已将静止图像和运动图像存储在单个文件中的情况。启动再现模式(操作S1301),用户选择文件(操作S1302),然后确定选择的文件是否包括包含图像编辑效果的运动图像(操作S1303)。如果选择的文件不包括包含图像编辑效果的运动图像,则显示普通文件(即,静止图像或运动图像)(操作S1304)。
否则,如果选择的文件包括包含图像编辑效果的运动图像,则首先显示包括在该文件中的静止图像(操作S1305)。可显示静止图像和能够再现运动图像的再现图标。
确定是否施加了运动图像再现信号(操作S1306),并且当选择再现图标并施加运动图像再现信号时,再现与正再现的静止图像一起存储的运动图像(操作S1307)。如果没施加运动图像再现信号,则仅执行根据用户操作的操作。例如,可再现另一文件,或者可结束再现模式。
当再现运动图像时,在操作S1308至S1311,可执行与图9中的操作S910至S913相同的操作。这时,可将新捕获并产生的静止图像插入到现有的文件中,然后将所述静止图像存储在现有的文件中。
在当前的实施例中,如上所述,在静止图像和运动图像在单个文件中的情况下,当选择所述单个文件时,首先再现静止图像,并且根据用户的操作再现运动图像。然而,这是个示例性情况,并且本发明不限于此。例如,当选择特定的文件时,首先再现运动图像,并在运动图像的再现结束之后可再现静止图像。
如上所述,在数字图像处理设备1和控制数字图像处理设备1的方法中,用户可直接对先前存储的图像或新捕获的图像执行图像编辑,并且可作为新的内容产生包括编辑工具的移动以及由于图像编辑而导致的图像编辑效果的产生过程的运动图像。因此,能够满足对于产生新的且独特的内容的用户的期望。
这里公开的实施例可包括用于存储程序数据的存储器、用于执行程序数据以实现这里公开的方法和设备的处理器、诸如盘驱动器的永久性存储器、用于处理与其它装置的通信的通信端口以及用户接口装置(诸如显示器、键盘、鼠标等)。当包括软件模块时,这些软件模块可作为处理器可执行的程序指令或计算机可读代码存储在非暂时性或有形的计算机可读介质上,所述非暂时性或有形的计算机可读介质包括:只读存储器(ROM)、随机存取存储器(RAM)、致密盘(CD)、数字多功能盘(DVD)、磁带、软盘、光数据存储装置、电子存储介质(例如,集成电路(IC)、电可擦可编程只读存储器(EEPROM)、闪存等)、量子存储装置、缓存和/或可将信息存储任意持续时间(例如,针对较长的时间段,永久地、针对短暂的情况,暂时缓冲、缓存等)的任何其它存储介质。如这里所使用的,计算机可读存储介质明确地排除可传播信号的任何计算机可读介质。然而,计算机可读存储介质可包括内部信号轨迹和/或在载有电信号的内部信号路径。
在此引用的包括公布、专利申请和专利的所有文献通过引用的方式被包含于此,其公开程度如同每个参考文献被单独且特别指示为通过引用被包含于此并且在此被完全阐述一样。
为了促进本公开的原理的理解的目的,已经对附图中示出的实施例做出了说明,并且已经使用专用语言来描述这些实施例。然而,这些专用语言并不意在限制本公开的范围,并且鉴于本公开,本公开将被解释为包含对于本领域的普通技术人员来说将通常发生的所有实施例。
可以以功能块组件和各种处理步骤的形式来描述公开的实施例。这种功能块可通过任意数量的被配置为执行特定功能的硬件组件和/或软件组件来实现。例如,实施例可采用可在一个或多个处理器或其他控制装置的控制下执行各种功能的各种集成电路组件(例如,存储器元件、处理元件、逻辑元件、查找表等)。类似地,在使用软件编程或软件元件实现实施例的元件的情况下,可使用数据结构、对象、过程、例程和其它编程元件的任意组合以任何编程或脚本语言(诸如C、C++、Java、汇编等)实现实施例。功能方面可实现为由一个或多个处理器执行的指令。此外,实施例可采用用于电子配置、信号处理、控制和数据处理等任意数量的常规技术。词语“机制”和“元件”被广泛使用,并不限于机械或物理实施例,但可包括与处理器结合的软件例程等。
这里示出和描述的具体实施方式是本发明的说明性示例,并不意在以任何方式限制本发明的范围。此外,在呈现的各种图中示出的连接线或连接器意在表示各种元件之间的示例性的功能关系和/或物理或逻辑连接。应该注意的是,很多可替代或补充的功能关系、物理连接或逻辑连接可存在于实际装置中。而且,除非元件被特别描述为“基本的”或“重要的”,否则没有项目或组件是实现本发明所必需的。
单数术语的以及在描述本发明的上下文中(尤其在权利要求的上下文中)的相似描述的使用被解释为涵盖单数和复数。此外,除非在这里另有所指,否则这里对值的范围的列举仅在于用作逐个指示落在所述范围内的每个单一值的快捷方法,并且每个单一值被并入到说明书中,如同所述单一值被分别列举于此。最后,除非这里另有所指或明显违背上下文,否则在此描述的所有方法的步骤可以以任意适合的顺序被执行。本发明不限于步骤的所描述的顺序。除非另有声明,否则在此提供的任何和所有示例或者示例性语言(例如,“诸如”)的使用仅意在更好地示出本发明,而不是限制本发明的范围。在不脱离本公开的精神和范围的情况下,很多修改和调整对本领域技术人员来说将是易于理解的。
Claims (15)
1.一种数字图像处理设备,所述数字图像处理设备包括:
显示单元,显示图像;
工具产生单元,产生将图像编辑效果应用于显示的图像的编辑工具;
效果产生单元,根据编辑工具的移动产生图像编辑效果;
内容产生单元,产生包括图像编辑效果的产生过程和编辑工具的移动的运动图像。
2.根据权利要求1所述的数字图像处理设备,其中,显示的图像和运动图像存储在单个文件中。
3.根据权利要求2所述的数字图像处理设备,其中,内容产生单元把将显示的图像与运动图像相关联的信息记录在单个文件的可交换图像文件格式EXIF区域中。
4.根据权利要求1所述的数字图像处理设备,其中,显示的图像和运动图像存储在单独的文件中。
5.根据权利要求1所述的数字图像处理设备,其中,所述图像是在静止图像捕获之后暂时显示在显示单元上的快速浏览图像。
6.根据权利要求5所述的数字图像处理设备,其中,在由于静止图像捕获而执行图像信号处理的期间,在显示单元上显示编辑工具。
7.根据权利要求1所述的数字图像处理设备,其中,所述图像是从存储的图像再现的图像。
8.根据权利要求1所述的数字图像处理设备,所述数字图像处理设备还包括移动编辑工具的操作单元。
9.一种控制数字图像处理设备的方法,所述方法包括以下步骤:
显示图像;
显示用于产生图像编辑效果的编辑工具;
根据编辑工具的移动显示图像编辑效果;
产生包括图像编辑效果的产生过程和编辑工具的移动的运动图像。
10.根据权利要求9所述的方法,其中,显示编辑工具的步骤包括:
根据用户的操作信号产生编辑工具;
显示编辑工具;
显示从显示的编辑工具中选择的编辑工具。
11.根据权利要求10所述的方法,其中,显示图像编辑效果的步骤包括产生选择的编辑工具的固有的图像编辑效果。
12.根据权利要求9所述的方法,所述方法还包括将显示的图像和运动图像存储在单独的文件中。
13.根据权利要求9所述的方法,所述方法还包括将显示的图像和运动图像存储在单个文件中。
14.根据权利要求9所述的方法,所述方法还包括捕获静止图像,
其中,显示图像的步骤包括显示快速浏览图像,快速浏览图像在捕获静止图像之后暂时显示在显示单元上。
15.根据权利要求9所述的方法,所述方法还包括提取存储的图像,
其中,显示图像的步骤包括显示提取的图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2011-0141730 | 2011-12-23 | ||
KR1020110141730A KR102013239B1 (ko) | 2011-12-23 | 2011-12-23 | 디지털 영상 처리장치, 및 그 제어방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103179346A true CN103179346A (zh) | 2013-06-26 |
CN103179346B CN103179346B (zh) | 2018-05-22 |
Family
ID=48638941
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210568041.1A Expired - Fee Related CN103179346B (zh) | 2011-12-23 | 2012-12-24 | 数字图像处理设备及其控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20130167086A1 (zh) |
KR (1) | KR102013239B1 (zh) |
CN (1) | CN103179346B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140132917A (ko) * | 2013-05-09 | 2014-11-19 | 삼성전자주식회사 | 휴대 전자기기와 연결 가능한 부가 장치를 통한 표시 방법 및 장치 |
WO2018222247A1 (en) * | 2017-06-02 | 2018-12-06 | Apple Inc. | Device, method, and graphical user interface for annotating content |
US12061645B2 (en) * | 2019-05-03 | 2024-08-13 | Grace Lew | Method for creating an album by auto populating in real time by an application and system thereof |
US11947791B2 (en) | 2019-05-06 | 2024-04-02 | Apple Inc. | Devices, methods, and systems for manipulating user interfaces |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1543741A (zh) * | 2001-04-09 | 2004-11-03 | 欧姆龙株式会社 | 图像打印装置和图像打印方法 |
JP2005210689A (ja) * | 2003-12-25 | 2005-08-04 | Fuji Photo Film Co Ltd | 画像編集装置および方法並びにプログラム |
CN1913683A (zh) * | 2005-08-12 | 2007-02-14 | Lg电子株式会社 | 具有编辑所捕获图象的功能的带双显示单元的移动通信终端及其方法 |
KR20090058305A (ko) * | 2007-12-04 | 2009-06-09 | 삼성전자주식회사 | 동영상 촬영 편집 장치 및 방법 |
WO2010044576A2 (en) * | 2008-10-13 | 2010-04-22 | Samsung Electronics Co., Ltd. | Object management method and apparatus using touchscreen |
Family Cites Families (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5309555A (en) * | 1990-05-15 | 1994-05-03 | International Business Machines Corporation | Realtime communication of hand drawn images in a multiprogramming window environment |
JPH0520044A (ja) * | 1991-07-15 | 1993-01-29 | Personal Joho Kankyo Kyokai | ユーザインタフエース装置 |
US5325110A (en) * | 1991-12-30 | 1994-06-28 | Xerox Corporation | Multi-control point tool for computer drawing programs |
US7185054B1 (en) * | 1993-10-01 | 2007-02-27 | Collaboration Properties, Inc. | Participant display and selection in video conference calls |
JPH1186016A (ja) * | 1997-09-09 | 1999-03-30 | Canon Inc | 情報処理方法及び装置及びその記憶媒体 |
US20070132860A1 (en) * | 2000-04-14 | 2007-06-14 | Prabhu Girish V | Method for customizing a digital camera using queries to determine the user's experience level |
JP2001325615A (ja) * | 2000-05-18 | 2001-11-22 | Sony Corp | 3次元モデル処理装置、および3次元モデル処理方法、並びにプログラム提供媒体 |
KR20040057101A (ko) * | 2002-12-24 | 2004-07-02 | 삼성전기주식회사 | Pc카메라의 영상 편집 방법 |
KR100530086B1 (ko) * | 2003-07-04 | 2005-11-22 | 주식회사 엠투그래픽스 | 동영상의 자동편집장치와 그 방법 및 동영상자동편집방법이 저장된 기록매체 |
US7769819B2 (en) * | 2005-04-20 | 2010-08-03 | Videoegg, Inc. | Video editing with timeline representations |
JP2006350838A (ja) * | 2005-06-17 | 2006-12-28 | Fujitsu Ltd | 情報処理装置およびプログラム |
US20070088729A1 (en) * | 2005-10-14 | 2007-04-19 | International Business Machines Corporation | Flexible history manager for manipulating data and user actions |
US8223242B2 (en) * | 2005-12-06 | 2012-07-17 | Panasonic Corporation | Digital camera which switches the displays of images with respect to a plurality of display portions |
US20070242066A1 (en) * | 2006-04-14 | 2007-10-18 | Patrick Levy Rosenthal | Virtual video camera device with three-dimensional tracking and virtual object insertion |
KR100827803B1 (ko) * | 2006-10-12 | 2008-05-07 | 삼성전자주식회사 | 초광대역 무선 통신 모듈을 포함하는 이동통신 단말기 및이의 구동 방법 |
WO2008153098A1 (ja) * | 2007-06-14 | 2008-12-18 | Sharp Kabushiki Kaisha | 画像データ受信装置、操作装置、操作システム、画像データのデータ構造、制御方法、操作方法、プログラム、および、記録媒体 |
JP4458158B2 (ja) * | 2007-12-07 | 2010-04-28 | ソニー株式会社 | 表示装置、表示方法、及びプログラム |
US8099662B2 (en) * | 2008-01-17 | 2012-01-17 | Seiko Epson Corporation | Efficient image annotation display and transmission |
US20110035692A1 (en) * | 2008-01-25 | 2011-02-10 | Visual Information Technologies, Inc. | Scalable Architecture for Dynamic Visualization of Multimedia Information |
US9092110B2 (en) * | 2008-12-16 | 2015-07-28 | Cadence Design Systems, Inc. | Method and system for implementing a user interface with ghosting |
US8271893B1 (en) * | 2009-01-09 | 2012-09-18 | Adobe Systems Incorporated | Transforming representation information |
US8860865B2 (en) * | 2009-03-02 | 2014-10-14 | Burning Moon, Llc | Assisted video creation utilizing a camera |
US8701007B2 (en) * | 2009-04-30 | 2014-04-15 | Apple Inc. | Edit visualizer for modifying and evaluating uncommitted media content |
US9672646B2 (en) * | 2009-08-28 | 2017-06-06 | Adobe Systems Incorporated | System and method for image editing using visual rewind operation |
US8659622B2 (en) * | 2009-08-31 | 2014-02-25 | Adobe Systems Incorporated | Systems and methods for creating and editing seam carving masks |
US8654143B2 (en) * | 2009-09-30 | 2014-02-18 | Adobe Systems Incorporated | System and method for non-uniform loading of digital paint brushes |
EP2488930B1 (en) * | 2009-10-15 | 2017-12-06 | SMART Technologies ULC | Method and apparatus for drawing and erasing calligraphic ink objects on a display surface |
US8687015B2 (en) * | 2009-11-02 | 2014-04-01 | Apple Inc. | Brushing tools for digital image adjustments |
JP5387366B2 (ja) * | 2009-11-26 | 2014-01-15 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
US20110246875A1 (en) * | 2010-04-02 | 2011-10-06 | Symantec Corporation | Digital whiteboard implementation |
US8775480B2 (en) * | 2011-01-28 | 2014-07-08 | Apple Inc. | Media clip management |
US9117483B2 (en) * | 2011-06-03 | 2015-08-25 | Michael Edward Zaletel | Method and apparatus for dynamically recording, editing and combining multiple live video clips and still photographs into a finished composition |
US9310941B2 (en) * | 2011-10-04 | 2016-04-12 | Atmel Corporation | Touch sensor input tool with offset between touch icon and input icon |
US20130124301A1 (en) * | 2011-11-10 | 2013-05-16 | Google Inc. | System and method for dynamic user feedback for display and context advertisements |
KR101328199B1 (ko) * | 2012-11-05 | 2013-11-13 | 넥스트리밍(주) | 동영상 편집 방법 및 그 단말기 그리고 기록매체 |
US9881645B2 (en) * | 2013-08-20 | 2018-01-30 | Google Llc | Systems, methods, and media for editing video during playback via gestures |
WO2015148733A2 (en) * | 2014-03-25 | 2015-10-01 | ScStan, LLC | Systems and methods for the real-time modification of videos and images within a social network format |
US9082018B1 (en) * | 2014-09-30 | 2015-07-14 | Google Inc. | Method and system for retroactively changing a display characteristic of event indicators on an event timeline |
-
2011
- 2011-12-23 KR KR1020110141730A patent/KR102013239B1/ko active IP Right Grant
-
2012
- 2012-12-10 US US13/709,532 patent/US20130167086A1/en not_active Abandoned
- 2012-12-24 CN CN201210568041.1A patent/CN103179346B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1543741A (zh) * | 2001-04-09 | 2004-11-03 | 欧姆龙株式会社 | 图像打印装置和图像打印方法 |
JP2005210689A (ja) * | 2003-12-25 | 2005-08-04 | Fuji Photo Film Co Ltd | 画像編集装置および方法並びにプログラム |
CN1913683A (zh) * | 2005-08-12 | 2007-02-14 | Lg电子株式会社 | 具有编辑所捕获图象的功能的带双显示单元的移动通信终端及其方法 |
KR20090058305A (ko) * | 2007-12-04 | 2009-06-09 | 삼성전자주식회사 | 동영상 촬영 편집 장치 및 방법 |
WO2010044576A2 (en) * | 2008-10-13 | 2010-04-22 | Samsung Electronics Co., Ltd. | Object management method and apparatus using touchscreen |
Also Published As
Publication number | Publication date |
---|---|
CN103179346B (zh) | 2018-05-22 |
KR102013239B1 (ko) | 2019-08-23 |
KR20130073731A (ko) | 2013-07-03 |
US20130167086A1 (en) | 2013-06-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8704914B2 (en) | Apparatus to automatically tag image and method thereof | |
EP3120217B1 (en) | Display device and method for controlling the same | |
CN106658141B (zh) | 一种视频处理方法及移动终端 | |
CN105825521B (zh) | 信息处理设备及其控制方法 | |
KR101948692B1 (ko) | 촬영 장치 및 이미지 합성 방법 | |
CN101729779A (zh) | 信息处理设备、信息处理方法和程序 | |
JP2010283538A (ja) | 撮像装置、画像処理方法及びプログラム | |
US9449646B2 (en) | Methods and systems for media file management | |
CN103179346A (zh) | 数字图像处理设备及其控制方法 | |
WO2013099704A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US9986174B2 (en) | Electronic apparatus and for notifying predetermined time point during movie recording and method for controlling the same | |
US11122207B2 (en) | Electronic apparatus, method for controlling the same, computer readable nonvolatile recording medium | |
JP6442266B2 (ja) | 撮像制御装置、その制御方法、プログラム、及び記憶媒体 | |
EP2711853B1 (en) | Methods and systems for media file management | |
CN101794066B (zh) | 用于提供幻灯片放映的方法和设备 | |
KR101776674B1 (ko) | 휴대용 영상 편집 장치 및 그 동작 방법 | |
JP2014090499A (ja) | 情報処理装置、画像処理方法、プログラム及び情報処理システム | |
US9591253B2 (en) | Imaging apparatus and method for controlling imaging apparatus | |
JP5930693B2 (ja) | 動画記録装置及びその制御方法 | |
KR102368203B1 (ko) | 사용자 인터페이스 기반 동영상 인덱스 생성을 위한 전자 장치 및 그의 동작 방법 | |
KR101553272B1 (ko) | 복수의 타이머를 사용하여 멀티미디어 콘텐츠를 저작하는 방법 및 복수의 타이머를 사용하여 멀티미디어 콘텐츠를 저작하는 저작 장치 | |
JP2017215532A (ja) | 表示制御装置およびその制御方法 | |
JP2016092800A (ja) | 画像再生装置 | |
JP2016062267A (ja) | 表示処理装置およびその方法 | |
CN112887585A (zh) | 显示控制设备及其控制方法和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180522 Termination date: 20191224 |