KR20090097005A - Apparatus for processing digital image and method for controlling thereof - Google Patents

Apparatus for processing digital image and method for controlling thereof Download PDF

Info

Publication number
KR20090097005A
KR20090097005A KR1020080022144A KR20080022144A KR20090097005A KR 20090097005 A KR20090097005 A KR 20090097005A KR 1020080022144 A KR1020080022144 A KR 1020080022144A KR 20080022144 A KR20080022144 A KR 20080022144A KR 20090097005 A KR20090097005 A KR 20090097005A
Authority
KR
South Korea
Prior art keywords
frame
reference frame
image
comparison
still image
Prior art date
Application number
KR1020080022144A
Other languages
Korean (ko)
Other versions
KR101446774B1 (en
Inventor
김현석
복영수
Original Assignee
삼성디지털이미징 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성디지털이미징 주식회사 filed Critical 삼성디지털이미징 주식회사
Priority to KR1020080022144A priority Critical patent/KR101446774B1/en
Publication of KR20090097005A publication Critical patent/KR20090097005A/en
Application granted granted Critical
Publication of KR101446774B1 publication Critical patent/KR101446774B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/73—Deblurring; Sharpening
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

An apparatus for processing a digital image and a control method thereof are provided to extract a still image from a plurality of frame images including a selected specific frame included in a moving picture, thereby extracting a still image having improved image quality. A reference frame of a time point of extracting a still image is extracted among frame images(S310). Among the frame images, a comparison frame is extracted(S320). A blurred area is detected from the reference frame by comparing the reference frame with the comparison frame(S350). When the blurred area is detected, the still image is generated by removing the blurred area from the reference frame(S360~S390).

Description

디지털 영상 처리장치 및 그 제어방법{Apparatus for processing digital image and method for controlling thereof}Apparatus for processing digital image and method for controlling Technical Field

본 발명은 디지털 영상 처리장치 및 그 제어방법에 관한 것으로서, 보다 상세하게는 동영상 이미지에서 정지 영상 이미지를 추출할 수 있는 디지털 영상 처리장치 및 그 제어방법에 관한 것이다. The present invention relates to a digital image processing apparatus and a control method thereof, and more particularly, to a digital image processing apparatus and a control method thereof capable of extracting a still image image from a moving image.

통상적으로, 디지털 영상 처리장치는 디지털 카메라, PDA(personal digital assistant), 폰 카메라, PC 카메라 등의 영상을 처리하거나 영상 인식 센서를 사용하는 모든 장치를 포함한다. Typically, the digital image processing apparatus includes all devices that process images such as a digital camera, a personal digital assistant (PDA), a phone camera, a PC camera, or use an image recognition sensor.

디지털 영상 처리장치는 촬상 소자를 통하여 입력받은 영상을 디지털 신호 처리기에서 이미지 프로세싱하고 이를 압축하여 이미지 파일을 생성하고, 그 이미지 파일을 메모리에 저장할 수 있다. The digital image processing apparatus may image an image received through an image pickup device by a digital signal processor, compress the image, generate an image file, and store the image file in a memory.

또한, 디지털 영상 처리장치는 촬상 소자를 통하여 입력받거나 저장매체에 저장된 이미지 파일의 이미지를 LCD(Liquid Crystal Display)와 같은 표시장치에 표시하여 보여줄 수 있다. In addition, the digital image processing apparatus may display and display an image of an image file received through an imaging device or stored in a storage medium on a display device such as a liquid crystal display (LCD).

디지털 영상 처리장치에서는 정지 영상 이미지뿐만 아니라, 동영상 이미지를 촬영하고 이를 파일로 저장할 수 있는 경우가 있다. 또한, 동영상 이미지를 인쇄하거나, 동영상 이미지로부터 정지 영상 이미지의 앨범을 생성하고 하는 경우가 있다. 이를 위해서는 동영상 이미지로부터 정지 영상 이미지를 추출할 수 있다. In the digital image processing apparatus, not only a still image but also a moving image may be captured and stored in a file. In addition, there are cases where a moving image is printed or an album of still image images is generated from the moving image. To this end, a still image image may be extracted from the moving image image.

본 발명은, 동영상 이미지로부터 정지 영상 이미지를 추출함에 있어서, 선택된 특정 프레임을 포함한 복수의 프레임 영상으로부터 정지 영상을 추출할 수 있는 디지털 영상 처리장치 및 그 제어방법을 제공하는 것을 목적으로 한다. An object of the present invention is to provide a digital image processing apparatus capable of extracting a still image from a plurality of frame images including a selected specific frame in extracting a still image image from a moving image image, and a control method thereof.

본 발명은, (a) 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임을 추출하는 단계; The present invention provides a method of extracting a still image from a frame image constituting a moving image;

(b) 상기 동영상을 구성하는 상기 프레임 영상들 중에서 상기 기준 프레임과 비교 대상이 되는 비교 프레임을 추출하는 단계; extracting a comparison frame to be compared with the reference frame among the frame images constituting the moving image;

(c) 상기 기준 프레임을 상기 비교 프레임과 비교하여 상기 기준 프레임에서 흐림 영역을 검출하는 단계; 및 (c) comparing the reference frame with the comparison frame to detect a blur region in the reference frame; And

(d) 상기 흐림 영역이 검출된 경우에 상기 기준 프레임에서 상기 흐림 영역을 제거하여 정지 영상을 생성하는 단계를 구비하는 디지털 영상 처리장치의 제어방법을 제공한다. and (d) generating a still image by removing the blur area from the reference frame when the blur area is detected.

상기 (c) 단계가, 상기 기준 프레임과 상기 비교 프레임을 비교하여 그 차이값을 산출하는 단계, 상기 차이값을 설정된 기준값과 비교하는 단계, 및 상기 차이값이 상기 기준값보다 큰 경우에 상기 기준 프레임에서 상기 흐림 영역을 검출하는 단계를 구비할 수 있다. In the step (c), comparing the reference frame and the comparison frame to calculate a difference value, comparing the difference value with a set reference value, and when the difference value is larger than the reference value, the reference frame The method may include detecting the blurring region at.

상기 (d) 단계가, 상기 기준 프레임에서 상기 흐림 영역을 제거하는 단계, 상기 동영상을 구성하는 다른 프레임 영상들 중의 적어도 어느 하나에서 상기 흐림 영역에 대응되는 보충 데이터를 추출하는 단계, 상기 기준 프레임에 상기 보충 데이터를 합성하여 보정 프레임을 생성하는 단계, 및 상기 보정 프레임을 상기 정지 영상으로 저장하는 단계를 구비할 수 있다. (D) removing the blur area from the reference frame; extracting supplemental data corresponding to the blur area from at least one of other frame images constituting the moving image; Synthesizing the supplemental data to generate a correction frame, and storing the correction frame as the still image.

본 발명의 다른 측면은, 동영상을 입력받는 영상 입력부; 및 상기 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임의 인접하는 프레임인 비교 프레임과의 차이가 설정된 기준값보다 큰 경우에 상기 기준 프레임에서 상기 비교 프레임과 차이가 큰 영역을 제거하여 정지 영상을 생성하는 제어부를 구비하는 디지털 영상 처리장치를 제공한다. Another aspect of the invention, the video input unit for receiving a video; And a region having a large difference from the comparison frame in the reference frame when the difference between the comparison frame, which is an adjacent frame of the reference frame, from which the still image is to be extracted is greater than a set reference value among the frame images constituting the moving image. It provides a digital image processing apparatus having a control unit for removing and generating a still image.

상기 기준 프레임에서 상기 비교 프레임과 차이가 큰 영역을 흐림 영역으로 하고, 상기 흐림 영역을 제거하고, 상기 비교 프레임에서 상기 흐림 영역에 대응되는 보충 데이터를 추출하여 상기 기준 프레임과 합성하여 보정 프레임을 생성하고, 상기 보정 프레임을 정지 영상으로 저장할 수 있다. In the reference frame, a region having a large difference from the comparison frame is a blur region, the blur region is removed, and supplemental data corresponding to the blur region is extracted from the comparison frame and synthesized with the reference frame to generate a correction frame. The correction frame may be stored as a still image.

상기 기준 프레임의 데이터 및 상기 비교 프레임의 데이터가 저장되는 제1 저장부; 및 상기 동영상 및 상기 정지 영상이 저장되는 제2 저장부를 더 구비할 수 있다. A first storage unit storing data of the reference frame and data of the comparison frame; And a second storage unit in which the video and the still image are stored.

본 발명에 따른 디지털 영상 처리장치 및 그 제어방법에 의하면, 동영상에 포함된 선택된 특정 프레임을 포함한 복수의 프레임 영상으로부터 정지 영상을 추출함으로써, 향상된 화질의 정지 영상을 추출할 수 있다. According to the digital image processing apparatus and the control method thereof according to the present invention, by extracting a still image from a plurality of frame images including a selected specific frame included in the moving image, it is possible to extract a still image of improved image quality.

이하, 첨부된 도면을 참조하여 바람직한 실시예에 따른 본 발명을 상세히 설명하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1에는 본 발명에 따른 디지털 영상 처리장치의 제어장치 및 그 방법이 적용되는 디지털 영상 처리장치의 일 실시예인 디지털 카메라(100)의 뒷면 외형이 도시되어 있다. FIG. 1 is a rear view of a digital camera 100, which is an embodiment of a control device of a digital image processing apparatus and a digital image processing apparatus to which the method is applied, according to the present invention.

도면을 참조하면, 디지털 카메라(100)의 뒷면에는 방향 버튼(21), 메뉴-OK 버튼(22), 광각(Wide angle)-줌(Zoom) 버튼(W), 망원(Telephoto)-줌(Zoom) 버튼(T), 및 디스플레이 패널(25) 등이 구비될 수 있다. Referring to the drawings, on the back of the digital camera 100, the direction button 21, the menu-OK button 22, the wide angle (Zoom) button (W), the telephoto (Zoom) ) Button T, the display panel 25 and the like.

방향 버튼(21)에는 상향 버튼(21a), 하향 버튼(21b), 좌향 버튼(21c), 우향 버튼(21d)의 총4개의 버튼이 포함될 수 있다. 방향 버튼(21)과 메뉴-OK 버튼(22)은 디지털 카메라와 같은 디지털 영상 처리장치의 동작에 관한 각종 메뉴를 실행시키기 위해 입력하는 키이다. The direction button 21 may include four buttons, an up button 21a, a down button 21b, a left button 21c, and a right button 21d. The direction button 21 and the menu-OK button 22 are keys for executing various menus relating to the operation of the digital image processing apparatus such as a digital camera.

광각-줌 버튼(W) 또는 망원-줌 버튼(T)은 그 입력에 따라 화각이 넓어지거나, 화각이 좁아진다. 특히, 선택된 노출영역의 크기를 변경시키고자 할 때 사용될 수 있다. 디스플레이 패널(25)로는 LCD(liquid crystal display)등의 영상 표시소자가 사용될 수 있다. 디스플레이 패널(25)이 표시부(도 5의 550)에 포함될 수 있다. The wide-angle zoom button W or the tele-zoom button T has a wider angle of view or a narrower angle of view depending on its input. In particular, it may be used to change the size of the selected exposure area. As the display panel 25, an image display device such as a liquid crystal display (LCD) may be used. The display panel 25 may be included in the display unit 550 of FIG. 5.

한편, 디지털 카메라(100)의 앞면 또는 윗면에는 셔터 릴리즈 버튼(26), 플래시(미도시), 전원 스위치(28), 렌즈부(미도시)가 구비될 수 있다. 또한, 디지털 카메라(100)의 앞면과 뒷면에는 뷰 파인더(27)의 대물 렌즈와 접안 렌즈가 구비될 수 있다. Meanwhile, a shutter release button 26, a flash (not shown), a power switch 28, and a lens unit (not shown) may be provided on the front or top surface of the digital camera 100. In addition, the front and rear of the digital camera 100 may be provided with an objective lens and an eyepiece of the viewfinder 27.

방향 버튼(21), 메뉴-OK 버튼(22), 셔터 릴리즈 버튼(26), 및 전원 스위치(28) 등은 사용자가 외부로부터 조작하고자 하는 사항을 입력하는 사용자 조작부(도 5의 560)에 포함될 수 있다. The direction button 21, the menu-OK button 22, the shutter release button 26, the power switch 28, and the like may be included in the user control unit 560 of FIG. 5, which inputs items that the user wants to operate from the outside. Can be.

셔터 릴리즈 버튼(26)은 정해진 시간 동안 CCD(Charge Coupled Device)와 같은 촬상 소자나 필름을 빛에 노출시키기 위해 열리고 닫힌다. 또한, 셔터 릴리즈 버튼은 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 촬상 소자에 영상을 기록한다. The shutter release button 26 is opened and closed to expose the film or an image pickup device such as a charge coupled device (CCD) for a predetermined time. In addition, the shutter release button records an image on the image pickup device by properly exposing a subject in association with an aperture (not shown).

본 발명이 적용될 수 있는 디지털 영상 처리장치의 일 실시예로서 디지털 카메라와 그 제어장치, 및 그 제어방법이 본 출원인의 미국 특허출원 공개번호 제2004/0130650호(명칭: 카메라의 이차함수를 이용한 자동 포커싱 방법, Method of automatically focusing using a quadratic function in camera)에 개시되어 있다. As an embodiment of a digital image processing apparatus to which the present invention can be applied, a digital camera, a control apparatus, and a control method thereof are disclosed in US Patent Application Publication No. 2004/0130650 (name: automatic using a secondary function of the camera). Method of automatically focusing using a quadratic function in camera.

상기 미국출원에 개시된 디지털 카메라와 그 제어장치, 및 그 제어방법에 관한 사항은 본 명세서에 포함되는 것으로 하고, 그 자세한 설명은 생략한다. Matters relating to the digital camera, the control apparatus, and the control method disclosed in the above-mentioned US application will be included in the present specification, the detailed description thereof will be omitted.

도 2에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치의 제어장치(200)의 블록도가 도시되어 있다. 디지털 영상 처리장치의 제어장치(200)는 도 1의 디지털 카메라(100)의 내부에 장착될 수 있다. 2 is a block diagram of a control device 200 of a digital image processing apparatus, which is a preferred embodiment of the present invention. The control device 200 of the digital image processing apparatus may be mounted in the digital camera 100 of FIG. 1.

도면을 참조하면, 렌즈부와 필터부를 포함한 광학계(OPS)는 피사체로부터의 빛을 광학적으로 처리한다. 광학계(OPS)의 렌즈부는 줌 렌즈, 포커스 렌즈 및 보 상 렌즈를 포함한다. 사용자가 사용자 입력부(INP)에 포함된 광각-줌 버튼(W) 또는 망원-줌 버튼(T)을 누르면, 이에 상응하는 신호가 마이크로제어기(212)에 입력된다. Referring to the drawing, an optical system OPS including a lens unit and a filter unit optically processes light from a subject. The lens unit of the optical system OPS includes a zoom lens, a focus lens, and a compensation lens. When the user presses the wide-angle zoom button W or the tele-zoom button T included in the user input unit INP, a signal corresponding thereto is input to the microcontroller 212.

이에 따라, 마이크로제어기(212)가 렌즈 구동부(210)를 제어함에 따라, 줌 모터(MZ)가 구동되어 줌 렌즈가 이동된다. Accordingly, as the microcontroller 212 controls the lens driver 210, the zoom motor M Z is driven to move the zoom lens.

광각-줌 버튼(W)이 눌려지면 줌 렌즈의 초점 길이가 짧아져서 화각이 넓어지고, 망원-줌 버튼(T)이 눌려지면 줌 렌즈의 초점 길이가 길어져서 화각이 좁아진다. When the wide-zoom button W is pressed, the focal length of the zoom lens is shortened to widen the angle of view, and when the tele-zoom button T is pressed, the focal length of the zoom lens is long and the angle of view is narrowed.

한편, 자동 초점 모드(auto focusing mode)에는, 디지털 신호 처리기(207) 안에 내장된 주 제어기가 마이크로제어기(212)를 통하여 렌즈 구동부(210)를 제어하고, 그에 따라 포커스 모터(MF)가 구동된다. 즉, 포커스 모터(MF)를 구동하여 가장 선명한 사진을 얻을 수 있는 위치로 포커스 렌즈를 이동시킨다. On the other hand, in the auto focusing mode, the main controller embedded in the digital signal processor 207 controls the lens driver 210 through the microcontroller 212, whereby the focus motor M F is driven. do. That is, the focus lens is moved to a position where the sharpest picture is obtained by driving the focus motor M F.

보상 렌즈는 전체적인 굴절률을 보상하는 역할을 하므로 별도로 구동되지 않는다. 참조 부호 MA는 조리개(aperture, 도시되지 않음)를 구동하기 위한 모터를 가리킨다. The compensation lens compensates for the overall refractive index and is not driven separately. Reference numeral M A denotes a motor for driving an aperture (not shown).

광학계(OPS)의 필터부에 있어서, 광학적 저역통과필터(Optical Low Pass Filter)는 고주파 성분의 광학적 노이즈를 제거한다. 적외선 차단 필터(Infra-Red cut Filter)는 입사되는 빛의 적외선 성분을 차단한다. In the filter section of the optical system OPS, an optical low pass filter removes optical noise of high frequency components. Infra-Red cut filter cuts the infrared component of the incident light.

광전 변환부(OEC)는 CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal-Oxide- Semiconductor) 등의 촬상 소자를 포함하여 이루어질 수 있다. 광전 변환부(OEC)는 광학계(OPS)로부터의 빛을 전기적 아날로그 신호로 변환시킨다. The photoelectric conversion unit OEC may include an imaging device such as a charge coupled device (CCD) or a complementary metal-oxide-semiconductor (CMOS). The photoelectric conversion unit OEC converts light from the optical system OPS into an electrical analog signal.

아날로그-디지털 변환부는 CDS-ADC(Correlation Double Sampler and Analog-to-Digital Converter) 소자(201)를 포함하여 이루어질 수 있다. 아날로그-디지털 변환부는 광전 변환부(OEC)로부터의 아날로그 신호를 처리하여, 그 고주파 노이즈를 제거하고 진폭을 조정한 후, 디지털 신호로 변환시킨다. 여기서, 디지털 신호 처리기(207)는 타이밍 회로(202)를 제어하여 광전 변환부(OEC)와 아날로그-디지털 변환부(201)의 동작을 제어한다. The analog-to-digital converter may include a CDS-ADC (Correlation Double Sampler and Analog-to-Digital Converter) device 201. The analog-to-digital converter processes the analog signal from the photoelectric converter (OEC), removes the high frequency noise, adjusts the amplitude, and converts the analog signal into a digital signal. Here, the digital signal processor 207 controls the timing circuit 202 to control the operation of the photoelectric converter OEC and the analog-to-digital converter 201.

광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등은 본 발명에 따른 영상 입력부(도 5의 510)에 포함될 수 있다. 이때, 영상 입력부(도 5의 510)는 외부에서 생성된 동영상이 입력될 수 있도록 하는 입력장치를 포함할 수 있다. The optical system OPS, the photoelectric converter OC, the CDS-ADC device 201, and the like may be included in the image input unit 510 of FIG. 5. In this case, the image input unit 510 of FIG. 5 may include an input device for inputting an externally generated video.

실시간 클럭(203)은 디지털 신호 처리기(207)에 시간 정보를 제공한다. 디지털 신호 처리기(207)는 CDS-ADC 소자(201)로부터의 디지털 신호를 처리하여 휘도(Y 값) 및 색도(R, G, B) 신호로 분류된 디지털 화상 신호를 발생시킨다. The real time clock 203 provides time information to the digital signal processor 207. The digital signal processor 207 processes digital signals from the CDS-ADC element 201 to generate digital image signals classified into luminance (Y value) and chromaticity (R, G, B) signals.

디지털 신호 처리기(207)에 내장된 주 제어기의 제어에 따라 마이크로 제어기(212)에 의하여 구동되는 발광부(LAMP)에는, 셀프-타이머 램프, 자동-초점 램프, 모드 지시 램프 및 플래시 대기 램프 등이 포함될 수 있다. The light emitting unit LAMP driven by the microcontroller 212 under the control of the main controller built in the digital signal processor 207 includes a self-timer lamp, an auto-focus lamp, a mode indicating lamp, a flash standby lamp, and the like. May be included.

디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)는 본 발명에 따른 제어부(도 5의 520)에 포함될 수 있다. 또한, 본 발명에 따른 사용자 조작부(도 5의 550)의 조작에 의하여 입력된 사용자 입력은 사용자 입력부(INP)를 통하여 디지 털 신호 처리기(207) 및/또는 마이크로 제어기(212)로 입력되어 처리되고, 그에 따른 작업이 수행될 수 있다. The digital signal processor 207 and / or the microcontroller 212 may be included in the controller 520 of FIG. 5 in accordance with the present invention. In addition, the user input input by the operation of the user manipulation unit 550 of FIG. 5 is input to the digital signal processor 207 and / or the microcontroller 212 through the user input unit INP, and processed. The work may be performed accordingly.

DRAM(Dynamic Random Access Memory, 204)에는 디지털 신호 처리기(207)로부터의 디지털 화상 신호가 일시 저장된다. EEPROM(Electrically Erasable and Programmable Read Only Memory, 205)에는 디지털 신호 처리기(207)의 동작에 필요한 부팅 프로그램 및 키 입력 프로그램 등과 같은 알고리즘 및 설정 데이터가 저장된다. 메모리 카드 인터페이스(206)에서는 사용자의 메모리 카드가 착탈될 수 있다. The digital image signal from the digital signal processor 207 is temporarily stored in the DRAM (Dynamic Random Access Memory) 204. The EEPROM (Electrically Erasable and Programmable Read Only Memory) 205 stores algorithms and setting data such as a boot program and a key input program required for the operation of the digital signal processor 207. In the memory card interface 206, a user's memory card may be attached or detached.

DRAM(204) 또는 메모리 카드 인터페이스(206)를 통하여 인식되는 메모리 카드는 기준 프레임, 비교 프레임, 동영상, 및 정지영상이 일시적으로 또는 비휘발성으로 저장되는 것으로 도 5의 제1 저장부(530) 및/또는 제2 저장부(540)에 포함될 수 있다. 즉, 제1 저장부(530)는 기준 프레임, 비교 프레임, 및 이들의 차이값이 일시적으로 저장되는 DRAM(204) 또는 캐시 메모리 등이 될 수 있다. The memory card recognized through the DRAM 204 or the memory card interface 206 may be configured to temporarily or non-volatilely store a reference frame, a comparison frame, a moving picture, and a still image. And / or included in the second storage unit 540. That is, the first storage unit 530 may be a DRAM 204 or a cache memory in which reference frames, comparison frames, and difference values thereof are temporarily stored.

또한, 제2 저장부(540)에는 동영상 및 정지 영상과 차이값과 비교되는 기준값 등이 비휘발성으로 저장될 수 있다. 이때, 제2 저장부(540)는 플래시 메모리 또는 착탈 가능하도록 장착되는 메모리 카드 등이 될 수 있다. In addition, the second storage unit 540 may store a reference value that is compared with a difference value with a moving image and a still image in a nonvolatile manner. In this case, the second storage unit 540 may be a flash memory or a memory card mounted to be detachable.

디지털 신호 처리기(207)로부터의 디지털 화상 신호는 디스플레이 패널 구동부(214)에 입력되고, 이로 인하여 디스플레이 패널(215)에 화상이 디스플레이 된다. 디스플레이 패널(215)은 디지털 신호 처리기(207)의 제어를 받아 디스플레이 패널 구동부(214)에 의하여 구동될 수 있다. The digital image signal from the digital signal processor 207 is input to the display panel driver 214, whereby the image is displayed on the display panel 215. The display panel 215 may be driven by the display panel driver 214 under the control of the digital signal processor 207.

즉, 디스플레이 패널(215) 및 디스플레이 패널 구동부(214)는 표시부(도 5의 550)에 포함될 수 있다. That is, the display panel 215 and the display panel driver 214 may be included in the display unit 550 of FIG. 5.

한편, 디지털 신호 처리기(207)로부터의 디지털 화상 신호는, USB(Universal Serial Bus) 접속부(31a) 또는 RS232C 인터페이스(208)와 그 접속부(31b)를 통하여 직렬 통신으로써 전송될 수 있고, 비디오 필터(209) 및 비디오 출력부(31c)를 통하여 비디오 신호로서 전송될 수 있다. 여기서, 디지털 신호 처리기(207)는 그 내부에 마이크로제어기를 내장할 수 있다. On the other hand, the digital image signal from the digital signal processor 207 can be transmitted by serial communication via a universal serial bus (USB) connection portion 31a or an RS232C interface 208 and the connection portion 31b thereof, and a video filter ( 209 and through the video output unit 31c. Here, the digital signal processor 207 may incorporate a microcontroller therein.

오디오 처리기(213)는, 마이크로폰(MIC)으로부터의 음성 신호를 디지털 신호 처리기(207) 또는 스피커(SP)로 출력하고, 디지털 신호 처리기(207)로부터의 오디오 신호를 스피커(SP)로 출력한다. The audio processor 213 outputs the audio signal from the microphone MIC to the digital signal processor 207 or the speaker SP, and outputs the audio signal from the digital signal processor 207 to the speaker SP.

본 발명에 따른 디지털 영상 처리장치(도 5의 500) 및 디지털 영상 처리장치의 제어방법(S300)은 동영상에 포함된 선택된 기준 프레임과 기준 프레임과 비교되는 비교 프레임을 포함한 복수의 프레임 영상으로부터 기준 프레임에 해당하는 정지 영상을 추출할 수 있다. 이때, 기준 프레임을 비교 프레임과 비교하여, 기준 프레임에서 흐리게 나타날 수 있는 흐림 영역을 검출하고 이를 제거할 수 있다. According to an embodiment of the present invention, a digital image processing apparatus (500 of FIG. 5) and a control method (S300) of a digital image processing apparatus include a reference frame from a plurality of frame images including a selected reference frame included in a video and a comparison frame compared with the reference frame. The still image corresponding to the image can be extracted. In this case, the reference frame may be compared with the comparison frame to detect and remove a blur area that may appear blurred in the reference frame.

따라서, 동영상에서 정지 영상을 추출하고자 선택된 시점에서의 기준 프레임에서 흐림 영역이 제거된 정지 영상을 추출할 수 있다. 또한, 비교 프레임에서 기준 프레임의 흐림 영역에 대응되는 보충 데이터를 추출하고, 보충 데이터를 기준 프레임에 합성하여 보정 프레임을 생성하고, 보정 프레임을 정지 영상으로 저장할 수 있다. Therefore, the still image from which the blur region is removed may be extracted from the reference frame at the time point selected to extract the still image from the video. In addition, the supplementary data corresponding to the blur region of the reference frame may be extracted from the comparison frame, the supplementary data may be synthesized with the reference frame to generate a correction frame, and the correction frame may be stored as a still image.

동영상으로부터 정지 영상을 추출할 때, 동영상에서 사용자에 의하여 선택된 시점의 기준 프레임을 선택하여 정지 영상으로 저장할 수 있다. 이 경우, 화면 내에 움직이는 물체가 있는 경우에 그 영역이 흐리게 보이는 흐림(blur) 현상이 발생할 수 있다. When the still image is extracted from the video, the reference frame of the viewpoint selected by the user in the video may be selected and stored as the still image. In this case, when there is a moving object in the screen, a blur phenomenon in which the area is blurred may occur.

이때, 본 발명에서는 기준 프레임에서 흐림 현상이 발생하는 흐림 영역을 검출하고, 흐림 영역을 제거 및/또는 보충하여 정지 영상을 생성한다. 따라서, 본 발명에 따라 기준 프레임에서 흐림 영역을 제거하여 향상된 화질의 정지 영상을 추출할 수 있다. In this case, the present invention detects a blur region where a blur phenomenon occurs in a reference frame, and removes and / or supplements the blur region to generate a still image. Therefore, according to the present invention, it is possible to extract a still image having an improved image quality by removing a blur region from a reference frame.

도 3에는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법(S300)의 흐름도가 도시되어 있다. 도 4에는 본 발명에 따라 정지 영상이 추출되는 동영상의 일 실시예에 대한 개략적인 구조가 도시되어 있다. 3 is a flowchart of a control method (S300) of a digital image processing apparatus as a preferred embodiment according to the present invention. 4 shows a schematic structure of an embodiment of a moving image from which a still image is extracted according to the present invention.

디지털 영상 처리장치의 제어방법(S300)은 도 2의 디지털 영상 처리장치의 제어장치(200) 및/또는 도 5의 디지털 영상 처리장치(500)에서 구현될 수 있다. 이를 위하여, 본 발명에 따른 디지털 영상 처리장치의 제어방법(S300)이 도 2의 저장 수단에 저장되거나 펌웨어(Firmware) 등의 반도체 칩의 형태로 구현된 프로그램 또는 알고리즘이 될 수 있다. The control method S300 of the digital image processing apparatus may be implemented in the control apparatus 200 of the digital image processing apparatus of FIG. 2 and / or the digital image processing apparatus 500 of FIG. 5. To this end, the control method S300 of the digital image processing apparatus according to the present invention may be a program or algorithm stored in the storage means of FIG. 2 or implemented in the form of a semiconductor chip such as firmware.

본 발명에 따른 디지털 영상 처리장치의 제어방법(S300)은 동영상에서 정지 영상을 추출한다. 이를 위하여, 디지털 영상 처리장치의 제어방법(S300)은 기준 프레임 추출단계(S310); 비교 프레임 추출단계(S320); 흐림 영역 검출단계(S330 내지 S350); 흐림 영역 제거단계(S360); 및 정지영상 저장단계(S390)를 구비할 수 있다. The control method (S300) of the digital image processing apparatus according to the present invention extracts a still image from a video. To this end, the control method (S300) of the digital image processing apparatus includes a reference frame extraction step (S310); Comparative frame extraction step (S320); Blur area detection step (S330 to S350); Blur area removing step (S360); And still image storage step (S390) may be provided.

기준 프레임 추출단계(S310)에는 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임을 추출할 수 있다. 비교 프레임 추출단계(S320)에는 동영상을 구성하는 프레임 영상들 중에서 기준 프레임과 비교 대상이 되는 비교 프레임을 추출할 수 있다. In the reference frame extraction step (S310), a reference frame of a point in time at which a still image is to be extracted may be extracted from the frame images constituting the video. In the comparison frame extraction step (S320), a comparison frame which is a comparison target with a reference frame may be extracted from the frame images constituting the video.

흐림 영역 검출단계(S330 내지 S350)에는 기준 프레임을 상기 비교 프레임과 비교하여 상기 기준 프레임에서 흐림 영역을 검출할 수 있다. 흐림 영역 제거단계(S360)에는 흐림 영역이 검출된 경우에 기준 프레임에서 흐림 영역을 제거하여 정지 영상을 생성할 수 있다. 정지영상 저장단계(S390)에는 정지 영상을 저장할 수 있다. In the blur area detection steps S330 to S350, a blur area may be detected in the reference frame by comparing the reference frame with the comparison frame. In the blurring region removing operation S360, when the blurring region is detected, the still image may be generated by removing the blurring region from the reference frame. Still image storage step (S390) may store a still image.

기준 프레임 추출단계(S310)에는 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임을 추출할 수 있다. 이때, 기준 프레임은 동영상에서 사용자에 의하여 정치 영상을 추출하고자 선택된 시점의 프레임 영상이 될 수 있다. In the reference frame extraction step (S310), a reference frame of a point in time at which a still image is to be extracted may be extracted from the frame images constituting the video. In this case, the reference frame may be a frame image of a viewpoint selected to extract the stationary image from the video.

동영상은 복수개의 정지 영상 프레임을 포함하여 이루어질 수 있다. 이때, 동영상은 일정한 시간을 기준으로 복수개의 프레임 영상을 포함할 수 있다. 예를 들어, 동영상이 1초에 30 프레임의 영상이 표현될 수 있도록 구성될 수 있다. The video may include a plurality of still image frames. In this case, the video may include a plurality of frame images based on a predetermined time. For example, the video may be configured to display an image of 30 frames per second.

기준 프레임은 사용자의 선택에 의하여 지정된 시점의 프레임 영상이 될 수 있다. 이 경우, 선택된 시점에 프레임 영상이 정확하게 대응되지 못한 경우에, 선택된 시점에 가장 가까운 프레임 영상이 기준 프레임이 될 수 있다. The reference frame may be a frame image of a viewpoint designated by a user's selection. In this case, when the frame image does not correctly correspond to the selected viewpoint, the frame image closest to the selected viewpoint may be the reference frame.

비교 프레임 추출단계(S320)에는 동영상을 구성하는 프레임 영상들 중에서 기준 프레임과 비교 대상이 되는 비교 프레임을 추출할 수 있다. 비교 프레임은 기준 프레임에 대하여 시간적으로 앞 또는 뒤로 인접하는 하나 또는 복수개의 프레임 영상들이 될 수 있다. 도 4에 도시된 실시예에서 하나의 프레임이 기준 프레임(In)으로 선택된 경우에 시간적으로 앞으로 인접하는 프레임 영상(In-1) 또는 시간적으로 뒤로 인접하는 프레임 영상(In+1)이 될 수 있다. In the comparison frame extraction step (S320), a comparison frame which is a comparison target with a reference frame may be extracted from the frame images constituting the video. The comparison frame may be one or a plurality of frame images that are temporally forward or backward with respect to the reference frame. In the embodiment shown in FIG. 4, when one frame is selected as the reference frame I n , the frame image I n-1 adjacent to the temporal forward or the frame image I n + 1 adjacent to the temporal backward is Can be.

다른 실시예로서, 비교 프레임이 기준 프레임(In)에 대하여 시간적으로 앞으로 인접하는 프레임 영상(In-1)과 기준 프레임(In)에 대하여 시간적으로 뒤로 인접하는 프레임 영상(In+1)을 모두 포함할 수 있다. As another example, comparing a frame is a reference frame (I n) with a time to the frame adjacent to the next image (I n-1) and reference frame (I n) in time frame image adjacent to the back (I n + 1 with respect to the relative ) May be included.

한편, 동영상을 구성하는 프레임 영상들(40)은, I 프레임 영상들(41), B 프레임 영상들(42), 및 P 프레임 영상들(43)을 구비할 수 있다. Meanwhile, the frame images 40 constituting the video may include I frame images 41, B frame images 42, and P frame images 43.

I 프레임 영상들(41)은 프레임 내의 부호화 데이터를 포함한다. B 프레임 영상들(42)은 시간적으로 앞 및 뒤로 인접하는 I 프레임 영상들(41)로부터 예측되도록 하는 쌍방향 부호화 데이터를 포함한다. P 프레임 영상들(43)은 시간적으로 앞으로 인접하는 I 프레임 영상들(41)로부터 예측되도록 하는 순방향 부호화 데이터를 포함한다. I frame images 41 include encoded data in a frame. The B frame images 42 include bidirectionally encoded data to be predicted from adjacent I frame images 41 in front and behind in time. The P frame images 43 include forward coded data to be predicted from temporally adjacent I frame images 41.

이때, 기준 프레임 및 비교 프레임이 I 프레임 영상(41)으로부터 추출될 수 있다. 또한, 비교 프레임이 기준 프레임에 대하여 시간적으로 연속되는 I 프레임인 것이 바람직하다. 즉, 시간적으로 연속되는 I 프레임들 사이에 영상에서 변화가 기 준값보다 큰 영역은 형상이 흐리게 보이는 흐림 영역으로 볼 수 있을 것이다. In this case, the reference frame and the comparison frame may be extracted from the I frame image 41. It is also preferable that the comparison frame is an I frame that is contiguous in time with respect to the reference frame. That is, a region where the change is larger than the reference value in the image between temporally consecutive I frames may be viewed as a blur region where the shape is blurred.

흐림 영역 검출단계(S330 내지 S350)에는 기준 프레임을 상기 비교 프레임과 비교하여 상기 기준 프레임에서 흐림 영역을 검출할 수 있다. 흐림 영역 검출단계(S330 내지 S350)는 차이값 산출단계(S330), 차이값 판단단계(S340), 및 흐림 영역 검출단계(S350)를 구비할 수 있다. In the blur area detection steps S330 to S350, a blur area may be detected in the reference frame by comparing the reference frame with the comparison frame. The blurring area detection steps S330 to S350 may include a difference value calculating step S330, a difference value determining step S340, and a blurring area detection step S350.

차이값 산출단계(S330)에는 기준 프레임과 비교 프레임을 비교하여 그 차이값을 산출한다. 차이값 판단단계(S340)에는 차이값을 설정된 기준값과 비교할 수 있다. 흐림 영역 검출단계(S350)에는 차이값이 기준값보다 큰 경우에 기준 프레임에서 흐림 영역을 검출할 수 있다. In the difference value calculating step (S330), the difference value is calculated by comparing the reference frame with the comparison frame. In the difference value determination step (S340), the difference value may be compared with the set reference value. In the blurring area detection step S350, when the difference is greater than the reference value, the blurring area may be detected in the reference frame.

차이값 산출단계(S330)에는 기준 프레임과 비교 프레임들을 이미지를 구성하는 각각의 픽셀 단위로 비교할 수 있다. 이때, 각각의 픽셀에서 표현되는 계조를 비교할 수 있다. In the difference value calculating step S330, the reference frame and the comparison frame may be compared in units of pixels constituting the image. At this time, the gray scales expressed in each pixel may be compared.

또한, 기준 프레임과 비교 프레임을 비교하여 각각의 픽셀에서의 계조차를 구할 수 있다. 이때, 각각의 픽셀에서의 계조차를 구하고, 각각의 계조차를 합하여 전체 픽셀에서의 차이값을 산출할 수 있다. Further, even the system at each pixel can be obtained by comparing the reference frame with the comparison frame. At this time, even the system in each pixel can be obtained, and even the respective system can be summed to calculate the difference value in the entire pixel.

다른 실시예로서, 전체 픽셀을 복수개의 블록으로 분할하고, 각각의 블록 단위로 차이값을 구할 수 있다. 이때, 각각의 블록은 기준 프레임의 전체 이미지에서 검출되는 피사체를 중심으로 나누어질 수 있다. As another example, the entire pixel may be divided into a plurality of blocks, and a difference value may be obtained for each block unit. In this case, each block may be divided based on a subject detected in the entire image of the reference frame.

차이값 판단단계(S340)에는 차이값을 설정된 기준값과 비교하여 기준 프레임에서 흐림 영역의 발생 여부를 판단할 수 있다. 즉, 비교되는 프레임들 사이의 차 이값이 미리 설정되거나 적응적으로 상황에 따라 다르게 설정되는 기준값보다 큰 경우에 흐림 영역이 발생하는 것으로 판단할 수 있다. In a difference value determination step (S340), it may be determined whether a blur area is generated in the reference frame by comparing the difference value with a set reference value. That is, it may be determined that a blur region occurs when a difference value between frames to be compared is greater than a reference value which is preset or adaptively set differently according to a situation.

이때, 흐림 영역의 발생여부는 블록 단위로 비교 및 판단될 수 있다. At this time, the generation of the blur area may be compared and determined in units of blocks.

흐림 영역 검출단계(S350)에는 차이값이 기준값보다 큰 경우에 기준 프레임에서 흐림 영역을 검출할 수 있다. 즉, 차이값이 기준값보다 큰 경우에 흐림 영역이 존재하는 것으로 판단하여, 기준 프레임을 기준으로 전체 영상에서 흐림 영역을 검색하여 흐림 영역을 검출할 수 있다. In the blurring area detection step S350, when the difference is greater than the reference value, the blurring area may be detected in the reference frame. That is, when the difference value is larger than the reference value, it is determined that the blur region exists, and the blur region may be detected by searching the blur region in the entire image based on the reference frame.

흐림 영역 제거단계(S360)에는 흐림 영역이 검출된 경우에 기준 프레임에서 흐림 영역을 제거하여 정지 영상을 생성할 수 있다. 또한, 이렇게 생성된 정지 영상을 정지영상 저장단계(S390)에서 저장할 수 있다. In the blurring region removing operation S360, when the blurring region is detected, the still image may be generated by removing the blurring region from the reference frame. In addition, the generated still image may be stored in the still image storing step (S390).

이때, 차이값 판단단계(S340)에서 차이값이 기준값보다 적어 흐림 영역이 발생하지 아니한 것으로 판단되는 경우에 정지영상 저장단계(S390)에는 기준 프레임이 정지 영상으로 저장될 수 있다. In this case, when it is determined in the difference value determining step S340 that the difference value is less than the reference value and the blur area does not occur, the reference frame may be stored as the still image in the still image storing step S390.

따라서, 추출된 정지 영상에는 흐림 영역이 제거될 수 있다. Therefore, the blur region may be removed from the extracted still image.

이 경우, 흐림 영역이 제거된 정지 영상에서 흐림 영역의 영상을 보충할 필요가 있다. 따라서, 디지털 영상 처리장치의 제어방법(S300)은 보충 데이터 추출단계(S370) 및 보정 프레임 생성단계(S380)를 구비할 수 있다. In this case, it is necessary to supplement the image of the blur region from the still image from which the blur region is removed. Therefore, the control method S300 of the digital image processing apparatus may include a supplementary data extraction step S370 and a correction frame generation step S380.

보충 데이터 추출단계(S370)에는 동영상을 구성하는 다른 프레임 영상들 중의 적어도 어느 하나에서 기준 프레임에서 제거된 흐림 영역에 대응되는 보충 데이터를 추출할 수 있다. 이때, 보충 데이터가 비교 프레임에서 추출될 수 있다. 다른 실시예로서, 보충 데이터가 기준 프레임으로부터 설정된 만큼 떨어진 프레임에서 추출될 수 있다. In the supplemental data extraction step S370, supplemental data corresponding to a blur region removed from the reference frame may be extracted from at least one of the other frame images constituting the moving image. At this time, the supplementary data may be extracted from the comparison frame. As another example, the supplementary data may be extracted in a frame separated by a set from the reference frame.

보정 프레임 생성단계(S380)에는 기준 프레임에 보충 데이터를 합성하여 보정 프레임을 생성할 수 있다. 또한, 정지영상 저장단계(S390)에는 보정 프레임을 정지 영상으로 저장할 수 있다. In the correction frame generation step (S380), the correction frame may be generated by synthesizing the supplementary data with the reference frame. In addition, the still image storage step (S390) may store the correction frame as a still image.

본 발명에 따르면, 동영상에서 선택된 기준 프레임에서 흐림 영역을 제거하고, 다른 프레임에서 흐림 영역을 보충하여 정지 영상을 추출할 수 있다. 따라서, 기준 프레임에서 흐림 영역이 제거된 영상을 얻을 수 있으므로, 동영상에서 향상된 화질의 정지 영상을 추출할 수 있다. According to the present invention, a still image may be extracted by removing a blur region from a selected reference frame in a video and supplementing the blur region in another frame. Therefore, since an image from which the blur region is removed from the reference frame can be obtained, a still image of improved quality can be extracted from the video.

도 5에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치(500)의 블록도가 도시되어 있다. 디지털 영상 처리장치(500)는 도 3에 도시된 디지털 영상 처리장치의 제어방법(S300)에 의하여 제어될 수 있다. 5 is a block diagram of a digital image processing apparatus 500 according to a preferred embodiment of the present invention. The digital image processing apparatus 500 may be controlled by the control method S300 of the digital image processing apparatus illustrated in FIG. 3.

도면을 참조하면, 디지털 영상 처리장치(500)는 영상 입력부(510); 제어부(520); 저장부(530, 540); 표시부(550); 및 사용자 조작부(560)를 구비할 수 있다. 디지털 영상 처리장치(500)는 도 3에 도시된 디지털 영상 처리장치의 제어방법(S300)에 의하여 제어되므로 도 3에 관한 설명에서와 동일한 사항에 대해서는 이를 참조한다. Referring to the drawings, the digital image processing apparatus 500 includes an image input unit 510; The controller 520; Storage units 530 and 540; Display unit 550; And a user manipulation unit 560. Since the digital image processing apparatus 500 is controlled by the control method (S300) of the digital image processing apparatus illustrated in FIG. 3, the same as in the description of FIG. 3 will be referred to.

본 발명에 따른 디지털 영상 처리장치(500)는 동영상에 포함된 선택된 기준 프레임과 기준 프레임과 비교되는 비교 프레임을 포함한 복수의 프레임 영상으로부터 기준 프레임에 해당하는 정지 영상을 추출할 수 있다. 이때, 기준 프레임을 비 교 프레임과 비교하여, 기준 프레임에서 흐리게 나타날 수 있는 흐림 영역을 검출하고 이를 제거할 수 있다. The digital image processing apparatus 500 according to the present invention may extract a still image corresponding to a reference frame from a plurality of frame images including a selected reference frame included in a video and a comparison frame compared with the reference frame. In this case, the reference frame may be compared with the comparison frame to detect and remove a blur area that may appear blurred in the reference frame.

따라서, 동영상에서 정지 영상을 추출하고자 선택된 시점에서의 기준 프레임에서 흐림 영역이 제거된 정지 영상을 추출할 수 있다. 또한, 비교 프레임에서 기준 프레임의 흐림 영역에 대응되는 보충 데이터를 추출하고, 보충 데이터를 기준 프레임에 합성하여 보정 프레임을 생성하고, 보정 프레임을 정지 영상으로 저장할 수 있다. Therefore, the still image from which the blur region is removed may be extracted from the reference frame at the time point selected to extract the still image from the video. In addition, the supplementary data corresponding to the blur region of the reference frame may be extracted from the comparison frame, the supplementary data may be synthesized with the reference frame to generate a correction frame, and the correction frame may be stored as a still image.

영상 입력부(510)는 동영상을 입력받는다. 제어부(520)는 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임의 인접하는 프레임인 비교 프레임과의 차이가 설정된 기준값보다 큰 경우에, 기준 프레임에서 비교 프레임과 차이가 큰 영역을 제거하여 정지 영상을 생성한다. The image input unit 510 receives a video. The controller 520 may have a large difference from the comparison frame in the reference frame when the difference between the comparison frame, which is an adjacent frame of the reference frame, from which the still image is to be extracted is greater than the set reference value. Remove the area to create a still image.

저장부(530, 540)에는 기준 프레임의 데이터 및 비교 프레임의 데이터와 동영상 및 정지 영상이 저장될 수 있다. 사용자 조작부(560)는 외부로부터 원하는 지령을 입력할 수 있도록 사용자가 조작한다. The storage units 530 and 540 may store data of a reference frame, data of a comparison frame, a moving picture, and a still image. The user operation unit 560 manipulates a user to input a desired command from the outside.

입력 영상을 입력받는 영상 입력부(510)는 도 2의 광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등을 포함할 수 있다. 또한, 영상 입력부(도 5의 510)는 외부에서 생성된 동영상이 입력될 수 있도록 하는 입력장치를 포함할 수 있다. The image input unit 510 receiving the input image may include the optical system OPS, the photoelectric conversion unit OEC, the CDS-ADC device 201, and the like of FIG. 2. In addition, the image input unit 510 of FIG. 5 may include an input device for inputting an externally generated video.

사용자 조작부(560)는 사용자가 외부로부터 조작하고자 하는 사항을 입력할 수 있도록 할 수 있다. 이때, 사용자 조작부(560)의 조작에 의하여 입력되는 사용자 입력에 의하여, 동영상으로부터 정지 영상의 추출 작동이 시작되고, 동영상으로 부터 정지 영상이 추출될 기준 시점이 입력될 수 있다. The user manipulation unit 560 may allow a user to input items to be manipulated from the outside. In this case, the extraction operation of the still image may be started from the moving image by a user input input by an operation of the user manipulation unit 560, and a reference time point from which the still image is extracted from the moving image may be input.

제어부(520)에서 도 3에 도시된 디지털 영상 처리장치의 제어방법(S300)이 수행될 수 있다. 제어부(520)는 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임의 인접하는 프레임인 비교 프레임과의 차이가 설정된 기준값보다 큰 경우에, 기준 프레임에서 비교 프레임과 차이가 큰 영역을 제거하여 정지 영상을 생성한다. The controller 520 may perform the control method S300 of the digital image processing apparatus illustrated in FIG. 3. The controller 520 may have a large difference from the comparison frame in the reference frame when the difference between the comparison frame, which is an adjacent frame of the reference frame, from which the still image is to be extracted is greater than the set reference value. Remove the area to create a still image.

이때, 기준 프레임에서 비교 프레임과 차이가 큰 영역을 흐림 영역으로 하고, 흐림 영역을 제거하고, 비교 프레임에서 흐림 영역에 대응되는 보충 데이터를 추출하여 기준 프레임과 합성하여 보정 프레임을 생성하고, 보정 프레임을 정지 영상으로 저장할 수 있다. In this case, a region having a large difference from the comparison frame in the reference frame is a blur region, a blur region is removed, and supplemental data corresponding to the blur region is extracted from the comparison frame and synthesized with the reference frame to generate a correction frame. Can be saved as a still image.

비교 프레임은 기준 프레임에 대하여 시간적으로 앞 또는 뒤로 인접하는 하나 또는 복수개의 프레임 영상들이 될 수 있다. 도 4에 도시된 실시예에서 하나의 프레임이 기준 프레임(In)으로 선택된 경우에 시간적으로 앞으로 인접하는 프레임 영상(In-1) 또는 시간적으로 뒤로 인접하는 프레임 영상(In+1)이 될 수 있다. The comparison frame may be one or a plurality of frame images that are temporally forward or backward with respect to the reference frame. In the embodiment shown in FIG. 4, when one frame is selected as the reference frame I n , the frame image I n-1 adjacent to the temporal forward or the frame image I n + 1 adjacent to the temporal backward is Can be.

다른 실시예로서, 비교 프레임이 기준 프레임(In)에 대하여 시간적으로 앞으로 인접하는 프레임 영상(In-1)과 기준 프레임(In)에 대하여 시간적으로 뒤로 인접하는 프레임 영상(In+1)을 모두 포함할 수 있다. As another example, comparing a frame is a reference frame (I n) with a time to the frame adjacent to the next image (I n-1) and reference frame (I n) in time frame image adjacent to the back (I n + 1 with respect to the relative ) May be included.

한편, 동영상을 구성하는 프레임 영상들(40)은, I 프레임 영상들(41), B 프 레임 영상들(42), 및 P 프레임 영상들(43)을 구비할 수 있다. The frame images 40 constituting the video may include I frame images 41, B frame images 42, and P frame images 43.

I 프레임 영상들(41)은 프레임 내의 부호화 데이터를 포함한다. B 프레임 영상들(42)은 시간적으로 앞 및 뒤로 인접하는 I 프레임 영상들(41)로부터 예측되도록 하는 쌍방향 부호화 데이터를 포함한다. P 프레임 영상들(43)은 시간적으로 앞으로 인접하는 I 프레임 영상들(41)로부터 예측되도록 하는 순방향 부호화 데이터를 포함한다. I frame images 41 include encoded data in a frame. The B frame images 42 include bidirectionally encoded data to be predicted from adjacent I frame images 41 in front and behind in time. The P frame images 43 include forward coded data to be predicted from temporally adjacent I frame images 41.

이때, 기준 프레임 및 비교 프레임이 I 프레임 영상(41)으로부터 추출될 수 있다. 또한, 비교 프레임이 기준 프레임에 대하여 시간적으로 연속되는 I 프레임인 것이 바람직하다. 즉, 시간적으로 연속되는 I 프레임들 사이에 영상에서 변화가 기준값보다 큰 영역은 형상이 흐리게 보이는 흐림 영역으로 볼 수 있을 것이다. In this case, the reference frame and the comparison frame may be extracted from the I frame image 41. It is also preferable that the comparison frame is an I frame that is contiguous in time with respect to the reference frame. That is, a region where a change is greater than a reference value in the image between temporally consecutive I frames may be viewed as a blur region where the shape is blurred.

저장부(530, 540)에는 동영상, 기준값, 기준 프레임, 비교 프레임, 설정값, 및 정지영상 등이 저장될 수 있다. 저장부(530, 540)는 제1 저장부(530) 및 제2 저장부(540)를 구비할 수 있다. The storage units 530 and 540 may store a moving picture, a reference value, a reference frame, a comparison frame, a setting value, and a still image. The storage units 530 and 540 may include a first storage unit 530 and a second storage unit 540.

이때, 제1 저장부(530)에는 기준 프레임, 비교 프레임, 및 설정값이 일시적으로 저장될 수 있다. 제2 저장부(540)에는 동영상과 기준값, 그리고 동영상으로부터 추출된 정지 영상이 비휘발성으로 저장될 수 있다. In this case, the reference frame, the comparison frame, and the setting value may be temporarily stored in the first storage unit 530. The second storage unit 540 may store a video, a reference value, and a still image extracted from the video in a nonvolatile manner.

제1 저장부(530)는 데이터를 일시적으로 저장하는 DRAM(도 2의 204) 또는 캐시 메모리 등이 될 수 있다. 제2 저장부(540)는 데이터가 비휘발성으로 저장되는 것으로, 플래시 메모리 또는 메모리 카드 등이 될 수 있다. The first storage unit 530 may be a DRAM (204 of FIG. 2) or a cache memory that temporarily stores data. The second storage unit 540 stores data non-volatilely, and may be a flash memory or a memory card.

사용자 조작부(560)는 외부로부터 원하는 지령을 입력할 수 있도록 사용자가 조작할 수 있다. 방향 버튼(도 1의 21), 메뉴-OK 버튼(도 1의 22), 셔터 릴리즈 버튼(도 1의 26), 및 전원 스위치(도 1의 28) 등은 사용자 조작부(560)에 포함될 수 있다. The user manipulation unit 560 may be manipulated by a user to input a desired command from the outside. The direction button 21 (in FIG. 1), the menu-OK button (22 in FIG. 1), the shutter release button (26 in FIG. 1), the power switch (28 in FIG. 1), and the like may be included in the user operator 560. .

본 발명에 따르면, 동영상에 포함된 선택된 특정 프레임을 포함한 복수의 프레임 영상으로부터 정지 영상을 추출함으로써, 향상된 화질의 정지 영상을 추출할 수 있다. According to the present invention, by extracting a still image from a plurality of frame images including a selected specific frame included in the video, it is possible to extract a still image of improved image quality.

본 발명은 첨부된 도면에 도시된 일 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다. 따라서, 본 발명의 진정한 보호 범위는 첨부된 청구 범위에 의해서만 정해져야 할 것이다. Although the present invention has been described with reference to one embodiment shown in the accompanying drawings, it is merely an example, and those skilled in the art may realize various modifications and equivalent other embodiments therefrom. I can understand. Accordingly, the true scope of protection of the invention should be defined only by the appended claims.

도 1은 본 발명에 따른 디지털 영상 처리장치의 실시예로서, 디지털 카메라의 뒷면 외형을 보여주는 도면이다. 1 is a diagram illustrating a rear surface of a digital camera as an embodiment of a digital image processing apparatus according to the present invention.

도 2는 도 1의 디지털 카메라 내부에 포함될 수 있는 제어장치를 개략적으로 도시한 블록도이다. FIG. 2 is a block diagram schematically illustrating a control apparatus that may be included in the digital camera of FIG. 1.

도 3은 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법을 개략적으로 도시한 흐름도이다. 3 is a flowchart schematically illustrating a control method of a digital image processing apparatus as a preferred embodiment according to the present invention.

도 4는 본 발명에 따라 정지 영상이 추출되는 동영상의 일 실시예의 개략적인 구조를 보여주는 도면이다. 4 is a diagram illustrating a schematic structure of an embodiment of a video from which a still image is extracted according to the present invention.

도 5는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치를 개략적으로 도시한 블록도이다. 5 is a block diagram schematically showing a digital image processing apparatus as a preferred embodiment according to the present invention.

Claims (18)

(a) 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임을 추출하는 단계; (a) extracting a reference frame of a time point at which a still image is to be extracted from the frame images constituting the moving image; (b) 상기 동영상을 구성하는 상기 프레임 영상들 중에서 상기 기준 프레임과 비교 대상이 되는 비교 프레임을 추출하는 단계; extracting a comparison frame to be compared with the reference frame among the frame images constituting the moving image; (c) 상기 기준 프레임을 상기 비교 프레임과 비교하여 상기 기준 프레임에서 흐림 영역을 검출하는 단계; 및 (c) comparing the reference frame with the comparison frame to detect a blur region in the reference frame; And (d) 상기 흐림 영역이 검출된 경우에 상기 기준 프레임에서 상기 흐림 영역을 제거하여 정지 영상을 생성하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.and (d) generating a still image by removing the blur area from the reference frame when the blur area is detected. 제1항에 있어서, The method of claim 1, 상기 동영상을 구성하는 프레임 영상들이, Frame images constituting the video, 상기 동영상이 프레임 내의 부호화 데이터를 포함하는 I 프레임, An I frame in which the video includes encoded data in a frame, 시간적으로 앞 또는 뒤로 인접하는 상기 I 프레임 영상들로부터 예측되도록 하는 쌍방향 부호화 데이터를 포함하는 B 프레임, 및 A B frame including bidirectionally encoded data which is predicted from the I frame images that are temporally forward or backward adjacent, and 시간적으로 앞으로 인접하는 상기 I 프레임 영상들로부터 예측되도록 하는 순방향 부호화 데이터를 포함하는 P 프레임을 구비하는 디지털 영상 처리장치의 제어방법.And a P frame including forward encoded data to be predicted from the adjacent I frame images in time forward. 제2항에 있어서, The method of claim 2, 상기 기준 프레임 및 상기 비교 프레임이 상기 I 프레임으로부터 추출되는 디지털 영상 처리장치의 제어방법.And the reference frame and the comparison frame are extracted from the I frame. 제2항에 있어서, The method of claim 2, 상기 비교 프레임이 상기 기준 프레임에 대하여 시간적으로 연속되는 I 프레임인 디지털 영상 처리장치의 제어방법.And the comparison frame is an I frame that is contiguous in time with respect to the reference frame. 제1항에 있어서, The method of claim 1, 상기 비교 프레임이 상기 기준 프레임에 대하여 시간적으로 앞 또는 뒤로 인접하는 하나 또는 복수개의 상기 프레임 영상들인 디지털 영상 처리장치의 제어방법.And the comparison frame is one or a plurality of the frame images adjacent in time or backward with respect to the reference frame. 제1항에 있어서, The method of claim 1, 상기 비교 프레임이, 상기 기준 프레임에 대하여 시간적으로 앞으로 인접하는 프레임 영상, 및 상기 기준 프레임에 대하여 시간적으로 뒤로 인접하는 프레임 영상을 포함하는 디지털 영상 처리장치의 제어방법.And a frame image adjacent in time forward with respect to the reference frame, and a frame image adjacent in time backward with respect to the reference frame. 제1항에 있어서, The method of claim 1, 상기 (c) 단계가, In step (c), 상기 기준 프레임과 상기 비교 프레임을 비교하여 그 차이값을 산출하는 단계, Comparing the reference frame with the comparison frame to calculate a difference value; 상기 차이값을 설정된 기준값과 비교하는 단계, 및 Comparing the difference value with a set reference value, and 상기 차이값이 상기 기준값보다 큰 경우에 상기 기준 프레임에서 상기 흐림 영역을 검출하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.And detecting the blurring area in the reference frame when the difference value is larger than the reference value. 제7항에 있어서, The method of claim 7, wherein 상기 차이값이 상기 기준값보다 작은 경우에 상기 기준 프레임을 상기 정지 영상으로 저장하는 단계를 더 구비하는 디지털 영상 처리장치의 제어방법.And storing the reference frame as the still image when the difference value is smaller than the reference value. 제1항에 있어서, The method of claim 1, 상기 (d) 단계가, In step (d), 상기 기준 프레임에서 상기 흐림 영역을 제거하는 단계, Removing the blur area from the reference frame; 상기 동영상을 구성하는 다른 프레임 영상들 중의 적어도 어느 하나에서 상기 흐림 영역에 대응되는 보충 데이터를 추출하는 단계, Extracting supplementary data corresponding to the blur region from at least one of other frame images constituting the moving image; 상기 기준 프레임에 상기 보충 데이터를 합성하여 보정 프레임을 생성하는 단계, 및 Synthesizing the supplemental data with the reference frame to generate a correction frame, and 상기 보정 프레임을 상기 정지 영상으로 저장하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.And storing the correction frame as the still image. 제9항에 있어서, The method of claim 9, 상기 보충 데이터가 상기 비교 프레임에서 추출되는 디지털 영상 처리장치의 제어방법.And the supplementary data is extracted from the comparison frame. 동영상을 입력받는 영상 입력부; 및 Image input unit for receiving a video; And 상기 동영상을 구성하는 프레임 영상들 중에서 정지 영상을 추출하고자 하는 시점의 기준 프레임의 인접하는 프레임인 비교 프레임과의 차이가 설정된 기준값보다 큰 경우에 상기 기준 프레임에서 상기 비교 프레임과 차이가 큰 영역을 제거하여 정지 영상을 생성하는 제어부를 구비하는 디지털 영상 처리장치.When the difference between the comparison frame, which is the adjacent frame of the reference frame, from which the still image is to be extracted is greater than the set reference value, among the frame images constituting the video, an area having a large difference from the comparison frame is removed from the reference frame. And a control unit for generating a still image. 제11항에 있어서, The method of claim 11, 상기 기준 프레임에서 상기 비교 프레임과 차이가 큰 영역을 흐림 영역으로 하고, 상기 흐림 영역을 제거하고, 상기 비교 프레임에서 상기 흐림 영역에 대응되는 보충 데이터를 추출하여 상기 기준 프레임과 합성하여 보정 프레임을 생성하고, 상기 보정 프레임을 정지 영상으로 저장하는 디지털 영상 처리장치.In the reference frame, a region having a large difference from the comparison frame is a blur region, the blur region is removed, and supplemental data corresponding to the blur region is extracted from the comparison frame and synthesized with the reference frame to generate a correction frame. And store the correction frame as a still image. 제11항에 있어서, The method of claim 11, 상기 기준 프레임의 데이터 및 상기 비교 프레임의 데이터가 저장되는 제1 저장부; 및 A first storage unit storing data of the reference frame and data of the comparison frame; And 상기 동영상 및 상기 정지 영상이 저장되는 제2 저장부를 더 구비하는 디지털 영상 처리장치.And a second storage unit for storing the moving image and the still image. 제11항에 있어서, The method of claim 11, 상기 동영상을 구성하는 프레임 영상들이, Frame images constituting the video, 상기 동영상이 프레임 내의 부호화 데이터를 포함하는 I 프레임, An I frame in which the video includes encoded data in a frame, 시간적으로 앞 또는 뒤로 인접하는 상기 I 프레임 영상들로부터 예측되도록 하는 쌍방향 부호화 데이터를 포함하는 B 프레임, 및 A B frame including bidirectionally encoded data which is predicted from the I frame images that are temporally forward or backward adjacent, and 시간적으로 앞으로 인접하는 상기 I 프레임 영상들로부터 예측되도록 하는 순방향 부호화 데이터를 포함하는 P 프레임을 구비하는 디지털 영상 처리장치.And a P frame including forward encoded data to be predicted from the I frame images adjacent in time forward. 제14항에 있어서, The method of claim 14, 상기 기준 프레임 및 상기 비교 프레임이 상기 I 프레임으로부터 추출되는 디지털 영상 처리장치.And the reference frame and the comparison frame are extracted from the I frame. 제14항에 있어서, The method of claim 14, 상기 비교 프레임이 상기 기준 프레임에 대하여 시간적으로 연속되는 I 프레임인 디지털 영상 처리장치.And the comparison frame is an I frame that is contiguous in time with respect to the reference frame. 제11항에 있어서, The method of claim 11, 상기 비교 프레임이 상기 기준 프레임에 대하여 시간적으로 앞 또는 뒤로 인접하는 하나 또는 복수개의 상기 프레임 영상들인 디지털 영상 처리장치.And the comparison frame is one or a plurality of the frame images adjacent in time or backward with respect to the reference frame. 제11항에 있어서, The method of claim 11, 상기 비교 프레임이, 상기 기준 프레임에 대하여 시간적으로 앞으로 인접하는 프레임 영상, 및 상기 기준 프레임에 대하여 시간적으로 뒤로 인접하는 프레임 영상을 포함하는 디지털 영상 처리장치.And the frame includes a frame image that is temporally adjacent to the reference frame in time and a frame image that is temporally backward in relation to the reference frame.
KR1020080022144A 2008-03-10 2008-03-10 Apparatus for processing digital image and method for controlling thereof KR101446774B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080022144A KR101446774B1 (en) 2008-03-10 2008-03-10 Apparatus for processing digital image and method for controlling thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080022144A KR101446774B1 (en) 2008-03-10 2008-03-10 Apparatus for processing digital image and method for controlling thereof

Publications (2)

Publication Number Publication Date
KR20090097005A true KR20090097005A (en) 2009-09-15
KR101446774B1 KR101446774B1 (en) 2014-10-01

Family

ID=41356523

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080022144A KR101446774B1 (en) 2008-03-10 2008-03-10 Apparatus for processing digital image and method for controlling thereof

Country Status (1)

Country Link
KR (1) KR101446774B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013165210A1 (en) * 2012-05-03 2013-11-07 에스케이텔레콤 주식회사 Image processing apparatus for removing haze contained in still image and method thereof
WO2013172580A1 (en) * 2012-05-15 2013-11-21 에스케이텔레콤 주식회사 Image-processing apparatus for removing haze contained in video, and method therefor
KR20200122596A (en) * 2019-04-18 2020-10-28 (주)디디오넷코리아 Systems for providing high-definition images from selected video and method thereof
KR102347512B1 (en) * 2020-12-15 2022-01-05 주식회사 유라코퍼레이션 Thumbnail extraction system and method for drive video record system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3832924B2 (en) * 1997-04-11 2006-10-11 キヤノン株式会社 Image signal processing method, image signal processing apparatus, and computer-readable recording medium
JP2000350233A (en) 1999-06-03 2000-12-15 Nec Microcomputer Technology Ltd System and method for still picture processing in moving picture reproduction
KR100557858B1 (en) * 2003-09-27 2006-03-10 학교법인 인하학원 Apparatus and method for extracting the representative still images from MPEG video
KR20080058926A (en) * 2006-12-22 2008-06-26 삼성전자주식회사 Image device of capturing still image and method thereof

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013165210A1 (en) * 2012-05-03 2013-11-07 에스케이텔레콤 주식회사 Image processing apparatus for removing haze contained in still image and method thereof
US9336577B2 (en) 2012-05-03 2016-05-10 Sk Telecom Co., Ltd. Image processing apparatus for removing haze contained in still image and method thereof
WO2013172580A1 (en) * 2012-05-15 2013-11-21 에스케이텔레콤 주식회사 Image-processing apparatus for removing haze contained in video, and method therefor
US9275443B2 (en) 2012-05-15 2016-03-01 Sk Telecom Co., Ltd. Image-processing apparatus for removing haze contained in video, and method therefof
KR20200122596A (en) * 2019-04-18 2020-10-28 (주)디디오넷코리아 Systems for providing high-definition images from selected video and method thereof
KR102347512B1 (en) * 2020-12-15 2022-01-05 주식회사 유라코퍼레이션 Thumbnail extraction system and method for drive video record system

Also Published As

Publication number Publication date
KR101446774B1 (en) 2014-10-01

Similar Documents

Publication Publication Date Title
KR101387404B1 (en) Apparatus of controlling digital image processing apparatus and method thereof
KR101398475B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101446774B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101510101B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101378335B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101396347B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101411912B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101396333B1 (en) Apparatus for processing digital image and method controlling thereof
KR101564417B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101480401B1 (en) Apparatus of processing digital image and method of controlling thereof
KR20080090174A (en) Method of controlling digital image processing apparatus and apparatus thereof
KR20100070053A (en) Apparatus for processing digital image and method for controlling thereof
KR101411318B1 (en) Apparatus for processing digital image and method for controlling thereof
KR20100077719A (en) Apparatus for processing digital image and method for controlling thereof
KR101362769B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101510106B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101387408B1 (en) Apparatus for processing digital image and method for controlling thereof
KR20090077486A (en) Apparatus for processing digital image and method for controlling thereof
KR101288914B1 (en) Method of controlling digital image processing apparatus and apparatus thereof
KR101444101B1 (en) Apparatus for processing digital image and method for controlling thereof
KR20110056102A (en) Apparatus for processing digital image and method for controlling thereof
KR101537950B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101336924B1 (en) Apparatus for processing digital image and method for controlling thereof
KR101612448B1 (en) Apparatus for processing digital image and method for controlling thereof
KR20100056279A (en) Apparatus for processing digital image and method for controlling thereof

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170830

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180830

Year of fee payment: 5