KR101533279B1 - Method of controlling digital image signal processing apparatus for derterming image blurring, medium of recording the method, digital image signal processing apparatus of applying the method - Google Patents
Method of controlling digital image signal processing apparatus for derterming image blurring, medium of recording the method, digital image signal processing apparatus of applying the method Download PDFInfo
- Publication number
- KR101533279B1 KR101533279B1 KR1020080133779A KR20080133779A KR101533279B1 KR 101533279 B1 KR101533279 B1 KR 101533279B1 KR 1020080133779 A KR1020080133779 A KR 1020080133779A KR 20080133779 A KR20080133779 A KR 20080133779A KR 101533279 B1 KR101533279 B1 KR 101533279B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- information
- edge information
- signal processing
- reference image
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
본 발명은 포커스(focus)가 맞은 기준 영상 및 촬영 영상을 생성하고, 상기 촬영 영상 각각의 영상 정보를 도출한 후, 상기 기준 영상의 제1 영상 정보에 대응하는 상기 촬영 영상의 제2 영상 정보를 비교하여 상기 촬영 영상이 흔들린 영상인지를 판단하는 디지털 영상 신호 처리 장치의 제어 방법에 관한 것이다. 또한, 상기 방법을 기록한 기록 매체, 상기 방법에 의해 동작하는 디지털 영상 신호 처리 장치에 관한 것이다. 따라서, 촬영 영상을 확대하거나 외부 모니터에 연결하여 확인하지 않아도, 흔들림 여부를 용이하게 구별할 수 있다.
The present invention relates to a method and apparatus for generating a reference image and a shot image with proper focus and deriving image information of each of the shot images and then generating second image information of the shot image corresponding to the first image information of the reference image And determining whether the captured image is a shaken image. The present invention also relates to a recording medium on which the above method is recorded, and a digital video signal processing apparatus operated by the above method. Therefore, it is possible to easily discriminate whether or not the camera shake, without enlarging the photographed image or connecting it to an external monitor for confirmation.
Description
본 발명은 흔들린 영상을 판별하는 디지털 영상 신호 처리 장치의 제어 방법, 이를 기록한 기록 매체, 상기 방법을 채용한 디지털 영상 신호 처리 장치에 관한 것이다. The present invention relates to a control method of a digital video signal processing apparatus for discriminating a shaken image, a recording medium on which the digital video signal processing apparatus is recorded, and a digital video signal processing apparatus employing the method.
디지털 카메라로 촬영할 때, 사용자의 촬영 미숙이나 기타 외부 영향으로 흔들린 촬영 영상을 얻는 경우가 있다. 사용자는 촬영 후, 곧 바로 확인하여 흔들린 영상인 경우 삭제하거나 다시 찍는 조치를 취할 수 있다. 그러나 디지털 카메라의 소형화를 위해 이에 채용되어 있는 디스플레이 장치도 작은 해상도를 가질 수밖에 없다. 따라서 촬영 후, 상기 디스플레이 장치에서 촬영 영상 확인 시에 전체를 디스플레이해서는 흔들림 정도를 육안으로 구별할 수 없는 경우가 있으며, 상기 촬영 영상을 확대해 확인하여야 하는 불편함이 있다. 확대하여 확인하는 경우도 있지만 확대하더라도 디지털 카메라에 채용된 디스플레이 장치에서는 육안으로 식별하지 못하는 경우도 있다.When taking a picture with a digital camera, there may be a case in which a shaken shot image is obtained due to inexperience of the user or other external influences. The user can immediately check the image immediately after shooting, and take a measure to delete or re-take the image if it is a shaken image. However, in order to miniaturize a digital camera, a display device employed therein has a small resolution. Therefore, there is a case that the degree of shake can not be visually distinguished when displaying the entire image at the time of confirming the photographed image on the display device after shooting, and it is inconvenient to magnify and confirm the photographed image. It may be magnified and confirmed, but even if enlarged, it may not be visually recognized in a display device employed in a digital camera.
본 발명은 디지털 영상 신호 처리 장치에서 촬영 영상의 흔들림을 효과적으로 판단할 수 있는 제어 방법, 이를 기록한 기록 매체, 상기 제어 방법에 따라 동작하는 디지털 영상 신호 처리 장치를 제공하고자 한다. An object of the present invention is to provide a control method capable of effectively determining a shake of a photographed image in a digital image signal processing apparatus, a recording medium on which the digital image signal processing apparatus records, and a digital image signal processing apparatus operating in accordance with the control method.
본 발명은 포커스(focus)가 맞은 기준 영상을 생성하는 단계와, 촬영 영상을 생성하는 단계와, 상기 기준 영상 및 상기 촬영 영상 각각의 영상 정보를 도출하는 단계와, 상기 기준 영상의 제1 영상 정보에 대응하는 상기 촬영 영상의 제2 영상 정보를 비교하는 단계와, 상기 제1 영상 정보와 상기 제2 영상 정보가 상이하다면, 상기 촬영 영상은 흔들린 영상으로 결정하는 단계를 구비하는 디지털 영상 신호 처리 장치의 제어 방법을 제공한다.According to an aspect of the present invention, there is provided a method of generating a reference image, the method comprising: generating a reference image with a focused focus; generating an imaging image; deriving image information of each of the reference image and the captured image; Comparing the second image information of the photographed image corresponding to the first image information and the second image information of the photographed image corresponding to the first image information and the second image information, As shown in FIG.
본 발명의 일 실시 예에 관한 디지털 영상 신호 처리 장치의 제어 방법에 있어서, 상기 영상 정보는 피사체를 구별하는 특징점일 수 있다. 따라서, 상기 제어 방법은 제2항에 있어서, 상기 기준 영상 및 상기 촬영 영상 각각의 적어도 하나의 특징점을 추출하고, 상기 기준 영상의 제1 특징점에 대응하는 상기 촬영 영상의 제2 특징점을 비교하여, 상기 제1 특징점과 상기 제2 특징점이 상이하다면 상기 촬영 영상을 흔들린 영상으로 판단할 수 있다. 일 실시 예로서, 상기 제1 특징점과 상기 제2 특징점의 개수를 비교하여, 상기 제1 특징점에 대응하는 제2 특징점이 복수개인 경우 상기 촬영 영상을 흔들린 영상으로 판단할 수 있다. In the method of controlling a digital video signal processing apparatus according to an embodiment of the present invention, the image information may be a minutiae that distinguishes a subject. The control method according to claim 2, further comprising: extracting at least one feature point of each of the reference image and the captured image, comparing second feature points of the captured image corresponding to the first feature points of the reference image, If the first feature point and the second feature point are different, the captured image may be judged as a shaken image. In one embodiment, the number of the first feature points is compared with the number of the second feature points, and if the second feature points corresponding to the first feature points exist, the captured image may be determined as a shaken image.
본 발명의 다른 실시 예에 관한 디지털 영상 신호 처리 장치의 제어 방법에 있어서, 상기 영상 정보는 에지(edge) 정보일 수 있다. 에지 정보인 경우, 상기 기준 영상 및 상기 촬영 영상 각각의 적어도 하나의 에지 정보를 추출하는 단계와, 상기 기준 영상의 제1 에지 정보에 대응하는 상기 촬영 영상의 제2 에지 정보를 비교하는 단계와, 상기 제1 에지 정보와 상기 제2 에지 정보가 상이한 경우 상기 촬영 영상을 흔들린 영상으로 결정하는 단계를 구비할 수 있다. 상기 에지 정보의 비교는 상기 제1 에지 정보와 상기 제2 에지 정보의 데이터를 비교하는 것일 수 있다. In the control method of the digital video signal processing apparatus according to another embodiment of the present invention, the image information may be edge information. Extracting at least one edge information of each of the reference image and the photographed image when the edge image is edge information, comparing second edge information of the photographed image corresponding to the first edge information of the reference image, And determining the captured image as a shaken image when the first edge information and the second edge information differ from each other. The comparison of the edge information may be to compare the data of the first edge information and the data of the second edge information.
또한, 본 발명은 상술한 디지털 영상 신호 처리 장치의 제어 방법을 기록한 기록 매체를 제공할 수 있다.Further, the present invention can provide a recording medium on which the above-described control method of the digital video signal processing apparatus is recorded.
아울러, 본 발명은 포커스(focus)가 맞은 기준 영상 및 촬영 영상을 생성하는 제1 영상 신호 처리부와, 상기 기준 영상 및 촬영 영상 각각으로부터 영상 정보를 도출하는 제2 영상 신호 처리부와, 상기 기준 영상의 제1 영상 정보에 대응하는 상기 촬영 영상의 제2 영상 정보를 비교하는 비교 판단부와, 상기 제1 영상 정보와 상기 제2 영상 정보가 상이한 경우 상기 촬영 영상은 흔들린 영상으로 결정하는 제어부를 구비하는 디지털 영상 신호 처리 장치를 제공한다.According to another aspect of the present invention, there is provided an image processing apparatus including a first image signal processor for generating a reference image and an image shot with focus, a second image signal processor for deriving image information from each of the reference image and the shot image, A comparison unit for comparing second image information of the photographed image corresponding to the first image information and a control unit for determining the photographed image as a shaken image when the first image information and the second image information are different A digital video signal processing apparatus is provided.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서, 상기 제2 영상 신호 처리부는 상기 기준 영상 및 상기 촬영 영상으로부터 피사체를 구별하는 특징점을 추출하는 특징점 추출부를 구비하여, 상기 비교 판단부에서 상기 기준 영상의 제1 특징점과 상기 제1 특징점에 대응하는 상기 촬영 영상의 제2 특징점을 비교판단하 도록 할 수 있다. 일 예로서, 상기 비교 판단부는 상기 제1 특징점과 상기 제2 특징점의 개수를 비교할 수 있다. In the digital video signal processing apparatus according to the present invention, the second video signal processing section may include a feature point extracting section that extracts feature points that distinguish the subject from the reference image and the captured image, The first feature point and the second feature point of the photographed image corresponding to the first feature point may be compared and determined. As an example, the comparison determination unit may compare the number of the first feature points with the number of the second feature points.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서, 상기 제2 영상 신호 처리부는 상기 기준 영상 및 상기 촬영 영상으로부터 에지 정보를 추출하는 에지 정보 추출부를 구비할 수 있다. 이때, 상기 비교 판단부는 상기 기준 영상의 제1 에지 정보와 상기 제1 에지 정보에 대응하는 상기 촬영 영상의 제2 에지 정보를 비교할 수 있다. 특히, 상기 비교 판단부는 상기 제1 에지 정보와 상기 제2 에지 정보의 데이터를 비교할 수 있다. In the digital video signal processing apparatus according to the present invention, the second video signal processing unit may include an edge information extracting unit for extracting edge information from the reference image and the photographed image. Here, the comparison determination unit may compare the first edge information of the reference image with the second edge information of the photographed image corresponding to the first edge information. In particular, the comparison determining unit may compare data of the first edge information and the second edge information.
본 발명에 따르면 포커스가 맞은 기준 영상과 특징점 또는 에지 정보를 비교하여 촬영 영상의 흔들림을 용이하게 확인할 수 있는 디지털 영상 신호 처리 장치의 제어 방법, 상기 방법을 기록한 기록 매체, 상기 방법에 따라 실행하는 디지털 영상 신호 처리 장치를 제공할 수 있다. According to the present invention, there is provided a control method of a digital video signal processing apparatus capable of easily checking a shake of a photographed image by comparing a focused reference image with a feature point or edge information, a recording medium on which the method is recorded, A video signal processing apparatus can be provided.
본 발명에 관한 디지털 영상 신호 처리 장치로서 디지털 카메라를 일 실시 예로서 설명한다. 그러나 상기 디지털 영상 신호 처리 장치가 디지털 카메라에 한정되는 것은 아니며, 카메라 기능이 부가된 카메라폰, PDA(personal digital assistant), PMP(portable multimedia player) 등의 디지털 기기에도 적용될 수 있다.As a digital video signal processing apparatus according to the present invention, a digital camera will be described as an embodiment. However, the digital video signal processing apparatus is not limited to a digital camera, and may be applied to a digital camera such as a camera phone, a personal digital assistant (PDA), or a portable multimedia player (PMP).
도 1a는 디지털 카메라의 사시도이고, 도 1b는 도 1a에 도시된 디지털 카메 라의 배면도이다.FIG. 1A is a perspective view of a digital camera, and FIG. 1B is a rear view of the digital camera shown in FIG. 1A.
도 1a를 참조하면, 디지털 카메라(100)의 전면에 렌즈, 렌즈 덮개 등으로 이루어진 광학부(11)가 배치되며, 광학부(11)를 기준으로 윗 쪽에 플래쉬(F)가 배치되어 있다. 또한, 상기 디지털 카메라(100)의 상면에는 전원 버튼(21), 촬영을 행하도록 제어하는 셔터-릴리즈 신호를 입력하는 셔터 버튼(22)이 배치되어 있다. 도 1b에 따르면, 디지털 카메라(100)의 배면에는 AMOLED(60)의 디스플레이 창이 배치되어 있으며, 상기 디스플레이 창 주변에 복수의 기능 버튼(26)들이 배치되어 있다.1A, an
이와 같은 디지털 카메라(100)의 내부 구성을 도 2를 함께 참조하여 설명한다. The internal structure of the
상기 디지털 카메라(100)는 피사체로부터의 광을 입력하는 광학부(10), 상기 광학부(10)를 통해 입력된 광학 신호를 전기 신호로 변환하는 촬상 소자(11), 촬상 소자(11)로부터 제공된 전기 신호에 대해 노이즈 저감 처리, 디지털 신호로 변환 처리 등의 신호 처리를 행하는 입력 신호 처리부(12)를 구비한다. 상기 광학부(10)를 구동하는 모터(13) 및 모터(13)의 동작을 제어하는 구동부(14)를 구비한다. 또한, 상기 디지털 카메라(100)는 사용자의 조작 신호를 입력하는 사용자 입력부(UI, 20), 입력 영상의 데이터, 연산 처리를 위한 데이터, 처리 결과 등을 임시 저장하는 SDRAM(30), 디지털 카메라(100)의 동작에 필요한 알고리즘, 설정 데이터 등을 저장하는 플래시 메모리(40), 영상 파일을 저장하는 기록 장치로서 SD/CF/SM 카드(50)를 구비할 수 있다. 그리고 상기 디지털 카메라(100)는 디스플레이 장치로서 유기전계발광 디스플레이 장치(60)가 장착되어 있다. 또한, 소리를 디지털 신호로 변환하거나 또는 음원의 디지털 신호를 아날로그 신호롤 변화하는 처리, 오디오 파일을 생성하는 처리 등을 수행하는 오디오 신호 처리부(71), 소리를 출력하는 스피커(72), 소리를 입력하는 마이크(73)를 구비할 수 있다. 그리고, 상기 디지털 카메라(100)는 상기 디지털 카메라(100)의 동작을 제어하는 프로세서(80)를 구비한다. The
각 구성부에 대해 더욱 구체적으로 살펴본다. Each component will be described in more detail.
상기 광학부(10)는 광학 신호를 집광하는 렌즈, 상기 광학 신호의 양(광량)을 조절하는 조리개, 광학 신호의 입력을 제어하는 셔터 등을 포함할 수 있다. 상기 렌즈는 초점 거리(focal length)에 따라 화각이 좁아지거나 또는 넓어지도록 제어하는 줌 렌즈 및 피사체의 초점을 맞추는 포커스 렌즈 등을 포함하며, 이들 렌즈들은 각각 하나의 렌즈로 구성될 수도 있지만, 복수 렌즈들의 군집으로 이루어질 수도 있다. 셔터로 가리개가 위아래로 움직이는 기계식 셔터를 구비할 수 있다. 또는 별도의 셔터 장치 대신 촬상 소자(11)에 전기 신호의 공급을 제어하여 셔터 역할을 행할 수도 있다.The
상기 광학부(10)를 구동하는 모터(13)는 오토 포커스, 자동 노출 조정, 조리개 조정, 줌, 초점 변경 등의 동작을 실행하기 위하여 렌즈의 위치, 조리개의 개폐, 셔터의 동작 등을 구동할 수 있다.The
상기 모터(13)는 구동부(14)에 의해 제어된다. 상기 구동부(14)는 프로세서(80)로부터 입력된 제어 신호에 따라 상기 모터(13)의 동작을 제어한다.The motor (13) is controlled by a driving unit (14). The
촬상 소자(11)는 광학부(10)로부터 입력된 광학 신호를 수광하여, 피사체의 상을 결상한다. 촬상 소자(11)로 CMOS(Complementary Metal Oxide Semiconductor) 센서 어레이, CCD(Charge coupled device) 센서 어레이 등을 사용할 수 있다. The
입력 신호 처리부(12)는 CCD로부터 공급된 전기 신호는 아날로그 신호로서 이를 디지털화하는 A/D 컨버터를 더 구비할 수 있다. 또한, 촬상 소자(11)로부터 제공된 전기 신호에 대해 게인(gain) 조정이나 파형을 정형화하는 신호 처리를 행하는 회로를 구비할 수 있다.The input
UI(20)는 사용자가 상기 디지털 카메라(10)를 조작하거나 촬영시 각종의 설정을 행하기 위한 부재를 포함할 수 있다. 예를 들어, 버튼, 키, 터치 패널, 터치 스크린, 다이얼 등의 형태로 구현될 수 있으며, 전원 온/오프, 촬상 개시/정지, 재생 개시/정지/서치, 광학계의 구동, 모드 변환, 메뉴 조작, 선택 조작 등의 사용자 제어 신호를 입력할 수 있다. The
SDRAM(30)은 입력 신호 처리부(12)로부터 제공된 영상의 RAW 데이터(RGB 데이터)를 임시 저장할 수 있으며, 임시 저장된 RAW 데이터는 프로세서(80)의 연산에 따라 소정의 영상 신호 처리가 행해지기도 하고, 다른 필요한 구성부로 전달되기도 한다. 또한, 상기 SDRAM(30)에는 플래시 메모리(40)에 저장된 알고리즘을 구성하는 데이터를 실행 가능한 데이터로 변환하여 임시 저장할 수도 있다. SDRAM(30)에 저장된 데이터를 이용하여 프로세서(80)에서 연산 처리하여 상기 알고리즘에 따른 동작을 수행할 수 있다. 아울러, 상기 플래시 메모리(40)에 저장한 영상 파일을 압축 해제하여 변환한 영상 데이터를 임시 저장할 수도 있다. 이렇게 임시 저장된 영상 데이터는 OLED(60)로 전송되어 소정의 영상을 디스플레이할 수도 있다. SDRAM(30) 는 일 예로서, 전원 공급 동안 데이터를 임시 기억하는 다양한 휘발성 메모리를 사용할 수 있다. The SDRAM 30 may temporarily store RAW data (RGB data) of an image provided from the input
플래시 메모리(40)는 상기 디지털 카메라(100)를 작동하는 필요한 OS, 응용 프로그램, 본 발명에 관한 제어 방법의 알고리즘을 실행하는 데이터 등을 저장할 수 있다. 플래시 메모리(40)는 일 실시 예로서, 다양한 비휘발성 메모리로 사용할 수 있다. The
SD/CF/SM 카드(50)에는 입력 신호 처리부(12)로부터 제공된 영상 데이터를 압축 처리하여 생성한 영상 파일을 기록할 수 있다. SD/CF/SM 카드(50)는 일 실시 예로서, HDD(Hard Disk Driver), 광 디스크, 광 자기 디스크, 홀로그램 메모리 등을 사용할 수도 있다.The SD / CF /
상기 유기전계발광 디스플레이 장치(OLED, 60)는 입력 신호 처리부(12)로부터 제공되는 영상 데이터에 대응하는 영상을 실시간으로 구현할 수 있으며, 또는 플래시 메모리(40)에 저장된 영상 파일을 복원한 영상 데이터에 대응하는 영상을 디스플레이할 수 있다. 본 실시 예에서는 유기전계발광 디스플레이 장치(60)를 예시하였지만, 이에 한정되는 것은 아니며 액정 디스플레이 장치, 전기영동 디스플레이 장치 등을 채용할 수 있다. The
또한, 프로세서(80)에 외부 모니터(200)를 연결하여, 상기 외부 모니터(200)에서 상기 영상들을 디스플레이되도록 할 수 있다. In addition, the
오디오 신호 처리부(71)는 프로세서(80)로부터 제공되는 음원의 디지털 신호를 소리로 변환하고, 상기 소리를 증폭하여 스피커(72)로 전달하여 출력한다. 또는 마이크(73)를 통해 소리를 입력하고, 상기 소리를 디지털 신호로 변환하여 압축하여 오디오 파일을 생성할 수 있다. 그리고 프로세서(80)로 전달하여 연산 처리를 수행하도록 할 수 있다. The audio
프로세서(80)는 입력된 영상 데이터에 대해 노이즈를 저감하고, 감마 컬렉션(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등의 영상 신호 처리를 수행할 수 있다. 또한, 영상 신호 처리하여 생성한 영상 데이터를 압축 처리하여 영상 파일을 생성할 수 있으며, 또는 상기 영상 파일로부터 영상 데이터를 복원할 수 있다. 영상의 압축형식은 가역 형식 또는 비 가역 형식이어도 된다. 적절한 형식의 예로서, JPEG(Joint Photographic Experts Group)형식이나 JPEG 2000 형식 등으로 변환도 가능하다. 또한, 프로세서(80)에서는 기능적으로 불선명 처리, 색체 처리, 블러 처리, 엣지 강조 처리, 영상 해석 처리, 영상 인식 처리, 영상 이펙트 처리 등도 행할 수 있다. 영상 이펙트 처리로서 촬상 신호의 일부를 확대한 확대 영상의 생성, 혹은 축소 영상의 생성, 모자이크 영상/휘도 반전 영상/소프트 포커스/영상 내의 일부의 강조 표시/영상 전체의 색 분위기 변환 등의 처리 등을 수행할 수 있다. 또한, 프로세서(80)에서는 OLED(60)에 디스플레이하기 위한 표시 영상 처리를 행할 수 있다. 예를 들어, 휘도 레벨 조정, 색 보정, 콘트라스트 조정, 윤곽 강조 조정, 화면 분할 처리, 캐릭터 영상 등 생성 및 영상의 합성 처리 등을 행할 수 있다. 상기 프로세서(80)는 외부 모니터(200)와 연결되어, 외부 모니터(200)에 디스플레이되도록 소정의 영상 신호 처리를 행할 수 있으며, 이렇게 처리된 영상 데이터를 전송하여 상기 외부 모니터(200)에서 해당 영상이 디스플레이되도록 제어할 수 있다.The
프로세서(80)는 상술한 바와 같은 영상 신호 처리를 수행하며, 상기 처리 결과에 따라 각 구성부를 제어할 수 있다. 또한 UI(20)를 통해 입력된 사용자의 제어 신호에 따라 각 구성부를 제어할 수 있다. 상기 영상 신호 처리를 수행하기 위한 알고리즘은 플래시 메모리(40)에 저장되어 있으며, 연산 처리를 위해 실행 가능한 데이터로 변환하여 SDRAM(30)에 저장하여 이에 따라 프로세서(80)에서 해당 연산을 수행할 수 있다. The
또한, 상기 프로세서(80)는 촬영 영상의 흔들림 판단을 위한 제어를 행할 수 있는데, 구체적으로 도 3을 함께 참조하여 설명한다. In addition, the
도 3에 따르면, 상기 프로세서(80)는 입력 신호 처리부(12)로부터 입력된 영상 데이터에 대해 기록 및/또는 재생을 위한 영상 처리를 행하여 기록 및/또는 저장용 영상을 생성하는 제1 영상 신호 처리부(81), 제1 영상 신호 처리부(81)에서 생성한 영상에 대해 영상 정보를 도출하는 제2 영상 신호 처리부(82), 도출한 영상 정보를 비교하는 비교 판단부(83), 상기 비교 결과 영상의 흔들림을 판단하는 제어부(84)를 구비할 수 있다. 3, the
일 실시 예로서, 상기 영상 정보로서 피사체의 특징점을 이용하여 촬영 영상의 흔들림을 판단하는 프로세서(80)에 대해 설명한다. As one embodiment, a
라이브-뷰(Live-view) 기간 동안 실시간으로 프리뷰 영상들이 입력되며, 사용자는 상기 프리뷰 영상을 확인하여 피사체를 확인한다. 사용자는 뷰-파인더를 통 해 피사체를 직접 확인할 수도 있다. 제1 셔터-릴리즈 신호가 입력되면 이때 입력된 영상에 대해 오토포커싱 동작을 수행한다. 상기 제1 영상 신호 처리부(81)에서 오토포커싱 동작을 수행하여 초점이 맞은 영상을 기준 영상으로 생성한다. 상기 기준 영상을 포함하여 프리뷰 영상들은 OLED(60)에 디스플레이될 수 있다. 상기 기준 영상은 SDRAM(30)의 특정 영역에 저장될 수 있다. 그리고 제2 셔터-릴리즈 신호가 입력되어 촬영 동작이 실행된다. 이때 입력된 영상을 상기 제1 영상 신호 처리부(81)에서 촬영 영상으로 생성한다. 상기 제1 영상 신호 처리부(81)에서는 입력된 영상에 대해 노이즈 저감 처리, 감마 보정, 색필터 배열보간, 색 매트릭스, 색보정, 색 향상 등의 영상 신호 처리를 행하여 기준 영상, 촬영 영상을 생성할 수 있다. During the live-view period, preview images are input in real time, and the user confirms the preview image and confirms the subject. You can also view the subject directly through the viewfinder. When the first shutter-release signal is input, an auto focusing operation is performed on the input image. The first
상기 제1 셔터-릴리즈 신호는 셔터 버튼(22)을 반누름으로 생성할 수 있으며, 제2 셔터-릴리즈 신호는 상기 셔터 버튼(22)을 완전 누름하여 생성할 수 있다. 초점을 맞춘 후, 초점이 맞은 상태에서 촬영을 행하는 것이 바람직하므로 초점을 맞추는 동작과 촬영 동작 사이 디지털 카메라(100)의 흔들림을 최소화하기 위하여 동일한 셔터 버튼(22)을 사용할 수 있다. The first shutter-release signal can be generated by half-pressing the
그리고 제2 영상 신호 처리부(82)에서 상기 기준 영상 및 상기 촬영 영상 각각의 특징점을 추출한다. 상기 특징점은 피사체를 구별하기 위한 것으로, shift 알고리즘을 통해 영상으로부터 추출할 수 있다.The second
비교 판단부(83)에서는 상기 기준 영상의 특징점과 상기 촬영 영상의 특징점을 비교할 수 있다. 상기 기준 영상의 제1 특징점에 대응하는 상기 촬영 영상의 특 징점을 비교할 수 있다. 피사체에 초점이 맞은 기준 영상에서 상기 피사체의 특징적 포인트인 제1 특징점과 촬영 영상에서 동일한 피사체의 특징적 포인트인 제2 특징점을 비교할 수 있다. 상기 기준 영상에서의 제1 특징점과 상기 제1 특징점에 대응하는 촬영 영상에서의 제2 특징점의 개수를 비교할 수 있다. 예를 들어, 초점이 맞은 기준 영상에서의 제1 특징점에 대응하는 제2 특징점이 복수 개인지 판단할 수 있다.The
상기 비교 판단부(84)의 판단 결과 상기 제1 특징점과 상기 제2 특징점이 상이한 경우, 제어부(84)에서는 촬영 영상을 흔들린 영상으로 결정하고, 이를 사용자에게 알릴 수 있다. OLED(60)에 흔들린 영상이라는 표시를 더 디스플레이하거나, 스피커(72)를 통해 알람을 출력하도록 제어할 수 있다. 상기 제1 특징점과 상기 제2 특징점이 동등 범위 내에 속하는 것으로 판단되면, 제어부(84)에서는 촬영 영상이 흔들린 영상이 아닌 것으로 결정하고 저장하도록 제어할 수 있다. If the first minutiae and the second minutiae are different from each other as a result of the comparison, the
다른 실시 예로서, 상기 영상 정보로 에지(edge) 정보를 이용하여 촬영 영상의 흔들림 여부를 판단할 수 있다. 제1 영상 신호 처리부(81)에서는 상술한 바와 같이 제1 셔터-릴리즈 신호가 입력되면 초점이 맞은 기준 영상을 생성하고, 제2 셔터-릴리즈 신호가 입력되면 촬영 영상을 생성할 수 있다.In another embodiment, edge information may be used as the image information to determine whether the photographed image is shaken. The first
그리고 제2 영상 신호 처리부(82)에서 상기 기준 영상 및 상기 촬영 영상에 대하여 에지 정보를 추출한다. 에지 정보는 영상의 경계선에 관한 데이터로서, 에지 정보로서 경계선으로 판단되는 픽셀들의 개수, 경계선으로 판단되는 데이터 값을 이용할 수 있다. The second image
상기 비교 판단부(83)에서는 기준 영상의 제1 에지 정보와 상기 제1 에지 정보에 대응하는 촬영 영상의 제2 에지 정보를 서로 비교할 수 있다. 예를 들어, 기준 영상의 제1 경계선으로 판단되는 픽셀들의 개수, 또는 상기 제1 경계선으로 판단되는 픽셀들의 데이터 값과, 촬영 영상에서 상기 제1 경계선에 대응하는 제2 경계선의 픽셀 개수 또는 데이터 값을 서로 비교할 수 있다. The
상기 비교 판단부(83)의 판단 결과 상기 제1 에지 정보와 상기 제2 에지 정보가 상이한 경우, 제어부(84)에서는 상기 촬영 영상을 흔들린 영상으로 판단하고 상기 판단을 나타내는 표시를 OLED(60)에 디스플레이하거나 스피커(72)로 알람을 출력할 수 있다. 또는 상기 제1 에지 정보와 상기 제2 에지 정보가 동등범위에 속하는 경우 상기 촬영 영상을 저장하도록 제어할 수 있다. If the first edge information differs from the second edge information as a result of the comparison, the
이하에서는 본 발명의 디지털 영상 신호 처리 장치의 제어 방법에 관한 일 실시 예를 도 4의 순서도를 참조하여 설명한다.Hereinafter, a method of controlling a digital video signal processing apparatus according to an embodiment of the present invention will be described with reference to the flowchart of FIG.
우선, 촬영 대기 상태(S11)에서 시작하여, 제1 셔터-릴리즈 신호(S1)이 입력되는지 판단한다(S12). 제1 셔터-릴리즈 신호(S1)가 입력되면 오토포커싱 동작을 수행하여 포커스가 맞는 기준 영상을 생성한다(S13). 상기 기준 영상으로부터 제1 영상 정보를 도출한다(S14). 상기 제1 셔터-릴리즈 신호(S1)가 입력되지 않으면, 계속 촬영 대기 상태(S11)를 유지한다. First, it is determined whether the first shutter-release signal S1 is input, starting from the shooting standby state S11 (S12). When the first shutter-release signal S1 is input, an auto-focusing operation is performed to generate a reference image with focus (S13). First image information is derived from the reference image (S14). If the first shutter-release signal S1 is not input, the image-capturing standby state S11 is maintained.
그리고 제2 셔터-릴리즈 신호가 입력되는지 판단한다(S15). 제2 셔터-릴리즈 신호가 입력되지 않으면, 다시 제1 셔터 릴리즈 신호가 입력되는지 판단하고(S16), 상기 제1 셔터-릴리즈 신호가 입력되지 않으면 촬영 대기 상태를 유지하고 상기 제 1 셔터-릴리즈 신호가 입력되면 제2 셔터-릴리즈 신호가 입력되는지 계속 판단한다(S15). 상기 제2 셔터-릴리즈 신호가 입력되면, 촬영 영상을 생성한다(S17). 상기 촬영 영상으로부터 제2 영상 정보를 도출한다(S18). Then, it is determined whether a second shutter-release signal is input (S15). If the first shutter release signal is not input, it is determined whether the first shutter release signal is input again (S16). If the first shutter release signal is not inputted, It is determined whether the second shutter release signal is input (S15). When the second shutter-release signal is input, a photographed image is generated (S17). The second image information is derived from the photographed image (S18).
그리고 상기 제1 영상 정보와 상기 제2 영상 정보를 비교하여, 상이한지 판단한다(S19). 상기 영상 정보들이 서로 상이하면, 촬영 영상이 흔들린 영상임을 알리고(S20), 그러하지 않으면 촬영 영상을 저장한다(S21). Then, the first image information is compared with the second image information to determine whether they are different (S19). If the image information is different from each other, it is informed that the photographed image is a shaken image (S20). Otherwise, the photographed image is stored (S21).
상기 영상 정보가 피사체를 구별하는 특징점인 경우 도 5a와 도 5b를 함께 참조하여 설명한다. 도 5a는 오토포커싱 동작을 수행하여 초점이 맞은 기준 영상을 나타낸 사진으로, 피사체는 컴퓨터 본체와 아답타를 촬영한 사진이다. 상기 기준 영상에서 피사체를 특정하는 포인트로 상기 아답타의 좌측 상부 모서리점(X1)을 일 특징점으로, 상기 아답타의 우측 상부 모서리점(Y1)을 다른 특징점으로 추출한다. When the image information is a feature point for distinguishing a subject, a description will be made with reference to FIGS. 5A and 5B. FIG. 5A is a photograph showing a reference image focused by performing an auto focusing operation, and FIG. 5A is a photograph of a subject in which a computer main body and an adapter are photographed. The upper left corner point X1 of the adapter is extracted as one feature point and the upper right corner point Y1 of the adapter is extracted as another feature point with a point specifying the subject in the reference image.
도 5b는 촬영 영상을 나타낸 사진이다. 상기 촬영 영상에서 기준 영상의 모서리점들(X1, Y1)에 대응하는 특징점들을 도출한다. 기준 영상에서 상기 아답타의 좌측 상부 모서리점(X1)은 촬영 영상에서 2개의 특징점들(x1, x2)로 나타나며, 기준 영상에서 상기 아답타의 좌측 상부 모서리점(Y1)도 촬영 영상에서 2개의 특징점들(y1, y2)로 나타남을 확인할 수 있다.5B is a photograph showing the photographed image. The feature points corresponding to the corner points (X1, Y1) of the reference image are derived from the captured image. In the reference image, the upper left corner point X1 of the adapter is represented by two feature points x1 and x2 in the captured image, and the upper left corner point Y1 of the adapter in the reference image also includes two feature points (y1, y2), respectively.
따라서, 상기 기준 영상에서의 제1 특징점에 대응하는 촬영 영상의 특징점이 복수개로 도출되는 것은, 촬영 영상이 흔들린 영상인 것으로, 이를 사용자에게 알릴 수 있다. 그러므로 사용자는 디지털 카메라에서 직접 촬영 영상의 흔들림 여부를 용이하게 확인할 수 있다. Accordingly, the fact that a plurality of feature points of the photographed image corresponding to the first feature point in the reference image are derived can be informed to the user that the photographed image is a shaky image. Therefore, the user can easily confirm whether or not the photographed image is shaken directly from the digital camera.
다른 실시 예로서, 영상 정보가 에지 정보인 경우에 도 5a의 기준 영상에서 컴퓨터 본체의 일 모서리를 나타내는 픽셀 데이터와 도 5b의 촬영 영상에서의 픽셀 데이터를 비교할 수 있다. 예를 들어, 에지인 경우 1로 아닌 경우 0으로 판단하여 영상 정보를 생성하는 경우라면, 상기 기준 영상에서 상기 컴퓨터 본체의 일 모서리를 나타내는 영역(L)에 대해 하기 표 1과 같은 데이터를 얻을 수 있다. 상기 촬영 영상에 대해서는 통일한 컴퓨터 본체의 일 모서리를 나타내는 영역(l)에 대해 에지 판단 기준과 비교하여 에지인 경우 1로 그러하지 않은 경우 0으로 나타내면 하기 표 2와 같은 데이터를 얻을 수 있다. 따라서 에지로 판단된 기준 영상의 픽셀 영역들과 촬영 영상의 그것들을 서로 비교하여, 상이한 경우 촬영 영상을 흔들린 영상으로 판단할 수 있다. 이와 같은 방법에 따르더라도 디지털 카메라에서 직접 촬영한 영상에 대해 용이하게 흔들림 정보를 얻을 수 있다. In another embodiment, when the image information is edge information, pixel data representing one corner of the computer main body in the reference image of FIG. 5A and pixel data of the shot image of FIG. 5B may be compared. For example, if it is determined that the edge is not equal to 1 and the image information is generated as 0, the data shown in the following Table 1 can be obtained for the area L representing the corner of the computer body in the reference image have. As for the captured image, data of one area of the unified computer main body is compared with an edge judgment criterion, and when it is 1 when the edge is compared with 0 when it is not, the data as shown in Table 2 can be obtained. Therefore, it is possible to compare the pixel regions of the reference image determined as edges with those of the photographed image, and to judge the photographed image as a shaken image when they are different. According to this method, the shaking information can be easily obtained with respect to the image directly shot by the digital camera.
한편, 본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.Meanwhile, the present invention can be embodied in computer readable code on a computer readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored.
컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device and the like, and also a carrier wave (for example, transmission via the Internet) . In addition, the computer-readable recording medium may be distributed over network-connected computer systems so that computer readable codes can be stored and executed in a distributed manner. In addition, functional programs, codes, and code segments for implementing the present invention can be easily deduced by programmers skilled in the art to which the present invention belongs.
이제까지 본 발명에 대하여 바람직한 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.The present invention has been described above with reference to preferred embodiments. It will be understood by those skilled in the art that the present invention may be embodied in various other forms without departing from the spirit or essential characteristics thereof. Therefore, the above-described embodiments should be considered in an illustrative rather than a restrictive sense. The scope of the present invention is indicated by the appended claims rather than by the foregoing description, and all differences within the scope of equivalents thereof should be construed as being included in the present invention.
도 1a는 본 발명에 관한 디지털 영상 신호 처리 장치의 일 예로서, 디지털 카메라의 사시도이다.1A is a perspective view of a digital camera as an example of a digital video signal processing apparatus according to the present invention.
도 1b는 도 1a에 도시된 디지털 카메라의 배면도이다.1B is a rear view of the digital camera shown in FIG. 1A.
도 2는 도 1에 도시된 디지털 카메라를 설명하기 위한 블럭도이다. 2 is a block diagram for explaining the digital camera shown in FIG.
도 3은 도 2의 디지털 카메라의 프로세서를 나타낸 블럭도이다. 3 is a block diagram showing a processor of the digital camera of FIG.
도 4는 본 발명의 일 실시 예에 관한 디지털 영상 신호 처리 장치의 제어 방법을 나타낸 순서도이다. 4 is a flowchart showing a control method of a digital video signal processing apparatus according to an embodiment of the present invention.
도 5a돠 도 5b 각각은 본 발명의 일 실시 예에 관한 디지털 영상 신호 처리 장치의 제어 방법을 설명하기 위한 기준 영상과 촬영 영상의 사진들이다.5A and 5B are photographs of a reference image and a photographed image for explaining a control method of the digital video signal processing apparatus according to an embodiment of the present invention.
Claims (13)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080133779A KR101533279B1 (en) | 2008-12-24 | 2008-12-24 | Method of controlling digital image signal processing apparatus for derterming image blurring, medium of recording the method, digital image signal processing apparatus of applying the method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080133779A KR101533279B1 (en) | 2008-12-24 | 2008-12-24 | Method of controlling digital image signal processing apparatus for derterming image blurring, medium of recording the method, digital image signal processing apparatus of applying the method |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20100075154A KR20100075154A (en) | 2010-07-02 |
KR101533279B1 true KR101533279B1 (en) | 2015-07-02 |
Family
ID=42637580
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080133779A KR101533279B1 (en) | 2008-12-24 | 2008-12-24 | Method of controlling digital image signal processing apparatus for derterming image blurring, medium of recording the method, digital image signal processing apparatus of applying the method |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101533279B1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101822462B1 (en) | 2011-11-29 | 2018-01-30 | 삼성전자주식회사 | Method for providing user interface and image photographing apparatus thereof |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10178580A (en) * | 1998-01-22 | 1998-06-30 | Casio Comput Co Ltd | Electronic still camera |
JP2000171892A (en) * | 1998-12-02 | 2000-06-23 | Asahi Optical Co Ltd | Image blur check adapter and image blur check method |
JP2004054042A (en) * | 2002-07-22 | 2004-02-19 | Olympus Corp | Camera |
JP2005341229A (en) * | 2004-05-27 | 2005-12-08 | Sony Corp | Imaging device |
-
2008
- 2008-12-24 KR KR1020080133779A patent/KR101533279B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10178580A (en) * | 1998-01-22 | 1998-06-30 | Casio Comput Co Ltd | Electronic still camera |
JP2000171892A (en) * | 1998-12-02 | 2000-06-23 | Asahi Optical Co Ltd | Image blur check adapter and image blur check method |
JP2004054042A (en) * | 2002-07-22 | 2004-02-19 | Olympus Corp | Camera |
JP2005341229A (en) * | 2004-05-27 | 2005-12-08 | Sony Corp | Imaging device |
Also Published As
Publication number | Publication date |
---|---|
KR20100075154A (en) | 2010-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101595254B1 (en) | Method for controlling white balance of an image medium of recording the method and apparatus applying the method | |
KR101634247B1 (en) | Digital photographing apparatus, mdthod for controlling the same | |
JP4453721B2 (en) | Image photographing apparatus, image photographing method, and computer program | |
KR101700366B1 (en) | Digital photographing apparatus and control method thereof | |
TW200808044A (en) | Imaging apparatus and computer readable recording medium | |
KR101626004B1 (en) | Method and apparatus for selective support of the RAW format in digital imaging processor | |
JP2007215091A (en) | Imaging apparatus and program therefor | |
JP2002152582A (en) | Electronic camera and recording medium for displaying image | |
KR101737086B1 (en) | Digital photographing apparatus and control method thereof | |
US8654204B2 (en) | Digtal photographing apparatus and method of controlling the same | |
KR20100070043A (en) | Method for displaying scene recognition of digital image signal processing apparatus, medium for recording the method and digital image signal processing apparatus applying the method | |
CN101998060B (en) | By using the method and apparatus of automatic focus determination dither image | |
KR101431536B1 (en) | Digital photographing apparatus and method for controlling the same | |
JP2008109305A (en) | Image processing device, and control method of image processing device | |
KR20120011920A (en) | Digital image signal processing apparatus, digital image signal processing method and medium for recording the method | |
JP6706167B2 (en) | Imaging device, image synthesizing method, and program | |
KR20110090610A (en) | A digital photographing apparatus, a method for controlling the same, and a computer-readable medium | |
JP2004032524A (en) | Digital camera | |
KR101533279B1 (en) | Method of controlling digital image signal processing apparatus for derterming image blurring, medium of recording the method, digital image signal processing apparatus of applying the method | |
JP5316869B2 (en) | Image processing apparatus, image processing method, and program | |
KR101635102B1 (en) | Digital photographing apparatus and controlling method thereof | |
JP4714561B2 (en) | Imaging apparatus and imaging method | |
KR101960508B1 (en) | Display apparatus and method | |
US8810690B2 (en) | Method of controlling digital photographing apparatus and digital photographing apparatus using the same | |
JP5625325B2 (en) | Image data recording apparatus and image data recording program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
N231 | Notification of change of applicant | ||
N231 | Notification of change of applicant | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20180530 Year of fee payment: 4 |