KR101611303B1 - 영상 촬영 방법 및 장치 - Google Patents

영상 촬영 방법 및 장치 Download PDF

Info

Publication number
KR101611303B1
KR101611303B1 KR1020140038556A KR20140038556A KR101611303B1 KR 101611303 B1 KR101611303 B1 KR 101611303B1 KR 1020140038556 A KR1020140038556 A KR 1020140038556A KR 20140038556 A KR20140038556 A KR 20140038556A KR 101611303 B1 KR101611303 B1 KR 101611303B1
Authority
KR
South Korea
Prior art keywords
image
stored image
setting
stored
defect analysis
Prior art date
Application number
KR1020140038556A
Other languages
English (en)
Other versions
KR20150114230A (ko
Inventor
최인섭
박성준
강승모
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020140038556A priority Critical patent/KR101611303B1/ko
Publication of KR20150114230A publication Critical patent/KR20150114230A/ko
Application granted granted Critical
Publication of KR101611303B1 publication Critical patent/KR101611303B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof

Abstract

본 발명은 촬영된 영상을 고려해서 재촬영 시에 자동으로 설정을 변경하는 영상 촬영 방법 및 장치에 관한 것으로, 본 발명의 영상 촬영방법은 영상 촬영장치 이용하여 영상을 촬영하는 단계와; 상기 촬영된 영상과 상기 영상 촬영장치에 의해 제공되는 프리뷰(preview) 영상의 유사 정도를 판단하는 단계와; 상기 판단된 유사 정도에 따라 상기 영상 촬영장치의 설정들 중 적어도 하나를 변경하는 단계를 포함한다.

Description

영상 촬영 방법 및 장치{A METHOD AND APPARATUS FOR TAKING A PICTURE}
본 발명은 영상 촬영 방법 및 장치에 관한 것으로, 더욱 상세하게는 재촬영 시에 자동으로 설정을 변경하는 영상 촬영 방법 및 장치에 관한 것이다.
현재 DSLR (Digital Single-Lens Reflex) 카메라, 미러리스 카메라 또는 핸드폰에 구비된 카메라에는 밝기, ISO, 화이트 밸런스(white balance), 노출시간, 셔터속도 등을 수동으로 조정할 수 있는 기능이 제공된다. 카메라마다 다르지만 일반적으로 수동으로 설정을 조정하는 과정은 다음과 같다. 먼저, 카메라의 프리뷰(preview) 화면에서 환경설정 기능을 선택하면, 카메라는 사용자가 특정 설정을 변경/선택할 수 있도록 메뉴를 제공하거나 특정 설정의 수치값을 표시한다. 사용자는 이 메뉴를 통해 특정 설정을 변경/선택하거나 또는 수치값을 조정할 수 있다. 만약, 사용자가 다른 설정도 변경하기를 원한다면 이전 모드로 되돌아가서 해당 설정을 변경/선택하는 과정을 반복해야 한다. 이와 같은 과정을 통해서 카메라의 설정을 변경한 후 사용자는 영상을 촬영할 수 있다. 이처럼, 수동으로 설정을 변경하는 과정은 사용자가 직접 설정을 변경해야 하므로 촬영대상이 사라지거나 원하는 장면을 놓칠 수 있을 만큼 상당한 시간을 필요로 한다. 다른 문제점은 수동으로 설정을 변경하기 위해서는 사용자에게 카메라나 촬영방법 등에 대한 전문적인 지식이 필요하다는 점이다. 대부분의 일반 사용자들은 ISO, 화이트 밸런스, 노출시간, 셔터속도 등에 대한 지식이 없을 뿐만 아니라 손쉽게 영상을 촬영하기를 원한다. 이런 불편함들로 인해 카메라에는 자동으로 설정을 조정하는 자동모드가 제공된다. 그러나, 자동모드의 경우, 동일한 조건에서는 동일한 설정으로 영상을 촬영한다. 예를 들어, 자동모드에서 사용자가 촬영된 영상을 만족하지 못해서 동일한 피사체를 재촬영하는 경우, 카메라는 동일한 설정으로 영상을 촬영하게 된다. 따라서, 사용자가 수동으로 설정을 변경하지 않는 한, 동일한 피사체에 대한 다양한 영상을 얻을 수 없으며 사용자에게 만족스러운 영상을 제공할 수 없다.
본 발명은 전술한 필요성을 충족하기 위해 제안되는 것으로서, 촬영된 영상을 고려해서 재촬영 시에 자동으로 설정을 변경하는 영상 촬영 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
상기 목적을 달성하기 위해 본 발명은, 영상 촬영장치를 이용하여 영상을 촬영하는 단계와; 상기 촬영된 영상과 상기 영상 촬영장치에 의해 제공되는 프리뷰(preview) 영상의 유사 정도를 판단하는 단계와; 상기 판단된 유사 정도에 따라 상기 영상 촬영장치의 설정들 중 적어도 하나를 변경하는 단계를 포함하는 영상 촬영방법을 제공한다.
상기 촬영된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 단계에서, 상기 촬영된 영상의 촬영시각으로부터 일정시간 내에 상기 프리뷰 영상에 상기 영상 촬영장치의 초점이 고정되면 상기 촬영된 영상과 상기 프리뷰 영상의 유사 정도를 판단한다.
또한, 상기 촬영된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 단계에서, 픽셀별로 상기 촬영된 영상의 픽셀 값과 상기 프리뷰 영상의 픽셀 값의 차를 계산하고 상기 계산된 차들의 합을 이용하여 상기 촬영된 영상과 상기 프리뷰 영상의 유사 정도를 판단하거나 또는 상기 촬영된 영상 및 상기 프리뷰 영상의 휘도 차, 명암 차, 구도 차 중 적어도 하나를 이용하여 상기 촬영된 영상과 상기 프리뷰 영상의 유사 정도를 판단한다.
상기 영상 촬영장치의 설정들 중 적어도 하나를 변경하는 단계는, 상기 판단된 유사 정도가 기설정된 값보다 크면, 상기 촬영된 영상을 근거로 하여 상기 설정들의 우선순위를 결정하는 단계와; 상기 결정된 우선순위에 따라 상기 설정들 중 적어도 하나를 변경하는 단계를 포함한다. 여기서, 상기 촬영된 영상의 결함을 근거로 하여 상기 설정들의 우선순위를 결정하는데, 상기 촬영된 영상의 윤곽선 영역의 픽셀들 값, 상기 촬영된 영상의 휘도 분포 및 휘도 평균값, 상기 촬영된 영상의 R, G, B의 평균값 중 적어도 하나를 이용하여 상기 촬영된 영상의 결함을 판단한다.
또한, 상기 목적을 달성하기 위해 본 발명은, 영상을 촬영하기 위한 이미지 센서와; 상기 이미지 센서를 통해 촬영된 영상과 상기 이미지 센서를 통해 제공되는 프리뷰(preview) 영상의 유사 정도를 판단하고, 상기 판단된 유사 정도에 따라 영상 촬영장치의 설정들 중 적어도 하나를 변경하는 제어부를 포함하는 영상 촬영장치를 제공한다.
본 발명에 따른 영상 촬영 방법 및 장치의 효과에 대해 설명하면 다음과 같다.
본 발명의 실시예들 중 적어도 하나에 의하면, 동일 피사체에 대한 사용자의 재촬영 의지를 자동으로 판단할 수 있다.
또한, 촬영된 영상을 고려해서 재촬영 시에 자동으로 설정을 변경하므로 수동으로 설정을 변경하지 않더라도 사용자는 동일 피사체에 대한 다양한 영상을 얻을 수 있으며 재촬영에 소요되는 시간을 줄일 수 있다.
또한, 촬영된 영상의 결함을 판단해서 자동으로 설정을 변경하므로 사용자에게 개선된 영상을 제공할 수 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명에 따른 영상 촬영 장치의 일 예를 나타낸 블록도이다.
도 2는 본 발명에 따른 영상 촬영 방법을 나타낸 순서도이다.
도 3은 블러 현상(blurry artifact)을 갖는 영상의 일 예를 나타낸 도면이다.
도 4는 모션 블러를 갖는 영상의 일 예를 나타낸 도면이다.
도 5a는 로우 다이내믹 레인지(low dynamic range; LDR)를 갖는 영상의 일 예를 나타낸 도면이다.
도 5b는 하이 다이내믹 레인지(high dynamic range)를 갖는 영상의 일 예를 나타낸 도면이다.
도 6은 도 5a 및 5b의 영상의 휘도와 관련된 히스토그램을 나타낸 도면이다.
도 7의 명암이 서로 다른 영상을 나타낸 도면이다.
도 8은 도 7의 첫 번째 영상의 휘도와 관련된 히스토그램을 나타낸 도면이다.
도 9a는 R 값이 상대적으로 큰 영상의 일 예를 나타낸 도면이다.
도 9b는 화이트 밸런스가 조정된 정상적인 영상의 일 예를 나타낸 도면이다.
도 10a는 노출이 적은 어두운 영상의 일 예를 나타낸 도면이다.
도 10b는 노출이 많은 밝은 영상의 일 예를 나타낸 도면이다.
도 11은 본 발명에 따른 이동단말기의 일 예를 나타낸 도면이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
도 1은 본 발명에 따른 영상 촬영 장치의 일 예를 설명하기 위한 도면이다. 도 1에 도시된 바와 같이, 본 발명의 영상 촬영 장치(10)는 이미지 센서(12), 사용자 입력부(13), 디스플레이부(15), 메모리(17), 제어부(18)를 포함한다. 도 1에 도시된 구성요소들은 영상 촬영 장치(10)를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서상에서 설명되는 영상 촬영 장치(10)는 위에서 열거된 구성요소들보다 많거나 또는 적은 구성요소들을 가질 수 있다. 예를 들어, 영상 촬영 장치(10)는 렌즈, 마이크로폰, 플래쉬, 셔터버튼, 뷰파인더, 광량 센서, 스피커, 전원버튼, 디지털 신호처리부(DSP), ADC(Analog-to-Digital Converter), 충전부, 배터리, USB 포트, 유무선 통신부 등을 더 포함할 수 있다.
보다 구체적으로, 이미지 센서(12)는 정지영상 또는 동영상을 촬영하기 위한 것으로, CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal-Oxide-Semiconductor)로 구성된다. 이미지 센서(12)는 렌즈와 같은 광학계를 통해 입사되는 빛을 전기적 신호로 변환한다.
사용자 입력부(13)는 사용자로부터 정보나 명령을 입력받기 위한 것으로서, 정보나 명령이 입력되면 제어부(18)는 입력된 정보나 명령에 대응되도록 영상 촬영장치(10)의 동작을 제어할 수 있다. 이러한, 사용자 입력부(13)는 기계식 (mechanical) 입력수단 및 터치식 입력수단을 포함할 수 있다. 예를 들어, 기계식 입력수단은 영상 촬영 장치(10)의 전·후면 또는 측면에 위치하는 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등의 형태로 구성될 수 있다. 또한, 터치식 입력수단은 소프트웨어적인 처리를 통해 디스플레이부(15)의 터치스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다. 한편, 상기 가상키 또는 비주얼 키는, 다양한 형태를 가지면서 터치스크린 상에 표시되는 것이 가능하며, 예를 들어, 그래픽(graphic), 텍스트(text), 아이콘(icon), 비디오(video) 또는 이들의 조합으로 이루어질 수 있다.
디스플레이부(15)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은 영상 촬영 장치(10)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(13)로써 기능함과 동시에, 영상 촬영 장치(10)와 사용자 사이의 출력 인터페이스를 제공할 수 있다. 예를 들어, 디스플레이부(15)는 영상 촬영 장치(10)에서 구동되는 응용 프로그램의 실행화면 정보 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보를 표시할 수 있다.
메모리(17)는 촬영되는 정지영상 및 동영상 등을 저장하며, 영상 촬영 장치(10)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 영상 촬영 장치(10)의 동작을 위한 데이터들 등을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 유무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 다른 적어도 일부는, 영상 촬영 장치(10)의 기본적인 기능을 위해 출고 당시부터 포함될 수 있다. 한편, 응용 프로그램은 메모리(17)에 저장되어, 제어부(18)에 의하여 영상 촬영 장치의 동작(또는 기능)을 수행하도록 구동될 수 있다.
메모리(17)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크 및 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상 촬영 장치(10)는 인터넷(internet) 상에서 상기 메모리(17)의 저장 기능을 수행하는 웹 스토리지(web storage)와 연결될 수도 있다.
제어부(18)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 영상 촬영 장치(10)의 전반적인 동작을 제어한다. 제어부(18)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(17)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다. 또한, 제어부(18)는 메모리(17)에 저장된 응용 프로그램을 구동하기 위하여, 영상 촬영 장치(10)의 구성요소들을 제어할 수 있다.
이하에서, 본 발명의 영상 촬영 장치(10)에서 구현될 수 있는 영상 촬영 방법의 실시예에 대해 첨부된 도면을 참조하여 살펴보겠다. 도 2는 본 발명에 따른 영상 촬영 방법의 일 예를 나타낸 순서도이다.
도 2에 도시된 바와 같이, 제어부(18)는 사용자의 명령에 따라 특정 피사체를 촬영하고, 촬영된 영상을 메모리(17)에 저장한다(S11). 이때, 제어부(18)는 촬영된 영상에 대한 정보, 예를 들어 촬영된 영상의 촬영시각 및 설정들(밝기, ISO, 화이트 밸런스, 노출시간, 셔터속도 등)에 대한 정보를 함께 메모리(17)에 저장한다.
이후, 제어부(18)는 촬영된 영상의 촬영시각으로부터 일정시간(예를 들어 30초) 내에 사용자의 재촬영 의지가 있는지 여부를 판단한다. 이를 위해, 제어부(18)는 일정시간 내에 프리뷰(preview) 영상에서 영상 촬영 장치(10)의 초점이 고정되는지 여부를 판단한다(S12). 이때, 영상 촬영 장치(10)의 초점은 자동모드에서 오토 포커싱(Auto Focusing)을 이용하여 프리뷰 영상에 고정된다. 여기서, 프리뷰 영상이란, 촬영 전에 피사체를 관찰할 수 있도록 뷰파인더나 디스플레이부(15)를 통해 제공되는 영상을 의미한다.
만약, 영상 촬영 장치(10)의 초점이 일정시간 내에 프리뷰 영상에 고정된다면, 제어부(18)는 촬영된 영상과 프리뷰 영상의 유사 정도를 판단하고, 두 영상의 유사 정도가 기설정된 값보다 큰지 여부를 판단한다(S13).
두 영상의 유사 정도를 판단하는 방법의 일 예로써, 제어부(18)는 촬영된 영상의 픽셀 값과 프리뷰 영상의 픽셀 값의 차를 픽셀 별로 계산하고, 그 계산된 차들의 합을 이용하여 두 영상의 유사 정도를 판단한다. 더 구체적으로는, 두 영상의 유사 정도를 나타내는 값은 아래와 같이 평균제곱오차(Means Square Error)를 통해 얻어진다.
Figure 112014031244182-pat00001
여기서, n은 픽셀의 수,
Figure 112014031244182-pat00002
는 촬영된 영상의 픽셀 값,
Figure 112014031244182-pat00003
는 프리뷰 영상의 픽셀 값이다.
두 영상의 유사 정도를 판단하는 방법의 다른 예로써, 제어부(18)는 촬영된 영상 및 프리뷰 영상의 휘도(luminace) 차, 명암(contrast) 차, 구도(structure) 차 중 적어도 하나를 이용하여 두 영상의 유사 정도를 판단할 수 있는데, 바람직하게는 휘도 차, 명암 차, 구도 차를 모두 이용하여 두 영상의 유사 정도를 판단한다. 예를 들어, 제어부(18)는 휘도 차 및 명암 차를 판단하기 위해 두 영상의 픽셀들의 휘도 차 및 명암 차를 계산하고, 두 영상의 구도 차를 판단하기 위해 두 영상에 포함된 피사체의 위치 및 포함 여부 등을 판단한다. 두 영상의 유사 정도를 나타내는 값은 아래와 같이 SSIM(Structure Similarity) 인덱스(index)를 통해 얻어진다.
Figure 112014031244182-pat00004
여기서, x와 y는 각각 촬영된 영상과 프리뷰 영상, μx는 x의 평균값, μy는 y의 평균값, σx 2는 x의 분산값(variance), σy 2는 y의 분산값(variance), σxy는 x와 y의 공분산값(covariance), c1은 (k1L)2, c2는 (k2L)2, L은 픽셀값의 비트수, k1은 0.01, k2 0.03이다.
만약 두 영상의 유사 정도가 기설정된 값보다 크다면, 제어부(18)는 촬영된 영상을 근거로 영상 촬영 장치(10)의 변경될 설정들의 우선순위를 결정한다(S14). 이때, 제어부(18)는 촬영된 영상의 결함을 근거로 변경될 설정들의 우선순위를 결정하는데, 촬영된 영상의 결함에 대한 분석은 촬영된 영상이 메모리(17)에 저장된 직후에 제어부(18)에 의해 행해지거나 또는 두 영상의 유사 정도가 기설정된 값보다 큰 경우에 제어부(18)에 의해 행해질 수 있다.
제어부(18)는 촬영된 영상의 윤곽선 영역의 픽셀들 값, 촬영된 영상의 휘도 분포 및 휘도 평균값, 촬영된 영상의 R, G, B의 평균값 중 적어도 하나를 이용하여 촬영된 영상의 결함을 분석하는데, 그 구체적인 방법은 다음과 같다.
제어부(18)는 촬영된 영상의 블러 현상(blurry artifact)을 판단하기 위해, 촬영된 영상에서 피사체의 윤곽선 영역(edge)을 추출하고 이 영역의 소벨(sobel) 값을 계산한다. 비윤곽선 영역은 부드럽게 나오는 것이 정상이므로, 윤곽선 영역의 소벨 값을 이용하면 영상의 번짐/탈초점 현상을 판단할 수 있다. 여기서, 블러 현상이란 도 3에 도시된 것처럼 영상의 초점이 탈초점 상태로 되는 현상을 말한다.
제어부(18)는 촬영된 영상의 모션 블러(motion blur)를 판단하기 위해, 윤곽선 영역의 소벨 값으로부터 방향성을 검출한다. 모션 블러의 경우, 블러 현상과 마찬가지로 뿌옇게 보이지만 도 4에 도시된 것처럼 방향성을 갖는다. 따라서, 제어부(18)는 소벨 값을 허프 변환(Hough transform)하여 방향성을 검출한다. 그리고, 제어부(18)는 어느 한 방향으로 방향성이 검출되면 모션 블러로 판단하고, 방사 방향이나 회전 방향으로 방향성이 검출되면 래디얼(radial) 블러로 판단한다.
제어부(18)는 촬영된 영상의 부적절한 명암을 판단하기 위해, 촬영된 영상의 히스토그램(histogram)을 이용한다. 먼저, 도 5b와 같이 좋은 다이내믹 레인지(dynamic range)를 가진 영상이라면 어두운 곳부터 밝은 곳까지 휘도의 히스토그램이 고르게 분포되어 있을 것이다. 즉, 도 6의 I와 같이, 넓은 표준편차(standard deviation, std)를 가진 정상분포(normal distribution)의 형태가 된다. 하지만, 도 5a와 같이 로우 다이내믹 레인지(low dynamic range; LDR)를 가진 영상은 어두운 곳이나 밝은 곳에 치우쳐 있거나 특정 휘도에 많이 모여있는 분포를 갖는다. 즉, 도 6의 II와 같이, 작은 표준편차를 갖는다. 따라서, 제어부(18)는 히스토그램의 표준편차 값이 특정 임계치보다 작으면 해당 영상을 로우 다이내믹 레인지(LDR) 영상으로 간주한다.
또한, 제어부(18)는 표준편차 값이 크더라도 히스토그램이 두 개의 피크를 가지는 이봉분포(bimodal distribution)의 형태인지 여부를 판단한다. 도 7의 첫 번째 영상과 같이 너무 어두운 부분과 너무 밝은 부분을 포함하는 영상은 도 8의 히스토그램에서 이봉분포를 갖는데, 제어부(18)는 이와 같은 영상도 로우 다이내믹 레인지(LDR) 영상으로 간주한다. 도 7의 두 번째 영상은 명암 차가 적절히 조정된 영상을 보인다.
제어부(18)는 촬영된 영상의 컬러 왜곡(color distortion)을 판단하기 위해, 각 픽셀의 R, G, B 값을 계산하고, 계산된 R, G, B의 평균값을 계산한다. R, G, B 중 특정 색의 평균값이 상대적으로 크면, 제어부(18)는 촬영된 영상의 컬러 왜곡이 있다고 판단한다. 예를 들어, R 또는 G 값이 상대적으로 크면 영상은 전반적으로 붉은 색 또는 노란 색이 감도는 영상이고, B 값이 상대적으로 크면 영상은 푸른색이 감도는 영상이다. 도 9a는 R 값이 상대적으로 큰 영상(reddish image)의 일 예를 나타내고, 도 9b는 화이트 밸런스가 조정된 정상적인 영상의 일 예를 나타낸다.
제어부(18)는 촬영된 영상의 부적절한 노출(exposure)을 판단하기 위해, 촬영된 영상의 휘도 평균값을 두 개의 임계치(제 1, 2 임계치)와 비교하고 그 결과에 따라 노출의 적정성 여부를 판단한다. 예를 들어, 휘도 평균값이 제 1 임계치보다 작으면 제어부(18)는 촬영된 영상의 노출이 적어서 어둡다고 판단하고, 휘도 평균값이 제 2 임계치보다 크면 제어부(18)는 촬영된 영상의 노출이 많아서 밝다고 판단한다. 도 10a는 노출이 적은 어두운 영상의 일 예를 나타내고, 도 10b는 노출이 많은 밝은 영상의 일 예를 나타낸다.
부적절한 노출을 판단하는 다른 방법으로써, 제어부(18)는 각 픽셀의 휘도 값을 두 개의 기준값(컷오프 기준값과 포화 기준값)과 비교하고, 그 비교 결과에 따라 촬영된 영상의 노출의 적정성 여부를 판단한다. 예를 들어, 컷오프 기준값보다 작은 휘도 값을 갖는 픽셀의 개수가 많으면 제어부(18)는 촬영된 영상을 어두운 영상으로 간주하고, 포화 기준값보다 큰 휘도 값을 갖는 픽셀의 개수가 많으면 제어부(18)는 촬영된 영상을 밝은 영상으로 간주한다.
본 발명은 블러, 모션 블러, 명암, 컬러, 노출에 대한 5가지의 결함만을 설명하고 있으나, 촬영된 영상의 결함은 이에 한정되지 않는다. 따라서, 제어부(18)는 촬영된 영상의 다른 결함을 더 판단할 수도 있다.
촬영된 영상의 결함을 근거로 변경될 설정들의 우선순위를 결정하는 방법은 다음과 같다(S14).
촬영된 영상에 한 가지의 결함만 존재하는 경우, 제어부(18)는 그 해당 결함을 보완하기 위한 설정을 최우선순위로 결정한다. 예를 들어, 촬영된 영상에서 블러만 검출되는 경우, 제어부(18)는 초점과 관련된 설정(예를 들어, Auto Focusing)을 최우선순위로 결정한다. 한편, 촬영된 영상에서 모션 블러만 검출되는 경우, 제어부(18)는 셔터 속도나 ISO와 관련된 설정을 최우선순위로 결정한다. 촬영된 영상에서 명암만 부적절한 경우, 제어부(18)는 HDR(High Dynamic Range)와 관련된 설정을 최우선순위로 결정한다. 촬영된 영상에서 컬러 왜곡만 검출되는 경우, 제어부(18)는 화이트 밸런스(white balance)와 관련된 설정을 최우선순위로 결정한다. 또한, 촬영된 영상에서 노출만 부적절한 경우, 제어부(18)는 셔터 속도나 ISO와 관련된 설정을 최우선순위로 결정한다.
만약, 촬영된 영상에 2가지 이상의 결함이 존재하는 경우, 제어부(18)는 각 결함의 심각성 등급(레벨)에 따라 변경될 설정들의 우선순위를 결정한다. 예를 들어, 블러로 인한 결함의 등급이 가장 높은 경우 제어부(18)는 초점과 관련된 설정을 최우선순위로 결정하고, 컬러 왜곡으로 인한 결함의 등급이 두 번째로 높은 경우 제어부(18)는 화이트 밸런스와 관련된 설정을 두 번째 우선순위로 결정한다.
또한, 촬영된 영상에 결함이 존재하지 않는 경우, 메모리(17)에 미리 저장된 우선순위가 적용된다. 이를 위해, 제어부(18)는 사용자가 설정을 변경한 이력이나 과거 재촬영 시 적용되었던 우선순위의 이력 등을 근거로 설정들의 우선순위 리스트를 생성 및 저장할 수 있다.
위와 같이, 설정들의 우선순위가 결정되면, 제어부(18)는 결정된 우선순위에 따라 영상 촬영 장치(10)의 설정들 중 적어도 하나를 변경한다(S15). 예를 들어, 제어부(18)는 최우선순위의 설정을 변경하는데, 이때 촬영된 영상을 보완하기 위한 적절한 값으로 최우선순위의 설정을 변경한다. 그리고, 제어부(18)는 설정이 변경되었음과 변경된 설정에 대한 정보를 디스플레이부(15)에 표시하거나 소리로 알릴 수 있다. 이후, 사용자는 설정이 변경된 상태로 동일 피사체를 재촬영할 수 있다(S16).
재촬영 이후 사용자가 재촬영된 영상을 만족하지 않고 동일 피사체를 다시 촬영하고자 하는 경우(S12, S13), 제어부(18)는 두 번째 우선순위의 설정을 변경하고 사용자의 명령에 따라 동일 피사체를 재촬영한다(S15, S16). 즉, 재촬영이 반복되는 경우, 우선순위에 따라 차례로 설정을 변경한다. 또한, 사용자가 수동으로 설정을 변경하려고 하면, 제어부(18)는 우선순위에 따른 설정 변경이나 디폴트 설정을 적용하지 않고 수동모드로 전환한다.
도 1의 영상 촬영 장치(10)는 이동 단말기에 결합된 형태로 구성될 수 있다. 예를 들어, 영상 촬영 장치(10)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 슬레이트 PC(slate PC), 태블릿 PC(tablet PC), 울트라북(ultrabook) 중 어느 하나에 포함된 형태로 구성될 수 있다. 또한, 본 명세서에 기재된 실시 예에 따른 구성은 고정 단말기에도 적용될 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.
도 11은 본 발명과 관련된 이동 단말기(100)의 일 예를 설명하기 위한 블록도이다.
이동 단말기(100)는 무선 통신부(110), 입력부(120), 감지부(140), 출력부(150), 인터페이스부(160), 메모리(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 11에 도시된 구성요소들은 이동 단말기를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 이동 단말기는 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
보다 구체적으로, 상기 구성요소들 중 무선 통신부(110)는, 이동 단말기(100)와 무선 통신 시스템 사이, 이동 단말기(100)와 다른 이동 단말기(100) 사이, 또는 이동 단말기(100)와 다른 이동 단말기(100, 또는 외부서버)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다.
이러한 무선 통신부(110)는, 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114), 위치정보 모듈(115) 중 적어도 하나를 포함할 수 있다.
입력부(120)는, 영상 신호 입력을 위한 카메라(121) 또는 영상 입력부, 오디오 신호 입력을 위한 마이크로폰(microphone, 122), 또는 오디오 입력부, 사용자로부터 정보를 입력받기 위한 사용자 입력부(123, 예를 들어, 터치키(touch key), 푸시키(mechanical key) 등)를 포함할 수 있다. 입력부(120)에서 수집한 음성 데이터나 이미지 데이터는 분석되어 사용자의 제어명령으로 처리될 수 있다.
센싱부(140)는 이동 단말기 내 정보, 이동 단말기를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 센싱부(140)는 근접센서(141, proximity sensor), 조도 센서(142, illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor, 예를 들어, 카메라(121 참조), 마이크로폰(microphone, 122 참조), 배터리 게이지(battery gage), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 헬스케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 이동 단말기는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(151), 음향 출력부(152), 햅팁 모듈(153), 광 출력부(154) 중 적어도 하나를 포함할 수 있다. 디스플레이부(151)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은, 이동 단말기(100)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(123)로써 기능함과 동시에, 이동 단말기(100)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.
인터페이스부(160)는 이동 단말기(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행한다. 이러한 인터페이스부(160)는, 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트(port), 오디오 I/O(Input/Output) 포트(port), 비디오 I/O(Input/Output) 포트(port), 이어폰 포트(port) 중 적어도 하나를 포함할 수 있다. 이동 단말기(100)에서는, 상기 인터페이스부(160)에 외부 기기가 연결되는 것에 대응하여, 연결된 외부 기기와 관련된 적절할 제어를 수행할 수 있다.
메모리(170)는 이동 단말기(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 이동 단말기(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 다른 적어도 일부는, 이동 단말기(100)의 기본적인 기능(예를 들어, 전화 착신, 발신 기능, 메시지 수신, 발신 기능)을 위하여 출고 당시부터 이동 단말기(100)상에 존재할 수 있다. 한편, 응용 프로그램은, 메모리(170)에 저장되고, 이동 단말기(100) 상에 설치되어, 제어부(180)에 의하여 상기 이동 단말기의 동작(또는 기능)을 수행하도록 구동될 수 있다.
제어부(180)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 이동 단말기(100)의 전반적인 동작을 제어한다. 제어부(180)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(170)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다.
또한, 제어부(180)는 메모리(170)에 저장된 응용 프로그램을 구동하기 위하여, 도 11의 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 제어부(180)는 상기 응용 프로그램의 구동을 위하여, 이동 단말기(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.
전원공급부(190)는 제어부(180)의 제어 하에서, 외부의 전원, 내부의 전원을 인가 받아 이동 단말기(100)에 포함된 각 구성요소들에 전원을 공급한다. 이러한 전원공급부(190)는 배터리를 포함하며, 상기 배터리는 내장형 배터리 또는 교체가능한 형태의 배터리가 될 수 있다.
상기 각 구성요소들 중 적어도 일부는, 이하에서 설명되는 다양한 실시 예들에 따른 이동 단말기의 동작, 제어, 또는 제어방법을 구현하기 위하여 서로 협력하여 동작할 수 있다. 또한, 상기 이동 단말기의 동작, 제어, 또는 제어방법은 상기 메모리(170)에 저장된 적어도 하나의 응용 프로그램의 구동에 의하여 이동 단말기 상에서 구현될 수 있다.
이하에서는, 영상 촬영과 관련된 구성요소들에 대하여 도 11을 참조하여 보다 구체적으로 살펴본다.
입력부(120)에 대하여 보다 구체적으로 살펴보면, 입력부(120)는 영상 정보(또는 신호), 오디오 정보(또는 신호), 또는 사용자로부터 입력되는 정보의 입력을 위한 것으로서, 영상 정보의 입력을 위하여, 이동 단말기(100)는 하나 또는 복수의 카메라(121)를 구비할 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다. 한편, 이동 단말기(100)에 구비되는 복수의 카메라(121)는 매트릭스 구조를 이루도록 배치될 수 있으며, 이와 같이 매트릭스 구조를 이루는 카메라(121)를 통하여, 이동 단말기(100)에는 다양한 각도 또는 초점을 갖는 복수의 영상정보가 입력될 수 있다. 또한, 복수의 카메라(121)는 입체영상을 구현하기 위한 좌 영상 및 우 영상을 획득하도록, 스트레오 구조로 배치될 수 있다.
사용자 입력부(123)는 사용자로부터 정보를 입력받기 위한 것으로서, 사용자 입력부(123)를 통해 정보가 입력되면, 제어부(180)는 입력된 정보에 대응되도록 이동 단말기(100)의 동작을 제어할 수 있다. 이러한, 사용자 입력부(123)는 기계식 (mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 이동 단말기(100)의 전·후면 또는 측면에 위치하는 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단을 포함할 수 있다. 일 예로서, 터치식 입력수단은, 소프트웨어적인 처리를 통해 터치스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다. 한편, 상기 가상키 또는 비주얼 키는, 다양한 형태를 가지면서 터치스크린 상에 표시되는 것이 가능하며, 예를 들어, 그래픽(graphic), 텍스트(text), 아이콘(icon), 비디오(video) 또는 이들의 조합으로 이루어질 수 있다.
디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 디스플레이부(151)는 이동 단말기(100)에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보를 표시할 수 있다. 또한, 상기 디스플레이부(151)는 입체영상을 표시하는 입체 디스플레이부로서 구성될 수 있다. 상기 입체 디스플레이부에는 스테레오스코픽 방식(안경 방식), 오토 스테레오스코픽 방식(무안경 방식), 프로젝션 방식(홀로그래픽 방식) 등의 3차원 디스플레이 방식이 적용될 수 있다.
인터페이스부(160)는 이동 단말기(100)에 연결되는 모든 외부 기기와의 통로 역할을 한다. 인터페이스부(160)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 이동 단말기(100) 내부의 각 구성요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트(port), 식별 모듈이 구비된 장치를 연결하는 포트(port), 오디오 I/O(Input/Output) 포트(port), 비디오 I/O(Input/Output) 포트(port), 이어폰 포트(port) 등이 인터페이스부(160)에 포함될 수 있다.
메모리(170)는 제어부(180)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 특히, 메모리(170)는 웨어러블 단말기에서 전송되는 영상, 음성, 소리 등의 데이터를 저장한다. 또한, 상기 메모리(170)는 상기 터치 스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.
메모리(170)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크 및 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리(170)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작될 수도 있다.
한편, 앞서 살펴본 것과 같이, 제어부(180)는 응용 프로그램과 관련된 동작과, 통상적으로 이동 단말기(100)의 전반적인 동작을 제어한다. 예를 들어, 제어부(180)는 상기 이동 단말기의 상태가 설정된 조건을 만족하면, 애플리케이션들에 대한 사용자의 제어 명령의 입력을 제한하는 잠금 상태를 실행하거나, 해제할 수 있다. 또한, 제어부(180)는 이하에서 설명되는 다양한 실시 예들을 본 발명에 따른 이동 단말기(100) 상에서 구현하기 위하여, 위에서 살펴본 구성요소들을 중 어느 하나 또는 복수를 조합하여 제어할 수 있다.
이하에서, 본 발명의 이동단말기(100)에서 구현될 수 있는 영상 촬영 방법의 실시예에 대해 첨부된 도면을 참조하여 살펴보겠다.
먼저, 제어부(180)는 사용자의 명령에 따라 특정 피사체를 촬영하고, 촬영된 영상을 메모리(170)에 저장한다. 이때, 제어부(180)는 촬영된 영상에 대한 정보, 예를 들어 촬영된 영상의 촬영시각 및 카메라(121)의 설정들(밝기, ISO, 화이트 밸런스, 노출시간, 셔터속도 등)에 대한 정보를 함께 메모리(170)에 저장한다.
이후, 제어부(180)는 촬영된 영상의 촬영시각으로부터 일정시간(예를 들어 30초) 내에 사용자의 재촬영 의지가 있는지 여부를 판단한다. 이를 위해, 제어부(180)는 일정시간 내에 디스플레이부(151)에 표시되는 프리뷰(preview) 영상에서 카메라(121)의 초점이 고정되는지 여부를 판단한다. 이때, 카메라(121)의 초점은 오토 포커싱(Auto Focusing)을 이용하여 프리뷰 영상에 고정된다.
만약, 카메라(121)의 초점이 일정시간 내에 프리뷰 영상에 고정된다면, 제어부(180)는 촬영된 영상과 프리뷰 영상의 유사 정도를 판단하고, 두 영상의 유사 정도가 기설정된 값보다 큰지 여부를 판단한다.
두 영상의 유사 정도를 판단하는 방법의 일 예로써, 제어부(180)는 촬영된 영상의 픽셀 값과 프리뷰 영상의 픽셀 값의 차를 픽셀 별로 계산하고, 그 계산된 차들의 합을 이용하여 두 영상의 유사 정도를 판단한다. 두 영상의 유사 정도를 나타내는 값은 앞서 설명한 것과 같이 평균제곱오차(Means Square Error)를 통해 얻어진다.
두 영상의 유사 정도를 판단하는 방법의 다른 예로써, 제어부(180)는 촬영된 영상 및 프리뷰 영상의 휘도(luminace) 차, 명암(contrast) 차, 구도(structure) 차 중 적어도 하나를 이용하여 두 영상의 유사 정도를 판단할 수 있는데, 바람직하게는 휘도 차, 명암 차, 구도 차를 모두 이용하여 두 영상의 유사 정도를 판단한다. 예를 들어, 제어부(180)는 휘도 차 및 명암 차를 판단하기 위해 두 영상의 픽셀들의 휘도 차 및 명암 차를 계산하고, 두 영상의 구도 차를 판단하기 위해 두 영상에 포함된 피사체의 위치 및 포함 여부 등을 판단한다. 두 영상의 유사 정도를 나타내는 값은 앞서 설명한 바와 같이 SSIM(Structure Similarity) 인덱스(index)를 통해 얻어진다.
만약 두 영상의 유사 정도가 기설정된 값보다 크다면, 제어부(180)는 촬영된 영상을 근거로 카메라(121)의 변경될 설정들의 우선순위를 결정한다. 이때, 제어부(180)는 촬영된 영상의 결함을 근거로 변경될 설정들의 우선순위를 결정하는데, 촬영된 영상의 결함에 대한 분석은 촬영된 영상이 메모리(170)에 저장된 직후에 제어부(180)에 의해 행해지거나 또는 두 영상의 유사 정도가 기설정된 값보다 큰 경우에 제어부(180)에 의해 행해질 수 있다.
제어부(180)는 촬영된 영상의 윤곽선 영역의 픽셀들 값, 촬영된 영상의 휘도 분포 및 휘도 평균값, 촬영된 영상의 R, G, B의 평균값 중 적어도 하나를 이용하여 촬영된 영상의 결함, 즉 블러, 모션 블러, 명암, 컬러, 노출에 대한 결함을 판단한다. 촬영된 영상의 결함을 판단하는 방법은 앞서 설명한 바와 동일하다. 마찬가지로, 촬영된 영상의 결함은 이에 한정되지 않는다.
촬영된 영상에 한 가지의 결함만 존재하는 경우, 제어부(180)는 그 해당 결함을 보완하기 위한 설정을 최우선순위로 결정한다. 예를 들어, 촬영된 영상에서 블러만 검출되는 경우, 제어부(180)는 카메라(121)의 초점과 관련된 설정(예를 들어, Auto Focusing)을 최우선순위로 결정한다. 한편, 촬영된 영상에서 모션 블러만 검출되는 경우, 제어부(180)는 카메라(121)의 셔터 속도나 ISO와 관련된 설정을 최우선순위로 결정한다. 촬영된 영상에서 명암만 부적절한 경우, 제어부(180)는 카메라(121)의 HDR(High Dynamic Range)와 관련된 설정을 최우선순위로 결정한다. 촬영된 영상에서 컬러 왜곡만 검출되는 경우, 제어부(180)는 카메라(121)의 화이트 밸런스(white balance)와 관련된 설정을 최우선순위로 결정한다. 또한, 촬영된 영상에서 노출만 부적절한 경우, 제어부(180)는 카메라(121)의 셔터 속도나 ISO와 관련된 설정을 최우선순위로 결정한다.
만약, 촬영된 영상에 2가지 이상의 결함이 존재하는 경우, 제어부(180)는 각 결함의 심각성 등급(레벨)에 따라 변경될 설정들의 우선순위를 결정한다. 예를 들어, 블러로 인한 결함의 등급이 가장 높은 경우 제어부(180)는 초점과 관련된 설정을 최우선순위로 결정하고, 컬러 왜곡으로 인한 결함의 등급이 두 번째로 높은 경우 제어부(180)는 화이트 밸런스와 관련된 설정을 두 번째 우선순위로 결정한다.
또한, 촬영된 영상에 결함이 존재하지 않는 경우, 메모리(170)에 미리 저장된 우선순위가 적용된다. 이를 위해, 제어부(180)는 사용자가 설정을 변경한 이력이나 과거 재촬영 시 적용되었던 우선순위의 이력 등을 근거로 설정들의 우선순위 리스트를 생성 및 저장할 수 있다.
위와 같이, 설정들의 우선순위가 결정되면, 제어부(180)는 결정된 우선순위에 따라 카메라(121)의 설정들 중 적어도 하나를 변경한다. 예를 들어, 제어부(180)는 최우선순위의 설정을 변경하는데, 이때 촬영된 영상을 보완하기 위한 적절한 값으로 최우선순위의 설정을 변경한다. 그리고, 제어부(180)는 설정이 변경되었음과 변경된 설정에 대한 정보를 디스플레이부(151)에 표시하거나 소리로 알릴 수 있다. 이후, 사용자는 설정이 변경된 상태로 동일 피사체를 재촬영할 수 있다.
재촬영 이후 사용자가 재촬영된 영상을 만족하지 않고 동일 피사체를 다시 촬영하고자 하는 경우, 제어부(180)는 두 번째 우선순위의 설정을 변경하고 사용자의 명령에 따라 동일 피사체를 재촬영하도록 카메라(121)를 제어한다. 즉, 재촬영이 반복되는 경우, 우선순위에 따라 차례로 설정을 변경한다. 또한, 사용자가 수동으로 설정을 변경하려고 하면, 제어부(180)는 우선순위에 따른 설정 변경이나 디폴트 설정을 적용하지 않고 수동모드로 전환한다.
본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.
10: 영상촬영장치 12: 이미지센서
13: 사용자 입력부 15: 디스플레이부
17: 메모리 18: 제어부
100: 이동 단말기 110: 무선통신부
120: 입력부 140: 센싱부
150: 출력부 160: 인터페이스부
170: 메모리 180: 제어부
190: 전원공급부

Claims (14)

  1. 청구항 1은(는) 설정등록료 납부시 포기되었습니다.
    애플리케이션을 실행하는 단계;
    영상 촬영장치를 이용하여 피사체를 촬영하여 영상과 상기 영상에 대한 데이터를 획득하고 저장하는 단계;
    상기 애플리케이션이 실행되고 있는 중에, 상기 저장된 영상에 대한 데이터 중 상기 촬영된 영상의 촬영시각 데이터에 기초하여 일정시간 내에 촬영 전 피사체 관찰을 위한 뷰파인더 또는 디스플레이를 통해 제공되는 영상에 관한 프리뷰 영상에 초점이 고정되면, 상기 저장된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 단계;
    상기 판단 결과 두 영상이 유사하면, 상기 저장된 영상의 결함 분석에 기초하여 상기 저장된 영상에 적용된 설정들 중 적어도 하나를 변경 적용하는 단계; 및
    상기 변경 적용된 설정에 따라 상기 피사체를 재촬영하여 영상을 재획득하는 단계
    를 포함하여 이루어지되,
    상기 결함 분석은, 상기 저장된 영상의 블러, 모션 블러, 명암, 컬러 왜곡 및 노출 팩터들 중 적어도 하나의 팩터와 관련된 설정에 대해 이루어지고,
    상기 결함 분석 결과, 결함이 복수 개이면, 각 결함의 레벨에 따라 변경될 설정의 우선순위가 결정되고,
    상기 결함 분석 결과, 상기 결함이 없으면, 사용자 설정 변경 이력과 과거 재촬영시 적용 우선순위 이력 중 적어도 하나에 기초하여 미리 저장된 우선순위에 따라 상기 변경 적용 설정이 결정되는 것을 특징으로 하는 영상 촬영방법.
  2. 삭제
  3. 청구항 3은(는) 설정등록료 납부시 포기되었습니다.
    제1항에 있어서,
    상기 저장된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 단계에서,
    픽셀별로 상기 저장된 영상의 픽셀 값과 상기 프리뷰 영상의 픽셀 값의 차를 계산하고, 상기 계산된 차들의 합을 이용하여 상기 저장된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 것을 특징으로 하는 영상 촬영방법.
  4. 청구항 4은(는) 설정등록료 납부시 포기되었습니다.
    제1항에 있어서,
    상기 저장된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 단계에서,
    상기 저장된 영상 및 상기 프리뷰 영상의 휘도(luminace) 차, 명암(contrast) 차, 구도 차 중 적어도 하나를 이용하여 상기 저장된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 것을 특징으로 하는 영상 촬영방법.
  5. 청구항 5은(는) 설정등록료 납부시 포기되었습니다.
    제1항에 있어서,
    상기 블러 현상에 대한 결함 분석은 상기 저장된 영상의 피사체의 윤곽선(edge) 영역을 추출하고 추출된 영역의 소벨(sobel) 값 계산에 근거하여 이루어지고,
    상기 모션 블러 현상에 대한 결함 분석은 상기 저장된 영상의 피사체의 윤곽선 영역의 계산된 소벨 값으로부터 검출되는 방향성 데이터에 근거하여 이루어지는 것을 특징으로 하는 영상 촬영방법.
  6. 청구항 6은(는) 설정등록료 납부시 포기되었습니다.
    제1항에 있어서,
    상기 명암에 대한 결함 분석은 상기 저장된 영상의 히스토그램 데이터에 근거하여 이루어지고,
    상기 컬러 왜곡에 대한 결함 분석은 상기 저장된 영상의 각 픽셀의 R, G, B 값을 계산하고, 상기 계산된 R, G, B의 평균값에 근거하여 이루어지고,
    상기 노출에 대한 결함 분석은 상기 저장된 영상의 휘도 평균값을 미리 정한 복수의 임계치들과 비교 결과에 근거하여 이루어지는 것을 특징으로 하는 영상 촬영방법.
  7. 청구항 7은(는) 설정등록료 납부시 포기되었습니다.
    제1항에 있어서,
    상기 저장된 영상의 윤곽선(edge) 영역의 픽셀들 값, 상기 저장된 영상의 휘도 분포 및 휘도 평균값, 상기 저장된 영상의 R, G, B의 평균값 중 적어도 하나를 이용하여 상기 저장된 영상의 결함을 판단하는 것을 특징으로 하는 영상 촬영방법.
  8. 피사체를 촬영하기 위한 이미지 센서;
    상기 촬영된 피사체의 영상과 상기 영상에 대한 데이터를 저장하는 메모리;
    디스플레이; 및
    애플리케이션을 실행하고, 상기 애플리케이션이 실행되고 있는 중에 상기 저장된 영상에 대한 데이터 중 촬영시각 데이터에 기초하여 일정시간 내에 촬영 전 피사체 관찰을 위한 뷰파인더 또는 상기 디스플레이를 통해 제공되는 영상에 관한 프리뷰 영상에 초점이 고정되면, 상기 이미지 센서를 통해 촬영된 영상과 상기 프리뷰 영상의 유사 정도를 판단하고, 상기 판단 결과 두 영상이 유사하면, 상기 저장된 영상의 결함 분석에 기초하여 상기 저장된 영상에 적용된 설정들 중 적어도 하나를 변경 적용하여 상기 이미지 센서를 통해 상기 피사체를 재촬영하고 영상을 재획득하도록 제어하는 제어부를 포함하고,
    상기 제어부는,
    상기 저장된 영상의 블러(blur), 모션 블러(motion blur), 명암, 컬러 왜곡(color distortion) 및 노출(exposure) 팩터들 중 적어도 하나의 팩터와 관련된 설정과 관련하여 상기 결함 분석을 수행하고,
    상기 결함 분석 결과, 결함이 복수 개이면, 각 결함의 레벨에 따라 변경될 설정의 우선순위를 결정하고,
    상기 결함 분석 결과, 상기 결함이 없으면, 사용자 설정 변경 이력과 과거 재촬영시 적용 우선순위 이력 중 적어도 하나에 기초하여 미리 저장된 우선순위에 따라 상기 변경 적용 설정을 결정하는 것을 특징으로 하는 영상 촬영장치.
  9. 삭제
  10. 제8항에 있어서,
    상기 제어부는,
    픽셀별로 상기 저장된 영상의 픽셀 값과 상기 프리뷰 영상의 픽셀 값의 차를 계산하고, 상기 계산된 차들의 합을 이용하여 상기 저장된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 것을 특징으로 하는 영상 촬영장치.
  11. 제8항에 있어서,
    상기 제어부는,
    상기 저장된 영상 및 상기 프리뷰 영상의 휘도 차, 명암 차, 구도 차 중 적어도 하나를 이용하여 상기 저장된 영상과 상기 프리뷰 영상의 유사 정도를 판단하는 것을 특징으로 하는 영상 촬영장치.
  12. 제8항에 있어서,
    상기 제어부는,
    상기 저장된 영상의 피사체의 윤곽선(edge) 영역을 추출하고 추출된 영역의 소벨(sobel) 값 계산에 근거하여 상기 블러 현상에 대한 결함 분석을 수행하고,
    상기 저장된 영상의 피사체의 윤곽선 영역의 계산된 소벨 값으로부터 검출되는 방향성 데이터에 근거하여 상기 모션 블러 현상에 대한 결함 분석을 수행하는 것을 특징으로 하는 영상 촬영장치.
  13. 제8항에 있어서,
    상기 제어부는,
    상기 저장된 영상의 히스토그램 데이터에 근거하여 상기 명암에 대한 결함 분석을 수행하고,
    상기 저장된 영상의 각 픽셀의 R, G, B 값을 계산하고, 상기 계산된 R, G, B의 평균값에 근거하여 상기 컬러 왜곡에 대한 결함 분석을 수행하고,
    상기 저장된 영상의 휘도 평균값을 미리 정한 복수의 임계치들과 비교 결과에 근거하여 상기 노출에 대한 결함 분석을 수행하는 것을 특징으로 하는 영상 촬영장치.
  14. 제8항에 있어서,
    상기 제어부는,
    상기 저장된 영상의 윤곽선 영역의 픽셀들 값, 상기 저장된 영상의 휘도 분포 및 휘도 평균값, 상기 저장된 영상의 R, G, B의 평균값 중 적어도 하나를 이용하여 상기 저장된 영상의 결함을 판단하는 것을 특징으로 하는 영상 촬영장치.
KR1020140038556A 2014-04-01 2014-04-01 영상 촬영 방법 및 장치 KR101611303B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140038556A KR101611303B1 (ko) 2014-04-01 2014-04-01 영상 촬영 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140038556A KR101611303B1 (ko) 2014-04-01 2014-04-01 영상 촬영 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150114230A KR20150114230A (ko) 2015-10-12
KR101611303B1 true KR101611303B1 (ko) 2016-04-26

Family

ID=54346987

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140038556A KR101611303B1 (ko) 2014-04-01 2014-04-01 영상 촬영 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101611303B1 (ko)

Also Published As

Publication number Publication date
KR20150114230A (ko) 2015-10-12

Similar Documents

Publication Publication Date Title
US11039059B2 (en) Imaging capturing device and imaging capturing method
JP4872797B2 (ja) 撮像装置、撮像方法および撮像プログラム
US10027909B2 (en) Imaging device, imaging method, and image processing device
US20150172531A1 (en) Image capturing apparatus, communication apparatus, and control method therefor
US8576320B2 (en) Digital photographing apparatus and method of controlling the same
JP2012247533A (ja) 電子カメラ
KR101797040B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
EP2890116A1 (en) Method of displaying a photographing mode by using lens characteristics, computer-readable storage medium of recording the method and an electronic apparatus
JP2010287919A (ja) 撮像装置
US8537266B2 (en) Apparatus for processing digital image and method of controlling the same
KR20090083713A (ko) 디지털 영상 처리장치 및 그 제어방법
JP5796650B2 (ja) 撮像装置および撮像方法
KR101611303B1 (ko) 영상 촬영 방법 및 장치
JP5182395B2 (ja) 撮像装置、撮像方法および撮像プログラム
JP6645612B1 (ja) 撮像装置及び電子機器
JP6645614B2 (ja) 撮像装置及び電子機器
EP3033874B1 (en) Electronic apparatus and method of controlling the same
KR101817658B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
WO2019061051A1 (zh) 一种拍照方法和拍照装置
JP2009147591A (ja) 撮像装置、および、プログラム
JP2016012927A (ja) 撮像装置
JP2020061783A (ja) 撮像装置
CN112911148A (zh) 图像处理方法、装置及电子设备
JPWO2019193889A1 (ja) 画像位置合わせ補助装置、方法及びプログラム並びに撮像装置
JP2018084849A (ja) 撮像装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant