KR100968375B1 - 최적 영상 선택 방법 및 장치 - Google Patents

최적 영상 선택 방법 및 장치 Download PDF

Info

Publication number
KR100968375B1
KR100968375B1 KR1020080118809A KR20080118809A KR100968375B1 KR 100968375 B1 KR100968375 B1 KR 100968375B1 KR 1020080118809 A KR1020080118809 A KR 1020080118809A KR 20080118809 A KR20080118809 A KR 20080118809A KR 100968375 B1 KR100968375 B1 KR 100968375B1
Authority
KR
South Korea
Prior art keywords
image
images
information
encoding
measuring
Prior art date
Application number
KR1020080118809A
Other languages
English (en)
Other versions
KR20100060275A (ko
Inventor
유병석
Original Assignee
주식회사 코아로직
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 코아로직 filed Critical 주식회사 코아로직
Priority to KR1020080118809A priority Critical patent/KR100968375B1/ko
Publication of KR20100060275A publication Critical patent/KR20100060275A/ko
Application granted granted Critical
Publication of KR100968375B1 publication Critical patent/KR100968375B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/40—Image enhancement or restoration using histogram techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Studio Devices (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

본 발명은 최적 영상 선택 방법에 관한 것으로서, 연속적으로 촬영된 복수의 영상들의 화질을 측정하고, 복수의 영상들의 부가 정보를 저장하며, 복수의 영상들을 부호화하여, 복수의 영상들에 대한 부호화 결과들을 저장하고, 측정된 화질을 기초로 복수의 영상들 중 하나를 선택하며, 선택된 영상에 대응하는 부가 정보와 부호화 결과를 결합하여 최적 영상으로 출력한다.

Description

최적 영상 선택 방법 및 장치{Method and Apparatus for Selecting Best Image}
본 발명은 영상의 선택 방법에 관한 것이며, 보다 상세하게는 BSS(Best Shot Selector) 기능을 지원하여 최적의 영상을 선택하는 방법 및 장치에 관한 것이다.
디지털 카메라는 촬영한 영상을 내부 기억 장치로 저장할 수 있는 카메라이다. 일반 카메라는 영상을 아날로그 값으로 저장하는데 비해, 디지털 카메라는 입력되는 영상의 색정보를 디지털 값으로 기록한다. 최근에 널리 사용되는 디지털 카메라는 셔터를 누름에 따라 한 개의 영상을 촬영하는 일반 촬영 모드와 셔터를 누르고 있는 동안 연속하여 수 개의 영상을 촬영하는 연속 촬영 모드를 지원한다. 또한, 최근에는 디지털 카메라의 기능을 장착하고 있는 휴대폰에서도 이러한 일반 촬영 모드와 연속 촬영 모드를 지원한다. 일반적으로, 연속 촬영 모드에서 동일 피사체에 대해 연속성을 가지는 다수의 정지 영상을 얻을 수 있다.
BSS 기능은 디지털 카메라에 적용되는 특수한 기능 중의 하나로서, 연속적으로 촬영된 사진들 중 최적의 사진을 선택하는 기능이다. 이와 관련된 기존 방법들 중에는 2장 이상의 복수의 연속적으로 촬영된 영상들 중에 하나를 사용자가 직접 선택하는 수동 선택 방법과 영상 처리 알고리즘에 의한 자동 선택 방법이 있다.
본 발명이 해결하고자 하는 과제는 복수의 영상들 중 최적 영상을 선택하는데 소요되는 시간을 줄일 수 있는 최적 영상 선택 방법 및 장치 및 상기 최적 영상 선택 장치를 포함하는 영상 처리 장치를 제공하는데 있다.
상기 과제를 해결하기 위한 본 발명에 따른 최적 영상 선택 방법은 연속적으로 촬영된 복수의 영상들의 화질을 측정하는 단계; 상기 복수의 영상들의 부가 정보를 저장하는 단계; 상기 복수의 영상들을 부호화하여, 상기 복수의 영상들에 대한 부호화 결과들을 저장하는 단계; 상기 측정된 화질을 기초로 상기 복수의 영상들 중 하나를 선택하는 단계; 및 상기 선택된 영상에 대응하는 상기 부가 정보와 상기 부호화 결과를 결합하여 최적 영상으로 출력하는 단계를 포함한다.
상기 부가 정보는 엑시프(Exif) 정보일 수 있다.
상기 화질을 측정하는 단계는, 상기 복수의 영상들 각각의 휘도 분포를 나타내는 히스토그램을 분석하여 상기 복수의 영상들의 휘도를 측정하는 단계를 포함할 수 있다. 또한, 상기 화질을 측정하는 단계는 상기 복수의 영상들의 선명도를 측정하는 단계를 더 포함할 수 있다. 또한, 상기 최적 영상 선택 방법은 상기 복수의 영상들의 명암 정보를 추출하는 단계를 더 포함하고, 상기 휘도를 측정하는 단계는 상기 추출된 명암 정보를 기초로 상기 복수의 영상들의 휘도를 측정하고, 상기 선명도를 측정하는 단계는 상기 추출된 명암 정보를 기초로 상기 복수의 영상들 의 선명도를 측정할 수 있다.
상기 복수의 영상들의 부가 정보를 저장하는 단계는, 상기 복수의 영상들 중 N번째 영상에 대한 부호화 결과를 저장하는 동안에, 상기 복수의 영상들 중 (N-1)번째 영상에 대한 부가 정보를 저장할 수 있는데, 여기서 상기 N은 자연수이다.
상기 부호화 결과들을 저장하는 단계는, 상기 복수의 영상들의 전체 영상 및 썸네일(thumbnail) 영상을 JPEG 포맷으로 부호화하여, 상기 복수의 영상들의 상기 전체 영상 및 상기 썸네일 영상에 대한 부호화 결과들을 저장할 수 있다.
상기 최적 영상으로 출력하는 단계는, 상기 선택된 영상에 대응하는 상기 엑시프 정보와, 상기 전체 영상 및 상기 썸네일 영상의 부호화 결과를 결합하여 최적 영상을 출력할 수 있다.
또한, 상기 과제를 해결하기 위한 본 발명에 따른 최적 영상 선택 장치는 연속적으로 촬영된 복수의 영상들의 화질을 측정하는 화질 측정부; 상기 복수의 영상들의 부가 정보를 저장하는 제1 저장부; 상기 복수의 영상들을 부호화하는 부호화부; 상기 복수의 영상들에 대한 부호화 결과들을 저장하는 제2 저장부; 상기 측정된 화질을 기초로 상기 복수의 영상들 중 하나를 선택하는 선택부; 및 상기 선택된 영상에 대응하는 상기 부가 정보와 상기 부호화 결과를 결합하여 최적 영상으로 출력하는 결합부를 포함한다.
또한, 상기 과제를 해결하기 위한 본 발명에 따른 영상 처리 장치는 연속적으로 촬영되는 복수의 영상들을 감지하는 영상 감지부; 상기 감지된 복수의 영상들을 YCbCr 포맷으로 변환하는 변환부; 및 상기 변환된 복수의 영상들 각각에 대한 엑시프 정보와 부호화 결과를 저장하고, 상기 변환된 복수의 영상들 중 하나의 추천 영상을 선택하여, 상기 선택된 추천 영상에 대응되는 상기 엑시프 정보와 상기 부호화 결과를 결합하여 최적 영상으로 출력하는 최적 영상 선택부를 포함한다.
상기 추천 영상을 기초로 상기 최적 영상을 선택하는 호스트를 더 포함하고, 상기 최적 영상 선택부는 상기 호스트에서 선택된 상기 최적 영상에 대응하는 상기 엑시프 정보와 상기 부호화 결과를 결합하여 상기 최적 영상으로 출력할 수 있다.
본 발명에 따르면, 연속적으로 촬영된 복수의 영상들에 대한 엑시프 정보를 각각 저장함으로써, 복수의 영상들 중 선택된 최적 영상을, 엑시프 정보를 포함한 엑시프 포맷으로 출력할 수 있다. 또한, 연속적으로 촬영된 복수의 영상들에 대한 전체 영상뿐 아니라, 썸네일 영상도 부호화하여 각각 저장함으로써, 미리 보기 기능을 수행할 때에 복호화에 소요되는 시간을 단축시킬 수 있다.
또한, 본 발명에 따르면, 최적 영상 선택 장치를 영상 처리 장치의 선처리단인 ISP(image signal processor)에 하드웨어로 구현함으로써, 촬영된 복수의 영상들에 대하여 바로 최적 영상을 선택할 수 있다. 이로써, 최적 영상의 선택에 소요되는 시간이 줄어들 수 있고, AP(application processor)단 또는 BB(baseband)단의 부하를 줄일 수 있다.
또한, 본 발명에 따르면, 최적 영상 선택 장치를 영상 처리 장치의 후처리단인 AP 또는 BB에 하드웨어로 구현할 수 있는데, 후처리단에 구현되더라도 종래와 달리 하드웨어로 구현함에 따라, 소프트웨어 프로그램 포팅(porting)에 의해 소프 트웨어적으로 처리되는 것에 비해 전체적으로 최적 영상의 선택에 소요되는 시간을 줄일 수 있다.
본문에 개시되어 있는 본 발명의 실시예들에 대해서, 특정한 구조적 내지 기능적 설명들은 단지 본 발명의 실시예를 설명하기 위한 목적으로 예시된 것으로, 본 발명의 실시예들은 다양한 형태로 실시될 수 있으며 본문에 설명된 실시예들에 한정되는 것으로 해석되어서는 아니 된다.
이하, 첨부한 도면들을 참조하여, 본 발명의 실시예를 보다 상세하게 설명하고자 한다. 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 일 실시예에 따른 영상 처리 장치를 개략적으로 나타내는 블록도이다.
도 1을 참조하면, 영상 처리 장치(1)는 영상 감지부(image sensing unit, 10), 변환부(conversion unit, 20), 최적 영상 선택 장치(best image selecting apparatus, 30) 및 호스트(host, 40)를 포함한다. 본 발명의 일 실시예에서, 영상 처리 장치(1)는 디지털 카메라 또는 휴대폰에 내장된 카메라일 수 있다.
영상 감지부(10)는 연속적으로 촬영된 복수의 영상들(IN)을 감지하는 것으로, 본 발명의 일 실시예에서, 영상 감지부(10)는 CMOS(complementary metal-oxide semiconductor) 센서로 구현될 수 있다. 이 때, 복수의 영상들(IN)은 프레임(frame) 단위로 입력될 수 있다. 또한, 이 경우, 영상 감지부(10)는 CMOS 센싱 기능과 색 보간(color interpolation) 기능을 수행하여 제1 포맷(format)의 영상을 출력할 수 있고, 본 발명의 일 실시예에서, 제1 포맷은 RGB일 수 있다.
변환부(20)는 영상 감지부(10)에서 감지된 영상들의 후속 처리를 위하여, 제1 포맷의 영상들을 제2 포맷으로 변환하는데, 본 발명의 일 실시예에서, 제2 포맷은 YCbCr일 수 있다. 보다 상세하게는, 변환부(20)는 영상 감지부(10)에서 감지된 영상들을 YCbCr 포맷으로 변환하여, 영상 감지부(10)에서 감지된 영상들을 명암(intensity) 정보를 나타내는 Y 성분과 색채(chrominance) 정보를 나타내는 Cb, Cr 성분으로 구분할 수 있다. 여기서, YCbCr은 RGB 정보를 부호화하는 방식의 하나로써, JPEG, MPEG 표준에서 사용되고 있다. YCbCr은 인간의 시각 시스템이 밝기 보다 색깔에 덜 민감한 점을 이용하여, Cr, Cb 성분을 Y 성분보다 낮은 해상도로 표현함으로써, 시각적으로 화질의 큰 저하 없이 색채 성분을 나타내는데 필요한 데이터의 양을 줄일 수 있다.
본 발명의 일 실시예에서, 호스트(40)는 최적 영상 선택 장치(30)에 인에이블 신호(EN) 및 선택 신호(SL)를 제공한다. 여기서, 호스트(40)는 영상 처리 장치(1)의 후처리단인 AP(application processor) 또는 BB(baseband), 또는 키패드 등을 포괄하는 개념이다.
최적 영상 선택 장치(30)는 인에이블 신호(EN)에 따라 복수의 영상들에 대하여 최적 영상 선택 동작을 수행하여 추천 영상(RI, recommend image)을 선택하고, 선택된 추천 영상(RI)을 호스트(40)에 제공한다. 이어서, 최적 영상 선택 장치(30)는 호스트(40)로부터 제공된 선택 신호(SL)에 따라 복수의 영상들 중 하나를 최적 영상으로 출력한다.
구체적으로, 인에이블 신호(EN)가 온(on)이면, 최적 영상 선택 장치(30)는 복수의 영상들에 대하여 최적 영상 선택 동작을 수행하여, 복수의 영상들 중 하나의 추천 영상을 선택한다. 이 때, 최적 영상 선택 장치(30)는 클럭(CLK)에 동기되게 최적 영상 선택 동작을 수행한다. 이어서, 선택 신호(SL)에 따라 추천 영상을 최적 영상으로 출력한다. 한편, 인에이블 신호(EN)가 오프(off)면, 최적 영상 선택 장치(30)는 복수의 영상들에 대하여 최적 영상 선택 동작을 수행하지 않고, 복수의 영상들을 그대로 출력한다.
본 발명의 다른 실시예에서, 호스트(40)는 최적 영상 선택 장치(30)에 인에이블 신호(EN)만을 제공할 수 있다. 이 경우, 최적 영상 선택 장치(30)는 인에이블 신호(EN)에 따라 복수의 영상들에 대하여 최적 영상 선택 동작을 수행하고, 자체적으로 선택된 영상을 최적 영상으로 출력할 수 있다.
종래에는 연속적으로 촬영된 복수의 영상들 중 최적 영상을 선택하기 위한 알고리즘을 영상 처리 장치의 후처리단인 AP 또는 BB에 소프트웨어로 구현하였다. 이 경우, AP단 또는 BB단에 포함된 ARM 프로세서는 연속적으로 촬영된 복수의 영상들을 ARM 프로세서의 내부 메모리에 저장하고, 각 영상에 대해 최적 영상의 선택을 위한 휘도 정보나 선명도 정보를 계산하였는바, 최적 영상을 선택하는데 시간이 오래 걸렸다.
그러나, 본 발명의 일 실시예에서, 최적 영상 선택 장치(30)는 영상 처리 장치(1)의 선처리단인 ISP(image signal processor)에 하드웨어로 구현될 수 있다. 이로써, 촬영된 영상에 대하여 바로 최적 영상을 선택할 수 있는바, 최적 영상의 선택에 소요되는 시간이 줄어들 수 있고, AP단 또는 BB단의 부하를 줄일 수 있다.
또한, 본 발명의 다른 실시예에서, 최적 영상 선택 장치(30)는 영상 처리 장치(1)의 후처리단인 AP 또는 BB에 하드웨어로 구현될 수도 있다. 이로써, 후처리단에 구현되더라도 종래와 달리 하드웨어로 구현함에 따라, 소프트웨어 프로그램을 포팅(porting)하는데 소요되는 시간을 줄일 수 있는바, 전체적으로 최적 영상의 선택에 소요되는 시간을 줄일 수 있다.
도 2는 도 1에 포함된 최적 영상 선택 장치를 상세하게 나타내는 블록도이다.
도 1 및 2를 참조하면, 최적 영상 선택 장치(30)는 명암 정보 추출부(31), 화질 측정부(32), 선택부(33), 엑시프 정보 저장부(34), 영상 부호화부(35), 영상 저장부(36) 및 결합부(37)를 포함한다.
명암 정보 추출부(31)는 복수의 영상들의 명암 정보를 추출한다. 여기서, 복수의 영상들은 카메라의 연속 촬영 모드에서 기 설정된 N(N은 2이상의 자연수)개의 연속적으로 촬영된 영상들을 나타낸다. 본 발명의 일 실시예에서, N을 9로 설정할 수 있고, 명암 정보 추출부(31)는 영상 감지부(10)에서 감지된 9개의 영상들의 명암 정보를 추출한다. 연속 촬영 모드에서 연속적으로 촬영된 영상들이라 할지라도, 피사체의 움직임에 의한 블러링(blurring), 카메라 내외부의 밝기 변화, 또는 사용자의 손 떨림 등에 의한 블러링 등에 의해 화질의 차이가 생길 수 있으므로, N개의 연속적으로 촬영된 영상들 중 최적의 영상을 선택할 필요가 있다.
보다 상세하게는, 명암 정보 추출부(31)는 변환부(20)에서 변환된 영상에서 조명 조건에 민감한 명암 정보만을 추출하여 그레이 레벨(gray level)의 영상, 즉, 농담 화상을 획득할 수 있다. 본 발명의 일 실시예에서, 명암 정보 추출부(31)는 변환부(20)에서 YCbCr 포맷으로 변환된 영상에서 Y 성분만을 추출함으로써, 전체적인 처리 속도를 향상시킬 수 있다.
한편, 본 발명의 다른 실시예에서, 복수의 영상들이 흑백 영상인 경우, 최적 영상 선택 장치는 명암 정보 추출부(31)를 포함하지 않을 수 있다. 또한, 본 발명의 또 다른 실시예에서 복수의 영상들이 컬러 영상이더라도, 최적 영상 선택 장치는 명암 정보 추출부(31)를 포함하지 않고, 컬러 영상에 대해 화질을 측정할 수도 있다.
화질 측정부(32)는 선명도 측정부(sharpness measuring unit, 321) 및 휘도 측정부(brightness measuring unit, 322)를 포함하여, 명암 정보 추출부(31)에서 출력된 명암 정보만을 가진 복수의 그레이 레벨 영상들의 화질을 측정한다.
선명도 측정부(321)는 명암 정보 추출부(31)에서 추출된 명암 정보만을 가진 영상의 선명도를 측정한다. 여기서, 선명도는 영상의 명암 경계 부분의 명확도를 나타내는 것으로, 디테일(detail), 콘트라스트(contrast), 에지(edge) 등을 포괄하는 개념이다. 본 발명의 일 실시예에서, 선명도 측정부(321)는 복수의 그레이 레벨 영상 각각에 대해 필터를 적용하여 각각의 영상에 포함된 에지를 검출함으로써, 선명도를 측정한다. 예를 들어, 선명도 측정부(321)는 복수의 그레이 레벨 영상 각각에 대해 소벨(Sobel) 필터를 적용하여 각각의 영상에 포함된 에지를 검출할 수 있다. 본 발명의 다른 실시예에서, 선명도 측정부(121)는 가우시안(Gaussian) 필터, 라플라시안(Laplacian) 필터 등과 같은 다른 필터를 이용할 수도 있다.
휘도 측정부(322)는 명암 정보 추출부(31)에서 추출된 명암 정보만을 가진 그레이 레벨 영상의 휘도를 측정한다. 여기서, 휘도는 물체나 그 물체에 의해 만들어지는 영상 신호의 밝기를 의미하며, 밝기(luminance), 명도 등을 포괄한다. 구체적으로, 휘도 측정부(322)는 복수의 그레이 레벨 영상의 휘도 분포를 나타내는 히스토그램(histogram)을 분석함으로써 휘도 정보를 추출할 수 있다.
선택부(33)는 선명도 측정부(321)에서 측정된 선명도 및 휘도 측정부(322)에서 측정된 휘도를 기초로 복수의 영상들 중 최적 영상으로 출력할 추천 영상(RI)을 선택하고, 추천 영상(RI)을 호스트(40)에 제공한다. 본 발명의 일 실시예에서, 선택부(33)는 MCU(micro control unit)로 구현될 수 있다. 구체적으로, 선택부(33)는 측정된 선명도 및 휘도를 기초로 최적 영상 선택을 위한 알고리즘을 처리하는데, 이를 위해 알고리즘 코드를 MCU에 다운로드하여 사용한다. 이와 같이, 본 발명의 일 실시예에서는 선택부(33)만 소프트웨어로 구현하고, 최적 영상 선택 장치(30)에 포함된 나머지 블록들은 모두 하드웨어로 구현할 수 있다.
엑시프 정보 저장부(34)는 복수의 영상들에 대한 부가 정보인 엑시프 정보를 저장한다. 여기서, 엑시프는 촬영한 사진에 대한 부가 정보를 나타내는 포맷이고, 엑시프 정보는 엑시프 포맷으로 나타낸 영상의 부가 정보를 의미한다. 예를 들어, 엑시프 정보 저장부(34)는 SRAM(static random access memory)으로 구현될 수 있다. 본 발명의 일 실시예에서, 엑시프 정보 저장부(34)는 호스트(40)로부터 선택 신호(SL)를 수신하여, 수신된 선택 신호(SL)에 대응하는 영상의 엑시프 정보를 출력한다. 본 발명의 다른 실시예에서, 엑시프 정보 저장부(34)는 호스트(40)로부터 선택 신호(SL)를 수신하지 않고, 선택부(33)에서 출력된 추천 영상(RI)에 대응하는 영상의 엑시프 정보를 출력할 수도 있다.
도 3은 도 2에 포함된 엑시프 정보 저장부에 저장되는 엑시프 정보의 일 예를 나타낸다.
도 3을 참조하면, 엑시프 정보는 파일 이름, 파일 크기, 사진 회전, YCbCr 위치, 가로 해상도, 세로 해상도, 해상도 단위, 이미지 설명, 카메라 제조사, 카메라 모델명, 펌웨어 버전, 픽셀 구성, EXIF 버전, FlashPix 버전, 색 공간, 가로 길이, 세로 길이, 촬영 시각, 저장 시각, 촬영 모드, ISO 값, 셔터 속도, 조리개, 밝기, 노출 보정, 최대 조리개 값, 측광 모드, 광원, 초점 거리, 노출 방식, 화이트 밸런스 사용, 디지털 줌, 대비, 채도, 선명도 등과 같은 각 항목에 따른 정보를 나타낸다. 이러한 엑시프 정보는 사진 파일의 헤더 부분에 기록된다.
다시 도 2를 참조하면, 영상 부호화부(35)는 복수의 영상의 전체 영상(full image) 및 썸네일 영상(thumbnail image)을 부호화한다. 본 발명의 일 실시예에서, 영상 부호화부(35)는 복수의 영상의 전체 영상 및 썸네일 영상을 JPEG 포맷으로 부호화한다.
영상 저장부(36)는 영상 부호화부(35)에서 부호화된 결과를 저장한다. 예를 들어, 영상 저장부(36)는 SDRAM(synchronous dynamic random access memory)과 컨트롤 로직(control logic)으로 구현될 수 있다. 본 발명의 일 실시예에서, 영상 저장부(36)는 호스트(40)로부터 선택 신호(SL)를 수신하여, 수신된 선택 신호(SL)에 대응하는 영상의 부호화 결과를 출력한다. 본 발명의 다른 실시예에서, 영상 저장부(36)는 호스트(40)로부터 선택 신호(SL)를 수신하지 않고, 선택부(33)에서 출력된 추천 영상(RI)에 대응하는 영상의 부호화 결과를 출력할 수도 있다.
결합부(37)는 엑시프 정보 저장부(34)에서 출력되는 엑시프 정보와 영상 저장부(36)에서 출력되는 부호화 결과를 결합하여 최적 영상을 출력한다. 이로써, 출력되는 최적 영상은 엑시프 포맷의 영상일 수 있다.
도 4는 도 2의 최적 영상 선택 장치의 동작을 설명하기 위한 타이밍도이다.
도 1, 2 및 4를 참조하면, 41은 최적 영상 선택 장치(30)에 입력되는 클럭 신호(CLK)를 나타내고, 42는 호스트(40)로부터 출력되는 인에이블 신호(EN)를 나타내며, 43은 수직 동기 신호(Vsync)를 나타낸다. 44는 영상 저장부(36)에 순차적으로 저장되는 영상에 대응되는 프레임 카운트(FrameCnt)를 나타내며, 45는 엑시프 정보 저장부(34)에 순차적으로 저장되는 엑시프 정보의 순서를 나타낸다.
영상 처리 장치(1)의 영상 감지부(10)에 복수의 영상들이 연속적으로 입력될 때, 인에이블 신호(EN)가 논리 '로우'에서 논리 '하이'로 활성화되면, 복수의 영상들이 JPEG 포맷으로 부호화되어 영상 저장부(36)에 순차적으로 저장된다. 본 발명의 일 실시예에서, 최적 영상 선택 장치(30)는 9개의 영상들을 영상 저장부(36)에 저장하고, 각 영상들은 프레임(frame) 단위로 입력된다.
이와 같이, 영상 저장부(36)에 제1 내지 제9 영상들이 순차적으로 저장되는 동안에, 제1 내지 제9 영상들에 대응하는 엑시프 정보는 엑시프 정보 저장부(34)에 순차적으로 저장된다. 이 경우, 제2 영상이 영상 저장부(36)에 저장되는 동안에 제1 영상의 엑시프 정보가 선택부(33)에 업데이트되고 엑시프 정보 저장부(34)에 저장된다. 또한, 제3 영상이 영상 저장부(36)에 저장되는 동안에 제2 영상의 엑시프 정보가 선택부(33)에 업데이트되고 엑시프 정보 저장부(34)에 저장된다.
도 5는 본 발명의 일 실시예에 따른 최적 영상 선택 방법을 나타내는 흐름도이다.
도 5를 참조하면, 본 실시예에 따른 최적 영상 선택 방법은 도 2에 도시된 최적 영상 선택 장치에서 처리되는 단계들로 구성된다. 따라서, 이하 생략된 내용이라 하더라도 도 2에 도시된 최적 영상 선택 장치에 관하여 이상에서 기술된 내용은 본 실시예에 따른 최적 영상 선택 방법에도 적용된다.
51 단계에서, 최적 영상 선택 장치(30)에 복수의 영상들이 수신되는데, 본 발명의 일 실시예에서, 복수의 영상들은 YCbCr 변환된 영상일 수 있고, 프레임 단위로 입력될 수 있다.
52 단계에서, 명암 정보 추출부(31)는 복수의 영상들로부터 명암 정보를 추출한다. 구체적으로, 명암 정보 추출부(31)는 YCbCr 변환된 영상에서 Y 성분만을 추출할 수 있다.
53 단계에서, 선명도 측정부(321)는 명암 정보만을 가진 영상의 선명도를 측정한다.
54 단계에서, 휘도 측정부(322)는 명암 정보만을 가진 영상의 휘도를 측정한다. 구체적으로, 휘도 측정부(322)는 복수의 그레이 레벨 영상의 휘도 분포를 나 타내는 히스토그램을 분석함으로써 휘도 정보를 추출할 수 있다.
55 단계에서, 선택부(33)는 측정된 선명도와 휘도를 기초로 하여 복수의 영상들 중 추천 영상을 선택한다. 또한, 엑시프 정보는 선택부(33)에 순차적으로 업데이트 된다.
56 단계에서, 엑시프 정보 저장부(34)는 복수의 영상들에 대한 엑시프 정보를 저장하는데, 본 발명의 일 실시예에서, 엑시프 정보는 SRAM에 저장될 수 있다. 엑시프 정보는 선택부(33)에 업데이트되면서 엑시프 정보 저장부(34)에 저장될 수 있다.
57 단계에서, 영상 부호화부(35)는 복수의 영상들의 전체 영상 및 썸네일 영상에 대한 부호화를 수행하는데, 본 발명의 일 실시예에서, 복수의 영상들의 전체 영상 및 썸네일 영상에 대해 JPEG 부호화할 수 있다.
58 단계에서, 영상 저장부(36)는 복수의 영상들에 대한 부호화 결과를 저장하는데, 본 발명의 일 실시예에서, 부호화 결과를 SDRAM에 저장할 수 있다. 여기서, 영상 저장부(36)는 상기 복수의 영상들 중 N번째 영상에 대한 부호화 결과를 저장하는 동안에 엑시프 정보 저장부(34)는 상기 복수의 영상들 중 (N-1)번째 영상에 대한 엑시프 정보를 저장할 수 있다. 여기서, N은 자연수이다.
59 단계에서, 결합부(37)는 추천 영상을 기초로 선택된 영상에 대응하는 엑시프 정보와, 전체 영상 및 썸네일 영상의 부호화 결과를 결합하여 최적 영상을 출력한다. 본 발명의 일 실시예에서, 외부의 호스트가 추천 영상을 기초로 최적 영상을 선택할 수 있다. 또한, 본 발명의 다른 실시예에서, 외부의 호스트로부터 별 도의 제어 없이, 최적 영상 선택 장치(30)는 추천 영상을 기초로 최적 영상을 선택하여 출력할 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명이 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이와 균등하거나 또는 등가적인 변형 모두는 본 발명 사상의 범주에 속한다 할 것이다.
또한, 본 발명에 따른 시스템은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
도 1은 본 발명의 일 실시예에 따른 영상 처리 장치를 개략적으로 나타내는 블록도이다.
도 2는 도 1에 포함된 최적 영상 선택 장치를 상세하게 나타내는 블록도이다.
도 3은 도 2에 포함된 엑시프 정보 저장부에 저장되는 엑시프 정보의 일 예를 나타낸다.
도 4는 도 2의 최적 영상 선택 장치의 동작을 설명하기 위한 타이밍도이다.
도 5는 본 발명의 일 실시예에 따른 최적 영상 선택 방법을 나타내는 흐름도이다.

Claims (18)

  1. 연속적으로 촬영된 복수의 영상들의 화질을 측정하는 단계;
    상기 복수의 영상들의 부가 정보를 저장하는 단계;
    상기 복수의 영상들을 부호화하여, 상기 복수의 영상들에 대한 부호화 결과들을 저장하는 단계;
    상기 측정된 화질을 기초로 상기 복수의 영상들 중 하나를 선택하는 단계; 및
    상기 선택된 영상에 대응하는 상기 부가 정보와 상기 부호화 결과를 결합하여 출력 영상을 제공하는 단계를 포함하는 영상 선택 방법.
  2. 제1항에 있어서,
    상기 부가 정보는 엑시프(Exif) 정보인 것을 특징으로 하는 영상 선택 방법.
  3. 제2항에 있어서,
    상기 화질을 측정하는 단계는,
    상기 복수의 영상들 각각의 휘도 분포를 나타내는 히스토그램을 분석하여 상기 복수의 영상들의 휘도를 측정하는 단계를 포함하는 것을 특징으로 하는 영상 선택 방법.
  4. 제3항에 있어서,
    상기 화질을 측정하는 단계는,
    상기 복수의 영상들의 선명도를 측정하는 단계를 더 포함하는 것을 특징으로 하는 영상 선택 방법.
  5. 제4항에 있어서,
    상기 복수의 영상들의 명암 정보를 추출하는 단계를 더 포함하고,
    상기 휘도를 측정하는 단계는 상기 추출된 명암 정보를 기초로 상기 복수의 영상들의 휘도를 측정하고,
    상기 선명도를 측정하는 단계는 상기 추출된 명암 정보를 기초로 상기 복수의 영상들의 선명도를 측정하는 것을 특징으로 하는 영상 선택 방법.
  6. 제1항에 있어서,
    상기 복수의 영상들의 부가 정보를 저장하는 단계는, 상기 복수의 영상들 중 N번째 영상에 대한 부호화 결과를 저장하는 동안에, 상기 복수의 영상들 중 (N-1)번째 영상에 대한 부가 정보를 저장하고, 상기 N은 자연수인 것을 특징으로 하는 영상 선택 방법.
  7. 제2항에 있어서,
    상기 부호화 결과들을 저장하는 단계는,
    상기 복수의 영상들의 전체 영상 및 썸네일(thumbnail) 영상을 JPEG 포맷으로 부호화하여, 상기 복수의 영상들의 상기 전체 영상 및 상기 썸네일 영상에 대한 부호화 결과들을 저장하는 것을 특징으로 하는 영상 선택 방법.
  8. 제7항에 있어서,
    상기 출력 영상을 제공하는 단계는,
    상기 선택된 영상에 대응하는 상기 엑시프 정보와, 상기 전체 영상 및 상기 썸네일 영상의 부호화 결과를 결합하여 상기 출력 영상을 제공하는 것을 특징으로 하는 영상 선택 방법.
  9. 연속적으로 촬영된 복수의 영상들의 화질을 측정하는 화질 측정부;
    상기 복수의 영상들의 부가 정보를 저장하는 제1 저장부;
    상기 복수의 영상들을 부호화하는 부호화부;
    상기 복수의 영상들에 대한 부호화 결과들을 저장하는 제2 저장부;
    상기 측정된 화질을 기초로 상기 복수의 영상들 중 하나를 선택하는 선택부; 및
    상기 선택된 영상에 대응하는 상기 부가 정보와 상기 부호화 결과를 결합하여 출력 영상을 제공하는 결합부를 포함하는 영상 선택 장치.
  10. 제9항에 있어서,
    상기 부가 정보는 엑시프 정보인 것을 특징으로 하는 영상 선택 장치.
  11. 제10항에 있어서,
    상기 화질 측정부는,
    상기 복수의 영상들 각각의 휘도 분포를 나타내는 히스토그램을 분석하여 상기 복수의 영상들의 휘도를 측정하는 휘도 측정부를 포함하는 것을 특징으로 하는 영상 선택 장치.
  12. 제11항에 있어서,
    상기 화질 측정부는,
    상기 복수의 영상들의 선명도를 측정하는 선명도 측정부를 더 포함하는 것을 특징으로 하는 영상 선택 장치.
  13. 제12항에 있어서,
    상기 복수의 영상들의 명암 정보를 추출하는 명암 추출부를 더 포함하고,
    상기 휘도 측정부는 상기 추출된 명암 정보를 기초로 상기 복수의 영상들의 휘도를 측정하고,
    상기 선명도 측정부는 상기 추출된 명암 정보를 기초로 상기 복수의 영상들의 선명도를 측정하는 것을 특징으로 하는 영상 선택 장치.
  14. 제9항에 있어서,
    상기 제1 저장부는 상기 복수의 영상들 중 N번째 영상에 대한 부호화 결과가 상기 제2 저장부에 저장되는 동안에, 상기 복수의 영상들 중 (N-1)번째 영상의 부가 정보를 저장하고, 상기 N은 자연수인 것을 특징으로 하는 영상 선택 장치.
  15. 제10항에 있어서,
    상기 부호화부는, 상기 복수의 영상들의 전체 영상 및 썸네일 영상을 JPEG 포맷으로 부호화하는 것을 특징으로 하는 영상 선택 장치.
  16. 제15항에 있어서,
    상기 결합부는, 상기 선택된 영상에 대응하는 상기 엑시프 정보와, 상기 전체 영상 및 상기 썸네일 영상의 부호화 결과를 결합하여 엑시프 포맷의 상기 출력 영상을 제공하는 것을 특징으로 하는 영상 선택 장치.
  17. 연속적으로 촬영되는 복수의 영상들을 감지하는 영상 감지부;
    상기 감지된 복수의 영상들을 YCbCr 포맷으로 변환하는 변환부; 및
    상기 변환된 복수의 영상들 각각에 대한 엑시프 정보와 부호화 결과를 저장하고, 상기 변환된 복수의 영상들 중 하나의 추천 영상을 선택하여, 상기 선택된 추천 영상에 대응되는 상기 엑시프 정보와 상기 부호화 결과를 결합하여 출력 영상을 제공하는 영상 선택부를 포함하는 영상 처리 장치.
  18. 제17항에 있어서,
    상기 추천 영상을 기초로 상기 출력 영상을 선택하는 호스트를 더 포함하고,
    상기 영상 선택부는 상기 호스트에서 선택된 상기 출력 영상에 대응하는 상기 엑시프 정보와 상기 부호화 결과를 결합하여 출력하는 것을 특징으로 하는 영상 처리 장치.
KR1020080118809A 2008-11-27 2008-11-27 최적 영상 선택 방법 및 장치 KR100968375B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080118809A KR100968375B1 (ko) 2008-11-27 2008-11-27 최적 영상 선택 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080118809A KR100968375B1 (ko) 2008-11-27 2008-11-27 최적 영상 선택 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20100060275A KR20100060275A (ko) 2010-06-07
KR100968375B1 true KR100968375B1 (ko) 2010-07-09

Family

ID=42361214

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080118809A KR100968375B1 (ko) 2008-11-27 2008-11-27 최적 영상 선택 방법 및 장치

Country Status (1)

Country Link
KR (1) KR100968375B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102243078B1 (ko) * 2020-11-26 2021-04-21 사이테크놀로지스 주식회사 편광 조절 장치를 이용한 최적 편광 영상 촬영 방법, 이를 구현하기 위한 프로그램이 저장된 기록매체 및 이를 구현하기 위해 매체에 저장된 컴퓨터프로그램
KR102472963B1 (ko) * 2022-05-09 2022-12-01 주식회사 메디픽셀 의료 영상의 프레임 이미지별 강도의 분포를 이용한 최적 프레임 선택 방법 및 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100601846B1 (ko) 2003-06-14 2006-07-19 에스케이 텔레콤주식회사 동영상 압축 부호화기의 왜곡 최적화 장치 및 방법
KR20070071786A (ko) * 2005-12-30 2007-07-04 엘지.필립스 엘시디 주식회사 동영상 화질 저하 측정 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100601846B1 (ko) 2003-06-14 2006-07-19 에스케이 텔레콤주식회사 동영상 압축 부호화기의 왜곡 최적화 장치 및 방법
KR20070071786A (ko) * 2005-12-30 2007-07-04 엘지.필립스 엘시디 주식회사 동영상 화질 저하 측정 방법

Also Published As

Publication number Publication date
KR20100060275A (ko) 2010-06-07

Similar Documents

Publication Publication Date Title
US9813615B2 (en) Image photographing apparatus and image photographing method for generating a synthesis image from a plurality of images
US8130278B2 (en) Method for forming an improved image using images with different resolutions
JP4898761B2 (ja) オブジェクト追跡を用いたデジタル画像の手ぶれ補正装置および方法
US9094648B2 (en) Tone mapping for low-light video frame enhancement
JP4703710B2 (ja) オブジェクト追跡を用いたデジタル画像の手ぶれ補正装置及び方法
JP4008778B2 (ja) 撮像装置
KR101913837B1 (ko) 파노라마 영상 생성 방법 및 이를 적용한 영상기기
JP4612845B2 (ja) 画像処理装置およびその方法
US20150334283A1 (en) Tone Mapping For Low-Light Video Frame Enhancement
US9635212B2 (en) Dynamic compression ratio selection
JP2008109336A (ja) 画像処理装置および撮像装置
JP6720881B2 (ja) 画像処理装置及び画像処理方法
US8295609B2 (en) Image processing apparatus, image processing method and computer readable-medium
US20170280066A1 (en) Image processing method by image processing apparatus
US8830359B2 (en) Image processing apparatus, imaging apparatus, and computer readable medium
US9300856B2 (en) Image encoding apparatus and method of camera device
US9432646B2 (en) Image processing apparatus, image processing method, program and electronic apparatus
KR101110725B1 (ko) 썸네일 이미지를 이용한 후보 이미지 제시 방법 및 이를 수행하는 이미지 신호 처리 장치와 촬상 장치
KR100968375B1 (ko) 최적 영상 선택 방법 및 장치
JP2008294524A (ja) 画像処理装置および画像処理方法
JP2011041143A (ja) 画像処理装置
JP2010258885A (ja) 撮像装置及び画像処理方法
JP2015233202A (ja) 画像処理装置および画像処理方法、並びにプログラム
JP2012050121A (ja) 撮像装置、撮像方法および撮像プログラム
JP2005109757A (ja) 画像撮像装置、画像処理装置、画像撮像方法、及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130503

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140402

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150522

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160525

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170623

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180525

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20190625

Year of fee payment: 10