KR20100070043A - 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치 - Google Patents

디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치 Download PDF

Info

Publication number
KR20100070043A
KR20100070043A KR1020080128634A KR20080128634A KR20100070043A KR 20100070043 A KR20100070043 A KR 20100070043A KR 1020080128634 A KR1020080128634 A KR 1020080128634A KR 20080128634 A KR20080128634 A KR 20080128634A KR 20100070043 A KR20100070043 A KR 20100070043A
Authority
KR
South Korea
Prior art keywords
image
scene
frame
output
frame image
Prior art date
Application number
KR1020080128634A
Other languages
English (en)
Inventor
임현옥
장순근
김웅식
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080128634A priority Critical patent/KR20100070043A/ko
Priority to US12/633,002 priority patent/US20100149367A1/en
Publication of KR20100070043A publication Critical patent/KR20100070043A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 입력 영상을 생성하고, 상기 입력 영상에 대해 장면을 인식하여, 인식한 장면에 대응하는 프레임 영상을 도출한 후, 상기 프레임 영상과 상기 입력 영상을 합성한 출력 영상을 디스플레이 또는 저장하는 단계를 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 방법을 적용한 디지털 영상 신호 처리 장치에 관한 것이다. 상기 프레임 영상은 사용자가 직접 생성 및 설정가능하며, 상기 입력 영상의 테두리 영역에 상기 프레임 영상을 합성하거나 상기 프레임 영상의 투명도를 조절하여 합성할 수 있다. 따라서 상기 입력 영상의 디스플레이에 영향을 최소화하면서, 사용자로 하여금 상기 프레임 영상을 확인하여 상기 입력 영상으로부터 인식한 장면 정보를 용이하게 습득할 수 있다.

Description

디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치{Method for displaying scene recognition of digital image signal processing apparatus, medium for recording the method and digital image signal processing apparatus applying the method}
본 발명은 촬영한 영상에 대하여 장면 인식을 행하는 디지털 영상 신호 처리 장치의 제어 방법, 및 상기 장치에 관한 것이다.
촬영 장면을 인식하고, 인식한 장면에 대응하는 아이콘 또는 텍스트(text)를 자동으로 LCD에 디스플레이하는 디지털 카메라가 있다. 텍스트의 경우에는 촬영 영상과 함께 텍스트를 함께 디스플레이함으로써 촬영 영상의 디스플레이 효과가 떨어지며, 아이콘의 경우 사용자가 아이콘의 의미를 숙지하지 않는 이상 그 전달 효과가 떨어진다.
본 발명은 촬영 영상의 장면을 인식하고, 인식한 장면에 관한 정보와 촬영한 영상을 효과적으로 디스플레이할 수 있는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 상기 방법을 기록한 기록 매체, 상기 방법에 따라 동작하는 디지털 영상 신호 처리 장치를 제공하고자 한다.
본 발명은 입력 영상을 생성하는 단계와, 상기 입력 영상에 대해 장면을 인식하는 단계와, 인식한 장면에 대응하는 프레임 영상을 도출하는 단계와, 상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 단계와, 상기 출력 영상을 디스플레이하는 단계를 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법을 제공한다.
본 발명에 관한 표시 방법에 따르면, 상기 프레임 영상과 상기 입력 영상은 동일한 저장 형식의 영상 데이터로 나타내어 지는 것이다.
본 발명에 관한 표시 방법은 상기 프레임 영상의 투명도를 조절하는 단계를 더 구비하고, 조절한 투명도를 갖는 상기 프레임 영상을 포함하는 상기 출력 영상을 생성할 수 있다.
본 발명에 관한 표시 방법은 프레임 영상을 생성하는 단계와, 생성한 상기 프레임 영상에 대하여 장면을 설정하여 장면에 따른 프레임 영상에 관한 데이터베이스를 생성하는 단계를 더 구비할 수 있다.
본 발명에 관한 표시 방법에 있어서, 상기 데이터베이스는 일 장면에 대하여 적어도 하나의 프레임 영상을 구비할 수 있다.
본 발명에 관한 표시 방법은 제1 장면에 대하여 제1 프레임 영상이 도출되도록 설정하는 단계를 더 구비할 수 있다.
본 발명에 관한 표시 방법은 상기 제1 장면에 대하여 제2 프레임 영상이 도출되도록 변경 설정하는 단계를 더 구비할 수 있다.
본 발명에 관한 표시 방법에 있어서, 상기 입력 영상은 피사체를 촬영하여 생성하는 것일 수 있다.
본 발명에 관한 표시 방법은 상기 출력 영상을 포함하는 영상 파일을 생성하는 단계와, 상기 영상 파일을 저장하는 단계를 더 포함할 수 있다.
본 발명에 관한 표시 방법은 인식한 장면에 대응하는 프레임 영상의 투명도를 달리하여 상기 입력 영상과 합성함으로써 복수의 출력 영상들을 생성하는 단계와, 상기 복수의 출력 영상들을 구비하는 영상 파일을 생성하는 단계를 구비할 수 있다.
본 발명에 관한 표시 방법은 제1 투명도를 갖는 상기 프레임 영상과 상기 입력 영상을 합성하여 제1 해상도의 제1 출력 영상을 생성하는 단계와, 제2 투명도를 갖는 상기 제2 프레임 영상과 상기 입력 영상을 합성하여 제2 해상도의 제2 출력 영상을 생성하는 단계와, 상기 제1 출력 영상과 상기 제2 출력 영상을 구비하는 영상 파일을 생성하는 단계를 포함할 수 있다.
본 발명에 관한 표시 방법에 있어서, 상기 제1 해상도가 클 수록 상기 제1 투명도는 더 높아지도록 설정할 수 있다.
본 발명에 관한 표시 방법에 있어서, 상기 영상 파일은 상기 입력 영상만으로 이루어진 제3 해상도의 제3 출력 영상을 더 포함할 수 있다.
본 발명에 관한 표시 방법은 상기 영상 파일로부터 출력 영상들 중 적어도 어느 하나를 복원하는 단계와, 복원한 출력 영상을 디스플레이하는 단계를 포함할 수 있다.
본 발명에 관한 표시 방법은 확대 제어 신호를 입력하는 단계와, 상기 확대 제어 신호에 따라 해상도가 큰 출력 영상을 복원하는 단계와, 복원한 출력 영상을 디스플레이하는 단계를 구비할 수 있다.
본 발명에 관한 표시 방법은 미리 보기 제어 신호를 입력하는 단계와, 상기 미리 보기 제어 신호에 따라 해상도가 작은 출력 영상을 복원하는 단계와, 복원한 출력 영상을 디스플레이하는 단계를 구비할 수 있다.
또한, 본 발명은 상술한 디지털 영상 신호 처리 장치의 장면 인식 표시 방법을 컴퓨터가 읽을 수 있도록 기록한 기록 매체를 제공한다.
아울러, 본 발명은 입력 영상을 생성하는 입력 영상 생성부와, 상기 입력 영상으로부터 장면을 인식하는 장면 인식부와, 인식한 장면에 대응하는 프레임 영상을 도출하는 프레임 영상 도출부와, 상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 출력 영상 생성부와, 상기 출력 영상을 디스플레이하도록 제어하는 디스플레이 제어부를 구비하는 디지털 영상 신호 처리 장치를 제공한다.
상기 프레임 영상과 상기 입력 영상은 동일한 저장 형식의 영상 데이터로 나 타내어진다.
본 발명에 관한 디지털 영상 신호 처리 장치는 장면에 따른 프레임 영상을 저장한 데이터베이스를 더 포함할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치는 생성한 프레임 영상에 대하여 장면을 설명하는 프레임 영상 설정부를 더 구비할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서, 상기 데이터베이스는 일 장면에 대하여 복수의 프레임 영상들이 저장되어 있으며. 상기 일 장면에 대하여 제1 프레임 영상으로부터 제2 프레임 영상으로 변경하는 프레임 영상 변경부를 더 구비할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치는 상기 출력 영상 생성부는 상기 프레임 영상의 투명도를 조절하는 투명도 조절부와, 상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 합성부를 더 구비할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서. 상기 합성부는 다른 투명도를 갖는 프레임 영상들 각각을 포합하는 출력 영상들을 생성할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서, 상기 합성부는 제1 투명도를 갖는 제1 프레임 영상과 상기 입력 영상을 포함하는 제1 해상도의 제1 출력 영상 및 제2 투명도를 갖는 제2 프레임 영상과 상기 입력 영상을 포함하는 제2 해상도의 제2 출력 영상을 생성할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서, 상기 합성부는 상기 입력 영상만으로 이루어진 제3 해상도의 제3 출력 영상을 생성할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치는 상기 출력 영상을 포함하는 영상 파일을 생성하는 인코더를 더 포함할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치는 상기 영상 파일로부터 상기 출력 영상을 복원하는 디코더를 더 포함할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서, 상기 디코더는 확대 제어 신호에 따라 해상도가 큰 출력 영상을 복원하며, 상기 디스플레이 제어부는 복원한 상기 출력 영상을 디스플레이하도록 제어할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치에 있어서, 상기 디코더는 미리 보기 제어 신호에 따라 해상도가 작은 출력 영상을 복원하며, 상기 디스플레이 제어부는 복원한 상기 출력 영상을 디스플레이하도록 제어할 수 있다.
본 발명에 따르면, 피사체를 촬영한 입력 영상과 함께 상기 입력 영상의 장면에 관한 정보를 표시하는 프레임 영상을 사용자가 설정한 것을 사용할 수 있다. 따라서 사용자가 상기 입력 영상의 장면 인식을 용이하게 확인할 수 있다.
또한, 상기 프레임 영상의 투명도를 조절하여 입력 영상과 함께 디스플레이하거나 또는 상기 입력 영상의 테두리 영역에 상기 프레임 영상을 디스플레이함으로써 상기 입력 영상의 표시에 영향을 최소하면서 인식한 장면에 관한 정보를 사용자에게 전달할 수 있다.
본 발명에 관한 디지털 영상 신호 처리 장치로서 디지털 카메라를 일 실시 예로서 설명한다. 그러나 상기 디지털 영상 신호 처리 장치가 디지털 카메라에 한정되는 것은 아니며, 카메라 기능이 부가된 카메라폰, PDA(personal digital assistant), PMP(portable multimedia player) 등의 디지털 기기에도 적용될 수 있다.
도 1은 본 발명의 일 실시 예에 따른 디지털 카메라의 구성을 나타낸 블럭도이다.
도 1을 참조하면, 상기 디지털 카메라(100)는 피사체로부터의 광학 신호를 입력하는 광학부(11), 상기 광학부(11)를 통해 입력된 광학 신호를 전기 신호로 변환하는 촬상 소자(12), 촬상 소자(12)로부터 제공된 전기 신호에 대해 노이즈 저감 처리, 디지털 신호로 변환 처리 등의 신호 처리를 행하는 입력 신호 처리부(13)를 구비한다. 상기 광학부(11)를 구동하는 모터(14) 및 모터(14)의 동작을 제어하는 구동부(15)를 구비한다. 또한, 상기 디지털 카메라(100)는 사용자의 조작 신호를 입력하는 사용자 입력부(UI, 20), 입력 영상의 데이터, 연산 처리를 위한 데이터, 처리 결과 등을 임시 저장하는 SDRAM(30), 디지털 카메라(100)의 동작에 필요한 알고리즘, 설정 데이터 등을 저장하는 플래시 메모리(40), 영상 파일을 저장하는 기록 장치로서 SD/CF/SM 카드(50)를 구비할 수 있다. 그리고 상기 디지털 카메라(100)는 디스플레이 장치로서 액정 디스플레이 장치(LCD, 60)가 장착되어 있다. 또한, 소리를 디지털 신호로 변환하거나 또는 음원의 디지털 신호를 아날로그 신호를 변화하는 처리, 오디오 파일을 생성하는 처리 등을 수행하는 오디오 신호 처리부(71), 소리를 출력하는 스피커(72), 소리를 입력하는 마이크(73)를 구비할 수 있 다. 그리고, 상기 디지털 카메라(100)는 상기 디지털 카메라(100)의 동작을 제어하는 디지털 신호 처리부(DSP, 80)를 구비한다.
각 구성부에 대해 더욱 구체적으로 살펴본다.
상기 광학부(11)는 광학 신호를 집광하는 렌즈, 상기 광학 신호의 양(광량)을 조절하는 조리개, 광학 신호의 입력을 제어하는 셔터 등을 포함할 수 있다. 상기 렌즈는 초점 거리(focal length)에 따라 화각이 좁아지거나 또는 넓어지도록 제어하는 줌 렌즈 및 피사체의 초점을 맞추는 포커스 렌즈 등을 포함하며, 이들 렌즈들은 각각 하나의 렌즈로 구성될 수도 있지만, 복수 렌즈들의 군집으로 이루어질 수도 있다. 셔터로 가리개가 위아래로 움직이는 기계식 셔터를 구비할 수 있다. 또는 별도의 셔터 장치 대신 촬상 소자(11)에 전기 신호의 공급을 제어하여 셔터 역할을 행할 수도 있다.
상기 광학부(11)를 구동하는 모터(14)는 오토 포커스, 자동 노출 조정, 조리개 조정, 줌, 초점 변경 등의 동작을 실행하기 위하여 렌즈의 위치, 조리개의 개폐, 셔터의 동작 등을 구동할 수 있다.
상기 모터(14)는 구동부(15)에 의해 제어된다. 상기 구동부(15)는 DSP(80)로부터 입력된 제어 신호에 따라 상기 모터(14)의 동작을 제어한다.
촬상 소자(12)는 광학부(11)로부터 입력된 광학 신호를 수광하여, 피사체의 상을 결상한다. 촬상 소자(12)로 CMOS(Complementary Metal Oxide Semiconductor) 센서 어레이, CCD(Charge coupled device) 센서 어레이 등을 사용할 수 있다.
입력 신호 처리부(13)는 CCD로부터 공급된 전기 신호는 아날로그 신호로서 이를 디지털화하는 A/D 컨버터를 더 구비할 수 있다. 또한, 촬상 소자(12)로부터 제공된 전기 신호에 대해 게인(gain) 조정이나 파형을 정형화하는 신호 처리를 행하는 회로를 구비할 수 있다.
UI(20)는 사용자가 상기 디지털 카메라(10)를 조작하거나 촬영시 각종의 설정을 행하기 위한 부재를 포함할 수 있다. 예를 들어, 버튼, 키, 터치 패널, 터치 스크린, 다이얼 등의 형태로 구현될 수 있으며, 전원 온/오프, 촬영 개시/정지, 재생 개시/정지/서치, 광학계의 구동, 모드 변환, 메뉴 조작, 선택 조작 등의 사용자 제어 신호를 입력할 수 있다.
SDRAM(30)은 입력 신호 처리부(13)로부터 제공된 영상의 RAW 데이터(RGB 데이터)를 임시 저장할 수 있으며, 임시 저장된 RAW 데이터는 DSP(80)의 연산에 따라 소정의 영상 신호 처리가 행해지기도 하고, 다른 필요한 구성부로 전달되기도 한다. 또한, 상기 SDRAM(30)에는 플래시 메모리(40)에 저장된 알고리즘을 구성하는 데이터를 실행 가능한 데이터로 변환하여 임시 저장할 수도 있다. SDRAM(30)에 저장된 데이터를 이용하여 DSP(80)에서 연산 처리하여 상기 알고리즘에 따른 동작을 수행할 수 있다. 아울러, 상기 플래시 메모리(40)에 저장한 영상 파일을 압축 해제하여 변환한 영상 데이터를 임시 저장할 수도 있다. 이렇게 임시 저장된 영상 데이터는 LCD(60)로 전송되어 소정의 영상을 디스플레이할 수도 있다. SDRAM(30)는 일 예로서, 전원 공급 동안 데이터를 임시 기억하는 다양한 휘발성 메모리를 사용할 수 있으며, 복수의 메모리 소자들을 집적한 반도체 소자를 사용할 수도 있다.
플래시 메모리(40)는 상기 디지털 카메라(100)를 작동하는 필요한 OS, 응용 프로그램, 본 발명에 관한 제어 방법의 알고리즘을 실행하는 데이터 등을 저장할 수 있다. 상기 플래시 메모리(40)는 일 예로서, ROM 등의 다양한 비휘발성 메모리로 사용할 수 있다.
SD/CF/SM 카드(50)에는 입력 신호 처리부(13)로부터 제공된 영상 데이터를 압축 처리하여 생성한 영상 파일을 기록할 수 있다. SD/CF/SM 카드(50)는 일 예로서, HDD(Hard Disk Driver), 광 디스크, 광 자기 디스크, 홀로그램 메모리 등을 사용할 수도 있다.
LCD(60)는 입력 신호 처리부(13)로부터 제공되는 영상 데이터에 대응하는 영상을 실시간으로 구현할 수 있으며, 또는 SD/CF/SM 카드(50)에 저장된 영상 파일로부터 복원한 영상 데이터에 대응하는 영상을 디스플레이할 수 있다. 본 실시 예에서는 LCD(60)를 예시하였지만, 이에 한정되는 것은 아니며 유기 전계발광 디스플레이 장치, 전기영동 디스플레이 장치 등을 채용할 수 있다.
오디오 신호 처리부(71)는 DSP(80)로부터 제공되는 음원의 디지털 신호를 소리로 변환하고, 상기 소리를 증폭하여 스피커(72)로 전달하여 출력한다. 또는 마이크(73)를 통해 소리를 입력하고, 상기 소리를 디지털 신호로 변환하여 압축하여 오디오 파일을 생성할 수 있다. 그리고 DSP(80)로 전달하여 연산 처리를 수행하도록 할 수 있다.
DSP(80)는 입력된 영상 데이터에 대해 노이즈를 저감하고, 감마 컬렉션(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등의 영상 신호 처리를 수행할 수 있다. 또한, 영상 신호 처리하여 생성한 영상 데이터를 압축 처리하여 영상 파일을 생성할 수 있으며, 또는 상기 영상 파일로부터 영상 데이터를 복원할 수 있다. 영상의 압축형식은 가역 형식 또는 비 가역 형식이어도 된다. 적절한 형식의 예로서, JPEG(Joint Photographic Experts Group)형식이나 JPEG 2000 형식 등으로 변환도 가능하다. 또한, DSP(80)에서는 기능적으로 불선명 처리, 색체 처리, 블러 처리, 엣지 강조 처리, 영상 해석 처리, 영상 인식 처리, 영상 이펙트 처리 등도 행할 수 있다. 영상 인식 처리로 장면 인식 처리를 행할 수 있다. 또한, DSP(80)에서는 LCD(60)에 디스플레이하기 위한 표시 영상 신호 처리를 행할 수 있다. 예를 들어, 휘도 레벨 조정, 색 보정, 콘트라스트 조정, 윤곽 강조 조정, 화면 분할 처리, 캐릭터 영상 등 생성 및 영상의 합성 처리 등을 행할 수 있다. 상기 DSP(80)는 외부 모니터(200)와 연결되어, 외부 모니터(200)에 디스플레이되도록 소정의 영상 신호 처리를 행할 수 있으며, 이렇게 처리된 영상 데이터를 전송하여 상기 외부 모니터(200)에서 해당 영상이 디스플레이되도록 제어할 수 있다.
DSP(80)는 상술한 바와 같은 영상 신호 처리를 수행하며, 상기 처리 결과에 따라 각 구성부를 제어할 수 있다. 또한 UI(20)를 통해 입력된 사용자의 제어 신호에 따라 각 구성부를 제어할 수 있다. 상기 영상 신호 처리를 수행하기 위한 알고리즘은 플래시 메모리(40)에 저장되어 있으며, 연산 처리를 위해 실행 가능한 데이터로 변환하여 SDRAM(30)에 저장하여 이에 따라 DSP(80)에서 해당 연산을 수행할 수 있다.
또한, DSP(80)는 장면 인식 모드 동안 인식한 장면을 표시하도록 제어한다. 상기 DSP(80)의 제어 동작에 관하여 도 2 내지 5를 함께 참조하여 상세히 설명한다.
도 2는 상기 DSP(80)의 일 실시 예를 나타낸 블럭도이다.
도 2를 참조하면, DSP(80a)는 입력 영상을 생성하는 영상 생성부(81a)와, 상기 입력 영상에 대해 장면을 인식하는 장면 인식부(82a), 인식한 장면에 대응하는 프레임 영상을 도출하는 프레임 영상 도출부(83a), 상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 출력 영상 생성부(84a)와, 상기 출력 영상을 디스플레이하도록 제어하는 디스플레이 제어부(85a)를 구비한다.
상기 영상 생성부(81a)는 광학부(11), 입력 신호 처리부(13)를 거쳐 입력된 영상 데이터에 대하여 노이즈 저감 처리, 감마 컬렉션(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등 중 적어도 하나의 영상 신호 처리를 행하여 입력 영상을 생성한다. 그리고 상기 장면 인식부(82a)에서 상기 입력 영상으로부터 인물, 풍경, 야경, 스포츠 등 장면의 상황을 인식한다.
인식한 장면에 대응하는 프레임 영상은 프레임 영상 도출부(83a)에서 도출한다. 본 발명에서 프레임 영상은 인식한 장면을 사용자로 하여금 인지하도록 나타내는 표시이다. 본 실시 예에서 상기 프레임 영상으로 사용자가 지정한 것을 사용할 수 있다. 본 실시 예에서는 상기 프레임 영상은 SD/CF/SM Card(50)에 저장되어 있을 수 있다. 상기 프레임 영상을 포함하고, 상기 프레임 영상이 어떠한 장면에 대 응하는지에 관한 정보를 exif 등에 저장하여 영상 파일 형태로 SD/CF/SM Card(50)에 저장될 수 있다. 상기 프레임 영상과 상기 입력 영상은 동일한 형식으로 압축 저장될 수 있다. 예를 들어, JPEG 영상 파일로서 SD/CF/SM Card(50)에 저장될 수 있다. 즉, 상기 프레임 영상과 상기 입력 영상은 동일한 저장 형식의 영상 데이터로 나타내어질 수 있다. 따라서 프레임 영상 영상 도출부(83a)는 인식한 장면에 관한 정보를 갖는 영상 파일을 SD/CF/SM Card(50)로부터 도출하고, 도출한 영상 파일을 압축 해제하여 프레임 영상을 도출할 수 있다.
출력 영상 생성부(84a)는 상기 입력 영상과 도출한 상기 프레임 영상을 합성하여 출력 영상을 생성한다. 그리고 디스플레이 제어부(85a)에서 상기 출력 영상이 LCD(60)에 표시되도록 제어한다. 디스플레이 제어부(85a)는 출력 영상의 표시를 위한 영상 신호 처리를 행할 수 있다. 따라서 사용자는 LCD(60)에 디스플레이되는 출력 영상 중 프레임 영상을 확인하여 상기 입력 영상의 장면 인식을 확인할 수 있다.
도 3은 도 1에 도시된 디지털 카메라에서 디지털 신호 처리부의 다른 실시 예를 나타낸 블럭도이다.
도 3을 참조하면, DSP(80b)는 입력 영상을 생성하는 영상 생성부(81b)와, 상기 입력 영상에 대해 장면을 인식하는 장면 인식부(82b), 인식한 장면에 대응하는 프레임 영상을 도출하는 프레임 영상 도출부(83b), 상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 출력 영상 생성부(84b)와, 상기 출력 영상을 디스플레이하도록 제어하는 디스플레이 제어부(85b)를 구비한다. 그리고 장면에 따른 프레임 영상의 목록을 저장한 데이터베이스(87b)를 더 구비할 수 있다. 상기 데이터베이스(87b)에서는 일 장면에 대하여 적어도 하나 이상의 프레임 영상들을 관계짓는 목록을 구비할 수 있다. 따라서, 상기 프레임 영상 도출부(83b)는 상기 데이터베이스(87b)로부터 인식한 장면에 대응하는 프레임 영상에 관한 정보를 도출하고, 상기 정보에 따라 SD/CF/SM Card(50)로부터 프레임 영상을 도출할 수 있다. 상기 데이터베이스(87b)에서 장면에 대응하는 프레임 영상을 복수개 관계지은 목록을 저장할 수도 있는데, 이때 복수의 프레임 영상들 중 우선하는 순위 정보, 또는 사용자가 지정한 정보 등을 함께 저장할 수도 있다.
도 4는 도 1의 디지털 카메라에서 DSP의 또 다른 실시 예를 나타낸 도면이다.
도 4를 참조하면, DSP(80c)는 입력 영상을 생성하는 영상 생성부(81c)와, 상기 입력 영상에 대해 장면을 인식하는 장면 인식부(82c), 인식한 장면에 대응하는 프레임 영상을 도출하는 프레임 영상 도출부(83c), 상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 출력 영상 생성부(84c)와, 상기 출력 영상을 디스플레이하도록 제어하는 디스플레이 제어부(85c)를 구비한다.
그리고 프레임 영상을 설정하는 프레임 영상 설정부(86c)를 더 포함할 수 있다. 광학부(11), 촬상 소자(12), 입력 신호 처리부(13)를 통해 입력된 영상 신호에 대하여 영상 생성부(81c)에서 일 영상을 생성할 수 있다. 상기 프레임 영상 설정부(86c)에서는 생성한 상기 일 영상에 대하여 장면과 관련지어 프레임 영상으로 설정할 수 있다. 프레임 영상 설정부(86c)는 사용자가 UI(20)를 통해 입력한 제어 신 호에 따라 상기 일 영상을 특정 장면을 인식한 경우 표시하는 프레임 영상으로 설정할 수 있다. 또는 장면 인식부(82c)에서 상기 일 영상에 대하여 인식한 장면에 대응하여 프레임 영상으로 설정할 수도 있다.
또한, 상기 프레임 영상 설정부(86c)는 SD/CF/SM Card(50)에 저장된 영상들로부터 특정 장면에 대응하는 프레임 영상을 설정할 수도 있다. 예를 들어, 사용자는 상기 영상들을 LCD(60)에 재생하여 확인한 후, 어느 하나의 영상을 선택하여 야경 장면을 표시하는 프레임 영상으로 선택할 수 있다. 따라서 프레임 영상 설정부(86c)는 선택한 영상을 야경 장면에 대응하는 프레임 영상으로 설정할 수 있다.
데이터베이스(87c)는 상술한 바와 같이 장면에 따른 프레임 영상과의 관계를 나타낸 목록을 저장할 수 있다. 예를 들어, 상기 데이터베이스(87c)에는 하기 표 1과 같이 특정 장면과 매칭 정보의 관계를 나타낸 목록을 저장할 수 있다. 그리고 SD/CF/SM Card(50)의 저장 영역을 상기 매칭 정보와 관련지어 설정하고, 각 저장 영역에 프레임 영상의 영상 파일을 저장할 수 있다. 예를 들어, 하기 표 2와 같이 매칭 정보에 따른 저장 영역에 프레임 영상을 포함하는 영상 파일을 저장할 수 있다. 따라서 프레임 영상 설정부(86c)에서는 일 영상의 매칭 정보를 판단하여, 해당 매칭 정보에 대응하는 저장 영역에 상기 일 영상을 포함하는 영상 파일을 저장할 수 있다. 또한 프레임 영상 도출부(83c)에서도 상기 데이터베이스로부터 인식한 장면의 매칭 정보를 판단하고, 상기 매칭 정보에 대응하는 영상 파일로부터 프레임 영상을 도출할 수 있다.
장면 매칭 정보
인물 1
야경 2
저장 영역 영상 파일
1 DCF22123.JPG
2 DCF22124.JPG
또한, 상기 DSP(80c)에서는 프레임 영상 변경부(88c)를 더 포함할 수 있다. 상기 프레임 영상 변경부(88c)에서는 장면에 따른 프레임 영상을 변경할 수 있다. 상기 표 2에서 저장 영역 1은 매칭 정보 1에 대응하는 것으로, 즉 인물의 장면을 나타내는 DCF22123.JPG 영상 파일이 저장되어 있다. 프레임 영상 변경부(88c)는 사용자의 선택 등에 의하여 상기 저장 영역 1에 다른 영상 파일을 저장할 수 있다. DCF22123.JPG을 대체하여 다른 영상 파일을 저장할 수 있으며, 또는 DCF22123.JPG에 더하여 다른 영상 파일을 더 저장하고 인물의 장면이 인식되는 경우 상기 다른 영상 파일이 우선하여 선택되도록 정할 수 있다.
도 5는 도 1에 도시된 디지털 카메라에서 DSP의 또 다른 실시 예를 나타낸 블럭도이다.
도 5를 참조하면, DSP(80d)는 입력 영상을 생성하는 영상 생성부(81d)와, 상기 입력 영상에 대해 장면을 인식하는 장면 인식부(82d), 인식한 장면에 대응하는 프레임 영상을 도출하는 프레임 영상 도출부(83d), 상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 출력 영상 생성부(84d)와, 상기 출력 영상을 디스플레이하도록 제어하는 디스플레이 제어부(85d)를 구비한다.
본 실시 예에서 상기 출력 영상 생성부(84d)는 투명도 조절부와 합성부를 구비한다. 투명도 조절부는 프레임 영상 도출부(83d)로부터 도출한 프레임 영상의 투명도를 조절할 수 있다. 예를 들어, 입력 영상에 대하여 상기 프레임 영상의 투명도를 7:3 의 비율로 조절할 수 있다. 그리고 합성부에서 상기 투명도에 따라 입력 영상과 프레임 영상을 합성할 수 있다. 따라서 출력 영상을 생성할 수 있다.
상기 출력 영상을 압축하여 영상 파일을 생성하는 인코더(89d)를 더 포함할 수 있다. 또한 상기 영상 파일을 압축 해제하여 출력 영상을 복원하는 디코더(90d)를 더 포함할 수 있다. 디스플레이 제어부(85d)에서는 복원한 상기 출력 영상을 표시를 위한 신호 처리를 행하여 LCD(60)에 디스플레이되도록 한다.
상기 투명도 조절부는 다른 투명도를 설정하고, 이에 따라 합성부에서는 복수의 출력 영상들을 생성하도록 할 수 있다. 예를 들어, 투명도를 3:7, 1:0, 2:8 등으로 다양하게 설정하고, 이에 따라 합성부에서 입력 영상과 프레임 영상을 합성하여 3개의 출력 영상들을 생성할 수 있다. 이 때, 첫 번째 출력 영상은 썸네일 이미지로, 두 번째 출력 영상은 입력 영상만을 포함하는 원본 이미지로, 세 번째 출력 영상은 스크린 네일 이미지로 영상 파일에 함께 저장될 수 있다. 해상도가 증가할 수록 상기 프레임 영상의 투명도를 증가시켜, 표시하고자 하는 입력 영상만을 디스플레이되도록 할 수 있다.
이하에서는 본 발명의 일 실시 예에 따른 디지털 카메라에서 장면 인식 표시 방법의 실시 예들을 순서도를 이용하여 설명한다.
도 6은 상기 장면 인식 표시 방법의 일 실시 예에 관한 순서도이다. 본 실시 예에서는 디지털 카메라의 라이브-뷰 모드, 셔터 버튼을 반누름한 상태의 S1 단계에서 장면 인식을 표시하는 방법을 설명한다. 즉, 영상을 기록하기 위한 촬영을 행하기 전에 장면 인식을 표시하는 방법에 관한 것이다.
도 6을 참조하면, 영상을 입력한다(S11). 입력한 영상으로부터 장면을 인식한다(S12). 인식한 장면에 따른 프레임 영상을 도출한다(S13). 그리고 도출한 프레임 영상의 투명도를 결정하고(S14), 결정한 투명도에 따라 프레임 영상과 입력 영상을 합성하여 출력 영상을 생성한다(S15). 상기 출력 영상을 디스플레이한다(S16).
도 7 내지 14의 사진들을 함께 참조하여 상술한 방법을 더욱 구체적으로 설명한다.
우선, 야경을 나타내는 표시로 도 7의 제1 프레임 영상과 도 8의 제2 프레임 영상이 SD/CF/SM Card 또는 기타 메모리에 저장되어 있다. 광학부, 촬상 소자 등으로부터 입력된 입력 영상 또는 SD/CF/SM Card 등에 저장된 영상 파일을 압축 해제하여 복원된 입력 영상으로부터 장면 인식을 수행하고, 야경 장면을 인식하는 경우 상기 프레임 영상들 중 적어도 어느 하나와 상기 입력 영상을 합성하여 출력 영상을 생성할 수 있다.
도 9는 상기 제1 프레임 영상과 입력 영상을 합성하여 생성한 제1 출력 영상을, 도 10은 상기 제2 프레임 영상과 입력 영상을 합성하여 생성한 제2 출력 영상을 나타낸 사진들이다. 상기와 같이 야경 장면에 대하여 복수의 프레임 영상들이 매칭되어 저장되는 경우, 사용자 등에 의하여 상기 프레임 영상들 중 어느 하나를 선택하거나 또는 우선 순위를 부여할 수 있다.
도 11 내지 13은 프레임 영상을 입력 영상의 일정 영역에 합성한 출력 영상의 다른 실시 예들을 나타낸 사진들이다. 도 11은 입력 영상의 하단부 테두리에 프레임 영상을 복수개 중첩하여 출력 영상을 생성한 예이다. 도 12는 입력 영상의 상단부 테두리에 프레임 영상을 복수개 중첩하여 출력 영상을 나타낸 사진이다. 도 12의 사진에 따르면 상기 입력 영상에서 테두리 영역을 설정하고, 상기 테두리 영역에서 상기 프레임 영상을 중첩하되, 움직이는 효과를 주어 상기 입력 영상의 상하좌우 방향을 나타낼 수 있다. 도 13에는 도 12에서와 같이 상기 입력 영상에서 테두리 영역을 설정하고, 상기 테두리 영역에서 상기 프레임 영상을 중첩하여 출력 영상을 생성할 수 있다. 그러나, 도 13의 사진에 따르면 복수의 프레임 영상들 중 일부에 대하여 블링크(blink) 이미지를 사용함으로써, 출력 영상을 나타낼 수 있다. 도 14는 입력 영상의 특정 영역에 대하여 프레임 영상을 중첩하고, 프레임 영상이 깜빡이는 효과를 갖도록 한 출력 영상의 사진을 나타낸 것이다.
상술한 바와 같이, 입력 영상과 프레임 영상을 다양한 방법으로 중첩하여 출력 영상을 생성 및 디스플레이하면서 사용자가 장면 인식을 용이하고 효과적으로 인지하도록 할 수 있다. 상기 출력 영상은 라이브-뷰 모드, S1 단계에서 LCD에 디스플레이하는 것 뿐만 아니라, 영상 파일에 저장되어 재생 모드에서 디스플레이할 수 있다.
도 15는 본 발명에 관한 디지털 영상 신호 처리 장치에서 장면 인식 표시 방법의 다른 실시 예를 설명하기 위한 순서도이다.
도 15를 참조하면, 우선 촬영 대기 상태에서 시작한다(S21). 그리고 촬영 제어 신호가 입력되는지 판단한다(S22). 여기서 촬영 제어 신호는 일반적으로 셔터를 완전 눌러 생성되는 촬영 개시 신호에 대응하는 것일 수 있다. 촬영 개시 신호로 인하여 피사체의 영상을 캡쳐(capture)하고, 소정의 영상 신호 처리를 거쳐 영상 파일로 저장될 수 있다.
상기 촬영 제어 신호가 입력되지 않으면, 계속 촬영 개시 상태를 유지한다.
상기 촬영 제어 신호가 입력되면, 피사체의 영상을 캡쳐하고 캡쳐한 영상을 입력한다(S23). 그리고 캡쳐한 입력 영상에 대하여 장면을 인식한다(S24). 장면 인식은 상기 입력 영상의 채널별 히스토그램 분포, 칼라 공간 상의 색상 정보 등을 이용하여 야경, 인물 등을 인식할 수 있다.
장면을 인식하여, 인식한 장면에 대응하는 프레임 영상을 도출한다(S25). 프레임 영상의 도출은 SD/CF/SM Card에 저장된 영상 파일로부터 직접 행할 수도 있지만, 메타 데이터를 포함하는 데이터베이스를 이용하여 행할 수도 있다.
도출한 상기 프레임 영상의 투명도를 결정하고(S26), 상기 입력 영상과 프레임 영상을 합성하여 출력 영상을 생성한다(S27). 상기 프레임 영상의 투명도를 달리하여 복수의 출력 영상들을 생성할 수 있다. 특히, 상기 출력 영상의 해상도가 클수록 상기 프레임 영상의 투명도를 높일 수 있다. 따라서 재생 모드에서 출력 영상의 썸네일 이미지를 확인할 경우 프레임 영상이 진하게 디스플레이되고, 스크린 네일 이미지, 원본 이미지를 디스플레이할 수록 상기 프레임 영상이 연하게 디스플레이되도록 할 수 있다. 따라서 원본 이미지의 디스플레이에 영향을 최소화하면서 인식한 장면을 사용자로하여금 효과적으로 인지시킬 수 있다.
다시 도 15를 참조하면, 출력 영상을 생성한 후, 상기 출력 영상을 저장할 것인지 판단한다(S28). 상기 출력 영상을 저장하지 않을 것이라면, 상기 입력 영상을 포함하는 영상 파일을 생성한다(S29). 상기 출력 영상을 저장할 것이라면, 상기 입력 영상을 저장할 것인지 판단한다(S30). 상기 입력 영상을 저장하지 않을 것이라면, 출력 영상을 포함하는 영상 파일을 생성한다(S31). 상기 입력 영상을 저장할 것이라면, 상기 입력 영상과 상기 출력 영상을 함께 포함하는 영상 파일을 생성한다(S32).
도 15에서 설명한 장면 인식 표시 방법을 통해 생성한 출력 영상을 포함하는 영상 파일의 구성에 관한 예시들을 도 16 내지 도 24를 참조하여 설명한다.
도 16에서는 영상 파일의 일 실시 예로서, 썸네일 이미지(thumbnail), 원본 이미지(Original), 스크린 네일 이미지(Screennail)를 포함하는 영상 파일을 예시한다. 그리고 도 16의 영상 파일에 포함된 썸네일 이미지, 원본 이미지, 스크린 네일 이미지 각각은 도 17, 18 및 19의 영상들을 나타낼 수 있다. 도 17은 썸네일 이미지를, 도 18은 원본 이미지를, 도 19는 스크린 네일 이미지를 나타낸다. 원본 이미지는 프레임 영상과 입력 영상을 0:1로 합성한 것이다. 미리 보기 모드에서는 썸네일 이미지, 또는 스크린 네일 이미지로 확인가능하므로, 디스플레이되는 영상이 야경의 장면을 나타내는 것으로 확인할 수 있다. 그리고 실질적으로 필요한 영상은 입력 영상이므로 이는 최대한 원본을 유지하기 위하여 프레임 영상을 오버랩하지 않은 것으로 사용할 수 있다.
스크린 네일 이미지 대비 썸네일 이미지는 해상도가 큰 것으로, 스크린 네일 이미지의 프레임 영상의 투명도를 낮게 설정할 수 있다. 따라서 썸네일 이미지, 스크린 네일 이미지, 원본 이미지를 확대 재생함으로써 프레임 영상이 점점 사라지고 원본 이미지만 보이도록 하는 효과도 나타낼 수 있다.
도 20은 다른 영상 파일의 예로서, 3종의 스크린 네일 이미지들(Screennail 1, 2, 3)과, 원본 이미지(Original)를 포함하는 영상 파일을 예시한다. 그리고 도 21에서 원본 이미지의 사진, 도 22에서 제1 스크린 네일 이미지(Screennail 1), 도 23에서 제2 스크린 네일 이미지(Screennail 2), 도 24에서 제3 스크린 네일 이미지(Screennail 3)의 사진을 나타낸다. 본 실시 예에서는 동일한 해상도를 가지나 각각 프레임 영상의 투명도를 달리하는 스크린 네일 이미지들을 포함하는 영상 파일을 예시한다. 따라서 상기 영상 파일을 재생함에 있어서, 사용자 등의 선택에 따라 프레임 영상이 진하게 보이는 제1 스크린 네일 이미지(Screennail 1)를 디스플레이할 수 있으며, 또는 프레임 영상이 보이지 않는 제3 스크린 네일 이미지(Screennail 3)를 디스플레이할 수도 있다.
구체적으로 도 25 내지 도 27을 참조하면 디지털 카메라에서 도 20의 영상 파일을 재생하는 경우, 사용자의 선택에 따라 제1 스크린 네일 이미지(Screennail 1), 제2 스크린 네일 이미지(Screennail 2), 제3 스크린 네일 이미지(Screennail 3)를 디스플레이할 수 있다. 도 25는 제1 스크린 네일 이미지를, 도 26은 제2 스크린 네일 이미지를, 도 27은 제3 스크린 네일 이미지를 나타낸 사진이다.
디지털 카메라에서 미리 보기 모드 동안 썸네일 이미지를 디스플레이할 수 있다. 그 예로서, 도 28을 참조하면 도 11 및 도 12의 영상들의 썸네일 이미지들을 LCD에 디스플레이할 수 있다. 그리고 이동 아이콘(X)을 이용하여 선택 표시(Y)를 이동시키고, 상기 선택 표시(Y)와 중첩되는 썸네일 이미지를 선택하면 상기 썸네일 이미지에 대응하는 원본 이미지 또는 스크린 네일 이미지를 디스플레이할 수 있다. 이때, 입력 영상만을 포함하는 또는 프레임 영상이 흐리게 표시되는 출력 영상을 디스플레이하도록 제어할 수 있다.
도 29는 외부 모니터 상에서 미로 보기 모드를 수행하는 모습을 도시한 것이다. 도 28의 디지털 카메라와 마찬가지로, 프레임 영상이 진하게 표시되는 썸네일 이미지를 디스플레이하고, 마우스 등을 이용하여 어느 하나의 썸네일 이미지를 선택하면 상기 썸네일 이미지에 대응하는 원본 이미지 또는 스크린 네일 이미지를 디스플레이할 수 있다.
도 30은 본 발명에 관한 디지털 영상 신호 처리 장치에서 장면 인식 표시 방법의 또 다른 실시 예를 설명하기 위한 순서도이다. 본 실시 예에서는 장면에 따른 프레임 영상을 설정 또는 변경하는 단계들을 중점적으로 설명한다.
도 20을 참조하면, 장면에 따른 프레임 영상을 디스플레이한다(S41). 일 장면에 따른 프레임 영상이 적어도 한 개 디스플레이될 수 있으며, 복수의 장면들에 대응하는 프레임 영상이 디스플레이될 수 있다.
그리고 변경하고자 하는 장면을 선택한다(S42). 예를 들어, '야경' 장면을 선택할 수 있다.
선택한 장면에 대하여, 프레임 영상을 추가할 것인지 판단한다(S43). 프레임 영상을 추가하는 경우, 미리 저장되어 있는 영상 중에서 선택할 것인지 판단한다(S44). 저장된 영상 중에서 선택하는 경우에는, 재생 모드에서 저장된 영상을 디스플레이한다(S45). 그리고 디스플레이된 영상들 중에서 어느 하나를 선택하고(S46), 선택한 영상을 변경하고자 하는 상기 장면에 따른 프레임 영상으로 선택한다(S47).
상기 S43 단계에서 프레임 영상을 추가하지 않을 것이라면, 데이터베이스로부터 변경하고자 하는 상기 장면에 대응하는 적어도 하나의 프레임 영상을 디스플레이한다(S48). 그리고 프레임 영상을 선택하여(S49), 장면에 대응하여 설정한다(S47).
상기 S44 단계에서, 저장된 영상 중에서 선택하지 않을 것이라면, 촬영 모드를 실행한다(S50). 촬영 제어 신호를 입력하여(S51), 영상을 캡쳐한다. 따라서 영상이 입력되고(S52), 입력된 영상에 대해 변경하고자하는 상기 장면에 대응하는 프레임 영상으로 설정한다(S47).
따라서 상술한 실시 예에 따르면, 장면에 따른 프레임 영상을 설정 또는 변경이 가능하다.
한편, 본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.
컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.
이제까지 본 발명에 대하여 바람직한 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.
도 1은 본 발명에 관한 디지털 영상 신호 처리 장치의 일 실시 예로서 디지털 카메라를 나타낸 블럭도이다.
도 2는 도 1에 도시된 디지털 카메라에서 디지털 신호 처리부의 일 실시 예를 나타낸 블럭도이다.
도 3은 도 1에 도시된 디지털 카메라에서 디지털 신호 처리부의 다른 실시 예를 나타낸 블럭도이다.
도 4는 도 1에 도시된 디지털 카메라에서 디지털 신호 처리부의 또 다른 실시 예를 나타낸 블럭도이다.
도 5는 도 1에 도시된 디지털 카메라에서 디지털 신호 처리부의 또 다른 실시 예를 나타낸 블럭도이다.
도 6은 본 발명에 관한 디지털 영상 신호 처리 장치에서 장면 인식 표시 방법의 일 실시 예를 설명하기 위한 순서도이다.
도 7과 8은 사용자에 의해 생성한 프레임 영상의 실시 예들을 나타낸 사진들이다.
도 9와 10은 출력 영상의 실시 예들을 나타낸 사진들이다.
도 11 내지13은 프레임 영상을 촬영 영상의 일정 영역에 합성한 출력 영상의 다른 실시 예들을 나타낸 사진들이다.
도 14는 촬영 영상에 깜빡임 효과를 갖는 프레임 영상을 합성한 출력 영상의 일 실시 예를 나타낸 사진이다.
도 15는 본 발명에 관한 디지털 영상 신호 처리 장치에서 장면 인식 표시 방법의 다른 실시 예를 설명하기 위한 순서도이다.
도 16은 본 발명에 관한 장면 인식 표시 방법을 통해 생성한 출력 영상을 포함하는 영상 파일의 구성에 관한 일 실시 예를 나타낸 도면이다.
도 17 내지 19는 도 16에 도시된 영상 파일의 구성 각각에 대응하는 영상들을 나타낸 사진들이다.
도 20은 본 발명에 관한 장면 인식 표시 방법을 통해 생성한 출력 영상을 포함하는 영상 파일의 구성에 관한 다른 실시 예를 나타낸 도면이다.
도 21 내지 24는 도 10에 도시된 영상 파일의 구성 각각에 대응하는 영상들을 나타낸 사진들이다.
도 25 내지 도 27은 디지털 카메라에서 도 10에 도시된 영상 파일을 재생하는 단계들을 설명하기 위한 도면들이다.
도 28은 디지털 카메라에서 본 발명에 관한 장면 인식 표시 방법을 통해 생성한 출력 영상들을 미리 보기 모드에서 디스플레이한 모습을 나타낸 도면이다.
도 29는 모니터 상에서 본 발명에 관한 장면 인식 표시 방법을 통해 생성한 출력 영상들을 미리 보기 모드에서 디스플레이한 모습을 나타낸 도면이다.
도 30은 본 발명에 관한 디지털 영상 신호 처리 장치에서 장면 인식 표시 방법의 또 다른 실시 예를 설명하기 위한 순서도이다.

Claims (30)

  1. 입력 영상을 생성하는 단계;
    상기 입력 영상에 대해 장면을 인식하는 단계;
    인식한 장면에 대응하는 프레임 영상을 도출하는 단계;
    상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 단계;
    상기 출력 영상을 디스플레이하는 단계;를 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  2. 제1항에 있어서, 상기 프레임 영상과 상기 입력 영상은 동일한 저장 형식의 영상 데이터로 나타내어 지는 것을 특징으로 하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  3. 제1항에 있어서, 상기 프레임 영상의 투명도를 조절하는 단계;를 더 구비하고,
    조절한 투명도를 갖는 상기 프레임 영상을 포함하는 상기 출력 영상을 생성하는 것을 특징으로 하는 디지털 영상 신호 처리 장치에서 장면 인식 표시 방법.
  4. 제1항에 있어서, 프레임 영상을 생성하는 단계;
    생성한 상기 프레임 영상에 대하여 장면을 설정하여 장면에 따른 프레임 영 상에 관한 데이터베이스를 생성하는 단계;를 더 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  5. 제4항에 있어서, 상기 데이터베이스는 일 장면에 대하여 적어도 하나의 프레임 영상을 구비하는 것을 특징으로 하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  6. 제5항에 있어서, 제1 장면에 대하여 제1 프레임 영상이 도출되도록 설정하는 단계를 더 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  7. 제6항에 있어서, 상기 제1 장면에 대하여 제2 프레임 영상이 도출되도록 변경 설정하는 단계를 더 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  8. 제1항에 있어서, 피사체를 촬영하여 상기 입력 영상을 생성하는 것을 특징으로 하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  9. 제1항에 있어서, 상기 출력 영상을 포함하는 영상 파일을 생성하는 단계;
    상기 영상 파일을 저장하는 단계;를 더 포함하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  10. 제9항에 있어서, 인식한 장면에 대응하는 프레임 영상의 투명도를 달리하여 상기 입력 영상과 합성함으로써 복수의 출력 영상들을 생성하는 단계;
    상기 복수의 출력 영상들을 구비하는 영상 파일을 생성하는 단계를 구비하는 것을 특징으로 하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  11. 제10항에 있어서, 제1 투명도를 갖는 상기 프레임 영상과 상기 입력 영상을 합성하여 제1 해상도의 제1 출력 영상을 생성하는 단계;
    제2 투명도를 갖는 상기 제2 프레임 영상과 상기 입력 영상을 합성하여 제2 해상도의 제2 출력 영상을 생성하는 단계;
    상기 제1 출력 영상과 상기 제2 출력 영상을 구비하는 영상 파일을 생성하는 단계;를 포함하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  12. 제11항에 있어서, 상기 제1 해상도가 클 수록 상기 제1 투명도는 더 작아지는 것을 특징으로 하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  13. 제11항에 있어서, 상기 영상 파일은 상기 입력 영상만으로 이루어진 제3 해상도의 제3 출력 영상을 더 포함하는 것을 특징으로 하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  14. 제11항에 있어서, 상기 영상 파일로부터 출력 영상들 중 적어도 어느 하나를 복원하는 단계;
    복원한 출력 영상을 디스플레이하는 단계;를 포함하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  15. 제14항에 있어서, 확대 제어 신호를 입력하는 단계;
    상기 확대 제어 신호에 따라 해상도가 큰 출력 영상을 복원하는 단계;
    복원한 출력 영상을 디스플레이하는 단계;를 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  16. 제14항에 있어서, 미리 보기 제어 신호를 입력하는 단계;
    상기 미리 보기 제어 신호에 따라 해상도가 작은 출력 영상을 복원하는 단계;
    복원한 출력 영상을 디스플레이하는 단계;를 구비하는 디지털 영상 신호 처리 장치의 장면 인식 표시 방법.
  17. 제1항 내지 제16항 중 적어도 어느 한 항에 기재된 디지털 영상 신호 처리 장치의 장면 인식 표시 방법을 기록한 기록 매체.
  18. 입력 영상을 생성하는 입력 영상 생성부;
    상기 입력 영상으로부터 장면을 인식하는 장면 인식부;
    인식한 장면에 대응하는 프레임 영상을 도출하는 프레임 영상 도출부;
    상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 출력 영상 생성부;
    상기 출력 영상을 디스플레이하도록 제어하는 디스플레이 제어부;를 구비하는 디지털 영상 신호 처리 장치.
  19. 제18항에 있어서, 상기 프레임 영상과 상기 입력 영상은 동일한 저장 형식의 영상 데이터로 나타내어 지는 것을 특징으로 하는 디지털 영상 신호 처리 장치.
  20. 제18항에 있어서, 장면에 따른 프레임 영상을 저장한 데이터베이스를 더 포함하는 디지털 영상 신호 처리 장치.
  21. 제18항에 있어서, 생성한 프레임 영상에 대하여 장면을 설명하는 프레임 영상 설정부를 더 구비하는 디지털 영상 신호 처리 장치.
  22. 제21항에 있어서, 상기 데이터베이스는 일 장면에 대하여 복수의 프레임 영상들이 저장되어 있으며.
    상기 일 장면에 대하여 제1 프레임 영상으로부터 제2 프레임 영상으로 변경하는 프레임 영상 변경부를 더 구비하는 디지털 영상 신호 처리 장치.
  23. 제18항에 있어서, 상기 출력 영상 생성부는 상기 프레임 영상의 투명도를 조절하는 투명도 조절부;
    상기 프레임 영상과 상기 입력 영상을 합성하여 출력 영상을 생성하는 합성부를 더 구비하는 디지털 영상 신호 처리 장치.
  24. 제23항에 있어서. 상기 합성부는 다른 투명도를 갖는 프레임 영상들 각각을 포합하는 출력 영상들을 생성하는 것을 특징으로 하는 디지털 영상 신호 처리 장치.
  25. 제24항에 있어서, 상기 합성부는 제1 투명도를 갖는 제1 프레임 영상과 상기 입력 영상을 포함하는 제1 해상도의 제1 출력 영상 및 제2 투명도를 갖는 제2 프레임 영상과 상기 입력 영상을 포함하는 제2 해상도의 제2 출력 영상을 생성하는 것을 특징으로 하는 디지털 영상 신호 처리 장치.
  26. 제25항에 있어서, 상기 합성부는 상기 입력 영상만으로 이루어진 제3 해상도의 제3 출력 영상을 생성하는 것을 특징으로 하는 디지털 영상 신호 처리 장치.
  27. 제18항에 있어서, 상기 출력 영상을 포함하는 영상 파일을 생성하는 인코더를 더 포함하는 디지털 영상 신호 처리 장치.
  28. 제27항에 있어서, 상기 영상 파일로부터 상기 출력 영상을 복원하는 디코더를 더 포함하는 디지털 영상 신호 처리 장치.
  29. 제28항에 있어서, 상기 디코더는 확대 제어 신호에 따라 해상도가 큰 출력 영상을 복원하며,
    상기 디스플레이 제어부는 복원한 상기 출력 영상을 디스플레이하도록 제어하는 것을 특징으로 하는 디지털 영상 신호 처리 장치.
  30. 제28항에 있어서, 상기 디코더는 미리 보기 제어 신호에 따라 해상도가 작은 출력 영상을 복원하며,
    상기 디스플레이 제어부는 복원한 상기 출력 영상을 디스플레이하도록 제어하는 것을 특징으로 하는 디지털 영상 신호 처리 장치.
KR1020080128634A 2008-12-17 2008-12-17 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치 KR20100070043A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080128634A KR20100070043A (ko) 2008-12-17 2008-12-17 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치
US12/633,002 US20100149367A1 (en) 2008-12-17 2009-12-08 Digital image signal processing apparatus and method of displaying scene recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080128634A KR20100070043A (ko) 2008-12-17 2008-12-17 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치

Publications (1)

Publication Number Publication Date
KR20100070043A true KR20100070043A (ko) 2010-06-25

Family

ID=42240047

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080128634A KR20100070043A (ko) 2008-12-17 2008-12-17 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치

Country Status (2)

Country Link
US (1) US20100149367A1 (ko)
KR (1) KR20100070043A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101469839B1 (ko) * 2013-04-17 2014-12-09 (주) 픽셀플러스 이미지 센서 및 이를 포함하는 감시 시스템

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2483767B1 (en) 2009-10-01 2019-04-03 Nokia Technologies Oy Method relating to digital images
SE534551C2 (sv) 2010-02-15 2011-10-04 Scalado Ab Digital bildmanipulation innefattande identifiering av ett målområde i en målbild och sömlös ersättning av bildinformation utifrån en källbild
KR20120011920A (ko) * 2010-07-27 2012-02-09 삼성전자주식회사 디지털 영상 신호 처리 장치, 디지털 영상 신호 처리 방법 및 상기 방법을 기록한 기록 매체
US10152951B2 (en) * 2011-02-28 2018-12-11 Varian Medical Systems International Ag Method and system for interactive control of window/level parameters of multi-image displays
SE1150505A1 (sv) * 2011-05-31 2012-12-01 Mobile Imaging In Sweden Ab Metod och anordning för tagning av bilder
US9432583B2 (en) 2011-07-15 2016-08-30 Mobile Imaging In Sweden Ab Method of providing an adjusted digital image representation of a view, and an apparatus
US9020278B2 (en) * 2012-06-08 2015-04-28 Samsung Electronics Co., Ltd. Conversion of camera settings to reference picture
EP3067746B1 (en) * 2013-12-06 2019-08-21 Huawei Device Co., Ltd. Photographing method for dual-camera device and dual-camera device

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050212945A1 (en) * 2002-07-29 2005-09-29 Seiko Epson Corporation Digital camera
JP3946676B2 (ja) * 2003-08-28 2007-07-18 株式会社東芝 撮影画像処理装置及びその方法
US7505054B2 (en) * 2004-05-12 2009-03-17 Hewlett-Packard Development Company, L.P. Display resolution systems and methods
US7782384B2 (en) * 2004-11-05 2010-08-24 Kelly Douglas J Digital camera having system for digital image composition and related method
JP4612593B2 (ja) * 2006-07-26 2011-01-12 Hoya株式会社 画像記録装置
KR100842570B1 (ko) * 2006-11-03 2008-07-01 삼성전자주식회사 이동 단말에서 복수의 영상을 디스플레이 하기 위한 방법및 장치
JP4930302B2 (ja) * 2007-09-14 2012-05-16 ソニー株式会社 撮像装置、その制御方法およびプログラム
US8144232B2 (en) * 2008-07-03 2012-03-27 Sony Ericsson Mobile Communications Ab Camera system and method for picture sharing using geotagged pictures

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101469839B1 (ko) * 2013-04-17 2014-12-09 (주) 픽셀플러스 이미지 센서 및 이를 포함하는 감시 시스템

Also Published As

Publication number Publication date
US20100149367A1 (en) 2010-06-17

Similar Documents

Publication Publication Date Title
KR101595254B1 (ko) 화이트 밸런스 조정 방법, 상기 방법을 기록한 기록 매체, 화이트 밸런스 조정 장치
KR101624648B1 (ko) 장면에 따른 해상도 및 화질 변경 기능을 갖는 디지털 영상 신호 처리 방법, 상기 방법을 기록한 기록 매체, 디지털 영상 처리 장치
KR20100070043A (ko) 디지털 영상 신호 처리 장치의 장면 인식 표시 방법, 이를 기록한 기록 매체, 상기 표시 방법을 적용한 디지털 영상 신호 처리 장치
KR101739379B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
KR101626004B1 (ko) 디지털 영상처리장치에서 raw포맷을 선택적으로 지원하는 방법 및 장치
JP5806623B2 (ja) 撮像装置、撮像方法およびプログラム
KR101700366B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
CN106683601B (zh) 显示控制装置及其控制方法
US9100724B2 (en) Method and apparatus for displaying summary video
KR20130069039A (ko) 디스플레이 장치, 방법, 및 컴퓨터 판독 가능 저장 매체
EP2573759A2 (en) Display apparatus and method
KR101737086B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
KR101626002B1 (ko) 디지털 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 저장매체
KR20130031176A (ko) 디스플레이 장치 및 방법
JP5266701B2 (ja) 撮像装置、被写体分離方法、およびプログラム
JP4696921B2 (ja) 画像処理装置、静止画生成方法、プログラム、および記憶媒体
JP2007228453A (ja) 撮像装置、再生装置、プログラム、および記憶媒体
KR100627049B1 (ko) 디지털 카메라에서 촬영 영상에 객체를 합성하는 장치 및방법
KR101960508B1 (ko) 디스플레이 장치 및 방법
JP5828251B2 (ja) 画像処理装置およびデジタルカメラ
KR101946574B1 (ko) 영상 재생 장치, 방법, 및 컴퓨터 판독가능 저장매체
KR101480407B1 (ko) 디지털 영상 처리 장치, 이의 제어 방법 및 상기 제어방법을 기록한 기록 매체
KR20110024525A (ko) 장면 인식 영상 설정 방법 및 이를 실현하는 디지털 촬영 장치
KR101923185B1 (ko) 디스플레이 장치 및 방법
KR101533279B1 (ko) 영상의 흔들림을 판단하는 디지털 영상 신호 처리 장치의 제어 방법, 이를 기록한 기록 매체, 및 상기 제어 방법에 의해 실행하는 디지털 영상 신호 처리 장치

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid