KR101643612B1 - 촬영 방법 및 장치와 그 기록 매체 - Google Patents

촬영 방법 및 장치와 그 기록 매체 Download PDF

Info

Publication number
KR101643612B1
KR101643612B1 KR1020100008600A KR20100008600A KR101643612B1 KR 101643612 B1 KR101643612 B1 KR 101643612B1 KR 1020100008600 A KR1020100008600 A KR 1020100008600A KR 20100008600 A KR20100008600 A KR 20100008600A KR 101643612 B1 KR101643612 B1 KR 101643612B1
Authority
KR
South Korea
Prior art keywords
area
video signal
shade
subject
detected
Prior art date
Application number
KR1020100008600A
Other languages
English (en)
Other versions
KR20110088884A (ko
Inventor
박주희
정영훈
이재민
김일도
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100008600A priority Critical patent/KR101643612B1/ko
Priority to US12/878,131 priority patent/US8619151B2/en
Publication of KR20110088884A publication Critical patent/KR20110088884A/ko
Application granted granted Critical
Publication of KR101643612B1 publication Critical patent/KR101643612B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2622—Signal amplitude transition in the zone between image portions, e.g. soft edges
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • H04N5/2627—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect for providing spin image effect, 3D stop motion effect or temporal freeze effect
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

입력 영상신호로부터 피사체 영역의 영상 신호를 검출하고, 검출된 피사체 영역의 영상신호로부터 음영 영역을 검출하고, 검출된 피사체 영역의 영상신호와 검출된 음영 영역을 중첩한 영상 신호를 디스플레이 하는 단계를 포함하는 촬영 방법이 개시되어 있다.

Description

촬영 방법 및 장치와 그 기록 매체{Photographing method and apparatus and recording medium thereof}
본 발명은 촬영에 관한 것으로, 특히, 피사체(object)의 음영(shadow) 보정이 가능한 촬영 방법 및 장치와 그 기록 매체에 관한 것이다.
디지털 카메라(digital camera), 디지털 비디오 카메라(digital video camera), 감시 카메라(surveillance cameras), 및 휴대폰과 같이 카메라 기능을 갖는 기기와 같은 촬영 장치를 이용하여 촬영할 때, 빛의 방향에 따라 피사체에 음영이 발생되어 촬영 품질이 저하될 수 있다.
특히, 피사체가 얼굴인 경우에, 빛의 방향과 얼굴의 윤곽에 따라 촬영된 얼굴 영상에 부분 음영이 발생될 수 있다. 이러한 부분 음영은 화이트 밸런스 보정(White Balance Correction)과 같은 후 보정(post correction)에 의해서도 제거되지 않을 수 있다.
따라서, 촬영 장치에 피사체의 음영을 보정할 수 있는 기능이 필요하다. 특히, 카메라 기능을 갖는 휴대폰을 이용한 셀프 카메라(self camera) 모드에서, 사용자가 빛의 방향을 고려한 촬영 지식이 부족할 경우에, 고품질의 뷰티 모드(beauty mode)를 설정하였음에도 불구하고 피사체의 음영으로 인하여 품질이 저하된 촬영 영상을 얻을 수 있다.
본 발명은 피사체의 음영을 보정할 수 있는 촬영 방법 및 장치와 그 방법을 수행할 수 있는 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.
본 발명의 일 실시 예에 따른 방법은, 입력 영상신호로부터 피사체 영역의 영상 신호를 검출하는 단계; 상기 검출된 피사체 영역의 영상신호로부터 음영 영역을 검출하는 단계; 및 상기 검출된 피사체 영역의 영상신호와 상기 검출된 음영 영역을 중첩한 영상 신호를 디스플레이 하는 단계를 포함하는 촬영 방법을 제공한다.
상기 촬영 방법은, 상기 입력 영상신호를 촬영한 후, 음영 제거가 요구되면, 상기 검출된 음영 영역의 휘도 레벨을 보정하는 단계를 포함할 수 있다.
상기 음영 영역의 휘도 레벨 보정이 복수회 수행되면, 상기 음영 영역의 휘도 레벨 보정 단계는, 이전의 음영 영역이 보정된 영상 신호로부터 피사체 영역을 재 검출하고, 상기 재 검출된 피사체 영역으로부터 음영 영역을 재 검출하여 상기 음영 영역의 휘도 레벨을 보정하는 단계를 포함한다.
상기 음영 보정은 상기 피사체 영역의 휘도 레벨에 따라 결정된 감마 커브를 이용하여 수행될 수 있다.
상기 촬영 방법은, 상기 음영 영역이 보정된 영상신호를 저장하는 단계를 더 포함할 수 있다.
상기 음영 영역 검출 단계는, 상기 피사체 영역의 영상신호의 블러(blur) 영상신호를 얻는 단계; 상기 블러 영상신호로부터 피사체 영역의 스킨 톤 마스크를 얻는 단계; 상기 블러 영상신호, 상기 스킨 톤 마스크, 및 상기 피사체 영역의 평균 휘도 레벨을 이용하여 음영 영역 마스크를 검출하는 단계; 및 상기 검출된 음영 영역 마스크를 상기 검출된 음영 영역으로서 출력하는 단계를 포함할 수 있다.
상기 블러 영상신호를 얻는 단계는 저역 통과 필터를 이용하여 수행되고, 상기 스킨 톤 마스크를 얻는 단계는, RGB 필터 임계 알고리즘을 이용하여 수행되고, 상기 음영 영역 마스크 검출 단계는, 상기 피사체 영역의 평균 휘도 레벨 이하의 휘도 레벨을 갖는 영역을 음영 영역으로 검출할 수 있다.
상기 음영 영역 마스크 검출 단계는, 상기 블러 영상신호, 상기 스킨 톤 마스크, 및 상기 평균 휘도 레벨이하의 휘도 레벨의 교집합에 의해 상기 음영 영역 마스크를 검출할 수 있다.
본 발명의 일 실시 예에 따른 장치는, 영상신호로부터 피사체 영역의 영상신호를 검출하는 피사체 영역 검출부; 상기 검출된 피사체 영역의 영상신호로부터 음영 영역을 검출하는 음영 영역 검출부; 상기 음영 영역 검출부에서 검출된 음영 영역을 상기 피사체 영역의 영상신호에 중첩한 영상신호를 출력하는 영상신호 중첩부; 및 상기 영상신호 중첩부에서 중첩된 영상신호를 디스플레이 하는 디스플레이부를 포함하는 촬영 장치를 제공한다.
상기 촬영 장치는, 촬영된 영상신호에서 상기 음영 영역 검출부에서 검출된 음영 영역의 휘도 레벨을 보정하는 음영 영역 보정부를 더 포함할 수 있다.
상기 음영 영역 보정부에 의한 음영 보정이 복수회 수행될 때, 상기 음영 영역 보정부는 음영이 보정된 영상 신호를 피사체 영역 검출부로 전송하여 상기 음영이 보정된 영상 신호에 대한 피사체 영역 검출 및 음영 영역 검출을 재차 수행하게 하고, 상기 수행 결과에 기초하여 상기 음영이 보정된 영상 신호에 대한 음영을 재차 보정할 수 있다.
상기 음영 영역 보정부는 상기 피사체 영역의 휘도 레벨에 따라 결정된 감마 커브를 이용하여 상기 음영을 보정할 수 있다.
상기 촬영 장치는, 상기 음영 영역이 보정된 영상신호를 저장하는 저장부를 더 포함할 수 있다.
상기 피사체 영역은 얼굴 영역인 것을 특징으로 하고, 상기 음영 영역 검출부는 상기 피사체 영역의 영상신호의 블러 영상신호를 얻고, 상기 블러 영상신호로부터 스킨 톤 마스크를 얻고, 상기 블러 영상신호, 상기 스킨 톤 마스크 및 상기 피사체 영역의 평균 휘도 레벨을 이용하여 음영 영역 마스크를 검출하고, 검출된 음영 영역 마스크를 검출된 음영 영역으로서 출력할 수 있다.
상기 음영 영역 검출부는 저역 통과 필터를 이용하여 상기 블러 영상신호를 얻고, RGB 필터 임계 알고리즘을 이용하여 상기 스킨 톤 마스크를 얻고, 상기 피사체 영역의 영상신호중 상기 평균 휘도 레벨이하의 휘도 레벨을 갖는 영역을 상기 음영 영역으로 마스킹할 수 있다.
상기 음영 영역 검출부는 상기 블러 영상신호, 상기 스킨 톤 마스크, 및 상기 평균 휘도 레벨이하의 휘도 레벨의 교집합에 의해 상기 음영 영역 마스크를 검출할 수 있다.
본 발명의 일 실시 예에 따른 촬영 방법을 수행할 수 있는 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체에 있어서, 상기 촬영 방법은, 상술한 촬영 방법과 같이 수행되는 것을 특징으로 하는 기록 매체를 제공한다.
도 1은 본 발명의 바람직한 일 실시 예에 따른 촬영 장치의 기능 블록도이다.
도 2a 내지 도 2c는 피사체 영역의 스킨 톤 마스크 검출 예이다.
도 3a 및 도 3b는 피사체 영역의 음영 영역 마스크 검출 예이다.
도 4는 본 발명의 바람직한 다른 실시 예에 따른 촬영 장치의 기능 블록도이다.
도 5a 내지 도 5c는 음영 영역 보정 예이다.
도 6은 본 발명의 일 실시 예에 따른 촬영 방법의 동작 흐름도이다.
도 7은 본 발명의 다른 실시 예에 따른 촬영 방법의 동작 흐름도이다.
도 8은 본 발명의 또 다른 실시 예에 따른 촬영 방법의 동작 흐름도이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예를 상세히 설명하기로 한다.
도 1은 본 발명의 바람직한 일 실시 예에 따른 촬영 장치(100)의 기능 블록도이다. 촬영 장치(100)는 디지털 카메라(digital camera), 디지털 비디오 카메라(digital video camera), 감시 카메라(surveillance cameras), 카메라 기능을 갖는 휴대폰, 컴퓨터와 연결 가능한 촬영 장치가 될 수 있으나, 이들로 한정되지 않는다.
도 1을 참조하면, 촬영 장치(100)는 피사체 영역 검출부(110), 음영 영역 검출부(120), 영상 신호 중첩부(130), 및 디스플레이부(140)를 포함한다.
피사체 영역 검출부(110)는 촬영전 영상 신호가 입력되면, 입력된 영상신호로부터 피사체 영역을 검출한다. 피사체 영역은 얼굴 영역이 될 수 있다. 만약 얼굴 영역을 피사체 영역으로 검출할 경우에, 기존의 얼굴 영역 검출 방식중 하나를 사용할 수 있다. 예를 들어, 입력되는 영상 신호로부터 눈, 코, 입 등의 에지를 특징량으로 구하여 입력되는 영상 신호에서 얼굴의 위치를 알아내고, 눈, 코, 입을 포함하는 얼굴의 윤곽을 구한 뒤, 윤곽내 영역의 휘도를 산출하는 것으로 얼굴 영역을 검출할 수 있다. 그러나 얼굴 영역 검출방식은 상술한 내용으로 한정되지 않는다. 입력되는 영상 신호는 촬상 광학계(미 도시됨)에 의해 수신되는 피사체의 빛을 촬상 소자(미 도시됨)가 수광하고, 수광한 피사체의 빛을 광전 변환하여 얻어질 수 있으나, 이로 한정되지 않는다. 또한, 피사체 영역 검출부(110)는 검출된 피사체 영역의 평균 휘도 레벨을 검출하여 음영 영역 검출부(120)로 제공할 수 있다.
음영 영역 검출부(120)는 피사체 영역 검출부(110)로부터 전송되는 피사체 영역에 대한 영상 신호와 평균 휘도 레벨이 수신되면, 피사체 영역에서의 음영 영역을 검출한다. 즉, 음영 영역 검출부(120)는 피사체 영역의 스킨 톤 마스크를 구한다. 도 2a 내지 도 2c는 피사체 영역의 스킨 톤 마스크 검출 예이다. 도 2a 내지 도 2c를 참조하면, 도 2a와 같은 피사체 영역에 대한 영상 신호가 입력되면, 음영 영역 검출부(120)는 저역 통과 필터(Low Pass Filter)를 이용하여 도 2b와 같은 블러(blur) 영상신호를 얻는다. 도 2a의 201 영역이 음영 영역에 해당된다.
다음, 음영 영역 검출부(120)는 RGB 필터 임계 알고리즘(filter threshold algorithm)을 이용하여 도 2b의 블러 영상신호로부터 도 2c에 도시된 바와 같은 피사체 영역의 스킨 톤 마스크를 얻는다. 예를 들어, R>(95+Y), G>(40+Y), B>(20+Y), │R-G│>15, R>G, R>B 조건에 따르는 RGB 필터 임계 알고리즘(filter threshold algorithm)을 이용하여 음영 영역 검출부(120)는 도 2c에 도시된 바와 같은 스킨 톤 마스크를 얻는다.
도 2b의 블러 영상 신호와 도 2c의 스킨 톤 마스크 및 피사체 영역이 평균 휘도 레벨을 이용하여 음영 영역 검출부(120)는 음영 영역을 검출한다. 도 3a 및 도 3b는 피사체 영역의 음영 영역 검출 예이다. 도 3a에 도시된 바와 같이 음영 영역 검출부(120)는 블러 영상 신호와 스킨 톤 마스크 및 피사체 영역의 평균 휘도 레벨 이하의 휘도 레벨의 교집합 연산에 의해 도 3b와 같은 음영 영역 마스크를 검출한다. 검출된 음영 영역 마스크에 대한 정보는 검출된 음영 영역으로서 영상신호 중첩부(130)로 전송된다. 피사체 영역에서 피사체 영역의 평균 휘도 레벨이하의 휘도 레벨을 갖는 영역이 음영 영역으로 검출된다.
영상 신호 중첩부(130)는 피사체 영역 검출부(110)에서 검출된 피사체 영역의 영상 신호에 음영 영역 검출부(120)에서 검출된 음영 영역을 중첩하여 출력한다. 이에 따라 디스플레이부(140)는 음영 영역이 포함된 피사체 영역의 영상신호를 디스플레이 한다. 디스플레이부(140)에 디스플레이 되는 음영 영역이 포함된 피사체 영역의 영상 신호를 보고, 사용자는 촬영 여부를 결정하거나, 다른 각도에서 촬영을 재 시도하여 음영을 고려한 촬영을 할 수 있다. 디스플레이부(140)는 입력되는 영상 신호에 대응되는 영상신호를 디스플레이 할 수 있다. 단, 이 때 디스플레이 되는 영상 신호는 음영 영역이 포함된 피사체 영역의 영상 신호를 포함한 영상 신호가 된다.
도 4는 본 발명의 바람직한 다른 실시 예에 따른 촬영 장치(400)의 기능 블록도이다. 촬영 장치(400)는 디지털 카메라(digital camera), 디지털 비디오 카메라(digital video camera), 감시 카메라(surveillance cameras), 카메라 기능을 갖는 휴대폰, 컴퓨터와 연결 가능한 촬영 장치가 될 수 있으나, 이들로 한정되지 않는다.
촬영 장치(400)는 피사체 영역 검출부(410), 음영 영역 검출부(420), 영상 신호 중첩부(430), 디스플레이부(440), 제어부(450), 음영 영역 보정부(460), 및 저장부(47)를 포함한다.
도 4에 도시된 피사체 영역 검출부(410), 음영 영역 검출부(420), 영상 신호 중첩부(430), 및 디스플레이부(440)는 도 1에 도시된 피사체 영역 검출부(110), 음영 영역 검출부(120), 영상 신호 중첩부(130), 및 디스플레이부(140)와 동일하게 구성 및 동작하므로, 이하 중복되는 설명은 생략하기로 한다.
제어부(450)는 촬영 장치(400)의 전 기능을 제어하는 것으로, 촬영 장치(400)의 전원이 온되거나 촬영 장치(400)의 기능이 온되면, 피사체 영역 검출부(410), 음영 영역 검출부(420), 영상 신호 중첩부(430), 및 디스플레이부(440)가 도 1에 도시된 피사체 영역 검출부(110), 음영 영역 검출부(120), 영상 신호 중첩부(130), 및 디스플레이부(140)와 같이 동작하여 음영 영역이 포함된 피사체 영상 신호 또는 음영 영역이 포함된 피사체 영상 신호를 포함하는 영상 신호를 디스플레이하도록 제어할 수 있다.
음영 영역이 포함된 피사체 영상 신호가 디스플레이부(440)에 디스플레이된 상태에서 촬영이 이루어지고, 사용자에 의해 음영 제거가 요구되면, 제어부(450)는 피사체 영역 검출부(410)에서 검출된 피사체 영역의 휘도 레벨 정보를 음영 정보 보정부(400)로 제공할 수 있다. 피사체 영역의 휘도 레벨 정보는 스킨 톤에 대응되는 휘도 레벨 정보이다. 이 때, 제어부(450)는 피사체 영역 검출부(410)에서 검출된 피사체 영역의 위치 정보와 음영 영역 검출부(420)에서 검출된 음영 영역의 위치 정보를 음영 영역 보정부(460)로 제공할 수 있다. 그러나, 피사체 영역 검출부(410)와 음영 영역 검출부(420)가 각각 검출된 영역의 위치 정보와 상기 휘도 레벨 정보를 음영 영역 보정부(460)로 전송하도록 구현될 수 있다.
음영 영역 보정부(460)는 피사체 영역의 휘도 레벨 정보에 따라 결정된 감마 커브(Gamma curve), 피사체 영역의 위치 정보, 음영 영역의 위치 정보를 이용하여 입력되는 영상 신호에서 음영 영역을 선택하고, 선택된 음영 영역의 휘도 레벨을 보정한다. 이 때, 입력되는 영상 신호는 촬영된 영상 신호이다. 이러한 음영 영역 보정은 적어도 2회 반복 수행될 수 있다. 이러한 반복 수행은 사용자의 입력에 따른 제어부(450)의 제어에 의해 수행될 수 있다.
도 5a 내지 도 5c는 음영 영역이 2회 보정된 예시도이다. 도 5a와 같은 입력 영상신호가 음영 영역 보정부(460)에서 1회 음영 영역을 보정한 경우에, 도 5b와 같은 영상 신호를 얻을 수 있다. 도 5b와 같이 음영이 보정된 영상신호에 대한 음영을 재차 보정할 때, 음영 영역 보정부(460)는 음영이 보정된 영상 신호를 피사체 영역 검출부(410)로 전송하여, 음영이 보정된 영상 신호에 대해 재차 피사체 영역을 검출하고, 음영 영역 검출부(420)에 의해 음영 영역을 재차 검출하게 한다.
이에 따라 음영 영역 검출부(420)는 음영 영역에 대한 새로운 위치 정보를 얻고, 얻어진 음영 영역에 대한 위치 정보를 음영 영역 보정부(460)로 제공한다. 이 때, 새롭게 얻어진 음영 영역에 대한 위치 정보는 제어부(450)를 통해 음영 영역 보정부(460)로 전송될 수 있다. 음영 영역 보정부(460)는 새로운 음영 영역에 대한 위치 정보를 이용하여 1회 음영이 보정된 영상신호 도 5b에 대한 음영 영역의 휘도 레벨을 보정한다. 이에 따라 도 5c와 같이 음영이 보정된 영상신호를 얻고, 얻어진 영상 신호는 디스플레이부(440)에 디스플레이 되면서, 제어부(450)의 제어에 따라 저장부(470)에 저장될 수 있다. 이와 같이 음영 영역을 보정함에 따라 피사체 영역 전반에 걸쳐 균일한 휘도 레벨을 갖는 촬영 영상을 얻을 수 있다. 도 5a 내지 도 5c는 설명의 편의를 위해 2회의 음영 보정으로 피사체 영역 전반에 걸쳐 균일한 휘도 레벨을 갖는 촬영 영상을 얻는 예를 도시하였으나, 음영 보정 횟수는 적어도 2회 이상이 될 수 있다.
도 6은 본 발명의 일 실시 예에 따른 촬영 방법의 동작 흐름도이다. 도 6을 참조하면, 촬영전 입력되는 영상신호로부터 피사체 영역을 검출한다(601). 피사체 영역은 얼굴 영역이 될 수 있다. 피사체 영역이 얼굴 영역인 경우에, 도 1에서 설명한 바와 같은 방식으로 피사체 영역을 검출할 수 있다. 입력되는 영상 신호는 도 1에서 설명한 바와 같은 방식으로 입력될 수 있다.
피사체 영역이 검출되면, 검출된 피사체 영역에서의 음영 영역을 검출한다(602). 음영 영역 검출은 도 1의 음영 영역 검출부(120)에서 설명한 바와 같이 입력되는 영상 신호의 블러 영상 신호를 얻고, 블러 영상신호에 의해 스킨 톤 마스크를 얻고, 블러 영상 신호와 스킨 톤 마스크 및 피사체 영역의 평균 휘도 레벨을 이용하여 음영 영역 마스크를 얻을 수 있다. 얻어진 음영 영역 마스크가 검출된 음영 영역이 된다.
다음, 검출된 음영 영역이 중첩된 피사체 영상을 디스플레이부(140)에 디스플레이 한다(603). 디스플레이 되는 영상은 입력되는 영상신호에 대응되는 영상일 수 있다. 그러나, 이 때 디스플레이 되는 영상은 검출된 음영 영역이 중첩된 영상이다.
이와 같이 촬영 전에 음영 영역이 중첩된 영상을 디스플레이하여 사용자가 촬영 여부를 결정하도록 함으로써, 사용자는 음영을 고려한 촬영이 가능하다. 예를 들어, 사용자는 음영 영역을 보고, 촬영 위치를 바꾸어 재 촬영을 시도하거나, 촬영한 후 음영 영역에 대한 보정 처리를 수행할 수 있다.
도 7은 본 발명의 다른 실시 예에 따른 촬영 방법의 동작 흐름도이다. 도 7을 참조하면, 도 7의 제 701 단계 내지 제 703 단계는 도 6의 제 601 단계 내지 제 603 단계와 동일하다. 따라서, 이하 제 701 단계 내지 제 703 단계의 설명은 생략하기로 한다.
디스플레이 되는 음영 영역이 중첩된 피사체 영상 또는 음영 영역이 중첩된 피사체 영상을 포함하는 영상 신호가 촬영되고(704), 음영 제거가 요구되면(705), 촬영된 영상 신호에 대해 제 701 단계에서와 같이 피사체 영역을 검출하고(706), 제 702 단계에서와 같이 검출된 피사체 영역의 음영 영역을 검출한다(707).
다음, 검출된 피사체 영역의 휘도 레벨에 따라 결정된 감마 커브, 피사체 영역의 위치 정보, 음영 영역의 위치 정보를 이용하여 촬영된 영상 신호에서의 음영 영역의 휘도 레벨을 보정한다(708). 음영 영역 보정시. 음영 영역이 보정된 영상 신호에 대해 재차 또는 복수회 음영 영역 보정이 요구되면, 이전의 음영 영역이 보정된 영상 신호로부터 피사체 영역을 재검출하고, 재검출된 피사체 영역으로부터 음영 영역을 재 검출한 결과를 이용하여 음영 영역이 보정된 영상신호의 음영 영역의 휘도 레벨을 재보정한다.
도 8은 본 발명의 또 다른 실시 예에 따른 촬영 방법의 동작 흐름도이다. 도 8을 참조하면, 제 801 단계 내지 제 808 단계는 도 7의 제 701 단계 내지 제 708 단계와 동일하다. 따라서, 이하 설명은 생략하기로 한다.
음영 영역이 보정된 영상신호에 대한 저장이 요구되면(809), 음영 영역이 보정된 영상신호를 저장한다. 이와 같이 영상 신호에 포함된 음영 영역을 보정한 영상신호를 촬영된 영상 신호로 저장함으로써, 촬영시 좀더 밝은 영상을 얻기 위한 과다한 노출을 방지할 수 있고, 피사체 영역에서 보다 균일한 휘도 레벨을 갖는 영상 신호를 촬영된 영상 신호로서 얻을 수 있다.
본 발명의 일 실시 예에 따른 촬영 방법을 수행하기 위한 프로그램은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 저장 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (17)

  1. 입력 영상신호로부터 피사체 영역의 영상 신호를 검출하는 단계;
    상기 검출된 피사체 영역의 영상신호로부터 음영 영역을 검출하는 단계; 및
    상기 검출된 피사체 영역의 영상신호와 상기 검출된 음영 영역을 중첩한 영상 신호를 디스플레이 하는 단계를 포함하고,
    상기 음영 영역 검출 단계는,
    상기 피사체 영역의 영상신호의 블러(blur) 영상신호를 얻는 단계;
    상기 블러 영상신호로부터 피사체 영역의 스킨 톤 마스크를 얻는 단계;
    상기 블러 영상신호, 상기 스킨 톤 마스크, 및 상기 피사체 영역의 평균 휘도 레벨을 이용하여 음영 영역 마스크를 검출하는 단계; 및
    상기 검출된 음영 영역 마스크를 상기 검출된 음영 영역으로서 출력하는 단계를 포함하는 촬영 방법.
  2. 제 1 항에 있어서, 상기 촬영 방법은,
    상기 입력 영상신호를 촬영한 후, 음영 제거가 요구되면, 상기 검출된 음영 영역의 휘도 레벨을 보정하는 단계를 포함하는 촬영 방법.
  3. 제 2 항에 있어서, 상기 음영 영역의 휘도 레벨 보정이 복수회 수행되면, 상기 음영 영역의 휘도 레벨 보정 단계는, 이전의 음영 영역이 보정된 영상 신호로부터 피사체 영역을 재 검출하고, 상기 재 검출된 피사체 영역으로부터 음영 영역을 재 검출하여 상기 음영 영역의 휘도 레벨을 보정하는 단계를 포함하는 촬영 방법.
  4. 제 3 항에 있어서, 상기 음영 영역의 휘도 레벨을 보정하는 단계는 상기 피사체 영역의 휘도 레벨에 따라 결정된 감마 커브를 이용하여 수행되는 것을 특징으로 하는 촬영 방법.
  5. 제 2 항 내지 제 4 항중 어느 한 항에 있어서, 상기 촬영 방법은, 상기 음영 영역이 보정된 영상신호를 저장하는 단계를 더 포함하는 촬영 방법.
  6. 삭제
  7. 제 1 항에 있어서, 상기 블러 영상신호를 얻는 단계는 저역 통과 필터를 이용하여 수행되고,
    상기 스킨 톤 마스크를 얻는 단계는, RGB 필터 임계 알고리즘을 이용하여 수행되고,
    상기 음영 영역 마스크 검출 단계는, 상기 피사체 영역의 평균 휘도 레벨 이하의 휘도 레벨을 갖는 영역을 음영 영역으로 검출하는 것을 특징으로 하는 촬영 방법.
  8. 제 7 항에 있어서, 상기 음영 영역 마스크 검출 단계는, 상기 블러 영상신호, 상기 스킨 톤 마스크, 및 상기 평균 휘도 레벨이하의 휘도 레벨의 교집합에 의해 상기 음영 영역 마스크를 검출하는 것을 특징으로 하는 촬영 방법.
  9. 제 1 항 내지 제 4 항중 어느 한 항에 의한 촬영 방법을 실행하는 컴퓨터 프로그램을 기록한 기록 매체.
  10. 영상신호로부터 피사체 영역의 영상신호를 검출하는 피사체 영역 검출부;
    상기 검출된 피사체 영역의 영상신호로부터 음영 영역을 검출하는 음영 영역 검출부;
    상기 음영 영역 검출부에서 검출된 음영 영역을 상기 피사체 영역의 영상신호에 중첩한 영상신호를 출력하는 영상신호 중첩부; 및
    상기 영상신호 중첩부에서 중첩된 영상신호를 디스플레이 하는 디스플레이부를 포함하고,
    상기 피사체 영역은 얼굴 영역인 것을 특징으로 하고,
    상기 음영 영역 검출부는 상기 피사체 영역의 영상신호의 블러 영상신호를 얻고,
    상기 블러 영상신호로부터 스킨 톤 마스크를 얻고,
    상기 블러 영상신호, 상기 스킨 톤 마스크 및 상기 피사체 영역의 평균 휘도 레벨을 이용하여 음영 영역 마스크를 검출하고,
    상기 검출된 음영 영역 마스크를 상기 검출된 음영 영역으로서 출력하는 것을 특징으로 하는 촬영 장치.
  11. 제 10 항에 있어서, 상기 촬영 장치는,
    촬영된 영상신호에서 상기 음영 영역 검출부에서 검출된 음영 영역의 휘도 레벨을 보정하는 음영 영역 보정부를 더 포함하는 촬영 장치.
  12. 제 11 항에 있어서, 상기 음영 영역 보정부에 의한 음영 보정이 복수회 수행될 때, 상기 음영 영역 보정부는 음영이 보정된 영상 신호를 피사체 영역 검출부로 전송하여 상기 음영이 보정된 영상 신호에 대한 피사체 영역 검출 및 음영 영역 검출을 재차 수행하게 하고, 상기 수행 결과에 기초하여 상기 음영이 보정된 영상 신호에 대한 음영을 재차 보정하는 것을 특징으로 하는 촬영 장치.
  13. 제 12 항에 있어서, 상기 음영 영역 보정부는 상기 피사체 영역의 휘도 레벨에 따라 결정된 감마 커브를 이용하여 상기 음영을 보정하는 것을 특징으로 하는 촬영 장치.
  14. 제 11 항 내지 제 13 항중 어느 한 항에 있어서, 상기 촬영 장치는,
    상기 음영 영역이 보정된 영상신호를 저장하는 저장부를 더 포함하는 촬영 장치.
  15. 삭제
  16. 제 10 항에 있어서, 상기 음영 영역 검출부는 저역 통과 필터를 이용하여 상기 블러 영상신호를 얻고, RGB 필터 임계 알고리즘을 이용하여 상기 스킨 톤 마스크를 얻고, 상기 피사체 영역의 영상신호중 상기 평균 휘도 레벨이하의 휘도 레벨을 갖는 영역을 상기 음영 영역으로 마스킹하는 것을 특징으로 하는 촬영 장치.
  17. 제 16 항에 있어서, 상기 음영 영역 검출부는 상기 블러 영상신호, 상기 스킨 톤 마스크, 및 상기 평균 휘도 레벨이하의 휘도 레벨의 교집합에 의해 상기 음영 영역 마스크를 검출하는 촬영 장치.
KR1020100008600A 2010-01-29 2010-01-29 촬영 방법 및 장치와 그 기록 매체 KR101643612B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020100008600A KR101643612B1 (ko) 2010-01-29 2010-01-29 촬영 방법 및 장치와 그 기록 매체
US12/878,131 US8619151B2 (en) 2010-01-29 2010-09-09 Photographing method and apparatus providing correction of object shadows, and a recording medium storing a program for executing the method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100008600A KR101643612B1 (ko) 2010-01-29 2010-01-29 촬영 방법 및 장치와 그 기록 매체

Publications (2)

Publication Number Publication Date
KR20110088884A KR20110088884A (ko) 2011-08-04
KR101643612B1 true KR101643612B1 (ko) 2016-07-29

Family

ID=44341329

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100008600A KR101643612B1 (ko) 2010-01-29 2010-01-29 촬영 방법 및 장치와 그 기록 매체

Country Status (2)

Country Link
US (1) US8619151B2 (ko)
KR (1) KR101643612B1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102063102B1 (ko) * 2013-08-19 2020-01-07 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
WO2017177284A1 (en) * 2016-04-15 2017-10-19 University Of Southern Queensland Methods, systems, and devices relating to shadow detection for real-time object identification
WO2019031259A1 (ja) * 2017-08-08 2019-02-14 ソニー株式会社 画像処理装置および方法
RU2697627C1 (ru) 2018-08-01 2019-08-15 Самсунг Электроникс Ко., Лтд. Способ корректировки освещенности объекта на изображении в последовательности изображений и вычислительное устройство пользователя, реализующее упомянутый способ
CN111526263B (zh) * 2019-02-01 2022-03-18 光宝电子(广州)有限公司 图像处理方法、装置及计算机系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001128058A (ja) 1999-10-26 2001-05-11 Matsushita Electric Ind Co Ltd 撮像装置
JP2002281375A (ja) 2001-03-16 2002-09-27 Fuji Photo Film Co Ltd 電子カメラ及び自動焦点調節時の画像表示方法
US20030174235A1 (en) * 2002-03-14 2003-09-18 Creo Il. Ltd. Method and apparatus for composing flat lighting and correcting for lighting non-uniformity

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0609474A1 (en) * 1993-02-03 1994-08-10 International Business Machines Corporation Method and apparatus for transforming an image for classification or pattern recognition
US7271838B2 (en) * 2002-05-08 2007-09-18 Olympus Corporation Image pickup apparatus with brightness distribution chart display capability
KR100849846B1 (ko) * 2006-09-21 2008-08-01 삼성전자주식회사 이미지 밝기 보정 장치 및 방법
US7965300B2 (en) * 2007-11-15 2011-06-21 Sharp Laboratories Of America, Inc. Methods and systems for efficient white balance and gamma control
KR101437911B1 (ko) * 2007-11-29 2014-09-05 삼성전자주식회사 다이나믹 영역 확장 방법 및 장치
US7920179B2 (en) * 2008-08-05 2011-04-05 Sony Ericsson Mobile Communications Ab Shadow and reflection identification in image capturing devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001128058A (ja) 1999-10-26 2001-05-11 Matsushita Electric Ind Co Ltd 撮像装置
JP2002281375A (ja) 2001-03-16 2002-09-27 Fuji Photo Film Co Ltd 電子カメラ及び自動焦点調節時の画像表示方法
US20030174235A1 (en) * 2002-03-14 2003-09-18 Creo Il. Ltd. Method and apparatus for composing flat lighting and correcting for lighting non-uniformity

Also Published As

Publication number Publication date
US20110187898A1 (en) 2011-08-04
KR20110088884A (ko) 2011-08-04
US8619151B2 (en) 2013-12-31

Similar Documents

Publication Publication Date Title
JP5089405B2 (ja) 画像処理装置及び画像処理方法並びに撮像装置
CN108668093B (zh) Hdr图像的生成方法及装置
US10805508B2 (en) Image processing method, and device
US10630920B2 (en) Image processing apparatus
US8441554B2 (en) Image capturing apparatus capable of extracting subject region from captured image
US10382671B2 (en) Image processing apparatus, image processing method, and recording medium
US9589339B2 (en) Image processing apparatus and control method therefor
JP2012019397A (ja) 画像処理装置、画像処理方法および画像処理プログラム
US8717449B2 (en) Image synthesizing apparatus, image recording method, and recording medium
KR20150109177A (ko) 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체
KR101643612B1 (ko) 촬영 방법 및 장치와 그 기록 매체
US20090041377A1 (en) Method and system for defect image correction
JP6652303B2 (ja) フラッシュバンド判定装置、その制御方法、および制御プログラム、並びに撮像装置
JP4613710B2 (ja) 画像処理装置及びプログラム
JP5882644B2 (ja) 画像処理装置、その制御方法、及びプログラム
US11032463B2 (en) Image capture apparatus and control method thereof
US8781226B2 (en) Digital image processing apparatus for recognizing fireworks, method of operating the same, and computer-readable storage medium
JP2021097347A (ja) 撮像装置およびその制御方法、プログラム
JP6606981B2 (ja) 出力制御装置、出力制御方法及びプログラム
JP5131399B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP5205230B2 (ja) 画像処理装置
JP2008283477A (ja) 画像処理装置及び画像処理方法
JP2015100091A (ja) 画像処理装置、撮像装置、画像処理方法、及びプログラム
US20240187727A1 (en) Image processing apparatus, image capturing apparatus, control method of image processing apparatus, and storage medium
JP5448799B2 (ja) 表示制御装置及び表示制御方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190627

Year of fee payment: 4