KR20180138530A - 검출 장치, 이미지 처리 장치, 검출 방법, 및 이미지 처리 방법 - Google Patents

검출 장치, 이미지 처리 장치, 검출 방법, 및 이미지 처리 방법 Download PDF

Info

Publication number
KR20180138530A
KR20180138530A KR1020180069313A KR20180069313A KR20180138530A KR 20180138530 A KR20180138530 A KR 20180138530A KR 1020180069313 A KR1020180069313 A KR 1020180069313A KR 20180069313 A KR20180069313 A KR 20180069313A KR 20180138530 A KR20180138530 A KR 20180138530A
Authority
KR
South Korea
Prior art keywords
image
white balance
specific color
adjustment
color
Prior art date
Application number
KR1020180069313A
Other languages
English (en)
Other versions
KR102562720B1 (ko
Inventor
타케시 츠카고시
Original Assignee
가시오게산키 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가시오게산키 가부시키가이샤 filed Critical 가시오게산키 가부시키가이샤
Publication of KR20180138530A publication Critical patent/KR20180138530A/ko
Application granted granted Critical
Publication of KR102562720B1 publication Critical patent/KR102562720B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H04N1/628—Memory colours, e.g. skin or sky
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40—Picture signal circuits
    • H04N1/407—Control or modification of tonal gradation or of extreme levels, e.g. background level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/643—Hue control means, e.g. flesh tone control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6077—Colour balance, e.g. colour cast correction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)
  • Processing Of Color Television Signals (AREA)
  • Color Image Communication Systems (AREA)

Abstract

본 발명의 일 실시예에 의한 촬영 장치는, 이미지 취득부와, 화이트 밸런스 조정부와, 제어부와, 영역 검출부를 포함한다. 이미지 취득부는, 이미지를 취득한다. 화이트 밸런스 조정부는, 이미지 취득부에 의해 취득된 이미지의 화이트 밸런스를 조정한다. 제어부는, 기준이 되는 특정 색에 기초해서, 화이트 밸런스 조정부에 의한 화이트 밸런스의 조정 내용을 제어한다. 영역 검출부는, 제어부에 의해 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출한다.

Description

검출 장치, 이미지 처리 장치, 검출 방법, 및 이미지 처리 방법{DETECTION APPARATUS, IMAGE PROCESSING APPARATUS, DETECTION METHOD, AND IMAGE PROCESSING METHOD}
본 발명은, 검출 장치, 이미지 처리 장치, 검출 방법, 및 이미지 처리 방법에 관한 것이다.
종래, 이미지 내에 포함되는 인물의 피부색 부분을, 예를 들면, 색이 희어지도록 하는 처리를 실시하는 이미지 처리를 행하는 기술이 알려져 있다. 또, 이미지 처리의 대상이 되는 인물의 피부색 부분을 검출하기 위해, HSV 색공간의 색상 정보를 사용하는 기술이 알려져 있다.
한편, 피사체가 된 인물에 있어서의 특정한 색 영역을 추출하는 기술은, 예를 들면, 일본특허출원공개 특개2011-44132호 공보에 기재되어 있다.
그렇지만, 이미지 처리의 대상이 되는 인물의 피부색 부분을 검출하기 위해서, 색상 정보만을 이용하면, 인물의 피부색과 근사한 색상의 영역도 함께 검출되어 버린다. 상기 특허문헌에 기재된 기술과 같이, 채도 정보 등을 더욱 병용해서 복수의 색에 관한 정보에 의해 검출의 정밀도를 향상시키는 것이 가능하지만, 사용하는 정보의 종류가 늘어나는 만큼 처리가 무거워져 버린다는 문제가 있다. 이것은, 사용하는 색공간에 무관하게 발생하는 문제이다. 또한, 검출하는 색 부분이, 인물의 피부색 부분 이외의 경우에도 마찬가지다.
일본특허출원공개 특개2011-44132호 공보.
본 발명의 과제는, 이미지 내에 포함되는 특정 색의 부분을 검출하는 처리 혹은 특정 색의 부분에 행하는 이미지 처리의 부하를 경감하는 것이다.
본 발명의 일 국면에 의하면, 이미지를 취득하는 이미지 취득 수단과, 상기 이미지 취득 수단에 의해 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 수단과, 기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는 제어 수단과, 상기 제어 수단에 의해 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 수단을 포함하는 검출 장치가 제공된다.
본 발명의 다른 국면에 의하면, 이미지를 취득하는 이미지 취득 수단과, 상기 이미지 취득 수단에 의해 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 수단과, 기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는 제어 수단과, 상기 제어 수단에 의해 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하기 위한 이미지 내에 있어서의 위치와 강도를 설정하는 맵 정보를 생성하는 생성 수단을 포함하는 검출 장치가 제공된다.
본 발명의 다른 국면에 의하면, 이미지를 취득하는 이미지 취득 수단과, 상기 이미지 취득 수단에 의해 취득된 이미지에 있어서, 기준이 되는 특정 색의 RGB값 각각의 비가 동일하게 되도록, 상기 이미지에 있어서의 색의 밸런스를 변환하는 변환 수단과, 상기 변환 수단에 의해 색의 밸런스가 변환된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 상기 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 수단을 포함하는 검출 장치가 제공된다.
본 발명의 다른 국면에 의하면, 제1의 색공간에서의 적어도 하나의 요소가 선형인 특성을 갖는 이미지를 취득하는 이미지 취득 수단과, 상기 이미지 취득 수단에 의해 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 수단과, 기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는 제어 수단과, 상기 제어 수단에 의해 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지 내의 복수의 부분 각각을, 제2의 색공간에서의 일 요소로 변환하는 변환 수단과, 상기 변환 수단에 의해 변환되는 정보를 사용해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하는 이미지 처리 수단을 포함하는 이미지 처리 장치가 제공된다.
본 발명의 다른 국면에 의하면, 이미지를 취득하는 이미지 취득 단계와, 상기 이미지 취득 단계에서 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 단계와, 기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 단계에 있어서의 화이트 밸런스의 조정 내용을 제어하는 제어 단계와, 상기 제어 단계에서 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 단계를 포함하는 검출 방법이 제공된다.
본 발명의 다른 국면에 의하면, 이미지를 취득하는 이미지 취득 단계와, 상기 이미지 취득 단계에서 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 단계와, 기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 단계에 있어서의 화이트 밸런스의 조정 내용을 제어하는 제어 단계와, 상기 제어 단계에서 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하기 위한 이미지 내에 있어서의 위치와 강도를 설정하는 맵 정보를 생성하는 생성 단계를 포함하는 검출 방법이 제공된다.
본 발명의 다른 국면에 의하면, 이미지를 취득하는 이미지 취득 단계와, 상기 이미지 취득 단계에서 취득된 이미지에 있어서, 기준이 되는 특정 색의 RGB값 각각의 비가 동일하게 되도록, 상기 이미지에 있어서의 색의 밸런스를 변환하는 변환 단계와, 상기 변환 단계에 의해 색의 밸런스가 변환된 이미지에 기초해서, 색의 밸런스가 변환되기 전의 상기 취득된 이미지로부터 상기 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 단계를 포함하는 검출 방법이 제공된다.
본 발명의 다른 국면에 의하면, 제1의 색공간에서의 적어도 하나의 요소가 선형인 특성을 갖는 이미지를 취득하는 이미지 취득 단계와, 상기 이미지 취득 단계에서 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 단계와, 기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 단계에 있어서의 화이트 밸런스의 조정 내용을 제어하는 제어 단계와, 상기 제어 단계에서 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지 내의 복수의 부분 각각을, 제2의 색공간에서의 일 요소로 변환하는 변환 단계와, 상기 변환 단계에서 변환되는 정보를 사용해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하는 이미지 보정 단계를 포함하는 이미지 처리 방법이 제공된다.
본 발명의 상기한 그리고 다른 목적 및 신규한 구성들은 첨부된 도면과 함께 이하의 상세한 설명에 상세히 개시되어 있다. 그러나, 이러한 도면들은 예시의 목적일 뿐이며 본 발명의 범위를 제한하려는 것은 아니라는 점에 유의하여야 한다.
이하의 상세한 기술을 다음의 도면과 함께 고려하면, 본원에 대한 보다 깊은 이해를 얻을 수 있다.
도 1은 본 발명의 검출 장치 및 이미지 처리 장치의 일 실시예에 의한 촬영 장치의 하드웨어 구성을 나타내는 블록도이다.
도 2는 채도 Sat를 피부색의 우도(likelihood)로 변환하는 환산식의 특성의 일 예를 나타내는 모식도이다.
도 3은 인물이 피사체로 되어 있는 처리 대상인 이미지를 나타내는 모식도이다.
도 4는 인물이 피사체로 되어 있는 이미지에 있어서의 피부색 부분이 무채색(그레이)화된 상태를 나타내는 모식도이다.
도 5는 피부색 영역이 무채색(그레이)화된 이미지의 채도 Sat를 나타내는 모식도이다.
도 6은 채도 Sat에 기초해서 피부색 부분이 특정된 상태를 나타내는 모식도이다.
도 7은 도 1의 촬영 장치의 기능적 구성 중, 메이크업 처리를 실행하기 위한 기능적 구성을 나타내는 기능 블록도이다.
도 8은 도 7의 기능적 구성을 갖는 도 1의 촬영 장치가 실행하는 메이크업 처리의 흐름을 설명하는 흐름도이다.
이하, 본 발명의 실시예에 대해서, 도면을 이용해서 설명한다.
도 1은, 본 발명의 검출 장치 및 이미지 처리 장치의 일 실시예에 의한 촬영 장치 1의 하드웨어 구성을 나타내는 블록도이다.
촬영 장치 1은, 예를 들면, 디지털 카메라로서 구성된다.
촬영 장치 1은, 도 1에 도시된 것처럼, CPU(Central Processing Unit) 11과, ROM(Read Only Memory) 12와, RAM(Random Access Memory) 13과, 버스14와, 입출력 인터페이스15와, 촬상부 16과, 입력부 17과, 출력부 18과, 기억부 19와, 통신부 20과, 드라이브21을 포함한다.
CPU 11은, ROM 12에 기록되어 있는 프로그램, 또는, 기억부 19로부터 RAM 13에 로딩된 프로그램에 따라서 각종 처리를 실행한다.
RAM 13에는, CPU 11이 각종 처리를 실행함에 있어서 필요한 데이터 등도 적절히 기억된다.
CPU 11, ROM 12 및 RAM 13은, 버스14를 통해서 서로 접속되어 있다. 이 버스 14에는 또한, 입출력 인터페이스15도 접속되어 있다. 입출력 인터페이스 15에는, 촬상부 16, 입력부 17, 출력부 18, 기억부 19, 통신부 20 및 드라이브21이 접속되어 있다.
촬상부 16은, 도시는 되어 있지 않지만, 광학 렌즈부와, 이미지 센서를 포함한다.
광학 렌즈부는, 피사체를 촬영하기 위해서, 빛을 집광하는 렌즈, 예를 들면, 포커스 렌즈나 줌 렌즈 등으로 구성된다.
포커스 렌즈는, 이미지 센서의 수광면에 피사체상을 결상시키는 렌즈다. 줌 렌즈는, 초점 거리를 일정한 범위에서 자유자재로 변화시키는 렌즈다.
촬상부 16에는 또한, 필요에 따라, 초점, 노출, 화이트 밸런스 등의 설정 파라미터를 조정하는 주변 회로가 설치된다.
이미지 센서는, 광전 변환 소자나, AFE(Analog Front End) 등을 포함한다.
광전 변환 소자는, 예를 들면 CMOS(Complementary Metal Oxide Semiconductor)형의 광전 변환 소자 등으로 구성된다. 광전 변환 소자에는, 광학 렌즈부로부터 피사체상이 입사된다. 그리고, 광전 변환 소자는, 피사체상을 광전 변환(촬상)해서 이미지 신호를 일정 시간 축적하고, 축적한 이미지 신호를 아날로그 신호로서 AFE에 순차 공급한다.
AFE는, 이 아날로그의 이미지 신호에 대하여, A/D(Analog/Digital) 변환 처리 등의 각종 신호 처리를 실행한다. 각종 신호 처리에 의해, 디지털 신호가 생성되고, 촬상부 16의 출력 신호(RAW 데이터 또는 소정의 이미지 형식의 데이터)로서, CPU 11이나 도시되지 않은 이미지 처리부 등에 적절히 공급된다.
입력부 17은, 각종 조작 버튼 등을 포함하고, 사용자의 지시 조작에 따라서 각종 정보를 입력한다.
출력부 18은, 디스플레이나 스피커 등으로 구성되고, 이미지나 음성을 출력한다.
기억부 19는, 하드 디스크 혹은 DRAM(Dynamic Random Access Memory) 등을 포함하고, 각종 이미지의 데이터를 기억한다.
통신부 20은, 인터넷을 포함하는 네트워크를 통해서 다른 장치(도시되지 않음)와의 사이에서 행하는 통신을 제어한다.
드라이브 21에는, 자기 디스크, 광 디스크, 광자기 디스크, 혹은 반도체 메모리 등을 포함하는, 리무버블 미디어 31이 적당히 장착된다. 드라이브21에 의해 리무버블 미디어 31로부터 독출된 프로그램은, 필요에 따라 기억부 19에 인스톨된다. 또, 기억부 19에 기억되어 있는 이미지의 데이터 등의 각종 데이터를, 드라이브22를 통해서 리무버블 미디어 31에 기억할 수 있다.
본 실시예의 촬영 장치 1에 있어서는, 감마 보정 등의 비선형인 이미지 처리가 행해지기 전의, 선형인 특성(여기서는 화소의 RGB값의 비)이 유지된 이미지 데이터(예를 들면, 촬상부 16으로부터 RAW 데이터로서 출력된 이미지 데이터)에 대하여, 특정 색을 무채색(그레이)화하는 화이트 밸런스 처리가 행해진다. 본 실시예에 있어서는, 특정 색의 일 예로서, 피부색을 대상으로 한다. 대상으로 하는 피부색에 대해서는, 피사체의 이미지로부터 추출하는 것이 가능하다. 이 경우, 처리 대상인 이미지에 있어서, 공지의 얼굴 검출 기술을 이용해서 얼굴 검출을 행하는 것에 의해 얼굴 영역을 특정하고, 특정된 얼굴 영역 내의 각 화소의 R값, B값, G값을 각각 적분한다. 얼굴 영역 내의 화소는, 주로 피부색으로 추정되기 때문에, 얼굴 영역 내의 각 화소의 R값, B값, G값 각각의 적분 값은, 피부색의 R값, B값, G값의 비(RGB값의 비)를 나타내는 것이 된다. 그리고, 처리 대상이 되는 이미지의 각 화소의 R값, G값, B값 각각에, 취득된 R값, G값, B값의 적분 값의 비의 역수(화이트 밸런스 게인)를 곱한다. 즉, R값, G값, B값의 적분 값의 비가, Ri:Gi:Bi라고 하면, 처리 대상이 되는 이미지의 각 화소의 R값, G값, B값 각각에, 1/Ri, 1/Gi, 1/Bi를 곱한다. 이에 의해, 특정된 얼굴 영역으로부터 추출되는 피부색에 가까운 화소만큼, R값, G값, B값의 비가, 1:1:1에 가까운 것이 된다. R값, G값, B값의 비가, 1:1:1인 화소는, 밝기만을 갖는 무채색의 화소(백으로부터 흑까지의 범위의 그레이 화소)이다. 그 때문에, 이러한 처리에 의해, 피부색 부분을 무채색(그레이)화할 수 있다.
그리고, 피부색 부분을 무채색(그레이)화한 처리 대상인 이미지의 데이터에 있어서, 각 화소의 채도 Sat가 산출된다.
RGB신호로부터 채도 Sat를 산출하는 경우, 이하의 변환식을 이용할 수 있다. 단, 이하의 식은 채도 Sat의 산출식의 일 예이고, 색공간마다 정의된 채도 Sat의 산출식을 이용할 수 있다.
Sat(x, y)= (RGBmax(x, y)-RGBmin(x, y))/RGBmax(x, y)
한편, 상기 변환식에 있어서, RGBmax(x, y)은 주목 화소의 R값, G값, B값 중 최대값, RGBmin(x, y)은 주목 화소의 R값, G값, B값의 최소값을 나타낸다.
그 결과, 처리 대상인 이미지의 데이터에 있어서, 피부색에 가까운 화소가 채도 Sat가 낮은 화소로서 나타내진 상태가 된다. 즉, 피부색의 유사성이 1차원의 데이터로서 나타내진 상태가 된다.
그리고, 채도 Sat의 문턱값을 설정해 두고, 채도 Sat가 문턱값 이하인 영역을 피부색 부분으로서 검출할 수 있다.
또한, 본 실시예에서는, 처리 대상인 이미지의 데이터에 있어서, 채도 Sat를 피부색의 우도(likelihood)로 변환한다.
한편, 채도 Sat를 피부색의 우도로 변환하는 경우에는, 피부색 영역으로서 활용할 때의 목적에 따라, 환산식을 설정할 수 있다.
도 2는, 채도 Sat를 피부색의 우도로 변환하는 환산식의 특성의 일 예를 도시하는 모식도이다.
도 2에 도시된 것처럼, 채도 Sat를 피부색의 우도로 변환하는 환산식에서는, 채도 Sat가 최저값(0)으로부터 소정값(core)까지는 피부색의 우도가 최대값(1)으로 되어 있고, 채도 Sat가 소정값(core)을 넘으면, 피부색의 우도가 소정의 기울기(slope)로 단조감소한다. 그리고, 피부색의 우도가 최소값(0)에 달한 후에는, 채도 Sat의 값에 관계없이, 피부색의 우도는 최소값(0)으로 유지된다.
그리고, 피부색의 우도에 있어서, 피부색이라고 판정하기 위한 문턱값을 설정해 두고, 변환된 피부색의 우도가 문턱값 이상인 영역을 피부색 부분으로서 검출할 수 있다.
한편, 도 2에 도시된 구체적인 환산식의 특성은, 적절히 변경하는 것이 가능하고, 단조감소하는 특성이라면, S자 특성 등의 곡선으로 이루어지는 특성으로 하는 것도 가능하다.
이러한 처리에 의해, 인물이 피사체로 되어 있는 이미지에 있어서, 피사체의 얼굴 영역으로부터 피부색 부분을 추출할 수 있다.
이하, 구체적인 이미지를 예로 들어서, 피부색 부분이 추출되는 과정에 대해서 설명한다.
도 3은, 인물이 피사체로 되어 있는 처리 대상인 이미지를 나타내는 모식도이다.
도 3에 있어서는, 피사체의 얼굴이 크게 찍혀 있고, 얼굴 및 목 이외의 영역(옷이나 배경 등)은, 피부색과는 크게 다른 색인 것으로 한다.
이러한 처리 대상인 이미지에 대하여, 얼굴 검출이 행해지고, 얼굴 영역 내의 각 화소의 R값, B값, G값이 각각 적분된다. 그리고, 처리 대상이 되는 이미지의 각 화소의 R값, G값, B값 각각에, R값, G값, B값의 적분 값의 비의 역수가 곱해지면, 피부색에 가까운 부분만큼 무채색(그레이)화된 상태가 된다.
도 4는, 인물이 피사체로 되어 있는 이미지에 있어서의 피부색 부분이 무채색(그레이)화된 상태를 나타내는 모식도이다.
처리 대상이 되는 이미지의 각 화소의 R값, G값, B값 각각에, R값, G값, B값의 적분 값의 비의 역수가 곱해진 결과, 피부색에 가까운 부분만큼, 무채색(그레이)화된 상태가 되어 있다.
피부색 부분이 무채색(그레이)화된 처리 대상인 이미지 데이터에 있어서, 소정의 환산식에 의해, 각 화소의 채도 Sat가 산출된다.
도 5는, 피부색 영역이 무채색(그레이)화된 이미지의 채도 Sat를 나타내는 모식도이다.
도 5에 있어서는, 피부색에 가까운 부분(무채색에 가까운 부분)이, 채도 Sat가 낮은(즉, 검은 색에 가까운) 부분이 되어 있다.
이와 같이, 각 화소의 채도 Sat가 취득됨으로써, 피부색 부분이 검출된다.
그리고, 채도 Sat를 파라미터로 해서, 상기 환산식에 의해, 각 화소에 있어서의 피부색의 우도를 얻을 수 있다.
도 6은, 채도 Sat에 기초해서 피부색 부분이 특정된 상태를 나타내는 모식도이다.
도 6에 도시된 이미지는, 처리 대상이 되는 이미지의 피부 맵(각 부분의 피부색 유사성을 나타내는 맵)을 나타내고 있고, 피부색의 우도가 높은 부분은, 흰색에 가까운 색으로 나타내진다. 본 실시예에 있어서, 피부 맵은, 처리 대상이 되는 이미지 내에서, 피부를 희게 하거나, 매끄럽게 하는 메이크업 효과의 이미지 처리를 행하기 위한 위치, 및 메이크업 효과의 강도를 나타내는 맵 정보로서 이용된다.
[기능적 구성]
도 7은, 도 1의 촬영 장치 1의 기능적 구성 중, 메이크업 처리를 실행하기 위한 기능적 구성을 나타내는 기능 블록도이다.
메이크업 처리란, 피사체에 있어서의 피부색 부분을 무채색(그레이)화하는 화이트 밸런스 처리를 행하는 것에 의해, 낮은 처리 부하로 피부색 부분의 특정을 실행하고, 특정한 피부색 부분에 메이크업 효과를 가하는 일련의 처리를 말한다.
메이크업 처리가 실행되는 경우에는, 도 7에 도시된 바와 같이, CPU 11에 있어서, 이미지 취득부 51과, 얼굴 검출 처리부 52와, 화이트 밸런스 조정부 53과, 제어부 54와, 영역 검출부 55와, 우도 산출부 56과, 이미지 처리부 57이 기능한다.
또, 기억부 19에 일 영역에는, 이미지 기억부 71이 설정된다.
이미지 기억부 71에는, 촬상부 16에 의해 취득된 촬상 이미지나, 통신부 20혹은 드라이브 21을 통해서 취득된 이미지 데이터가 기억된다.
이미지 취득부 51은, 촬상부 16 또는 이미지 기억부 71로부터 처리 대상이 되는 이미지의 데이터를 취득한다. 한편, 본 실시예에 있어서 처리 대상이 되는 이미지의 데이터는, 감마 보정 등의 비선형인 이미지 처리가 행해지기 전의, 선형인 특성이 유지된 이미지의 데이터(예를 들면, 촬상부 16로부터 RAW 데이터로서 출력된 이미지의 데이터)이다. 이하의 설명에 있어서는, 촬상부 16에 의해 취득된 처리 대상이 되는 이미지로부터, 특정한 색(피부색)의 부분을 화이트 밸런스 처리에 의해 무채색(그레이)화해서 추출하고, 추출된 부분에 메이크업 효과를 가하는 경우를 예로서 설명한다.
얼굴 검출 처리부 52는, 처리 대상이 되는 이미지의 데이터에 있어서 얼굴 검출 처리를 실행한다. 구체적으로는, 얼굴 검출 처리부 52는, 촬상부 16에 의해 취득된 처리 대상이 되는 이미지, 또는 이미지 기억부 71로부터 취득된 처리 대상이 되는 이미지에 있어서의 얼굴 영역을 특정한다. 얼굴 검출 처리의 실행 결과, 처리 대상인 이미지 내에 있어서의 얼굴의 검출수, 얼굴 테두리·눈의 좌표·코의 좌표·입의 좌표 등의 각종 얼굴의 기관의 좌표가 검출된다. 한편, 얼굴 검출 처리는, 공지의 기술을 사용하는 것으로 실현가능하기 때문에, 상세한 설명은 생략한다.
화이트 밸런스 조정부 53은, 이미지 처리부 57의 지시에 따라서, 표시(재생 혹은 라이브 뷰 표시 등) 또는 기록(기록 매체에 저장 등)용의 이미지, 혹은, 배경용의 이미지 및 메이크업 처리용의 이미지(후술)를 생성하기 위한 현상 처리에 있어서, 처리 대상인 이미지에 따라서 화이트 밸런스를 조정하는 화이트 밸런스 처리(이하, 적절히 "현상용 화이트 밸런스 처리"라고 부른다.)를 실행한다.
또한, 화이트 밸런스 조정부 53은, 제어부 54의 지시에 따라서, 메이크업 효과를 가할 부분을 추출하기 위해서 특정한 색(피부색)을 무채색(그레이)화하는 화이트 밸런스 처리(이하, 적절히 "검출용 화이트 밸런스 처리"라고 부른다.)를 실행한다. 본 실시예에 있어서, 화이트 밸런스 조정부 53은, 처리 대상이 되는 이미지의 각 화소의 R값, G값, B값 각각에, 제어부 54에 의해 취득되는 R값, G값, B값의 적분 값의 비의 역수를 곱한다. 즉, 화이트 밸런스 조정부 53은, R값, G값, B값의 적분 값의 비가, Ri:Gi:Bi인 경우, 처리 대상이 되는 이미지의 각 화소의 R값, G값, B값 각각에, 1/Ri, 1/Gi, 1/Bi를 곱한다. 이에 의해, 피부색 부분이 무채색(그레이)화된다.
제어부 54는, 얼굴 검출 처리부 52에 의해 특정된 얼굴 영역 내의 각 화소의 R값, B값, G값을 각각 적분하고, R값, G값, B값의 적분 값의 비를 취득한다. 여기서 취득되는 R값, G값, B값의 적분 값의 비는, 특정한 색(피부색)을 무채색(그레이)화하기 위한 제어 파라미터가 된다.
영역 검출부 55는, 피부색 부분을 무채색(그레이)화한 처리 대상인 이미지의 데이터에 있어서, 각 화소의 채도 Sat를 산출한다. 처리 대상인 이미지의 데이터에 있어서, 채도 Sat가 낮은 만큼, 피부색으로서의 우도가 높은 것을 나타내고 있고, 영역 검출부 55는, 각 화소의 채도 Sat에 기초해서, 피부색의 영역(피부색 부분)을 검출한다. 예를 들면, 채도 Sat의 문턱값을 설정해 두고, 채도 Sat가 문턱값 이하인 영역을 피부색 부분으로서 검출할 수 있다. 또한, 영역 검출부 55는, 각 화소의 채도 Sat에 기초해서, 피부색의 영역(피부색 부분)을 검출하는 것 외에, 채도 Sat로부터 우도 산출부 56이 생성하는 피부 맵에 기초해서, 피부색의 영역(피부색 부분)을 검출하는 것도 가능하다. 이 경우, 피부색의 우도에 있어서, 피부색이라고 판정하기 위한 문턱값을 설정해 두고, 변환된 피부색의 우도가 문턱값 이상인 영역을 피부색 부분으로서 검출할 수 있다.
우도 산출부 56은, 채도 Sat를 피부색의 우도로 변환하고, 피부 맵을 생성한다.
이미지 처리부 57은, 처리 대상이 되는 이미지로부터 표시(재생 혹은 라이브 뷰 표시 등) 또는 기록(기록 매체에 저장 등)용의 이미지를 생성하는 이미지 처리를 실행한다.
본 실시예에 있어서, 이미지 처리부 57은, 처리 대상이 되는 이미지에 인물의 얼굴이 포함되어 있지 않은 경우, 처리 대상이 되는 이미지를 현상 처리해서 표시 또는 기록용의 이미지를 생성한다.
또, 이미지 처리부 57은, 처리 대상이 되는 이미지에 인물의 얼굴이 포함되어 있는 경우, 처리 대상이 되는 이미지를 현상 처리해서 배경용의 이미지와 메이크업 처리용의 이미지를 생성한다. 이때, 예를 들면, 배경용의 이미지와 메이크업 처리용의 이미지에서 다른 변환 테이블을 이용해서, 색공간 변환(YUV 색공간으로부터 RGB 색공간으로의 변환 등)이 행하여진다. 배경용의 이미지는, 주로 피부색 이외의 부분이 배경으로서 이용되고, 메이크업 처리용의 이미지는, 주로 피부색 부분에 메이크업 처리를 실시하기 위해서 이용된다.
이에 더하여, 이미지 처리부 57은, 메이크업 처리용의 이미지에 대하여, 메이크업 효과를 가한다.
그리고, 이미지 처리부 57은, 피부 맵에 기초해서, 배경용의 이미지와, 메이크업 효과가 가해진 메이크업 처리용의 이미지를 합성(α 블렌딩)하는 것에 의해, 표시 또는 기록용의 이미지를 생성한다.
또한, 현상 처리에 의해, 표시 또는 기록용의 이미지, 혹은, 배경용의 이미지 및 메이크업 처리용의 이미지가 생성되는 경우, 현상용 화이트 밸런스 처리 혹은 이미지 형식의 변환 처리 등이 실행된다. 이때, 본 실시예에 있어서는, 이미지 처리부 57이 화이트 밸런스 조정부 53을 제어하는 것에 의해, 현상용 화이트 밸런스 처리가 실행된다.
[동작]
다음으로, 동작을 설명한다.
[메이크업 처리]
도 8은, 도 7의 기능적 구성을 갖는 도 1의 촬영 장치 1이 실행하는 메이크업 처리의 흐름을 설명하는 흐름도이다.
메이크업 처리는, 사용자에 의해 입력부 17에 메이크업 처리의 실행을 지시하는 조작이 입력되는 것에 대응해서 개시된다. 예를 들면, 메이크업 처리는, 사용자에 의해, 촬상 이미지에 대하여 메이크업 처리를 실시하는 모드로 설정되어 있는 경우에, 촬상 이미지가 취득될 때마다 실행된다.
단계 S1에 있어서, 이미지 취득부 51은, 촬상부 16 또는 이미지 기억부 71로부터 처리 대상이 되는 이미지의 데이터(여기서는, 촬상부 16으로부터 RAW데이터로서 출력된 이미지의 데이터)를 취득한다.
단계 S2에 있어서, 얼굴 검출 처리부 52는, 처리 대상이 되는 이미지의 데이터에 있어서 얼굴 검출 처리를 실행한다.
단계 S3에 있어서, 제어부 54는, 얼굴 검출 처리부 52에 의해 특정된 얼굴 영역 내의 각 화소의 R값, B값, G값을 각각 적분하고, R값, G값, B값의 적분 값의 비를 취득한다.
단계 S4에 있어서, 화이트 밸런스 조정부 53은, 제어부 54의 지시에 따라서, 메이크업 효과를 가할 부분을 추출하기 위해서 특정한 색(피부색)을 무채색(그레이)화하는 검출용 화이트 밸런스 처리를 실행한다. 즉, 화이트 밸런스 조정부 53은, 특정된 얼굴 영역 내의 각 화소의 R값, G값, B값 각각에, 제어부 54에 의해 취득되는 R값, G값, B값의 적분 값의 비의 역수를 곱한다.
단계 S5에 있어서, 영역 검출부 55는, 피부색 부분을 무채색(그레이)화한 처리 대상인 이미지의 데이터에 있어서, 각 화소의 채도 Sat를 산출하고, 각 화소의 채도 Sat에 기초해서, 피부색의 영역(피부색 부분)을 검출한다.
단계 S6에 있어서, 우도 산출부 56은, 채도 Sat를 피부색의 우도로 변환하고, 피부 맵을 생성한다.
단계 S7에 있어서, 이미지 처리부 57은, 처리 대상이 되는 이미지를 현상 처리해서 배경용의 이미지와 메이크업 처리용의 이미지를 생성한다. 이때 실행되는 현상 처리에는, 통상의 현상 처리의 경우와 유사한 현상용 화이트 밸런스 처리가 포함되어 있다.
단계 S8에 있어서, 이미지 처리부 57은, 메이크업 처리용의 이미지에 대하여, 메이크업 효과를 가한다.
단계 S9에 있어서, 이미지 처리부 57은, 피부 맵에 기초해서, 배경용의 이미지와, 메이크업 효과가 가해진 메이크업 처리용의 이미지를 합성(α 블렌딩)하는 것에 의해, 표시 또는 기록용의 이미지를 생성한다.
단계 S10에 있어서, 이미지 처리부 57은, 생성한 이미지를 출력부 18의 디스플레이 혹은 기억부 19에 출력한다.
단계 S11에 있어서, 이미지 처리부 57은, 메이크업 처리의 종료 조건이 만족되었는지 아닌지의 판정을 행한다. 본 실시예에 있어서는, 예를 들면, 라이브 뷰 표시의 종료 지시 또는 이미지의 재생 종료 지시가 입력되는 것, 혹은, 기록용의 이미지의 기록이 완료되는 것을 메이크업 처리의 종료 조건으로서 정의할 수 있다.
메이크업 처리의 종료 조건이 만족되지 않은 경우, 단계 S11에 있어서 "아니오(NO)"로 판정되어, 처리는 단계 S1로 이행한다.
한편, 메이크업 처리의 종료 조건이 만족되었을 경우, 단계 S11에 있어서 "예(YES)"로 판정되어, 메이크업 처리가 종료된다.
이러한 처리에 의해, 선형인 특성이 유지된 이미지의 데이터에 대하여, 특정한 색(피부색)을 무채색(그레이)화하는 화이트 밸런스 처리를 실시할 수 있다. 그리고, 피부색 부분을 무채색(그레이)화한 처리 대상인 이미지의 데이터에 있어서, 각 화소의 채도 Sat를 산출할 수 있다. 그 결과, 처리 대상인 이미지의 데이터에 있어서, 피부색에 가까운 화소가, 채도 Sat가 낮은 화소로서 나타내진 상태가 되고, 채도 Sat를 피부색의 우도로 변환하는 것에 의해, 각 부분의 피부색 유사성을 나타내는 피부 맵을 생성할 수 있다.
그 때문에, 피부색 유사성을 나타내는 피부색의 우도를 산출할 때에, 2차원 혹은 3차원에 있어서의 영역의 확보와 같은 복잡한 연산을 행하지 않고, 1차원의 파라미터로 피부색의 우도를 산출하는 것이 가능해진다.
따라서, 이미지 내에 포함되는 인물의 특정한 색(피부색)의 부분을 검출하는 처리 부하를 경감할 수 있다. 또, 이미지 내에 포함되는 인물의 특정한 색(피부색)의 부분에 이미지 처리를 시행할 때의 처리 부하를 경감할 수 있다.
또, 상술한 메이크업 처리에 있어서는, 선형인 특성이 유지된 이미지의 데이터를 처리 대상으로 하기 때문에, 촬영시의 환경의 차이의 영향을 억제할 수 있다.
더욱이, 상술한 메이크업 처리에 있어서는, 피사체의 이미지로부터 추출한 특정한 색(피부색)을 기준으로 해서, 특정한 색의 부분(피부색 부분)을 추출하기 때문에, 이미지에 있어서의 특정한 색의 부분(피부색 부분)을 검출할 때에, 피사체의 차이에 따른 영향을 억제할 수 있다.
[변형예1]
상술한 실시예에 있어서는, 피부 맵을 작성하고, 작성한 피부 맵을 이용해서 메이크업 처리용의 이미지를 배경용의 이미지에 합성하는 것에 의해, 메이크업 효과를 가하는 처리를 실행하는 것으로 했다.
이에 대하여, 메이크업 효과를 가하는 처리를 행하지 않고, 특정한 색(피부색)이 무채색(그레이)화된 이미지를 생성하는 것으로, 처리 대상인 이미지에 있어서의 특정한 색의 부분을 검출하기 위해서 본 발명을 이용하는 것이 가능하다.
예를 들면, 처리 대상인 이미지에 있어서, 특정한 색의 부분의 비율을 검출하기 위해서 본 발명을 이용할 수 있다. 하나의 예로서, 씬(scene) 판정 등에 본 발명을 적용하는 것이 가능하고, 히스토그램을 생성하는 것 등에 의해, 피부색의 부분의 비율로부터, 처리 대상인 이미지가 인물을 우선해야 할 씬인지 아닌지를 판정할 수 있다.
[변형예2]
상술한 실시예에 있어서는, RGB 색공간에 있어서, 피부색 부분을 무채색(그레이)화하는 경우를 예에 들어서 설명했다.
이에 대하여, RGB 색공간 이외의 각종 색공간에 있어서, 피부색 부분을 무채색(그레이)화하는 처리를 행하고, 피부색 유사성을 무채색의 정도를 나타내는 1차원의 데이터로서 취급할 수 있다.
이 경우, 처리 대상으로 하는 선형인 특성이 유지된 이미지의 데이터로서는, 상술한 바와 같이, 화소의 RGB값의 비(즉, RGB 색공간에 있어서의 휘도의 선형성)가 유지된 이미지의 데이터 외에, 다양한 색공간에 있어서, 채도에 영향을 주는 요소의 특성이 유지된 이미지의 데이터로 할 수 있다. 이러한 이미지 데이터를 입력으로 하고, 상술한 실시예와 같이, 특정한 색을 기준으로 해서, 색공간에 있어서의 채도를 나타내는 파라미터로 각 화소의 값을 변환함으로써, 본 발명을 적용할 수 있다.
즉, 본 발명은, 특정한 색공간에 한정되지 않고, 이미지 내에 포함되는 특정 색의 부분을 검출하는 처리 혹은 특정 색의 부분에 실시하는 이미지 처리의 부하를 경감하는 것이 가능하다.
상기와 같이 구성되는 촬영 장치 1은, 이미지 취득부 51과, 화이트 밸런스 조정부 53과, 제어부 54과, 영역검출부 55를 포함한다.
이미지 취득부 51은, 이미지를 취득한다.
화이트 밸런스 조정부 53은, 이미지 취득부 51에 의해 취득된 이미지의 화이트 밸런스를 조정한다.
제어부 54는, 기준이 되는 특정 색에 기초해서, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
영역 검출부 55는, 제어부 54에 의해 화이트 밸런스의 조정 내용이 제어된 이미지에 기초해서, 취득된 이미지로부터 특정 색에 관한 소정의 조건을 만족하는 부분을 검출한다.
이에 의해, 화이트 밸런스 처리의 알고리즘에 의해서, 처리 대상인 이미지에 있어서의 특정한 색의 부분을 검출할 수 있다.
따라서, 이미지 내에 포함되는 인물이 특정한 색의 부분을 검출하는 처리 부하를 경감할 수 있다.
제어부 54는, 특정 색이 소정의 채도가 되도록, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
영역 검출부 55는, 화이트 밸런스의 조정 내용이 제어된 이미지로부터, 이미지 내의 복수의 부분마다의 채도에 기초해, 취득된 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출한다.
이에 의해, 특정 색에 가까운 부분을, 채도를 파라미터로서 검출할 수 있기 때문에, 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 처리 부하를 경감할 수 있다.
또, 촬영 장치 1은, 우도 산출부 56을 포함한다.
제어부 54는, 특정 색이 무채색이 되도록, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
우도 산출부 56은, 화이트 밸런스의 조정 내용이 제어된 이미지 내의 복수의 부분마다의 채도에 기초해, 특정 색에 대한 유사성인 특정 색 우도를 산출한다.
영역 검출부 55는, 우도 산출부 56에 의해 산출된 특정 색 우도에 기초해, 취득된 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출한다.
이에 의해, 특정 색에 가까움을 나타내는 특정 색 우도를 참조하는 것으로, 이미지에 있어서의 특정 색에 가까운 부분을 간단히 검출할 수 있다.
또, 촬영 장치 1은, 이미지 처리부 57을 포함한다.
이미지 처리부 57은, 영역 검출부 55에 의해 검출된 특정 색에 관한 소정의 조건을 만족시키는 부분에 소정의 이미지 처리를 행한다.
이에 의해, 특정 색에 관한 소정의 조건을 만족시키는 부분을 간단히 추출하고, 소정의 이미지 처리를 행할 수 있다.
또, 촬영 장치 1은, 이미지 취득부 51과, 화이트 밸런스 조정부 53과, 제어부 54와, 우도 산출부 56을 포함한다.
이미지 취득부 51은, 이미지를 취득한다.
화이트 밸런스 조정부 53은, 이미지 취득부 51에 의해 취득된 이미지의 화이트 밸런스를 조정한다.
제어부 54는, 기준이 되는 특정 색에 기초해, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
우도 산출부 56은, 제어부 54에 의해 화이트 밸런스의 조정 내용이 제어된 이미지에 기초해, 취득된 이미지에 소정의 이미지 처리를 행하기 위한 이미지 내에 있어서의 위치와 강도를 설정하는 맵 정보를 생성한다.
이에 의해, 화이트 밸런스 처리의 알고리즘에 의해서, 처리 대상인 이미지에 있어서의 특정한 색의 부분을 검출하고, 소정의 이미지 처리를 시행하기 위한 이미지 내에 있어서의 위치와 강도를 설정 수 있다.
따라서, 이미지 내에 포함되는 인물의 특정한 색의 부분에 이미지 처리를 시행할 때의 처리 부하를 경감할 수 있다.
제어부 54는, 특정 색이 소정의 채도가 되도록, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
우도 산출부 56은, 화이트 밸런스의 조정 내용이 제어된 이미지 내의 복수의 부분마다의 색상에 기초해, 맵 정보를 생성한다.
이에 의해, 채도를 파라미터로 해서, 특정 색에 가까운 부분을 나타내는 맵 정보를 생성할 수 있기 때문에, 소정의 이미지 처리를 행하기 위한 이미지 내에 있어서의 위치와 강도를 설정하는 처리 부하를 경감할 수 있다.
또, 촬영 장치 1은, 우도 산출부 56을 포함한다.
제어부 54는, 특정 색이 무채색이 되도록, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
우도 산출부 56은, 화이트 밸런스의 조정 내용이 제어된 이미지 내의 복수의 부분마다의 색상에 기초해, 특정 색에 대한 유사성인 특정 색 우도를 산출한다.
우도 산출부 56은, 산출한 특정 색 우도에 기초해, 맵 정보를 생성한다.
이에 의해, 맵 정보를 참조하는 것으로, 이미지에 있어서의 특정 색에 가까운 부분을 간단히 검출할 수 있다.
또한, 촬영 장치 1은, 이미지 처리부 57을 포함한다.
이미지 처리부 57은, 우도 산출부 56에 의해 생성된 맵 정보를 사용해서, 취득된 이미지에 소정의 이미지 처리를 행한다.
이에 의해, 이미지에 있어서의 특정 색에 가까운 부분을 간단히 추출해서, 소정의 이미지 처리를 행할 수 있다.
이미지 처리부 57은, 선형인 특성을 갖는 이미지를 취득한다.
이에 의해, 소정의 이미지 처리를 행할 때에, 촬영시의 환경의 차이의 영향을 억제할 수 있다.
또, 촬영 장치 1은, 얼굴 검출 처리부 52와, 제어부 54를 포함한다.
얼굴 검출 처리부 52는, 이미지에 포함되는 얼굴 영역을 검출한다.
제어부 54는, 얼굴 검출 처리부 52에 의해 검출된 얼굴 영역으로부터 특정 색을 취득한다.
제어부 54는, 취득한 특정 색에 기초해, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
이에 의해, 이미지에 있어서의 특정한 색의 부분을 검출할 때에, 피사체의 차이에 따른 영향을 억제할 수 있다.
또, 촬영 장치 1은, 이미지 취득부 51과, 화이트 밸런스 조정부 53과, 영역 검출부 55를 포함한다.
이미지 취득부 51은, 이미지를 취득한다.
화이트 밸런스 조정부 53은, 이미지 취득부 51에 의해 취득된 이미지에 있어서, 기준이 되는 특정 색의 RGB값 각각의 비가 동일하게 되도록, 이미지에 있어서의 색의 밸런스를 변환한다.
영역 검출부 55는, 화이트 밸런스 조정부 53에 의해 색의 밸런스가 변환된 이미지에 기초해, 취득된 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출한다.
이에 의해, 기준이 되는 특정 색을 무채색(그레이)화하는 것에 의해, 처리 대상인 이미지에 있어서의 특정한 색의 부분을 검출할 수 있다.
따라서, 이미지 내에 포함되는 인물의 특정한 색의 부분을 검출하는 처리 부하를 경감할 수 있다.
또, 촬영 장치 1은, 이미지 취득부 51과, 화이트 밸런스 조정부 53과, 제어부 54와, 이미지 처리부 57을 포함한다.
이미지 취득부 51은, 제1의 색공간에서의 적어도 하나의 요소가 선형인 특성을 갖는 이미지를 취득한다.
화이트 밸런스 조정부 53은, 이미지 취득부 51에 의해 취득된 이미지의 화이트 밸런스를 조정한다.
제어부 54는, 기준이 되는 특정 색에 기초해, 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
화이트 밸런스 조정부 53은, 제어부 54에 의해 화이트 밸런스의 조정 내용이 제어된 이미지 내의 복수의 부분 각각을, 제2의 색공간에서의 하나의 요소로 변환한다.
이미지 처리부 57은, 화이트 밸런스 조정부 53에 의해 변환되는 정보를 사용해서, 취득된 이미지에 소정의 이미지 처리를 행한다.
이에 의해, 이미지에 있어서의 특정 색에 가까운 부분을 간단히 추출해서, 소정의 이미지 처리를 행할 수 있다.
따라서, 이미지 내에 포함되는 인물의 특정한 색의 부분에 이미지 처리를 행할 때의 처리 부하를 경감할 수 있다.
제어부 54는, 이미지 내의 특정 색의 부분에서, 제2의 색공간에서의 일 요소가 소정의 조건을 만족시키도록 화이트 밸런스 조정부 53에 의한 화이트 밸런스의 조정 내용을 제어한다.
이에 의해, 제1의 색공간에 있어서의 기준이 되는 특정 색을, 제2의 색공간에서의 일 요소에 관한 조건으로서 취급하는 것이 가능해진다.
따라서, 이미지 내에 포함되는 인물의 특정한 색의 부분에 이미지 처리를 행할 때의 처리 부하를 경감할 수 있다.
한편, 본 발명은, 상술한 실시예로 한정되는 것은 아니고, 본 발명의 목적을 달성할 수 있는 범위에서의 변형, 개량 등은 본 발명에 포함되는 것이다.
예를 들면, 상술한 실시예에 있어서, 제어부 54가 얼굴 영역 내의 각 화소의 R값, B값, G값을 각각 적분하는 경우, 얼굴 영역에 있어서의 입이나 눈의 부분을 제외하고, 피부색일 가능성이 높은 부분만의 화소를 대상으로 하는 것으로 해도 좋다.
또한, 상술한 실시예에 있어서, 메이크업 처리의 대상으로 할 특정한 색(피부색)을, 피사체의 이미지로부터 추출하는 것으로 하였다. 이에 대하여, 메이크업 처리의 대상으로 할 특정한 색(피부색)에 대해서는, 특정한 색을 나타내는 RGB의 값 등을 미리 설정해 두는 것도 가능하다. 이 경우, 피부색으로서 정의된 색에 대하여, 현상용 화이트 밸런스 처리가 행해진 후의 색의 R값, G값, B값의 비의 역수를 각 화소의 R값, G값, B값 각각에 곱하는 것으로, 피부색 부분을 무채색(그레이)화할 수 있다.
또, 상술한 실시예에 있어서는, 본 발명을 적용하는 이미지 처리의 예로서, 메이크업 처리에 대해서 설명했지만, 이것으로 한정되지 않는다. 예를 들면, 본발명은, 소프트 포커스 처리 등의 각종 이미지 처리에 적용될 수 있다.
또, 상술한 실시예에 있어서, RAW 데이터를 현상 처리해서 RGB 형식의 이미지를 생성하는 경우, 예를 들면, RAW 데이터에 대하여 3화소×3화소의 필터 처리를 행하고, 주목 화소 주변의 9화소로부터 RGB 형식의 1화소를 생성할 수 있다. 단, RAW 데이터에 대해서 적용할 필터의 사이즈는, 용도에 따라서 적당히 변경할 수 있다.
또, 상술한 실시예에서, 본 발명이 적용되는 촬영 장치 1은, 디지털 카메라를 예로서 설명했지만, 특별히 이것으로 한정되지는 않는다.
예를 들면, 본 발명은, 메이크업 처리 기능을 갖는 전자 기기 일반에 적용할 수 있다. 구체적으로는, 예를 들면, 본 발명은, 노트형의 퍼스널 컴퓨터, 프린터, 텔레비전 수상기, 비디오 카메라, 휴대형 네비게이션 장치, 휴대 전화기, 스마트폰, 포터블 게임기 등에 적용가능하다.
상술한 일련의 처리는, 하드웨어에 의해 실행시킬 수도 있고, 소프트웨어에 의해 실행시킬 수도 있다.
환언하면, 도 7의 기능적 구성은 예시에 지나지 않고, 특별히 한정되지 않는다. 즉, 상술한 일련의 처리를 전체로서 실행할 수 있는 기능이 촬영 장치 1에 구비되어 있으면 충분하고, 이 기능을 실현하기 위해서 어떤 기능 블록을 이용할지는 특별히 도 7의 예로 한정되지 않는다.
또, 1개의 기능 블록은, 하나의 하드웨어로 구성해도 좋고, 하나의 소프트웨어로 구성해도 좋고, 이들의 조합으로 구성해도 좋다.
본 실시예에 있어서의 기능적 구성은, 연산 처리를 실행하는 프로세서에 의해 실현되고, 본 실시예에 이용하는 것이 가능한 프로세서는, 싱글 프로세서, 멀티 프로세서 및 멀티코어 프로세서 등의 각종 처리 장치에 의해 구성될 수 있고, 그 외에, 이들 각종 처리 장치와, ASIC(Application Specific Integrated Circuit)이나 FPGA(Field-Programmable Gate Array) 등의 처리 회로가 조합된 것도 포함한다.
일련의 처리를 소프트웨어에 의해 실행시킬 경우에는, 그 소프트웨어를 구성하는 프로그램이, 컴퓨터 등에 네트워크나 기록 매체로부터 인스톨된다.
컴퓨터는, 전용의 하드웨어에 내장되어 있는 컴퓨터이어도 좋다. 또, 컴퓨터는, 각종 프로그램을 인스톨하는 것으로, 각종 기능을 실행하는 것이 가능한 컴퓨터, 예를 들면 범용 컴퓨터이어도 좋다.
이러한 프로그램을 포함하는 기록 매체는, 사용자에게 프로그램을 제공하기 위해서 장치 본체와는 별도로 배포되는 도 1의 리무버블 미디어 31에 의해 구성될 뿐만 아니라, 장치 본체에 미리 편입된 상태로 사용자에게 제공되는 기록 매체 등으로 구성될 수 있다. 리무버블 미디어 31은, 예를 들면, 자기 디스크(floppy disk를 포함한다), 광 디스크, 또는 광자기 디스크 등에 의해 구성된다. 광 디스크는, 예를 들면, CD-ROM(Compact Disk-Read Only Memory), DVD(Digital Versatile Disk), Blu-ray(등록상표) Disc(블루레이 디스크) 등에 의해 구성된다. 광자기 디스크는, MD(Mini-Disk) 등에 의해 구성된다. 또, 장치 본체에 미리 편입된 상태로 사용자에게 제공되는 기록 매체는, 예를 들면, 프로그램이 기록되어 있는 도 1의 ROM 12나, 도 1의 기억부 19에 포함되는 하드 디스크 등을 포함한다.
한편, 본 명세서에 있어서, 기록 매체에 기록되는 프로그램을 기술하는 단계는, 그 순서에 따라 시계열적으로 행해지는 처리는 물론, 반드시 시계열적으로 처리되지 않더라도 병렬적 혹은 개별적으로 실행되는 처리도 포함하는 것이다.
이상, 본 발명의 몇 가지 실시예에 대해서 설명했지만, 이 실시예들은 예시에 지나지 않고, 본 발명의 기술적 범위를 한정하는 것이 아니다. 본 발명은 다른 다양한 실시예를 취하는 것이 가능하고, 또한, 본 발명의 요지를 벗어나지 않는 범위에서, 생략이나 치환 등 다양한 변경을 행할 수 있다. 이들 실시예나 그 변형은, 본 명세서 등에 기재된 발명의 범위나 요지에 포함되는 동시에, 특허청구범위에 기재된 발명과 그 균등한 범위에 포함된다.

Claims (17)

  1. 이미지를 취득하는 이미지 취득 수단과,
    상기 이미지 취득 수단에 의해 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 수단과,
    기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는 제어 수단과,
    상기 제어 수단에 의해 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 수단
    을 포함하는 검출 장치.
  2. 제1항에 있어서,
    상기 제어 수단은, 상기 특정 색이 소정의 채도가 되도록, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하고,
    상기 검출 수단은, 상기 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지로부터, 이미지 내의 복수의 부분마다의 채도에 기초해서, 취득된 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는,
    검출 장치.
  3. 제1항 또는 제2항에 있어서,
    상기 제어 수단은, 상기 특정 색이 무채색이 되도록 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하고,
    상기 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지 내의 복수의 부분마다의 채도에 기초해서, 상기 특정 색에 대한 유사성인 특정 색 우도를 산출하는 산출 수단을 더 포함하며,
    상기 검출 수단은, 상기 산출 수단에 의해 산출된 특정 색 우도에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는,
    검출 장치.
  4. 제1항 또는 제2항에 있어서,
    상기 검출 수단에 의해 검출된 특정 색에 관한 소정의 조건을 만족시키는 부분에 소정의 이미지 처리를 행하는 이미지 처리 수단
    을 더 포함하는 검출 장치.
  5. 이미지를 취득하는 이미지 취득 수단과,
    상기 이미지 취득 수단에 의해 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 수단과,
    기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는 제어 수단과,
    상기 제어 수단에 의해 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하기 위한 이미지 내에 있어서의 위치와 강도를 설정하는 맵 정보를 생성하는 생성 수단
    을 포함하는 검출 장치.
  6. 제5항에 있어서,
    상기 제어 수단은, 상기 특정 색이 소정의 채도가 되도록 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하고,
    상기 생성 수단은, 상기 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지 내의 복수의 부분마다의 채도에 기초해서, 맵 정보를 생성하는, 검출 장치.
  7. 제5항 또는 제6항에 있어서,
    상기 제어 수단은, 상기 특정 색이 무채색이 되도록, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하고,
    상기 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지 내의 복수의 부분마다의 채도에 기초해서, 상기 특정 색에 대한 유사성인 특정 색 우도를 산출하는 산출 수단을 더 포함하며,
    상기 생성 수단은, 상기 산출 수단에 의해 산출되는 특정 색 우도에 기초해서, 맵 정보를 생성하는,
    검출 장치.
  8. 제5항 또는 제6항에 있어서,
    상기 생성 수단에 의해 생성된 맵 정보를 사용해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하는 이미지 처리 수단
    을 더 포함하는 검출 장치.
  9. 제1항 또는 제5항에 있어서,
    상기 이미지 취득 수단은 선형인 특성을 갖는 이미지를 취득하는, 검출 장치.
  10. 제1항 또는 제5항에 있어서,
    이미지에 포함되는 얼굴 영역을 검출하는 얼굴 검출 수단과,
    상기 얼굴 검출 수단에 의해 검출된 얼굴 영역에서 특정 색을 취득하는 특정 색 취득 수단을 더 포함하고,
    상기 제어 수단은, 상기 특정 색 취득 수단에 의해 취득된 상기 특정 색에 기초해서, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는,
    검출 장치.
  11. 이미지를 취득하는 이미지 취득 수단과,
    상기 이미지 취득 수단에 의해 취득된 이미지에 있어서, 기준이 되는 특정 색의 RGB값 각각의 비가 동일하게 되도록, 상기 이미지에 있어서의 색의 밸런스를 변환하는 변환 수단과,
    상기 변환 수단에 의해 색의 밸런스가 변환된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 상기 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 수단
    을 포함하는 검출 장치.
  12. 제1의 색공간에서의 적어도 하나의 요소가 선형인 특성을 갖는 이미지를 취득하는 이미지 취득 수단과,
    상기 이미지 취득 수단에 의해 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 수단과,
    기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는 제어 수단과,
    상기 제어 수단에 의해 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지 내의 복수의 부분 각각을, 제2의 색공간에서의 일 요소로 변환하는 변환 수단과,
    상기 변환 수단에 의해 변환되는 정보를 사용해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하는 이미지 처리 수단
    을 포함하는 이미지 처리 장치.
  13. 제12항에 있어서,
    상기 제어 수단은, 이미지 내의 특정 색의 부분이, 제2의 색공간에서의 일 요소가 소정의 조건을 만족시키도록 상기 화이트 밸런스 조정 수단에 의한 화이트 밸런스의 조정 내용을 제어하는, 이미지 처리 장치.
  14. 이미지를 취득하는 이미지 취득 단계와,
    상기 이미지 취득 단계에서 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 단계와,
    기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 단계에 있어서의 화이트 밸런스의 조정 내용을 제어하는 제어 단계와,
    상기 제어 단계에서 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지로부터 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 단계
    를 포함하는 검출 방법.
  15. 이미지를 취득하는 이미지 취득 단계와,
    상기 이미지 취득 단계에서 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 단계와,
    기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 단계에 있어서의 화이트 밸런스의 조정 내용을 제어하는 제어 단계와,
    상기 제어 단계에서 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지에 기초해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하기 위한 이미지 내에 있어서의 위치와 강도를 설정하는 맵 정보를 생성하는 생성 단계
    를 포함하는 검출 방법.
  16. 이미지를 취득하는 이미지 취득 단계와,
    상기 이미지 취득 단계에서 취득된 이미지에 있어서, 기준이 되는 특정 색의 RGB값 각각의 비가 동일하게 되도록, 상기 이미지에 있어서의 색의 밸런스를 변환하는 변환 단계와,
    상기 변환 단계에 의해 색의 밸런스가 변환된 이미지에 기초해서, 색의 밸런스가 변환되기 전의 상기 취득된 이미지로부터 상기 특정 색에 관한 소정의 조건을 만족시키는 부분을 검출하는 검출 단계
    를 포함하는 검출 방법.
  17. 제1의 색공간에서의 적어도 하나의 요소가 선형인 특성을 갖는 이미지를 취득하는 이미지 취득 단계와,
    상기 이미지 취득 단계에서 취득된 이미지의 화이트 밸런스를 조정하는 화이트 밸런스 조정 단계와,
    기준이 되는 특정 색에 기초해서, 상기 화이트 밸런스 조정 단계에 있어서의 화이트 밸런스의 조정 내용을 제어하는 제어 단계와,
    상기 제어 단계에서 제어된 화이트 밸런스의 조정 내용으로 화이트 밸런스가 조정된 이미지 내의 복수의 부분 각각을, 제2의 색공간에서의 일 요소로 변환하는 변환 단계와,
    상기 변환 단계에서 변환되는 정보를 사용해서, 상기 취득되고 화이트 밸런스가 조정되어 있지 않은 이미지에 소정의 이미지 처리를 행하는 이미지 보정 단계
    를 포함하는 이미지 처리 방법.
KR1020180069313A 2017-06-21 2018-06-15 검출 장치, 이미지 처리 장치, 검출 방법, 및 이미지 처리 방법 KR102562720B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2017-121412 2017-06-21
JP2017121412A JP6677222B2 (ja) 2017-06-21 2017-06-21 検出装置、画像処理装置、検出方法、及び画像処理方法

Publications (2)

Publication Number Publication Date
KR20180138530A true KR20180138530A (ko) 2018-12-31
KR102562720B1 KR102562720B1 (ko) 2023-08-01

Family

ID=64693795

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180069313A KR102562720B1 (ko) 2017-06-21 2018-06-15 검출 장치, 이미지 처리 장치, 검출 방법, 및 이미지 처리 방법

Country Status (4)

Country Link
US (2) US10757321B2 (ko)
JP (1) JP6677222B2 (ko)
KR (1) KR102562720B1 (ko)
CN (1) CN109104601B (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200036888A1 (en) * 2018-07-26 2020-01-30 Qualcomm Incorporated Calibration of Automatic White Balancing using Facial Images
CN110310268A (zh) * 2019-06-26 2019-10-08 深圳市同为数码科技股份有限公司 基于白平衡统计分区信息的肤色检测方法及系统
CN112686820A (zh) * 2020-12-29 2021-04-20 北京旷视科技有限公司 虚拟美妆方法、装置和电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110044132A (ko) 2009-10-22 2011-04-28 삼성전자주식회사 다중 셀 환경에서 피간섭 단말을 검출하고 간섭 제어를 수행하는 통신 시스템
KR20160115694A (ko) * 2015-03-27 2016-10-06 가시오게산키 가부시키가이샤 이미지 처리 장치, 이미지 처리 방법 및 기록 매체에 저장된 컴퓨터 프로그램

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0678320A (ja) * 1992-08-25 1994-03-18 Matsushita Electric Ind Co Ltd 色調整装置
JPWO2006059573A1 (ja) * 2004-12-02 2008-06-05 松下電器産業株式会社 色彩調整装置及び方法
JP5354842B2 (ja) * 2006-05-26 2013-11-27 キヤノン株式会社 画像処理方法および画像処理装置
JP2008042694A (ja) 2006-08-09 2008-02-21 Canon Inc 画像処理装置、撮像装置及び画像処理方法
JP5066398B2 (ja) * 2007-06-29 2012-11-07 富士フイルム株式会社 画像処理装置および方法並びにプログラム
JP4702635B2 (ja) * 2007-07-17 2011-06-15 富士フイルム株式会社 オートホワイトバランス補正値算出装置、方法およびプログラムならびに撮像装置
JP5113514B2 (ja) * 2007-12-27 2013-01-09 キヤノン株式会社 ホワイトバランス制御装置およびホワイトバランス制御方法
JP5167886B2 (ja) * 2008-03-18 2013-03-21 株式会社リコー 画像処理装置と表示方法とプログラム
JP2009302700A (ja) * 2008-06-11 2009-12-24 Sony Corp 撮像装置、画像処理装置およびプログラム
KR101516963B1 (ko) * 2008-12-11 2015-05-04 삼성전자주식회사 유효 영역을 이용한 자동 화이트 밸런스 조정 장치 및 방법
JP4983962B2 (ja) 2009-07-23 2012-07-25 カシオ計算機株式会社 画像処理装置、画像処理方法及び画像処理プログラム
JP5804856B2 (ja) * 2011-09-07 2015-11-04 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP6083974B2 (ja) * 2012-04-24 2017-02-22 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
US9449412B1 (en) * 2012-05-22 2016-09-20 Image Metrics Limited Adaptive, calibrated simulation of cosmetic products on consumer devices
JP5921983B2 (ja) * 2012-08-03 2016-05-24 クラリオン株式会社 車載撮像装置
US20160042224A1 (en) * 2013-04-03 2016-02-11 Nokia Technologies Oy An Apparatus and Associated Methods
KR101762081B1 (ko) * 2013-08-26 2017-07-26 인텔 코포레이션 이미지 프로세싱을 위한 피부 톤 보정을 이용한 자동 화이트 밸런싱
CN104468578B (zh) * 2014-12-10 2017-12-26 怀效宁 一种无线通讯的优先通讯系统和通讯方法
JP6369246B2 (ja) * 2014-09-08 2018-08-08 オムロン株式会社 似顔絵生成装置、似顔絵生成方法
EP3423990A1 (en) * 2016-03-02 2019-01-09 Holition Limited Locating and augmenting object features in images
CN106845455B (zh) * 2017-03-01 2021-03-12 中国科学院上海高等研究院 基于肤色检测的图像处理方法、系统及服务器
JP6677221B2 (ja) * 2017-06-06 2020-04-08 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110044132A (ko) 2009-10-22 2011-04-28 삼성전자주식회사 다중 셀 환경에서 피간섭 단말을 검출하고 간섭 제어를 수행하는 통신 시스템
KR20160115694A (ko) * 2015-03-27 2016-10-06 가시오게산키 가부시키가이샤 이미지 처리 장치, 이미지 처리 방법 및 기록 매체에 저장된 컴퓨터 프로그램

Also Published As

Publication number Publication date
US20180376056A1 (en) 2018-12-27
JP2019008408A (ja) 2019-01-17
US11272095B2 (en) 2022-03-08
CN109104601A (zh) 2018-12-28
CN109104601B (zh) 2021-02-12
US20200344410A1 (en) 2020-10-29
US10757321B2 (en) 2020-08-25
KR102562720B1 (ko) 2023-08-01
JP6677222B2 (ja) 2020-04-08

Similar Documents

Publication Publication Date Title
CN107730456B (zh) 图像处理方法以及图像处理装置
US10382671B2 (en) Image processing apparatus, image processing method, and recording medium
KR20120016476A (ko) 영상 처리 방법 및 영상 처리 장치
CN107871309B (zh) 检测方法、检测装置以及记录介质
US11272095B2 (en) Detection apparatus for detecting portion satisfying predetermined condition from image, image processing apparatus for applying predetermined image processing on image, detection method, and image processing method
JP4595569B2 (ja) 撮像装置
JP2018206144A (ja) 画像処理装置、画像処理方法及びプログラム
JP6904788B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2021128791A (ja) 画像処理装置、画像処理方法、およびプログラム
JP7277158B2 (ja) 設定装置及び方法、プログラム、記憶媒体
US10863103B2 (en) Setting apparatus, setting method, and storage medium
JP6702752B2 (ja) 画像処理装置、撮像装置、制御方法及びプログラム
US20150271382A1 (en) Apparatus, method, and medium
JP6795062B2 (ja) 検出装置、検出方法及びプログラム
JP2018093359A (ja) 画像処理装置、画像処理方法、およびプログラム
JP5146223B2 (ja) プログラム、カメラ、画像処理装置および画像の輪郭抽出方法
CN112911161A (zh) 图像处理装置、图像处理方法、摄像装置和存储介质
US11696044B2 (en) Image capturing apparatus, control method, and storage medium
JP2011147076A (ja) 画像処理装置、撮像装置およびプログラム
JP7318251B2 (ja) 画像処理装置、画像処理方法及びプログラム
US20200118304A1 (en) Image processing apparatus, image processing method, and recording medium
JP2022186166A (ja) 撮像装置、その制御方法、プログラムおよび記憶媒体
JP2024070628A (ja) 画像処理装置、画像処理方法、および撮像装置
JP2020154640A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
JP2012142980A (ja) 画像処理装置、画像処理装置の制御方法、プログラム及び記憶媒体

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant