KR101743520B1 - 색상 변환 장치 및 그 방법 - Google Patents

색상 변환 장치 및 그 방법 Download PDF

Info

Publication number
KR101743520B1
KR101743520B1 KR1020110032981A KR20110032981A KR101743520B1 KR 101743520 B1 KR101743520 B1 KR 101743520B1 KR 1020110032981 A KR1020110032981 A KR 1020110032981A KR 20110032981 A KR20110032981 A KR 20110032981A KR 101743520 B1 KR101743520 B1 KR 101743520B1
Authority
KR
South Korea
Prior art keywords
skin
preferred
color
skin color
input
Prior art date
Application number
KR1020110032981A
Other languages
English (en)
Other versions
KR20120115047A (ko
Inventor
김경만
김현철
박인호
신재민
조희근
하영호
김대철
경왕준
Original Assignee
에스프린팅솔루션 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스프린팅솔루션 주식회사 filed Critical 에스프린팅솔루션 주식회사
Priority to KR1020110032981A priority Critical patent/KR101743520B1/ko
Priority to EP11189134.7A priority patent/EP2509047B1/en
Priority to US13/297,703 priority patent/US8849025B2/en
Publication of KR20120115047A publication Critical patent/KR20120115047A/ko
Application granted granted Critical
Publication of KR101743520B1 publication Critical patent/KR101743520B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H04N1/628—Memory colours, e.g. skin or sky
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/643—Hue control means, e.g. flesh tone control

Abstract

색상 변환 방법이 개시된다. 본 방법에 따르면, 입력 이미지에 나타나는 피부 영역을 인식하여, 인종을 판단하는 단계, 인종 별로 기 설정된 복수 개의 선호 피부색 정보에 기초하여, 피부 영역에 적용할 선호 피부색을 선택하는 단계, 선택된 선호 피부색을 이용하여 피부 영역의 색상을 보정하는 단계를 포함한다. 이에 따라, 인종 별 피부색을 사용자가 만족할 수 있는 색으로 적절하게 변환할 수 있다.

Description

색상 변환 장치 및 그 방법{COLOR CONVERSION APPARATUS AND METHOD THEREOF}
본 발명은 색상 변환 장치 및 그 방법에 대한 것으로, 보다 상세하게는, 인종 별 선호 피부색으로 입력 이미지를 보정하는 색상 변환 장치 및 그 방법에 대한 것이다.
전자 기술의 발달에 힘입어, 각종 이미지를 스크린이나 기타 다양한 기록 매체 상에 표시하는 다양한 종류의 영상기기 또는 화상 형성 기기가 개발 및 보급되고 있다. 구체적으로는, 디지털 카메라, 스캐너, 프린터, 복합기, 복사기, 휴대폰, TV 등이 있을 수 있다.
이러한 기기들은 세계 각국에 판매되어, 황인, 흑인, 백인 등과 같은 다양한 인종들에 의해 사용될 수 있다. 하지만, 각 인종들마다, 타 인종 또는 동일 인종의 피부색에 대한 선호 색이 상이할 수 있다.
즉, 사람들은 색에 대하여, 머리 속에 고정관념을 가지고 있는 것이 일반적이다. 예를 들어, 바다를 파란색, 어둠을 검은색, 잔디를 초록색으로 말하는 것이 그러하다. 이와 같이 경험을 바탕으로 물체의 색을 머리속에서 재현하여 생각해내는 것을 통상적으로 기억색이라 칭한다. 또한, 기억 색을 색도 좌표 내에서 정의하여 관찰자의 기억색과 유사한 색을 재현하는 것이 바로 선호색 재현이다.
하지만, 현재의 기기들은 입력 이미지의 컬러를 그대로 출력하게 된다. 따라서, 사용자의 기억색과 이미지의 출력색이 상이함에 따라, 사용자는 자신이 본 이미지가 정확한 지에 대해 혼동을 느낄 수 있다.
이러한 혼동은 다수의 인종들이 하나의 이미지 상에 함께 나타나는 경우에 더욱 커질 수 있다.
따라서, 사용자가 편하게 인식할 수 있는 색상의 이미지를 제공할 수 있는 기술에 대한 필요성이 대두되었다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은, 인종 별 선호 피부색 정보를 이용하여 색상을 변환하여, 시각적 만족도를 향상시킬 수 있는 색상 변환 장치 및 그 방법을 제공함에 있다.
본 발명의 일 실시 예에 따르면, 색상 변환 방법은, 입력 이미지에 나타나는 피부 영역을 인식하여, 인종을 판단하는 단계, 인종 별로 기 설정된 복수 개의 선호 피부색 정보에 기초하여, 상기 피부 영역에 적용할 선호 피부색을 선택하는 단계, 상기 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 단계를 포함한다.
여기서, 상기 인종을 판단하는 단계는, 상기 입력 이미지를 복수 개의 블록으로 구분하고, 상기 복수 개의 블록 중에서 상기 피부 영역에 해당하는 블록을 검출하는 단계, 검출된 블록 내의 픽셀 특성 정보와 상기 복수 개의 선호 피부색 정보를 이용하여, 상기 블록에 나타나는 피부 영역의 인종을 판단하는 인종 판단 단계를 포함할 수 있다.
그리고, 상기 픽셀 특성 정보는 블록별 평균 밝기에 따른 평균 색도가 될 수있다. 여기서, 상기 인종 판단 단계는, 상기 평균 색도와 상기 복수 개의 선호 피부색 정보의 색도 사이의 유클리드 거리를 계산하는 단계, 상기 복수 개의 선호 피부색 정보 중에서, 상기 평균 색도와의 유클리드 거리 계산 결과가 최소가 되는 선호 피부색 정보를 확인하여, 상기 피부 영역이 상기 확인된 선호 피부색 정보에 대응되는 인종인 것으로 판단하는 단계를 포함할 수 있다.
한편, 상기 선호 피부색을 선택하는 단계는, 상기 판단된 인종이 흑인이면, 흑인에 대해 기 설정된 4개의 선호 피부색과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택하고, 상기 판단된 인종이 흑인이 아니면, 황인에 대해 기 설정된 4개의 선호 피부색 및 백인에 대해 기 설정된 4개의 선호 피부색들과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택할 수 있다.
그리고, 상기 보정하는 단계는, 상기 선택된 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 따라 비선형적인 가중치를 계산하는 단계, 상기 가중치를 상기 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 승산한 후, 승산 결과값을 상기 피부 영역의 피부색에 가산하여 보정된 출력색을 연산하는 단계, 연산된 출력색으로 출력하는 단계를 포함할 수 있다.
한편, 상기 출력색을 연산하는 단계는, 아래 수학식을 이용하여 Cb 및 Cr에 대하여 각각 출력색을 연산할 수 있다.
Cboutput = Cbinput + R1(Cbpreferred - Cbinput)
Croutput = Crinput + R2(Crpreferred - Crinput)
R1 = │(Cbpreferred - Cbinput)/dCbmax│2
R2 = │(Crpreferred - Crinput)/dCrmax│2
여기서, Cboutput, Croutput은 각각 Cb 및 Cr에 대해 보정된 출력색, Cbpreferred 및 Crpreferred 는 각각 Cb 및 Cr에 대해 선택된 선호 피부색, R1 및 R2는 각각 Cb 및 Cr에 대한 가중치, dCbmax 및 dCrmax는 각각 Cb 및 Cr의 최대값 및 최소값 차이, Cbinput 및 Crinput는 각각 상기 피부 영역의 Cb 및 Cr 값이다.
한편, 본 발명의 일 실시 예에 따른 색상 변환 장치는, 인종 별로 기 설정된 복수 개의 선호 피부색 정보가 저장된 저장부, 이미지를 입력받는 입력부, 상기 입력부를 통해 입력된 입력 이미지에 나타나는 피부 영역을 인식하여 인종을 판단하고, 상기 저장부에 저장된 상기 복수 개의 선호 피부색 정보에 기초하여, 상기 피부 영역에 적용할 선호 피부색을 선택하는 제어부, 상기 제어부에 의해 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 보정부를 포함한다.
여기서, 상기 제어부는, 상기 입력 이미지를 복수 개의 블록으로 구분하고, 상기 복수 개의 블록 중에서 상기 피부 영역에 해당하는 블록을 검출하고, 검출된 블록 내의 픽셀 특성 정보와 상기 복수 개의 선호 피부색 정보를 이용하여, 상기 블록에 나타나는 피부 영역의 인종을 판단할 수 있다.
또한, 상기 픽셀 특성 정보는 블록별 평균 밝기에 따른 평균 색도가 될 수 있다. 여기서, 상기 제어부는, 상기 평균 색도와 상기 복수 개의 선호 피부색 정보의 색도 사이의 유클리드 거리를 계산하고, 상기 복수 개의 선호 피부색 정보 중에서, 상기 평균 색도와의 유클리드 거리 계산 결과가 최소가 되는 선호 피부색 정보를 확인하여, 상기 피부 영역이 상기 확인된 선호 피부색 정보에 대응되는 인종인 것으로 판단할 수 있다.
한편, 상기 제어부는, 상기 판단된 인종이 흑인이면, 흑인에 대해 기 설정된 4개의 선호 피부색과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택하고, 상기 판단된 인종이 흑인이 아니면, 황인에 대해 기 설정된 4개의 선호 피부색 및 백인에 대해 기 설정된 4개의 선호 피부색들과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택할 수 있다.
또한, 상기 보정부는, 상기 선택된 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 따라 비선형적인 가중치를 계산하고, 상기 가중치를 상기 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 승산한 후, 승산 결과값을 상기 피부 영역의 피부색에 가산하여 보정된 출력색을 연산하여, 연산된 출력색으로 상기 입력 이미지를 출력할 수 있다.
그리고, 상기 보정부는, 아래 수학식을 이용하여 Cb 및 Cr에 대하여 각각 출력색을 연산할 수 있다.
Cboutput = Cbinput + R1(Cbpreferred - Cbinput)
Croutput = Crinput + R2(Crpreferred - Crinput)
R1 = │(Cbpreferred - Cbinput)/dCbmax│2
R2 = │(Crpreferred - Crinput)/dCrmax│2
여기서, Cboutput, Croutput은 각각 Cb 및 Cr에 대해 보정된 출력색, Cbpreferred 및 Crpreferred 는 각각 Cb 및 Cr에 대해 선택된 선호 피부색, R1 및 R2는 각각 Cb 및 Cr에 대한 가중치, dCbmax 및 dCrmax는 각각 Cb 및 Cr의 최대값 및 최소값 차이, Cbinput 및 Crinput는 각각 상기 피부 영역의 Cb 및 Cr 값이다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 인종별로 선호 피부색을 재현할 수 있게 되므로, 사용자 만족도가 향상될 수 있다.
도 1은 본 발명의 일 실시 예에 따른 색상 변환 장치의 구성을 나타내는 블럭도,
도 2는 선호 피부색 선정을 위한 실험에 사용되는 얼굴 영상,
도 3은 인종별 선호 피부색 선정 실험의 결과,
도 4는 입력 이미지 및 그 입력 이미지로부터 검출된 피부 영역을 나타내는 이미지,
도 5는 흑인에 대한 선호 피부색 선정 과정을 설명하기 위한 도면,
도 6은 황인 및 백인에 대한 선호 피부색 선정 과정을 설명하기 위한 도면,
도 7은 선택된 선호 피부색을 이용하여 피부색을 보정하는 과정을 설명하기 위한 도면,
도 8은 본 발명의 일 실시 예에 따른 색상 변환 방법을 설명하기 위한 흐름도,
도 9는 입력 이미지에 포함된 인물의 인종을 판단하는 방법을 설명하기 위한 흐름도, 그리고,
도 10은 인종 별로 선호 피부색을 선정하는 방법을 설명하기 위한 흐름도이다.
이하에서, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.
도 1은 본 발명의 일 실시 예에 따른 색상 변환 장치의 구성을 나타내는 블럭도이다. 도 1에 따르면, 색상 변환 장치는, 입력부(110), 제어부(120), 저장부(130), 보정부(140)를 포함한다. 본 색상 변환 장치는, 디지털 카메라, 프린터, 복사기, 복합기, 스캐너, 팩시밀리, 휴대폰 기타 디스플레이 장치 등과 같이 다양한 형태로 구현될 수 있다.
입력부(110)는 이미지를 입력받는 구성을 의미한다. 입력부(110)는 실시 예에 따라 다양하게 구현될 수 있다. 구체적으로, 입력부(110)는 외부 촬상 소자로부터 촬상된 이미지를 직접 수신하거나, 외부의 호스트 장치로부터 이미지를 전송받을 수도 있다. 또는, 색상 변환 장치가 디지털 카메라와 같은 촬영 장치로 구현된 경우, 색상 변환 장치 내에 구비된 촬상부로부터 이미지를 입력받을 수도 있다. 또는 입력부(110)는 저장부(130)에 기 저장된 이미지를 독출하는 구성이 될 수도 있다.
저장부(130)는 인종 별로 기 설정된 복수 개의 선호 피부색 정보 등을 저장할 수 있다. 즉, 흑인이나, 백인, 황인에 대한 사용자들의 실험을 통해서 적어도 하나 이상의 선호 피부색이 도출된 경우, 그 선호 피부색의 색도나 밝기 등과 같은 정보를 저장부(130)에 저장하여 둘 수 있다.
여기서, 실험이란, 인종 별 사용자에 대해서 흑인, 황인, 백인의 피부색에 대해 선호하는 색을 판별하는 실험이 될 수 있다. 즉, 흑인 사용자에 대해서, 색도만이 변경된 여러 개의 흑인 이미지를 보여주고 그 중 가장 선호하는 흑인 이미지를 선택하게 하고, 또한, 색도만이 변경된 여러 개의 황인 이미지를 보여주고 그 중 가장 선호하는 황인 이미지를 선택하게 하며, 또한, 색도만이 변경된 여러 개의 백인 이미지를 보여주고 그 중 가장 선호하는 백인 이미지를 선택하게 하는 실험을 수행할 수 있다. 다수의 흑인 사용자에 대한 실험 결과를 종합하면, 각 인종에 대한 선호 피부색을 확인할 수 있다. 이러한 실험은 다른 인종의 사용자에 대해서도 수행될 수 있다. 이와 같이, 각 인종 별 사용자들에 대해서 타 인종 및 동일 인종의 선호 피부색을 선택하도록 하는 실험을 수행하여, 그 실험 결과에 따라 복수 개의 선호 피부색을 결정하여 저장부(130)에 저장하여 둘 수 있다.
즉, 선호색 재현을 위해서는 우선 사람들이 선호하는 색을 결정하여야 한다. 일반적으로 사람들이 선호하는 색은 그 사람이 생활하는 환경과 문화에 따라 달라진다. 따라서, 인종 별로 선호하는 피부색 또한 다르다. 이에 따라, 실험을 통해 단일 인종에 의한 인종별 선호색을 결정하여, 각 인종에 의한 인종 별 선호색을 결정할 수 있다.
선호 피부색 선정을 위한 실험은 다양한 방식으로 이루어질 수 있다.
일 예로, 먼저 황인종을 대상으로 황인종, 흑인종, 백인종에 대한 밝기별 선호색을 결정할 수 있다. 실험 대상자인 황인종은 연령이나 성별을 고려하여 특정 수의 인원으로 선정할 수도 있고, 임의로 랜덤하게 선정할 수도 있다. 이에 따라, 선정된 복수의 황인종 관찰자들에 대하여 색도를 달리하는 복수 개의 동일 영상을 보여주면서 그 중 선호 색을 주관적으로 선택하도록 하는 실험을 진행할 수 있다. 실험 결과에 따라 가장 많이 선택된 특정 개수의 선호색들을 피부 선호색으로 정할 수 있다.
구체적인 예를 들면, 20대 초반의 남자 62명과 여자 32명의 총 94명의 관찰자에 대하여 암실에서 D65광원하에서 5분간의 빛에 대한 순응을 거친 다음 밝기에 따른 180개의 프린트된 얼굴 영상을 관찰하게 하였다.
도 2는 선호 피부색 선정을 위한 실험에 사용되는 얼굴 영상의 예를 나타내는 도면이다. 도 2에 도시된 바와 같이, 각 얼굴 영상은 모두 동일하다. 도 2에서는 도시의 편의를 위하여 각 얼굴 영상이 모두 동일하게 표시되었으나, 실제 실험에서는 각 얼굴 영상의 색상이 조금씩 다르게 표시된다. 도 2에서는 밝기 0.7에 대한 얼굴 영상들을 나타낸다.
이 실험에서, 관찰자는 제시된 얼굴 영상들 중에서 선호하는 피부색을 우선 순위로 선택할 수 있다. 선택된 얼굴 영상들은 등급에 따라 5점부터 1점까지 점수가 부여된다.
도 3은 이러한 실험에 따라 얻어진 선호도 점수를 나타낸다.
도 3의 a)는 황인에 대한 선호 피부색, b)는 백인에 대한 선호 피부색, c)는 흑인에 대한 선호 피부색을 나타낸다. 도 3에 따르면, 사람마다 선호색이 다르지만, 대부분 상위 4개 정도의 영상에 대한 평가가 전체의 30% 이상을 차지하는 것을 알 수 있다. 그러므로, 가장 선호하는 하나의 색으로 선호색 재현을 하는 것이 아니라 상위의 복수 개의 선호색 중에서 선택적으로 선호색을 재현하게 된다. 선호색의 개수는 임의로 정해질 수 있다. 도 3에서는 4개의 선호색이 선정될 수 있음을 나타낸다. 일 예로, 도 3의 a)에 따르면 황인에 대해서는 161, 163, 207, 221번 얼굴 영상이 가장 많은 선호를 받았고, b)에 따르면 백인에 대해서는 241, 281, 261, 341번 얼굴 영상이 가장 많은 선호를 받았으며, c)에 따르면 흑인에 대해서는 41, 61, 80, 101번 얼굴 영상이 가장 많은 선호를 받았음을 알 수 있다. 이에 따라, 선택된 얼굴 영상의 피부색은 분광 광도계(spectrophotometer)를 사용하여 측정한 후, 이를 YCbCr 색공간으로 변환하여, 선호 피부색 정보로 저장부(130)에 저장한다. 즉, 실험을 통해, 인종 별로 각 4개씩의 선호 피부색 정보가 마련될 수 있다.
한편, 선호 피부색 정보를 마련하는 다른 방법은 각 인종이 거주하는 나라에서 발행되는 온라인 잡지 영상에 분포하는 피부색의 빈도 수를 확인하는 방식이 있을 수 있다. 즉, 잡지 영상의 특성상 그 나라 사람들이 선호하는 피부색을 나타내는 것으로 가정할 수 있다. 이에 따라, 인종별로 복수 개(예를 들어, 100개 이상)의 잡지 영상으로부터 피부색 영역만을 검출한 후, 그 피부색 영역의 색도 값의 빈도수를 비교할 수 있다. 그 결과 밝기 0.7에서의 각 인종별 선호 피부색은 표 1과 같이 얻어진다.
　
　		 백인의 선호 피부색 흑인의 선호 피부색 황인의 선호 피부색
Cb Cr Counting Cb Cr Counting Cb Cr Counting
1 108 152 61384 103 150 15425 103 153 44020
2 112 153 40362 117 142 5208 112 148 22946
3 103 155 25090 121 137 4929 95 155 13758
4 111 147 8926 80 165 2738 90 158 11069
한편, 상술한 관찰자 실험을 통해 획득한 선호 피부색 정보와 잡지 영상을 이용한 선호 피부색 정보를 비교하면 다음 표와 같다.

잡지영상에서의 황인의 선호 피부색 관찰자에 의한 황인의 선호 피부색
Cb Cr Cb Cr
1 103 153 103.7213 154.2395
2 112 148 114.9513 147.6543
3 95 155 92.19112 159.1286
4 90 158 92.73448 162.1986
표 2에서는 설명의 편의를 위하여 황인의 선호 피부색만을 비교하였다. 그 결과, 두 방식에서 얻은 선호 피부색은 거의 유사한 결과임을 알 수 있다. 이와 같이, 다양한 방식으로 얻어진 선호 피부색 정보가 저장부(130)에 저장될 수 있다.
한편, 제어부(120)는 입력부(110)를 통해 입력된 입력 이미지에 나타나는 인물이미지, 즉, 인물의 피부 영역을 인식하여 인종을 판단한다. 그리고 나서, 저장부(130)에 저장된 복수 개의 선호 피부색 정보에 기초하여, 피부 영역에 적용할 선호 피부색을 선택한다.
보정부(140)는 제어부(120)에 의해 선택된 선호 피부색을 이용하여 피부 영역의 색상을 보정할 수 있다.
일반적으로 인물 영상은 하나의 인종만을 포함하는 경우가 많지만 여러 인종이 함께 있는 경우도 있을 수 있다. 이에 따라, 제어부(120)는 전체 이미지 상에서 피부색이 검출된 부분, 즉, 피부 영역에 대해서, 그 영역 별로 인종을 선택할 수 있다. 그리고 나서, 제어부(120)는 인종이 선택된 영역에 대하여 입력 피부색에 따른 인종별 선호 피부색을 선택하고, 보정부(140)를 제어하여 선호 피부색으로 비율적으로 조정하여 피부색을 보정한다.
구체적으로, 제어부(120)는 입력 이미지를 복수 개의 블록으로 구분하고, 복수 개의 블록 중에서 피부 영역에 해당하는 블록을 검출한다. 그리고 나서, 검출된 블록 내의 픽셀 특성 정보와 저장부(130)에 저장되어 있는 복수 개의 선호 피부색 정보를 이용하여, 블록에 나타나는 피부 영역의 인종을 판단한다.
픽셀 특성 정보는 블록별 평균 밝기에 따른 평균 색도가 될 수 있다. 즉, 해당 블록 내의 모든 픽셀들의 평균 색도 또는 대표 픽셀의 색도가 픽셀 특성 정보가 될 수 있다.
제어부(120)는 평균 색도와 복수 개의 선호 피부색 정보의 색도 사이의 유클리드 거리를 계산하고, 복수 개의 선호 피부색 정보 중에서, 평균 색도와의 유클리드 거리 계산 결과가 최소가 되는 선호 피부색 정보를 확인한다. 이에 따라, 최소가 되는 선호 피부색 정보에 해당하는 인종이 해당 피부 영역의 인종인 것으로 판단할 수 있다.
여기서, 제어부(120)는 판단된 인종에 따라 기 설정된 선호 피부색과 평균 색도 간의 유클리드 거리를 비교하여, 최소가 되는 선호 피부색을 최종 선호 피부색으로 선택할 수 있다.
보정부(140)는 선택된 최종 선호 피부색을 이용하여 출력 이미지의 색상을 보정할 수 있다. 구체적으로, 보정부(140)는, 선택된 선호 피부색과 피부 영역의 피부색 간의 차이에 따라 비선형적인 가중치를 계산한다. 그리고 나서, 계산된 가중치를 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 승산한 후, 승산 결과값을 상기 피부 영역의 피부색에 가산하여 보정된 출력색을 연산하여, 연산된 출력색으로 입력 이미지를 출력함으로써 보정을 수행하게 된다.
제어부(120)의 판단 및 연산 과정을 구체적으로 다시 한번 설명하면 다음과 같다.
사진에 여러 인종이 함께 있는 경우를 고려하기 위해, 제어부(120)는 영상에서 검출된 피부색 영역들 각각에 대하여 인종을 선택한다. 이때 라벨링 알고리즘을 이용하여 검출된 피부색 영역을 블록별로 구분하고 각 블록의 평균 밝기와 평균 색도를 구한다. 그리고 나서, 제어부(120)는 각 블록 별로 구해진 평균 색도 값과 각 인종의 피부색의 평균 값 사이의 유클리드 거리를 계산한다. 이에 따라 계산된 유클리드 거리가 최소가 되는 인종을 선택한다.
유클리드 거리를 계산하는 수학식은 다음과 같다.
Figure 112011026003973-pat00001
wrace=1-P(race)
dx=min[drace]
x=selected race
수학식 1에서 race는 흑인종(negroid), 백인종(caucasian), 황인종(mongoloid)을 포함하고, Cbavr _ block _n, Cravr _ block _n 은 검출된 피부색 영역의 각 블록 별로 구해진 평균 색도 값이다. 첨자 n은 검출된 피부색 영역의 총 블록 수이다. 그리고, wrace는 각 인종별 피부색의 밝기 별 분포를 이용한 가중치이다.
도 4는 입력 이미지로부터 피부 영역을 검출한 이미지를 나타낸다. 도 4의 a)는 원래의 입력 이미지이고, 도 4의 b)는 얼굴이나 손 등과 같이 피부가 노출된 영역만을 검출해 낸 영상이다. 이러한 피부 영역 검출은 다양한 실시 예에 따라 이루어질 수 있다.
구체적으로는, 전체 이미지를 각각 nxm 픽셀로 구성된 복수 개의 블록으로 구분한 뒤, 각 블록내의 평균 픽셀값을 검출한다. 이에 따라, 평균 픽셀 값이 소정 범위 내에 존재하면서 서로 연속적으로 배치되는 블록들을 동일 객체에 대한 블록으로 인식한다. 이에 따라, 피부색에 해당하는 픽셀값을 가지는 블록들의 집합을 피부 영역으로 인식할 수 있다. 여기서의 피부색은 각 인종별, 밝기 별로 상이하다. 표 3은 각 인종 별 피부색의 밝기 별 분포를 나타낸다.
Mongoloid Caucasian Negroid
밝기 pixels 분포 밝기 pixels 분포 밝기 pixels 분포
0 151 0% 0 2 0% 0 71304 2%
0.1 5223 0% 0.1 131 0% 0.1 449598 15%
0.2 69243 2% 0.2 7868 0% 0.2 661414 22%
0.3 266287 7% 0.3 113503 3% 0.3 577579 19%
0.4 507126 14% 0.4 335451 9% 0.4 483881 16%
0.5 689717 19% 0.5 572819 16% 0.5 332433 11%
0.6 734355 20% 0.6 687160 19% 0.6 196735 6%
0.7 652555 18% 0.7 722907 20% 0.7 108303 4%
0.8 381624 11% 0.8 613556 17% 0.8 69609 2%
0.9 201873 6% 0.9 388748 11% 0.9 48243 2%
1 83586 2% 1 147399 4% 1 52608 2%
검출된 피부색의 블록 별 평균 색도와 밝기 별 인종의 피부색 분포를 이용한 인종 선택의 성능을 검증하기 위하여 각 인종 별 50장의 영상을 사용하여 총 블록에 대한 검출 율과 오검출율을 계산한 결과는 표 4에 나타난다.
Mongoloid Caucasian Negroid
Total blocks TRUE FALSE 성공률 Total blocks TRUE FALSE 성공률 Total blocks TRUE FALSE 성공률
71 44 27 62% 76 59 17% 78% 73 42 31 57%
그 결과, 흑인에 대한 인종 선택 성공율은 상당히 우수하지만, 평균 색도와 밝기 별 분포가 유사한 황인과 백인에 대해서는 두 인종이 서로 섞여 검출되었다. 따라서, 흑인으로 선택된 영역에 대해서는 흑인의 밝기 별 4개의 선호색에 대한 선택적인 피부색 재현을 수행하고, 황인과 백인으로 선택된 영역에 대해서는 두 인종의 선호색을 모두 고려하여 선택적으로 선호색 재현을 수행할 수 있다. 즉, 인종 판별 결과 흑인이 아닌 경우에는 황인과 백인에 대해 각각 설정된 4개씩의 선호색을 모두 고려하여, 총 8개의 선호 색 중에서 최적의 선호색을 선택할 수 있다.
상술한 선호 피부색 실험에서 볼 수 있듯이 사람들이 선호하는 피부색이 하나로 표현되는 것이 아니라 선호 피부색 등급에서와 같이 거의 상위 4개의 점에 대해 고른 선호도를 나타내는 것을 볼 수 있다. 따라서 입력 피부색에 대하여 피부색 영역의 인종을 선택하고 나면, 그 선택된 인종에 해당하는 상위 4개의 선호 피부색을 선택적으로 적용하여, 최적 선호 피부색을 선택할 수 있다.
이 경우, 상술한 바와 같이, 흑인인 경우에는 흑인에 대해 기 설정된 4개의 선호 피부색 중에서 최적 선호 피부색을 결정할 수 있다.
도 5는 흑인에 대한 최적 선호 피부색을 선택하는 과정을 설명하기 위한 도면이다. 도 5에 따르면, 검출된 피부색 영역이 흑인에 해당한다고 판정된 경우, 흑인에 대해 기 저장된 4개의 선호 피부색(P1, P2, P3, P4)와 입력 피부색 간의 유클리드 거리를 비교한다. 구체적으로는 아래의 수학식 2를 이용하여 각 선호 피부색과 입력 이미지의 평균 색도 간의 유클리드 거리를 계산할 수 있다.
Figure 112011026003973-pat00002
Figure 112011026003973-pat00003
ds=min(dx)
Ps=preferred skin color
수학식 2에서 wx는 선호 피부색 Pxdp 에 대한 가중치이다. 즉, 선호 피부색 Px가 선호도 실험을 통해 획득한 점수에 대한 비율을 Px에 대한 가중치로 사용한다. 그리고, Cbinput - block - avr과 Crinput - block - avr 은 입력 픽셀이 속한 영역의 평균 색도를 나타내고, CbPx와 CrPx는 각 선호 피부색의 색도를 나타낸다. 그리고, dx는 각 선호 피부색과 평균 색도 간의 유클리드 거리를 나타내고, ds는 검출된 피부색 영역의 평균 색도 값과 4개의 선호 피부색 간의 유클리드 거리 중 최소 유클리드 거리를 나타낸다. Ps는 최소 유클리드 거리를 가지게 하는 입력 픽셀이 속한 영역에 대해 선택된 선호 피부색이다.
도 6은 흑인이 아닌 경우에 최적 선호 피부색을 선택하는 과정을 설명하기 위한 도면이다. 도 6에 따르면, 검출된 피부색 영역이 흑인이 아니라고 판정된 경우, 황인에 대해 기 저장된 4개의 선호 피부색(P1, P2, P3, P4)과 백인에 대해 기 저장된 4개의 선호 피부색(P5, P6, P7, P8)과 입력 피부색 간의 유클리드 거리를 비교한다. 구체적으로는 아래의 수학식 3을 이용하여 각 선호 피부색과 입력 이미지의 평균 색도 간의 유클리드 거리를 계산할 수 있다. 흑인이 아닐 경우에 적용되는 아래의 수학식 3은 선호 피부색의 개수가 8개라는 점을 제외하면 수학식 2와 동일하다.
Figure 112011026003973-pat00004
Figure 112011026003973-pat00005
ds=min(dx)
Ps=preferred skin color
제어부(120)는 상술한 바와 같이 피부 영역에 적용할 선호 피부색을 최종적으로 선택할 수 있다. 이에 따라, 제어부(120)는 선택한 선호 피부색을 이용하여 보정을 수행하도록 보정부(140)를 제어한다.
보정부(140)는 각 영역별로 열화된 피부색을 선호 피부색으로 보정하기 위하여 입력 피부색과 선호피부색과의 차이에 고려할 수 있다. 즉, 그 차이에 비례하여 보정율을 조정하여, 피부색을 부드럽게 재현할 수 있다. 즉, 입력 피부색과 선호 피부색간의 차이가 적으면 적은 비율로 선호색 방향으로 색을 보정하고, 입력 피부색과 선호 피부색의 차이가 크면 높은 비율로 선호색 방향으로 색을 보정한다.
도 7은 보정 과정을 설명하기 위한 도면이다. 도 7에 따르면, 복수 개의 선호 피부색 중에서 최적의 선호 피부색(예를 들어, P4)이 결정되면, 입력 피부색의 색성분인 Cb, Cr을 선택된 선호 피부색 방향으로 조정한다. 조정 정도는 상술한 바와 같이 입력 피부색과 선호 피부색 간의 차이에 비례하여 결정한다.
보정부(140)는 구체적으로 아래의 수학식을 이용하여 출력색을 연산한 후, 연산된 출력색으로 출력함으로써, 보정을 수행할 수 있다.
Figure 112011026003973-pat00006
Figure 112011026003973-pat00007
R1 = │(Cbpreferred - Cbinput)/dCbmax│2
R2 = │(Crpreferred - Crinput)/dCrmax│2
여기서, Cboutput, Croutput은 각각 Cb 및 Cr에 대해 보정된 출력색, Cbpreferred 및 Crpreferred 는 각각 Cb 및 Cr에 대해 선택된 선호 피부색, R1 및 R2는 각각 Cb 및 Cr에 대한 가중치, dCbmax 및 dCrmax는 각각 Cb 및 Cr의 최대값 및 최소값 차이, Cbinput 및 Crinput는 각각 상기 피부 영역의 Cb 및 Cr 값을 나타낸다.
이상과 같이, 복수 개의 선호 피부색을 이용하여 최적 선호 피부색을 결정한 후, 그 선호 피부색을 이용하여 색상을 변환하게 됨으로써, 사용자의 만족도를 향상시킬 수 있게 된다. 일반적으로 선호색 재현 알고리즘들은 기준이 되는 실제 장면의 색 정보를 획득 할 수 없기 때문에 사람의 시각에 의해 주관적으로 평가될 수 밖에 없다. 본 발명에서 제안한 선호색 재현 방법에 대한 평가를 위하여 주관적인 평가방법인 Z-score를 사용하여 평가하였다. 실험은 20대 초반의 45명(남자 35명, 여자 10명)의 관찰자가 참여 하였고, 프린트된 입력 영상과 기존의 변환 방법, 그리고 본 발명에서 제안한 방법의 프린트된 영상 중 서로 비교하여 더 좋다고 생각되는 영상을 선택하는 방식으로 진행하였다.
그 결과, 특히 여러 인종이 동시에 존재하는 영상에 대하여, 본 발명에서 제안한 방법으로 변환된 이미지를 기존 방법으로 변환된 이미지보다 더 많은 사람들이 선호하는 결과를 가져왔다.
이와 같이 검출된 피부색 영역에 대한 인종 선택적인 색상 변환 방법 또는 색 재현 방법은 영상의 픽셀 단위로 처리되어 각종 영상장치 즉, 디지털 카메라, 스캐너, 프린터, 복합기 휴대폰, 디스플레이 등 다양한 하드웨어 장치에 적용이 용이하다. 또한 색 재현 소프트웨어를 통해 저장된 디지털 영상에 바로 적용할 수 있으며, 영상의 얼굴 뿐만 아니라 검출된 모든 피부색에 적용 할 수 있어 시각적 효과가 크다.
도 8은 본 발명의 일 실시 예에 따른 색상 변환 방법을 나타내는 흐름도이다.
도 8에 따르면, 본 색상 변환 방법은 먼저, 입력 이미지에 나타나는 인물 이미지, 즉, 인물의 피부 영역을 인식하여 인종을 판단한다(S810). 이 후에, 판단된 인종에 대응되는 복수 개의 선호 피부색 정보를 이용하여 선호 피부색을 선택한다(S820). 그리고 나서, 선택된 선호 피부색을 이용하여 이미지의 색상을 보정한다(S830).
도 9는 인종 판단 방법을 구체적으로 설명하기 위한 흐름도이다. 도 9에 따르면, 입력 이미지를 복수 개의 블록으로 구분한 후(S910), 구분된 각 불륵의 픽셀 특성 정보를 이용하여 인물 이미지에 해당하는 블록을 검출할 수 있다(S920). 이에 따라, 검출된 블록의 픽셀 특성 정보와 선호 피부색 정보를 이용하여 해당 인물 이미지의 인종을 판단할 수 있다(S930).
도 10은 판단된 인종에 따른 최적 선호 피부색을 선택하는 방법을 설명하기 위한 흐름도이다. 도 10에 따르면, 판단된 인종이 흑인이면(S1010), 흑인에 대해 기 설정된 4개의 선호 피부색과 해당 블록의 평균 색도 간의 유클리드 거리를 비교한다(S1020). 반면, 판단된 인종이 흑인이 아니면(S1010), 황인 및 백인에 대해 기 설정된 총 8개의 선호 피부색과 해당 블록의 평균 색도 간의 유클리드 거리를 비교한다(S1030). 비교 결과, 유클리드 거리가 최소가 되는 선호 피부색을 선택한다(S1040).
이상과 같은 방법으로, 선호 피부색이 선택되면, 선호 피부색을 이용하여 색을 보정함으로써, 사용자가 가장 친숙하게 여기는 피부색으로 각 인종의 인물 이미지가 표현될 수 있게 된다. 본 색상 변환 방법에서는 상술한 색상 변환 장치와 동일한 수학식 및 데이터를 이용하여 색상 변환을 수행할 수 있음은 물론이다.
한편, 이상과 같은 색상 변환 방법은 프린터와 같은 화상형성장치에 적용될 수도 있다. 구체적으로는 화상형성장치에 적용된 비디오 프로세서 또는 메인 컨트롤러는 스캐닝된 이미지 또는 호스트 장치로부터 전송된 이미지 또는 내외장 저장 매체로부터 독출된 이미지에 대하여, 상술한 색상 변환 방법을 이용하여 피부색을 보정한 후 용지나 기타 기록 매체 상에 기록할 수 있다.
또한, 상술한 본 발명의 다양한 실시 예들에 따른 색상 변환 방법은, 다양한 유형의 기록 매체에 저장되어, 전자 장치에 구비된 CPU에 의해 실행될 수 있는 프로그램 코드에 의해 구현될 수도 있다.
구체적으로는, 상술한 색상 변환 방법을 수행하기 위한 코드는, RAM(Random Access Memory), 플레시메모리, ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electronically Erasable and Programmable ROM), 레지스터, 하드디스크, 리무버블 디스크, 메모리 카드, USB 메모리, CD-ROM 등과 같이, 단말기에서 판독 가능한 다양한 유형의 기록 매체에 저장되어 있을 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
110 : 입력부 120 : 제어부
130 : 저장부 140 : 보정부

Claims (14)

  1. 입력 이미지에 나타나는 피부 영역을 인식하여, 인종을 판단하는 단계;
    인종 별로 기 설정된 복수 개의 선호 피부색 정보에 기초하여, 상기 피부 영역에 적용할 선호 피부색을 선택하는 단계; 및
    상기 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 단계;를 포함하며,
    상기 보정하는 단계는,
    상기 선택된 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 따라 비선형적인 가중치를 계산하는 단계;
    상기 가중치를 상기 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 승산한 후, 승산 결과값을 상기 피부 영역의 피부색에 가산하여 보정된 출력색을 연산하는 단계; 및
    연산된 출력색으로 상기 입력 이미지를 출력하는 단계;를 포함하는 색상 변환 방법.
  2. 제1항에 있어서,
    상기 인종을 판단하는 단계는,
    상기 입력 이미지를 복수 개의 블록으로 구분하고, 상기 복수 개의 블록 중에서 상기 피부 영역에 해당하는 블록을 검출하는 단계; 및
    검출된 블록 내의 픽셀 특성 정보와 상기 복수 개의 선호 피부색 정보를 이용하여, 상기 블록에 나타나는 피부 영역의 인종을 판단하는 인종 판단 단계;를 포함하는 색상 변환 방법.
  3. 제2항에 있어서,
    상기 픽셀 특성 정보는 블록별 평균 밝기에 따른 평균 색도이며,
    상기 인종 판단 단계는,
    상기 평균 색도와 상기 복수 개의 선호 피부색 정보의 색도 사이의 유클리드 거리를 계산하는 단계; 및
    상기 복수 개의 선호 피부색 정보 중에서, 상기 평균 색도와의 유클리드 거리 계산 결과가 최소가 되는 선호 피부색 정보를 확인하여, 상기 피부 영역이 상기 확인된 선호 피부색 정보에 대응되는 인종인 것으로 판단하는 단계;를 포함하는 색상 변환 방법.
  4. 색상 변환 방법에 있어서,
    입력 이미지에 나타나는 피부 영역을 인식하여, 인종을 판단하는 단계;
    인종 별로 기 설정된 복수 개의 선호 피부색 정보에 기초하여, 상기 피부 영역에 적용할 선호 피부색을 선택하는 단계; 및
    상기 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 단계;를 포함하며,
    상기 인종을 판단하는 단계는,
    상기 입력 이미지를 복수 개의 블록으로 구분하고, 상기 복수 개의 블록 중에서 상기 피부 영역에 해당하는 블록을 검출하는 단계; 및
    검출된 블록 내의 픽셀 특성 정보와 상기 복수 개의 선호 피부색 정보를 이용하여, 상기 블록에 나타나는 피부 영역의 인종을 판단하는 인종 판단 단계;를 포함하고,
    상기 픽셀 특성 정보는 블록별 평균 밝기에 따른 평균 색도이며,
    상기 인종 판단 단계는,
    상기 평균 색도와 상기 복수 개의 선호 피부색 정보의 색도 사이의 유클리드 거리를 계산하는 단계;
    상기 복수 개의 선호 피부색 정보 중에서, 상기 평균 색도와의 유클리드 거리 계산 결과가 최소가 되는 선호 피부색 정보를 확인하여, 상기 피부 영역이 상기 확인된 선호 피부색 정보에 대응되는 인종인 것으로 판단하는 단계;를 포함하며,
    상기 선호 피부색을 선택하는 단계는,
    상기 판단된 인종이 흑인이면, 흑인에 대해 기 설정된 4개의 선호 피부색과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택하고, 상기 판단된 인종이 흑인이 아니면, 황인에 대해 기 설정된 4개의 선호 피부색 및 백인에 대해 기 설정된 4개의 선호 피부색들과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택하는 색상 변환 방법.
  5. 삭제
  6. 제1항에 있어서,
    상기 출력색을 연산하는 단계는, 아래 수학식을 이용하여 Cb 및 Cr에 대하여 각각 출력색을 연산하는 것인, 색상 변환 방법 :
    Cboutput = Cbinput + R1(Cbpreferred - Cbinput)
    Croutput = Crinput + R2(Crpreferred - Crinput)
    R1 = │(Cbpreferred - Cbinput)/dCbmax│2
    R2 = │(Crpreferred - Crinput)/dCrmax│2
    여기서, Cboutput, Croutput은 각각 Cb 및 Cr에 대해 보정된 출력색, Cbpreferred 및 Crpreferred 는 각각 Cb 및 Cr에 대해 선택된 선호 피부색, R1 및 R2는 각각 Cb 및 Cr에 대한 가중치, dCbmax 및 dCrmax는 각각 Cb 및 Cr의 최대값 및 최소값 차이, Cbinput 및 Crinput는 각각 상기 피부 영역의 Cb 및 Cr 값.
  7. 인종 별로 기 설정된 복수 개의 선호 피부색 정보가 저장된 저장부;
    이미지를 입력받는 입력부; 및
    상기 입력부를 통해 입력된 입력 이미지에 나타나는 피부 영역을 인식하여 인종을 판단하고, 상기 저장부에 저장된 상기 복수 개의 선호 피부색 정보에 기초하여, 상기 피부 영역에 적용할 선호 피부색을 선택하고, 상기 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 제어부;를 포함하며,
    상기 제어부는,
    상기 선택된 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 따라 비선형적인 가중치를 계산하고, 상기 가중치를 상기 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 승산한 후, 승산 결과값을 상기 피부 영역의 피부색에 가산하여 보정된 출력색을 연산하여, 연산된 출력색으로 상기 입력 이미지를 출력하는 색상 변환 장치.
  8. 제7항에 있어서,
    상기 제어부는,
    상기 입력 이미지를 복수 개의 블록으로 구분하고, 상기 복수 개의 블록 중에서 상기 피부 영역에 해당하는 블록을 검출하고, 검출된 블록 내의 픽셀 특성 정보와 상기 복수 개의 선호 피부색 정보를 이용하여, 상기 블록에 나타나는 피부 영역의 인종을 판단하는 색상 변환 장치.
  9. 제8항에 있어서,
    상기 픽셀 특성 정보는 블록별 평균 밝기에 따른 평균 색도이며,
    상기 제어부는,
    상기 평균 색도와 상기 복수 개의 선호 피부색 정보의 색도 사이의 유클리드 거리를 계산하고, 상기 복수 개의 선호 피부색 정보 중에서, 상기 평균 색도와의 유클리드 거리 계산 결과가 최소가 되는 선호 피부색 정보를 확인하여, 상기 피부 영역이 상기 확인된 선호 피부색 정보에 대응되는 인종인 것으로 판단하는 색상 변환 장치.
  10. 색상 변환 장치에 있어서,
    인종 별로 기 설정된 복수 개의 선호 피부색 정보가 저장된 저장부;
    이미지를 입력받는 입력부; 및
    상기 입력부를 통해 입력된 입력 이미지에 나타나는 피부 영역을 인식하여 인종을 판단하고, 상기 저장부에 저장된 상기 복수 개의 선호 피부색 정보에 기초하여, 상기 피부 영역에 적용할 선호 피부색을 선택하고, 상기 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 제어부;를 포함하며,
    상기 제어부는,
    상기 입력 이미지를 복수 개의 블록으로 구분하고, 상기 복수 개의 블록 중에서 상기 피부 영역에 해당하는 블록을 검출하고, 검출된 블록 내의 픽셀 특성 정보와 상기 복수 개의 선호 피부색 정보를 이용하여, 상기 블록에 나타나는 피부 영역의 인종을 판단하고,
    상기 픽셀 특성 정보는 블록별 평균 밝기에 따른 평균 색도이며,
    상기 제어부는,
    상기 평균 색도와 상기 복수 개의 선호 피부색 정보의 색도 사이의 유클리드 거리를 계산하고, 상기 복수 개의 선호 피부색 정보 중에서, 상기 평균 색도와의 유클리드 거리 계산 결과가 최소가 되는 선호 피부색 정보를 확인하여, 상기 피부 영역이 상기 확인된 선호 피부색 정보에 대응되는 인종인 것으로 판단하며,
    상기 제어부는,
    상기 판단된 인종이 흑인이면, 흑인에 대해 기 설정된 4개의 선호 피부색과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택하고, 상기 판단된 인종이 흑인이 아니면, 황인에 대해 기 설정된 4개의 선호 피부색 및 백인에 대해 기 설정된 4개의 선호 피부색들과 상기 평균 색도 간의 유클리드 거리를 비교하여, 상기 유클리드 거리가 최소가 되는 선호 피부색을 선택하는 색상 변환 장치.
  11. 삭제
  12. 제7항에 있어서,
    상기 제어부는,
    아래 수학식을 이용하여 Cb 및 Cr에 대하여 각각 출력색을 연산하는 색상 변환 장치 :
    Cboutput = Cbinput + R1(Cbpreferred - Cbinput)
    Croutput = Crinput + R2(Crpreferred - Crinput)
    R1 = │(Cbpreferred - Cbinput)/dCbmax│2
    R2 = │(Crpreferred - Crinput)/dCrmax│2
    여기서, Cboutput, Croutput은 각각 Cb 및 Cr에 대해 보정된 출력색, Cbpreferred 및 Crpreferred 는 각각 Cb 및 Cr에 대해 선택된 선호 피부색, R1 및 R2는 각각 Cb 및 Cr에 대한 가중치, dCbmax 및 dCrmax는 각각 Cb 및 Cr의 최대값 및 최소값 차이, Cbinput 및 Crinput는 각각 상기 피부 영역의 Cb 및 Cr 값.
  13. 입력 이미지로부터 피부 영역을 검출하는 단계;
    기 설정된 복수 개의 선호 피부색 정보 중에서, 상기 검출된 피부 영역에 대응되는 선호 피부색을 선택하는 단계; 및
    상기 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 단계;를 포함하며,
    상기 복수 개의 선호 피부색 정보는,
    반복 실험을 통해 인종 별로 복수 개로 얻어진 선호 피부색 정보들을 포함하며,
    상기 보정하는 단계는,
    상기 선택된 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 따라 비선형적인 가중치를 계산하는 단계;
    상기 가중치를 상기 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 승산한 후, 승산 결과값을 상기 피부 영역의 피부색에 가산하여 보정된 출력색을 연산하는 단계;
    연산된 출력색으로 출력하는 단계;를 포함하는 색상 변환 방법.
  14. 반복 실험을 통해 인종 별로 복수 개로 얻어진 선호 피부색 정보가 저장된 저장부;
    이미지를 입력받는 입력부; 및
    상기 입력부를 통해 입력된 입력 이미지에 나타나는 피부 영역을 검출하고, 상기 저장부에 저장된 선호 피부색 정보들 중에서 상기 검출된 피부 영역에 대응되는 선호 피부색 정보를 선택하고, 상기 선택된 선호 피부색을 이용하여 상기 피부 영역의 색상을 보정하는 제어부;를 포함하며,
    상기 제어부는,
    상기 선택된 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 따라 비선형적인 가중치를 계산하고, 상기 가중치를 상기 선호 피부색과 상기 피부 영역의 피부색 간의 차이에 승산한 후, 승산 결과값을 상기 피부 영역의 피부색에 가산하여 보정된 출력색을 연산하여, 연산된 출력색으로 상기 입력 이미지를 출력하는 색상 변환 장치.
KR1020110032981A 2011-04-09 2011-04-09 색상 변환 장치 및 그 방법 KR101743520B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020110032981A KR101743520B1 (ko) 2011-04-09 2011-04-09 색상 변환 장치 및 그 방법
EP11189134.7A EP2509047B1 (en) 2011-04-09 2011-11-15 Colour conversion apparatus and method thereof
US13/297,703 US8849025B2 (en) 2011-04-09 2011-11-16 Color conversion apparatus and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110032981A KR101743520B1 (ko) 2011-04-09 2011-04-09 색상 변환 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20120115047A KR20120115047A (ko) 2012-10-17
KR101743520B1 true KR101743520B1 (ko) 2017-06-08

Family

ID=45002704

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110032981A KR101743520B1 (ko) 2011-04-09 2011-04-09 색상 변환 장치 및 그 방법

Country Status (3)

Country Link
US (1) US8849025B2 (ko)
EP (1) EP2509047B1 (ko)
KR (1) KR101743520B1 (ko)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120118383A (ko) * 2011-04-18 2012-10-26 삼성전자주식회사 이미지 보정 장치 및 이를 이용하는 이미지 처리 장치와 그 방법들
US9118876B2 (en) * 2012-03-30 2015-08-25 Verizon Patent And Licensing Inc. Automatic skin tone calibration for camera images
JP2014021782A (ja) * 2012-07-19 2014-02-03 Canon Inc 画像処理装置、その制御方法及びプログラム
CN104156915A (zh) * 2014-07-23 2014-11-19 小米科技有限责任公司 肤色调整方法和装置
CN104658504B (zh) * 2015-03-09 2017-05-10 深圳市华星光电技术有限公司 一种液晶显示器的驱动方法及驱动装置
US9852324B2 (en) * 2015-12-08 2017-12-26 Intel Corporation Infrared image based facial analysis
KR102541829B1 (ko) 2016-01-27 2023-06-09 삼성전자주식회사 전자 장치 및 그 제어 방법
CN106060402A (zh) * 2016-07-06 2016-10-26 北京奇虎科技有限公司 一种图像数据的处理方法、装置和移动终端
CN107038715B (zh) * 2017-03-21 2022-03-08 腾讯科技（深圳）有限公司 一种图像处理方法及装置
KR102287109B1 (ko) * 2017-03-24 2021-08-06 삼성전자주식회사 피부에 해당하는 이미지 처리 영역을 보정하는 방법 및 전자 장치
US20190246065A1 (en) * 2018-02-06 2019-08-08 Perfect Corp. Systems and methods for makeup consultation using an improved user interface
CN110134264A (zh) * 2018-02-06 2019-08-16 英属开曼群岛商玩美股份有限公司 实行于计算设备的系统、方法及存储媒体
CN108628571B (zh) * 2018-03-29 2021-01-15 西安电子科技大学 一种显示屏节能方法
CN111047517B (zh) * 2018-10-11 2022-09-30 展讯通信（上海）有限公司 肤色调节方法及装置、可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000261650A (ja) * 1999-03-05 2000-09-22 Toshiba Corp 画像処理装置
JP2004246456A (ja) * 2003-02-12 2004-09-02 Omron Corp 画像編集装置および画像編集方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4631578A (en) * 1983-03-04 1986-12-23 Canon Kabushiki Kaisha Method of and apparatus for forming a color picture using a plurality of color correction processings
US5130935A (en) * 1986-03-31 1992-07-14 Canon Kabushiki Kaisha Color image processing apparatus for extracting image data having predetermined color information from among inputted image data and for correcting inputted image data in response to the extracted image data
US5270808A (en) * 1990-08-03 1993-12-14 Canon Kabushiki Kaisha Color image processing with adjustment of computed recording color to match original color
EP0686997A3 (en) * 1994-06-06 1996-06-26 Matsushita Electric Ind Co Ltd Discharge lamp and lighting device for general lighting
DE19703129B4 (de) * 1997-01-29 2014-08-21 Heidelberger Druckmaschinen Ag Verfahren zur Bewertung der Qualität eines im Mehrfarbendruck auf einem Bedruckstoff erzeugten Druckbildes
JP2001218078A (ja) * 1999-11-25 2001-08-10 Fuji Photo Film Co Ltd 彩度補正装置および方法
JP4218348B2 (ja) * 2003-01-17 2009-02-04 オムロン株式会社 撮影装置
US7936919B2 (en) * 2005-01-18 2011-05-03 Fujifilm Corporation Correction of color balance of face images depending upon whether image is color or monochrome
KR100708129B1 (ko) 2005-05-03 2007-04-16 삼성전자주식회사 칼라 프로파일 편집장치 및 방법
JP4718952B2 (ja) * 2005-09-27 2011-07-06 富士フイルム株式会社 画像補正方法および画像補正システム
JP2007094840A (ja) 2005-09-29 2007-04-12 Fujifilm Corp 画像処理装置、及び画像処理方法
KR100862341B1 (ko) * 2006-11-13 2008-10-13 삼성전기주식회사 사람의 피부 영역 검출장치 및 그 방법
JP4329821B2 (ja) * 2007-01-31 2009-09-09 ブラザー工業株式会社 顔検出装置、顔検出方法および顔検出プログラム
JP5164692B2 (ja) * 2008-06-27 2013-03-21 キヤノン株式会社 画像処理装置、画像処理方法、及び、プログラム
KR20100056280A (ko) 2008-11-19 2010-05-27 삼성전자주식회사 디지털 영상 처리장치 및 그 제어방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000261650A (ja) * 1999-03-05 2000-09-22 Toshiba Corp 画像処理装置
JP2004246456A (ja) * 2003-02-12 2004-09-02 Omron Corp 画像編集装置および画像編集方法

Also Published As

Publication number Publication date
EP2509047A1 (en) 2012-10-10
KR20120115047A (ko) 2012-10-17
US20120257826A1 (en) 2012-10-11
EP2509047B1 (en) 2019-08-07
US8849025B2 (en) 2014-09-30

Similar Documents

Publication Publication Date Title
KR101743520B1 (ko) 색상 변환 장치 및 그 방법
US20070071316A1 (en) Image correcting method and image correcting system
Liu et al. CID: IQ–a new image quality database
US7652717B2 (en) White balance correction in digital camera images
US7636473B2 (en) Image color adjustment
US8743272B2 (en) Image processing apparatus and method of controlling the apparatus and program thereof
US7519219B2 (en) Method and program for correcting facial image and recording medium
EP1909484B1 (en) Image processing device, image processing program, and image processing method
US20090060326A1 (en) Image processing apparatus and method
JP3959909B2 (ja) ホワイトバランス調整方法及び調整装置
US6850272B1 (en) Image processing method and system
US20100129001A1 (en) Method, device and program for measuring image quality adjusting ability, and method, device and program for adjusting image quality
JP4687673B2 (ja) カラー画像のモノトーン化処理
US20110058736A1 (en) Image processing apparatus, method, and program
JP2009290822A (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
US20110274348A1 (en) Image processing
US20130004070A1 (en) Skin Color Detection And Adjustment In An Image
US8290262B2 (en) Color processing apparatus and method thereof
WO2008102296A2 (en) Method for enhancing the depth sensation of an image
US20050068587A1 (en) Monotone conversion process for color images
JP2010252265A (ja) 画像処理装置
US10218880B2 (en) Method for assisted image improvement
JP4135365B2 (ja) 画像処理装置および方法、記録媒体、並びにプログラム
US20150207958A1 (en) Apparatus, method, and medium
Farnand et al. A methodology for perceptual image quality assessment of smartphone cameras–color quality

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right