KR20110038934A - Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and recognition information of human skin - Google Patents

Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and recognition information of human skin Download PDF

Info

Publication number
KR20110038934A
KR20110038934A KR1020090096132A KR20090096132A KR20110038934A KR 20110038934 A KR20110038934 A KR 20110038934A KR 1020090096132 A KR1020090096132 A KR 1020090096132A KR 20090096132 A KR20090096132 A KR 20090096132A KR 20110038934 A KR20110038934 A KR 20110038934A
Authority
KR
South Korea
Prior art keywords
image
screen
category
skin
information
Prior art date
Application number
KR1020090096132A
Other languages
Korean (ko)
Other versions
KR101089830B1 (en
Inventor
최경실
박영경
홍정인
김윤정
Original Assignee
이화여자대학교 산학협력단
홍익대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이화여자대학교 산학협력단, 홍익대학교 산학협력단 filed Critical 이화여자대학교 산학협력단
Priority to KR1020090096132A priority Critical patent/KR101089830B1/en
Publication of KR20110038934A publication Critical patent/KR20110038934A/en
Application granted granted Critical
Publication of KR101089830B1 publication Critical patent/KR101089830B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/40Analysis of texture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Abstract

PURPOSE: A display calibration apparatus for enhancing image quality by categorizing an image and recognizing the information of a human skin is provided to improve image quality recognized by a user by adopting different emotions to every image category and reproducing a preferable human skin color. CONSTITUTION: A category discrimination unit(100) classifies an image category, and a skin recognition unit(200) recognizes a human skin color in an image. A screen adjustment unit(300) adjusts a screen according to the skin information of the person recognized in the skin recognition unit. In addition, the screen adjustment unit adjusts a screen by using a screen adjustment variable which varies according to the skin information of the recognized person and the classified category.

Description

영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치 및 디스플레이 조정 방법{DISPLAY CALIBRATION APPARATUS AND METHOD THEREOF FOR IMAGE QUALITY ENHANCEMENT USING CATEGORIZING OF IMAGE AND RECOGNITION INFORMATION OF HUMAN SKIN}DISPLAY CALIBRATION APPARATUS AND METHOD THEREOF FOR IMAGE QUALITY ENHANCEMENT USING CATEGORIZING OF IMAGE AND RECOGNITION INFORMATION OF HUMAN SKIN}

본 발명은 화질을 향상하기 위한 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 디스플레이 조정 장치 및 디스플레이 조정 방법에 관한 것이다.The present invention relates to a display adjusting device and a display adjusting method using a category of an image and skin recognition information of a person to improve image quality.

디스플레이는 사용자가 디스플레이의 출력 장치를 통하여 눈으로 정보를 받아 인지하는 정보의 시각적인 전달자 역할을 한다. 디스플레이 장치의 연구는 박형화, 고화질화, 저전력 친환경 등이 핵심이며, 이중 고화질화는 영상의 화질을 개선하기 위한 해상도 등의 물리적인 화질의 성능을 높이는 기술 개발이 중점이다. 하지만, 최근 디스플레이의 성능 향상과 화질 기술의 발달로 물리적인 화질의 성능은 우수하여 졌으나 사용자의 시각으로 정보를 인지하는 과정을 배제한 물리적인 화질 개선만으로는 화질 개선에 한계가 있다.The display serves as a visual bearer of information that the user receives and recognizes with the eyes through the output device of the display. In the research of display devices, thinning, high image quality, and low power and eco-friendliness are the core, and the dual high definition is focused on the development of technology for improving the performance of physical image quality such as resolution to improve image quality. However, the recent improvement in display performance and the development of image quality technology has improved the performance of physical image quality, but there is a limit to the image quality improvement only by improving the physical image quality by excluding the process of recognizing information from the user's perspective.

디스플레이 장치에 재현된 영상에 포함되는 색상 중에서 사람의 피부색은 높 은 빈도를 나타내고 있어, 사람의 피부색의 재현이 영상 출력 장치의 화질 성능에 중요한 요소이나, 영상 속의 사람의 피부색을 인식하고 재현하는 화질 개선 방법은 고려되고 않고 있는 실정이다. 또한, 종래의 디스플레이 화질 향상 기술은, 영상의 다양한 컨텐츠에 따라, 시청자를 만족시키는 화질을 제공하기 위해서 그 컨텐츠가 요구하는 감성을 충분히 반영하려는 방법은 고려되지 않고 명도, 채도, 색상 등의 물리적인 화질만을 조정하도록 설계되어 접근하기 어려운 문제점이 있으며, 컨텐츠를 염두에 두고 있더라도 단지 2-3가지 모드 별로 화질을 일괄적으로 조정하게 되어있어 사용자가 화질 조정의 필요성을 느끼고 직접 화질을 조정하여야만 하는 문제점이 있다.Among the colors included in the image reproduced on the display device, the human skin color has a high frequency, and the reproduction of the human skin color is an important factor in the image quality performance of the image output device, but the image quality of recognizing and reproducing the human skin color in the image. Improvement methods are not being considered. In addition, the conventional display image quality improvement technology does not consider a method of sufficiently reflecting the sensitivity required by the content in order to provide a picture quality that satisfies the viewer according to various contents of the image, It is designed to adjust the picture quality only, so it is difficult to access. Even if the content is in mind, only 2-3 modes of picture quality are adjusted in a batch so that the user needs to adjust the picture quality and adjust the picture quality directly. There is this.

본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 영상의 카테고리를 분류하고 사람의 피부를 인식하여 화면을 조정함으로써, 영상의 카테고리마다 다른 감성을 반영하고 선호하는 사람 피부색을 재현하여 사용자가 인지하는 화질을 향상시키는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치 및 디스플레이 조정 방법을 제공하는 것을 그 목적으로 한다.The present invention has been proposed to solve the above problems of the conventionally proposed methods, by classifying the category of the image and recognizing the skin of the person to adjust the screen, to reflect and prefer different emotions for each category of the image It is an object of the present invention to provide a display adjusting device and a display adjusting method for improving image quality by reproducing skin color and improving image quality perceived by a user, using image category and human skin recognition information.

상기한 목적을 달성하기 위한 본 발명의 특징에 따른, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치는,According to an aspect of the present invention for achieving the above object, a display adjustment device for improving the image quality using the category of the image and human skin recognition information,

(1) 영상의 카테고리를 분류하는 카테고리 판별부;(1) a category discrimination unit classifying a category of an image;

(2) 영상 속의 사람의 피부를 인식하는 피부 인식부; 및 (2) a skin recognition unit for recognizing a human skin in the image; And

(3) 상기 카테고리 판별부에서 분류된 카테고리 및 상기 피부 인식부에서 인식된 사람의 피부 정보에 따라 화면을 조정하는 화면 조정부를 포함하는 것을 그 구성상의 특징으로 한다.And (3) a screen adjustment unit for adjusting the screen according to the category classified by the category determination unit and the skin information of the person recognized by the skin recognition unit.

바람직하게는, 상기 화면 조정부는,Preferably, the screen adjustment unit,

분류된 카테고리 및 인식된 사람의 피부 정보에 따라 변화되는 화면 조정 변수를 이용하여 화면을 조정할 수 있다.The screen may be adjusted using a screen adjustment variable that is changed according to the classified category and the recognized skin information of the person.

더욱 바람직하게는, 상기 화면 조정 변수는,More preferably, the screen adjustment variable,

디스플레이의 Hue 파라메타, Saturation 파라메타, Lightness 파라메타를 포함할 수 있다.It can include Hue parameters, Saturation parameters, and Lightness parameters of the display.

상기한 목적을 달성하기 위한 본 발명의 또 다른 특징에 따른, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법은,According to another aspect of the present invention for achieving the above object, a display adjustment method for improving the image quality using the category of the image and human skin recognition information,

영상의 카테고리 및 영상 속의 사람의 피부 정보에 따라 화면을 조정하는 것을 그 구성상의 특징으로 한다.The adjustment of the screen according to the category of the image and the skin information of the person in the image is characterized by its configuration.

바람직하게는,Preferably,

(1) 카테고리 판별부에서 분류한 카테고리 및 피부 인식부에서 인식된 사람의 피부에 대한 영상 정보를 화면 조정부로 전송하는 단계;(1) transmitting image information on the category classified by the category determining unit and the skin of the person recognized by the skin recognizing unit to the screen adjusting unit;

(2) 영상 정보를 화면 조정부로 전송한 경우, 상기 화면 조정부에서 화면을 조정하는 단계; 및(2) adjusting the screen by the screen adjusting unit when the image information is transmitted to the screen adjusting unit; And

(3) 상기 화면 조정부에서 화면을 조정한 경우, 조정된 영상을 디스플레이하는 단계를 포함할 수 있다.(3) if the screen is adjusted by the screen adjustment unit, displaying the adjusted image.

더욱 바람직하게는, 상기 화면을 조정하는 단계는,More preferably, adjusting the screen may include:

분류된 카테고리 및 인식된 피부 정보에 따라 각각 미리 설정된 가중치를 화면 조정 변수에 더하여 화면을 조정할 수 있다.According to the classified category and the recognized skin information, the screen may be adjusted by adding preset weights to the screen adjustment variables.

더더욱 바람직하게는, 상기 가중치는,Even more preferably, the weight is

영상의 카테고리에 따라 화질을 향상시키도록 화면 조정 변수 값에 소정의 값을 가감할 수 있다.A predetermined value may be added to or subtracted from the screen adjustment variable value to improve the image quality according to the category of the image.

더더욱 바람직하게는, 상기 가중치는,Even more preferably, the weight is

영상 속의 사람의 피부 정보에 따라 화질을 향상시키도록 화면 조정 변수 값에 소정의 값을 가감할 수 있다.A predetermined value may be added to or subtracted from the screen adjustment variable value to improve the image quality according to the skin information of the person in the image.

본 발명에서 제안하고 있는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치 및 디스플레이 조정 방법에 따르면, 영상의 카테고리를 분류하고 사람의 피부를 인식하여 화면을 조정하는 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치 및 디스플레이 조정 방법을 제공함으로써, 영상의 카테고리마다 다른 감성을 반영하고 선호하는 사람 피부색을 재현하여 사용자가 인지하는 화질을 향상시키는 효과가 있다.According to the present invention, according to the display adjustment device and the display adjustment method for improving the image quality using the category of the image and the human skin recognition information, to classify the category of the image and to recognize the human skin of the image to adjust the screen By providing a display adjustment device and a display adjustment method for improving the image quality using category and human skin recognition information, it is effective to improve the image quality recognized by the user by reflecting different emotions for each category of the image and reproducing the preferred skin color of the user. have.

이하에서는 첨부된 도면들을 참조하여, 본 발명에 따른 디스플레이 조정 장 치의 일 실시예에 대하여 상세하게 설명하기로 한다.Hereinafter, with reference to the accompanying drawings, an embodiment of a display adjustment device according to the present invention will be described in detail.

도 1은 본 발명의 일 실시예에 따른 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치를 개략적으로 나타내는 도면이다. 도 1에 도시된 바와 같이, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치는, 영상의 카테고리를 분류하는 카테고리 판별부(100), 영상 속의 사람의 피부를 인식하는 피부 인식부(200), 및 카테고리 판별부(100)에서 분류된 카테고리 및 피부 인식부(200)에서 인식된 사람의 피부 정보에 따라 화면을 조정하는 화면 조정부(300)를 포함한다. 또한, 화면 조정부(300)에서 조정된 화면을 디스플레이하는 디스플레이부(400)가 포함될 수 있다.FIG. 1 is a diagram schematically illustrating an apparatus for adjusting a display for improving image quality by using a category of an image and skin recognition information of a person, according to an exemplary embodiment. As shown in FIG. 1, a display adjusting apparatus for improving image quality using a category of an image and skin recognition information of a human includes a category determining unit 100 classifying a category of an image and a skin recognizing a human skin in the image. Recognizing unit 200, and the screen classification unit 300 for adjusting the screen according to the category classified by the category determination unit 100 and the skin information of the person recognized by the skin recognition unit 200. In addition, the display controller 400 may display a screen adjusted by the screen controller 300.

카테고리 판별부(100)는 수신된 영상의 카테고리를 분류하는 기능을 한다. 카테고리 판별부(100)는 카테고리 판별부(100)에서 영상의 다양한 카테고리를 판별한 다음 화면 조정부(300)에서 화질을 조정하여 그 컨텐츠가 요구하는 감성을 충분히 반영하여 화질을 개선할 수 있다. 영상의 카테고리는 뉴스, 다큐, 애정, 전쟁 및 스포츠 등으로 분류될 수 있다.The category determining unit 100 classifies a category of the received image. The category determination unit 100 may determine various categories of the image by the category determination unit 100, and then adjust the image quality by the screen adjustment unit 300 to sufficiently reflect the emotions required by the contents to improve the image quality. The category of the image may be classified into news, documentary, affection, war and sports.

피부 인식부(200)는 영상 속에서 사람의 피부색을 인식하는 기능을 한다. 사람의 피부색을 인식하는 경우, 화면 조정부(300)에서 화질을 조정하여, 영상 출 력 장치의 화질 성능에 중요한 요소인 피부색을 사용자 선호색으로 개선할 수 있다.The skin recognizing unit 200 recognizes a human skin color in an image. When the human skin color is recognized, the screen adjustment unit 300 may adjust the image quality to improve the skin color, which is an important factor for the image quality performance of the image output device, to a user's preferred color.

화면 조정부(300)는, 도 1에 도시된 바와 같이, 분류된 카테고리 및 인식된 사람의 피부 정보에 따라 변화되는 화면 조정 변수를 이용하여 화면을 조정할 수 있다. 화면 조정부(300)는 분류된 카테고리 및 인식된 사람의 피부 정보에 따라 변화하는 화면 조정 변수를 이용하여, 다양한 컨텐츠에 따라 각각 다르게 요구되는 감정을 충분히 반영하여 사용자가 선호하는 화면으로 화질을 개선할 수 있다. 여기서 화면 조정 변수는, 디스플레이의 Hue 파라메타, Saturation 파라메타, Lightness 파라메타를 포함할 수 있다. 이들 파라메타는 장치에 대하여 독립적이면서 인간 시각이 색을 인식하는 수단이므로 화면 조정 변수로 사용되기에 유용하다. 한편 화면 조정 변수는 네 가지 이외에도 Gamma, Chroma(Colorfulness), Brightness, 및 Contrast 파라메타 등을 포함할 수 있다. 또한 화면 조정 변수는 독립적으로 사용될 수 있으며, 여러 화면 조정 변수가 함께 사용되어, 최소 두 개 이상이 동시에 조정될 수 있다.As illustrated in FIG. 1, the screen adjustment unit 300 may adjust the screen using a screen adjustment variable that is changed according to the classified category and the recognized skin information of the person. The screen adjusting unit 300 may improve image quality to a screen that the user prefers by sufficiently reflecting emotions that are differently required according to various contents by using screen adjustment variables that change according to the classified category and the recognized skin information of the person. Can be. The screen adjustment variable may include a Hue parameter, a saturation parameter, and a lightness parameter of the display. These parameters are useful as screen adjustment variables because they are independent of the device and the means by which human vision perceives color. On the other hand, in addition to the four screen adjustment parameters may include Gamma, Chroma (Colorfulness), Brightness, and Contrast parameters. In addition, the screen adjustment parameters can be used independently, and several screen adjustment variables can be used together, so that at least two or more can be adjusted at the same time.

다음으로 도 2 내지 도 6을 참조하여, 본 발명에 따른 디스플레이 조정 방법의 일 실시예에 대하여 상세하게 설명하기로 한다.Next, an embodiment of the display adjustment method according to the present invention will be described in detail with reference to FIGS. 2 to 6.

도 2는 본 발명의 일 실시예에 따른 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법을 나타내는 순서도이다. 도 2에 도시된 바와 같이, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법은, 영상의 카테고리 및 영상 속의 사람의 피부 정보에 따라 화면을 조정한다. 디스플레이 패널의 성능 개선과 관계없이, 영상의 카테고리 및 인식된 피부색 정보를 이용해 사람의 눈에 인식되기 용이하고 감성이 반영된 영상으로 화면을 조정하여 사용자가 선호하는 영상을 제공할 수 있고 더욱 명확하게 인지할 수 있게 화질을 향상할 수 있다.2 is a flowchart illustrating a display adjusting method for improving image quality using a category of an image and skin recognition information of a person according to an exemplary embodiment of the present invention. As shown in FIG. 2, the display adjusting method for improving image quality using the category of the image and the skin recognition information of the person adjusts the screen according to the category of the image and the skin information of the person in the image. Regardless of the performance of the display panel, it is possible to provide a user's favorite image by adjusting the screen to an image that is easy to be recognized by the human eye and to the emotion by using the category of the image and the recognized skin color information. The picture quality can be improved.

도 2에 도시된 바와 같이, 본 발명의 일 실시에에 따른 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법은, 우선, 카테고리 판별부(100)에서 분류한 카테고리 및 피부 인식부(200)에서 인식된 사람의 피부에 대한 영상 정보를 화면 조정부로 전송할 수 있다(S100). 수신된 영상으로부터 카테고리 판별부(100)에서 영상의 카테고리를 분류하고 피부 인식부(200)에서 사람의 피부를 인식하여, 인식된 정보를 화면 조정부(300)로 전송함으로써, 영상의 카테고리 정보 및 피부 정보를 화질 향상에 사용할 수 있다. 카테고리 판별부(100)에서 영상의 카테고리는 영상의 프로그램 정보 등을 참고하여 분류할 수 있으며, 피부 인식부(200)에서 사람의 피부는 수신된 영상의 이미지에서 피부색을 검출하고 탐색된 피부영역의 이미지 내 분포 범위를 산출하여 식별할 수 있다.As shown in FIG. 2, a display adjustment method for improving image quality using a category of an image and skin recognition information of a person according to an exemplary embodiment of the present invention first includes categories and skins classified by the category determination unit 100. In operation S100, the image information regarding the skin of the person recognized by the recognition unit 200 may be transmitted to the screen adjustment unit. The category determining unit 100 classifies the category of the image from the received image, the skin recognition unit 200 recognizes the human skin, and transmits the recognized information to the screen adjusting unit 300, thereby providing category information and skin of the image. Information can be used to improve image quality. In the category determination unit 100, categories of images may be classified by referring to program information of an image, and the like. In the skin recognizing unit 200, a human skin detects a skin color from an image of a received image, The distribution range in the image can be calculated and identified.

다음으로, 도 2에 도시된 바와 같이, 영상 정보를 화면 조정부로 전송한 경 우, 화면 조정부(300)에서 화면을 조정할 수 있다(S200). 화면을 조정하는 경우, 분류된 카테고리 및 인식된 사람의 피부 정보에 따라 미리 화면 조정 변수의 가중치를 각각 설정하여, 화면 조정 변수를 다양하게 변화시킬 수 있어 다양한 컨텐츠에 따라 선호하는 화면으로 화질을 개선할 수 있다. 여기서, 가중치는 영상의 카테고리에 따라 화질을 향상시키도록 화면 조정 변수 값에 소정의 값을 가감할 수 있다. 뉴스, 다큐멘터리, 애정, 전쟁 및 스포츠 등으로 분류된 영상의 카테고리에 따라 아래 실험예 1과 같이 선호도가 차이가 나타나므로, 영상의 카테고리를 분류하여 높은 선호도를 가지도록 화면 조정 변수 값에 소정의 값을 가감시키기 위하여 가중치를 미리 설정하여 화질을 개선시킬 수 있다.Next, as shown in FIG. 2, when the image information is transmitted to the screen adjusting unit, the screen adjusting unit 300 may adjust the screen (S200). When adjusting the screen, the weights of the screen adjustment variables can be set in advance according to the categorized category and the recognized skin information of the screen, so that the screen adjustment parameters can be changed in various ways. can do. Here, the weight may be added to or subtracted from the screen adjustment variable value to improve the image quality according to the category of the image. Since preferences vary according to the categories of images classified as news, documentary, love, war, and sports, as shown in Experiment 1 below, a predetermined value is assigned to a screen adjustment variable value to classify the categories of images and have high preference. In order to increase or decrease the weight, the weight may be set in advance to improve the image quality.

[실험예 1]Experimental Example 1

디스플레이의 화질 개선의 목적으로 디스플레이의 출력장치에서 카테고리에 따른 효과적인 화질 조정 변수를 확인하기 위하여 화질 조정 변수가 적용된 6가지 영상을 제시하여 카테고리별 주관적. 생리적 피로도를 실험하였다.For the purpose of improving the image quality of the display, the subject of each category is presented by presenting 6 images with the image quality adjustment variable to check the effective image quality adjustment variable according to the category. Physiological fatigue was tested.

도 3은 본 발명의 실험예 1에 따른 각각의 카테고리별로 화질 조정 변수를 조정한 레벨을 나타내는 도면이다. 실험 방법은 영상에 가장 민감한 20대 3명이 참가하여 도 3과 같이 다큐멘터리, 애정, 뉴스, 스포츠, 전쟁의 5가지 카테고리별로 H(Hue), M(Chroma(Colorfulness)), L(Lightness), CN(Contrast)의 화질 조정 변수를 5단계로 조정한 화면을 제시하여 선호도를 확인하였다.3 is a diagram illustrating a level at which an image quality adjustment parameter is adjusted for each category according to Experimental Example 1 of the present invention. The experiment method was conducted by three people in their 20s, who were most sensitive to the video, and showed five categories of documentary, love, news, sports, and war as shown in FIG. 3. H (Hue), M (Chroma (Colorfulness)), L (Lightness) and CN The preferences were confirmed by presenting a screen in which the image quality adjustment parameter of (Contrast) was adjusted in five levels.

도 4는 본 발명의 실험예 1에 따른 영상의 카테고리에 따른 화질 조정 변수 선호도를 나타내는 도면이며, 특히 (a), (b), (c), (d) 및 (e)은 각각 다큐멘터리, 애정, 뉴스, 스포츠 및 전쟁 카테고리의 실험 결과이다. 도 4에 도시된 바와 같이, 다큐멘터리 카테고리는 H_3, M_2, L_3, CN_4 레벨인 경우, 사랑 카테고리는 H_3, M_3, L_3, CN_2 레벨인 경우, 뉴스 카테고리는 H_3, M_2, L_3, CN_3인 경우, 스포츠 카테고리는 H_3, M_3, L_3, CN_4인 경우, 전쟁 카테고리는 H_4, M_2, L_3, CN_4인 경우 가장 높은 선호도를 나타내었다.FIG. 4 is a diagram illustrating image quality adjustment variable preferences according to categories of images according to Experimental Example 1 of the present invention. Particularly, (a), (b), (c), (d), and (e) are documentary and affection, respectively. , The results of the experiment in the news, sports and war categories. As shown in FIG. 4, when the documentary category is at the H_3, M_2, L_3, CN_4 level, the love category is at the H_3, M_3, L_3, CN_2 level, the news category is at the H_3, M_2, L_3, CN_3, sports If the category is H_3, M_3, L_3, CN_4, the war category showed the highest preference when H_4, M_2, L_3, CN_4.

또한, 가중치는, 도 2에 도시된 바와 같이, 영상 속의 사람의 피부 정보에 따라 화질을 향상시키도록 화면 조정 변수 값에 소정의 값을 가감할 수 있다. 디스플레이 장치에 재현된 영상에 포함되는 색상 중에서 사람의 피부색은 높은 빈도를 나타내고 있고, 아래 실험예 2와 같이 사람 피부색의 선호도가 뚜렷한 편이므로, 영상 속의 사람의 피부색이 인식되는 경우 피부색을 높은 선호도를 가지도록 화면 조정 변수 값에 소정의 값을 가감시키기 위하여 가중치를 미리 설정하여 화질을 개선시킬 수 있다.In addition, as shown in FIG. 2, the weight may be added to or subtracted from the screen adjustment variable value to improve the image quality according to the skin information of the person in the image. Among the colors included in the image reproduced on the display device, the human skin color has a high frequency, and since the preference of the human skin color is obvious as in Experiment 2 below, when the skin color of the human in the image is recognized, the skin color has high preference. In order to add or subtract a predetermined value to a screen adjustment variable value, weights may be set in advance to improve image quality.

[실험예 2]Experimental Example 2

디스플레이의 화질 개선의 목적으로 디스플레이의 출력장치에서 피부색의 효과적인 재현을 하기 위해서 사용자의 인간의 피부색에 대한 선호색 영역을 실험하 였다. 실험에 사용된 이미지는 lkegami HDK-790E HD Camara로 촬영한 후 Autodesk Lustre로 얼굴 부분만 색과 밝기 및 채도를 조정하였다.For the purpose of improving the image quality of the display, in order to effectively reproduce the skin color in the output device of the display, the user's preferred color region for the human skin color was tested. The images used in the experiment were taken with the lkegami HDK-790E HD Camara, and then Autodesk Luster adjusted the color, brightness and saturation of only the face.

도 5는 본 발명의 실험예 2에 따른 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치에서 피부색의 효과적인 재현을 하기 위해서 사용자의 인간의 피부색에 대한 선호색 영역의 실험에 사용된 이미지를 나타내는 도면이며, 특히 (a), (b) 및 (c)은 각각 Hue 파라메타, Lightness 파라메타 및 Saturation 파라메타의 화면 조정 변수를 조정하여 렌더링한 이미지이다. Hue 파라메타는 vector SCOPE 1축에서 시계방향으로 2도 정도의 위치에 Level 3을 두고 시계방향과 반시계방향으로 각각 3도씩 움직여서 Level 1, Level 2, Level 4, Level 5를 만들어낸다. 여기서, Hue angle은, Hue(색조)에 붉은색에서 노란색 또는 노란색에서 초록색 또는 초록색에서 푸른색 또는 푸른색에서 붉은색으로 계통이 이동되는 것을 의미하는 것으로, 오리지널 화면인 Level 3에서 Level 1로 갈수록 reddish 색상을 많이 포함하고, Level 3에서 Level 5로 갈수록 yellowish 색상을 많이 포함한 것을 의미한다. Lightness 파라메타는 Waveform Meter에서 얼굴의 가장 밝은 부분을 Level 1(535mV), Level 2(520mV), Level 3(510mV), Level 4(500mV), Level 5(490mV)로 조정한다. Saturation 파라메타는 1축의 꺾쇠부분에 Level 3을 위치시키고 차이가 느껴지는 정도의 크기로 채도를 증감하면서 Level 1, Level 2, Level 4, Level 5를 만들어낸다.FIG. 5 is a diagram illustrating a preferred color gamut of a user's human skin color in order to effectively reproduce the skin color in a display adjustment device for improving image quality using image category and human skin recognition information according to Experimental Example 2 of the present invention. Figures showing the images used, in particular (a), (b) and (c) are images rendered by adjusting the screen adjustment parameters of the Hue parameter, Lightness parameter and Saturation parameter, respectively. The Hue parameter creates Level 1, Level 2, Level 4 and Level 5 by moving Level 3 at a position about 2 degrees clockwise on the 1 axis of the vector SCOPE and moving it 3 degrees clockwise and counterclockwise, respectively. Here, the Hue angle means that the system shifts from red to yellow or yellow to green or green to blue or blue to red in Hue, and gradually goes from the original screen Level 3 to Level 1. It contains a lot of reddish colors, and from level 3 to level 5, it means more yellowish colors. The Lightness parameter adjusts the brightest part of the face in the Waveform Meter to Level 1 (535mV), Level 2 (520mV), Level 3 (510mV), Level 4 (500mV), and Level 5 (490mV). The saturation parameter creates Level 1, Level 2, Level 4, and Level 5 by placing Level 3 on the axis of the axis 1 and increasing the saturation to the extent that the difference is felt.

실험 방법은 피실험자 1명당 랜덤으로 30초씩 15장면을 보여주고 각 장면 당 “아름다운”, “자연스러운”, “편안한”, “부드러운”, “만족스러운”의 5개 형용사의 적합성 평가를 검사한다. 평가 척도는“전혀 그렇지 않다(1)”에서“매우 그렇다(7)”사이에서 화질을 평가하였으며 화면 조정 변수 조정에 따른 실험 결과는 도 6에 나타내었다.The test method shows 15 scenes randomly for 30 seconds per subject and examines the suitability evaluation of five adjectives of “beautiful”, “natural”, “comfortable”, “gentle” and “satisfactory” for each scene. The evaluation scale evaluated the image quality between “not at all (1)” to “very so (7)” and the experimental results according to the adjustment of the screen adjustment parameters are shown in FIG. 6.

도 6은 본 발명의 실험예 2에 따른 사용자의 인간의 피부색에 대한 선호색 영역의 실험 결과를 나타내는 도면이며, 특히 (a), (b) 및 (c)은 각각 Hue 파라메타, Saturation 파라메타 및 Lightness 파라메타의 화면 조정 변수를 조정하였을 경우 실험 결과이다. 도 6a 내지 도 6c에서, 적색 선은 ‘아름다운’, 황색 선은 ‘자연스러운’, 주황색 선은 ‘편안한’, 연두색 선은 ‘부드러운’, 녹색 선은 ‘만족스러운’에 대한 형용사의 적합성 평가 결과를 각각 나타낸다. 도 6에 도시된 바와 같이, Hue 파라메타 조정에 따른 실험 결과는 Hue 1, 2, 3은 유사하며 Hue 4, 5보다 선호도가 높게 결과가 도출되어 yellowish 색상을 많이 포함한 Level 4번, 5번 보다 reddish 색상을 많이 포함하고 있는 Level 1번, 2번, 3번 이미지를 선호하는 것으로 나타났다. Saturation 파라메타 조정에 따른 실험 결과는 Sat 2, 3, 4는 유사하며 Sat 1, 5보다 선호도가 높게 나타나서 Default Level 3번 이미지에서 약간 고채도의 Level 2번과 약간 저채도인 Level 4번의 선호도 경향이 나타나 고채도와 저채도의 비선호 경향이 뚜렷하였다. Lightness 파라메타 조정에 따른 실험 결과는 Lig 1, 2는 유사하고 Lig 3, 4, 5보다 선호도가 높게 나타나 밝은 이 미지를 선호하는 경향이 있었다.FIG. 6 is a diagram illustrating an experimental result of a preferred color region of a user's human skin color according to Experimental Example 2 of the present invention. Particularly, (a), (b), and (c) are Hue parameters, Saturation parameters, and Lightness, respectively. It is the result of experiment when adjusting the screen adjustment parameter of the parameter. 6a to 6c, the red line is 'beautiful', yellow line is 'natural', orange line is 'comfortable', green line is 'soft', green line is 'satisfactory' Represent each. As shown in FIG. 6, the experimental results according to Hue parameter adjustment are similar to those of Hue 1, 2 and 3, and the result is higher than Hue 4 and 5, resulting in reddish than Level 4 and 5, which contain many yellowish colors. Level 1, 2, and 3 images, which contain a lot of colors, were preferred. Experimental results of saturation parameter adjustment showed that Sat 2, 3 and 4 were similar and preferred than Sat 1 and 5, so that the preference trend of slightly high saturation level 2 and slightly low saturation level 4 was shown in Default Level 3 image. High saturation and low saturation were not preferred. The experimental results of the lightness parameter adjustment showed that Lig 1 and 2 were similar and had a higher preference than Lig 3, 4 and 5.

이처럼, 디스플레이 장치에 재현된 영상의 카테고리와 영상 속의 사람 피부색에 따라 화질에 대한 선호도가 뚜렷하고, 색감의 변화로 인해서 감성에 따라 달라지는 인간의 색 신경과의 관계로 인하여 이미지 디스플레이의 화질이 향상됨을 확인하여, 영상의 카테고리를 분류하고 영상 속의 사람의 피부를 인식하여 화면을 조정함으로써, 사용자가 인지하는 화질을 향상시킬 수 있음을 확인하였다.As described above, the image display quality on the display device and the human skin color in the image have a favorable preference for image quality, and the image quality of the image display is improved due to the relationship with human color nerves that vary depending on the sensitivity due to the change in color. By classifying the category of the image and recognizing the skin of the person in the image to adjust the screen, it was confirmed that the image quality recognized by the user can be improved.

마지막으로, 화면 조정부(300)에서 화면을 조정한 경우, 조정된 영상을 디스플레이(S300)할 수 있다. 조정된 영상을 디스플레이하는 단계(S300)는, 화면을 조정하는 단계(S200)에서 분류된 카테고리 및 인식된 사람 피부 정보를 바탕으로 조정된 화면을 디스플레이부(400)를 통하여 디스플레이함으로써 화질을 향상을 사용자가 인지할 수 있도록 한다.Finally, when the screen is adjusted by the screen controller 300, the adjusted image may be displayed (S300). In step S300 of displaying the adjusted image, the screen is adjusted based on the category classified in the step S200 and the recognized human skin information. Make the user aware.

위와 같이, 본 발명의 일 실시에에 따른 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법은, 카테고리 판별부(100)에서 분류한 카테고리 및 피부 인식부(200)에서 인식된 사람의 피부에 대한 영상 정보를 화면 조정부로 전송하는 단계(S100), 영상 정보를 화면 조정부로 전송한 경우, 화면 조정부(300)에서 화면을 조정하는 단계(S200) 및 화면 조정부(300)에서 화면을 조정한 경우, 조정된 영상을 디스플레이하는 단계(S300)를 포함할 수 있다. 이때, 영상의 카테고리를 분류하고 사람의 피부를 인식한 후 정보를 화면 조정부로 전송(S100)한 후 카테고리 분류 정보 및 인식된 사람 피부 정보 모두를 이용하여 화면을 조정(S200)할 수 있다. 또한, 영상의 카테고리를 분류한 후에 영상의 사람 피부가 확인되지 않는 경우에는, 정보를 화면 조정부로 전송(S100)한 후 카테고리 정보만을 이용하여 화면을 조정(S200)할 수 있고, 화면을 조정(S200)하고 디스플레이(S300)한 후에도, 피부 인식부(200)에서 사람 피부가 인식되면, 다시 화면을 조정(S200)하고 디스플레이(S300)할 수 있다.As described above, the display adjustment method for improving the image quality using the category of the image and the human skin recognition information according to an embodiment of the present invention, the category classified by the category determiner 100 and the skin recognition unit 200 is recognized In operation S100, when the image information is transmitted to the screen adjusting unit, the screen adjusting unit 300 adjusts the screen (S200) and the screen adjusting unit 300. If the screen is adjusted, the method may include displaying the adjusted image (S300). In this case, after classifying the category of the image and recognizing the skin of the person and transmitting the information to the screen adjusting unit (S100), the screen may be adjusted using both category classification information and the recognized human skin information (S200). In addition, when the human skin of the image is not confirmed after classifying the category of the image, after transmitting the information to the screen adjusting unit (S100), the screen may be adjusted using only the category information (S200), and the screen may be adjusted ( Even after the display (S200) and the display (S300), if the human skin is recognized by the skin recognition unit 200, the screen can be adjusted again (S200) and display (S300).

이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.The present invention described above may be variously modified or applied by those skilled in the art, and the scope of the technical idea according to the present invention should be defined by the following claims.

도 1은 본 발명의 일 실시예에 따른 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치를 개략적으로 나타내는 도면.1 is a diagram schematically illustrating an apparatus for adjusting a display for improving image quality by using a category of an image and skin recognition information of a person according to an exemplary embodiment of the present invention.

도 2는 본 발명의 일 실시예에 따른 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법을 나타내는 순서도.2 is a flowchart illustrating a display adjustment method for improving image quality using a category of an image and skin recognition information of a person according to an exemplary embodiment of the present invention.

도 3은 본 발명의 실험예 1에 따른 각각의 카테고리별로 화질 조정 변수를 조정한 레벨을 나타내는 도면.3 is a view showing a level of adjusting the image quality adjustment variable for each category according to Experimental Example 1 of the present invention.

도 4는 본 발명의 실험예 1에 따른 영상의 카테고리에 따른 화질 조정 변수 선호도를 나타내는 도면.4 is a diagram illustrating image quality adjustment variable preferences according to categories of images according to Experimental Example 1 of the present invention.

도 5는 본 발명의 실험예 2에 따른 피부색의 효과적인 재현을 하기 위해서 사용자의 인간의 피부색에 대한 선호색 영역의 실험에 사용된 이미지를 나타내는 도면.5 is a view showing an image used in the experiment of the preferred color region for the human skin color of the user in order to effectively reproduce the skin color according to Experimental Example 2 of the present invention.

도 6은 본 발명의 실험예 2에 따른 사용자의 인간의 피부색에 대한 선호색 영역의 실험결과를 나타내는 도면.6 is a view showing the experimental results of the preferred color region for the human skin color of the user according to Experimental Example 2 of the present invention.

<도면 중 주요 부분에 대한 부호의 설명><Explanation of symbols for main parts of the drawings>

100: 카테고리 판별부 200: 피부 인식부100: category determination unit 200: skin recognition unit

300: 화면 조정부 400: 디스플레이부300: screen adjustment unit 400: display unit

Claims (8)

영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치에 있어서,In the display adjustment device for improving the image quality using the category of the image and the human skin recognition information, (1) 영상의 카테고리를 분류하는 카테고리 판별부;(1) a category discrimination unit classifying a category of an image; (2) 영상 속의 사람의 피부를 인식하는 피부 인식부; 및(2) a skin recognition unit for recognizing a human skin in the image; And (3) 상기 카테고리 판별부에서 분류된 카테고리 및 상기 피부 인식부에서 인식된 사람의 피부 정보에 따라 화면을 조정하는 화면 조정부(3) a screen adjusting unit for adjusting a screen according to a category classified by the category determining unit and skin information of a person recognized by the skin recognizing unit; 를 포함하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치.Display adjustment apparatus for improving the image quality using a category of the image and the human skin recognition information, characterized in that it comprises a. 제1항에 있어서, 상기 화면 조정부는,The display device of claim 1, wherein the screen adjustment unit comprises: 분류된 카테고리 및 인식된 사람의 피부 정보에 따라 변화되는 화면 조정 변수를 이용하여 화면을 조정하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치.And adjusting the screen by using a screen adjustment variable which is changed according to the classified category and the recognized skin information of the person. 제2항에 있어서, 상기 화면 조정 변수는,The method of claim 2, wherein the screen adjustment variable, 디스플레이의 Hue 파라메타, Saturation 파라메타, Lightness 파라메타, Gamma 파라메타를 포함하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 장치.A display adjustment device for improving image quality using a category of an image and human skin recognition information, comprising a Hue parameter, a Saturation parameter, a Lightness parameter, and a Gamma parameter of a display. 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법에 있어서,In the display adjustment method for improving the image quality using the category of the image and the human skin recognition information, 영상의 카테고리 및 영상 속의 사람의 피부 정보에 따라 화면을 조정하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법.And adjusting the screen according to a category of an image and skin information of a person in the image. 제4항에 있어서,The method of claim 4, wherein (1) 카테고리 판별부에서 분류한 카테고리 및 피부 인식부에서 인식된 사람의 피부에 대한 영상 정보를 화면 조정부로 전송하는 단계;(1) transmitting image information on the category classified by the category determining unit and the skin of the person recognized by the skin recognizing unit to the screen adjusting unit; (2) 영상 정보를 화면 조정부로 전송한 경우, 상기 화면 조정부에서 화면을 조정하는 단계; 및(2) adjusting the screen by the screen adjusting unit when the image information is transmitted to the screen adjusting unit; And (3) 상기 화면 조정부에서 화면을 조정한 경우, 조정된 영상을 디스플레이하 는 단계를 포함하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법.And (3) displaying the adjusted image when the screen is adjusted by the screen adjustment unit. The display adjustment method of claim 1, further comprising displaying the adjusted image. 제5항에 있어서, 상기 화면을 조정하는 단계는,The method of claim 5, wherein adjusting the screen comprises: 분류된 카테고리 및 인식된 피부 정보에 따라 각각 미리 설정된 가중치를 화면 조정 변수에 더하여 화면을 조정하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법.And adjusting the screen by adding a predetermined weight to the screen adjustment variable according to the classified category and the recognized skin information, respectively. 제6항에 있어서, 상기 가중치는,The method of claim 6, wherein the weight is, 영상의 카테고리에 따라 화질을 향상시키도록 화면 조정 변수 값에 소정의 값을 가감하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법.A display adjustment method for improving image quality by using a category of an image and skin recognition information of a human, characterized by adding or subtracting a predetermined value to a screen adjustment variable value so as to improve the image quality according to the category of the image. 제6항에 있어서, 상기 가중치는,The method of claim 6, wherein the weight is, 영상 속의 사람의 피부 정보에 따라 화질을 향상시키도록 화면 조정 변수 값에 소정의 값을 가감하는 것을 특징으로 하는, 영상의 카테고리 및 사람의 피부 인식 정보를 이용한 화질 향상을 위한 디스플레이 조정 방법.And a predetermined value is added to or subtracted from a screen adjustment variable value so as to improve image quality according to skin information of a person in the image.
KR1020090096132A 2009-10-09 2009-10-09 Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and recognition information of human skin KR101089830B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090096132A KR101089830B1 (en) 2009-10-09 2009-10-09 Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and recognition information of human skin

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090096132A KR101089830B1 (en) 2009-10-09 2009-10-09 Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and recognition information of human skin

Publications (2)

Publication Number Publication Date
KR20110038934A true KR20110038934A (en) 2011-04-15
KR101089830B1 KR101089830B1 (en) 2011-12-12

Family

ID=44045812

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090096132A KR101089830B1 (en) 2009-10-09 2009-10-09 Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and recognition information of human skin

Country Status (1)

Country Link
KR (1) KR101089830B1 (en)

Also Published As

Publication number Publication date
KR101089830B1 (en) 2011-12-12

Similar Documents

Publication Publication Date Title
Kuang et al. Evaluating HDR rendering algorithms
KR100712644B1 (en) Method and system for transforming adaptively visual contents according to terminal user&#39;s color vision characteristics
EP2782326B1 (en) Method and apparatus for processing an image based on an image property and ambient environment information
US7873213B2 (en) Systems and methods for color-deficient image enhancement
CN106357955B (en) The scalable system for being used to control color management of metadata grade including variation
CN103119936B (en) For the apparatus and method of the improved coding of image
EP1909484B1 (en) Image processing device, image processing program, and image processing method
KR101366596B1 (en) Method and system of immersive generation for two-dimension still image and factor dominating method, image content analysis method and scaling parameter prediction method for generating immersive
JP2008507808A (en) Dominant color extraction using perceptual rules to generate ambient light derived from video content
JP2008505384A (en) Ambient light generation from broadcasts derived from video content and influenced by perception rules and user preferences
WO2023124722A1 (en) Image processing method and apparatus, electronic device, and computer-readable storage medium
EP2509047A1 (en) Colour conversion apparatus and method thereof
CN107948627B (en) Video broadcasting method, calculates equipment and storage medium at device
Pieri et al. Hitting the mark—a new color difference metric for HDR and WCG imagery
CN106843782B (en) Method for adjusting color of image of electronic equipment and electronic equipment
CN106488219A (en) Method for displaying image and device
Pedersen et al. Attributes of a new image quality model for color prints
Laird et al. Development and evaluation of gamut extension algorithms
KR101089830B1 (en) Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and recognition information of human skin
KR101089829B1 (en) Display calibration apparatus and method thereof for image quality enhancement using categorizing of image and information of background picture
KR100995310B1 (en) Picture quality enhancing system
EP3503017A1 (en) Method and display device
EP3942790B1 (en) Camera color image processing
Yendrikhovskij et al. Enhancing colour image quality in television displays
JP4202817B2 (en) Visual load measuring device and method, visual load measuring program, and recording medium recording the program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141201

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee