KR100801085B1 - Method and apparatus for auto white controlling - Google Patents

Method and apparatus for auto white controlling Download PDF

Info

Publication number
KR100801085B1
KR100801085B1 KR1020060041702A KR20060041702A KR100801085B1 KR 100801085 B1 KR100801085 B1 KR 100801085B1 KR 1020060041702 A KR1020060041702 A KR 1020060041702A KR 20060041702 A KR20060041702 A KR 20060041702A KR 100801085 B1 KR100801085 B1 KR 100801085B1
Authority
KR
South Korea
Prior art keywords
chromaticity
point
data
light source
difference
Prior art date
Application number
KR1020060041702A
Other languages
Korean (ko)
Other versions
KR20070063399A (en
Inventor
김성수
이호영
오현화
이성덕
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US11/594,217 priority Critical patent/US7808531B2/en
Publication of KR20070063399A publication Critical patent/KR20070063399A/en
Application granted granted Critical
Publication of KR100801085B1 publication Critical patent/KR100801085B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/73Colour balance circuits, e.g. white balance circuits or colour temperature control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/77Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 자동 백색 조절 방법 및 장치에 관한 것이다.The present invention relates to an automatic white adjustment method and apparatus.

본 발명의 실시예에 따른 자동 백색 조절 방법은 입력된 이미지가 도미넌트 색도를 갖는 오브젝트를 포함하는 경우, 상기 이미지의 색채적 특징을 갖는 복수의 특징 포인트를 제공하는 단계, 상기 복수의 특징 포인트를 사용하여 제1 광원 정보를 검출하는 단계, 상기 이미지를 구성하는 데이터 중에서 상기 제1 광원 정보의 색도와 임계치 이내의 색도차를 나타내는 데이터들의 평균 색도를 계산하는 단계, 및 상기 평균 색도를 소정의 광원 궤도에 매핑하여 제2 광원 정보를 제공하는 단계를 포함한다.According to an exemplary embodiment of the present invention, when the input image includes an object having a dominant chromaticity, the method may further include providing a plurality of feature points having chromatic characteristics of the image, using the plurality of feature points. Detecting first light source information, calculating an average chromaticity of data representing chromaticity differences within a threshold and chromaticity of the first light source information, and converting the average chromaticity into a predetermined light source trajectory. And providing second light source information by mapping to the second light source information.

자동 백색 조절, 오브젝트 유입, 광원 Automatic white adjustment, object inflow, light source

Description

자동 백색 조절 방법 및 장치{Method and apparatus for auto white controlling} Method and apparatus for automatic white control {Method and apparatus for auto white controlling}

도 1은 본 발명의 일 실시예에 따른 자동 백색 조절 장치를 나타낸 블록도이다.1 is a block diagram showing an automatic white adjustment apparatus according to an embodiment of the present invention.

도 2는 본 발명의 일 실시예에 따른 이미지를 기준 영역과 서브 영역으로 구분한 상태를 나타낸 도면이다. 2 is a diagram illustrating a state in which an image is divided into a reference area and a sub area according to an embodiment of the present invention.

도 3은 입력된 이미지에서 도미넌트 오브젝트를 검색하는 과정을 나타낸 흐름도이다.3 is a flowchart illustrating a process of searching for a dominant object in an input image.

도 4는 본 발명의 일 실시예에 따른 도미넌트 오브젝트의 유입 여부의 판단 과정을 설명하기 위한 도면이다. 4 is a diagram for describing a process of determining whether a dominant object is introduced according to an embodiment of the present invention.

도 5는 입력된 이미지의 특징 포인트를 제공하는 과정을 나타낸 흐름도이다.5 is a flowchart illustrating a process of providing feature points of an input image.

도 6a 내지 도 6c는 휘도-색도 좌표 상의 이미지 데이터 분포의 일 예를 나타낸 도면이다. 6A to 6C are diagrams illustrating an example of image data distribution on luminance-chromatic coordinates.

도 7은 본 발명의 일 실시예에 따른 광원 검출 과정을 나타낸 흐름도이다.7 is a flowchart illustrating a light source detection process according to an embodiment of the present invention.

도 8a 내지 도 8g는 광원 검출 과정을 설명하기 위한 도면이다. 8A to 8G are views for explaining a light source detection process.

<도면의 주요 부분에 관한 부호의 설명><Explanation of symbols on main parts of the drawings>

110 : 휘도-색도 매핑 모듈 120 : 검색 모듈110: luminance-chromatic mapping module 120: search module

130 : 특징 분석 모듈 140 : 광원 검출 모듈130: feature analysis module 140: light source detection module

150 : 백색 조절 모듈150: white control module

본 발명은 자동 백색 조절 방법 및 장치에 관한 것으로서, 더욱 상세하게는 이미지 내에 도미넌트 색도(dominant chroma)를 갖는 오브젝트가 유입되는 경우에도 일관된 색 재현 성능을 제공하는 자동 백색 조절 방법 및 장치에 관한 것이다.The present invention relates to an automatic white adjustment method and apparatus, and more particularly, to an automatic white adjustment method and apparatus that provides consistent color reproduction performance even when an object having a dominant chroma is introduced into an image.

빛에는 색온도라 불리는 특유의 색이 있는데, 그 단위로 켈빈(K)이 사용된다. 일반적으로, 인간의 시각 능력은 자동으로 색에 대한 감수성을 조절하기 때문에 어떤 색온도의 빛이 비추어지더라도 색채에 대한 인간의 인식 차이는 매우 미미하다. 그러나, 카메라나 캠코더와 같은 이미지 픽업(pick up) 장치는 색온도가 반영된 색채를 그대로 감지하기 때문에 광원이 변하게 되면 이미지 픽업 장치가 촬영한 이미지들이 서로 다른 색채를 띠게 된다. Light has a unique color called color temperature, and Kelvin (K) is used as a unit. In general, the human visual ability automatically adjusts the sensitivity to color, so the difference in human perception of color is insignificant no matter what color temperature light shines on. However, since an image pick-up device such as a camera or a camcorder detects the color reflecting the color temperature as it is, when the light source is changed, the images picked up by the image pickup device have different colors.

예를 들면, 맑은 날 태양광은 색온도가 높기 때문에 이미지 픽업 장치가 촬영한 이미지는 전체적으로 청색을 띠는 반면, 일출이나 일몰 시간대의 태양광은 색온도가 낮기 때문에 이미지 픽업 장치가 촬영한 이미지는 전체적으로 붉은색을 띠게 된다. 이러한 문제점을 개선하기 위하여 제안된 자동 백색 조절 기술은 촬영된 이미지가 색온도에 따라서 적색(R), 녹색(G), 청색(B) 성분 중 적어도 한 방향으로 편향되는 경우, 이미지의 색조가 왜곡되는 현상을 보정해주는 역할을 한다. 여기 서 자동 백색 조절 기술은 자동 화이트 밸런스 기술로 불리기도 한다. For example, the image taken by the image pickup device is generally blue due to the high color temperature on sunny days, while the image taken by the image pickup device is entirely red because the sunlight during sunrise or sunset is low. It is colored. In order to solve this problem, the proposed automatic white adjustment technique is used to distort the color tone of an image when the photographed image is deflected in at least one of red (R), green (G) and blue (B) components according to the color temperature. It corrects the phenomenon. The automatic white adjustment technique here is also called automatic white balance technique.

그러나 종래의 자동 백색 조절 기술은 이미지 내에 도미넌트 색도를 갖는 오브젝트가 유입되는 경우 동일한 광원 하에서도 색 재현 결과가 일관적이지 않은 문제점이 있었다. However, the conventional automatic white adjustment technique has a problem in that color reproduction results are inconsistent even under the same light source when an object having a dominant chromaticity is introduced into an image.

본 발명은 이미지 내에 도미넌트 색도를 갖는 오브젝트가 유입되는 경우에도 일관된 색 재현 성능을 제공하는데 그 목적이 있다.An object of the present invention is to provide consistent color reproduction performance even when an object having a dominant chromaticity is introduced into an image.

본 발명의 목적들은 이상에서 언급한 목적들로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The objects of the present invention are not limited to the above-mentioned objects, and other objects that are not mentioned will be clearly understood by those skilled in the art from the following description.

상기 목적을 달성하기 위하여, 본 발명의 실시예에 따른 자동 백색 조절 방법은 입력된 이미지가 도미넌트 색도를 갖는 오브젝트를 포함하는 경우, 상기 이미지의 색채적 특징을 갖는 복수의 특징 포인트를 제공하는 단계, 상기 복수의 특징 포인트를 사용하여 제1 광원 정보를 검출하는 단계, 상기 이미지를 구성하는 데이터 중에서 상기 제1 광원 정보의 색도와 임계치 이내의 색도차를 나타내는 데이터들의 평균 색도를 계산하는 단계, 및 상기 평균 색도를 소정의 광원 궤도에 매핑하여 제2 광원 정보를 제공하는 단계를 포함한다. In order to achieve the above object, the automatic white adjustment method according to an embodiment of the present invention, when the input image includes an object having a dominant chromaticity, providing a plurality of feature points having the chromatic characteristics of the image, Detecting first light source information using the plurality of feature points, calculating an average chromaticity of data representing chromaticity differences within a threshold and chromaticity of the first light source information among data constituting the image, and Mapping the average chromaticity to a predetermined light source trajectory to provide second light source information.

상기 목적을 달성하기 위하여, 본 발명의 실시예에 따른 자동 백색 조절 장치는 입력된 이미지가 도미넌트 색도를 갖는 오브젝트를 포함하는 경우, 상기 이미 지의 색채적 특징을 갖는 복수의 특징 포인트를 제공하는 특징 분석 모듈, 및 상기 복수의 특징 포인트를 사용하여 제1 광원 정보를 검출하고, 상기 이미지를 구성하는 데이터 중에서 상기 제1 광원 정보의 색도와 임계치 이내의 색도차를 나타내는 데이터들의 평균 색도를 계산하고, 상기 평균 색도를 소정의 광원 궤도에 매핑하여 제2 광원 정보를 제공하는 광원 검출 모듈을 포함한다. In order to achieve the above object, the automatic white adjustment device according to an embodiment of the present invention, when the input image includes an object having a dominant chromaticity, feature analysis that provides a plurality of feature points having the color characteristics of the image A module, and the plurality of feature points are used to detect first light source information, calculate an average chromaticity of data representing chromaticity differences within a threshold and chromaticity of the first light source information among the data constituting the image; And a light source detection module for mapping the average chromaticity to a predetermined light source trajectory to provide second light source information.

기타 실시예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다. Specific details of other embodiments are included in the detailed description and the drawings.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Advantages and features of the present invention and methods for achieving them will be apparent with reference to the embodiments described below in detail with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but can be implemented in various different forms, and only the embodiments make the disclosure of the present invention complete, and the general knowledge in the art to which the present invention belongs. It is provided to fully inform the person having the scope of the invention, which is defined only by the scope of the claims. Like reference numerals refer to like elements throughout.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 자동 백색 조절 장치를 나타낸 블록도이다.1 is a block diagram showing an automatic white adjustment apparatus according to an embodiment of the present invention.

도시된 자동 백색 조절 장치는 휘도-색도 매핑 모듈(110), 검색 모듈(120), 특징 분석 모듈(130), 광원 검출 모듈(140), 및 백색 조절 모듈(150)을 포함한다. The illustrated automatic white adjustment device includes a luminance-chromatic mapping module 110, a search module 120, a feature analysis module 130, a light source detection module 140, and a white adjustment module 150.

휘도-색도 매핑 모듈(110)은 입력되는 이미지에 포함된 데이터들을 YCrCb 데이터로 변환한다. The luminance-chromatic mapping module 110 converts data included in the input image into YCrCb data.

검색 모듈(120)은 입력되는 이미지를 분석하여 이미지 내에서 도미넌트 색도를 갖는 오브젝트(이하 도미넌트 오브젝트라 한다)를 검색한다. 이를 위하여 검색 모듈(120)은 도 2에 도시한 바와 같이 입력된 이미지를 복수의 기준 영역으로 구분하고, 각 기준 영역을 다시 복수의 서브 영역으로 구분할 수 있다. 여기서 기준 영역은 이미지에서 일반적으로 도미넌트 오브젝트가 유입될 가능성이 높은 영역들로 사전에 설정되어 있을 수 있다. 검색 모듈(120)은 각 기준 영역 별로 기준 영역을 구성하는 데이터들(또는 픽셀들)의 평균 색도(이하 기준 영역의 평균 색도라 한다)와 기준 영역에 포함되는 서브 영역별로 서브 영역을 구성하는 데이터들(또는 픽셀들)의 평균 색도(이하 서브 영역의 평균 색도라 한다)를 계산한다. 그 후 검색 모듈(120)은 기준 영역의 평균 색도와 기준 영역에 포함되는 서브 영역들의 평균 색도들 간의 차이 값을 계산한다. The search module 120 analyzes the input image and searches for an object having a dominant chromaticity (hereinafter, referred to as a dominant object) in the image. To this end, the search module 120 may divide the input image into a plurality of reference regions and divide each of the reference regions into a plurality of sub-regions as shown in FIG. 2. Here, the reference region may be set in advance as regions where the dominant object is generally likely to flow in the image. The search module 120 may configure an average chromaticity (hereinafter referred to as an average chromaticity of the reference region) of the data (or pixels) constituting the reference region for each reference region and data configuring the subregion for each subregion included in the reference region. The average chromaticity of the pixels (or pixels) (hereinafter referred to as the average chromaticity of the sub-regions). Thereafter, the search module 120 calculates a difference value between the average chromaticity of the reference region and the average chromaticities of the subregions included in the reference region.

어느 한 기준 영역의 평균 색도와 상기 기준 영역에 포함되는 서브 영역으로서 상기 기준 영역의 평균 색도와의 차이 값이 소정의 임계치 미만인 평균 색도를 갖는 서브 영역이 상기 기준 영역에 포함된 복수의 서브 영역 중에서 임계 비율 이상을 차지한다면, 검색 모듈(120)은 상기 기준 영역에 도미넌트 오브젝트가 유입된 것으로 판단할 수 있다. 여기서 임계치는 다양한 실험을 통하여 도미넌트 오브젝트의 유입 여부를 판별하는데 적절한 수치로 사전에 설정되어 있을 수 있다. Among a plurality of sub-areas included in the reference area, a sub-area having an average chromaticity of one reference area and an average chromaticity of which a difference value between the average chromaticity of the reference area is less than a predetermined threshold is included in the reference area. If it occupies more than a threshold ratio, the search module 120 may determine that a dominant object has flowed into the reference region. Here, the threshold value may be set in advance to a value suitable for determining whether the dominant object is introduced through various experiments.

특징 분석 모듈(130)은 입력된 이미지의 색채적 특징을 갖는 복수의 특징 포 인트를 제공한다. 여기서 복수의 특징 포인트는 입력된 이미지를 구성하는 데이터 중에서 최대 휘도 값을 갖는 데이터(이하 최대 휘도 포인트이라 한다)와 최소 휘도 값을 갖는 데이터(이하 최소 휘도 포인트이라 한다), 입력된 이미지에서 도미넌트 오브젝트를 구성하는 데이터들의 평균 휘도와 평균 색도를 갖는 기준 포인트, 및 입력된 이미지를 구성하는 데이터 중에서 도미넌트 오브젝트의 데이터 이외의 잔여 데이터들로 구성되는 두 개의 그룹에 포함되는 데이터들의 평균 휘도와 평균 색도를 갖는 제1 클러스터링 포인트와 제2 클러스터링 포인트를 포함한다. The feature analysis module 130 provides a plurality of feature points having chromatic features of the input image. Here, the plurality of feature points may include data having a maximum luminance value (hereinafter referred to as a maximum luminance point) and data having a minimum luminance value (hereinafter referred to as a minimum luminance point) among data constituting the input image, and a dominant object in the input image. A reference point having an average luminance and an average chromaticity of the data constituting the, and the average luminance and the average chromaticity of the data included in two groups consisting of residual data other than the data of the dominant object among the data constituting the input image. And a first clustering point having a second clustering point.

이러한 특징 포인트들은 검색 모듈(120)이 입력된 이미지에서 도미넌트 오브젝트를 검출한 경우에 제공될 수 있으며, 특징 분석 모듈(130)이 특징 포인트를 제공하는 과정은 도 3을 참조하여 후술하도록 한다. These feature points may be provided when the search module 120 detects a dominant object in the input image, and the process of providing the feature point by the feature analysis module 130 will be described later with reference to FIG. 3.

광원 검출 모듈(140)은 특징 분석 모듈(130)이 제공하는 특징 포인트를 사용하여 1차 광원 정보를 검출한다. 1차 광원 정보는 입력된 이미지에서 최종적인 광원 정보를 검출하기 위하여 사용되는 임시적인 광원 정보이다. 광원 검출 모듈(140)은 입력된 이미지를 구성하는 데이터 중에서 1차 광원 정보의 색도와 임계치 이내의 색도차를 갖는 데이터들을 검색하고 검색된 데이터들의 평균 색도를 계산한다. 여기서 임계치는 환경 변화에 따라서 광원 정보를 잘 표현할 수 있는 데이터들의 바운더리를 나타내며, 실험을 통하여 적절한 값으로 사전에 설정될 수 있다. 그 후, 광원 검출 모듈(140)은 계산된 평균 색도를 갖는 그레이시 포인트(grayish point)를 소정의 광도 궤적(illuminant locus)에 매핑하여 최종 광원 정보를 검출한다. 광원 검출 모듈(140)이 최종 광원 정보를 검출하는 과정은 도 4 를 참조하여 후술하도록 한다. The light source detection module 140 detects primary light source information by using feature points provided by the feature analysis module 130. The primary light source information is temporary light source information used to detect final light source information in the input image. The light source detection module 140 searches for data having a chromaticity difference within a threshold and chromaticity of the primary light source information among the data constituting the input image and calculates an average chromaticity of the retrieved data. Here, the threshold represents a boundary of data that can express the light source information according to the change of environment, and may be set to an appropriate value in advance through an experiment. Thereafter, the light source detection module 140 detects final light source information by mapping a grayish point having a calculated average chromaticity to a predetermined luminance locus. The process of detecting the final light source information by the light source detection module 140 will be described later with reference to FIG. 4.

백색 조절 모듈(150)은 최종 광원 정보를 사용하여 입력되는 이미지에 대한 화이트 밸런싱 작업을 수행한다. The white adjustment module 150 performs a white balancing operation on the input image using the final light source information.

도 1의 설명에서 '모듈'은 소프트웨어 또는 Field Programmable Gate Array(FPGA) 또는 주문형 반도체(Application Specific Integrated Circuit, ASIC)과 같은 하드웨어 구성요소를 의미하며, 모듈은 어떤 역할들을 수행한다. 그렇지만 모듈은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. 모듈은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 실행시키도록 구성될 수도 있다. 따라서, 일 예로서 모듈은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들, 및 변수들을 포함한다. 구성요소들과 모듈들에서 제공되는 기능은 더 작은 수의 구성요소들 및 모듈들로 결합되거나 추가적인 구성요소들과 모듈들로 더 분리될 수 있다.In the description of FIG. 1, a module refers to a hardware component such as software or a field programmable gate array (FPGA) or an application specific integrated circuit (ASIC), and the module plays certain roles. However, modules are not meant to be limited to software or hardware. The module may be configured to be in an addressable storage medium and may be configured to execute one or more processors. Thus, as an example, a module may include components such as software components, object-oriented software components, class components, and task components, and processes, functions, properties, procedures, subroutines. , Segments of program code, drivers, firmware, microcode, circuits, data, databases, data structures, tables, arrays, and variables. The functionality provided by the components and modules may be combined into a smaller number of components and modules or further separated into additional components and modules.

이하 도 3 내지 도 8g를 참조하여 자동 백색 조절 방법에 대하여 설명하도록 한다. Hereinafter, an automatic white adjustment method will be described with reference to FIGS. 3 to 8G.

도 3은 입력된 이미지에서 도미넌트 오브젝트를 검색하는 과정을 나타낸 흐름도이다. 도 3의 과정은 도 1을 참조하여 설명한 자동 백색 조절 장치의 검색 모듈(120)에 의하여 수행된다. 3 is a flowchart illustrating a process of searching for a dominant object in an input image. The process of FIG. 3 is performed by the search module 120 of the automatic white adjustment device described with reference to FIG. 1.

휘도-색도 매핑 모듈(110)에 의하여 YCrCb 데이터로 변환된 이미지가 입력되면(S310), 검색 모듈(120)은 입력된 이미지를 도 2에서 예시한 바와 같이 복수의 기준 영역으로 구분하고(S320), 각 기준 영역을 복수의 서브 영역으로 구분한다(S330). 도 2에서는 하나의 이미지를 5개의 기준 영역으로 구분하고, 각 기준 영역을 16개의 서브 영역으로 구분하였으나 본 발명은 이에 한정되지 않는다. When the image converted into YCrCb data is input by the luminance-chromatic mapping module 110 (S310), the search module 120 divides the input image into a plurality of reference regions as illustrated in FIG. 2 (S320). Each reference area is divided into a plurality of sub areas (S330). In FIG. 2, one image is divided into five reference regions, and each reference region is divided into sixteen sub regions, but the present invention is not limited thereto.

그 후, 검색 모듈(120)은 각 기준 영역 별로, 각 기준 영역의 평균 색도와 해당 기준 영역을 구성하는 서브 영역의 평균 색도를 계산한다(S340). 그 후, 검색 모듈(120)은 각 기준 영역 별로 기준 영역의 평균 색도와 해당 기준 영역을 구성하는 서브 영역들의 평균 색도들 간의 차이를 구한다(S350). Thereafter, the search module 120 calculates the average chromaticity of each reference region and the average chromaticity of the subregions constituting the reference region for each reference region (S340). Thereafter, the search module 120 calculates a difference between the average chromaticities of the reference areas and the average chromaticities of the sub areas constituting the reference area for each reference area (S350).

구해진 차이가 소정의 임계치 보다 작은 서브 영역이 존재하고 그 개수가 해당 기준 영역을 구성하고 있는 전체 서브 영역의 개수에 대해서 일정 비율 이상을 차지할 경우(S360), 검색 모듈(120)은 해당 기준 영역으로 도미넌트 오브젝트가 유입된 것으로 판단할 수 있다(S370). 이에 대한 구체적인 예를 도 4를 참조하여 설명하도록 한다. If there is a sub-area whose difference is smaller than a predetermined threshold and the number occupies a predetermined ratio or more with respect to the total number of sub-areas constituting the reference area (S360), the search module 120 returns to the corresponding reference area. It may be determined that the dominant object is introduced (S370). A detailed example thereof will be described with reference to FIG. 4.

도 4는 이미지 상의 어느 한 기준 영역(410)을 도시한 것인데, 도시된 기준 영역(410)은 16개의 서브 영역으로 구성되어 있다. 기준 영역(410)에 포함되는 데이터들의 평균 색도를 R1이라 하고, 16개의 서브 영역들 각각에 포함되는 데이터들의 평균 색도를 r1 내지 r16이라 한다. 평균 색도의 계산은 도 3의 과정 S340에서 수행된다. 4 illustrates one reference region 410 on the image, and the illustrated reference region 410 is composed of 16 sub-regions. The average chromaticity of the data included in the reference area 410 is referred to as R1, and the average chromaticity of the data included in each of the 16 subregions is referred to as r1 to r16. The calculation of the average chromaticity is performed in step S340 of FIG. 3.

그 후에 도 3에서 수행되는 과정 S350을 통해서 r1 내지 r16 각각을 R1과 비 교하고 이들간의 차이값을 계산하는 작업이 수행된다. 계산 결과, R1과의 차이값이 임계치 미만인 평균 색도를 갖는 서브 영역의 개수가 8개였다면, 이들이 기준 영역(410)에서 차지하는 비율은 50%가 된다. 만약, 도 3의 과정 S360에서 언급된 임계 비율이 40%라면, 기준 영역(410)의 서브 영역들 중에서 기준 영역(410)의 평균 색도 R1과의 차이값이 임계치 미만인 평균 색도를 갖는 서브 영역의 비율이 임계 비율보다 높으므로, 도 3의 과정 S360 및 S370에 의해서 기준 영역(410)에 도미넌트 오브젝트가 유입된 것으로 판단할 수 있게 된다. Thereafter, a process of comparing each of r1 to r16 with R1 and calculating a difference therebetween is performed through the process S350 performed in FIG. 3. As a result of the calculation, if the number of sub-regions having an average chromaticity whose difference with R1 is less than the threshold is eight, the proportion of the sub-regions in the reference region 410 is 50%. If the threshold ratio mentioned in the process S360 of FIG. 3 is 40%, the difference between the average chromaticity R1 of the reference region 410 and the sub-region having an average chromaticity is less than the threshold value among the subregions of the reference region 410. Since the ratio is higher than the threshold ratio, it may be determined that the dominant object is introduced into the reference region 410 by the processes S360 and S370 of FIG. 3.

한편, 과정 S360의 판단 결과 이미지 내에서 도미넌트 오브젝트가 존재하는 기준 영역이 없다면, 종래의 기술에서와 같이 이미지 내의 모든 데이터들을 기반으로 하여 광원을 검출하는 작업이 수행될 수 있다.On the other hand, if there is no reference region in which the dominant object exists in the image as a result of the determination in step S360, the operation of detecting the light source based on all data in the image may be performed as in the related art.

도 5는 입력된 이미지의 특징 포인트를 제공하는 과정을 나타낸 흐름도이다. 도 5의 과정은 도 3의 과정을 통해서 이미지에 도미넌트 오브젝트가 존재하는 것으로 판단된 경우 도 1을 참조하여 설명한 자동 백색 조절 장치의 특징 분석 모듈(130)에 의하여 수행될 수 있다. 5 is a flowchart illustrating a process of providing feature points of an input image. 5 may be performed by the feature analysis module 130 of the automatic white adjustment apparatus described with reference to FIG. 1 when it is determined that the dominant object exists in the image through the process of FIG. 3.

먼저 특징 분석 모듈(130)은 이미지에 포함된 데이터 중에서 최대 휘도 포인트와 최소 휘도 포인트를 추출한다(S510). 이미지에 포함되는 데이터를 휘도-색도 공간 상에 분포시킬 경우, 최대 휘도 포인트와 최소 휘도 포인트는 도 6a에 도시한 예로 이해될 수 있을 것이다. First, the feature analysis module 130 extracts the maximum luminance point and the minimum luminance point from the data included in the image (S510). When data included in the image is distributed in the luminance-chromatic space, the maximum luminance point and the minimum luminance point may be understood as the example shown in FIG. 6A.

그 후, 특징 분석 모듈(130)은 이미지에 포함된 데이터 중에서 도미넌트 오브젝트에 해당하는 데이터를 추출하고(S520), 추출된 데이터의 평균 휘도 및 평균 색도를 갖는 기준 포인트를 설정한다(S530). Thereafter, the feature analysis module 130 extracts data corresponding to the dominant object from the data included in the image (S520), and sets a reference point having the average luminance and the average chromaticity of the extracted data (S530).

여기서, 도미넌트 오브젝트에 해당하는 데이터는 기준 영역과 서브 영역 간의 색도 차를 통하여 검출될 수 있다. 예를 들어, 특징 분석 모듈(130)은 검색 모듈(120)에 의하여 도미넌트 오브젝트가 유입되었다고 판단되는 기준 영역에 대하여, 상기 기준 영역의 평균 색도와 상기 기준 영역을 구성하는 각 서브 영역들의 평균 색도들을 계산한다. 그 후, 특징 분석 모듈(130)은 기준 영역의 평균 색도와 각 서브 영역의 평균 색도를 비교하여 그 차이가 임계치보다 작은 서브 영역에 포함되는 데이터를 도미넌트 오브젝트의 데이터로 판단할 수 있다. 물론 특징 분석 모듈(130)은 기준 영역의 평균 색도와 서브 영역들의 평균 색도들을 직접 계산하지 않고, 검색 모듈(120)이 도미넌트 오브젝트의 유입 여부를 판단하기 위하여 계산한 결과를 사용할 수도 있다. Here, data corresponding to the dominant object may be detected through a chromaticity difference between the reference area and the sub area. For example, the feature analysis module 130 may calculate the average chromaticity of the reference region and the average chromaticity of each sub-region constituting the reference region with respect to the reference region determined by the search module 120 that the dominant object is introduced. Calculate Thereafter, the feature analysis module 130 may compare the average chromaticity of the reference region with the average chromaticity of each subregion and determine the data included in the subregion whose difference is smaller than the threshold as the data of the dominant object. Of course, the feature analysis module 130 may not directly calculate the average chromaticity of the reference region and the average chromaticity of the subregions, but may use the result calculated by the search module 120 to determine whether the dominant object is introduced.

이미지를 구성하는 데이터들의 색도 좌표상의 분포가 도 6b와 같은 상태에서 도미넌트 오브젝트의 데이터가 추출되고 남은 잔여 데이터들은 도 6c에 도시된 바와 같이 특징 분석 모듈(130)에 의하여 두개의 그룹으로 클러스터링 된다(S540). 그 후 특징 분석 모듈(130)은 클러스터링된 각 그룹 별로 각 그룹의 데이터들의 평균 휘도와 평균 색도를 갖는 클러스터링 포인트를 설정한다(S550). 과정 S540에서 잔여 데이터들을 클러스터링하기 위하여 다양한 유형의 클러스터링 기법이 사용될 수 있다. 일 예로써 특징 분석 모듈(130)은 simplified K mean 클러스터링 기법을 사용하여 잔여 데이터들을 클러스터링할 수 있다. In the state where the distribution in the chromaticity coordinates of the data constituting the image is as shown in FIG. 6B, the data of the dominant object is extracted and the remaining data are clustered into two groups by the feature analysis module 130 as shown in FIG. 6C ( S540). Thereafter, the feature analysis module 130 sets a clustering point having an average luminance and an average chromaticity of data of each group for each clustered group (S550). Various types of clustering techniques may be used to cluster the residual data in step S540. As an example, the feature analysis module 130 may cluster residual data using a simplified K mean clustering technique.

이에 따라서 특징 분석 모듈(130)은 입력된 이미지의 색채적 특성을 갖는 5 개의 특징 포인트인 최대 휘도 포인트, 최소 휘도 포인트, 기준 포인트, 및 두개의 클러스터링 포인트를 제공하게 된다.Accordingly, the feature analysis module 130 provides five feature points having the chromatic characteristics of the input image, that is, a maximum luminance point, a minimum luminance point, a reference point, and two clustering points.

특징 포인트가 제공되면, 도 1에서 설명한 광원 검출 모듈(140)에 의한 광원 검출 작업이 수행되며 이를 도 7을 참조하여 설명하도록 한다. When the feature point is provided, the light source detection operation by the light source detection module 140 described with reference to FIG. 1 is performed, which will be described with reference to FIG. 7.

도 7은 본 발명의 일 실시예에 따른 광원 검출 과정을 나타낸 흐름도이다. 본 흐름도에서 광원 검출 모듈(140)은 도미넌트 오브젝트의 데이터가 무채색(achromatic)인지 유채색(chromatic)인지를 구분함으로써, 광원 정보 검출의 기초 자료로서 도미넌트 오브젝트의 데이터를 포함시킬 것인지의 여부를 판단하게 된다. 7 is a flowchart illustrating a light source detection process according to an embodiment of the present invention. In this flowchart, the light source detection module 140 determines whether the data of the dominant object is achromatic or chromatic, thereby determining whether to include the data of the dominant object as basic data for detecting the light source information. .

우선 광원 검출 모듈(140)은 최대 휘도 포인트와 최소 휘도 포인트 간의 색도차(이하 D1이라 한다)를 계산한다(S710). 예를 들어 광원 검출 모듈(140)은 도 8a에 도시한 바와 같이 최대 휘도 포인트와 최소 휘도 포인트를 색도 좌표(Cr-Cb 좌표)에 투영시키고, 색도 좌표에서 두 데이터 간의 거리를 구할 수 있는데, 이 때의 거리가 D1이 된다. First, the light source detection module 140 calculates a chromaticity difference (hereinafter, referred to as D1) between the maximum luminance point and the minimum luminance point (S710). For example, the light source detection module 140 may project the maximum luminance point and the minimum luminance point to chromaticity coordinates (Cr-Cb coordinates) as shown in FIG. 8A, and obtain a distance between the two data in the chromaticity coordinates. When the distance is D1.

이와 유사하게, 광원 검출 모듈(140)은 두 클러스터링 포인트 간의 색도차(이하 D2라 한다)를 계산한다(S715). Similarly, the light source detection module 140 calculates a chromaticity difference (hereinafter referred to as D2) between two clustering points (S715).

D1이 작을수록 최대 휘도 포인트의 색도와 최소 휘도 포인트의 색도 사이에 많은 광원 정보가 포함되며, D2가 클수록 이미지의 산포도가 크다. 따라서 광원 검출 모듈(140)은 D1과 D2를 비교함으로써 도미넌트 오브젝트에 의한 영향으로 입력된 이미지의 색채가 변화될 가능성을 체크할 수 있다. The smaller D1 is, the more light source information is included between the chromaticity of the maximum luminance point and the chromaticity of the minimum luminance point. The larger the D2, the larger the scatter of the image. Accordingly, the light source detection module 140 may check the possibility that the color of the input image is changed due to the influence of the dominant object by comparing D1 and D2.

이를 보다 구체적으로 설명하면 우선, 광원 검출 모듈(140)은 D1가 D2보다 작은지 비교한다(S720). 만약 D1이 D2보다 작다면 광원 검출 모듈(140)은 도미넌트 오브젝트의 평균 색도값을 나타내는 기준 포인트가 색도 좌표 상에서 D2의 범위 내에 존재하는지 판단한다(S725). 여기서, 기준 포인트가 D2의 범위 내에 존재한다는 의미는 기준 포인트가 제1 클러스터링 포인트의 색도값(Cr 및 Cb)과 제2 클러스터링 포인트의 색도값(Cr 및 Cb)의 사이에 존재한다는 의미이다. 예를 들어 제1 클러스터링 포인트와 제2 클러스터링 포인트가 도 8b에 도시된 바와 같이 색도 좌표 상에 존재할 경우, 제1 클러스터링 포인트와 제2 클러스터링 포인트의 Cr 및 Cb 값을 경계로 하여 구획되는 영역(명암처리된 영역) 내에 기준 포인트가 존재하면, 기준 포인트가 색도 좌표 상에서 D2의 범위 내에 존재한다고 말할 수 있는 것이다. In more detail, first, the light source detection module 140 compares whether D1 is smaller than D2 (S720). If D1 is smaller than D2, the light source detection module 140 determines whether a reference point representing the average chromaticity value of the dominant object exists within the range of D2 on the chromaticity coordinates (S725). Here, the reference point is within the range of D2 means that the reference point exists between the chromaticity values Cr and Cb of the first clustering point and the chromaticity values Cr and Cb of the second clustering point. For example, when the first clustering point and the second clustering point exist on chromaticity coordinates as shown in FIG. 8B, an area (contrast) that is partitioned on the basis of Cr and Cb values of the first clustering point and the second clustering point If there is a reference point in the processed area), it can be said that the reference point exists in the range of D2 on the chromaticity coordinate.

만약 D1이 D2보다 작고, D2의 범위 내에 기준 포인트가 존재한다면, 입력된 이미지는 도미넌트 오브젝트에 의한 영향을 받지 않은 정상 이미지(usual image)로 구분될 수 있다. 참고로, 입력 이미지가 정상 이미지(usual image)인 경우, 특징 분석 모듈(130)이 제공하는 특징 포인트들의 휘도-색도 좌표 상 배치 예는 도 8c에 도시한 바와 같다. If D1 is smaller than D2 and a reference point exists within the range of D2, the input image may be divided into a normal image which is not affected by the dominant object. For reference, when the input image is a normal image, an example of arrangement on the luminance-chromatic coordinates of the feature points provided by the feature analysis module 130 is illustrated in FIG. 8C.

D1이 D2보다 작고 D2의 범위 내에 도미넌트 오브젝트의 색도 평균값이 존재하는 경우에는 도미넌트 오브젝트의 데이터가 무채색(achromatic) 데이터인 것으로 판단할 수 있으며, 광원 검출 모듈(140)은 이미지에 포함된 모든 데이터들을 바탕으로 하여 광원 정보를 검출한다(S730). 여기서, 광원 정보를 검출하기 위하여 종래의 광원 검출 기법이 사용될 수 있다. When D1 is smaller than D2 and the chromatic average value of the dominant object exists within the range of D2, the data of the dominant object may be determined as achromatic data, and the light source detection module 140 may determine all the data included in the image. On the basis of the detection of the light source information (S730). Here, a conventional light source detection technique may be used to detect light source information.

한편, 과정 S720의 판단 결과 D1이 D2 보다 작지 않거나, 과정 S725의 판단 결과 D2 범위 내에 도미넌트 오브젝트의 평균 색도값을 나타내는 기준 포인트가 존재하지 않는다면, 입력된 이미지는 도미넌트 오브젝트에 의한 영향으로 색채가 변질되었을 가능성이 있는 비정상 이미지(unusual image)로 구분될 수 있다. 참고로, 입력 이미지가 비정상 이미지(unusual image)인 경우, 특징 분석 모듈(130)이 제공하는 특징 포인트들의 휘도-색도 좌표 상 배치 예는 도 8d에 도시한 바와 같다. 즉, D1이 D2 이상이거나, D1이 D2 보다 작더라도 D2 범위 내에 도미넌트 오브젝트의 평균 색도값을 나타내는 기준 포인트가 존재하지 않는 경우에는 도미넌트 오브젝트의 데이터가 유채색(chromatic) 데이터일 가능성이 있다. On the other hand, if the determination result D1 of step S720 is not smaller than D2 or if the reference point indicating the average chromaticity value of the dominant object does not exist within the range D2 of the determination result of step S725, the input image is changed in color due to the influence of the dominant object. It can be classified as an unusual image that may have been. For reference, when the input image is an unusual image, an example of arrangement on the luminance-chromatic coordinates of the feature points provided by the feature analysis module 130 is illustrated in FIG. 8D. That is, even if D1 is greater than or equal to D2 or D1 is smaller than D2, if there is no reference point representing the average chromaticity value of the dominant object in the D2 range, the data of the dominant object may be chromatic data.

도미넌트 오브젝트의 데이터가 유채색 데이터인지 무채색 데이터인지 식별하기 위하여 광원 검출 모듈(140)은 우선, 최대 휘도 포인트와 최소 휘도 포인트 중에서 광원과 가깝다고 판단되는 포인트(이하 비교 포인트라 한다)를 선택한다(S735). 이를 위하여, 광원 검출 모듈(140)은 최대 휘도 포인트 및 최소 휘도 포인트를 도미넌트 오브젝트의 데이터 중에서 최대 휘도를 갖는 데이터 및 최소 휘도를 갖는 데이터와 비교할 수 있다. In order to identify whether the data of the dominant object is colored or achromatic data, the light source detecting module 140 first selects a point (hereinafter referred to as a comparison point) that is determined to be close to the light source among the maximum luminance point and the minimum luminance point (S735). . To this end, the light source detection module 140 may compare the maximum luminance point and the minimum luminance point with data having the maximum luminance and data having the minimum luminance among the data of the dominant object.

보다 구체적으로 설명하면, 광원 검출 모듈(140)은 도미넌트 오브젝트의 데이터 중에서 최대 휘도를 갖는 데이터 및 최소 휘도를 갖는 데이터의 색도차(이하 D3라 한다)와 D1 사이의 오버랩(overlap) 여부를 사용하여 비교 포인트를 선택할 수 있다. 여기서 D1과 D3가 오버랩 된다는 것는, 이미지 내의 최대 휘도 포인트의 색도값과 최소 휘도 포인트의 색도값을 경계로 하는 색도 영역이 도미넌트 오브젝 트에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터의 색도값들을 경계로 하는 색도 영역과 중첩된다는 의미이다. 예를 들어, 최대 휘도 포인트, 최소 휘도 포인트, 및 도미넌트 오브젝트에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터가 도 8e에 도시된 바와 같이 색도 좌표 상에 존재하는 상태에서, 최대 휘도 포인트와 최소 휘도 포인트의 Cr 및 Cb 값을 경계로 하여 구획되는 영역(810)이 도미넌트 오브젝트에서 최대 휘도를 갖는 데이터(830)와 최소 휘도를 갖는 데이터(840)의 Cr 및 Cb 값을 경계로 하여 구획되는 영역(820)과 중첩되는 경우 D1과 D3가 오버랩 된다고 말할 수 있는 것이다. In more detail, the light source detection module 140 uses an overlap between the chromaticity difference (hereinafter, referred to as D3) of the data having the maximum luminance and the data having the minimum luminance among the data of the dominant object (hereinafter, referred to as D3) and D1. You can select a comparison point. Here, overlapping of D1 and D3 means that the chromaticity value of the chromaticity area bounded by the chromaticity value of the maximum luminance point and the chromaticity value of the minimum luminance point in the dominant object is the chromaticity value of the data having the maximum luminance and the minimum luminance. This means that it overlaps with the chromaticity area around them. For example, in the state where the maximum luminance point, the minimum luminance point, and the data having the maximum luminance and the minimum luminance in the dominant object exist on the chromaticity coordinates as shown in FIG. 8E, the maximum luminance point and the minimum luminance are present. An area 810 partitioned on the basis of Cr and Cb values of a point is partitioned on the basis of the Cr and Cb values of the data 830 having the maximum luminance and the data 840 having the minimum luminance in the dominant object. If overlapping with 820, it can be said that D1 and D3 overlap.

일반적으로 휘도 변화에 따른 색도 데이터의 천이 경향을 보면, 전체 이미지 내에 존재하는 높은 휘도의 색도 값이 상대적으로 더 높은 휘도의 색도 값으로 천이될 경우 또는 전체 이미지 내에 존재하는 낮은 휘도의 색도 값이 상대적으로 더 낮은 휘도의 색도 값으로 천이될 경우, 이 색도 값들은 무채색화되는 경향을 나타내게 된다. 따라서 D1과 D3가 색도 좌표 상에서 오버랩되면서 최대 휘도 포인트와 최소 휘도 포인트 중 어느 하나가 D3의 범위(도 8e의 색도 영역 820)에 포함된다면, 해당 포인트가 광원과 가까운 비교 포인트로 판단 된다. 도 8e의 경우에는 최대 휘도 포인트가 영역 820에 포함되어 있으므로 광원과 가장 가까운 비교 포인트로 판단될 수 있다. 또한, D1과 D3가 오버랩되면서 최대 휘도 포인트와 최소 휘도 포인트 중 어느 것도 D3의 범위에 포함되지 않는다면 최소 휘도 데이터가 광원과 가장 가까운 비교 포인트로 판단되고, D1과 D3가 오버랩하지 않는다면 최대 휘도 포인트와 최소 휘도 포인트 중에서 D3의 범위로부터 색도 거리가 더 먼 포인트가 광원과 가장 가까운 비교 포인트로 판단된다. In general, when the chromaticity data transitions due to the luminance change, the chromaticity value of the high luminance existing in the entire image is shifted to the chromaticity value of the higher luminance, or the chromaticity value of the low luminance existing in the entire image is relative. In the case of transition to a chromaticity value of lower luminance, these chromaticity values tend to become achromatic. Therefore, when D1 and D3 overlap on chromaticity coordinates and one of the maximum luminance point and the minimum luminance point is included in the range of D3 (chromatic region 820 of FIG. 8E), the point is determined to be a comparison point close to the light source. In the case of FIG. 8E, since the maximum luminance point is included in the area 820, it may be determined as the comparison point closest to the light source. Also, if D1 and D3 overlap and none of the maximum and minimum luminance points fall within the range of D3, the minimum luminance data is determined to be the closest comparison point to the light source, and if D1 and D3 do not overlap, the maximum luminance point and A point whose chromaticity distance is further from the range of D3 among the minimum luminance points is determined as the comparison point nearest to the light source.

비교 최대 휘도 포인트와 최소 휘도 포인트 중에서 광원과 가깝다고 판단되는 비교 포인트가 선택되면, 광원 검출 모듈(140)은 선택된 비교 포인트의 색도와 클러스터링 포인트들의 색도의 평균값 간의 색도차(이하 D4라 한다)를 계산한다(S740). 또한 광원 검출 모듈(140)은 과정 S735에서 선택된 비교 포인트의 색도와 도미넌트 오브젝트를 구성하는 데이터들의 평균 색도(기준 포인트의 색도) 간의 색도차(이하 D5라 한다)를 계산한다(S745). When the comparison point determined to be close to the light source is selected among the comparison maximum luminance point and the minimum luminance point, the light source detection module 140 calculates a chromaticity difference (hereinafter referred to as D4) between the chromaticity of the selected comparison point and the average value of the chromaticity of the clustering points. (S740). In addition, the light source detection module 140 calculates a chromaticity difference (hereinafter referred to as D5) between the chromaticity of the comparison point selected in step S735 and the average chromaticity (chrominity of the reference point) of the data constituting the dominant object (S745).

만약 D4가 D5 보다 크다면(S750), 광원 검출 모듈(140)은 도미넌트 오브젝트의 데이터를 무채색 데이터로 판단하고 이미지 내의 전 데이터를 바탕으로 하여 광원 정보를 검출한다(S730).If D4 is greater than D5 (S750), the light source detection module 140 determines the data of the dominant object as achromatic data and detects the light source information based on all data in the image (S730).

그러나 D4가 D5 보다 크지 않다면, 광원 검출 모듈(140)은 도미넌트 오브젝트의 데이터를 유채색 데이터로 판단하고 이미지에서 도미넌트 오브젝트의 데이터들을 제외한 잔여 데이터들을 바탕으로 하여 1차 광원 정보를 검출한다(S755). 과정 S755에서 1차 광원을 검출하기 위하여 사용하는 광원 검출 기법 역시 과정 S730에서와 마찬가지로 종래의 기술을 사용할 수 있다. 다만, 과정 S755에서는 1차 광원을 검출하기 위하여 이미지에서 도미넌트 오브젝트의 데이터들을 제외한 잔여 데이터들을 사용한다는 점이 과정 S730와 다르다. However, if D4 is not larger than D5, the light source detection module 140 determines the data of the dominant object as chromatic color data and detects the primary light source information based on the remaining data excluding the data of the dominant object in the image (S755). A light source detection technique used to detect the primary light source in step S755 may also use a conventional technique as in step S730. However, process S755 differs from process S730 in that residual data excluding data of the dominant object is used in the image to detect the primary light source.

1차 광원 정보가 검출되면, 광원 검출 모듈(140)은 도 8f에 도시한 바와 같이 이미지를 구성하는 데이터들 중에서 1차 광원 정보로부터 임계치 이내의 색도차를 갖는 데이터들을 검색하고(S760), 검색된 데이터들의 평균 색도를 계산한 다(S765). When the primary light source information is detected, the light source detection module 140 searches for data having a chromaticity difference within a threshold from the primary light source information among the data constituting the image as shown in FIG. 8F (S760). The average chromaticity of the data is calculated (S765).

그 후, 광원 검출 모듈(140)은 소정의 광원 궤적(illuminant locus) 상에 과정 S765에서 계산된 평균 색도를 매핑하여 최종 광원 정보를 검출한다(S770). 여기서 광원 궤적은 복수의 다양한 유형의 광원(예를 들면, D65, D50, CWF(Cool White Fluorescent), A 등)의 채도를 바탕으로 한 추세선일 수 있으며 이를 도 8g에 도시하였다. 도 8g에는 색도 평면(Cr-Cb)상에 광원 궤적과 과정 S765에서 계산된 평균 색도가 도시되어 있다. 최종 광원 정보는 평균 색도를 광원 궤적 상에 수직하게 투사한 지점의 색도를 갖는다.Thereafter, the light source detection module 140 detects final light source information by mapping the average chromaticity calculated in step S765 on a predetermined light source locus (illuminant locus) (S770). Here, the light source trajectory may be a trend line based on the saturation of a plurality of various types of light sources (for example, D65, D50, Cool White Fluorescent (A), A, etc.), which is illustrated in FIG. 8G. 8G shows the light source trajectory on the chromaticity plane Cr-Cb and the average chromaticity calculated in step S765. The final light source information has the chromaticity of the point at which the average chromaticity is projected perpendicular to the light source trajectory.

이러한 과정에 따라서 광원 검출 모듈(140)은 도미넌트 오브젝트의 영향으로 인하여 광원 정보가 변질되는 현상을 방지할 수 있다. According to this process, the light source detection module 140 may prevent the light source information from being altered due to the influence of the dominant object.

도 3 내지 도 8g를 참조하여 설명한 일련의 과정을 통해서 최종 광원 정보가 검출되면, 백색 조절 모듈(150)은 검출된 최종 광원 정보를 사용하여 입력되는 이미지에 대한 화이트 밸런싱 작업을 수행하게 된다. When the final light source information is detected through a series of processes described with reference to FIGS. 3 to 8G, the white adjustment module 150 performs a white balancing operation on the input image using the detected final light source information.

이상과 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.Although embodiments of the present invention have been described above with reference to the accompanying drawings, those skilled in the art to which the present invention pertains may implement the present invention in other specific forms without changing the technical spirit or essential features thereof. You will understand that. Therefore, it should be understood that the embodiments described above are exemplary in all respects and not restrictive.

상기한 바와 같은 본 발명의 자동 백색 조절 방법 및 장치에 따르면 이미지 내에 도미넌트 색도(dominant chroma)를 갖는 오브젝트가 유입되는 경우에도 일관된 색 재현 성능을 제공하는 효과가 있다.According to the automatic white adjustment method and apparatus of the present invention as described above, even when an object having a dominant chroma is introduced into an image, there is an effect of providing a consistent color reproduction performance.

Claims (24)

입력된 이미지 내에 도미넌트 색도를 갖는 오브젝트가 포함된 경우, 상기 이미지를 구성하는 데이터, 상기 오브젝트를 구성하는 데이터, 및 상기 이미지를 구성하는 데이터 중에서 상기 오브젝트를 구성하는 데이터를 제외한 잔여 데이터의 색채적 특징을 갖는 복수의 특징 포인트를 제공하는 단계;When an object having a dominant chromaticity is included in the input image, the color characteristics of the remaining data except for the data constituting the object among the data constituting the image, data constituting the object, and data constituting the object Providing a plurality of feature points having; 상기 복수의 특징 포인트를 사용하여 제1 광원 정보를 검출하는 단계;Detecting first light source information using the plurality of feature points; 상기 이미지를 구성하는 데이터 중에서 상기 제1 광원 정보의 색도와 임계치 이내의 색도차를 나타내는 데이터들의 평균 색도를 계산하는 단계; 및Calculating an average chromaticity of data representing chromaticity differences within a threshold and chromaticity of the first light source information among the data constituting the image; And 상기 평균 색도를 소정의 광원 궤적에 매핑하여 제2 광원 정보를 제공하는 단계를 포함하는 자동 백색 조절 방법.And mapping the average chromaticity to a predetermined light source trajectory to provide second light source information. 제 1항에 있어서, The method of claim 1, 상기 입력된 이미지를 복수의 기준 영역으로 구분하고, 상기 복수의 기준 영역 각각을 복수의 서브 영역으로 구분하는 단계;Dividing the input image into a plurality of reference areas, and dividing each of the plurality of reference areas into a plurality of sub areas; 상기 복수의 기준 영역 별로, 상기 기준영역의 평균 색도와 상기 서브 영역 각각의 평균 색도 간의 차이 값을 계산하는 단계; 및Calculating, for each of the plurality of reference regions, a difference value between an average chromaticity of the reference region and an average chromaticity of each of the subregions; And 상기 복수의 기준 영역 중에서 상기 차이 값이 소정의 임계값 미만인 서브 영역의 비율이 임계 비율 이상인 기준 영역에 상기 오브젝트가 포함된 것으로 판단하는 단계를 더 포함하는 자동 백색 조절 방법.And determining that the object is included in the reference area in which the ratio of the sub-area among the plurality of reference areas whose difference value is less than a predetermined threshold is greater than or equal to a threshold ratio. 제 1항에 있어서,The method of claim 1, 상기 특징 포인트를 제공하는 단계는, Providing the feature point, 상기 이미지를 구성하는 데이터 중에서 최대 휘도값을 갖는 데이터인 최대 휘도 포인트와 최소 휘도값을 갖는 데이터인 최소 휘도 포인트를 추출하는 단계;Extracting a maximum luminance point which is data having a maximum luminance value and a minimum luminance point which is data having a minimum luminance value among data constituting the image; 상기 오브젝트를 구성하는 데이터들의 평균 휘도와 평균 색도를 갖는 기준 포인트를 제공하는 단계; 및 Providing a reference point having an average luminance and an average chromaticity of data constituting the object; And 상기 이미지를 구성하는 데이터 중에서 상기 오브젝트를 구성하는 데이터들을 제외한 잔여 데이터들을 두 그룹으로 클러스터링하고, 상기 두 그룹 각각에 포함된 잔여 데이터들의 평균 휘도와 평균 색도를 갖는 제1 클러스터링 포인트와 제2 클러스터링 포인트를 제공하는 단계를 포함하는 자동 백색 조절 방법.Residual data excluding the data constituting the object among the data constituting the image is clustered into two groups, and the first clustering point and the second clustering point having an average luminance and an average chromaticity of the residual data included in each of the two groups. Automatic white adjustment method comprising the step of providing. 제 3항에 있어서,The method of claim 3, wherein 상기 이미지를 복수의 기준 영역으로 구분하고 상기 복수의 기준 영역 각각을 복수의 서브 영역으로 구분하였을 경우, 자신이 포함된 기준 영역과의 평균 색도의 차이 값이 소정의 임계값 미만인 서브 영역에 포함된 데이터들을 상기 오브젝트를 구성하는 데이터로 판단하는 단계를 더 포함하는 자동 백색 조절 방법.When the image is divided into a plurality of reference areas and each of the plurality of reference areas is divided into a plurality of sub-areas, a difference value of an average chromaticity with the reference area in which the image is included is included in a sub-area having a predetermined threshold value. And determining data as data constituting the object. 제 3항에 있어서,The method of claim 3, wherein 상기 제1 클러스터링 포인트와 상기 제2 클러스터링 포인트를 제공하는 단계는, Providing the first clustering point and the second clustering point, simplified K mean 클러스터링 기법을 사용하여 상기 잔여 데이터들을 상기 두 그룹으로 클러스터링 하는 단계를 포함하는 자동 백색 조절 방법.and clustering the residual data into the two groups using a simplified K mean clustering technique. 제 3항에 있어서,The method of claim 3, wherein 상기 제1 광원 정보를 검출하는 단계는,Detecting the first light source information, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 간의 제1 색도차가 상기 제1 클러스터링 포인트와 상기 제2 클러스터링 포인트 간의 제2 색도차 이상인 경우, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 중에서 어느 하나를 비교 포인트로 선택하는 단계; 및When the first chromaticity difference between the maximum luminance point and the minimum luminance point is greater than or equal to a second chromaticity difference between the first clustering point and the second clustering point, one of the maximum luminance point and the minimum luminance point is selected as a comparison point. Doing; And 상기 제1 클러스터링 포인트의 색도와 상기 제2 클러스터링 포인트의 색도의 평균값과 상기 비교 포인트의 색도 간의 제3 색도차가 상기 기준 포인트의 색도와 상기 비교 포인트의 색도 간의 제4 색도차 이하이면, 상기 이미지를 구성하는 데이터에서 상기 오브젝트의 데이터를 제외한 잔여 데이터를 사용하여 상기 제1 광원 정보를 검출하는 단계를 포함하는 자동 백색 조절 방법.If the third chromaticity difference between the average value of the chromaticity of the first clustering point and the chromaticity of the second clustering point and the chromaticity of the comparison point is less than or equal to a fourth chromaticity difference between the chromaticity of the reference point and the chromaticity of the comparison point, the image is displayed. And detecting the first light source information by using residual data except data of the object in constituent data. 제 6항에 있어서,The method of claim 6, 상기 제1 광원 정보를 검출하는 단계는,Detecting the first light source information, 상기 제1 색도차가 상기 제2 색도차보다 작고 상기 제2 색도차의 범위 내에 상기 기준 포인트의 색도가 존재하지 않는 경우, 상기 비교 포인트를 선택하는 단계를 더 포함하는 자동 백색 조절 방법.And selecting the comparison point when the first chromaticity difference is less than the second chromaticity difference and the chromaticity of the reference point does not exist within the range of the second chromaticity difference. 제 6항에 있어서,The method of claim 6, 상기 비교 포인트를 선택하는 단계는,Selecting the comparison point, 상기 제1 색도차가 상기 오브젝트를 구성하는 데이터들 중에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터 간의 제5 색도차와 중첩되는 경우, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 중에서 상기 제5 색도차 범위에 포함되는 쪽을 상기 비교 포인트로 선택하는 단계를 포함하는 자동 백색 조절 방법.When the first chromaticity difference overlaps the fifth chromaticity difference between the data having the maximum luminance and the data having the minimum luminance among the data constituting the object, the fifth chromaticity difference range among the maximum luminance point and the minimum luminance point. Automatic white adjustment method comprising the step of selecting a side included in the comparison point. 제 6항에 있어서,The method of claim 6, 상기 비교 포인트를 선택하는 단계는,Selecting the comparison point, 상기 제1 색도차가 상기 오브젝트를 구성하는 데이터들 중에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터 간의 제5 색도차와 중첩되고, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트가 상기 제5 색도차 범위에 포함되지 않는 경우 상기 최소 휘도 포인트를 상기 비교 포인트로 선택하는 단계를 포함하는 자동 백색 조절 방법.The first chromaticity difference overlaps a fifth chromaticity difference between data having the highest luminance and data having the minimum luminance among the data constituting the object, and the maximum luminance point and the minimum luminance point are within the fifth chromaticity difference range. If not included, selecting the minimum luminance point as the comparison point. 제 6항에 있어서,The method of claim 6, 상기 비교 포인트를 선택하는 단계는,Selecting the comparison point, 상기 제1 색도차가 상기 오브젝트를 구성하는 데이터들 중에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터 간의 제5 색도차와 중첩되지 않는 경우, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 중에서 상기 제5 색도차 범위에 더 가까운 쪽을 상기 비교 포인트로 선택하는 단계를 포함하는 자동 백색 조절 방법.When the first chromaticity difference does not overlap the fifth chromaticity difference between the data having the maximum luminance and the data having the minimum luminance among the data constituting the object, the fifth chromaticity difference among the maximum luminance point and the minimum luminance point. Selecting the side closer to the range as the comparison point. 제 1항에 있어서,The method of claim 1, 상기 광원 궤적은 서로 다른 복수의 광원의 채도를 이용한 추세선인 자동 백색 조절 방법.The light source trajectory is a trend white line using the saturation of a plurality of different light sources. 제 1항에 있어서,The method of claim 1, 상기 제2 광원 정보를 사용하여 상기 이미지의 화이트 밸런싱 작업을 수행하는 단계를 더 포함하는 자동 백색 조절 방법.And performing a white balancing operation of the image using the second light source information. 입력된 이미지 내에 도미넌트 색도를 갖는 오브젝트가 포함된 경우, 상기 이미지를 구성하는 데이터, 상기 오브젝트를 구성하는 데이터, 및 상기 이미지를 구성하는 데이터 중에서 상기 오브젝트를 구성하는 데이터를 제외한 잔여 데이터의 색채적 특징을 갖는 복수의 특징 포인트를 제공하는 특징 분석 모듈; 및When an object having a dominant chromaticity is included in the input image, the color characteristics of the remaining data except for the data constituting the object among the data constituting the image, data constituting the object, and data constituting the object A feature analysis module providing a plurality of feature points having a; And 상기 복수의 특징 포인트를 사용하여 제1 광원 정보를 검출하고, 상기 이미지를 구성하는 데이터 중에서 상기 제1 광원 정보의 색도와 임계치 이내의 색도차를 나타내는 데이터들의 평균 색도를 계산하고, 상기 평균 색도를 소정의 광원 궤적에 매핑하여 제2 광원 정보를 제공하는 광원 검출 모듈을 포함하는 자동 백색 조절 장치.Detecting first light source information using the plurality of feature points, calculating average chromaticity of data representing chromaticity differences within a threshold and chromaticity of the first light source information among data constituting the image, and calculating the average chromaticity. And a light source detecting module configured to provide second light source information by mapping to a predetermined light source trajectory. 제 13항에 있어서, The method of claim 13, 상기 입력된 이미지를 복수의 기준 영역으로 구분하고, 상기 복수의 기준 영역 각각을 복수의 서브 영역으로 구분하고, 상기 복수의 기준 영역 별로 상기 복수 의 기준영역의 평균 색도와 상기 서브 영역 각각의 평균 색도 간의 차이 값을 계산하고, 상기 복수의 기준 영역 중에서 상기 차이 값이 소정의 임계값 미만인 서브 영역의 비율이 임계 비율 이상인 기준 영역에 상기 오브젝트가 포함된 것으로 판단하는 검색 모듈을 더 포함하는 자동 백색 조절 장치.The input image is divided into a plurality of reference areas, each of the plurality of reference areas is divided into a plurality of sub areas, and the average chromaticity of each of the plurality of reference areas and the average chromaticity of each of the sub areas are divided. And a search module for calculating a difference value between the plurality of reference areas and determining that the object is included in a reference area having a ratio of a sub-area whose difference value is less than a predetermined threshold among the plurality of reference areas. Device. 제 13항에 있어서,The method of claim 13, 상기 특징 분석 모듈은 상기 이미지를 구성하는 데이터 중에서 최대 휘도값을 갖는 데이터인 최대 휘도 포인트와 최소 휘도값을 갖는 데이터인 최소 휘도 포인트를 추출하고, 상기 오브젝트를 구성하는 데이터들의 평균 휘도와 평균 색도를 갖는 기준 포인트를 제공하고, 상기 이미지를 구성하는 데이터 중에서 상기 오브젝트를 구성하는 데이터들을 제외한 잔여 데이터들을 두 그룹으로 클러스터링하여 상기 두 그룹의 각각에 포함된 데이터들의 평균 휘도와 평균 색도를 갖는 제1 클러스터링 포인트와 제2 클러스터링 포인트를 제공하는 자동 백색 조절 장치.The feature analysis module extracts a maximum luminance point which is data having a maximum luminance value and a minimum luminance point which is data having a minimum luminance value among data constituting the image, and calculates an average luminance and an average chromaticity of data constituting the object. A first clustering having an average luminance and an average chromaticity of data included in each of the two groups by providing a reference point having the data, and clustering the residual data except the data constituting the object among the data constituting the image into two groups Automatic white adjustment device providing a point and a second clustering point. 제 15항에 있어서,The method of claim 15, 상기 이미지를 복수의 기준 영역으로 구분하고 상기 복수의 기준 영역 각각을 복수의 서브 영역으로 구분하였을 경우, 자신이 포함된 기준 영역과의 평균 색도의 차이 값이 소정의 임계값 미만인 서브 영역에 포함된 데이터들을 상기 오브젝트를 구성하는 데이터로 판단하는 검색 모듈을 더 포함하는 자동 백색 조절 장치.When the image is divided into a plurality of reference areas and each of the plurality of reference areas is divided into a plurality of sub-areas, a difference value of an average chromaticity with the reference area in which the image is included is included in the sub-area that is less than a predetermined threshold. And a search module for determining data as data constituting the object. 제 15항에 있어서,The method of claim 15, 상기 특징 분석 모듈은 simplified K mean 클러스터링 기법을 사용하여 상기 잔여 데이터들을 상기 두 그룹으로 클러스터링 하는 자동 백색 조절 장치.The feature analysis module is configured to cluster the residual data into the two groups using a simplified K mean clustering technique. 제 15항에 있어서,The method of claim 15, 상기 광원 검출 모듈은 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 간의 제1 색도차가 상기 제1 클러스터링 포인트와 상기 제2 클러스터링 포인트 간의 제2 색도차 이상인 경우, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 중에서 어느 하나를 비교 포인트로 선택하고, 상기 제1 클러스터링 포인트의 색도와 상기 제2 클러스터링 포인트의 색도의 평균값과 상기 비교 포인트의 색도 간의 제3 색도차가 상기 기준 포인트의 색도와 상기 비교 포인트의 색도 간의 제4 색도차 이하이면, 상기 이미지를 구성하는 데이터에서 상기 오브젝트의 데이터를 제외한 잔여 데이터를 사용하여 상기 제1 광원 정보를 검출하는 자동 백색 조절 장치.The light source detecting module is any one of the maximum luminance point and the minimum luminance point when the first chromaticity difference between the maximum luminance point and the minimum luminance point is greater than or equal to a second chromaticity difference between the first clustering point and the second clustering point. Is selected as a comparison point, and the third chromaticity difference between the average value of the chromaticity of the first clustering point and the chromaticity of the second clustering point and the chromaticity of the comparison point is the fourth chromaticity between the chromaticity of the reference point and the chromaticity of the comparison point. If the difference is less than the automatic white adjustment device for detecting the first light source information using the remaining data except the data of the object from the data constituting the image. 제 18항에 있어서,The method of claim 18, 상기 광원 검출 모듈은 상기 제1 색도차가 상기 제2 색도차보다 작고 상기 제2 색도차의 범위 내에 상기 기준 포인트의 색도가 존재하지 않는 경우, 상기 비교 포인트를 선택하는 자동 백색 조절 장치. And the light source detecting module selects the comparison point when the first chromaticity difference is smaller than the second chromaticity difference and there is no chromaticity of the reference point within a range of the second chromaticity difference. 제 18항에 있어서,The method of claim 18, 상기 광원 검출 모듈은 상기 제1 색도차가 상기 오브젝트를 구성하는 데이터들 중에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터 간의 제5 색도차와 중첩되는 경우, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 중에서 상기 제5 색도차 범위에 포함되는 쪽을 상기 비교 포인트로 선택하는 자동 백색 조절 장치.When the first chromaticity difference overlaps a fifth chromaticity difference between the data having the maximum luminance and the data having the minimum luminance among the data constituting the object, the light source detection module is configured to select the at least one of the maximum luminance point and the minimum luminance point. The automatic white adjustment apparatus which selects the side included in a 5th chromaticity difference range as the said comparison point. 제 18항에 있어서,The method of claim 18, 상기 광원 검출 모듈은 상기 제1 색도차가 상기 오브젝트를 구성하는 데이터들 중에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터 간의 제5 색도차와 중첩되고, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트가 상기 제5 색도차 범위에 포함되지 않는 경우 상기 최소 휘도 포인트를 상기 비교 포인트로 선택하는 단계를 포함하는 자동 백색 조절 장치.The light source detection module is configured such that the first chromaticity difference overlaps with a fifth chromaticity difference between data having a maximum luminance and data having a minimum luminance among data constituting the object, and wherein the maximum luminance point and the minimum luminance point are the first chromaticity difference. And selecting the minimum luminance point as the comparison point if it is not within the five chromaticity range. 제 18항에 있어서,The method of claim 18, 상기 광원 검출 모듈은 상기 제1 색도차가 상기 오브젝트를 구성하는 데이터들 중에서 최대 휘도를 갖는 데이터와 최소 휘도를 갖는 데이터 간의 제5 색도차와 중첩되지 않는 경우, 상기 최대 휘도 포인트와 상기 최소 휘도 포인트 중에서 상기 제5 색도차 범위에 더 가까운 쪽을 상기 비교 포인트로 선택하는 단계를 포함하는 자동 백색 조절 장치.The light source detection module is configured to, among the maximum luminance point and the minimum luminance point, when the first chromaticity difference does not overlap with a fifth chromaticity difference between data having the highest luminance and data having the minimum luminance among the data constituting the object. And selecting a side closer to the fifth chromaticity difference range as the comparison point. 제 13항에 있어서,The method of claim 13, 상기 광원 궤적은 서로 다른 복수의 광원의 채도를 이용한 추세선인 자동 백 색 조절 장치.The light source trajectory is a trend white line using a saturation of a plurality of different light sources. 제 13항에 있어서,The method of claim 13, 상기 제2 광원 정보를 사용하여 상기 이미지의 화이트 밸런싱 작업을 수행하는 백색 조절 모듈을 더 포함하는 자동 백색 조절 장치.And a white adjusting module configured to perform white balancing of the image using the second light source information.
KR1020060041702A 2005-12-14 2006-05-09 Method and apparatus for auto white controlling KR100801085B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US11/594,217 US7808531B2 (en) 2005-12-14 2006-11-08 Method and apparatus for auto white controlling

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020050123514 2005-12-14
KR20050123514 2005-12-14

Publications (2)

Publication Number Publication Date
KR20070063399A KR20070063399A (en) 2007-06-19
KR100801085B1 true KR100801085B1 (en) 2008-02-11

Family

ID=38363451

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060041702A KR100801085B1 (en) 2005-12-14 2006-05-09 Method and apparatus for auto white controlling

Country Status (1)

Country Link
KR (1) KR100801085B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100839093B1 (en) * 2007-01-31 2008-06-19 한국과학기술원 Method and apparatus for measuring luminance and hue

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06351037A (en) * 1993-06-07 1994-12-22 Matsushita Electric Ind Co Ltd Auto-white balance device
JPH08102960A (en) * 1994-09-30 1996-04-16 Sanyo Electric Co Ltd Video camera
JPH10136390A (en) 1997-12-01 1998-05-22 Canon Inc Image pickup device
JP2000092509A (en) 1998-09-11 2000-03-31 Eastman Kodak Japan Ltd Auto-white balance device
JP2000165896A (en) 1998-11-25 2000-06-16 Ricoh Co Ltd White balance control method and its system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06351037A (en) * 1993-06-07 1994-12-22 Matsushita Electric Ind Co Ltd Auto-white balance device
JPH08102960A (en) * 1994-09-30 1996-04-16 Sanyo Electric Co Ltd Video camera
JPH10136390A (en) 1997-12-01 1998-05-22 Canon Inc Image pickup device
JP2000092509A (en) 1998-09-11 2000-03-31 Eastman Kodak Japan Ltd Auto-white balance device
JP2000165896A (en) 1998-11-25 2000-06-16 Ricoh Co Ltd White balance control method and its system

Also Published As

Publication number Publication date
KR20070063399A (en) 2007-06-19

Similar Documents

Publication Publication Date Title
KR100809344B1 (en) Method and apparatus for auto white balancing
US7808531B2 (en) Method and apparatus for auto white controlling
US6788813B2 (en) System and method for effectively performing a white balance operation
CN104796683B (en) A kind of method and system of calibration image color
JP3550440B2 (en) Auto white balance adjustment device
KR100855470B1 (en) Method and apparatus for estimating illuminant of an image
JP4956581B2 (en) Imaging apparatus, white balance processing method of imaging apparatus, program, and recording medium
KR20100011772A (en) Method for controlling auto white balance
JP2001141569A (en) Illumination chromaticity estimating/converting device with recognized light source and highlight used, its method, and computer-readable recording medium with program recorded for it
TWI763920B (en) Auto white balance method performed by an image signal processor
KR20200029036A (en) White balance processing method, electronic device and computer readable storage medium
WO2019085698A1 (en) White balance processing method and device, electronic device and computer readable storage medium
CN104917935A (en) Image processing apparatus and image processing method
JP4310317B2 (en) Visible component ratio calculation method and optical instrument using the same
US20070041064A1 (en) Image sampling method for automatic white balance
CN111079637A (en) Method, device and equipment for segmenting rape flowers in field image and storage medium
KR100801085B1 (en) Method and apparatus for auto white controlling
US8614750B2 (en) Apparatus and method for auto white balance control considering the effect of single tone image
Busin et al. Color space selection for unsupervised color image segmentation by histogram multi-thresholding
US10602112B2 (en) Image processing apparatus
KR20000059451A (en) Method of raw color adjustment and atmosphere color auto extract in a image reference system
KR101131109B1 (en) Auto white balance setting method by white detection considering sensor characteristic
JP4332413B2 (en) Imaging device, white balance processing method of imaging device, white balance processing method of imaging system, program, and storage medium
KR20080077742A (en) Camera module for processing awb using deviation value
KR0183717B1 (en) White extracting method and apparatus for awb

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Publication of correction
FPAY Annual fee payment

Payment date: 20121210

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20131217

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20141224

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20151217

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20161219

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20171219

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20181220

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20191217

Year of fee payment: 13