KR20130088718A - Apparatus and method of correcting color for image projection device - Google Patents

Apparatus and method of correcting color for image projection device Download PDF

Info

Publication number
KR20130088718A
KR20130088718A KR1020120111325A KR20120111325A KR20130088718A KR 20130088718 A KR20130088718 A KR 20130088718A KR 1020120111325 A KR1020120111325 A KR 1020120111325A KR 20120111325 A KR20120111325 A KR 20120111325A KR 20130088718 A KR20130088718 A KR 20130088718A
Authority
KR
South Korea
Prior art keywords
color
image
cube
sample image
value
Prior art date
Application number
KR1020120111325A
Other languages
Korean (ko)
Other versions
KR101925370B1 (en
Inventor
조용주
이용주
백승권
차지훈
임성용
기명석
석주명
김진웅
마하마드 무르타자 칸
레한 하피즈
하리스 아니스
무타히르 라티프
아샤 라줄
아샤드 알리
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to US13/658,039 priority Critical patent/US9030485B2/en
Publication of KR20130088718A publication Critical patent/KR20130088718A/en
Application granted granted Critical
Publication of KR101925370B1 publication Critical patent/KR101925370B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3182Colour adjustment, e.g. white balance, shading or gamut
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3147Multi-projection systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)
  • Projection Apparatus (AREA)

Abstract

PURPOSE: An apparatus for correcting color for an image projection device and a method thereof are provided to minimize color correction procedure, by performing color correction using one sample image in a single projection or multi projection system. CONSTITUTION: A color correction device acquires a photographing image obtained by photographing a projected sample image in which an image acquisition device is projected (S100). The color correction device generates a 3D color cube by area on the basis of a color value of a block of the sample image and a color value of the photographing image, and selects a reference 3D color cube (S120,S140). The color correction device generates a look-up table for each area on the basis of the reference 3D color cube, and corrects the color of an input image by using the look-up table (S160,S180). [Reference numerals] (S100) Acquiring a photographing image obtained by photographing a projected sample image using an image acquisition device; (S120) Generating a 3D color cube by the area of the photographing image on the basis of a color value of a block of the sample image and a color value of the photographing image; (S140) Selecting a reference 3D color cube; (S160) Generating a look-up table (LUT) for each area on the basis of the reference 3D color cube; (S180) Correcting the color of an input image by using the look-up table

Description

영상 투영 장치에 대한 색 보정 장치 및 방법{Apparatus and method of correcting color for image projection device}Apparatus and method of correcting color for image projection device

본 발명은 색 보정 장치 및 방법에 관한 것으로, 보다 구체적으로 샘플이미지를 이용한 영상 투영 장치 및 멀티 영상 투영 장치(시스템)에 대한 색 보정 장치 및 방법에 관한 것이다.The present invention relates to a color correction apparatus and method, and more particularly, to a color correction apparatus and method for an image projection apparatus and a multi-image projection apparatus (system) using a sample image.

화상을 스크린과 같은 투영면(projection surface)에 투영할 때는 프로젝터가 사용된다. 일반적으로 프로젝터의 렌즈를 통해 빛이 나오는 경우 렌즈의 중심부의 부분이 가장 밝고 주변으로 갈수록 빛의 양이 적어져 어두워지는 현상이 나타난다. 이처럼 주변부의 광량 저하로 중심에서 멀어질수록 밝기가 작아지는 현상을 비네팅 현상(vignetting effect)이라 한다. 이와 같이 프로젝터를 사용하여 투영된 화상은 비네팅 현상으로 인해 스크린에 규칙적인 색을 투영할 수 없다. 또한 파노라마 영상을 다수의 프로젝터로 투영 시, 프로젝터의 종류(LCD, LED, LCOS 등), 모델, 제조사에 따라 서로 다른 색 값을 투영하는 문제가 있다. 심지어 동일한 제조사의 동일한 모델의 프로젝터도 다른 색 값을 갖는다. 또한, 투영면의 색 및 모양 등에 따라 투영된 화상의 색 값이 원래의 입력 색 값과 달라질 수도 있다.A projector is used when projecting an image onto a projection surface such as a screen. In general, when light is emitted through the lens of the projector, the central part of the lens is the brightest and the amount of light decreases toward the periphery. Such a phenomenon in which the brightness decreases as the distance from the center decreases due to the decrease in the amount of light around the periphery is called a vignetting effect. The image projected using the projector as described above cannot project regular colors on the screen due to vignetting. In addition, when projecting a panoramic image to a plurality of projectors, there is a problem of projecting different color values depending on the type of projector (LCD, LED, LCOS, etc.), model, and manufacturer. Even projectors of the same model by the same manufacturer have different color values. In addition, the color value of the projected image may differ from the original input color value according to the color and shape of the projection surface.

프로젝터를 사용할 때에, 투영면 상의 화상의 색을, 화상 데이터에 기록된 색과 일치하도록 보정하는 프로젝터의 색 보정 방법이 알려져 있다. 그러나 기존의 색 보정 방법들은 다수의 샘플 이미지와 복잡한 색 보정 절차가 필요하였고, 또한 멀티 영상 투영 장치(멀티 프로젝션 시스템)의 경우에는 적용하기 어려운 문제점이 있었다.When using a projector, a color correction method of a projector is known which corrects the color of an image on a projection surface to match the color recorded in the image data. However, conventional color correction methods require a large number of sample images and complex color correction procedures, and also have a problem that is difficult to apply to a multi-image projection apparatus (multi projection system).

본 발명의 기술적 과제는 영상 투영 장치에 대한 색 보정 장치 및 방법을 제공함에 있다.An object of the present invention is to provide a color correction apparatus and method for an image projection apparatus.

본 발명의 다른 기술적 과제는 멀티 영상 투영 장치에 대한 색 보정 장치 및 방법을 제공함에 있다.Another object of the present invention is to provide a color correction apparatus and method for a multi-image projection apparatus.

본 발명의 또 다른 기술적 과제는 단일 샘플이미지를 사용하고, 룩 업 테이블을 기반으로 한 색 보정 장치 및 방법을 제공함에 있다.Another technical problem of the present invention is to provide a color correction apparatus and method using a single sample image and based on a look-up table.

본 발명의 일 양태에 따르면 색 보정 장치에 의해 수행되는 영상 투영 장치에 대한 색 보정 방법을 제공한다. 상기 방법은 영상 투영 장치로 투영면에 투영한 샘플이미지를 영상 획득 장치로 촬영한 촬영이미지를 획득하는 단계, 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 촬영이미지의 블록의 색 값에 기반하여 상기 촬영이미지의 n개의 영역 각각에 대한 3D 색 큐브(3D color cube)를 생성하는 단계, 기준 3D 색 큐브를 선택하는 단계, 상기 기준 3D 색 큐브를 기반으로 하여, 상기 n개의 영역 각각에 대한 룩 업 테이블(Look-Up Table ; LUT)을 생성하는 단계, 및 상기 룩 업 테이블을 이용하여 상기 영상 투영 장치로 투영될 입력 화상의 색을 보정하는 단계를 포함한다.According to an aspect of the present invention, there is provided a color correction method for an image projection device performed by a color correction device. The method may further include obtaining a photographed image obtained by photographing a sample image projected onto a projection surface by an image projector, and determining a color value of the block of the sample image and a block of the photographed image corresponding to the block of the sample image. Generating a 3D color cube for each of the n areas of the photographed image based on a color value, selecting a reference 3D color cube, and based on the reference 3D color cube, Generating a look-up table (LUT) for each of the regions, and correcting the color of the input image to be projected to the image projection apparatus using the look-up table.

본 발명의 다른 일 양태에 따르면 색 보정 장치에 의해 수행되는 멀티 영상 투영 장치에 대한 색 보정 방법을 제공한다. 상기 방법은 멀티 영상 투영 장치를 구성하는 m개의 영상 투영 장치 중 하나씩을 통해 순차적으로 투영면에 투영된 샘플이미지를 영상 획득 장치로 각각 촬영한 m개의 촬영이미지를 획득하는 단계, 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 m개의 촬영이미지의 블록의 색 값에 기반하여, 각각 n개의 영역을 포함하는 상기 m개의 촬영이미지의 m×n영역 각각에 대한 3D 색 큐브를 생성하는 단계, 기준 3D 색 큐브를 선택하는 단계, 상기 기준 3D 색 큐브를 기반으로, 상기 m×n개의 영역 각각에 룩 업 테이블을 생성하는 단계, 및 상기 룩 업 테이블을 이용하여 상기 멀티 영상 투영 장치로 투영될 입력 화상의 색을 보정하는 단계를 포함한다.According to another aspect of the present invention, there is provided a color correction method for a multi-image projection apparatus performed by a color correction apparatus. The method may further include acquiring m photographed images of the sample image projected onto the projection plane sequentially through one of the m image projectors of the multi image projector, respectively. Based on the color values and the color values of the blocks of the m photographed images corresponding to the blocks of the sample image, a 3D color cube is generated for each m × n region of the m photographed images each including n regions. And selecting a reference 3D color cube, generating a lookup table in each of the m × n areas based on the reference 3D color cube, and using the lookup table. Correcting the color of the input image to be projected to.

본 발명의 또 다른 일 양태에 따르면 영상 투영 장치에 대한 색 보정 장치를 제공한다. 상기 장치는 영상 투영 장치에 의해 투영면에 투영된 샘플이미지를 영상 획득 장치로 촬영한 촬영이미지를 획득하는 수신부, 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 촬영이미지의 블록의 색 값에 기반하여 상기 촬영이미지의 n개의 영역 각각에 대한 3D 색 큐브를 생성하는 색 정보 생성부, 기준 3D 색 큐브를 선택하고, 상기 기준 3D 색 큐브를 기반으로 하여, 상기 촬영이미지의 n개의 영역 각각에 대한 룩 업 테이블을 생성하는 색 변환부, 상기 룩 업 테이블을 기록하는 메모리부, 상기 룩 업 테이블을 이용하여 입력 화상의 색을 보정하는 색 보정부, 및 상기 보정된 입력 화상을 영상 투영 장치로 송신하는 송신부를 포함한다.According to another aspect of the present invention, there is provided a color correction device for an image projector. The apparatus may further include a receiver configured to acquire a photographed image obtained by photographing a sample image projected onto a projection surface by an image projector, a color value of a block of the sample image, and a block of the photographed image corresponding to the block of the sample image. A color information generation unit for generating a 3D color cube for each of the n areas of the photographed image based on a color value of, and selecting a reference 3D color cube, and based on the reference 3D color cube, n of the photographed image A color conversion unit for generating a lookup table for each of the three regions, a memory unit for recording the lookup table, a color correction unit for correcting a color of an input image using the lookup table, and the corrected input image. And a transmitting unit for transmitting to the image projector.

본 발명의 또 다른 일 양태에 따르면 멀티 영상 투영 장치에 대한 색 보정 장치를 제공한다. 상기 장치는 멀티 영상 투영 장치를 구성하는 m개의 영상 투영 장치 중 하나씩을 통해 순차적으로 투영면에 투영된 샘플이미지를 영상 획득 장치로 각각 촬영한 m개의 촬영이미지를 획득하는 수신부, 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 m개의 촬영이미지의 블록의 색 값에 기반하여, 각각 n개의 영역을 포함하는 상기 m개의 촬영이미지의 m×n개의 영역 각각에 대한 3D 색 큐브를 생성하는 색 정보 생성부, 기준 3D 색 큐브를 선택하고, 상기 기준 3D 색 큐브를 기반으로, 상기 m×n개의 영역 각각에 대한 룩 업 테이블을 생성하는 색 변환부, 상기 룩 업 테이블을 기록하는 메모리부, 상기 룩 업 테이블을 이용하여 상기 멀티 영상 투영 장치로 입력될 입력 화상의 색을 보정하는 색 보정부, 및 상기 보정된 입력 화상을 각 영상 투영 장치로 송신하는 송신부를 포함한다.According to still another aspect of the present invention, there is provided a color correction apparatus for a multi-image projection apparatus. The apparatus may further include a receiver configured to acquire m photographed images of a sample image projected onto a projection surface sequentially through one of m image projectors constituting a multi-image projection apparatus, respectively, by using an image capturing apparatus, and a block of the sample image. Based on the color values and the color values of the blocks of the m photographed images corresponding to the blocks of the sample image, 3D color cubes for each of the m × n regions of the m photographed images each including n regions A color conversion unit to select a color information generation unit to generate, a reference 3D color cube, and generate a lookup table for each of the m × n areas based on the reference 3D color cube, and record the lookup table A memory corrector, a color corrector for correcting a color of an input image to be input to the multi-image projection apparatus using the lookup table, and the corrected input image And a transmitting unit for transmitting to the image projector.

본 발명은 싱글 프로젝션 또는 멀티 프로젝션 시스템에서, 투영된 영상의 색차를 최소화하고, 보정절차를 단순화하여 신속성을 보장할 수 있다.In the single projection or multi-projection system, the present invention can minimize the color difference of the projected image and simplify the correction procedure to ensure speed.

도 1은 본 발명의 일례에 따른 색 보정 장치에 의해 수행되는 영상 투영 장치에 대한 색 보정 방법을 나타낸 도면이다.
도 2는 동일한 크기를 가진 4개(n=4)의 영역으로 나누어지는 샘플이미지를 나타낸다.
도 3은 샘플이미지의 영역 #1의 블록 색 패턴의 일례를 나타낸다.
도 4는 샘플이미지와의 촬영이미지의 각 영역별 대응 블록의 일례를 나타낸다.
도 5는 촬영이미지의 한 영역의 3D 색 큐브의 일례이다.
도 6은 본 발명의 일례에 따른 색 보정 장치의 색 교정 단계를 나타낸다.
도 7은 본 발명의 일례에 따른 색 보정 장치의 입력 화상 보정 단계를 나타낸다.
도 8은 본 발명을 멀티 영상 투영 장치 시스템에 적용한 일례이다.
도 9는 본 발명에 따른 색 보정 장치의 일례를 나타낸다.
도 10은 본 발명의 일례에 따른 색 보정 시스템의 색 교정 절차를 나타내는 도면이다.
도 11은 본 발명의 일례에 따른 색 보정 시스템의 색보정 후 보정된 화상을 투영하는 절차를 나타낸 도면이다.
도 12a와 도12b는 본 발명에 따른 색 보정 전, 후의 입력 화상의 변화를 나타낸 도면이다.
1 is a diagram illustrating a color correction method for an image projection device performed by a color correction device according to an example of the present invention.
2 shows a sample image divided into four (n = 4) areas having the same size.
3 shows an example of a block color pattern of area # 1 of a sample image.
4 shows an example of a corresponding block for each region of the captured image with the sample image.
5 is an example of a 3D color cube of a region of a photographed image.
6 shows a color correction step of the color correction device according to an example of the present invention.
7 shows an input image correction step of the color correction device according to an example of the present invention.
8 is an example of applying the present invention to a multi-image projection apparatus system.
9 shows an example of a color correction device according to the present invention.
10 is a view showing a color correction procedure of the color correction system according to an example of the present invention.
11 is a diagram illustrating a procedure of projecting a corrected image after color correction of a color correction system according to an example of the present invention.
12A and 12B show changes in an input image before and after color correction according to the present invention.

이하, 본 명세서에서는 일부 실시 예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 명세서의 실시 예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, some embodiments will be described in detail with reference to exemplary drawings. In adding reference numerals to the components of each drawing, it should be noted that the same reference numerals are assigned to the same components as much as possible even though they are shown in different drawings. In the following description of the embodiments of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present disclosure rather unclear.

또한, 본 발명에서, ‘색 보정’의 의미는 영상 투영 장치로 입력되는 입력 영상의 각 영역의 입력 대비 출력 색 값이 대응하는 기준 입력 대비 출력 색(구체적으로는 기준 3D 색 큐브의 입력 대비 출력 색) 값과 같거나 가장 유사하도록 교정(보상 또는 매칭)함을 포함할 수 있다. In addition, in the present invention, the term 'color correction' refers to an output color (specifically, an input contrast output of a reference 3D color cube) corresponding to a reference input corresponding to an output color value of each area of an input image input to the image projector. Calibration (compensation or matching) to be equal to or most similar to the color) value.

도 1은 본 발명의 일례에 따른 색 보정 장치에 의해 수행되는 영상 투영 장치에 대한 색 보정 방법을 나타낸 도면이다.1 is a diagram illustrating a color correction method for an image projection device performed by a color correction device according to an example of the present invention.

도 1을 참조하면, 색 보정 장치는 영상 투영 장치로 투영면에 투영한 샘플이미지를 영상 획득 장치로 촬영한 촬영이미지를 획득한다(S100).Referring to FIG. 1, the color correcting apparatus obtains a photographed image obtained by photographing a sample image projected onto a projection surface by an image projector (S100).

여기서 샘플이미지는 영상 투영 장치의 색 왜곡 및 투영면에 투영된 출력 영상의 색 왜곡을 판단하기 위한 기초가 되는 이미지이다. 색 왜곡은 영상 투영 장치에 의하여 발생될 수도 있고, 투영면의 모양 또는 색 등에 의하여도 발생할 수 있다. 상기 샘플이미지는 상기 색 보정 장치에서 직접 생성할 수 있으며, 또는 이미 색 값을 알고 있는 기존에 생성된 샘플이미지를 사용할 수도 있다. 일예로서 상기 샘플이미지는 임의의 이미지일 수 있다. 다른 예로서, 상기 샘플이미지는 크기와 색 패턴이 동일한 n개의 영역으로 나누어질 수 있다. 이로써 색 보정 장치에서 이미지 영역별로 색 값을 비교하는 단계를 효율적으로 수행할 수 있다. Here, the sample image is an image that serves as a basis for determining color distortion of the image projector and color distortion of the output image projected onto the projection surface. Color distortion may be generated by the image projector, or may be caused by the shape or color of the projection surface. The sample image may be generated directly by the color correction apparatus, or may use a previously generated sample image that already knows the color value. As an example, the sample image may be any image. As another example, the sample image may be divided into n regions having the same size and color pattern. As a result, the color compensating device can efficiently perform the step of comparing the color values for each image area.

여기서 n개의 영역이라 함은 하나 이상의 영역을 의미한다. 예를 들어 멀티 영상 투영 장치(시스템)를 구성하는 다수의 영상 투영 장치 간 색 보정을 하는 경우 샘플이미지가 하나의 영역(n=1)을 가지고 있더라도 무방하며, 일반적으로 영역의 수가 많아질수록 보다 정확한 색 보정을 수행할 수 있다. Herein, n regions means one or more regions. For example, when performing color correction between multiple image projectors forming a multi-image projector (system), the sample image may have one region (n = 1), and in general, as the number of regions increases, Accurate color correction can be performed.

도 2는 동일한 크기를 가진 4개(n=4)의 영역으로 구성되는 샘플이미지를 나타낸다.2 shows a sample image composed of four (n = 4) areas having the same size.

도 2를 참조하면, 샘플이미지는 4개의 영역으로 구성되고, 각 영역은 영역 #1부터 영역 #4까지로 구분된다. 영역의 크기는 예를 들어 1920×1080 사이즈의 HD 영상이 4개의 크기가 동일한 영역으로 나누어져 있다면, 각 영역의 사이즈는 960×540이 된다. 상기 영상이 6개의 크기가 동일한 영역으로 나누어질 경우 각 영역의 사이즈는 640×540이 된다.Referring to FIG. 2, the sample image is composed of four areas, and each area is divided into areas # 1 to # 4. For example, if the size of the area is divided into four areas having the same size, the size of each area is 960 × 540. If the image is divided into six equal sized regions, the size of each region is 640 × 540.

샘플이미지에서 각 영역은 복수의 블록을 포함하고 있으며, 상기 복수의 블록 각각의 색 값은 (R, G, B)에 대응되며, 상기 R, G, B는 각각 최소값부터 최대값 사이의 어느 하나의 값을 갖을 수 있다. 여기서 R, G, B 각각 8비트(bits)를 할당하면, 각각 상기 최소값은 0이고, 상기 최대값은 255가 된다. Each region in the sample image includes a plurality of blocks, and color values of each of the plurality of blocks correspond to (R, G, B), and each of R, G, and B is any one between a minimum value and a maximum value. It can have a value of. In this case, when 8 bits are allocated to each of R, G, and B, the minimum value is 0 and the maximum value is 255, respectively.

또한, 상기 R, G, B 값을 각각 k의 배수로 설정하여 최소값부터 최대값 사이에서 띄엄띄엄 값을 갖도록 설정할 수도 있다. 예를 들면 k가 50일 경우 상기 복수의 블록 각각은 가능한 256×256×256=1677216의 색 값 중 (0, 0, 0), (0, 0, 50),…,(250, 250, 250)의 216가지의 색 값 중의 하나를 가질 수 있다. 상기 k 값은 미리 설정된 값일 수 있으며, 유저(user) 인터페이스에 의한 입력에 기초하여 지정할 수도 있을 것이다. 물론 상기 R, G, B 값을 각각 k의 배수가 아닌 일정하거나 혹은 일정하지 않은 간격을 갖도록 설정하여 샘플이미지를 생성할 수도 있음은 당연하다. Further, the R, G, and B values may be set in multiples of k, respectively, to have a spacing between the minimum and maximum values. For example, when k is 50, each of the plurality of blocks has (0, 0, 0), (0, 0, 50),... Among the possible color values of 256 × 256 × 256 = 1677216. It may have one of 216 color values of (250, 250, 250). The k value may be a preset value or may be specified based on an input by a user interface. Of course, it is natural that the sample images may be generated by setting the R, G, and B values to have constant or non-unique intervals instead of multiples of k.

일례로서, (R, G, B)로 표현 가능한 모든 색 값들 각각은 적어도 한 번 이상씩 상기 각 영역 내의 복수의 블록에 대응되도록 샘플이미지를 생성할 수 있다. 즉, 샘플이미지의 각 영역은 가질 수 있는 색 값들을 모두 포함하고, 상기 가질 수 있는 색 값들 각각은 상기 각 영역을 구성하는 복수의 블록들에 적어도 한번씩 대응된다. 이 경우 상기와 같이 R, G, B 각각 8bit를 할당하고, k를 50으로 설정하면, 상기 복수의 블록 각각은 (0, 0, 0), (0, 0, 50),…,(250, 250, 250)의 216가지의 색 값 중 하나를 가질 수 있고, 상기 각 영역 내의 복수의 블록이 상기 216가지의 색을 모두 적어도 한번 이상 포함하기 위해서는 샘플이미지의 각 영역에 포함된 상기 복수의 블록은 적어도 216개 이상이어야 한다. 이 경우에 각 영역에 포함된 상기 복수의 블록의 R, G, B 색 값은 각 영역의 좌측 상단에서 우측 하단 방향으로 50씩 순차적으로 증가하는 패턴을 가지도록 샘플이미지를 생성할 수 있다. As an example, each of the color values represented by (R, G, B) may generate a sample image so as to correspond to the plurality of blocks in each area at least once. That is, each region of the sample image includes all possible color values, and each of the possible color values corresponds to the plurality of blocks constituting the respective regions at least once. In this case, if 8 bits are allocated to R, G, and B as described above, and k is set to 50, each of the plurality of blocks is (0, 0, 0), (0, 0, 50),... It may have one of 216 color values of (250, 250, 250), and the plurality of blocks in each area may be included in each area of the sample image in order to include all of the 216 colors at least once. The plurality of blocks should be at least 216 or more. In this case, the R, G, and B color values of the plurality of blocks included in each region may generate a sample image so as to have a pattern that sequentially increases by 50 from the upper left to the lower right of each region.

도 3은 샘플이미지의 영역 #1의 블록 색 패턴의 일례를 나타낸다. 블록의 R, G, B 색 값은 x축과 y축 방향을 따라 50씩 순차적으로 증가하는 패턴을 가진다. 도 3은 각 영역은 각각 216개의 블록들을 가진 경우를 나타내며, 상기 216개의 블록들에 상술한 바와 같이 한 영역 내에서 표현 가능한 216가지의 색이 모두 한번씩 대응되고 있다. 만약 한 영역을 구성하는 블록들의 수가 216×2=432개인 경우 상기 한 영역 내에서 표현 가능한 색 값들은 상기 432개의 블록들에 2번씩 대응될 수도 있다.3 shows an example of a block color pattern of area # 1 of a sample image. The R, G, and B color values of the block have a pattern of sequentially increasing by 50 along the x and y axis directions. FIG. 3 shows a case where each region has 216 blocks, and as described above, the 216 blocks that can be expressed in one region all correspond to the 216 blocks once. If the number of blocks that constitute a region is 216 × 2 = 432, the color values that can be expressed in the region may correspond to the 432 blocks twice.

도 3을 참조하면, 샘플이미지의 영역 #1은 블록순서대로 (0, 0, 0), (0, 0, 50), (0, 0, 100), (0, 0, 150), (0, 0, 200), (0, 0, 250), (0, 50, 0), (0, 50, 50), (0, 50, 100),…,(250, 250, 250)과 같은 순차적으로 증가하는 색 값을 갖는다. 각 영역의 크기와 색 패턴이 동일하게 샘플이미지를 생성할 경우 영역 #2, 영역 #3 등도 상기 도3과 같은 블록 색 패턴을 갖는다.Referring to FIG. 3, area # 1 of the sample image is (0, 0, 0), (0, 0, 50), (0, 0, 100), (0, 0, 150), (0) in block order. , 0, 200), (0, 0, 250), (0, 50, 0), (0, 50, 50), (0, 50, 100),... And have sequentially increasing color values, such as (250, 250, 250). When the sample image is generated with the same size and color pattern of each area, area # 2, area # 3, etc. also have the same block color pattern as in FIG.

다른 예로서, 상기 각 영역 내의 복수의 블록 각각이 (R, G, B)로 표현 가능한 모든 색 값들 각각은 적어도 두 번 이상 상기 복수의 블록에 대응되도록 하여 샘플이미지를 생성할 수 있다. 이 경우 상기와 같이 R, G, B는 각각 8비트(bits)를 할당하고, k는 50인 예에서는 상기 샘플이미지의 한 영역은 적어도 432(216×2)개 이상의 블록으로 구성된다.As another example, all of the color values that can be represented by each of the plurality of blocks in each area as (R, G, B) may correspond to the plurality of blocks at least twice to generate a sample image. In this case, as described above, R, G, and B each allocate 8 bits, and in the case where k is 50, one region of the sample image includes at least 432 (216 x 2) blocks.

색 보정 장치는 상기 샘플이미지를 영상 투영 장치로 투영면에 투영하여 영상 획득 장치(ex. still camera)로 촬영한 촬영이미지를 획득한다. 상기 샘플이미지를 영상 투영 장치로 투영하는 단계나, 영상 획득 장치로 촬영하는 단계는 색 보정 장치에 의하여 제어될 수 있고, 혹은 유저(user)에 의하여 제어될 수도 있을 것이다. The color correcting apparatus projects the sample image onto the projection surface by using an image projector to obtain a captured image photographed by an image acquisition device (ex. Still camera). Projecting the sample image to the image projection apparatus or photographing the image acquisition apparatus may be controlled by the color correction apparatus, or may be controlled by the user.

다시 도 1을 참조하면, 색 보정 장치는 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 촬영이미지의 색 값에 기반하여 각 영역별 3D 색 큐브를 생성한다(S120). 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 촬영이미지의 색 값은 각 영역별 입출력 색 값을 나타낼 수 있으며, 색 보정 장치는 이를 기반으로 3D 보간법(3D interpolation)을 적용하여 각 영역별 3D 색 큐브를 생성할 수 있다. 또한 색 보정 장치는 각 영역별 3D 컬러 큐브 뿐 아니라, 상기 각 영역별 입출력 색 값을 종합하여 새로운 3D 색 큐브를 생성할 수도 있다. Referring back to FIG. 1, the color correction apparatus generates a 3D color cube for each area based on the color value of the block of the sample image and the color value of the photographed image corresponding to the block of the sample image (S120). The color value of the block of the sample image and the color value of the photographed image corresponding to the block of the sample image may represent input / output color values for each area, and the color correction apparatus applies 3D interpolation based on the color value of the block. 3D color cubes can be generated for each area. In addition, the color correction apparatus may generate a new 3D color cube by synthesizing the input and output color values of each region as well as the 3D color cube for each region.

도 4는 샘플이미지와의 촬영이미지의 각 영역별 대응 블록의 일례를 나타낸다.4 shows an example of a corresponding block for each region of the captured image with the sample image.

도 4를 참조하면, 촬영이미지의 각 영역은 샘플이미지의 각 영역과 대응된다. 또한, 샘플이미지의 각 영역 내의 각 블록은 촬영이미지의 각 영역 내의 각 블록에 대응된다. 예를 들면 샘플이미지의 영역 #1 내의 블록 #1은 촬영이미지의 영역 #1의 블록 #1에 대응된다. 샘플이미지와 영역 #1과 촬영이미지의 영역 #1을 보면, 상기 샘플이미지의 블록 #x의 원래 색 값(R1,B1,G1)을 입력 색 값이라고 하였을 때, 상기 촬영이미지의 대응되는 블록 #x의 색 값(R2,B2,G2)을 출력 색 값이라고 볼 수 있다. 이 경우 촬영이미지의 각 영역별로 각 영역이 포함하는 블록들의 입력 색 값 대비 출력 색 값을 획득할 수 있으며, 이를 이용하여 촬영이미지의 각 영역별 입출력 색 값을 표로 나타낼 수 있다. 만약 촬영이미지의 한 영역 내에서 동일한 입력 색 값에 대한 다른 출력 색 값을 갖는 둘 이상의 블록이 존재하는 경우 각 블록의 출력 값의 평균값을 취하여 출력 색 값을 정할 수 있다. 예를 들면 샘플이미지의 동일한 영역에 존재하는 두 개의 블록의 입력값은 동일하게 (0, 0, 50)인데, 대응되는 촬영이미지의 두 개의 블록의 출력값은 각각 (0, 0, 33)과 (0, 0, 37)인 경우, 해당 영역의 (0, 0, 50)의 입력값에 대하여는 두 블록의 출력값의 평균값인 (0, 0, 35)를 대한 출력값으로 정할 수 있다. 이는 3D 보간법을 적용하여 3D 컬러 큐브 생성시 계산의 단순화를 위함이다. 물론, 이 외에도 상기 동일한 입력값에 대한 다른 출력값들을 모두 사용하여 3D 보간법을 적용하고, 3D 컬러 큐브를 생성할 수도 있다. Referring to FIG. 4, each area of the captured image corresponds to each area of the sample image. Further, each block in each region of the sample image corresponds to each block in each region of the photographed image. For example, block # 1 in area # 1 of the sample image corresponds to block # 1 in area # 1 of the captured image. Referring to the sample image, the area # 1, and the area # 1 of the captured image, when the original color values R1, B1, and G1 of the block #x of the sample image are input color values, the corresponding block # of the captured image Color values of x (R2, B2, G2) can be regarded as output color values. In this case, an output color value compared to input color values of blocks included in each area may be obtained for each area of the captured image, and the input and output color values for each area of the captured image may be represented by a table. If two or more blocks having different output color values for the same input color value exist within one region of the photographed image, the output color value may be determined by taking an average value of the output values of each block. For example, the input values of two blocks in the same area of the sample image are the same (0, 0, 50), and the output values of the two blocks of the corresponding captured image are (0, 0, 33) and ( In the case of 0, 0, 37), an input value of (0, 0, 50) of the corresponding area may be determined as an output value of (0, 0, 35), which is an average value of the output values of two blocks. This is to simplify the calculation when generating the 3D color cube by applying the 3D interpolation method. Of course, it is also possible to apply 3D interpolation using all other output values for the same input value and generate a 3D color cube.

영역 #1Zone # 1 블록#block# 샘플이미지의 블록별 색값
(original color)
Block color value of sample image
(original color)
촬영이미지의 블록별 색값
(projected color)
Block color value of shooting image
(projected color)
1One (0, 0, 50)(0, 0, 50) (0, 0, 35)(0, 0, 35) 22 (0, 0, 100)(0, 0, 100) (0, 0, 70)(0, 0, 70) 33 (0, 0, 150)(0, 0, 150) (0, 0, 105)(0, 0, 105) ... ... ...

표 1은 샘플이미지의 영역 #1을 구성하는 블록의 원래 색 값과 이에 대응하는 촬영이미지의 영역 #1의 블록의 색 값을 나타낸 일예이다. 샘플이미지의 블록별 색 값은 입력 색 값에 매칭되고, 대응하는 촬영이미지의 블록별 색 값은 출력 색 값에 매칭된다.Table 1 shows an example of original color values of blocks constituting area # 1 of the sample image and color values of blocks of area # 1 of the captured image. The block-specific color value of the sample image is matched to the input color value, and the block-specific color value of the corresponding photographed image is matched to the output color value.

도 5는 촬영이미지의 한 영역의 3D 색 큐브의 일례이다.5 is an example of a 3D color cube of a region of a photographed image.

도 5에서 볼 수 있듯이, 색 보정 장치는 상기 획득한 입출력 색 값을 기반으로 각 영역별 3D 색 큐브를 생성할 수 있다. 상기 k=50으로 예를 든 것과 같이 색 값이 띄엄띄엄 있는 경우, 3D 보간법(3D interpolation)을 이용하여 사이값(intermediate values)을 획득함으로서 각 영역별 입출력 3D 색 큐브를 생성할 수 있다.As shown in FIG. 5, the color correction apparatus may generate a 3D color cube for each area based on the obtained input / output color value. When the color values are irregular as in the example of k = 50, input and output 3D color cubes for each area may be generated by obtaining intermediate values using 3D interpolation.

도 5에서 원(circle) 표시는 B=0, G=255이고, R값이 0~250까지 50씩 증가할 때의 B, G, R 값을 나타내고 있다. 3D 보간법을 이용하여 사이값을 나타내었다.In Fig. 5, circles indicate B = 0 and G = 255, and represent B, G and R values when the R value increases by 50 from 0 to 250. FIG. 3D interpolation was used to represent the intervalues.

도 5에서 나타내는 3D 색 큐브는 본 발명을 설명하기 위한 예시로써, 이와 같은 3D 색 큐브의 모양은 영상 투영 장치의 특성 및 영역 또는 투영면의 색이나 모양 등에 따라 달라질 것이다.The 3D color cube shown in FIG. 5 is an example for explaining the present invention. The shape of the 3D color cube will vary depending on the characteristics of the image projector and the color or shape of the area or the projection surface.

다시 도 1을 참조하면, 색 보정 장치는 기준 3D 색 큐브를 선택한다(S140). 여기서 기준 3D 컬러 큐브라 함은 각 영역의 입력 색 대비 출력 색의 기준이 되는 3D 컬러 큐브를 의미한다. 즉, 각 영역은 상기 기준 3D 컬러 큐브와 동일한 입력 색 값에 대하여 동일한 출력 색 값을 갖도록 예기(expect)된다.Referring back to FIG. 1, the color correction apparatus selects a reference 3D color cube (S140). Here, the reference 3D color cube means a 3D color cube that is a reference of the output color to the input color of each area. That is, each area is expected to have the same output color value for the same input color value as the reference 3D color cube.

일 예로, 상기 기준 3D 컬러 큐브는 기준 영역의 3D 컬러 큐브가 될 수 있다. 다른 예로, 상기 기준 3D 컬러 큐브는 어느 특정 영역이 아닌, 전 영역의 입출력 색 값을 기반으로 생성한 새로운 3D 컬러 큐브가 될 수 있다.For example, the reference 3D color cube may be a 3D color cube of a reference area. As another example, the reference 3D color cube may be a new 3D color cube generated based on input / output color values of the entire area, not any specific area.

여기서 기준영역은 다른 영역들의 입력 색 대비 출력 색의 기준이 되는 영역을 의미한다. 앞에서 본 바와 같이 영상 투영 장치로 영상을 투영한 경우 규칙적인 색을 투영하기 어렵다. 따라서, 촬영이미지의 복수개의 영역 중 하나를 기준영역으로 정하여 간편하게 나머지 영역들의 입력 색 대비 출력 색을 매칭할 수 있다.In this case, the reference area means an area that is a reference of the output color to the input color of other areas. As described above, when the image is projected by the image projector, it is difficult to project regular colors. Therefore, one of the plurality of regions of the photographed image may be set as the reference region to easily match the output color to the input color of the remaining regions.

여기서 기준영역은 유저 인터페이스를 통한 입력에 기초하여 지정될 수 있다. 또한 상기 기준영역은 상기 촬영이미지의 n개의 영역 중 영역의 색 범위가 가장 작아서 다른 영역의 색 범위에 포함될 수 있는 영역으로 지정되도록 설정될 수 있다. 예를 들면, 상기 촬영이미지의 영역 #1이 R, G, B 각각 0~250의 출력 색 범위를 가지고 있고, 다른 영역은 그보다 범위가 큰 0~253의 출력 색 범위를 가지고 있는 경우, 영역 #1이 색 범위가 가장 작으므로 기준영역이 될 것이다. 만약 영역 #1이 아닌 다른 영역이 기준 영역이 될 경우 영역 #1은 자신의 색 범위를 넘는 251~253 출력 색값에는 매칭을 못하게 된다. 물론 경우에 따라서 출력 색 범위가 가장 작은 하나의 영역을 지정할 수 없는 경우도 있을 것이다. 이 경우는 출력 색 범위가 가장 작은 영역에 준하는 영역 중 임의의 한 영역을 유저가 선택하거나 색 보정 장치가 지정하도록 설정할 수 있다. 물론 이 외에도 색 끝단의 매칭을 포기하고서 샘플이미지의 입력 색과 촬영이미지의 출력 색 차이가 가장 작은 영역을 기준영역으로 설정하거나, 임의의 한 영역이 기준영역이 되도록 설정하여 본 발명을 실행할 수도 있을 것이다. In this case, the reference area may be designated based on an input through a user interface. In addition, the reference area may be set to be designated as an area that can be included in the color range of another area because the color range of the area is the smallest among the n areas of the photographed image. For example, when area # 1 of the photographed image has an output color range of 0 to 250 in each of R, G, and B, and another area has an output color range of 0 to 253, which is larger than that, area # 1. 1 will be the reference area because it has the smallest color range. If a region other than region # 1 becomes the reference region, region # 1 cannot match the output color values of 251 to 253 beyond its color range. Of course, in some cases, you may not be able to specify one area with the smallest output color range. In this case, the user can select any one of the areas corresponding to the area with the smallest output color range or can be set by the color correction apparatus. Of course, in addition to giving up matching of the color end, the present invention may be implemented by setting a region where the difference between the input color of the sample image and the output image of the photographed image is the smallest, or by setting any one region to be the reference region. will be.

또한, 본 발명에서는 어느 특정 영역의 3D 색 큐브를 기준 3D 색 큐브로 선택하는 이외에도, 모든 영역의 입출력 색 값들(또는 모든 영역의 3D 색 큐브)을 기반으로 3D 보간법 등을 적용하여 새로운 3D 색 큐브를 생성하되, 모든 영역의 3D 색 큐브들이 각각 포함하는 8개의 코너(corner) 위의 점(이하 코너 점이라 한다)들 중, 가장 안쪽의 코너 점들을 상기 새로운 3D 색 큐브를 위한 코너 점들로 선택(select) 또는 설정(set)한 후, 이를 기반으로 상기 새로운 3D 색 큐브를 생성함으로써, 가장 범위가 작은 상기 새로운 3D 색 큐브를 생성할 수 있고, 상기 새로운 3D 색 큐브를 기준 3D 색 큐브로 선택할 수 있다. 또한, 이는 다수의 영상 투영 장치를 사용하는 멀티 영상 투영 장치 시스템의 경우에도 마찬가지이다. 가장 범위가 적은 3D 색 큐브가 어느 한 영상 투영 장치의 어느 한 영역(a single region)에 속하기 힘들 수 있기 때문에, 복수의 영상 투영 장치를 사용하는 멀티 영상 투영 장치 시스템의 경우에도 모든 영역들에 대한 3D 색 큐브의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정 또는 선택함으로써, 이를 기반으로 가장 범위가 적은 새로운 3D 색 큐브를 생성할 수 있다.In addition, in the present invention, in addition to selecting the 3D color cube of a certain area as the reference 3D color cube, a new 3D color cube is applied by applying a 3D interpolation method based on input / output color values (or 3D color cubes of all areas) of all areas. Create a, but select the innermost corner points as the corner points for the new 3D color cube among the points on the eight corners (hereinafter referred to as corner points) that each of the 3D color cubes of all regions contain. After selecting or setting, the new 3D color cube can be generated based on the new 3D color cube, and the new 3D color cube having the smallest range can be generated, and the new 3D color cube can be selected as the reference 3D color cube. Can be. This also applies to a multi-image projection apparatus system using a plurality of image projection apparatuses. Because the smallest range of 3D color cubes can be difficult to belong to a single region of an image projector, even in a multi-image projector system using multiple image projectors, By setting or selecting the innermost corner points of the corner points on the eight corners of the 3D color cube for the new 3D color cube as the corner points for the new 3D color cube, the newest 3D color cube can be generated based on this.

상기 기준 3D 색 큐브를 기반으로 하여 각 영역에 대한 룩 업 테이블(Look-Up Table; LUT)을 생성한다(S140).A look-up table (LUT) for each region is generated based on the reference 3D color cube (S140).

여기서 룩 업 테이블(LUT)은 상기 기준 3D 색 큐브의 입출력 색 값 정보를 기준으로 하여, 각 영역들의 보정된 입력 색 값을 테이블로 만든 것이다. 나머지 영역에서도 동일한 입력 값에 대하여 상기 기준 3D 색 큐브과 동일한 출력 값이 나오도록 하기 위함이다. 예를 들면, (0, 0, 50)의 입력 색 값에 대하여 상기 기준 3D 색 큐브에서는 출력 색 값이 (0, 0, 35)로 나타나고, 어떤 영역들에서 출력 색값이 (0, 0, 40), (0, 0, 45)로 나타났을 경우, 상기 입력 색 값 (0, 0, 50)에 대하여 상기 영역들에서도 (0, 0, 35)와 같거나 가장 가까운 출력 색 값이 나오도록 영역별로 입력 색 값에 보정(또는 보상)을 가하여 테이블로 만든 것이다.Here, the lookup table (LUT) is a table of the corrected input color values of the respective areas based on the input and output color value information of the reference 3D color cube. This is for outputting the same output value as the reference 3D color cube for the same input value in the remaining areas. For example, for an input color value of (0, 0, 50), the output color value is represented as (0, 0, 35) in the reference 3D color cube, and in some areas the output color value is (0, 0, 40). ), (0, 0, 45), an area such that the output color value equal to or closest to (0, 0, 35) also appears in the areas with respect to the input color value (0, 0, 50). Each table is made by adding correction (or compensation) to the input color values.

색 보정 장치는 상기 룩 업 테이블을 이용하여 상기 영상 투영 장치로 입력될 입력 화상의 색을 보정한다(S160).The color correcting apparatus corrects the color of the input image to be input to the image projector using the lookup table (S160).

색 보정 장치는 상기 영상 투영 장치로 입력될 입력 화상을 수신한다. 이후 각 영역별 룩 업 테이블을 이용하여 상기 입력 화상의 색을 각 영역별로 보정하여 보정된 입력 화상을 영상 투영 장치로 전송한다. 이후 영상 투영 장치에서 보정된 입력 화상을 투영면에 투영함으로써 투영된 화상이 규칙적인 색값을 갖도록 한다. 이 경우 하나의 샘플이미지를 사용하여 색보정을 하므로 색 보정절차를 최소화할 수 있으며, 영역별 룩 업 테이블을 이용하여 색 보정을 하므로 신속한 보정을 보장할 수 있다.The color correction device receives an input image to be input to the image projector. Thereafter, the color of the input image is corrected for each region using the lookup table for each region, and the corrected input image is transmitted to the image projector. Thereafter, the projected image has a regular color value by projecting the input image corrected by the image projector onto the projection surface. In this case, color correction procedure can be minimized by using one sample image, and color correction can be guaranteed by using look-up table for each area.

본 발명의 일례로서, 색 보정 장치에 의하여 수행되는 영상 투영 장치에 대한 색 보정은 색 교정 단계와 입력 화상 보정 단계로 세분화될 수 있다.As an example of the present invention, the color correction for the image projection device performed by the color correction device may be subdivided into a color correction step and an input image correction step.

도 6은 본 발명의 일례에 따른 색 보정 장치의 색 교정 단계를 나타낸다.6 shows a color correction step of the color correction device according to an example of the present invention.

도 6을 참조하면, 색 보정 장치는 반복 패턴 샘플 이미지를 생성한다(S600)Referring to FIG. 6, the color correction apparatus generates a repeating pattern sample image (S600).

색 보정 장치는 샘플 이미지를 영상 투영 장치로 송신한다(S610).The color correcting apparatus transmits the sample image to the image projector (S610).

색 보정 장치는 영상 투영 장치를 통하여 투영면에 투영된 샘플이미지를 영상 획득 장치로 촬영한 촬영이미지를 획득한다(S620).The color correcting apparatus acquires a photographed image obtained by photographing the sample image projected on the projection plane through the image projector (S620).

색 보정 장치는 샘플이미지의 블록 색 값과 촬영이미지의 블록 색 값을 기반으로, 3D 보간법을 이용하여 영역별 3D 색 큐브를 생성한다(S630). 색 보정 장치는 또한 상술한 바와 같이 모든 영역들에 대한 3D 색 큐브의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정 또는 선택하고, 이를 기반으로 상기 새로운 3D 색 큐브를 생성할 수 있다. The color correction apparatus generates a 3D color cube for each region by using 3D interpolation based on the block color value of the sample image and the block color value of the captured image (S630). The color correction apparatus also sets or selects the innermost corner points of the corner points on the eight corners of the 3D color cube for all areas as the corner points for the new 3D color cube as described above, and based on the above, You can create a new 3D color cube.

색 보정 장치는 기준 3D 색 큐브를 선택한다(S640). 상술한 바와 같이 상기 기준 3D 색 큐브는 기준영역의 3D 색 큐브가 될 수 있다. 또는 색 보정 장치는 모든 영역의 3D 색 큐브들이 각각 포함하는 8개의 코너 위의 코너점들 중, 가장 안쪽의 코너 점들을 상기 새로운 3D 색 큐브를 위한 코너 점들로 선택(select) 또는 설정(set)한 후, 이를 기반으로 상기 새로운 3D 큐브를 생성하고, 이를 상기 기준 3D 색 큐브로 선택할 수도 있다. The color correction apparatus selects a reference 3D color cube (S640). As described above, the reference 3D color cube may be a 3D color cube of the reference region. Or the color correction apparatus selects or sets the innermost corner points among the corner points on the eight corners each of which includes the 3D color cubes of all the areas as corner points for the new 3D color cube. After that, the new 3D cube may be generated based on the selected 3D cube, and the new 3D cube may be selected as the reference 3D color cube.

상술한 바와 같이 상기 기준영역은 사용자 인터페이스로 직접 설정할 수 있고, 색 범위가 가장 작은 영역이 상기 기준영역으로 선택되도록 할 수도 있다. 이 외에도 샘플이미지의 입력 색과 촬영이미지의 출력 색 차이가 가장 작은 영역이 상기 기준영역으로 선택되도록 하거나, 임의의 한 영역이 상기 기준영역이 되도록 설정할 수 있다.As described above, the reference area may be set directly by the user interface, and the area having the smallest color range may be selected as the reference area. In addition, the region having the smallest difference between the input color of the sample image and the output color of the photographed image may be selected as the reference region, or any one region may be set as the reference region.

색 보정 장치는 상기 기준 3D 색 큐브를 기반으로, 영역별 룩 업 테이블(LUT)을 생성한다(S650). The color correction apparatus generates a lookup table (LUT) for each area based on the reference 3D color cube (S650).

도 7은 본 발명의 일례에 따른 색 보정 장치의 입력 화상 보정 단계를 나타낸다.7 shows an input image correction step of the color correction device according to an example of the present invention.

도 7을 참조하면, 색 보정 장치는 영상 투영 장치로 입력하려고 하는 입력 화상을 수신받는다(S700).Referring to FIG. 7, the color correcting apparatus receives an input image to be input to the image projector (S700).

색 보정 장치는 각 영역별 LUT를 기반으로 상기 입력 화상의 영역별로 화소 단위 LUT 매칭(matching)을 수행한다(S720).The color correction apparatus performs LUT matching on a pixel-by-pixel basis for each region of the input image based on the LUT for each region (S720).

LUT 매칭을 통하여 입력 화상이 규칙적인 색 값을 표현할 수 있도록 보정한다.Through LUT matching, the input image is corrected to express regular color values.

색 보정 장치는 상기 보정된 화상을 영상 투영 장치로 전송한다(S740).The color correction apparatus transmits the corrected image to the image projector (S740).

이후 영상 투영 장치에서 색이 보정된 화상을 투영면에 투영할 수 있다.The image projector may then project the color-corrected image onto the projection surface.

또한, 본 발명은 멀티 영상 투영 장치 시스템에도 적용이 가능하다.In addition, the present invention can be applied to a multi-image projection apparatus system.

도 8은 본 발명을 멀티 영상 투영 장치 시스템에 적용한 일례이다. 8 is an example of applying the present invention to a multi-image projection apparatus system.

색 보정 장치는 멀티 영상 투영 장치를 구성하는 m개의 영상 투영 장치 중 하나씩을 통해 순차적으로 투영된 샘플이미지를 영상 획득 장치로 각각 촬영한 m개의 촬영이미지를 획득한다(S800). 각 촬영이미지는 n개의 영역으로 구성될 수 있다.The color correcting apparatus obtains m photographed images of the sample images sequentially projected through one of the m image projectors of the multi image projector, respectively, by the image capturing apparatus (S800). Each photographed image may be composed of n areas.

색 보정 장치는 상기 샘플이미지의 블록의 색값과 상기 샘플이미지의 블록에 대응하는 상기 m개의 촬영이미지의 블록의 색 값에 기반하여, 각각 n개의 영역을 포함하는 상기 m개의 촬영이미지의 m×n개의 영역에 대한 3D 색 큐브를 생성한다(S820). 색 보정 장치는 또한 상술한 바와 같이 모든 영역들에 대한 3D 색 큐브의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정 또는 선택하고, 이를 기반으로 상기 새로운 3D 색 큐브를 더 생성할 수 있다. The color correction apparatus is based on the color value of the block of the sample image and the color value of the block of the m photographed image corresponding to the block of the sample image, m × n of the m photographed image each including n areas A 3D color cube is generated for the three regions (S820). The color correction apparatus also sets or selects the innermost corner points of the corner points on the eight corners of the 3D color cube for all areas as the corner points for the new 3D color cube as described above, and based on the above, You can create more new 3D color cubes.

색 보정 장치는 기준 3D 색 큐브를 선택한다(S840). 색 보정 장치는 상기 m개의 촬영이미지의 m×n개의 영역 중 하나를 기준영역으로 하고, 상기 기준 영역의 3D 색 큐브를 기준 3D 색 큐브로 선택할 수 있다. 또는 색 보정 장치는 상기 새로운 3D 색 큐브를 기준 3D 색 큐브로 선택할 수도 있다. 여기서 하나의 촬영이미지는 n개의 영역으로 구성되고, 촬영이미지는 총 m개이므로, 모든 영역의 수는 m×n개가 된다.The color correction apparatus selects a reference 3D color cube (S840). The color correcting apparatus may select one of m × n areas of the m photographed images as a reference area, and select a 3D color cube of the reference area as a reference 3D color cube. Alternatively, the color correction apparatus may select the new 3D color cube as a reference 3D color cube. Here, one photographed image is composed of n regions, and since the photographed images are m in total, the number of all regions is m × n.

색 보정 장치는 상기 기준 3D 색 큐브를 기반으로 각 영역에 대한 룩 업 테이블(LUT)을 생성한다(S860).The color correction apparatus generates a lookup table (LUT) for each area based on the reference 3D color cube (S860).

색 보정 장치는 상기 룩 업 테이블을 이용하여 상기 멀티 영상 투영 장치로 입력될 입력 화상의 색을 보정한다(S880).The color correction apparatus corrects the color of the input image to be input to the multi-image projection apparatus by using the lookup table (S880).

상술한 바와 같이 색 보정 장치는 투영될 입력 화상 색 정보를 수신하여 상기 LUT를 기반으로 각 영상 투영 장치의 각 영역별 입력 색을 보정한다. 그 후 색 보정 장치는 각 영상 투영 장치에 맞추어 보정된 입력 화상을 해당 영상 투영 장치마다 발송한다. 이후 멀티 영상 투영 장치 시스템에서 규칙적인 색 값을 갖는 화상을 투영할 수 있게 된다. As described above, the color correction apparatus receives input image color information to be projected, and corrects input colors of respective regions of each image projection apparatus based on the LUT. Thereafter, the color correction device sends an input image corrected for each image projection device for each image projection device. Thereafter, the multi-image projection apparatus system can project an image having a regular color value.

도 9는 본 발명에 따른 색 보정 장치의 일례를 나타낸다.9 shows an example of a color correction device according to the present invention.

도 9를 참조하면, 색 보정 장치(900)는 샘플이미지 생성부(910), 수신부(920), 색 정보 생성부(930), 색 변환 생성부(940), 메모리부(950), 색 보정부(960), 송신부(970)를 포함한다.Referring to FIG. 9, the color correction apparatus 900 includes a sample image generator 910, a receiver 920, a color information generator 930, a color conversion generator 940, a memory unit 950, and a color beam. The government 960 and the transmitter 970 are included.

샘플이미지 생성부(910)는 영상 투영 장치의 색 보정을 위한 샘플이미지를 생성한다. 상기 샘플이미지 생성에 있어 샘플이미지를 크기와 색 패턴이 동일한 n개의 영역으로 나누어지도록 샘플이미지를 만들 수 있다. The sample image generator 910 generates a sample image for color correction of the image projector. In generating the sample image, the sample image may be divided into n regions having the same size and color pattern.

샘플이미지 생성부(910)는 각 영역마다 복수의 블록을 포함하는 상기 샘플이미지를 생성하되, 상기 복수의 블록의 각각의 색 값은 (R, G, B)에 대응되며, 상기 R, G, B는 각각 최소값부터 최대값 사이의 어느 하나의 값을 가진다. 샘플이미지 생성부(910)에서 상기 각 R, G, B마다 8bit씩 할당하는 경우 (0, 0, 0)부터 (255, 255, 255) 사이의 색을 표현할 수 있다. 샘플이미지 생성부(910)는 상기 어느 하나의 값을 k의 배수로 설정하여 상기 복수의 블록의 색 값을 표현할 수도 있다. 또한 상기 k의 값은 미리 설정되어 있거나, 유저 인터페이스에 의한 입력에 기초하여 상기 k를 결정할 수도 있다.The sample image generating unit 910 generates the sample image including a plurality of blocks in each area, each color value of the plurality of blocks corresponds to (R, G, B), and the R, G, Each B has a value between the minimum and maximum values. When the sample image generator 910 allocates 8 bits to each of R, G, and B, colors between (0, 0, 0) to (255, 255, 255) may be expressed. The sample image generator 910 may express the color values of the plurality of blocks by setting any one value to a multiple of k. In addition, the value of k may be set in advance, or k may be determined based on an input by a user interface.

또한 샘플이미지 생성부(910)는 샘플이미지 생성에 있어 상기 (R, G, B)로 표현 가능한 모든 색 값들 각각이 적어도 한 번 이상 상기 한 영역 내의 복수의 블록에 대응되도록 설정할 수 있다. 샘플이미지 생성부(910)는 상기 k=50이고, 상기 (R, G, B)로 표현 가능한 모든 색 값들 각각이 적어도 두 번 이상 상기 한 영역 내의 복수의 블록에 대응되도록 샘플이미지를 생성할 수도 있다.In addition, the sample image generator 910 may set each color value that can be represented by the (R, G, B) to correspond to a plurality of blocks in the region at least once in generating the sample image. The sample image generator 910 may generate a sample image such that k = 50 and all of the color values represented by (R, G, B) correspond to a plurality of blocks in the region at least twice. have.

비록 도 9에는 색 보정 장치의 샘플이미지 생성부(910)에서 샘플이미지를 생성하여 색 보정 동작을 수행하는 것으로 도시되어 있으나, 색 보정 장치(900)는 이미 만들어져 있는 샘플이미지를 사용할 수 있다. 이 경우 상기 샘플이미지의 색값을 수신부(920)에서 수신하거나, 또는 메모리부(950)에 미리 입력되어 있는 샘플이미지의 색값을 이용할 수 있을 것이다. 이 경우, 샘플이미지 생성부(910)는 생략될 수 있다.Although FIG. 9 illustrates that a sample image is generated by the sample image generator 910 of the color correction apparatus to perform a color correction operation, the color correction apparatus 900 may use a sample image that is already made. In this case, the color value of the sample image may be received by the receiver 920 or the color value of the sample image previously input to the memory unit 950 may be used. In this case, the sample image generator 910 may be omitted.

수신부(920)는 영상 투영 장치에 의해 투영면에 투영된 샘플이미지를 영상 획득 장치로 촬영한 촬영이미지를 획득한다.The receiver 920 acquires a photographed image obtained by photographing the sample image projected on the projection surface by the image projector.

색 정보 생성부(930)는 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 촬영이미지의 블록의 색 값에 기반하여 상기 촬영이미지의 블록을 포함하는 영역에 대한 입출력 색 정보를 생성한다.Color information generation unit 930 is based on the color value of the block of the sample image and the color value of the block of the photographed image corresponding to the block of the sample image input and output color information for the area including the block of the photographed image Create

색 정보 생성부(930)는 상기 샘플이미지의 블록의 색 값을 입력색으로 보고 대응되는 상기 촬영이미지의 블록의 색 값 출력색으로 보아 이를 기반으로 영역별 입출력 색 정보를 생성할 수 있다. 또한 색 정보 생성부는 상기 입출력 색 정보에 3D 보간법을 이용하여 영역별 3D 색 큐브를 생성할 수 있다. 또한, 색 정보 생성부(930)는 모든 영역들에 대한 3D 색 큐브의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정 또는 선택하고, 이를 기반으로 상기 새로운 3D 색 큐브를 더 생성할 수 있다. The color information generator 930 may generate the input / output color information for each region based on the color value output color of the block of the photographed image based on the color value of the block of the sample image as the input color. Also, the color information generator may generate a 3D color cube for each region by using 3D interpolation on the input and output color information. In addition, the color information generation unit 930 sets or selects the innermost corner points of the corner points on the eight corners of the 3D color cube for all the areas as corner points for the new 3D color cube, and based on this, The new 3D color cube may be further generated.

색 변환부(940)는 상기 촬영이미지의 n개의 영역 중 하나를 기준영역으로 선택할 수 있다. 이 경우 색 변환부(940)는 3D 색 큐브의 색 범위가 가장 적은 영역을 상기 기준영역으로 선택할 수도 있고, 입력 색과 출력 색 간 차이가 가장 적은 영역을 상기 기준영역으로 선택할 수도 있다. 또한 유저 인터페이스에 의한 입력에 기초하여 상기 기준 영역을 선택할 수도 있고, 임의의 한 영역을 기준영역으로 선택할 수도 있다. The color converter 940 may select one of the n areas of the photographed image as the reference area. In this case, the color converter 940 may select an area having the smallest color range of the 3D color cube as the reference area, or select an area having the smallest difference between the input color and the output color as the reference area. The reference area may be selected based on an input by the user interface, or an arbitrary area may be selected as the reference area.

색 변환부(940)는 상기 기준영역의 3D 색 큐브를 기준 3D 색 큐브로 선택할 수 있다. 또한 색 변환부(940)는 상기 새로운 3D 색 큐브를 상기 기준 3D 색 큐브로 선택할 수도 있다.The color converter 940 may select the 3D color cube of the reference area as the reference 3D color cube. In addition, the color converter 940 may select the new 3D color cube as the reference 3D color cube.

색 변환부(940)는 상기 기준 3D 색 큐브를 기반으로 각 영역에 대한 룩 업 테이블을 생성한다. 메모리부(950)는 상기 각 영역에 대한 룩 업 테이블을 기록한다.The color converter 940 generates a lookup table for each area based on the reference 3D color cube. The memory unit 950 records a look up table for each of the areas.

색 보정부(960)는 영상 투영 장치에 투영하고자 하는 입력 화상에 대하여 메모리부(950)에 기록된 룩 업 테이블을 이용하여 입력 화상의 색을 보정한다. 상기 수신부(920)에서 상기 입력 화상을 수신하는 동작을 더 하여 상기 입력 화상을 색 보정부로 전송할 수 있다.The color corrector 960 corrects the color of the input image by using a look-up table recorded in the memory unit 950 for the input image to be projected onto the image projector. The receiving unit 920 may receive the input image and transmit the input image to the color corrector.

송신부(970)는 상기 보정된 입력 화상의 색 정보를 색 보정부로부터 수신하여 영상 투영 장치에 전송함으로써, 영상 투영 장치는 보정된 입력 화상을 투영할 수 있다.The transmitter 970 receives the color information of the corrected input image from the color corrector and transmits the color information to the image projector, so that the image projector may project the corrected input image.

또한, 본 발명의 멀티 영상 투영 장치(시스템)에 대한 적용에 있어서, 색 보정 장치(900)는 수신부(920)에서 멀티 영상 투영 장치를 구성하는 m개의 영상 투영 장치를 통해 순차적으로 투영면에 투영된 샘플이미지를 영상 획득 장치로 각각 촬영한 m개의 촬영이미지를 획득한다.In addition, in the application to the multi-image projection apparatus (system) of the present invention, the color correction apparatus 900 is sequentially projected on the projection surface through the m image projection apparatus constituting the multi-image projection apparatus in the receiver 920 M photographed images obtained by capturing the sample images with the image capturing apparatus are obtained.

색 정보 생성부(930)에서는 상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 m개의 촬영이미지의 블록의 색 값에 기반하여, 상기 m개의 촬영이미지 각각의 블록을 포함하는 m×n개의 영역에 대한 입출력 색 정보를 생성한다. 색 정보 생성부(930)는 상기 입출력 색 정보를 기반으로 m×n개의 영역 각각에 대한 3D 색 큐브를 생성할 수 있다. 또한, 색 정보 생성부(930)는 m×n개의 영역들에 대한 3D 색 큐브의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정 또는 선택하고, 이를 기반으로 상기 새로운 3D 색 큐브를 더 생성할 수 있다.The color information generation unit 930 includes a block of each of the m photographed images based on a color value of the block of the sample image and a color value of the block of the m photographed images corresponding to the block of the sample image. Input / output color information for m × n areas is generated. The color information generator 930 may generate a 3D color cube for each of m × n areas based on the input / output color information. In addition, the color information generation unit 930 sets or selects the innermost corner points of the corner points on the eight corners of the 3D color cube for the m × n areas as the corner points for the new 3D color cube, Based on this, the new 3D color cube may be further generated.

색 변환부(940)는 상기 촬영이미지의 m×n개의 영역 중 하나를 기준영역으로 선택할 수 있다. 이 경우 색 변환부(940)는 3D 색 큐브의 색 범위가 가장 적은 영역을 상기 기준영역으로 선택할 수도 있고, 입력 색과 출력 색 간 차이가 가장 적은 영역을 상기 기준영역으로 선택할 수도 있다. 또한 유저 인터페이스에 의한 입력에 기초하여 상기 기준 영역을 선택할 수도 있고, 임의의 한 영역을 기준영역으로 선택할 수도 있다. The color converter 940 may select one of m × n areas of the photographed image as a reference area. In this case, the color converter 940 may select an area having the smallest color range of the 3D color cube as the reference area, or select an area having the smallest difference between the input color and the output color as the reference area. The reference area may be selected based on an input by the user interface, or an arbitrary area may be selected as the reference area.

색 변환부(940)는 상기 기준영역의 3D 색 큐브를 기준 3D 색 큐브로 선택할 수 있다. 또한 색 변환부(940)는 상기 새로운 3D 색 큐브를 상기 기준 3D 색 큐브로 선택할 수도 있다.The color converter 940 may select the 3D color cube of the reference area as the reference 3D color cube. In addition, the color converter 940 may select the new 3D color cube as the reference 3D color cube.

색 변환부(940)는 상기 기준 3D 색 큐브를 기반으로 m×n 영역에 대한 룩 업 테이블을 생성한다. The color converter 940 generates a lookup table for the m × n area based on the reference 3D color cube.

메모리부(950)은 상기 룩 업 테이블을 기록한다. The memory unit 950 records the lookup table.

색 보정부(960)는 메모리부(950)에 기록된 상기 룩 업 테이블를 이용하여 상기 멀티 투영 장치로 입력될 입력 화상의 색을 보정한다. The color corrector 960 corrects the color of the input image to be input to the multi-projector using the look-up table recorded in the memory 950.

송신부(970)는 상기 보정된 입력 화상의 색 정보를 각 영상 투영 장치에 전송한다. The transmitter 970 transmits color information of the corrected input image to each image projector.

도 10은 본 발명의 일례에 따른 색 보정 시스템의 색교정 절차를 나타내는 도면이다.10 is a diagram illustrating a color calibration procedure of the color correction system according to an example of the present invention.

도 10을 참조하면, 색 보정 장치(1000)는 색보정을 위한 색 패턴을 가진 샘플이미지를 생성한다. 색 보정 장치(1000)는 상기 샘플이미지를 영상 투영 장치(1020)로 송신한다. 영상 투영 장치(1020)는 상기 샘플이미지를 투영면에 투영한다. 영상 획득 장치(1040)는 투영면으로 투영된 샘플이미지를 촬영하여 촬영이미지를 생성하고 이를 색 보정 장치(1000)로 전송한다. 그리고, 색 보정 장치(1000)는 상기 샘플이미지 색 값과 상기 획득된 촬영이미지의 색 값을 기반으로 영역별 룩 업 테이블(LUT)을 생성한다.Referring to FIG. 10, the color correction apparatus 1000 generates a sample image having a color pattern for color correction. The color correction apparatus 1000 transmits the sample image to the image projector 1020. The image projector 1020 projects the sample image onto the projection surface. The image capturing apparatus 1040 photographs the sample image projected onto the projection surface to generate a photographed image and transmits the photographed image to the color correction apparatus 1000. In addition, the color correction apparatus 1000 generates a lookup table for each region based on the sample image color value and the acquired color value of the captured image.

도 11은 본 발명의 일례에 따른 색 보정 시스템의 색보정 후 보정된 화상을 투영하는 절차를 나타낸 도면이다.11 is a diagram illustrating a procedure of projecting a corrected image after color correction of a color correction system according to an example of the present invention.

도 11을 참조하면, 색 보정 장치(1100)는 상기 생성한 LUT를 기반으로 입력 화상을 보정한다. 색 보정 장치(1100)는 보정된 화상을 영상 투영 장치(1120)로 전송하고, 영상 투영 장치(1120)에서 상기 보정된 화상을 투영하여 색 보정을 확인할 수 있다.Referring to FIG. 11, the color correcting apparatus 1100 corrects an input image based on the generated LUT. The color corrector 1100 may transmit the corrected image to the image projector 1120 and may project the corrected image by the image projector 1120 to confirm color correction.

비록, 도 11에서는 보정된 샘플 이미지가 투영되는 걸로 도시었으나, 이는 예시일 뿐이고, 색 보정 장치(1100)는 영상 투영 장치(1120)를 통하여 투영될 입력 화상을 수신하고, 상기 LUT를 기반으로 입력 화상을 보정하여 영상 투영 장치(1120)로 전송함으로써, 투영면에서의 입력 화상의 불규칙적인 색 차를 최소화할 수 있다. Although the corrected sample image is illustrated as being projected in FIG. 11, this is merely an example, and the color correcting apparatus 1100 receives an input image to be projected through the image projector 1120 and inputs the image based on the LUT. By correcting the image and transmitting it to the image projector 1120, an irregular color difference of the input image on the projection surface may be minimized.

도 12a와 도12b는 본 발명에 따른 색 보정 전, 후의 입력 화상의 변화를 나타낸 도면이다.12A and 12B show changes in an input image before and after color correction according to the present invention.

도 12a는 영상 투영 장치의 특성에 의해 색이 왜곡된 화상을 보여주고 있으며, 도 12b는 본 발명이 적용되어 색이 보정된 화상을 보여주고 있다.FIG. 12A illustrates an image in which color is distorted due to characteristics of an image projector, and FIG. 12B illustrates an image in which color is corrected by applying the present invention.

상기와 같이 본 발명은 싱글 프로젝션 또는 멀티 프로젝션 시스템에서, 투영된 영상의 색차를 최소화하고, 보정절차를 단순화하여 신속성을 보장할 수 있다.As described above, in the single projection or multi-projection system, the present invention can minimize the color difference of the projected image and simplify the correction procedure to ensure speed.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
The above description is merely illustrative of the technical idea of the present invention, and those skilled in the art to which the present invention pertains may make various modifications and variations without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas falling within the scope of the same shall be construed as falling within the scope of the present invention.

Claims (20)

색 보정 장치에 의해 수행되는 영상 투영 장치에 대한 색 보정 방법으로,
영상 투영 장치로 투영면에 투영한 샘플이미지를 영상 획득 장치로 촬영한 촬영이미지를 획득하는 단계;
상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 촬영이미지의 블록의 색 값에 기반하여 상기 촬영이미지의 n개의 영역 각각에 대한 3D 색 큐브(3D color cube)를 생성하는 단계;
기준 3D 색 큐브를 선택하는 단계;
상기 기준 3D 색 큐브를 기반으로 하여, 상기 n개의 영역 각각에 대한 룩 업 테이블(Look-Up Table ; LUT)을 생성하는 단계; 및
상기 룩 업 테이블을 이용하여 상기 영상 투영 장치로 투영될 입력 화상의 색을 보정하는 단계를 포함하는, 색 보정 방법.
A color correction method for an image projection device performed by a color correction device,
Obtaining a photographed image obtained by photographing a sample image projected onto a projection surface by an image projector;
Generating a 3D color cube for each of the n areas of the photographed image based on a color value of the block of the sample image and a color value of the block of the photographed image corresponding to the block of the sample image; ;
Selecting a reference 3D color cube;
Generating a look-up table (LUT) for each of the n areas based on the reference 3D color cube; And
Correcting a color of an input image to be projected to the image projector by using the lookup table.
제 1항에 있어서,
상기 샘플이미지는 크기와 색 패턴이 동일한 n개의 영역으로 나뉘는 것을 특징으로 하는, 색 보정 방법.
The method of claim 1,
The sample image is divided into n areas having the same size and color pattern.
제 2항에 있어서,
상기 샘플이미지의 각 영역은 복수의 블록을 포함하고, 상기 복수의 블록 각각의 색 값은 (R, G, B)에 대응되며, 상기 R, G, B는 각각 최소값부터 최대값 사이의 어느 하나의 값을 가지는 것을 특징으로 하는, 색 보정 방법.
The method of claim 2,
Each region of the sample image includes a plurality of blocks, and color values of each of the plurality of blocks correspond to (R, G, B), and each of R, G, and B is any one between a minimum value and a maximum value. Color correction method, characterized in that having a value of.
제 3항에 있어서,
상기 어느 하나의 값은 k의 배수인 것을 특징으로 하는, 색 보정 방법.
The method of claim 3,
Wherein any one of the values is a multiple of k.
제 4항에 있어서,
상기 k=50이고, 상기 (R, G, B)로 표현 가능한 모든 색 값들 각각은 적어도 한 번 이상 상기 복수의 블록에 대응되는 것을 특징으로 하는, 색 보정 방법.
5. The method of claim 4,
And k = 50 and each of all color values representable by (R, G, B) corresponds to the plurality of blocks at least once.
제 1항에 있어서,
상기 기준 3D 색 큐브는, 상기 촬영이미지의 n개의 영역중 영역의 색 범위가 가장 작은 영역인 기준영역의 상기 3D 색 큐브로 선택되는 것을 특징으로 하는, 색 보정 방법.
The method of claim 1,
And the reference 3D color cube is selected as the 3D color cube of the reference region, which is a region where the color range of the region is the smallest among the n regions of the photographed image.
제 1항에 있어서,
상기 기준 3D 색 큐브는, 상기 촬영이미지의 n개의 영역 중 입력 색 값 대비 출력 색 값의 차이가 가장 작은 영역인 기준영역의 상기 3D 색 큐브로 선택되는 것을 특징으로 하는, 색 보정 방법.
The method of claim 1,
And the reference 3D color cube is selected as the 3D color cube of the reference region, which is a region where the difference between the output color value and the input color value is the smallest among the n areas of the photographed image.
제 1항에 있어서,
상기 n개의 영역의 3D 색 큐브 각각의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정(set)하고, 이를 기반으로 새로운 3D 색 큐브를 생성하는 단계를 더 포함하되,
상기 기준 3D 색 큐브는 상기 새로운 3D 색 큐브로 선택되는 것을 특징으로 하는, 색 보정 방법.
The method of claim 1,
Setting the innermost corner points of the corner points on the eight corners of each of the n area 3D color cubes as corner points for the new 3D color cube, and generating a new 3D color cube based on the corner points for the new 3D color cube. Include more,
And the reference 3D color cube is selected as the new 3D color cube.
색 보정 장치에 의해 수행되는 멀티 영상 투영 장치에 대한 색 보정 방법으로,
멀티 영상 투영 장치를 구성하는 m개의 영상 투영 장치 중 하나씩을 통해 순차적으로 투영면에 투영된 샘플이미지를 영상 획득 장치로 각각 촬영한 m개의 촬영이미지를 획득하는 단계;
상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 m개의 촬영이미지의 블록의 색 값에 기반하여, 각각 n개의 영역을 포함하는 상기 m개의 촬영이미지의 m×n영역 각각에 대한 3D 색 큐브를 생성하는 단계;
기준 3D 색 큐브를 선택하는 단계;
상기 기준 3D 색 큐브를 기반으로, 상기 m×n개의 영역 각각에 룩 업 테이블을 생성하는 단계; 및
상기 룩 업 테이블을 이용하여 상기 멀티 영상 투영 장치로 투영될 입력 화상의 색을 보정하는 단계를 포함하는, 색 보정 방법.
A color correction method for a multi-image projection apparatus performed by a color correction apparatus,
Acquiring m photographed images of the sample image projected on the projection plane sequentially through one of m image projectors of the multi image projector, respectively, by the image capturing apparatus;
Based on the color value of the block of the sample image and the color value of the block of the m photographed images corresponding to the block of the sample image, each of m × n regions of the m photographed images including n regions, respectively. Generating a 3D color cube for the;
Selecting a reference 3D color cube;
Generating a lookup table in each of the m × n areas based on the reference 3D color cube; And
Correcting a color of an input image to be projected to the multi-image projection apparatus using the look up table.
영상 투영 장치에 대한 색 보정 장치로서,
영상 투영 장치에 의해 투영면에 투영된 샘플이미지를 영상 획득 장치로 촬영한 촬영이미지를 획득하는 수신부;
상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 촬영이미지의 블록의 색 값에 기반하여 상기 촬영이미지의 n개의 영역 각각에 대한 3D 색 큐브를 생성하는 색 정보 생성부;
기준 3D 색 큐브를 선택하고, 상기 기준 3D 색 큐브를 기반으로 하여, 상기 촬영이미지의 n개의 영역 각각에 대한 룩 업 테이블을 생성하는 색 변환부;
상기 룩 업 테이블을 기록하는 메모리부;
상기 룩 업 테이블을 이용하여 입력 화상의 색을 보정하는 색 보정부; 및
상기 보정된 입력 화상을 영상 투영 장치로 송신하는 송신부를 포함하는, 색 보정 장치.
A color correction device for an image projector,
A receiver which acquires a photographed image obtained by photographing a sample image projected onto the projection surface by the image projector;
A color information generation unit generating a 3D color cube for each of the n areas of the photographed image based on a color value of the block of the sample image and a color value of the block of the photographed image corresponding to the block of the sample image;
A color conversion unit for selecting a reference 3D color cube and generating a lookup table for each of the n areas of the photographed image based on the reference 3D color cube;
A memory unit for recording the lookup table;
A color corrector for correcting a color of an input image using the lookup table; And
And a transmitter for transmitting the corrected input image to an image projector.
제 10항에 있어서,
상기 수신부는, 상기 샘플이미지의 색 값 및 입력 화상의 색 값 중 적어도 하나를 더 수신하는, 색 보정 장치.
The method of claim 10,
And the receiving unit further receives at least one of a color value of the sample image and a color value of an input image.
제 10항에 있어서,
상기 샘플이미지를 생성하는 샘플이미지 생성부를 더 포함하는, 색 보정 장치.
The method of claim 10,
And a sample image generator for generating the sample image.
제 12항에 있어서,
상기 샘플이미지 생성부는, 상기 샘플이미지 생성에 있어 샘플이미지를 크기와 색 패턴이 동일한 n개의 영역으로 나누어지도록 상기 샘플이미지를 만드는 것을 특징으로 하는, 색 보정 장치.
13. The method of claim 12,
The sample image generation unit, the color correction device, characterized in that for creating the sample image to divide the sample image into n areas having the same size and color pattern.
제 13항에 있어서,
상기 샘플이미지 생성부는 각 영역마다 복수의 블록을 포함하는 상기 샘플이미지를 생성하되, 상기 복수의 블록의 각각의 색 값은 (R, G, B)에 대응되며, 상기 R, G, B는 각각 최소값부터 최대값 사이의 어느 하나의 값을 가지는 것을 특징으로 하는, 색 보정 장치.
The method of claim 13,
The sample image generation unit generates the sample image including a plurality of blocks in each region, each color value of the plurality of blocks corresponds to (R, G, B), and each of R, G, and B is Color correction apparatus, characterized in that it has any one value between the minimum value and the maximum value.
제 14항에 있어서,
상기 샘플이미지 생성부는 상기 샘플이미지 생성에 있어 상기 어느 하나의 값을 k의 배수로 설정하고, 상기 (R, G, B)로 표현 가능한 모든 색 값들 각각이 상기 복수의 블록 중 적어도 하나의 블록의 색 값이 되도록 설정하는 것을 특징으로 하는, 색 보정 장치.
The method of claim 14,
The sample image generating unit sets the one value to a multiple of k in generating the sample image, and each of all the color values that can be expressed as (R, G, B) is the color of at least one block of the plurality of blocks. A color correction device, characterized in that it is set to be a value.
제 10항에 있어서,
상기 색 변환부는 상기 촬영이미지의 n개의 영역 중 영역의 색 범위가 가장 작은 영역인 기준영역의 3D 색 큐브를 상기 기준 3D 색 큐브로 선택하는 것을 특징으로 하는, 색 보정 장치.
The method of claim 10,
And the color conversion unit selects the 3D color cube of the reference area, the area of which the color range of the area is the smallest among the n areas of the photographed image, as the reference 3D color cube.
제 10항에 있어서,
상기 색 변환부는 상기 n개의 영역의 3D 색 큐브 각각의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정하고, 이를 기반으로 새로운 3D 색 큐브를 생성하되,
상기 색 변환부는 상기 새로운 3D 색 큐브를 상기 기준 3D 색 큐브로 선택하는 것을 특징으로 하는, 색 보정 장치.
The method of claim 10,
The color converter sets the innermost corner points of the corner points on the eight corners of each of the 3D color cubes of the n regions as corner points for the new 3D color cube, and generates a new 3D color cube based on this. ,
And the color converting unit selects the new 3D color cube as the reference 3D color cube.
멀티 영상 투영 장치에 대한 색 보정 장치로서,
멀티 영상 투영 장치를 구성하는 m개의 영상 투영 장치 중 하나씩을 통해 순차적으로 투영면에 투영된 샘플이미지를 영상 획득 장치로 각각 촬영한 m개의 촬영이미지를 획득하는 수신부;
상기 샘플이미지의 블록의 색 값과 상기 샘플이미지의 블록에 대응하는 상기 m개의 촬영이미지의 블록의 색 값에 기반하여, 각각 n개의 영역을 포함하는 상기 m개의 촬영이미지의 m×n개의 영역 각각에 대한 3D 색 큐브를 생성하는 색 정보 생성부;
기준 3D 색 큐브를 선택하고, 상기 기준 3D 색 큐브를 기반으로, 상기 m×n개의 영역 각각에 대한 룩 업 테이블을 생성하는 색 변환부;
상기 룩 업 테이블을 기록하는 메모리부;
상기 룩 업 테이블을 이용하여 상기 멀티 영상 투영 장치로 입력될 입력 화상의 색을 보정하는 색 보정부; 및
상기 보정된 입력 화상을 각 영상 투영 장치로 송신하는 송신부를 포함하는, 색 보정 장치.
A color correction device for a multi-image projection device,
A receiving unit for acquiring m photographed images of the sample image projected onto the projection plane sequentially through one of the m image projectors constituting the multi-image projection apparatus, respectively;
Based on the color value of the block of the sample image and the color value of the block of the m captured images corresponding to the block of the sample image, each of m × n areas of the m captured images each including n areas A color information generator for generating a 3D color cube for the;
A color conversion unit for selecting a reference 3D color cube and generating a lookup table for each of the m × n areas based on the reference 3D color cube;
A memory unit for recording the lookup table;
A color corrector for correcting a color of an input image to be input to the multi-image projector using the lookup table; And
And a transmission unit for transmitting the corrected input image to each image projector.
제 18항에 있어서,
상기 색 변환부는 상기 촬영이미지의 m×n개의 영역 중 영역의 색 범위가 가장 작은 영역인 기준영역의 3D 색 큐브를 상기 기준 3D 색 큐브로 선택하는 것을 특징으로 하는, 색 보정 장치.
19. The method of claim 18,
And the color converting unit selects the 3D color cube of the reference area, which is the area having the smallest color range, among the m × n areas of the photographed image as the reference 3D color cube.
제 18항에 있어서,
상기 색 변환부는 상기 m×n개의 영역의 3D 색 큐브 각각의 8개의 코너 위의 코너 점들중 가장 안쪽의 코너 점들을 새로운 3D 색 큐브를 위한 코너 점들로 설정하고, 이를 기반으로 새로운 3D 색 큐브를 생성하되,
상기 색 변환부는 상기 새로운 3D 색 큐브를 상기 기준 3D 색 큐브로 선택하는 것을 특징으로 하는, 색 보정 장치.
19. The method of claim 18,
The color conversion unit sets the innermost corner points of the corner points on the eight corners of each of the 3D color cubes of the m × n areas as corner points for the new 3D color cube, and based on this, sets the new 3D color cube. Create,
And the color converting unit selects the new 3D color cube as the reference 3D color cube.
KR1020120111325A 2012-01-31 2012-10-08 Apparatus and method of correcting color for image projection device KR101925370B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US13/658,039 US9030485B2 (en) 2012-01-31 2012-10-23 Apparatus and method for correcting color of image projection device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20120010051 2012-01-31
KR1020120010051 2012-01-31

Publications (2)

Publication Number Publication Date
KR20130088718A true KR20130088718A (en) 2013-08-08
KR101925370B1 KR101925370B1 (en) 2018-12-05

Family

ID=49214994

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120111325A KR101925370B1 (en) 2012-01-31 2012-10-08 Apparatus and method of correcting color for image projection device

Country Status (1)

Country Link
KR (1) KR101925370B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10082989B2 (en) 2015-03-17 2018-09-25 Electronics And Telecommunications Research Insitute Device and method for simulating 3D printing

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102355776B1 (en) * 2020-04-23 2022-01-27 한국광기술원 Apparatus and method for corerecting color of projector

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09233494A (en) * 1996-02-23 1997-09-05 Toshiba Corp Color image processing system
JP2003283964A (en) * 2002-03-26 2003-10-03 Olympus Optical Co Ltd Video display apparatus
KR20060099538A (en) * 2003-12-10 2006-09-19 닛본 덴끼 가부시끼가이샤 Projector color correcting method
JP2009004991A (en) * 2007-06-20 2009-01-08 Canon Inc Color conversion device and color conversion method
JP2012009075A (en) * 2011-09-30 2012-01-12 Sharp Corp Printing system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5147219B2 (en) 2006-11-16 2013-02-20 三菱電機株式会社 Automatic image adjustment system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09233494A (en) * 1996-02-23 1997-09-05 Toshiba Corp Color image processing system
JP2003283964A (en) * 2002-03-26 2003-10-03 Olympus Optical Co Ltd Video display apparatus
KR20060099538A (en) * 2003-12-10 2006-09-19 닛본 덴끼 가부시끼가이샤 Projector color correcting method
JP2009004991A (en) * 2007-06-20 2009-01-08 Canon Inc Color conversion device and color conversion method
JP2012009075A (en) * 2011-09-30 2012-01-12 Sharp Corp Printing system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
일본 공개특허공보 특개2009-004991호(2009.01.08.) 1부. *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10082989B2 (en) 2015-03-17 2018-09-25 Electronics And Telecommunications Research Insitute Device and method for simulating 3D printing

Also Published As

Publication number Publication date
KR101925370B1 (en) 2018-12-05

Similar Documents

Publication Publication Date Title
CN107038982B (en) Projection apparatus and control method thereof
US9817305B2 (en) Image correction system and method for multi-projection
JP6756149B2 (en) projector
TWI542941B (en) Method and apparatus for distributed image processing in cameras for minimizing artifacts in stitched images
JP6459194B2 (en) Projector and projected image control method
KR20160118868A (en) System and method for displaying panorama image using single look-up table
JP2002072359A (en) Image projection display device
CN107247384B (en) Brightness compensation data acquisition system and method, and image brightness adjustment method and device
JP6623239B2 (en) Method for controlling projector and projector applied to the method
JP2012123085A (en) Multi-screen display apparatus
US20140043434A1 (en) Image processing apparatus
CN109068025A (en) A kind of camera lens shadow correction method, system and electronic equipment
US9030485B2 (en) Apparatus and method for correcting color of image projection device
KR20070114717A (en) Method for production of an image recording and/or reproduction device and device obtained by said method
US8666163B2 (en) Apparatus and method for matching colors between various image devices
JP2021101204A (en) Operation method for control unit, control method for projector, and projector
KR20130088718A (en) Apparatus and method of correcting color for image projection device
WO2012159586A1 (en) Color distortion correction method and device for imaging systems and image output systems
JP2021127998A (en) Distance information acquisition device and distance information acquisition method
Vandenberg et al. A Review of 3D-LUT Performance in 10-bit and 12-bit HDR BT. 2100 PQ
JP2023136450A (en) Image correction apparatus, imaging system, control method, and program
JP2019109174A (en) Position calculation system, position calculation device, position calculation method, and program
JP2001197332A (en) Method for judging defect of image reproducing system and correcting it at least partially and device for performing the method
JP2005102277A (en) Stacks projection apparatus and its adjustment method
JP2019208214A (en) Image processing apparatus, image processing method, program, and imaging apparatus

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant