KR101959521B1

KR101959521B1 - Method and apparatus for processing image data

Info

Publication number: KR101959521B1
Application number: KR1020180083938A
Authority: KR
Inventors: 이승원
Original assignee: (주)트라이시스
Priority date: 2018-07-19
Filing date: 2018-07-19
Publication date: 2019-03-18
Also published as: WO2020017695A1

Abstract

The present invention relates to a device for processing image data, which acquires an image that an error is corrected. The device for processing image data comprises: an image sensor photographing a display which displays first and second brightness images; a processor acquiring an image using a converted CCD value; and a memory storing a coefficient representing a conversion equation.

Description

[0001] The present invention relates to a method and an apparatus for processing image data,

본 개시에서는 이미지 데이터를 처리하는 방법 및 장치에 관해 개시된다.The present disclosure is directed to a method and apparatus for processing image data.

디스플레이는 디스플레이를 통해 정보를 디스플레이하는 것으로써, 가전제품, 스마트폰, 모니터 등 각종 기기에서 널리 사용되고 있다. 디스플레이는 이미지를 통해 정보를 제공한다는 점에서 이용 범위가 매우 넓고, 실제 제품으로 구현되는 해상도도 계속 높아지고 있다.The display displays information through a display, and is widely used in various appliances such as home appliances, smart phones, and monitors. The display is very broad in terms of providing information through images, and the resolution realized by actual products is also continuously increasing.

특히, 근래에는 휴대폰이나 PDA와 같은 이동통신단말기의 수요가 지속적으로 확산됨에 따라, 그 이동통신단말기에 탑재되는 디스플레이 시장이 기하급수적으로 팽창하고 있다.Particularly, in recent years, as the demand of mobile communication terminals such as mobile phones and PDAs continues to spread, the display market installed in the mobile communication terminals is exponentially expanding.

또한, 디스플레이의 기술 발전과 더불어 일부 유사한 원리로 동작하는 카메라 시장도 커지고 있다. In addition, with the development of display technology, the camera market that operates on some similar principles is also increasing.

카메라의 경우도 디스플레이의 경우와 같이 제조 과정에서 물리적인 결함의 발생확률이 높기 때문에, 소프트웨어적으로 물리적인 결함을 완화 또는 제거하기 위한 각종 기술이 개발되고 있다.In the case of a camera, various kinds of techniques for mitigating or eliminating physical defects in software are being developed because the probability of occurrence of a physical defect is high in the manufacturing process as in the case of a display.

본 개시는 이미지 데이터를 처리하는 방법 및 장치를 제공할 수 있다. 구체적으로 이미지 데이터 처리 장치에 포함된 이미지 센서의 출력값(예: CCD 값)을 보정하기 위한 보정값을 결정하는 방법 및 장치가 개시된다. 해결하려는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 통상의 기술자에게 자명한 범위 내에서 다양한 기술적 과제들이 더 포함될 수 있다.The present disclosure can provide a method and apparatus for processing image data. Specifically, a method and apparatus for determining a correction value for correcting an output value (e.g., a CCD value) of an image sensor included in an image data processing apparatus are disclosed. The technical problem to be solved is not limited to the technical problems described above, and various technical problems can be further included within a range that is obvious to a general technician.

본 개시의 제 1 측면에 따른 이미지 데이터 처리 장치는 제 1 휘도값의 제 1 휘도 이미지를 디스플레이하는 디스플레이를 촬상하고, 상기 제 1 휘도 이미지의 촬상에 따라 제 1 CCD 값을 출력하고, 제 2 휘도값의 제 2 휘도 이미지를 디스플레이하는 디스플레이를 촬상하고, 상기 제 2 휘도 이미지의 촬상에 따라 제 2 CCD 값을 출력하는 이미지 센서; 상기 제 1 CCD 값과 상기 제 2 CCD 값을 이용해서, 상기 이미지 센서가 획득하는 휘도값과 상기 이미지 센서가 출력하는 실제 CCD 값의 관계를 나타내는 제 1 그래프를 결정하고, 상기 이미지 센서가 획득하는 휘도값과 상기 이미지 센서가 출력할 것으로 기대되는 이상적인 CCD 값의 관계를 나타내는 제 2 그래프와 상기 제 1 그래프를 비교하고, 상기 제 2 그래프와 상기 제 1 그래프의 비교 결과를 이용하여, 상기 실제 CCD 값을 변환하는 변환 수식을 결정하고, 상기 변환 수식에 기초하여 변환된 CCD 값을 이용하여 이미지를 획득하는 프로세서; 및 상기 변환 수식을 나타내는 계수를 저장하는 메모리;를 포함할 수 있다.The image data processing apparatus according to the first aspect of the present disclosure picks up a display for displaying a first luminance image of a first luminance value, outputs a first CCD value in accordance with the imaging of the first luminance image, An image sensor for capturing a display for displaying a second luminance image of a value and outputting a second CCD value in accordance with the image of the second luminance image; Determining a first graph indicating a relationship between a luminance value acquired by the image sensor and an actual CCD value output from the image sensor using the first CCD value and the second CCD value, Comparing the first graph with a second graph indicating a relationship between a luminance value and an ideal CCD value expected to be output by the image sensor and comparing the second graph with the first graph, A processor for determining a conversion expression for converting the value and acquiring an image using the converted CCD value based on the conversion expression; And a memory for storing coefficients representing the conversion formula.

또한, 상기 변환 수식은 상기 실제 CCD값과 상기 이상적인 CCD 값과의 관계를 나타낼 수 있다.Also, the conversion formula may indicate a relationship between the actual CCD value and the ideal CCD value.

또한, 상기 제 1 휘도값은 0일 수 있다.Also, the first luminance value may be zero.

또한, 상기 제 2 휘도값은 중간값일 수 있다.Also, the second luminance value may be an intermediate value.

또한, 상기 프로세서는 상기 변환된 CCD 값이 소수 부분을 포함하는 경우, 기설정된 LUT 값에 기초하여 상기 소수 부분에 대한 올림 또는 내림을 수행하여 정수 CCD 값을 결정하고, 상기 정수 CCD 값을 이용하여 상기 이미지를 획득할 수 있다.If the converted CCD value includes a fractional part, the processor performs an up or down operation on the fractional part based on a predetermined LUT value to determine an integer CCD value, The image can be obtained.

또한, 상기 제 1 휘도 이미지에 포함된 픽셀들이 디스플레이하는 휘도 값은 제 1 휘도값일 수 있다.Also, the luminance value displayed by the pixels included in the first luminance image may be a first luminance value.

또한, 상기 제 1 휘도값 및 상기 제 2 휘도값을 외부 디바이스로부터 수신하는 리시버를 더 포함할 수 있다.The apparatus may further include a receiver for receiving the first luminance value and the second luminance value from an external device.

또한, 상기 제 1 그래프는 직선 또는 곡선일 수 있다.Also, the first graph may be straight or curved.

또한, 상기 제 2 그래프를 나타내는 계수는 상기 메모리에 저장되어있을 수 있다.The coefficient representing the second graph may be stored in the memory.

또한, 상기 프로세서는 상기 제 1 그래프의 역함수를 결정하고, 상기 역함수를 상기 제 2 그래프에 적용하여 상기 변환 수식을 결정할 수 있다.The processor may also determine an inverse of the first graph and apply the inverse function to the second graph to determine the transform equation.

본 개시의 제 2 측면에 따른 이미지 데이터 처리 장치는 제 1 휘도값의 제 1 휘도 이미지를 디스플레이하는 디스플레이를 촬상하고, 상기 제 1 휘도 이미지의 촬상에 따라 제 1 CCD 값을 출력하고, 제 2 휘도값의 제 2 휘도 이미지를 디스플레이하는 디스플레이를 촬상하고, 상기 제 2 휘도 이미지의 촬상에 따라 제 2 CCD 값을 출력하고, 제 3 휘도값의 제 3 휘도 이미지를 디스플레이하는 디스플레이를 촬상하고, 상기 제 3 휘도 이미지의 촬상에 따라 제 3 CCD 값을 출력하는 이미지 센서; 상기 제 1 CCD 값, 상기 제 2 CCD 값 및 상기 제 3 CCD 값을 이용해서, 상기 이미지 센서가 획득하는 휘도값과 상기 이미지 센서가 출력하는 실제 CCD 값의 관계를 나타내는 제 1 그래프를 결정하고, 상기 이미지 센서가 획득하는 휘도값과 상기 이미지 센서가 출력할 것으로 기대되는 이상적인 CCD 값의 관계를 나타내는 제 2 그래프와 상기 제 1 그래프를 비교하고, 상기 제 2 그래프와 상기 제 1 그래프의 비교 결과를 이용하여, 상기 실제 CCD 값을 변환하는 변환 수식을 결정하고, 상기 변환 수식에 기초하여 변환된 CCD 값을 이용하여 이미지를 획득하는 프로세서; 및 상기 변환 수식을 나타내는 계수를 저장하는 메모리;를 포함할 수 있다.The image data processing apparatus according to the second aspect of the present disclosure picks up a display for displaying a first luminance image of the first luminance value, outputs a first CCD value in accordance with the imaging of the first luminance image, And outputs a second CCD value in accordance with the image of the second luminance image and captures a display for displaying a third luminance image of the third luminance value, An image sensor for outputting a third CCD value in accordance with the image pickup of the third luminance image; Determining a first graph indicating a relationship between a luminance value acquired by the image sensor and an actual CCD value output from the image sensor using the first CCD value, the second CCD value, and the third CCD value, Comparing the first graph with a second graph indicating a relationship between a luminance value obtained by the image sensor and an ideal CCD value expected to be output by the image sensor, and comparing the second graph with the first graph A processor for determining a conversion expression for converting the actual CCD value and obtaining an image using the converted CCD value based on the conversion expression; And a memory for storing coefficients representing the conversion formula.

본 개시의 제 3 측면에 따른 이미지 데이터 처리 방법은 제 1 휘도값의 제 1 휘도 이미지를 디스플레이하는 디스플레이를 촬상하는 단계; 상기 제 1 휘도 이미지의 촬상에 따라 제 1 CCD 값을 출력하는 단계; 제 2 휘도값의 제 2 휘도 이미지를 디스플레이하는 디스플레이를 촬상하는 단계; 상기 제 2 휘도 이미지의 촬상에 따라 제 2 CCD 값을 출력하는 단계; 상기 제 1 CCD 값과 상기 제 2 CCD 값을 이용해서, 상기 이미지 센서가 획득하는 휘도값과 상기 이미지 센서가 출력하는 실제 CCD 값의 관계를 나타내는 제 1 그래프를 결정하는 단계; 상기 이미지 센서가 획득하는 휘도값과 상기 이미지 센서가 출력할 것으로 기대되는 이상적인 CCD 값의 관계를 나타내는 제 2 그래프와 상기 제 1 그래프를 비교하는 단계; 상기 제 2 그래프와 상기 제 1 그래프의 비교 결과를 이용하여, 상기 실제 CCD 값을 변환하는 변환 수식을 결정하는 단계; 상기 변환 수식을 나타내는 계수를 저장하는 단계; 및 상기 변환 수식에 기초하여 변환된 CCD 값을 이용하여 이미지를 획득하는 단계;를 포함할 수 있다.A method of processing image data according to a third aspect of the present disclosure includes capturing a display that displays a first luminance image of a first luminance value; Outputting a first CCD value in accordance with an image of the first luminance image; Imaging a display that displays a second luminance image of a second luminance value; Outputting a second CCD value in accordance with an image of the second luminance image; Determining a first graph indicating a relationship between a luminance value acquired by the image sensor and an actual CCD value output by the image sensor using the first CCD value and the second CCD value; Comparing the first graph with a second graph indicating a relationship between a luminance value acquired by the image sensor and an ideal CCD value expected to be output by the image sensor; Determining a conversion equation for converting the actual CCD value using the comparison result of the second graph and the first graph; Storing a coefficient indicating the conversion formula; And acquiring an image using the converted CCD value based on the conversion formula.

본 개시의 제 4 측면은 제 3 측면에 따른 방법을 구현하기 위하여 기록매체에 저장된 컴퓨터 프로그램을 제공할 수 있다. 또는, 본 개시의 제 4 측면은 제 3 측면에 따른 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공할 수 있다.A fourth aspect of the present disclosure may provide a computer program stored on a recording medium for implementing the method according to the third aspect. Alternatively, the fourth aspect of the present disclosure can provide a computer-readable recording medium having recorded thereon a program for causing a computer to execute the method according to the third aspect.

본 개시는 이미지 데이터를 처리하는 방법 및 장치를 제공할 수 있다. 구체적으로 이미지 데이터 처리 장치에 포함된 이미지 센서의 출력값(예: CCD 값)을 보정하기 위한 보정값을 결정하는 방법 및 장치가 개시된다.The present disclosure can provide a method and apparatus for processing image data. Specifically, a method and apparatus for determining a correction value for correcting an output value (e.g., a CCD value) of an image sensor included in an image data processing apparatus are disclosed.

도 1은 일 실시 예에 따른 이미지 데이터 처리 장치(100)의 동작을 설명하는 개념도이다.
도 2는 일 실시 예에 따른 이미지 데이터 처리 장치(100)의 구성의 일 예를 나타내는 블록도이다.
도 3은 일 실시 예에 따른 제 1 그래프를 나타내는 도면이다.
도 4는 일 실시 예에 따른 제 2 그래프를 나타내는 도면이다.
도 5는 일 실시 예에 따른 제 1 휘도값과 제 2 휘도값의 일 예를 나타내는 도면이다.
도 6은 일 실시 예에 따라 3번의 샘플링을 수행하는 일 예를 설명하기 위한 도면이다.
도 7은 일 실시 예에 따라 2개의 그룹에 대해 샘플링을 수행하는 일 예를 설명하기 위한 도면이다.
도 8은 일 실시 예에 따른 이미지 데이터 처리 장치(100)가 변환 수식을 통해 이미지를 획득하는 방법을 나타내는 순서도이다.1 is a conceptual diagram illustrating an operation of the image data processing apparatus 100 according to an embodiment.
2 is a block diagram showing an example of a configuration of an image data processing apparatus 100 according to an embodiment.
3 is a diagram illustrating a first graph according to one embodiment.
4 is a diagram illustrating a second graph according to one embodiment.
5 is a diagram illustrating an example of a first luminance value and a second luminance value according to an embodiment.
FIG. 6 is a view for explaining an example of performing sampling three times according to an embodiment.
FIG. 7 is a view for explaining an example of performing sampling for two groups according to an embodiment.
FIG. 8 is a flow chart showing a method for image data processing apparatus 100 according to an embodiment to acquire an image through a transformation formula.

실시 예들에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.Although the terms used in the embodiments have been selected in consideration of the functions in the present invention, it is possible to select general terms that are widely used at present. However, these may vary depending on the intention of the person skilled in the art or the precedent, the emergence of new technology. Also, in certain cases, there may be a term selected arbitrarily by the applicant, in which case the meaning thereof will be described in detail in the description of the corresponding invention. Therefore, the term used in the present invention should be defined based on the meaning of the term, not on the name of a simple term, but on the entire contents of the present invention.

명세서 전체에서 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 “…부”, “…모듈” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When an element is referred to as " including " an element throughout the specification, it is to be understood that the element may include other elements as well, without departing from the spirit or scope of the present invention. In addition, the term " "... Module " or the like means a unit for processing at least one function or operation, which may be implemented in hardware or software, or a combination of hardware and software.

아래에서는 첨부한 도면을 참고하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein.

이하에서는 도면을 참조하여 본 발명의 실시 예들을 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

도 1은 일 실시 예에 따른 이미지 데이터 처리 장치(100)의 동작을 설명하는 개념도이다.1 is a conceptual diagram illustrating an operation of the image data processing apparatus 100 according to an embodiment.

일 실시 예에 따른 이미지 데이터 처리 장치(100)는 디스플레이(10)에 포함된 픽셀들 또는 블록들의 출력값(예: 휘도값)을 촬상을 통해 획득할 수 있다.The apparatus 100 for processing image data according to an embodiment can acquire an output value (e.g., a luminance value) of pixels or blocks included in the display 10 through imaging.

일 실시 예에 따른 이미지 데이터 처리 장치(100)는 디스플레이(10)를 촬상하여, 디스플레이(10)에 포함된 픽셀들 또는 블록들의 출력값을 획득하기 때문에, 디스플레이(10)에 포함된 픽셀들이 출력하는 출력값과 이미지 데이터 처리 장치(100)가 촬상을 통해 획득하는 촬상값(예: 휘도값)은 동일하지 않을 수 있다. 예를 들면, 디스플레이(10)에 포함된 인접한 제 1 픽셀, 제 2 픽셀 및 제 3 픽셀이 각각 100, 100, 100의 휘도값을 출력하는 경우, 이미지 데이터 처리 장치(100)는 제 1 픽셀, 제 2 픽셀 및 제 3 픽셀에 대해서 105, 100, 100의 휘도값을 촬상으로 획득할 수 있다. 따라서 물리적인 한계 때문에, 이미지 데이터 처리 장치(100)는 디스플레이(10)에 포함된 픽셀들 또는 블록들의 출력값을 완벽하게 획득할 수 없으며, 디스플레이(10)에 포함된 픽셀들 또는 블록들의 출력값과 이미지 데이터 처리 장치(100)가 촬상으로 획득한 촬상값은 동일하지 않을 수 있다.Since the image data processing apparatus 100 according to the embodiment captures the display 10 and obtains output values of the pixels or blocks included in the display 10, The output value and the image pickup value (e.g., luminance value) acquired by the image data processing apparatus 100 through image pickup may not be the same. For example, when the adjacent first, second, and third pixels included in the display 10 output luminance values of 100, 100, and 100, respectively, the image data processing apparatus 100 may include a first pixel, The luminance values of 105, 100, and 100 for the second pixel and the third pixel can be obtained by imaging. Therefore, due to physical limitations, the image data processing apparatus 100 can not completely acquire the output values of the pixels or blocks included in the display 10, and the output values of the pixels or blocks included in the display 10, The imaging values acquired by the data processing apparatus 100 by imaging may not be the same.

그러나, 이미지 데이터 처리 장치(100)가 촬상으로 획득한 휘도값이 디스플레이(10)가 디스플레이한 휘도값과 동일하다고 가정하고 이미지 데이터 처리 장치(100)에 대한 보정이 수행될 수 있다.However, correction may be performed on the image data processing apparatus 100, assuming that the luminance value acquired by the image data processing apparatus 100 by imaging is the same as the luminance value displayed by the display 10. [

일 실시 예에 따른 이미지 데이터 처리 장치(100)는 디스플레이(10)에 포함된 픽셀들 또는 블록들의 출력값을 촬상을 통해 획득할 수 있다. 출력값은 휘도값, 레드 컴포넌트값, 그린 컴포넌트값, 블루 컴포넌트값 등 픽셀 또는 블록으로부터 획득(예: 측정, 수신)될 수 있는 각종 수치를 포함할 수 있다. 또한, 블록은 픽셀들로 구성되기 때문에, 블록들의 출력값을 획득 하는 실시 예는 픽셀들의 출력값을 획득한다는 실시 예의 일 예일 수 있다. 따라서, 블록에 대해서 별도의 설명이 없는 경우에도, 픽셀에서 수행되는 동작이 블록에 대해서도 동일한 방식으로 적용될 수 있다.The image data processing apparatus 100 according to the embodiment can obtain the output values of the pixels or blocks included in the display 10 through imaging. The output value may include various values that can be obtained (e.g., measured, received) from a pixel or block, such as a luminance value, a red component value, a green component value, a blue component value, Also, since a block is composed of pixels, an embodiment of obtaining an output value of the blocks may be an example of an embodiment of obtaining an output value of the pixels. Therefore, even if there is no description about the block, the operation performed in the pixel can be applied in the same manner to the block.

이미지 데이터 처리 장치(100)는 이미지 센서(110)를 포함할 수 있다. 이미지 센서(110)는 CCD(Charge Coupled Device)를 통해 구현될 수 있다. 또한, 도 1을 참조하면 이미지 센서(110)는 복수개의 픽셀을 포함할 수 있다. 이미지 센서(110)는 복수개의 픽셀일 통해 이미지를 센싱할 수 있다.The image data processing apparatus 100 may include an image sensor 110. The image sensor 110 may be implemented through a CCD (Charge Coupled Device). Also, referring to FIG. 1, the image sensor 110 may include a plurality of pixels. The image sensor 110 may sense an image through a plurality of pixel arrays.

일 실시 예에 따른 디스플레이(10)는 이미지를 디스플레이하는 장치를 폭넓게 지칭할 수 있다. 예를 들면 디스플레이(10)는 조명(10)을 포함할 수 있다. 이 경우, 이미지 데이터 처리 장치(100)는 균일성(uniformity)이 기설정값(예 :95%) 이상인 조명(10)을 촬상하여 보정값을 결정할 수 있다. 또한, 이미지 데이터 처리 장치(100)는 보정값이 결정된 이후, 모니터와 같은 통상적인 디스플레이(10)를 촬상하여 이미지를 생성할 수 있다. 디스플레이(10)는 이미지를 디스플레이하는 장치를 제한 없이 지칭할 수 있으며, 조명 뿐 아니라 벽면, 빔스크린 등도 포함할 수 있다.The display 10 according to one embodiment can broadly refer to an apparatus for displaying an image. For example, the display 10 may include an illumination 10. In this case, the image data processing apparatus 100 can determine the correction value by imaging the illumination 10 whose uniformity is equal to or larger than a predetermined value (e.g., 95%). Further, after the correction value is determined, the image data processing apparatus 100 can capture an image of a conventional display 10 such as a monitor to generate an image. The display 10 may refer to an apparatus for displaying an image without limitation, and may include a wall, a beam screen, etc., as well as an illumination.

도 2는 일 실시 예에 따른 이미지 데이터 처리 장치(100)의 구성의 일 예를 나타내는 블록도이다.2 is a block diagram showing an example of a configuration of an image data processing apparatus 100 according to an embodiment.

도 2에 도시된 바와 같이, 이미지 데이터 처리 장치(100)는 이미지 센서(110), 프로세서(120), 메모리(130) 리시버(140)를 포함할 수 있다. As shown in FIG. 2, the image data processing apparatus 100 may include an image sensor 110, a processor 120, and a memory 130 receiver 140.

그러나, 도 2에 도시된 구성요소들 외에 다른 범용적인 구성요소들이 이미지 데이터 처리 장치(100)에 더 포함될 수 있음을 관련 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있다. 다른 실시 예에 따를 경우, 도 2에 도시된 구성요소들 중 일부 구성요소는 생략될 수 있음을 관련 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있다.However, it will be understood by those skilled in the art that other general-purpose components other than the components shown in FIG. 2 may be further included in the image data processing apparatus 100. It will be appreciated by those skilled in the art that, in accordance with another embodiment, some of the components shown in FIG. 2 may be omitted.

일 실시 예에 따른 이미지 센서(110)는 제 1 휘도값의 제 1 휘도 이미지를 디스플레이하는 디스플레이(10)를 촬상하고, 제 1 휘도 이미지의 촬상에 따라 제 1 CCD 값을 출력할 수 있다.The image sensor 110 according to one embodiment can pick up the display 10 displaying the first luminance image of the first luminance value and output the first CCD value in accordance with the imaging of the first luminance image.

CCD 값은 이미지 센서(110)가 출력하는 신호값을 의미할 수 있다. 예를 들면 촬상된 휘도값에 따라 결정되는 충전된 전압값일 수 있으나 이에 제한되지 않는다.The CCD value may mean a signal value output from the image sensor 110. [ For example, a charged voltage value that is determined according to the sensed luminance value.

제 1 휘도 이미지는 제 1 휘도값을 디스플레이하는 이미지를 의미할 수 있다. 제 1 휘도 이미지에 포함된 픽셀들이 디스플레이하는 휘도 값은 제 1 휘도값일 수 있다. 이상적으로 제 1 휘도 이미지의 전체 영역에서 제 1 휘도값이 출력될 수 있다. 제 1 휘도 이미지는 이미지 데이터 처리 장치(100)의 보정을 위해서 이용되는 이미지일 수 있다. 이미지 데이터 처리 장치(100)는 제 1 휘도 이미지를 촬상하여 획득한 출력값이 제 1 휘도값에 대응되도록 보정값을 결정할 수 있다.The first luminance image may mean an image displaying the first luminance value. The luminance value displayed by the pixels included in the first luminance image may be the first luminance value. Ideally, the first luminance value may be output in the entire region of the first luminance image. The first luminance image may be an image used for correction of the image data processing apparatus 100. The image data processing apparatus 100 can determine the correction value such that the output value obtained by picking up the first luminance image corresponds to the first luminance value.

이미지 데이터 처리 장치(100)는 보정값을 이용해서, 이미지 생성에 이용되는 출력값을 보정하고, 보정된 출력값으로 이미지를 생성할 수 있다.The image data processing apparatus 100 can correct the output value used for image generation using the correction value and generate an image with the corrected output value.

제 1 휘도값은 기설정 값보다 작은 값일 수 있다. 일 실시 예에 따라, 제 1 휘도값이 0인 경우에 대해서 설명한다.The first luminance value may be a value smaller than the preset value. A case where the first luminance value is 0 will be described according to an embodiment.

휘도값이 0이라는 것은 빛이 없는 완전히 어두운 상태를 의미할 수 있다. 휘도 값이 0인 이미지를 촬상하는 경우에 이미지 센서(110)가 출력하는 CCD 값은 0일 수도 있으나, 0이 아닐 수도 있다. 휘도 값이 0인 이미지를 촬상하고 이미지 센서(110)가 출력하는 CCD 값을 보정하여 이미지 센서(110)의 영점을 제어할 수 있다. 영점은 이미지 센서(110)가 출력하는 CCD 값에 대한 일종의 기준값을 의미할 수 있다. 예를 들면, 휘도 값이 0인 이미지를 촬상하였을 때 이미지 센서(110)가 출력하는 CCD 값을 의미할 수 있다.A brightness value of 0 may mean a completely dark state without light. The CCD value output by the image sensor 110 when capturing an image having a luminance value of 0 may be 0, but may not be 0. [ The zero point of the image sensor 110 can be controlled by capturing an image having a brightness value of 0 and correcting the CCD value output from the image sensor 110. [ The zero point may refer to a kind of reference value for the CCD value outputted by the image sensor 110. [ For example, it may mean a CCD value output by the image sensor 110 when an image having a luminance value of 0 is captured.

이미지 센서(110)는 휘도 값이 0인 이미지를 촬상하는 경우에 이미지 센서(110)가 출력하는 이상적인 CCD 값과 휘도 값이 0인 이미지를 촬상하고 이미지 센서(110)가 출력하는 실제 CCD 값을 비교함으로써, 이미지 센서(110)의 출력값의 보정에 이용되는 보정값을 결정할 수 있다.The image sensor 110 picks up an image having an ideal CCD value and a luminance value of 0 output by the image sensor 110 when capturing an image having a luminance value of 0 and outputs an actual CCD value output from the image sensor 110 The correction value used for the correction of the output value of the image sensor 110 can be determined.

일 실시 예에 따른 이미지 센서(110)는 제 2 휘도값의 제 2 휘도 이미지를 디스플레이하는 디스플레이(10)를 촬상하고, 제 2 휘도 이미지의 촬상에 따라 제 2 CCD 값을 출력할 수 있다.The image sensor 110 according to the embodiment can pick up the display 10 displaying the second luminance image of the second luminance value and output the second CCD value in accordance with the imaging of the second luminance image.

제 2 휘도 이미지는 제 2 휘도값을 디스플레이하는 이미지를 의미할 수 있다. 제 2 휘도 이미지에 포함된 픽셀들이 디스플레이하는 휘도값은 제 2 휘도값일 수 있다.And the second luminance image may mean an image displaying the second luminance value. And the luminance value displayed by the pixels included in the second luminance image may be a second luminance value.

제 2 휘도값은 중간값일 수 있다. 중간값은 휘도값의 최대값과 최소값의 중간 범위에서의 휘도값을 의미할 수 있다. 예를 들면, 휘도값의 최소값이 0이고 최대값이 255인 경우, 중간값은 120 이상 135 이하의 임의의 값일 수 있으나, 이에 제한되지 않는다.The second luminance value may be a middle value. The intermediate value may mean a luminance value in the middle range between the maximum value and the minimum value of the luminance value. For example, when the minimum value of the luminance value is 0 and the maximum value is 255, the intermediate value may be any value between 120 and 135, but is not limited thereto.

제 2 휘도값을 대표성을 갖는 중간값을 이용함으로써 보정 효율을 높일 수 있다. By using an intermediate value having a representative second luminance value, the correction efficiency can be increased.

이미지 데이터 처리 장치(100)는 2번 이상의 샘플링을 통해 보정값을 결정할 수 있다. 예를 들면, 이미지 데이터 처리 장치(100)는 제 1 휘도값과 제 2 휘도값에서 각각 제 1 CCD 값과 제 2 CCD 값을 획득함으로써 보정값을 결정할 수 있다. 이 때, 제 1 휘도값은 0, 제 2 휘도값은 대표성을 갖는 중간값을 이용함으로써, 샘플링 횟수대비 정확한 보정값을 결정할 수 있다. 예를 들면, 이미지 데이터 처리 장치(100)는 제 1 휘도값을 0으로 함으로써, 전체적인 영점을 보정하고, 제 2 휘도값을 중간값으로 함으로써 전체적인 변화량을 보정할 수 있으나 이에 제한되지 않는다.The image data processing apparatus 100 can determine the correction value through two or more sampling operations. For example, the image data processing apparatus 100 can determine the correction value by acquiring the first CCD value and the second CCD value at the first luminance value and the second luminance value, respectively. At this time, by using an intermediate value having a first luminance value of 0 and a second luminance value having a representative value, it is possible to determine an accurate correction value with respect to the number of times of sampling. For example, the image data processing apparatus 100 can correct the overall amount of change by correcting the entire zero point by setting the first luminance value to 0, and setting the second luminance value to the intermediate value, but it is not limited thereto.

일 실시 예에 따른 프로세서(120)는 제 1 CCD 값과 제 2 CCD 값을 이용해서, 이미지 센서(110)가 획득하는 휘도값과 이미지 센서(110)가 출력하는 실제 CCD 값의 관계를 나타내는 제 1 그래프를 결정할 수 있다.The processor 120 according to an exemplary embodiment uses a first CCD value and a second CCD value to generate a first CCD value indicating a relationship between a luminance value acquired by the image sensor 110 and an actual CCD value output from the image sensor 110 1 graph can be determined.

일 실시 예에 따른 제 1 그래프는 이미지 센서(110)가 획득하는 휘도값과 이미지 센서(110)가 출력하는 실제 CCD 값의 관계를 나타낼 수 있다. 예를 들면, 가로축이 x, 세로축이 y일 때, 제 1 그래프는 y = f(x)와 같이 일종의 함수로 표시될 수 있다. 함수는 1차 함수일 수도 있으나 다차 함수일 수도 있으며, 임의의 스플라인 곡선일 수도 있다. 샘플링의 횟수는 2회 이상일 수 있으며 2회, 3회, 4회, 5회 등일 수 있다. 또한 샘플링의 횟수에 따라 함수의 형태가 결정될 수 있다.A first graph according to an exemplary embodiment may indicate a relationship between a luminance value acquired by the image sensor 110 and an actual CCD value output from the image sensor 110. [ For example, when the horizontal axis is x and the vertical axis is y, the first graph can be represented as a function of y = f (x). The function may be a linear function, but it may be a multi-dimensional function, or it may be an arbitrary spline curve. The number of times of sampling may be two or more times, and may be two times, three times, four times, five times, and so on. Also, the type of the function can be determined according to the number of times of sampling.

프로세서(120)는 2번 이상의 샘플링을 통해 제 1 그래프를 획득할 수 있다. 예를 들면, 2번의 샘플링을 통해 제 1 그래프를 획득하는 경우, 프로세서(120)는 직선인 제 1 그래프를 획득할 수 있다. 다른 예로, 3번의 샘플링을 통해 제 1 그래프를 획득하는 경우, 프로세서(120)는 2차함수 형태의 제 1 그래프를 획득할 수 있다. 프로세서(120)는 이미지 센서(110)가 제 1 휘도값에서 출력하는 제 1 CCD 값과 제 2 휘도값에서 출력하는 제 2 CCD 값을 이용해서 제 1 그래프를 결정할 수 있다.The processor 120 may obtain the first graph through more than two sampling operations. For example, when acquiring the first graph through two samplings, the processor 120 may obtain a first graph that is a straight line. As another example, when acquiring the first graph through three samplings, the processor 120 may obtain a first graph of a quadratic function form. The processor 120 may determine the first graph using the first CCD value output by the image sensor 110 at the first luminance value and the second CCD value output at the second luminance value.

일 실시 예에 따른 프로세서(120)는 이미지 센서(110)가 획득하는 휘도값과 이미지 센서(110)가 출력할 것으로 기대되는 이상적인 CCD 값의 관계를 나타내는 제 2 그래프와 제 1 그래프를 비교할 수 있다. The processor 120 according to an embodiment can compare the first graph with the second graph indicating the relationship between the luminance value acquired by the image sensor 110 and the ideal CCD value expected to be output by the image sensor 110 .

일 실시 예에 따른 제 2 그래프는 이미지 센서(110)가 획득하는 휘도값과 이미지 센서(110)가 출력할 것으로 기대되는 이상적인 CCD 값의 관계를 나타낼 수 있다.A second graph according to an exemplary embodiment may indicate a relationship between a luminance value acquired by the image sensor 110 and an ideal CCD value expected to be output by the image sensor 110. [

일 실시 예에 따른 메모리(130)는 제 2 그래프에 대한 정보를 저장할 수 있다. 예를 들면, 제 2 그래프를 나타내는 계수는 메모리(130)에 저장되어 있을 수 있다. 제 2 그래프가 1차 함수인 경우, 기울기 및 절편 값이 메모리(130)에 저장되어 있을 수 있다.The memory 130 according to one embodiment may store information about the second graph. For example, the coefficients representing the second graph may be stored in the memory 130. [ If the second graph is a linear function, the slope and slice values may be stored in memory 130.

일 실시 예에 따른 리시버(140)는 디스플레이(10)에서 디스플레이하는 이미지의 휘도값을 수신할 수 있다. 예를 들면 리시버(140)는 제 1 휘도값 및/또는 제 2 휘도값을 수신할 수 있다.The receiver 140 according to one embodiment may receive a luminance value of an image to be displayed on the display 10. For example, the receiver 140 may receive the first luminance value and / or the second luminance value.

프로세서(120)는 제 1 그래프와 제 2 그래프를 비교할 수 있다. 예를 들면 제 1 그래프와 제 2 그래프간의 차이를 결정하고, 제 1 그래프와 제 2 그래프간의 변환에 필요한 값을 결정할 수 있다.Processor 120 may compare the first graph with the second graph. For example, the difference between the first graph and the second graph can be determined, and the value required for conversion between the first graph and the second graph can be determined.

일 실시 예에 따른 프로세서(120)는 제 2 그래프와 제 1 그래프의 비교 결과를 이용하여, 실제 CCD 값을 변환하는 변환 수식을 결정할 수 있다.The processor 120 according to an exemplary embodiment may determine a conversion formula for converting the actual CCD value using the comparison result of the second graph and the first graph.

일 실시 예에 따른 변환 수식은 실제 CCD값과 이상적인 CCD 값과의 관계를 나타낼 수 있다. 예를 들면 제 2 휘도값에서 이상적인 CCD 값이 m이고, 제 2 휘도값에서 실제 CCD값이 n일 때 n을 m으로 변환하기 위해 변환 수식이 이용될 수 있다. The conversion equation according to one embodiment may represent a relationship between an actual CCD value and an ideal CCD value. For example, a conversion equation may be used to convert n to m when the ideal CCD value is m at the second luminance value and the actual CCD value at the second luminance value is n.

프로세서(120)는 기설정된 방식으로 변환 수식을 결정할 수 있다. 예를 들면, 프로세서(120)는 제 1 그래프의 역함수를 결정하고, 역함수를 제 2 그래프에 적용하여 변환 수식을 결정할 수 있다. The processor 120 may determine the conversion formula in a predetermined manner. For example, the processor 120 may determine an inverse function of the first graph and apply an inverse function to the second graph to determine the transform equation.

예를 들면, 제 1 그래프가 y=a·x+b이고, 제 2 그래프가 z=c·w+d인 경우, 프로세서(120)는 제 1 그래프의 역함수가 x=(y-b)/a이므로, 제 1 그래프를 제 2 그래프에 적용하여 z=c·(y-b)/a+d라는 변환 수식을 결정할 수 있다. 여기서 y는 실제 CCD 값이고, z는 이상적인 CCD 값을 의미할 수 있다. 프로세서(120)는 실제 CCD 값을 이상적인 CCD 값으로 변환 수식을 통해 변환할 수 있다.For example, when the first graph is y = a x + b and the second graph is z = c w + d, the processor 120 determines that the inverse function of the first graph is x = (y b) / a , The first graph can be applied to the second graph to determine the conversion equation z = c (yb) / a + d. Where y is the actual CCD value, and z can be an ideal CCD value. Processor 120 may convert the actual CCD value to an ideal CCD value through a conversion equation.

일 실시 예에 따른 보정값은 변환 수식의 계수를 의미할 수 있다. 예를 들면, 변환 수식이 1차식인 경우, 보정값은 2개일 수 있다. 이 경우, 보정값은 게인과 오프셋일 수 있다. 다른 예로, 변환 수식이 2차식인 경우, 보정값은 3개일 수 있다.The correction value according to one embodiment may mean a coefficient of the transformation equation. For example, when the conversion formula is linear, the correction value may be two. In this case, the correction value may be gain and offset. As another example, when the conversion formula is quadratic, the correction value may be three.

일 예로, 변환 수식이 z=c·(y-b)/a+d인 경우, 보정값은 c/a 및 '-c·b/a + d'일 수 있다.For example, when the conversion formula is z = c (y-b) / a + d, the correction value may be c / a and -c b / a + d '.

변환 수식은 이미지 센서(110)에 포함된 픽셀마다 결정될 수 있으나 제한되지 않는다. 예를 들면 이미지 센서(110)에 포함된 블록마다 변환 수식이 결정될 수도 있다.The conversion formula may be determined for each pixel included in the image sensor 110, but is not limited thereto. For example, a conversion formula may be determined for each block included in the image sensor 110. [

일 실시 예에 따른 프로세서(120)는 변환 수식에 기초하여 변환된 CCD 값을 이용하여 이미지를 획득할 수 있다.The processor 120 according to one embodiment may obtain an image using the converted CCD values based on the transformation equation.

프로세서(120)는 변환 수식을 통해 실제 CCD 값을 이상적인 CCD 값(또는 이상적인 CCD 값에 대응되는 값)으로 변환하고, 변환된 CCD 값을 이용하여 이미지를 생성함으로써, 이미지 센서(110)의 오차가 보정된 이미지를 획득할 수 있다.The processor 120 converts the actual CCD value to an ideal CCD value (or a value corresponding to the ideal CCD value) through the conversion formula, and generates an image using the converted CCD value, so that the error of the image sensor 110 A corrected image can be obtained.

예를 들면, 휘도가 a일 때, 이상적인 CCD 값이 b이고, 이미지 센서가 출력하는 실제 CCD 값이 c인 경우, 프로세서는 변환 수식에 따라 c를 b(또는 b와 근사한 값인 b')로 변환할 수 있다. 프로세서(120)는 변환 수식에 따라 실제 CCD 값을 이상적인 CCD 값으로 변환할 수도 있지만, 현실적으로 이상적인 CCD 값과 근사한 값으로 변환할 수 있다. For example, if the ideal CCD value is b and the actual CCD value output by the image sensor is c when the luminance is a, the processor converts c to b (or b 'approximate to b) according to the conversion formula can do. Although the processor 120 may convert the actual CCD value into the ideal CCD value according to the conversion formula, the processor 120 may actually convert the CCD value into an approximate value that is an ideal CCD value.

일 실시 예에 따른 프로세서(120)는 변환된 CCD 값이 소수 부분을 포함하는 경우, 기설정된 LUT 값에 기초하여 소수 부분에 대한 올림 또는 내림을 수행하여 정수 CCD 값을 결정할 수 있다.The processor 120 according to an exemplary embodiment may determine the integer CCD value by performing up or down of the decimal part based on the predetermined LUT value when the converted CCD value includes a decimal part.

일 예로, 제 1 픽셀에 대한 변환된 CCD 값이 25.6인 경우, 소수 부분은 0.6이고, 제 1 수식에 0.6을 인가한 결과값과 제 2 수식에 따라 결정된 제 1 픽셀에 대한 LUT값을 비교하여 보정 입력값을 25.0 또는 26.0으로 갱신할 수 있다. 예를 들면, 제 1 수식에 0.6을 인가한 결과 값이 2.4이고(예: 0.6*4=2.4), 제 2 수식에 따라 결정된 제 1 픽셀에 대한 LUT값이 0인 경우, 프로세서(120) 또는 디스플레이(10)는 보정 입력값을 26.0으로 갱신하여 제 1 픽셀에 인가할 수 있다. For example, when the converted CCD value for the first pixel is 25.6, the fractional part is 0.6, and the result obtained by applying 0.6 to the first equation is compared with the LUT value for the first pixel determined according to the second equation The correction input value can be updated to 25.0 or 26.0. For example, if the result of applying 0.6 to the first equation is 2.4 (e.g., 0.6 * 4 = 2.4) and the LUT value for the first pixel determined according to the second equation is 0, then the processor 120 The display 10 can update the correction input value to 26.0 and apply it to the first pixel.

다른 예로, 제 1 픽셀에 대한 변환된 CCD 값이 25.5인 경우, 소수 부분은 0.5이고, 제 1 수식에 0.5를 인가한 결과값과 제 2 수식에 따라 결정된 제 1 픽셀에 대한 LUT값을 비교하여 보정 입력값을 25.0 또는 26.0으로 갱신할 수 있다. 예를 들면, 제 1 수식에 0.5를 인가한 결과 값이 2.0(예: 0.5*4=2.0)이고, 제 2 수식에 따라 결정된 제 1 픽셀에 대한 LUT값이 2으로 서로 같은 경우, 프로세서(120) 또는 변환된 CCD 값을 25.0으로 갱신하여 정수 CCD 값을 결정할 수 있다.As another example, when the converted CCD value for the first pixel is 25.5, the fractional part is 0.5, and the result of applying 0.5 to the first equation is compared with the LUT value for the first pixel determined according to the second equation The correction input value can be updated to 25.0 or 26.0. For example, if the result of applying 0.5 to the first equation is 2.0 (e.g., 0.5 * 4 = 2.0), and the LUT values for the first pixel determined according to the second equation are equal to two, ) Or the converted CCD value may be updated to 25.0 to determine the integer CCD value.

또한 프로세서(120)는 정수 CCD 값을 이용하여 이미지를 생성할 수 있다.The processor 120 may also generate an image using integer CCD values.

일 실시 예에 따른 리시버(140)는 제 1 휘도값 및 제 2 휘도값을 외부 디바이스로부터 수신할 수 있다. 이미지 데이터 처리 장치(100)는 리시버(140)가 수신한 제 1 휘도값 및 제 2 휘도값을 이용해서 상술한 바와 같이 보정값을 결정할 수 있다.The receiver 140 according to one embodiment can receive the first luminance value and the second luminance value from the external device. The image data processing apparatus 100 can determine the correction value as described above by using the first luminance value and the second luminance value received by the receiver 140. [

도 3은 일 실시 예에 따른 제 1 그래프를 나타내는 도면이다.3 is a diagram illustrating a first graph according to one embodiment.

일 실시 예에 따른 제 1 그래프는 이미지 센서(110)가 획득하는 휘도값과 이미지 센서(110)가 출력하는 실제 CCD 값의 관계를 나타낼 수 있다. 예를 들면, 가로축이 x, 세로축이 y일 때, 제 1 그래프는 y = f(x)와 같이 일종의 함수로 표시될 수 있다. 도 3을 참조하면 함수는 1차 함수일 수도 있으나 다차 함수일 수도 있으며, 임의의 스플라인 곡선일 수도 있다.A first graph according to an exemplary embodiment may indicate a relationship between a luminance value acquired by the image sensor 110 and an actual CCD value output from the image sensor 110. [ For example, when the horizontal axis is x and the vertical axis is y, the first graph can be represented as a function of y = f (x). Referring to FIG. 3, the function may be a linear function or a multi-dimensional function, or may be an arbitrary spline curve.

이미지 데이터 처리 장치(100)는 2번 이상의 샘플링을 통해 제 1 그래프를 획득할 수 있다. 예를 들면, 2번의 샘플링을 통해 제 1 그래프를 획득하는 경우, 이미지 데이터 처리 장치(100)는 직선인 제 1 그래프를 획득할 수 있다. 다른 예로, 3번의 샘플링을 통해 제 1 그래프를 획득하는 경우, 이미지 데이터 처리 장치(100)는 2차함수 형태의 제 1 그래프를 획득할 수 있다. 이미지 데이터 처리 장치(100)는 이미지 센서(110)가 제 1 휘도값에서 출력하는 제 1 CCD 값과 제 2 휘도값에서 출력하는 제 2 CCD 값을 이용해서 제 1 그래프를 결정할 수 있다.The image data processing apparatus 100 may acquire the first graph through two or more sampling operations. For example, when acquiring the first graph through two sampling operations, the image data processing apparatus 100 can acquire a first graph that is a straight line. As another example, when acquiring the first graph through three sampling operations, the image data processing apparatus 100 may acquire the first graph in the form of a quadratic function. The image data processing apparatus 100 may determine the first graph using the first CCD value outputted by the image sensor 110 at the first luminance value and the second CCD value outputted at the second luminance value.

도 4는 일 실시 예에 따른 제 2 그래프를 나타내는 도면이다.4 is a diagram illustrating a second graph according to one embodiment.

제 1 그래프와 제 2 그래프는 상이할 수 있으며, 이미지 데이터 처리 장치(100)는 제 1 그래프와 제 2 그래프를 비교할 수 있다. 예를 들면, 이미지 데이터 처리 장치(100)는 제 1 그래프와 제 2 그래프간의 차이를 결정하고, 제 1 그래프와 제 2 그래프간의 변환에 필요한 값을 결정할 수 있다.The first graph and the second graph may be different, and the image data processing apparatus 100 may compare the first graph and the second graph. For example, the image data processing apparatus 100 may determine a difference between the first graph and the second graph, and determine a value required for conversion between the first graph and the second graph.

이미지 데이터 처리 장치(100)는 기설정된 방식으로 변환 수식을 결정할 수 있다. 예를 들면, 이미지 데이터 처리 장치(100)는 제 1 그래프의 역함수를 결정하고, 역함수를 제 2 그래프에 적용하여 변환 수식을 결정할 수 있다. The image data processing apparatus 100 can determine the conversion formula in a predetermined manner. For example, the image data processing apparatus 100 may determine an inverse function of the first graph, and apply an inverse function to the second graph to determine a transformation formula.

예를 들면, 제 1 그래프가 y=a·x+b이고, 제 2 그래프가 z=c·w+d인 경우, 프로세서(120)는 제 1 그래프의 역함수가 x=(y-b)/a이므로, 제 1 그래프를 제 2 그래프에 적용하여 z=c·(y-b)/a+d라는 변환 수식을 결정할 수 있다. 여기서 y는 실제 CCD 값이고, z는 이상적인 CCD 값을 의미할 수 있다. 이미지 데이터 처리 장치(100)는 실제 CCD 값을 이상적인 CCD 값으로 변환 수식을 통해 변환할 수 있다.For example, when the first graph is y = a x + b and the second graph is z = c w + d, the processor 120 determines that the inverse function of the first graph is x = (y b) / a , The first graph can be applied to the second graph to determine the conversion equation z = c (yb) / a + d. Where y is the actual CCD value, and z can be an ideal CCD value. The image data processing apparatus 100 can convert an actual CCD value into an ideal CCD value through a conversion formula.

도 5는 일 실시 예에 따른 제 1 휘도값과 제 2 휘도값의 일 예를 나타내는 도면이다.5 is a diagram illustrating an example of a first luminance value and a second luminance value according to an embodiment.

일 실시 예에 따를 때, 제 1 휘도값은 제 1 범위(510) 내에 포함될 수 있으며, 제 2 휘도값은 제 2 범위(520) 내에 포함될 수 있다.According to one embodiment, the first luminance value may be included in the first range 510 and the second luminance value may be included in the second range 520. [

제 1 휘도값은 제 1 범위(510) 내에 포함될 수 있다. 일 실시 예에 따라, 제 1 휘도값이 0인 경우에 대해서 설명한다.The first luminance value may be included in the first range 510. A case where the first luminance value is 0 will be described according to an embodiment.

일 실시 예에 따른 이미지 데이터 처리 장치(100)는 제 1 휘도값을 0으로 하여, 제 1 휘도값에 따른 실제 CCD 값과 제 1 휘도값에 대응하는 이상적인 CCD 값의 차이를 이용하여 CCD 출력의 전체에 대한 오프셋 값을 결정하고, 결정된 오프셋 값을 이용하여 실제 CCD 값에 대한 보정을 수행할 수 있다.The apparatus 100 for processing image data according to an exemplary embodiment may set the first luminance value to 0 and use the difference between the actual CCD value according to the first luminance value and the ideal CCD value corresponding to the first luminance value, It is possible to determine an offset value for the whole image, and to perform correction for the actual CCD value using the determined offset value.

또한, 이미지 데이터 처리 장치(100)는 제 2 휘도값을 중간값으로 하여, 제 2 휘도값에 따른 실제 CCD 값과 제 2 휘도값에 대응하는 이상적인 CCD 값의 차이를 이용하여 CCD 출력의 전체에 대한 게인 값을 결정하고, 결정된 게인 값을 이용하여 실제 CCD 값에 대한 보정을 수행할 수 있다.In addition, the image data processing apparatus 100 uses the second luminance value as an intermediate value, and uses the difference between the actual CCD value according to the second luminance value and the ideal CCD value corresponding to the second luminance value, The gain value for the pixel can be determined, and correction for the actual CCD value can be performed using the determined gain value.

도 6은 일 실시 예에 따라 3번의 샘플링을 수행하는 일 예를 설명하기 위한 도면이다.FIG. 6 is a view for explaining an example of performing sampling three times according to an embodiment.

도 6에서 확인할 수 있는 바와 같이, 이미지 데이터 처리 장치(100)는 제 1 샘플링(610), 제 2 샘플링(620) 및 제 3 샘플링(620)을 수행하여 휘도값의 변화에 따른 실제 CCD 값을 나타내는 제 1 그래프를 결정할 수 있다. 도 6을 참조하면 제 1 그래프는 곡선형태일 수 있다.6, the image data processing apparatus 100 performs a first sampling 610, a second sampling 620, and a third sampling 620 to calculate an actual CCD value according to a change in luminance value Can be determined. Referring to FIG. 6, the first graph may be in the form of a curve.

도 7은 일 실시 예에 따라 2개의 그룹에 대해 샘플링을 수행하는 일 예를 설명하기 위한 도면이다.FIG. 7 is a view for explaining an example of performing sampling for two groups according to an embodiment.

도 7에서 확인할 수 있는 바와 같이, 이미지 데이터 처리 장치(100)는 제 1 그룹(750)에서 제 1-1 샘플링(710), 제 1-2 샘플링(720)을 수행하고, 제 2 그룹(760)에서 제 2-1 샘플링(730), 제 2-2 샘플링(740)을 수행할 수 있다.7, the image data processing apparatus 100 performs the first 1-1 sampling 710 and the 1-2 sampling 720 in the first group 750 and the second group 760 (2-1) sampling 730, and (2-2) sampling 740 in the first embodiment.

일 실시 예에 따른 이미지 데이터 처리 장치(100)는 제 1-1 샘플링(710)을 수행할 때의 휘도값(711) 및 실제 CCD 값(712), 제 1-2 샘플링(720)을 수행할 때의 휘도값(721) 및 실제 CCD 값(722)을 이용해서 제 1 곡선을 획득하고, 제 2-1 샘플링(730)을 수행할 때의 휘도값(731) 및 실제 CCD 값(732), 제 2-2 샘플링(740)을 수행할 때의 휘도값(741) 및 실제 CCD 값(742)을 이용해서 제 2 곡선을 획득할 수 있다.The apparatus 100 for processing image data according to an exemplary embodiment performs the luminance value 711 and the actual CCD value 712 and the 1-2 sampling 720 when performing the 1-1 sampling 710 The luminance value 731 and the actual CCD value 732 at the time of performing the second-first sampling 730 and the actual luminance value 732 at the time of performing the second-first sampling 730 are obtained using the luminance value 721 and the actual CCD value 722 at the time of the first- The second curve can be obtained by using the luminance value 741 and the actual CCD value 742 when the second-second sampling 740 is performed.

이미지 데이터 처리 장치(100)는 도 7에서와 같이 제 1 그룹(750) 및 제 2 그룹(760)에서 서로 상이한 곡선을 획득하고 획득한 상이한 곡선을 이용하여 전체적인 제 1 그래프를 결정함으로써, 하나의 곡선으로 근사화할 때 보다 정확하게 제 1 그래프를 결정할 수 있다.The image data processing apparatus 100 obtains curves different from each other in the first group 750 and the second group 760 as shown in FIG. 7, and determines the overall first graph using the obtained different curves, It is possible to determine the first graph more accurately when approximating to a curve.

도 8은 일 실시 예에 따른 이미지 데이터 처리 장치(100)가 변환 수식을 통해 이미지를 획득하는 방법을 나타내는 순서도이다.FIG. 8 is a flow chart showing a method for image data processing apparatus 100 according to an embodiment to acquire an image through a transformation formula.

단계 S810에서 이미지 데이터 처리 장치(100)는 제 1 휘도값의 제 1 휘도 이미지를 디스플레이하는 디스플레이를 촬상하고, 단계 S820에서 이미지 데이터 처리 장치(100)는 제 1 휘도 이미지의 촬상에 따라 제 1 CCD 값을 출력한다. In step S810, the image data processing apparatus 100 picks up a display that displays a first luminance image of the first luminance value, and in step S820, the image data processing apparatus 100 generates a first luminance image of the first luminance value, Output the value.

단계 S830에서 이미지 데이터 처리 장치(100)는 제 2 휘도값의 제 2 휘도 이미지를 디스플레이하는 디스플레이(10)를 촬상하고, 단계 S840에서 이미지 데이터 처리 장치(100)는 제 2 휘도 이미지의 촬상에 따라 제 2 CCD 값을 출력한다.In step S830, the image data processing apparatus 100 images the display 10 displaying the second luminance image of the second luminance value, and in step S840, the image data processing apparatus 100 determines And outputs the second CCD value.

단계 S810 내지 단계 S840에서 휘도값과 실제 CCD 값에 대한 2번의 샘플링이 수행된다.In steps S810 to S840, two sampling operations are performed on the luminance value and the actual CCD value.

단계 S850에서 이미지 데이터 처리 장치(100)는 단계 S820에서 획득된 제 1 CCD 값과 단계 S840에서 획득된 제 2 CCD 값을 이용해서, 이미지 센서가 획득하는 휘도값과 이미지 센서가 출력하는 실제 CCD 값의 관계를 나타내는 제 1 그래프를 결정한다.In step S850, the image data processing apparatus 100 uses the first CCD value acquired in step S820 and the second CCD value acquired in step S840 to calculate the luminance value acquired by the image sensor and the actual CCD value Of the first graph.

단계 S860에서 이미지 데이터 처리 장치(100)는 이미지 센서가 획득하는 휘도값과 이미지 센서가 출력할 것으로 기대되는 이상적인 CCD 값의 관계를 나타내는 제 2 그래프와 제 1 그래프를 비교한다. 제 2 그래프는 메모리에 기저장되어 있을 수 있다.In step S860, the image data processing apparatus 100 compares the first graph with the second graph indicating the relationship between the luminance value acquired by the image sensor and the ideal CCD value expected to be output by the image sensor. The second graph may have already been stored in the memory.

단계 S870에서 이미지 데이터 처리 장치(100)는 제 2 그래프와 제 1 그래프의 비교 결과를 이용하여, 실제 CCD 값을 변환하는 변환 수식을 결정한다. 일 실시 예에 따른 변환 수식은 실제 CCD값과 이상적인 CCD 값과의 관계를 나타낼 수 있다. 예를 들면 제 2 휘도값에서 이상적인 CCD 값이 m이고, 제 2 휘도값에서 실제 CCD값이 n일 때 n을 m으로 변환하기 위해 변환 수식이 이용될 수 있다. In step S870, the image data processing apparatus 100 determines a conversion formula for converting the actual CCD value using the comparison result of the second graph and the first graph. The conversion equation according to one embodiment may represent a relationship between an actual CCD value and an ideal CCD value. For example, a conversion equation may be used to convert n to m when the ideal CCD value is m at the second luminance value and the actual CCD value at the second luminance value is n.

단계 S880에서 이미지 데이터 처리 장치(100)는 변환 수식을 나타내는 계수를 메모리 등에 저장하고, 단계 S890에서 이미지 데이터 처리 장치(100)는 변환 수식에 기초하여 변환된 CCD 값을 이용하여 이미지를 획득한다.In step S880, the image data processing apparatus 100 stores coefficients representing the conversion formula in a memory or the like, and in step S890, the image data processing apparatus 100 acquires an image using the converted CCD value based on the conversion formula.

한편, 상술한 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 또한, 상술한 방법에서 사용된 데이터의 구조는 컴퓨터로 읽을 수 있는 기록매체에 여러 수단을 통하여 기록될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 램, USB, 플로피 디스크, 하드 디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.Meanwhile, the above-described method can be implemented in a general-purpose digital computer that can be created as a program that can be executed by a computer and operates the program using a computer-readable recording medium. In addition, the structure of the data used in the above-described method can be recorded on a computer-readable recording medium through various means. The computer-readable recording medium includes a storage medium such as a magnetic storage medium (e.g., ROM, RAM, USB, floppy disk, hard disk, etc.), optical reading medium (e.g. CD ROM, do.

본 실시 예와 관련된 기술 분야에서 통상의 지식을 가진 자는 상기된 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 방법들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Therefore, the disclosed methods should be considered from an illustrative point of view, not from a restrictive point of view. The scope of the present invention is defined by the appended claims rather than by the foregoing description, and all differences within the scope of equivalents thereof should be construed as being included in the present invention.

10: 디스플레이
100: 이미지 데이터 처리 장치 110: 이미지 센서
120: 프로세서 130: 메모리
140: 리시버
510: 제 1 범위 520: 제 2 범위10: Display
100: image data processing device 110: image sensor
120: processor 130: memory
140: Receiver
510: first range 520: second range

Claims

An image data processing apparatus comprising:
Capturing a display for displaying a first luminance image of a first luminance value, outputting a first CCD value in accordance with the imaging of the first luminance image, capturing a display for displaying a second luminance image of a second luminance value An image sensor for outputting a second CCD value in accordance with an image of the second luminance image;
Determining a first graph indicating a relationship between a luminance value acquired by the image sensor and an actual CCD value output from the image sensor using the first CCD value and the second CCD value,
Comparing the first graph with a second graph indicating a relationship between a luminance value acquired by the image sensor and an ideal CCD value expected to be output by the image sensor,
Determining a conversion formula for converting the actual CCD value using the comparison result of the second graph and the first graph,
A processor for obtaining an image using the converted CCD value based on the conversion formula; And
And a memory for storing a coefficient indicating the conversion formula.

The method according to claim 1,
Wherein the conversion formula indicates a relationship between the actual CCD value and the ideal CCD value.

The method according to claim 1,
Wherein the first luminance value is zero.

The method of claim 3,
And the second luminance value is an intermediate value.

The method according to claim 1,
The processor
If the converted CCD value includes a fractional part, performing an up or down for the fractional part based on a predetermined LUT value to determine an integer CCD value,
And obtains the image using the integer CCD value.

The method according to claim 1,
Wherein the luminance value displayed by the pixels included in the first luminance image is a first luminance value.

The method according to claim 1,
And a receiver for receiving the first luminance value and the second luminance value from an external device.

The method according to claim 1,
Wherein the first graph is a straight line.

The method according to claim 1,
And coefficients representing the second graph are stored in the memory.

The method according to claim 1,
The processor
Determine an inverse function of the first graph, and apply the inverse function to the second graph to determine the transform equation.

An image data processing apparatus comprising:
Capturing a display for displaying a first luminance image of a first luminance value, outputting a first CCD value in accordance with the imaging of the first luminance image, capturing a display for displaying a second luminance image of a second luminance value And outputs a second CCD value in accordance with the imaging of the second luminance image, captures a display for displaying a third luminance image of the third luminance value, and outputs a third CCD value in accordance with the imaging of the third luminance image An image sensor;
Determining a first graph indicating a relationship between a luminance value acquired by the image sensor and an actual CCD value output from the image sensor using the first CCD value, the second CCD value, and the third CCD value,
Comparing the first graph with a second graph indicating a relationship between a luminance value acquired by the image sensor and an ideal CCD value expected to be output by the image sensor,
Determining a conversion formula for converting the actual CCD value using the comparison result of the second graph and the first graph,
A processor for obtaining an image using the converted CCD value based on the conversion formula; And
And a memory for storing a coefficient indicating the conversion formula.

A method for processing image data,
Imaging a display that displays a first luminance image of a first luminance value;
Outputting a first CCD value in accordance with an image of the first luminance image;
Imaging a display that displays a second luminance image of a second luminance value;
Outputting a second CCD value in accordance with an image of the second luminance image;
Determining a first graph indicating a relationship between a luminance value acquired by the image sensor and an actual CCD value output by the image sensor using the first CCD value and the second CCD value;
Comparing the first graph with a second graph indicating a relationship between a luminance value acquired by the image sensor and an ideal CCD value expected to be output by the image sensor;
Determining a conversion equation for converting the actual CCD value using the comparison result of the second graph and the first graph;
Storing a coefficient indicating the conversion formula; And
And acquiring an image using the converted CCD value based on the conversion formula.

15. A computer program stored on a recording medium for implementing the method of claim 12.