KR100408508B1 - Method and apparatus for processing color, signal using color difference plane separation - Google Patents

Method and apparatus for processing color, signal using color difference plane separation Download PDF

Info

Publication number
KR100408508B1
KR100408508B1 KR1019960051827A KR19960051827A KR100408508B1 KR 100408508 B1 KR100408508 B1 KR 100408508B1 KR 1019960051827 A KR1019960051827 A KR 1019960051827A KR 19960051827 A KR19960051827 A KR 19960051827A KR 100408508 B1 KR100408508 B1 KR 100408508B1
Authority
KR
South Korea
Prior art keywords
color
coefficient
color difference
matrix
color signal
Prior art date
Application number
KR1019960051827A
Other languages
Korean (ko)
Other versions
KR19980031955A (en
Inventor
이성덕
김창용
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1019960051827A priority Critical patent/KR100408508B1/en
Publication of KR19980031955A publication Critical patent/KR19980031955A/en
Application granted granted Critical
Publication of KR100408508B1 publication Critical patent/KR100408508B1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/67Circuits for processing colour signals for matrixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/77Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase

Abstract

PURPOSE: A method and an apparatus for processing color using color difference plane division are provided to simply realize selective color adjustment and color correction. CONSTITUTION: A coefficient table(11) divides a color difference plane defined by two color difference signals into a plurality of cells. The coefficient table obtains coefficients of transformation matrix for converting demodulated input color signals into output color signals. The coefficient table groups the cells having the similar coefficients in characteristic. An index address table(16) stores a coefficient designating index for designating addresses of the coefficients of the transformation matrix, and generates the coefficient designating index by using a plurality of upper bits of the two color difference signals. A matrix operating unit(17) operates the coefficients of the transformation matrix corresponding to the coefficient designating index with the input color difference signal. A range checking unit(18) generates the output of the matrix operating unit as the output color signal if each value of the color signal is within an allowable range. If out of the allowable range, the maximum value within the allowable range is generated as the output color signal.

Description

색차평면 분할을 이용한 색처리 방법 및 장치{Method and apparatus for processing color, signal using color difference plane separation}Method and apparatus for processing color, signal using color difference plane separation}

본 발명은 칼라텔레비젼을 포함하는 디스플레이기기에 있어서 음극선관(CRT)을 포함하는 디스플레이기기 자체의 문제로 인한 원화상 색정보의 부정확, 불확실한 부분을 색보정 및 색수정하는 색처리 방법 및 장치에 관한 것으로서, 특히 칼라디스플레이기기 내부의 색신호 왜곡요인과 시감적인 측면에서의 요인들을 모두 독립적으로 보정할 수 있는, 유연하고 간단한 구조를 갖는 색처리 방법과 장치에 관한 것이다.The present invention relates to a color processing method and apparatus for color correction and color correction of inaccurate and uncertain parts of color information of an original image due to a problem of a display device including a cathode ray tube (CRT) in a display device including a color television. In particular, the present invention relates to a color processing method and apparatus having a flexible and simple structure capable of independently correcting both color signal distortion factors and visually sensitive factors in a color display device.

일반적으로 칼라 디스플레이기기, 특히 칼라텔레비젼은 방송표준 규격(NTSC, PAL)에 따라 만들어진 색신호를 복조하여 음극선관(CRT)을 통해 재현한다. 그러나, 수신된 색정보는 여러 요인들에 의해 색왜곡을 일으키며, 그 주된 요인중 하나가 TV 수상기에서의 색신호 처리이다. 즉, CRT의 R, G, B 형광체(phosphor) 특성이 미리 정해놓은 방송표준 규격과 상이하여 발생되는 입력색과 CRT 출력색간의 색재현차와, 수상기 회로의 비선형성으로 인한 중간색들의 색이탈 등이 있다. 또한, 칼라텔레비젼과 같은 출력장치에서는 원색의 부족한 부분을 보완하거나, 인종에 따른 색관점의 차이로 인한 시감적 색처리가 부분적으로 요구된다.In general, color display devices, especially color television, demodulate color signals produced according to broadcasting standards (NTSC, PAL) and reproduce them through a cathode ray tube (CRT). However, the received color information causes color distortion by various factors, one of which is the color signal processing in the TV receiver. That is, the color reproduction difference between the input color and the CRT output color, which are different from the broadcasting standard specification, in which the R, G, and B phosphors of the CRT are predetermined, and the color deviation of intermediate colors due to nonlinearity of the receiver circuit, etc. There is this. In addition, in an output device such as a color television, it is necessary to partially compensate for the lack of the primary colors or to visually process color due to differences in color viewpoints according to races.

이를 해결하기 위한 종래기술의 대표적인 방법으로 미국특허번호 USP 4,695,875에서는 TV의 경우 색상(Chroma) 복조단의 2개의 기준위상을 조정하므로서 수신된 색신호를 사람의 기호색에 맞게 보정하는 색보정 장치가 많이 이용되었으나, 그외 색들의 전반적인 색왜곡 현상이 초래되는 단점들이 있었다.As a representative method of the prior art to solve this problem, US Patent No. US Pat. No. 4,695,875 shows a number of color correction devices for correcting a received color signal according to a person's preference color by adjusting two reference phases of a chroma demodulator in the case of a TV. Although it was used, there were disadvantages in that the overall color distortion of the other colors was caused.

칼라 디스플레이기기의 특성화와 관련된 또 다른 종래기술로서, 전체 색공간 상에서 입력과 출력 색값들의 관계를 모델링하는 방법들이 있으며, 그 대표적인 것이 회귀분석법을 이용한 매트릭싱 방법과 룩업테이블(Look-Up Table;LUT)+체적보간법이다. 이들 중 LUT+체적보간법은 시스템의 입출력 관계를 얻기 위해 다수의 색값을 측정하고, 이들 측정점들과 체적보간법을 함께 사용하여 중간값들을 표현하는방법이다. 이 방법은 기존의 방법에 비해 비교적 정확한 결과를 얻을 수 있으며, 또한 시감적 색처리를 위한 국부적인 색조정이 가능하기 때문에 프린팅 분야 등에서는 폭넓게 사용되고 있다. 그러나, 체적보간법이 복잡하기 때문에 TV와 같은 디스플레이 장치에서는 실시간 처리를 위한 하드웨어(H/W) 구현이 어렵고, 가격 또한 비싸기 때문에 상업적인 분야에서는 적합한 방법이 아니다. 또한, 회귀분석법을 이용한 매크릭싱 방법은 다수의 측정점들을 기초로 하여 입출력 관계를 간단한 행렬화시키는 방법으로서, 디스플레이 분야에서 폭넓게 사용되고 있다. 그러나, 하나의 매트릭스로 전체 색공간을 커버해야 하므로 색차면에서 커다란 장점이 되지 못하며, 또한 시감적인 색조정 등의 국부적인 색조정이 불가능하다는 단점들이 있다.As another conventional technique related to the characterization of color display apparatuses, there are methods for modeling the relationship between input and output color values over the entire color space, and representative examples are a matrix method and a look-up table (LUT) using regression analysis. ) + Volume interpolation. Among them, LUT + volume interpolation measures a number of color values to obtain the input / output relationship of the system, and expresses the intermediate values using these measurement points and volume interpolation together. This method is relatively widely used in the printing field because it can obtain relatively accurate results compared to the existing method, and also enables local color adjustment for visual color processing. However, since volumetric interpolation is complicated, hardware (H / W) for real-time processing is difficult in display devices such as TVs, and it is not suitable for commercial applications because it is expensive. In addition, the regression analysis method is a method for simple matrixing of input / output relations based on a plurality of measurement points, and is widely used in the display field. However, since it is necessary to cover the entire color space with one matrix, it is not a big advantage in terms of color difference, and there are also disadvantages that local color tone, such as visual color tone, is impossible.

이 문제를 해결하기 위한 최근의 방법으로서 살색(flesh), 회색(gray), 적(red), 녹(green), 청(blue)의 5구간을 나누어 각 구간별로 회귀분석법을 적용하여, 칼라 디스플레이기기 특성화를 시도한 종래기술이 있었다. 그러나, 색을 대표색 5가지로만 나눔으로써 분할된 구역간에 경계선이 나타날 수가 있으며, 칼라 디스플레이기기에서 색의 혼합으로 인해 표현되는 각종 색상들의 특성을 적절히 나타내기 어려운 단점들이 있다. 또한, 5가지 대표색들의 혼합색인 섬세한 색상 부분에서의 국부적인 색조정이 필요한 경우에 이러한 기능 제공이 어렵다는 단점 또한 나타난다.As a recent method to solve this problem, color display using regression analysis for each section by dividing five sections of flesh, gray, red, green, and blue There have been prior art attempts to characterize devices. However, by dividing the color into only five representative colors, a boundary line may appear between the divided regions, and it is difficult to adequately represent characteristics of various colors represented by color mixing in a color display device. In addition, it is also difficult to provide such a function when local color tone adjustment is required in a delicate color part, which is a mixed color of five representative colors.

또 다른 종래기술로서 미국특허번호 USP 4,989,080에서는 색도도 상에서 RGB CMY의 6색을 경계로 하는 6개의 색상(Hue) 영역을 분할하고 각각의 색상 영역에서전달함수를 독립적으로 구하는 방법이 있었다. 그러나, 이 방법 역시 세밀한 국부적 색조정에는 적합하지 않으며, 더 많은 색상분할을 수행할 경우 색상 영역 판별이 복잡해지며, 채도 분할에 대한 대책이 없는 단점을 가지고 있다.As another prior art, US Patent No. US Pat. No. 4,989,080 shows a method of dividing six color regions bounded by six colors of RGB CMY on a chromaticity diagram and independently obtaining transfer functions in each color region. However, this method is also unsuitable for fine local color adjustment, and when more color division is performed, the color gamut is complicated and there is no countermeasure against saturation division.

따라서 본 발명의 목적은 3차원 색공간에서의 색들을 색상(Hue)과 채도(Chroma)의 분류와 색처리가 용이한 2차원 색차평면(색차평면 예; R-Y, B-Y) 상에서 색들의 영역으로 바꾸는 색차평면 변환기법, 2차원 색차평면을 다수의 작은 면적으로분할하는 색차평면 분할기법, 각각의 분할영역(cell)에서 해당 영역과 인접한 주변 영역을 포함하여 입출력 관계를 정의하는 색차 최소화 방법을 사용하여 색처리를 수행하기 위한 색처리방법 및 장치를 제공하는데 있다. 따라서 칼라 디스플레이기기 특성화 및 색들간 경계선을 해결할 수 있다.Accordingly, an object of the present invention is to change colors in a three-dimensional color space into a region of colors on a two-dimensional color difference plane (eg, RY, BY) that is easy to classify and colorize hues and chroma. Color difference plane conversion method, color difference plane dividing method that divides two-dimensional color difference plane into a number of small areas, and color difference minimization method that defines the input / output relationship including the surrounding area adjacent to the corresponding area in each cell The present invention provides a color processing method and apparatus for performing color processing. Therefore, color display device characterization and color boundary can be solved.

또한, 본 발명의 다른 목적은 다수의 분할된 작은 면적을 이용하여 색차신호(R-Y, B-Y)에서 직접적인 국부적 색조정 및계수조정이 용이한 색처리방법 및 장치를 제공하는데 있다. 따라서 TV와 같은 디스플레이기기에서 실시간 처리 H/W 구현이 가능하다.In addition, another object of the present invention is to provide a color processing method and apparatus that is easy to directly local color correction and coefficient adjustment in color difference signals (R-Y, B-Y) using a plurality of divided small areas. Therefore, real time processing H / W can be implemented in a display device such as a TV.

상기 목적들을 달성하기 위하여 본 발명에 의한 색처리방법은 a) 두개의 색차신호로 정의되는 색차평면을 복수개의 영역으로 분할하고, 각 분할영역별로 디스플레이기기로 수신되어 복조되는 입력색신호를 출력색신호로 변환하기 위한 변환행렬의 계수값을 구하고, 분할영역별 계수값들의 특성이 비슷한 영역을 그루핑하여 저장하는 단계; b) 상기 입력색신호에서 두개의 색차신호에 의해 상기 색차평면상의 하나의 분할영역이 지정되면, 지정된 분할영역에 대하여 상기 a) 단계에서 구해진 변환행렬의 계수값을 획득하는 단계; c) 상기 b) 단계에서 획득한 변환행렬의 계수값과 상기 입력색신호를 행렬연산하는 단계; 및 d) 상기 c) 단계에서의 행렬연산 결과, 색신호의 각 값이 허용범위내에 존재하는지를 체크하여 허용범위를 넘는 경우 허용범위내 최대값으로 출력하는 단계를 구비하는 것을 특징으로 한다.In order to achieve the above object, the color processing method according to the present invention comprises: a) dividing a color difference plane defined by two color difference signals into a plurality of areas, and converting an input color signal received and demodulated by the display device into each color area as an output color signal; Obtaining coefficient values of the transformation matrix for transforming, and grouping and storing regions having similar characteristics of coefficient values for each partition region; b) if one division region on the color difference plane is designated by two color difference signals in the input color signal, obtaining coefficient values of the transformation matrix obtained in step a) for the designated division region; c) matrix computing the coefficient values of the transform matrix obtained in step b) and the input color signal; And d) checking whether each value of the color signal exists within an allowable range as a result of the matrix operation in step c) and outputting the maximum value within the allowable range when exceeding the allowable range.

상기 목적들을 달성하기 위하여 본 발명에 의한 색처리장치는 두개의 색차신호로 정의되는 색차평면을 복수개의 영역으로 분할하고, 각 분할영역별로, 디스플레이기기로 수신되어 복조되는 입력색신호를 출력색신호로 변환하기 위한 변환행렬의 계수값을 구하고, 분할영역별 계수값들의 특성이 비슷한 영역을 그루핑하여 저장하는 계수테이블; 상기 계수테이블에 저장된 변환행렬의 계수값의 어드레스를 지정하기 위한 계수지정 인덱스가 저장되며, 상기 입력색신호에서 두개의 색차신호의 복수개의 상위 비트들을 이용하여 계수지정 인덱스를 발생시키는 인덱스 어드레스 테이블; 상기 계수테이블에서 상기 인덱스 어드레스 테이블로부터 발생되는 계수지정 인덱스에 해당하는 변환행렬의 계수값을 상기 입력색신호와 행렬연산하는 매트릭스 연산부; 및 상기 매트릭스 연산부에서의 행렬연산 결과, 색신호의 각 값이 허용범위 이내인 경우 상기 매트릭스 연산부의 출력을, 허용범위를 벗어난 경우 허용범위내 최대값을 상기 출력색신호로 발생시키는 범위체크부를 구비하는 것을 특징으로 한다.In order to achieve the above objects, the color processing apparatus according to the present invention divides a color difference plane defined by two color difference signals into a plurality of regions, and converts an input color signal received and demodulated by a display device into an output color signal for each divided region. A coefficient table for obtaining a coefficient value of a transform matrix to be grouped and grouping and storing an area having similar characteristics of coefficient values for each partition area; An index address table for storing a coefficient designation index for designating an address of a coefficient value of a transform matrix stored in the coefficient table, and generating a coefficient designation index using a plurality of upper bits of two color difference signals in the input color signal; A matrix operation unit performing matrix operation on the coefficient table of the transform matrix corresponding to the coefficient designation index generated from the index address table in the coefficient table with the input color signal; And a range checker for generating an output of the matrix calculator when the value of the color signal is within an allowable range, and generating a maximum value within the allowable range as the output color signal when the matrix operation is out of the allowable range. It features.

도 1은 본 발명에 의한 색처리 장치가 적용되는 디스플레이기기의 개략적인 구성도.1 is a schematic configuration diagram of a display apparatus to which a color processing apparatus according to the present invention is applied;

도 2는 본 발명에 의한 색처리 장치의 일 실시예를 나타낸 세부 구성도 예.Figure 2 is a detailed configuration example showing an embodiment of a color processing apparatus according to the present invention.

도 3은 본 발명에 의한 색처리 장치의 다른 실시예를 나타낸 세부 구성도 예.3 is a detailed structural diagram example showing another embodiment of a color processing apparatus according to the present invention;

도 4는 색차평면에서의 색표현 예.4 is a color expression example in a color difference plane.

도 5는 색차평면에서의 관심색 정의와 20*20 영역분할 예.5 is an example of interest color definition and 20 * 20 area division in a color difference plane.

도 6은 색차평면에서의 국부적인 색수정 예.6 is an example of local color correction in a color difference plane.

도 7은 인덱스 어드레스 테이블과 계수 테이블의 구성도.7 is a configuration diagram of an index address table and a coefficient table.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 일실시예에 대하여 상세히 설명하기로 한다.Hereinafter, with reference to the accompanying drawings will be described in detail a preferred embodiment of the present invention.

도 1은 본 발명에 의한 색처리 장치가 적용되는 디스플레이기기의 개략적인 구성도이다. 즉, TV 수상기에서 본 발명이 적용될 경우의 예를 들면, TV 수상기에서 수신된 변조 색신호는 튜너&IF단(1)을 통해 비디오 신호가 출력되어 복조부(2)에 입력되며, 복조부(2)에서 기준 위상신호를 이용하여 1개의 휘도신호(Yin)와 두 개의 색차신호(RYin, BYin)가 만들어진다. 이들 신호들은 본 발명에서 제안한 색처리부(3)에 입력되어 색차평면에서의 영역 위치별로 각기 다른 색변환이 수행된 후, 그 출력값(Yo, RYo, BYo)은 Y, RY, BY-to-RGB 변환부(4)에 입력되어 CRT(5) 구동에 필요한 신호인 RGB 신호인 Ro, Go, Bo로 바뀌어 CRT(5)에 표현된다.1 is a schematic configuration diagram of a display apparatus to which a color processing apparatus according to the present invention is applied. That is, for example, when the present invention is applied to a TV receiver, a modulated color signal received by the TV receiver is output to the demodulator 2 by outputting a video signal through the tuner & IF stage 1, and demodulator 2. One luminance signal (Yin) and two color difference signals (RYin, BYin) are generated by using the reference phase signal at. These signals are input to the color processor 3 proposed in the present invention, and different color conversions are performed for each area position in the color difference plane, and the output values (Yo, RYo, BYo) are Y, RY, BY-to-RGB. It is input to the converter 4 and is converted into Ro, Go, and Bo, which are RGB signals, which are signals required for driving the CRT 5, and are represented in the CRT 5.

본 발명에서 제안된 색처리부 중 일실시예는 색차신호와 휘도신호를 함께 이용하여 입력 색신호를 원하는 출력색신호로 색신호 변환을 수행하는 장치로서, 도 2와 함께 설명된다.One embodiment of the color processor proposed in the present invention is an apparatus for converting an input color signal into a desired output color signal by using a color difference signal and a luminance signal together, and will be described with reference to FIG. 2.

도 2에 있어서, 복조부(도 1의 2)를 거쳐 나온 휘도신호(Yin)와 색차신호(RYin, BYin)들 중 색지정과 관련이 없는 휘도신호(Yin)는 3*3 매트릭스 연산부(14)로 출력되고, 색변환과 관련이 있는 두 개의 색차신호는 두 개의 경로로 나뉘어 지는데, 그중 하나는 각 신호의 상위 몇 개의 비트(MSB)만이 인덱스 어드레스 테이블(11)에 입력되어 분할된 색차영역들중 하나를 지정하는 인덱스 신호로서 사용된다.In FIG. 2, among the luminance signal Yin and the color difference signals RYin and BYin, which have passed through the demodulator (2 in FIG. 1), the luminance signal Yin that is not related to color specification is a 3 * 3 matrix calculator 14. ) And two chrominance signals related to color conversion are divided into two paths, one of which is divided into chrominance areas obtained by inputting only a few upper bits (MSB) of each signal into the index address table 11. Used as an index signal specifying one of these.

인덱스 어드레스 테이블(11)의 구성은 2차원이며 일 예로 16*16의 영역으로 구분되며, 그 각각에는 계수 테이블(13)에 저장되어 있는 계수집합들의 어드레스를지정할 수 있는 계수지정 값들이 저장되어 있는 메모리로서, MSB로 구성된 색차신호를 입력받아 계수 테이블(13)에 있는 한 계수집합을 지정할 수 있는 계수지정 인덱스(I1, 12)를 출력한다.The configuration of the index address table 11 is two-dimensional and is divided into an area of 16 * 16, for example, each of which has coefficient designation values capable of addressing coefficient sets stored in the coefficient table 13. As a memory, a color difference signal composed of MSBs is input, and coefficient designation indexes I1 and 12 that can designate one coefficient set in the coefficient table 13 are output.

계수 테이블(13)은 9개로 구성된 계수를 하나의 행렬집합으로 하는 다수의 행렬집합이 저장되어 있는 메모리로서, 계수지정 인덱스(12)를 입력받아서 해당 어드레스에 저장된 9개의 계수를 3*3 매트릭스 연산부(14)로 출력시킨다.The coefficient table 13 is a memory that stores a plurality of matrix sets in which nine coefficients are configured as one matrix set. The coefficient table 13 receives a coefficient designation index 12 and converts nine coefficients stored at a corresponding address into a 3 * 3 matrix calculator. Output to (14).

3*3 매트릭스 연산부(14)는 계수 테이블(13)으로부터 9개의 계수를 입력받고, 한편으로 복조부(2)의 출력신호인 두개의 색차신호(RYin, BYin)와 휘도신호(Yin)을 입력받아서 3*3 행렬연산을 수행하는 행렬연산부로서, 연산결과를 범위 체크부(15)로 출력시킨다.The 3 * 3 matrix calculating section 14 receives nine coefficients from the coefficient table 13, while inputting two color difference signals RYin and BYin and a luminance signal Yin, which are output signals of the demodulation section 2, respectively. And a 3 * 3 matrix operation, which outputs the result to the range checker 15.

범위 체크부(15)는 휘도 및 색차신호의 허용범위를 넘는 값이 들어 올 때 이를 허용범위 내의 최대값으로 바꾸는 기능을 수행하는 역할을 하며, 그 결과는 Y, RY, BY-to-RGB 변환부(도 1의 4)로 출력시킨다.The range checker 15 performs a function of changing a value exceeding an allowable range of the luminance and chrominance signal to a maximum value within the allowable range, and the result is Y, RY, BY-to-RGB conversion. Output to negative (4 in FIG. 1).

본 발명에서 제안한 색처리부 중 다른 실시예는 색차신호만을 이용하여 입력 색신호를 원하는 출력색신호로 색신호 변환을 수행하는 장치로서, 도 3과 함께 설명된다.Another embodiment of the color processor proposed by the present invention is an apparatus for converting an input color signal into a desired output color signal using only a color difference signal, which will be described with reference to FIG. 3.

도 3에 있어서, 복조부(도 1의 2)를 거쳐 나온 휘도신호(Yin)와 색차신호(RYin, BYin)들 중 색 표현과 관련이 없는 휘도신호(Yin)는 별도의 처리없이 출력된다(즉, Yo=Yin). 색변환과 관련이 있는 두 개의 색차신호는 두 개의 경로로 나뉘어지는데, 그중 하나는 각 색차신호의 상위 몇 개의 비트(MSB)만이 인덱스 어드레스 테이블(11)에 입력되어 분할된 색차영역들 중 하나를 지정하는 인덱스 신호로서 사용된다.In Fig. 3, among the luminance signal Yin and the color difference signals RYin and BYin, which have passed through the demodulator (2 in Fig. 1), the luminance signal Yin not related to the color representation is output without any further processing ( Ie Yo = Yin). The two color difference signals related to the color conversion are divided into two paths, one of which is that only the upper few bits (MSB) of each color difference signal are input to the index address table (11) to divide one of the divided color difference areas. Used as an index signal to specify.

인덱스 어드레스 테이블(11)의 구성은 2차원이며, 일 예로 16*16의 영역으로 구분되며, 그 각각에는 계수 테이블(16)에 저장되어 있는 계수집합들의 어드레스를 지정할 수 있는 계수지정 값들이 저장되어 있는 메모리로서, MSB(영역이 16*16일 때; 4비트)로 구성된 색차신호를 입력받아 계수 테이블(16)에 있는 한 계수집합을 지정할 수 있는 계수지정 인덱스(I2, 12)를 출력한다. 계수지정 인덱스(12)는 사용되는 계수 테이블(16)의 크기에 따라서 비트수가 다르며, 일 예로 계수 테이블(16)에서 행렬계수를 128개 사용할 때 계수지정 인덱스는 7비트가 할당된다.The configuration of the index address table 11 is two-dimensional, for example, divided into 16 * 16 areas, each of which stores coefficient designation values capable of addressing coefficient sets stored in the coefficient table 16. As a memory, a color difference signal composed of MSBs (when the area is 16 * 16; 4 bits) is input and outputs coefficient designation indexes I2 and 12 that can designate one coefficient set in the coefficient table 16. The coefficient designation index 12 has a different number of bits according to the size of the coefficient table 16 used. For example, when 128 matrix coefficients are used in the coefficient table 16, 7 bits are assigned to the coefficient designation index.

계수 테이블(16)은 예를 들어 4개로 구성된 계수를 하나의 행렬집합으로 하는 다수의 행렬집합이 저장되어 있는 메모리로서, 인덱스 어드레스 테이블(11)로부터 계수지정 신호를 입력받아서 해당 어드레스에 저장된 4개의 계수를 2*2 매트릭스 연산부(17)로 출력시킨다.The coefficient table 16 is, for example, a memory that stores a plurality of matrix sets in which four coefficients are formed as one matrix set. The coefficient table 16 receives four coefficient storage signals from the index address table 11 and stores four coefficient sets. The coefficients are output to the 2 * 2 matrix calculator 17.

2*2 매트릭스 연산부(17)는 계수 테이블(16)으로부터 4개의 계수를 입력받고, 한편으로 복조부(2)의 출력신호인 두 개의 색차신호(RYin, BYin)을 입력받아서 2*2 행렬연산을 수행하는 행렬연산부로서, 연산결과를 범위 체크부(18)로 출력시킨다.The 2 * 2 matrix calculator 17 receives four coefficients from the coefficient table 16, and receives two color difference signals RYin and BYin, which are output signals of the demodulator 2, to perform 2 * 2 matrix operations. As a matrix operator for performing the operation, the calculation result is output to the range checker 18.

범위체크부(18)는 색차신호의 허용범위를 넘는 값이 들어올 때 이를 허용범위 내의 최대값으로 바꾸는 기능을 수행하는 역할을 하며, 그 결과는 Y, RY, BY-to-RGB 변환부(도 1의 4)로 출력시킨다.The range check unit 18 performs a function of changing a value exceeding an allowable range of the color difference signal to a maximum value within the allowable range, and the result is Y, RY, BY-to-RGB conversion unit (Fig. Output to 1) 4).

도 4는 RY(R-Y)와 BY(B-Y)의 색차신호를 이용한 전형적인 색차평면을 도시한 예이다. 색차평면에서의 임의의 한 점은 특정한 색상(Hue)과 채도(Chroma)를 갖는 색을 나타내며, 3차원 색공간에서의 모든 색은 2차원 색차평면에서 기술이 가능하고, 특히 이러한 색차평면은 색에 대한 기술을 다음 수학식 1 및 2와 같이 색상과 채도로 쉽게 표현이 가능하다.4 shows an example of a typical color difference plane using color difference signals of RY (R-Y) and BY (B-Y). Any one point in the chrominance plane represents a color with a particular hue and saturation, and all colors in the three-dimensional color space can be described in the two-dimensional chrominance plane. The technique can be easily expressed in color and saturation as shown in Equations 1 and 2 below.

모든 색들은 색차평면 상에서 각기 다른 색상(각도; B-Y축 = 0도)과 채도(길이; 회색점(Gray point) = 0)로 구별이 될 수 있다.All colors can be distinguished by different colors (angle; B-Y axis = 0 degrees) and saturation (length; gray point = 0) on the chrominance plane.

도 5는 2차원 색차평면을 20*20으로 영역분할한 것으로서, 분할된 영역(cell)들은 색상과 채도의 정의가 각기 다르며, 관심색 등인 살색, 나무색, 하늘색 등 역시 각기 색상과 다른 영역들을 점유하고 있다. 따라서, 각 영역당 입력색 대 출력색간의 관계는 전체 색공간에 대한 입출력 관계의 정의보다 훨씬 간단한 수식으로 더 정확하게 표현할 수 있다.FIG. 5 is a two-dimensional color difference plane divided by 20 * 20. The divided cells have different definitions of color and saturation, and flesh color, wood color, and sky color, which are of interest colors, also occupy areas different from each other. Doing. Therefore, the relationship between the input color and the output color per area can be represented more precisely with a simpler formula than the definition of the input / output relationship for the entire color space.

NTSC 디스플레이기기의 특성화 경우를 예로 들어 분할된 작은 영역별 계수를 구하는 과정은 다음과 같다.For example, the process of obtaining the coefficients for each divided small region is described as follows.

스텝 A1) 색차평면을 커버하는 다수의 다양한 색들을 입력시키고, CRT에서해당 색들을 CIExyY와 같은 색좌표 값으로 측색한다.Step A1) A plurality of different colors covering the color difference plane are input, and the corresponding colors are measured by the color coordinate values such as CIExyY in the CRT.

스텝 A2) 모든 측정된 CIExyY 값들은 다음 수학식 3과 같이 Y, RY, BY 색값으로 NTSC 공식에 의거하여 환산한다.Step A2) All measured CIExyY values are converted into Y, RY and BY color values based on the NTSC formula as shown in Equation 3 below.

스텝 A3) 색차평면을 적정 규모(16*16 또는 32*32)로 영역을 분할하고, 환산된 RYr과 BYr들을 분할된 색차평면상에 투영하면 각 영역에 소속한 측정값들의 집합을 구할 수 있다.Step A3) By dividing the color difference plane into the appropriate scale (16 * 16 or 32 * 32) and projecting the converted RYr and BYr onto the divided color difference plane, a set of measurement values belonging to each area can be obtained. .

스텝 A4) 각각의 영역에서 입력신호의 Yi, RYi, BYi와 측정값 XYZm, 원래 표현되어야 할 값 XYZc 정보와 회귀분석법과 같은 오차최소화 방법을 이용하면 입력 색신호 Yi, RYi, BYi를 실제 CRT에 입력해야 할 색신호 Yc, RYc, BYc로 색변환해 주는 변환행렬 M의 계수값을 다음 수학식 4와 같이 구할 수 있다.Step A4) Input the input color signals Yi, RYi, BYi to the actual CRT using error minimization methods such as Yi, RYi, BYi and measured value XYZm of the input signal in each area, and the value XYZc information to be originally expressed and regression analysis. The coefficient value of the conversion matrix M, which is color-converted into the color signals Yc, RYc, and BYc, to be obtained, can be obtained as in Equation 4 below.

스텝 A5) 스텝 A4에서 구한 색차평면에서의 영역별 변환행렬의 계수값들 중 계수값들의 특성이 비슷한 영역을 모아서 하나의 영역으로 만드는 셀 그루핑(cell grouping)을 모든 영역에 대해 반복적으로 수행하여 변환행렬의 갯수를 최소화한다.Step A5) The cell grouping is repeatedly performed for all the regions in which the regions having similar characteristics of coefficient values among the coefficient values of the region-specific transformation matrix in the color difference plane obtained in Step A4 are collected and repeated for all regions. Minimize the number of matrices.

도 5를 예로 들어 설명하면, A로 표기한 4개의 영역은 동일한 변환행렬을 사용하므로 하나의 영역과 동등하며, 표기 B의 경우 3개의 영역이 한 영역으로, 그리고 표기 C의 경우 영역 그루핑이 발생되지 않음을 보여준다.Referring to FIG. 5 as an example, the four regions designated as A are equivalent to one region because they use the same conversion matrix. In the case of the notation B, three regions are one region, and in the case of the notation C, region grouping occurs. Shows no.

국부적인 색조정/색변환의 경우를 예로 들어 분할영역별 계수값들을 구하는 과정을 도 6을 참조하여 설명하면 다음과 같다.Referring to FIG. 6, a process of obtaining coefficient values for each segmented area by using local color tone / color conversion as an example is as follows.

스텝 B1) 색조정 사양을 색차평면에서 정의한다. 색차평면에서 색상과 채도를 임의의 방향으로 색조정할 때를 예를 들면, 이동시킬 색상의 각도(cLCH[2]), 이동되었을 때의 색상의 각도(c2LCH[2]), 색조정에 참가할 양쪽 경계면 색상의 각도(uLCH[2], dLCH[2]), 이동시킬 채도의 크기(cLCH[1]), 이동되었을 때 채도의 크기(c2LCH[1]), 색조정에 참가할 최대/최소 채도의 크기(uLCH[1], dLCH[1])를 각각 정의한다. 또한, △C, △H, △T를 다음과 같이 정의한다.Step B1) The color tone specification is defined in the color difference plane. When tinting hue and saturation in any direction on the chrominance plane, for example, the angle of the color to be shifted (cLCH [2]), the angle of the color when shifted (c2LCH [2]), and both The angle of the interface color (uLCH [2], dLCH [2]), the amount of saturation to be shifted (cLCH [1]), the amount of saturation when moved (c2LCH [1]), and the maximum / minimum saturation Sizes uLCH [1] and dLCH [1] are defined respectively. In addition, DELTA C, DELTA H, and DELTA T are defined as follows.

△C = c2LCH[1]-cLCH[1],ΔC = c2LCH [1] -cLCH [1],

△H = c2LCH[2]-cLCH[2],ΔH = c 2 LCH [2] -cLCH [2],

△T = △H와 △C의 벡터ΔT = ΔH and ΔC

스텝 B2) 색차평면을 적정규모(16*16 또는 32*32)로 셀 분할하고, 색조정에 참가한 색상의 양쪽 경계면 각도와 채도 최대/최소 크기의 2차원 범위를 색차평면상에 투영하면, 색조정에 참여하는 색차평면에서의 분할영역을 정의할 수 있다.Step B2) If the color difference plane is cell-divided into appropriate scales (16 * 16 or 32 * 32) and the two-dimensional ranges of both boundary angles and maximum / minimum saturation of the colors participating in the hue definition are projected onto the color difference plane, It is possible to define the partition in the chrominance plane that participates in the adjustment.

스텝 B3) 선택된 전체 영역내의 모든 위치에서 색상/채도의 변화량에 대한 정의는 삼각꼴, 사다리꼴 혹은 기타 다른 함수등을 사용할 수 있으며, 다음 수학식5 및 6과 같이 나타낼 수 있다.Step B3) The definition of the change amount of hue / saturation at all positions within the selected entire area may be triangular, trapezoidal, or other functions, and may be expressed as in Equations 5 and 6 below.

스텝 B4) 선택된 각각의 분할영역에서의 변환행렬의 계수들은 원래의 색신호와 스텝 B3을 통해 변화된 색신호 사이의 전달함수로서 회귀분석법과 같은 오차최소화 방법으로 구할 수 있다(스텝 A4와 유사).Step B4) The coefficients of the transformation matrix in each selected partition can be obtained by error minimization method such as regression analysis as a transfer function between the original color signal and the color signal changed through step B3 (similar to step A4).

스텝 A1 내지 스텝 A5 그리고 스텝 B1 내지 스텝 B4를 통해 분할된 색차평면 영역별 변환행렬의 계수값들이 모두 구해지면, 도 2의 경우를 예로 들면, 색차평면의 영역별 계수값들은 계수 테이블(13)에 저장되며, 계수 테이블(13)에 저장된 계수 어드레스를 지정할 계수지정 인덱스값들은 인덱스 어드레스 테이블(11)에 저장된다. 한편, 도 3을 예로 들면, 색차평면의 영역별 변환행렬의 계수값들은 계수 테이블(16)에 저장되고, 계수 테이블(16)에 저장된 계수 어드레스를 지정할 계수지정 인덱스 값들은 인덱스 어드레스 테이블(11)에 저장된다. 도 7은 인덱스 어드레스 테이블(11)과 계수 테이블(13, 16)간의 사상관계를 나타낸 그림이다.If all the coefficient values of the conversion matrix for each color difference plane region divided through steps A1 to A5 and B1 to B4 are obtained, the coefficient values for each region of the color difference plane are the coefficient table 13, for example. The coefficient designation index values, which are stored in the coefficient table 13 and which designate the coefficient address stored in the coefficient table 13, are stored in the index address table 11. On the other hand, taking FIG. 3 as an example, the coefficient values of the region-specific transformation matrix of the color difference plane are stored in the coefficient table 16, and the coefficient designation index values for designating the coefficient addresses stored in the coefficient table 16 are index address table 11 Are stored in. 7 is a diagram showing the mapping relationship between the index address table 11 and the coefficient tables 13 and 16.

본 발명은 디지탈 신호처리를 하는 모든 칼라 디스플레이기기 즉, 칼라텔레비젼을 포함하는 칼라 디스플레이기기와 칼라 입출력장치에서 간단한 회로의 사용으로 구현이 가능하며, 특히 화소별 색처리가 가능하면서 회로가 간단하므로 실시간 처리에도 손쉽게 적용가능하다. 또한, 본 발명은 범용 IC 칩화에도 사용가능하다.The present invention can be implemented by using a simple circuit in all color display devices that perform digital signal processing, namely, color display devices including color televisions and color input / output devices. Easily applicable to processing. The present invention can also be used for general purpose IC chip formation.

상술한 바와 같이 본 발명은 색차평면을 이용하여 다수의 영역으로 분할하고, 분할된 각각의 영역에서의 입출력 관계를 단순 선형행렬로서 연산하므로써 정확성과 장치 특성화 분야와 아울러 살색조정, 녹색/바다색 강조 등의 선택적인 색조정/색수정이 간단하면서 또한 변경이 가능한 유연한 구조를 가진다.As described above, the present invention divides into a plurality of regions using a color difference plane, and calculates input / output relations in each divided region as a simple linear matrix, such as color adjustment, green / sea emphasis, etc. in addition to accuracy and device characterization. The optional tint / color correction is simple and has a flexible structure that can be changed.

또한, 본 발명을 구현하는데 필요한 장치가 복잡하지 않고, 화소처리 시간이 단순하여 계산시간이 적기 때문에 실시간 동화상 처리에 사용가능하다.In addition, since the apparatus required for implementing the present invention is not complicated, and the pixel processing time is simple and the calculation time is small, it can be used for real time moving picture processing.

또한, 사용장치의 제약을 받지 않는 구조로서 TV 등의 디지탈 신호처리를 하는 모든 디스플레이 기기 및 카메라, 프린터와 같은 다른 입출력 장치에서도 폭넓게 쓰일 수 있는 장점이 있으며, 범용 IC 칩(chip)에도 쓰일 수 있다.In addition, as a structure that is not restricted by the device used, it can be widely used in all display devices that perform digital signal processing such as TV, and other input / output devices such as cameras and printers, and can also be used in general-purpose IC chips. .

Claims (2)

a) 두개의 색차신호로 정의되는 색차평면을 복수개의 영역으로 분할하고, 각 분할영역별로 디스플레이기기로 수신되어 복조되는 입력색신호를 출력색신호로 변환하기 위한 변환행렬의 계수값을 구하고, 분할영역별 계수값들의 특성이 비슷한 영역을 그루핑하여 저장하는 단계;a) The color difference plane defined by the two color difference signals is divided into a plurality of areas, and the coefficient value of the conversion matrix for converting the input color signal received and demodulated by the display device into the output color signal for each divided area is obtained, and for each divided area. Grouping and storing regions having similar characteristics of the coefficient values; b) 상기 입력색신호에서 두개의 색차신호에 의해 상기 색차평면상의 하나의 분할영역이 지정되면, 지정된 분할영역에 대하여 상기 a) 단계에서 구해진 변환행렬의 계수값을 획득하는 단계;b) if one division region on the color difference plane is designated by two color difference signals in the input color signal, obtaining coefficient values of the transformation matrix obtained in step a) for the designated division region; c) 상기 b) 단계에서 획득한 변환행렬의 계수값과 상기 입력색신호를 행렬연산하는 단계; 및c) matrix computing the coefficient values of the transform matrix obtained in step b) and the input color signal; And d) 상기 c) 단계에서의 행렬연산 결과, 색신호의 각 값이 허용범위내에 존재하는지를 체크하여 허용범위를 넘는 경우 허용범위내 최대값으로 출력하는 단계를 구비하는 것을 특징으로 하는 색처리방법.and d) checking whether each value of the color signal exists within the allowable range and outputting the maximum value within the allowable range when the result of the matrix operation in step c) exceeds the allowable range. 두개의 색차신호로 정의되는 색차평면을 복수개의 영역으로 분할하고, 각 분할영역별로, 디스플레이기기로 수신되어 복조되는 입력색신호를 출력색신호로 변환하기 위한 변환행렬의 계수값을 구하고, 분할영역별 계수값들의 특성이 비슷한 영역을 그루핑하여 저장하는 계수테이블;The color difference plane defined by the two color difference signals is divided into a plurality of areas, and for each divided area, a coefficient value of a conversion matrix for converting an input color signal received and demodulated by the display device into an output color signal is obtained, A coefficient table for grouping and storing regions having similar characteristics of values; 상기 계수테이블에 저장된 변환행렬의 계수값의 어드레스를 지정하기 위한 계수지정 인덱스가 저장되며, 상기 입력색신호에서 두개의 색차신호의 복수개의 상위 비트들을 이용하여 계수지정 인덱스를 발생시키는 인덱스 어드레스 테이블;An index address table for storing a coefficient designation index for designating an address of a coefficient value of a transform matrix stored in the coefficient table, and generating a coefficient designation index using a plurality of upper bits of two color difference signals in the input color signal; 상기 계수테이블에서 상기 인덱스 어드레스 테이블로부터 발생되는 계수지정 인덱스에 해당하는 변환행렬의 계수값을 상기 입력색신호와 행렬연산하는 매트릭스 연산부; 및A matrix operation unit performing matrix operation on the coefficient table of the transform matrix corresponding to the coefficient designation index generated from the index address table in the coefficient table with the input color signal; And 상기 매트릭스 연산부에서의 행렬연산 결과, 색신호의 각 값이 허용범위 이내인 경우 상기 매트릭스 연산부의 출력을, 허용범위를 벗어난 경우 허용범위내 최대값을 상기 출력색신호로 발생시키는 범위체크부를 구비하는 것을 특징으로 하는색처리장치.And a range checker for generating an output of the matrix calculator when the value of the color signal is within an allowable range, and generating a maximum value within the allowable range as the output color signal when the value is outside the allowable range. Color processing apparatus.
KR1019960051827A 1996-10-31 1996-10-31 Method and apparatus for processing color, signal using color difference plane separation KR100408508B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1019960051827A KR100408508B1 (en) 1996-10-31 1996-10-31 Method and apparatus for processing color, signal using color difference plane separation

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019960051827A KR100408508B1 (en) 1996-10-31 1996-10-31 Method and apparatus for processing color, signal using color difference plane separation

Publications (2)

Publication Number Publication Date
KR19980031955A KR19980031955A (en) 1998-07-25
KR100408508B1 true KR100408508B1 (en) 2004-02-14

Family

ID=37497958

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019960051827A KR100408508B1 (en) 1996-10-31 1996-10-31 Method and apparatus for processing color, signal using color difference plane separation

Country Status (1)

Country Link
KR (1) KR100408508B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7720280B2 (en) 2005-12-19 2010-05-18 Samsung Electronics Co., Ltd. Color correction apparatus and method
KR20190079107A (en) 2017-12-27 2019-07-05 충북대학교 산학협력단 Method for drawing map of color interaction network

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100369822B1 (en) * 2000-12-22 2003-01-30 삼성전자 주식회사 Display Apparatus and Method Controlling the Same
JP4227322B2 (en) * 2001-10-01 2009-02-18 キヤノン株式会社 Image processing method, image processing apparatus, storage medium, and program

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR910001529A (en) * 1989-06-20 1991-01-31 로날드 이. 마이릭 Color information storage and processing system
JPH0591309A (en) * 1991-07-29 1993-04-09 Ricoh Co Ltd Color correcting method
JPH05292303A (en) * 1992-04-09 1993-11-05 Hitachi Ltd Color picture printer
KR940004473A (en) * 1992-08-31 1994-03-15 윤종용 Method and device for adjusting color in subcode graphics system
JPH06133329A (en) * 1992-10-14 1994-05-13 Sony Corp Color slurring correction device for color picture
KR950012285A (en) * 1993-10-30 1995-05-16 김광호 Method and device for color correction through color gamut division
WO1997001976A1 (en) * 1995-07-06 1997-01-23 Tord Elversson Box for storing and simultaneously exposing small goods

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR910001529A (en) * 1989-06-20 1991-01-31 로날드 이. 마이릭 Color information storage and processing system
JPH0591309A (en) * 1991-07-29 1993-04-09 Ricoh Co Ltd Color correcting method
JPH05292303A (en) * 1992-04-09 1993-11-05 Hitachi Ltd Color picture printer
KR940004473A (en) * 1992-08-31 1994-03-15 윤종용 Method and device for adjusting color in subcode graphics system
JPH06133329A (en) * 1992-10-14 1994-05-13 Sony Corp Color slurring correction device for color picture
KR950012285A (en) * 1993-10-30 1995-05-16 김광호 Method and device for color correction through color gamut division
WO1997001976A1 (en) * 1995-07-06 1997-01-23 Tord Elversson Box for storing and simultaneously exposing small goods

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7720280B2 (en) 2005-12-19 2010-05-18 Samsung Electronics Co., Ltd. Color correction apparatus and method
KR20190079107A (en) 2017-12-27 2019-07-05 충북대학교 산학협력단 Method for drawing map of color interaction network

Also Published As

Publication number Publication date
KR19980031955A (en) 1998-07-25

Similar Documents

Publication Publication Date Title
KR100363250B1 (en) Method and system for processing colors using two-dimensional chrominance division
US5553199A (en) Method and apparatus for calibrating a four color printer
KR100881028B1 (en) Apparatus and method for calibration of gray data
US6882445B1 (en) Color gamut compression apparatus and method
US5481655A (en) System for matching a picture on a monitor to a printed picture
US7599551B2 (en) Color correction device and color correction method
US20080080767A1 (en) Method and apparatus for performing gamut mapping between heterogeneous devices
US20060251323A1 (en) Detection, correction fading and processing in hue, saturation and luminance directions
JPH07298073A (en) Restricted color range clipping method and device therefor
JPH06253138A (en) Method and associated equipment for converting input color value of input color space into output color value of output color space
US7418129B2 (en) Image processing device method and program
US6151135A (en) Method and apparatus for color reproduction
US7733525B2 (en) Gamut mapping method and apparatus
US20050276473A1 (en) Apparatus and method of detecting color gamut in color device and calculating color space inverse transform function
JP2004304793A (en) Color conversion apparatus and color conversion method
KR100408508B1 (en) Method and apparatus for processing color, signal using color difference plane separation
JP3354158B2 (en) Color correction device, color correction method, and color correction application device
JP2845523B2 (en) Color estimation method
JP2001148794A (en) Color conversion method, color conversion table generator, color converter and recording medium
JP2000287096A (en) Gamut compression method in color printer and color reproduction processing unit using the same
Kutschbach A color volume mapping system for perception-accurate reproduction of HDR imagery in SDR production workflows
Wen P‐46: A Color Space Derived from CIELUV for Display Color Management
US6721064B1 (en) Two-domain chroma boost method for color printing
JPH06291996A (en) Color correction method between pictures reproduced by plural picture output devices
JP2001069533A (en) Color correction using color bar

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20131030

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20141030

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20151029

Year of fee payment: 13