KR20170072119A - Transparent display device and method for driving the same - Google Patents

Transparent display device and method for driving the same Download PDF

Info

Publication number
KR20170072119A
KR20170072119A KR1020160097355A KR20160097355A KR20170072119A KR 20170072119 A KR20170072119 A KR 20170072119A KR 1020160097355 A KR1020160097355 A KR 1020160097355A KR 20160097355 A KR20160097355 A KR 20160097355A KR 20170072119 A KR20170072119 A KR 20170072119A
Authority
KR
South Korea
Prior art keywords
image
background
sharpness
transmittance
input image
Prior art date
Application number
KR1020160097355A
Other languages
Korean (ko)
Other versions
KR102510568B1 (en
Inventor
김민철
김재홍
이희은
권수현
Original Assignee
엘지디스플레이 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지디스플레이 주식회사 filed Critical 엘지디스플레이 주식회사
Publication of KR20170072119A publication Critical patent/KR20170072119A/en
Priority to KR1020220109222A priority Critical patent/KR102510573B1/en
Application granted granted Critical
Publication of KR102510568B1 publication Critical patent/KR102510568B1/en

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • G09G3/3208Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED]
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0271Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping
    • G09G2320/0276Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping for the purpose of adaptation to the characteristics of a display device, i.e. gamma correction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0673Adjustment of display parameters for control of gamma adjustment, e.g. selecting another gamma curve
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/16Calculation or use of calculated indices related to luminance levels in display data

Abstract

본 발명은 투명 표시 장치의 구동 특성 및 후면 배경 특성에 따라 적응적으로 영상을 보정하여 화질을 향상시킬 수 있는 투명 표시 장치 및 그 구동 방법을 제공한다. 일 실시예의 투명 표시 장치는 차광판의 투과율 특성을 선택적으로 고려하고, 입력 영상의 밝기 특성 및 후면 배경의 밝기 특성을 고려하여, 감마 보정 방법과 선명도 개선 방법 중 하나를 이용하여 영상을 보정함으로써 화질을 향상시킬 수 있다. The present invention provides a transparent display device and a method of driving the same that can adaptively adjust an image according to a driving characteristic and a back surface background characteristic of a transparent display device to improve image quality. The transparent display device according to an exemplary embodiment of the present invention may selectively compensate an image using one of a gamma correction method and a sharpness improvement method in consideration of a transmittance characteristic of a light shielding plate and a brightness characteristic of an input image and a back surface background, Can be improved.

Description

투명 표시 장치 및 그 구동 방법{TRANSPARENT DISPLAY DEVICE AND METHOD FOR DRIVING THE SAME}TECHNICAL FIELD [0001] The present invention relates to a transparent display device and a method of driving the same.

본 발명은 투명 표시 장치의 구동 특성 및 후면 배경의 특성에 따라 적응적으로 영상을 보정하여 화질을 향상시킬 수 있는 투명 표시 장치 및 그 구동 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to a transparent display device and a driving method thereof that can improve image quality by adaptively adjusting an image according to a driving characteristic of a transparent display device and a background background characteristic.

최근 표시 장치의 발전으로 액정 표시 장치(Liquid Crystal Display; LCD), 유기 발광 다이오드(Organic Light Emitting Diode; OLED) 표시 장치를 이용한 투명 표시 장치가 개발되었다. BACKGROUND ART In recent years, a transparent display device using a liquid crystal display (LCD) device or an organic light emitting diode (OLED) display device has been developed as a display device.

투명 표시 장치는 전후 양방향으로 광을 투과하므로 표시 장치의 양방향으로 정보를 표시할 수 있음과 아울러 표시 장치를 사이에 두고 마주하는 사용자 각각이 투명 표시 장치 너머를 볼 수 있게 한다. Since the transparent display device transmits light in both forward and backward directions, information can be displayed in both directions of the display device, and each user facing the display device can see beyond the transparent display device.

투명 표시 장치는 자동차 유리, 건물 유리, 광고용 전광판, 쿨러 도어(Cooler Door), 스크린 도어(Screen Door) 등과 같은 다양한 응용 제품에 적용될 수 있으므로 사용자 환경이 다양하다. Transparent display devices can be applied to various applications such as automobile glass, building glass, advertisement display board, cooler door, screen door, and the like.

투명 표시 장치는 투과율이 높은 상태에서는 블랙을 구현할 수 없으므로 차광판을 이용하여 투과율을 조절하는 기술이 개발되었다.Since a transparent display device can not realize black in a state of high transmittance, a technique of controlling transmittance using a shading plate has been developed.

그러나, 차광판 재료 기술의 한계에 의해 차광판이 동작한 이후 차광판이 닫히는 데까지 상당한 시간이 소요되는 문제점이 있다.However, there is a problem that it takes a considerable time to close the shading plate after the shading plate operates due to the limitation of the material of the shading plate material.

이로 인하여, 차광판이 닫히기 이전까지 차광판의 투과율 특성, 투명 표시 장치의 후면 배경 특성, 입력 영상의 특성에 따라 인지되는 화질이 큰 영향을 받아 투명 표시 장치의 화질이 저하되는 문제점이 있다. Accordingly, there is a problem that the image quality of the transparent display device is deteriorated due to the influence of the perceived image quality depending on the transmittance characteristic of the light shielding plate, the back surface background characteristic of the transparent display device, and the characteristics of the input image before the light shielding plate is closed.

예를 들면, 투명 표시 장치의 차광판이 닫히기 이전에 투과율이 높은 경우 블랙 구현이 불가능하므로 저계조 영역의 뭉침과 같은 화질 저하가 발생한다. 투명 표시 장치의 후면 배경이 밝은 경우 더 많은 빛이 투과되어 영상의 시인성이 저하되므로 화질 저하가 발생한다. 입력 영상이 어두운 경우 투명 표시 장치에서 블랙 구현이 어려워 화질 저하가 발생한다.For example, when the transmissivity is high before the light blocking plate of the transparent display device is closed, the black can not be realized, so that the image quality degrades like a lump in the low gradation area. When the background of the rear surface of the transparent display device is bright, more light is transmitted and the visibility of the image is deteriorated, so that the image quality deteriorates. When the input image is dark, it is difficult to realize black in the transparent display device, and image quality deterioration occurs.

또한, 투명 표시 장치는 사용 환경에 따라 영상 정보와 함께 후면 배경의 인지가 필요한 경우 차광판을 구비하지 않거나, 차광판을 투과 모드로 유지하면서 영상을 표시할 수 있다.In addition, the transparent display device may not include the light shielding plate when it is required to recognize the back side background together with the image information according to the use environment, or may display the image while keeping the light shielding plate in the transmission mode.

이 경우, 후면 배경과 함께 영상이 인지되므로, 투명 표시 장치는 영상의 밝기와 후면 배경의 밝기에 따라 영상의 선명도 저하가 발생되어 화질이 저하되는 문제점이 있다.In this case, since the image is recognized along with the background background, the transparency display device has a problem that the image quality is deteriorated due to the degradation of the image sharpness according to the brightness of the image and the brightness of the background background.

본 발명은 투명 표시 장치의 구동 특성 및 후면 배경 특성에 따라 적응적으로 영상을 보정하여 화질을 향상시킬 수 있는 투명 표시 장치 및 그 구동 방법을 제공한다.The present invention provides a transparent display device and a method of driving the same that can adaptively adjust an image according to a driving characteristic and a back surface background characteristic of a transparent display device to improve image quality.

본 발명의 일 실시예에 따른 투명 표시 장치는 투명 표시부, 차광판, 표시 구동부, 차광판 구동부와, 상기 투명 표시 장치의 후면에 배치되어 후면 배경을 센싱하는 배경 센서와, 영상 처리부를 구비한다.A transparent display device according to an embodiment of the present invention includes a transparent display unit, a shading plate, a display driving unit, a shading plate driving unit, a background sensor disposed on the rear surface of the transparent display device for sensing a background background, and an image processing unit.

영상 처리부는 입력 영상을 분석하여 그 입력 영상이 어두운 영상인지 밝은 영상인지를 나타내는 영상 특성을 판단하고, 배경 센서로부터 센싱된 후면 배경 신호를 분석하여 후면 배경이 밝은 배경인지 어두운 배경인지를 나타내는 배경 특성을 판단하고, 차광판의 투과율 특성을 판단한다. The image processing unit analyzes the input image, determines the image characteristics indicating whether the input image is a dark image or a bright image, and analyzes the background signal sensed from the background sensor to determine a background background indicating whether the background is a light background or a dark background And judges the transmittance characteristic of the shading plate.

영상 처리부는 영상 특성과 배경 특성이 밝은 영상과 어두운 배경인 정상 조건을 제외한 나머지의 화질 저하 조건들 어느 하나에 해당하고, 투과율이 제1 기준값을 초과할 때, 입력 영상에 대한 감마 보정을 실시하여, 감마 보정된 영상 데이터를 표시 구동부로 출력한다.The image processing unit is one of the remaining image quality degradation conditions except for the normal image, which is a bright image and the background image, and when the transmissivity exceeds the first reference value, the image processing unit performs gamma correction on the input image , And outputs gamma corrected image data to the display driver.

영상 처리부는 영상 특성과 배경 특성이 정상 조건일 때, 투과율과 관계없이 입력 영상을 감마 보정없이 표시 구동부로 출력하고, 투과율이 제1 기준값 이하일 때, 영상 특성과 배경 특성과 관계없이 입력 영상을 감마 보정없이 표시 구동부로 출력한다.The image processor outputs the input image to the display driver without gamma correction regardless of the transmittance when the image characteristic and the background characteristic are in a normal condition. When the transmittance is lower than the first reference value, And outputs it to the display driver without correction.

본 발명의 일 실시예에 따른 투명 표시 장치의 구동 방법은 입력 영상을 분석하여 그 입력 영상이 어두운 영상인지 밝은 영상인지를 나타내는 영상 특성을 판단하는 단계와, 투명 표시 장치의 후면 배경을 센싱하고, 센싱된 후면 배경 신호를 분석하여 상기 후면 배경이 밝은 배경인지 어두운 배경인지를 나타내는 배경 특성을 판단하는 단계와, 차광판의 투과율 특성을 판단하는 단계를 포함한다.A method of driving a transparent display device according to an embodiment of the present invention includes analyzing an input image and determining an image characteristic indicating whether the input image is a dark image or a bright image, Analyzing the sensed backside background signal to determine a background characteristic indicative of whether the backside background is a light background or a dark background; and determining a light transmittance characteristic of the light shield plate.

또한, 본 발명의 구동 방법은 영상 특성과 상기 배경 특성이 밝은 영상과 어두운 배경인 정상 조건을 제외한 나머지의 화질 저하 조건들 어느 하나에 해당하고, 투과율이 제1 기준값을 초과할 때, 입력 영상에 대한 감마 보정을 실시하는 단계와; 감마 보정된 영상을 출력하는 단계를 더 포함한다.In addition, the driving method of the present invention is applicable to any one of the remaining image quality degradation conditions except for the normal image, which is a bright image and the dark image, and the image characteristic and the background characteristic, and when the transmittance exceeds the first reference value, Performing gamma correction on the image; And outputting the gamma corrected image.

또한, 본 발명의 구동 방법은 영상 특성과 배경 특성이 정상 조건일 때, 투과율과 관계없이 입력 영상에 대한 감마 보정없이 출력하는 단계와, 투과율이 제1 기준값 이하일 때, 영상 특성과 배경 특성과 관계없이 입력 영상에 대한 감마 보정없이 출력하는 단계를 추가로 포함한다.According to another aspect of the present invention, there is provided a method of driving a liquid crystal display, comprising the steps of: outputting an input image without gamma correction regardless of transmittance when the image characteristic and the background characteristic are normal; Without gamma correction on the input image.

본 발명의 일 실시예에 따른 투명 표시 장치는 투명 표시부와, 배경 센서와, 표시 구동부와, 입력 영상을 복수의 픽셀 블록으로 분할하여 그 픽셀 블록 단위로 계산된 블록별 밝기 특성과, 배경 센서로부터 센싱된 후면 배경의 밝기 특성에 따라 픽셀 블록 단위로 블록별 선명도 개선 강도를 결정하고, 입력 영상에 블록별 선명도 개선 강도를 적용하여 픽셀 블록 단위로 입력 영상의 선명도를 보정하고, 선명도가 보정된 영상을 표시 구동부로 출력하는 영상 처리부를 구비한다.According to an embodiment of the present invention, there is provided a transparent display device including a transparent display unit, a background sensor, a display driver, and a display unit that divides the input image into a plurality of pixel blocks, The sharpness enhancement strength of each block is determined in units of pixel blocks according to the brightness characteristics of the backside of the sensed background, the sharpness of the input image is corrected on a pixel block basis by applying intensity of block sharpness improvement to the input image, To the display driver.

영상 처리부는 로우 패스 필터, 마스크 생성부, 선명도 개선 강도 조절부, 선명도 개선 마스크 결정부, 영상 보정부를 구비한다. 로우 패스 필터는 입력 영상을 로우 패스 필터링하여 블러 영상을 생성하여 출력한다. 마스크 생성부는 로우 패스 필터로부터 공급된 블러 영상을, 입력 영상으로부터 차감하여 에지 마스크 영상을 생성하여 출력한다. 선명도 개선 강도 조절부는 입력 영상의 블록별 밝기 특성과, 센싱된 후면 배경의 밝기 특성에 따라 블록별 선명도 개선 강도를 조절한다. 선명도 개선 마스크 결정부는 마스크 생성부로부터 공급된 에지 마스크 영상에, 선명도 개선 강도 조절부로부터 공급된 블록별 선명도 개선 강도를 적용하여, 선명도 개선 마스크 영상을 생성하여 출력한다. 영상 보정부는 선명도 개선 마스크 결정부로부터 공급된 선명도 개선 마스크 영상과 입력 영상을 합성하여 선명도가 보정된 영상을 패널 구동부로 출력한다.The image processing unit includes a low pass filter, a mask generating unit, a sharpness improving strength adjusting unit, a sharpness improving mask determining unit, and an image correcting unit. The low-pass filter low-pass filters an input image to generate and output a blurred image. The mask generation unit generates an edge mask image by subtracting the blurred image supplied from the low-pass filter from the input image, and outputs the generated edge mask image. The sharpness enhancement intensity controller adjusts the sharpness enhancement intensity of each block according to the brightness characteristics of the input image and the background of the sensed background. The sharpness improvement mask determination unit generates a sharpness improvement mask image by applying the block sharpness enhancement strength supplied from the sharpness improvement strength adjustment unit to the edge mask image supplied from the mask generation unit. The image correction unit combines the sharpness enhancement mask image supplied from the sharpness enhancement mask determination unit and the input image, and outputs the corrected image to the panel driver.

본 발명의 일 실시예에 따른 투명 표시 장치의 구동 방법은 입력 영상을 로우 패스 필터링하여 블러 영상을 생성하는 단계와, 입력 영상으로부터 블러 영상을 차감하여 에지 마스크 영상을 생성하는 단계와, 입력 영상을 복수의 픽셀 블록으로 분할하여 픽셀 블록 단위로 계산된 블록별 밝기 특성과, 센싱된 후면 배경의 밝기 특성에 따라 픽셀 블록 단위로 블록별 선명도 개선 강도를 결정하는 단계와, 에지 마스크 영상에 상기 블록별 선명도 개선 강도를 적용하여, 선명도 개선 마스크 영상을 생성하는 단계와, 선명도 개선 마스크 영상과 입력 영상을 합성하여 선명도가 보정된 영상을 투명 표시부에 표시하는 단계를 포함한다. According to another aspect of the present invention, there is provided a method of driving a transparent display device, including: generating a blur image by low-pass filtering an input image; generating an edge mask image by subtracting a blur image from an input image; Determining sharpness enhancement strength for each block on a pixel-by-pixel block basis according to a brightness characteristic of each block calculated on a pixel-by-pixel block basis and a brightness characteristic of a sensed background, dividing the plurality of pixel blocks into a plurality of pixel blocks, Generating a sharpness enhancement mask image by applying sharpness enhancement strength, and displaying the corrected sharpness enhancement mask image and the input image on the transparent display unit.

블록별 선명도 개선 강도를 결정하는 단계는 입력 영상에 대하여 블록별 평균 계조를 계산하는 단계와, 센싱된 후면 배경의 밝기에 따라 선명도 개선 강도의 최대값 및 최소값을 결정하는 단계와, 블록별 평균 계조(L)와, 선명도 개선 강도의 최대값 및 최소값(Kmax, Kmin)과, 블록별 평균 계조(L)가 미리 설정된 임계값(Lth) 미만일 때, 아래 수학식의 함수를 이용하여 블록별 선명도 개선 강도(K)를 결정하는 단계와, 블록별 평균 계조가 임계값 이상일 때 미리 설정된 최소값을 해당 블록의 선명도 개선 강도로 결정하는 단계를 포함한다.The step of determining the brightness enhancement strength for each block includes the steps of calculating an average gray level of each block with respect to the input image, determining a maximum value and a minimum value of the brightness enhancement strength according to the brightness of the sensed background, (Kmax, Kmin) of the sharpness improving intensity and the average gradation L of each block are less than a preset threshold value Lth, Determining a strength (K), and determining a preset minimum value as the sharpness improving strength of the block when the average gradation per block is equal to or greater than a threshold value.

Figure pat00001
Figure pat00001

본 발명의 일 실시예에 따른 투명 표시 장치 및 그 구동 방법은 차광판의 투과율 특성과, 입력 영상의 휘도 특성 및 배경 영상의 휘도 특성을 모두 분석하여 분석 결과에 따라 투과율이 기준값 보다 크고 입력 영상과 후면 배경이 화질 저하 조건에 해당하는 경우 감마를 조절하여 영상 데이터를 보정함으로써 화질을 향상시킬 수 있다. A transparent display device and a driving method thereof according to an embodiment of the present invention analyze both the transmittance characteristic of the shading plate, the luminance characteristic of the input image, and the luminance characteristic of the background image, When the background corresponds to the image quality degradation condition, the image quality is improved by adjusting the gamma by correcting the image data.

본 발명의 일 실시예에 따른 투명 표시 장치 및 그 구동 방법은 영상의 밝기와 후면 배경의 밝기에 따라 선명도 개선 강도를 조절함으로써 영상 및 시청 환경에 따라 적절한 선명도 개선 강도를 적용하여 선명도 및 화질을 향상시킬 수 있다.The transparent display device and the driving method thereof according to an embodiment of the present invention improve sharpness and image quality by applying appropriate sharpness enhancement strength according to image and viewing environment by adjusting intensity of sharpness improvement according to brightness of image and background brightness .

본 발명의 일 실시예에 따른 투명 표시 장치 및 그 구동 방법은 영상의 밝기와 후면 배경의 밝기에 따라 선명도 개선 강도를 조절함으로써 영상과 후면 배경 모두 의미있는 정보를 전달하는 경우 배경과 영상 사이의 경계를 강조하여 영상 및 후면 배경 양측의 시인성을 개선할 수 있다. The transparent display device and the driving method thereof according to an embodiment of the present invention adjusts the brightness enhancement intensity according to the brightness of the image and the brightness of the background of the backlight so that when meaningful information is transmitted between the image and the backlight, The visibility of both the image and the background can be improved.

도 1은 본 발명의 선행 기술에 따른 투명 표시 장치에서 차광판의 구동 시간 경과에 따른 투과율 특성을 나타낸 그래프이다.
도 2는 본 발명의 선행 기술에 따른 투명 표시 장치에서 차광판의 투과율에 따른 영상 표시 결과를 비교하여 보여주는 사진이다.
도 3은 본 발명의 선행 기술에 따른 투명 표시 장치에서 영상 특성과 배경 특성에 따른 영상 표시 결과를 비교하여 보여주는 사진이다.
도 4는 본 발명의 일 실시예에 따른 투명 표시 장치의 구성을 개략적으로 나타낸 블록도이다.
도 5는 본 발명의 일 실시예에 따른 서브픽셀의 구성을 예시한 등가회로도이다.
도 6은 본 발명의 일 실시예에 따른 투명 표시 장치의 영상 처리부 구성을 나타낸 블록도이다.
도 7은 본 발명의 일 실시예에 따른 투명 표시 장치의 영상 처리 방법을 단계적으로 나타낸 순서도이다.
도 8은 본 발명의 일 실시예에 따른 입력 영상의 계조별 분포율을 나타낸 그래프이다.
도 9는 본 발명의 일 실시예에 따른 배경 영상의 계조별 분포율을 나타낸 그래프이다.
도 10은 본 발명의 일 실시예에 따른 다양한 감마 커브들을 나타낸 그래프이다.
도 11은 본 발명의 일 실시예에 따른 감마 보정 전후의 영상과 감마 보정이 불필요한 영상을 보여주는 사진이다.
도 12는 본 발명의 일 실시예에 따른 투명 표시 장치의 구성을 개략적으로 나타낸 블록도이다.
도 13은 본 발명의 일 실시예에 따른 영상 처리부의 구성을 나타낸 블록도이다.
도 14는 본 발명의 일 실시예에 따른 영상 처리 방법을 단계적으로 나타낸 순서도이다.
도 15는 본 발명의 일 실시예에 따른 블록 평균 계조에 따른 선명도 개선 강도 함수를 나타낸 그래프이다.
도 16은 본 발명의 일 실시예에 따른 투명 표시 장치에서 영상의 밝기 및 후면 배경의 밝기에 따라 선명도 개선 강도를 조절하여 적용한 경우의 영상을 선행 기술의 영상과 대비하여 나타낸 것이다.
FIG. 1 is a graph showing transmittance characteristics according to elapsed driving time of a shading plate in a transparent display device according to the prior art of the present invention.
FIG. 2 is a photograph showing a result of image display according to the transmittance of a shading plate in a transparent display device according to the prior art of the present invention.
FIG. 3 is a photograph showing a comparison of image display results according to the image characteristics and the background characteristics in the transparent display device according to the prior art of the present invention.
4 is a block diagram schematically showing a configuration of a transparent display device according to an embodiment of the present invention.
5 is an equivalent circuit diagram illustrating a configuration of a subpixel according to an embodiment of the present invention.
6 is a block diagram illustrating a configuration of an image processing unit of a transparent display device according to an embodiment of the present invention.
FIG. 7 is a flowchart illustrating a method of processing an image of a transparent display device according to an exemplary embodiment of the present invention.
8 is a graph illustrating distribution ratios of input images according to an embodiment of the present invention.
FIG. 9 is a graph illustrating distribution ratios of background images according to an exemplary embodiment of the present invention.
10 is a graph illustrating various gamma curves according to an embodiment of the present invention.
11 is a photograph showing an image before and after gamma correction and an image in which gamma correction is unnecessary according to an embodiment of the present invention.
12 is a block diagram schematically showing a configuration of a transparent display device according to an embodiment of the present invention.
13 is a block diagram illustrating a configuration of an image processing unit according to an embodiment of the present invention.
FIG. 14 is a flowchart showing a step of an image processing method according to an embodiment of the present invention.
15 is a graph illustrating a sharpness enhancement intensity function according to a block average gray level according to an embodiment of the present invention.
FIG. 16 is a view illustrating an image obtained by adjusting the brightness enhancement intensity according to the brightness of the image and the brightness of the background in the transparent display device according to an embodiment of the present invention, in contrast to the image of the prior art.

본 발명의 실시예에 대한 설명에 앞서서 본 발명의 선행 기술에 따른 투명 표시 장치의 화질 저하 현상을 예를 들어 먼저 살펴보기로 한다.Prior to the description of the embodiments of the present invention, the image degradation phenomenon of the transparent display device according to the prior art of the present invention will be described first.

도 1은 본 발명의 선행 기술에 따른 투명 표시 장치에서 구동 시간 경과에 따른 차광판의 투과율 특성을 나타낸 그래프이고, 도 2는 본 발명의 선행 기술에 따른 투명 표시 장치에서 차광판의 투과율에 따라 영상 표시 결과를 비교하여 보여주는 사진이고, 도 3은 본 발명의 선행 기술에 따른 투명 표시 장치에서 차광판 투과율이 70%일 때 영상 특성과 배경 특성에 따라 영상 표시 결과를 비교하여 보여주는 사진이다.FIG. 1 is a graph showing a transmittance characteristic of a light shielding plate according to the elapsed driving time in a transparent display according to the prior art of the present invention. FIG. 2 is a graph showing a result of image display according to the transmittance of a light shielding plate in the transparent display according to the prior art of the present invention FIG. 3 is a photograph showing a comparison of image display results according to the image characteristic and the background characteristic when the transmissivity of the shading plate is 70% in the transparent display device according to the prior art of the present invention.

도 1을 참조하면, 선행 기술에 따른 투명 표시 장치의 차광판은 구동을 시작한 이후 투과율 10% 이하로 닫히는 데까지 약 3분 정도의 상당한 시간이 소요됨을 알 수 있다.Referring to FIG. 1, it can be seen that the shading plate of the transparent display device according to the related art takes a considerable time of about 3 minutes from the start of driving until the transmissivity reaches 10% or less.

이로 인하여, 도 2(a)에서 보여주는 바와 같이 차광판의 투과율 80%이면 차광판의 블랙 구현이 불가능하므로 투명 특성에 의해 후면 배경이 보임과 아울러 후면으로부터 보다 많은 빛이 투과됨으로써 표시 영상의 시인성이 저하됨을 알 수 있다. 도 2(b)에서 보여주는 바와 같이 차광판이 투과율 10% 이하로 닫혀야만 차광판의 블랙 구현으로 표시 영상의 시인성이 나아지게 되므로, 차광판 투과율이 10% 보다 큰 경우에는 화질 저하 문제가 있다.Accordingly, as shown in FIG. 2 (a), if the light transmittance of the light shielding plate is 80%, the light shielding plate can not be implemented in black, so that the background of the backlight is visible due to the transparent property and more light is transmitted through the rear surface, Able to know. As shown in FIG. 2 (b), when the light blocking plate is closed with a transmittance of 10% or less, the black image of the light blocking plate improves the visibility of the display image.

또한, 차광판 투과율이 70%일 때, 도 3(a), (b)에서 보여주는 바와 같이 동일한 어두운 영상에 대하여, 어두운 배경(a) 보다 밝은 배경(b)에서 화질이 저하되고, 도 3(c), (d)에서 보여주는 바와 같이 동일한 밝은 배경일 때, 어두운 영상(a) 및 밝은 영상(b) 모두 후면 배경이 보임과 아울러 표시 영상의 시인성이 저하됨을 알 수 있다.3 (a) and 3 (b), when the shading plate transmittance is 70%, the image quality is lowered on the background (b) which is lighter than the dark background (a) (a) and the bright image (b), the background of the background is visible and the visibility of the display image is degraded.

또한, 차광판을 구비하지 않거나, 후면 배경의 인지가 필요하여 차광판이 투과 모드를 유지할 때, 선행 기술에 따른 투명 표시 장치는 영상의 밝기 특성과 후면 배경의 밝기 특성에 따라 후면 배경의 인지 정도가 결정되어 후면 배경의 인지 정도에 따라 영상의 선명도 저하가 발생할 수 있다.Further, when the shielding plate is not provided or the recognition of the background is required and the shielding plate is maintained in the transmissive mode, the transparency display device according to the prior art determines the degree of recognition of the background in accordance with the brightness characteristics of the image and the background So that the sharpness of the image may be degraded depending on the degree of recognition of the background.

이러한 선행 기술의 문제점들을 해결하기 위하여, 본 발명은 차광판의 투과율 특성을 선택적으로 고려하고, 입력 영상의 밝기 특성 및 후면 배경의 밝기 특성(즉, 시청 환경)을 고려하여 영상을 보정함으로써 영상 및 시청 환경에 따른 적절한 시인성 향상에 의해 화질을 향상시킬 수 있는 투명 표시 장치 및 그 구동 방법을 제안한다.In order to solve the problems of the prior art, the present invention selectively takes into consideration the transmittance characteristic of the shading plate, corrects the image in consideration of the brightness characteristic of the input image and the brightness characteristic of the background (i.e., viewing environment) A transparent display device and a driving method thereof that can improve image quality by improving the visibility according to the environment are proposed.

이하, 본 발명의 바람직한 실시예들에 대하여 설명한다.Hereinafter, preferred embodiments of the present invention will be described.

본 발명의 실시예에 따른 투명 표시 장치는 영상 및 시청 환경에 따라 시인성을 향상시키기 위한 영상 처리 방법으로 감마 보정 방법과 선명도 개선 방법 중 적어도 하나를 이용한다. A transparent display device according to an embodiment of the present invention uses at least one of a gamma correction method and a sharpness improvement method as an image processing method for improving visibility according to an image and a viewing environment.

도 4는 본 발명의 일 실시예에 따른 투명 표시 장치의 구성을 개략적으로 나타낸 블록도이고, 도 5는 본 발명의 일 실시예에 따른 서브픽셀의 구성을 나타낸 등가회로도이다.FIG. 4 is a block diagram schematically showing a configuration of a transparent display device according to an embodiment of the present invention, and FIG. 5 is an equivalent circuit diagram illustrating a configuration of a subpixel according to an embodiment of the present invention.

도 4를 참조하면, 본 발명의 일 실시예에 따른 투명 표시 장치는 영상 처리부(100), 타이밍 컨트롤러(150), 데이터 구동부(200) 및 게이트 구동부(300), 투명 표시부(400), 감마 전압 생성부(500), 배경 센서(600), 차광판(700) 및 차광판 구동부(800) 등을 포함한다. 여기서, 타이밍 컨트롤러(150), 데이터 구동부(200) 및 게이트 구동부(300)는 투명 표시부(400)를 구동하는 표시 구동부로 표현될 수 있다.4, a transparent display device according to an exemplary embodiment of the present invention includes an image processing unit 100, a timing controller 150, a data driver 200 and a gate driver 300, a transparent display unit 400, A generating unit 500, a background sensor 600, a light shield plate 700, and a light shield plate driving unit 800. Here, the timing controller 150, the data driver 200, and the gate driver 300 may be represented as a display driver for driving the transparent display unit 400.

투명 표시부(400)는 픽셀들이 매트릭스 형태로 배열된 픽셀 어레이를 통해 영상을 표시한다. 픽셀 어레이의 기본 픽셀은 화이트(W), 레드(R), 그린(G), 블루(B) 서브픽셀들(SP) 중 컬러 혼합으로 화이트 표현이 가능한 적어도 3개 이상의 서브픽셀들(W/R/G, B/W/R, G/B/W, R/G/B, 또는 W/R/G/B)로 구성될 수 있다.The transparent display unit 400 displays an image through a pixel array in which pixels are arranged in a matrix form. The basic pixel of the pixel array includes at least three or more sub-pixels (W / R) capable of white representation by color mixing among white (W), red (R), green (G) / G, B / W / R, G / B / W, R / G / B, or W / R / G / B).

투명 표시부(400)로는 액정 패널, 유기 발광 다이오드(OLED) 패널 등이 이용될 수 있으나, 이하에서는 OLED 패널을 예로 들어 설명하기로 한다.  As the transparent display unit 400, a liquid crystal panel, an organic light emitting diode (OLED) panel, or the like can be used. Hereinafter, an OLED panel will be described as an example.

투명 표시부(400)가 OLED 패널인 경우 도 5에 도시된 바와 같이, 각 서브픽셀(SP)은 OLED 소자가 위치하는 발광 영역(EA)과, 전/후면으로부터의 빛을 투과시키는 투과 영역(TA)을 포함한다. OLED 소자의 발광 영역(EA)은 픽셀 회로와 오버랩하거나 오버랩하지 않을 수 있다. 5, each subpixel SP includes a light emitting region EA in which the OLED element is located and a light emitting region EA in which the light is transmitted from the front / rear side of the transmissive region TA ). The light emitting region EA of the OLED element may overlap or not overlap with the pixel circuit.

도 5를 참조하면, 픽셀 회로는 고전위 전원(EVDD) 라인 및 저전위 전원(EVSS) 라인 사이에 접속된 OLED 소자와, OLED 소자를 독립적으로 구동하기 위하여 제1 및 제2 스위칭 TFT(ST1, ST2) 및 구동 TFT(DT)와 스토리지 커패시터(Cst)를 포함하는 픽셀 회로를 구비하며, 픽셀 회로 구성은 다양하므로 도 5의 구조로 한정되지 않는다.5, the pixel circuit includes an OLED element connected between a high potential power supply (EVDD) line and a low potential power supply (EVSS) line, a first and a second switching TFTs ST1 and ST2 for independently driving the OLED element, ST2), a driver TFT (DT), and a storage capacitor (Cst), and the pixel circuit configuration is not limited to the structure of FIG.

OLED 소자는 구동 TFT(DT)와 접속된 애노드와, 저전위 전압(EVSS)과 접속된 캐소드와, 애노드 및 캐소드 사이의 발광층을 구비하여, 구동 TFT(DT)로부터 공급된 전류량에 비례하는 광을 발생한다. The OLED element includes an anode connected to the driving TFT DT, a cathode connected to the low potential voltage EVSS, and a light emitting layer between the anode and the cathode to emit light proportional to the amount of current supplied from the driving TFT DT Occurs.

제1 스위칭 TFT(ST1)는 한 게이트 라인(GL1)의 게이트 신호에 의해 구동되어 해당 데이터 라인(DL)으로부터의 데이터 전압을 구동 TFT(DT)의 게이트 노드에 공급하고, 제2 스위칭 TFT(ST2)는 다른 게이트 라인(GL2)의 게이트 신호에 의해 구동되어 레퍼런스 라인(REF)으로부터의 레퍼런스 전압을 구동 TFT(DT)의 소스 노드에 공급한다. 제2 스위칭 TFT(ST2)는 센싱 모드에서 구동 TFT(DT)로부터의 전류를 레퍼런스 라인(REF)으로 출력하는 경로로 더 이용된다. The first switching TFT ST1 is driven by the gate signal of one gate line GL1 to supply the data voltage from the corresponding data line DL to the gate node of the driving TFT DT and the second switching TFT ST2 Is driven by the gate signal of the other gate line GL2 to supply a reference voltage from the reference line REF to the source node of the driving TFT DT. The second switching TFT ST2 is further used as a path for outputting the current from the driving TFT DT to the reference line REF in the sensing mode.

구동 TFT(DT)의 게이트 노드 및 소스 노드 사이에 접속된 스토리지 커패시터(Cst)는 제1 스위칭 TFT(ST1)를 통해 게이트 노드로 공급된 데이터 전압과, 제2 스위칭 TFT(ST2)를 통해 소스 노드로 공급된 레퍼런스 전압의 차전압을 충전하여 구동 TFT(DT)의 구동 전압으로 공급한다.The storage capacitor Cst connected between the gate node and the source node of the driving TFT DT is connected between the data voltage supplied to the gate node through the first switching TFT ST1 and the data voltage supplied to the source node through the second switching TFT ST2. And supplies the difference voltage to the driving voltage of the driving TFT DT.

구동 TFT(DT)는 고전위 전원(EVDD)으로부터 공급되는 전류를 스토리지 커패시터(Cst)로부터 공급된 구동 전압에 따라 제어함으로써 구동 전압에 비례하는 전류를 OLED 소자로 공급하여 OLED 소자를 발광시킨다. The driving TFT DT controls the current supplied from the high potential power supply EVDD according to the driving voltage supplied from the storage capacitor Cst to supply a current proportional to the driving voltage to the OLED element to emit the OLED element.

도 4를 참조하면, 차광판(700)은 투명 표시부(400)의 후면에 배치되고, 투명 표시부(400)가 영상을 표시할 때 차광판 구동부(800)에 의해 차광 모드 또는 투과 모드로 구동될 수 있다. 차광판(700)은 차광판 구동부(800)에 의해 전계가 인가되면 블랙을 표시하여 차광 모드를 구현하고, 전계가 인가되지 않으면 투과 모드를 구현할 수 있다. 차광판 구동부(800)에 의해 차광판(700)이 차광 모드로 구동되면, 차광판(700)은 블랙을 구현하여 광투과를 차단함으로써 투명 표시부(400) 표시되는 영상의 시인성을 향상시킨다.4, the light blocking plate 700 is disposed on the rear surface of the transparent display unit 400 and can be driven by the light blocking plate driving unit 800 in the light blocking mode or the transmissive mode when the transparent display unit 400 displays an image . When the electric field is applied by the shading plate driver 800, the shading plate 700 displays black to realize the shading mode, and if the electric field is not applied, the transmissive mode can be realized. When the light blocking plate 700 is driven in the light blocking mode by the light blocking plate driving unit 800, the light blocking plate 700 implements black to prevent light transmission, thereby improving the visibility of the displayed image on the transparent display unit 400.

예를 들면, 차광판(700)으로는 전기 변색 필터로 알려진 일렉트로크로믹 디바이스(Electrochromic Device)나, 일렉트로웨팅 디바이스(ElctroWetting Device) 등이 이용될 수 있거나, 액정을 이용하여 광 투과를 스위칭할 수 있는 장치일 수 있다. For example, as the light shielding plate 700, an electrochromic device, an electro-wetting device, or the like known as an electrochromic filter may be used, or a liquid crystal can be used to switch light transmission Device.

한편, 차광판(700)은 투명 표시부(400)의 전면 및 후면 중 적어도 일측면에 배치될 수 있다.The shield plate 700 may be disposed on at least one of the front surface and the rear surface of the transparent display unit 400.

배경 센서(600)는 투명 표시 장치의 후면에 장착되어 투명 표시 장치의 후면 배경을 센싱하고, 센싱된 후면 배경 정보(밝기 또는 영상)을 영상 처리부(100)로 공급한다. 배경 센서(600)로는 공지된 조도 센서나 CMOS 이미지 센서 등이 적용될 수 있다.The background sensor 600 is mounted on the rear surface of the transparent display device, and senses the background background of the transparent display device and supplies the sensed background information (brightness or image) to the image processing unit 100. As the background sensor 600, a well-known illuminance sensor, a CMOS image sensor, or the like can be applied.

영상 처리부(100)는 외부로부터 공급되는 입력 영상을 분석하여 영상 특성을 판단하고, 배경 센서(600)로부터 센싱된 후면 배경 정보(밝기 또는 영상)를 분석하여 후면 배경의 특성을 판단한다. 영상 처리부(100)는 차광판 구동부(800)에 의한 차광판(700)의 투과 모드와 차광 모드에 따라 차광판(700)의 투과율을 판단할 수 있다. 영상 처리부(100)에는 차광판(700)이 차광 모드로 구동될 때 그 구동 시간 경과에 따른 차광판(700)의 투과율이 미리 측정되어 룩-업 테이블(Look-Up Table; 이하 LUT) 형태로 저장될 수 있다. 영상 처리부(100)는 차광판 구동부(800)에 의해 차광판(700)이 차광 모드로 구동될 때 그 차광 모드의 구동 시간에 따른 차광판(700)의 투과율을 판단할 수 있다. The image processing unit 100 analyzes the input image supplied from the outside to determine image characteristics, and analyzes background information (brightness or image) sensed from the background sensor 600 to determine characteristics of the background. The image processing unit 100 may determine the transmittance of the shield plate 700 according to the transmissive mode and the shield mode of the shield plate 700 by the shield plate driving unit 800. [ When the light blocking plate 700 is driven in the light blocking mode, the image processing unit 100 measures the transmittance of the light blocking plate 700 according to an elapsed driving time of the light blocking plate 700 and stores the transmittance in the form of a look-up table (LUT) . The image processing unit 100 can determine the transmittance of the light shield plate 700 according to the driving time of the light shield mode when the light shield plate 700 is driven by the light shield plate driving unit 800 in the light shield mode.

영상 처리부(100)는 입력 영상을 분석하여 입력 영상이 어두운 영상인지 밝은 영상인지를 판단하고, 후면 배경 정보를 분석하여 후면 배경이 밝은 환경인지 어두운 환경인지를 판단한다. 이에 대한 구체적인 설명은 후술하기로 한다.The image processing unit 100 determines whether the input image is a dark image or a bright image by analyzing the input image, and analyzes the background information to determine whether the background is a bright environment or a dark environment. A detailed description thereof will be described later.

영상 처리부(100)는 입력 영상의 특성 및 후면 배경 특성을 판단한 결과, 입력 영상이 어둡고 배경이 밝거나, 입력 영상이 어둡고 배경이 어둡거나, 입력 영상이 밝고 배경이 밝은 경우 화질 저하 조건으로 판단하고, 차광판(700)의 투과율이 제1 기준값(예를 들면 10%)을 초과할 때, 입력 영상에 대하여 투과율에 따른 감마 보정을 실시하여 감마 보정된 영상을 출력함으로써 화질을 보상한다.The image processing unit 100 determines that the image quality is degraded when the input image is dark and the background is bright, the input image is dark and the background is dark, the input image is bright and the background is bright, And compensates the image quality by outputting the gamma corrected image by performing gamma correction according to the transmittance of the input image when the transmittance of the shading plate 700 exceeds the first reference value (for example, 10%).

반면에, 영상 처리부(100)는 입력 영상이 밝고 배경이 어두운 정상 조건에 해당하고 투과율이 제1 기준값(예를 들면 10%)을 초과하거나, 상기 입력 영상 및 후면 배경의 특성에 상관없이 투과율이 제1 기준값 이하일 때, 입력 영상을 감마 보정없이 출력한다. On the other hand, the image processing unit 100 determines whether the input image is bright and the background is dark, the transmittance exceeds the first reference value (for example, 10%), or the transmittance is the same regardless of the characteristics of the input image and the background When the first reference value is less than or equal to the first reference value, the input image is output without gamma correction.

영상 처리부(100)는 전술한 감마 보정 이전 또는 이후에 통상의 RGB-to-WRGB 변환 방법을 이용하여 3색 데이터(R, G, B)를 4색 데이터(W, R, G, B)로 변환할 수 있다. 영상 처리부(100)는 전술한 감마 보정 이전 또는 이후에 소비 전력 감소나 데이터 렌더링, 화질 보상, 열화 보상 등과 같은 필요한 영상 처리를 더 수행할 수 있다. 영상 처리부(100)는 영상 처리된 영상 데이터와, 타이밍 제어 신호들을 타이밍 컨트롤러(150)로 공급한다.The image processing unit 100 converts the three-color data (R, G, B) into four-color data (W, R, G, B) by using a normal RGB-to-WRGB conversion method before or after the above- Can be converted. The image processing unit 100 may further perform necessary image processing such as power consumption reduction, data rendering, image quality compensation, degradation compensation, and the like before or after the above-described gamma correction. The image processing unit 100 supplies the image data and the timing control signals to the timing controller 150.

영상 처리부(100)는 타이밍 컨트롤러(100) 내에 하드웨어도 구현되거나, 메모리에 저장된 소프트웨어의 영상 처리 모듈을 의미할 수 있다.The image processing unit 100 may embody hardware in the timing controller 100 or may be an image processing module of software stored in a memory.

타이밍 컨트롤러(150)는 영상 처리부(100)로부터 공급된 타이밍 제어 신호들을 이용하여 데이터 제어 신호(DCS) 및 게이트 제어 신호(GCS)를 생성하여 데이터 구동부(200) 및 게이트 구동부(300)로 각각 출력한다. 타이밍 제어 신호들은 도트 클럭, 데이터 인에이블 신호, 수직 동기 신호, 수평 동기 신호를 포함하며, 수직 동기 신호 및 수평 동기 신호는 데이터 인에이블 신호를 카운트하여 생성할 수 있으므로 생략 가능하다. 데이터 제어 신호들은 데이터 구동부(200) 구동을 제어하는 소스 스타트 펄스, 소스 샘플링 클럭, 소스 출력 인에이블 신호 등을 포함할 수 있다. 게이트 제어 신호들은 게이트 구동부(300) 구동을 제어하는 게이트 스타트 펄스, 게이트 쉬프트 클럭 등을 포함할 수 있다.The timing controller 150 generates a data control signal DCS and a gate control signal GCS using the timing control signals supplied from the image processing unit 100 and outputs them to the data driver 200 and the gate driver 300, do. The timing control signals include a dot clock, a data enable signal, a vertical synchronizing signal, and a horizontal synchronizing signal. The vertical synchronizing signal and the horizontal synchronizing signal can be omitted because they can be generated by counting the data enabling signal. The data control signals may include a source start pulse for controlling driving of the data driver 200, a source sampling clock, a source output enable signal, and the like. The gate control signals may include gate start pulses, gate shift clocks, and the like, which control the driving of the gate driver 300.

타이밍 컨트롤러(150)는 영상 처리부(100)로부터 공급받은 영상 데이터에 대하여, 투명 표시부(400)의 서브픽셀별 구동 특성(구동 TFT의 문턱 전압, 이동도, OLED 문턱 전압 등) 편차를 데이터 구동부(200)를 통해 센싱하여 보상하는 외부 보상이나 열화 보상 등과 같은 필요한 영상 처리를 더 실시한 다음 데이터 구동부(200)로 출력할 수 있다.The timing controller 150 supplies a deviation of driving characteristics (threshold voltage, mobility, OLED threshold voltage, etc.) of each subpixel of the transparent display unit 400 to the data driver 200 to perform necessary image processing such as external compensation or deterioration compensation, and then output to the data driver 200.

데이터 구동부(200)는 타이밍 컨트롤러(150)로부터의 데이터 제어 신호 및 영상 데이터를 공급받는다. 데이터 구동부(200)는 데이터 제어 신호에 따라 구동되어, 감마 전압 생성부(500)로부터 공급된 레퍼런스 감마 전압 세트를 데이터의 계조값에 각각 대응하는 계조 전압들로 세분화한 다음, 세분화된 계조 전압들을 이용하여 디지털 영상 데이터를 아날로그 데이터 신호로 변환하고, 아날로그 데이터 신호를 투명 표시부(400)의 데이터 라인들로 각각 공급한다. The data driver 200 receives data control signals and video data from the timing controller 150. The data driver 200 is driven in accordance with the data control signal to divide the set of reference gamma voltages supplied from the gamma voltage generator 500 into the gray voltages corresponding to the gray levels of the data, Converts the digital image data into analog data signals, and supplies the analog data signals to the data lines of the transparent display unit 400, respectively.

데이터 구동부(200)는 투명 표시부(400)의 데이터 라인들을 분할 구동하는 다수의 데이터 구동 IC로 구성되고, 각 데이터 구동 IC는 TCP(Tape Carrier Package), COF(Chip On Film), FPC(Flexible Print Circuit) 등과 같은 회로 필름에 실장되어 투명 표시부(400)에 TAB(Tape Automatic Bonding) 방식으로 부착되거나, COG(Chip On Glass) 방식으로 투명 표시부(400) 상에 실장될 수 있다.The data driver 200 includes a plurality of data driver ICs for dividing and driving the data lines of the transparent display unit 400. Each data driver IC includes a tape carrier package (TCP), a chip on film (COF) Circuit or the like and mounted on the transparent display unit 400 by a tape automatic bonding (TAB) method or on a transparent display unit 400 by a COG (Chip On Glass) method.

게이트 구동부(300)는 타이밍 컨트롤러(150)로부터 공급된 게이트 제어 신호(GCS)를 이용하여 투명 표시부(400)의 다수의 게이트 라인을 각각 구동한다. 게이트 구동부(300)는 게이트 제어 신호에 응답하여 각 게이트 라인에 해당 스캔 기간에서 게이트 온 전압의 스캔 펄스를 공급하고, 나머지 기간에서는 게이트 오프 전압을 공급한다. 게이트 구동부(300)는 타이밍 컨트롤러(150)로부터 게이트 제어 신호(GCS)를 공급받거나, 타이밍 컨트롤러(150)로부터 데이터 구동부(200)를 경유하여 게이트 제어 신호(GCS)를 공급받거나, 타이밍 컨트롤러(150)로부터 전원 회로(도시 생략)을 경유하여 공급받을 수 있다. The gate driver 300 drives the plurality of gate lines of the transparent display unit 400 using the gate control signal GCS supplied from the timing controller 150. The gate driver 300 supplies the gate-on voltage to the respective gate lines in response to the gate control signals, and supplies the gate-off voltages during the remaining periods. The gate driving unit 300 receives the gate control signal GCS from the timing controller 150 or receives the gate control signal GCS from the timing controller 150 via the data driving unit 200, Via a power supply circuit (not shown).

게이트 구동부(300)는 적어도 하나의 게이트 IC로 구성되고 TCP, COF, FPC 등과 같은 회로 필름에 실장되어 투명 표시부(400)에 TAB 방식으로 부착되거나, COG 방식으로 투명 표시부(400) 상에 실장될 수 있다. 이와 달리, 게이트 구동부(300)는 투명 표시부(400)의 픽셀 어레이를 구성하는 박막 트랜지스터 어레이와 함께 박막 트랜지스터 기판에 형성됨으로써 투명 표시부(400)의 비표시 영역에 내장된 GIP(Gate In Panel) 타입으로 구비될 수 있다. The gate driver 300 includes at least one gate IC and is mounted on a circuit film such as TCP, COF, FPC or the like to be attached to the transparent display unit 400 in a TAB manner or mounted on a transparent display unit 400 in a COG manner . Alternatively, the gate driver 300 may be formed on the thin film transistor substrate together with the thin film transistor array constituting the pixel array of the transparent display unit 400, thereby forming a GIP (Gate In Panel) type As shown in FIG.

도 6은 본 발명의 일 실시예에 따른 영상 처리부(100)의 내부 구성을 나타낸 블록도이고, 도 7은 본 발명의 일 실시예에 따른 영상 처리 방법을 단계적으로 나타낸 순서도이고, 도 6 및 도 7을 결부하여 설명한다.FIG. 6 is a block diagram illustrating an internal configuration of an image processing unit 100 according to an embodiment of the present invention. FIG. 7 is a flowchart illustrating an image processing method according to an exemplary embodiment of the present invention, 7 will be described.

도 6을 참조하면, 영상 처리부(100)는 투과율 LUT(102), 영상 특성 분석부(104), 배경 특성 분석부(106), 판단부(108), 감마 보정부(110)를 포함한다. 영상 처리부(100)는 이외에도 공지된 다른 영상 처리 블록들을 더 포함할 수 있다.Referring to FIG. 6, the image processing unit 100 includes a transmission LUT 102, an image characteristic analyzer 104, a background characteristic analyzer 106, a determiner 108, and a gamma corrector 110. The image processing unit 100 may further include other image processing blocks known in the art.

영상 특성 분석부(104)는 외부로부터 입력 영상을 공급받아 입력 영상을 분석하여 어두운 영상의 포함 정도, 즉 어두운 정도를 산출하고, 어두운 정도에 따라 입력 영상이 어두운 영상인지 밝은 영상인지를 나타내는 제1 판단 신호를 판단부(108)로 출력한다. (S12)The image characteristic analyzing unit 104 receives the input image from the outside and analyzes the input image to calculate the inclusion degree of the dark image, that is, the degree of darkness. The image characteristic analyzer 104 calculates the degree of darkness of the input image, And outputs a determination signal to the determination unit 108. (S12)

예를 들면, 영상 특성 분석부(104)는 아래 수학식 1을 이용하여 각 프레임의 입력 영상에서 저계조값들이 차지하는 분포율, 즉 어두운 영상의 포함 정도를 나타내는 저계조 가중치 평균 영상 레벨(Weighted Average Picture Level; 이하 WAPL_Low)을 백분율(%)로 산출한다.For example, the image characteristic analyzing unit 104 may calculate a weighted average image level, which indicates the distribution rate occupied by the low gray level values in the input image of each frame, that is, Level (WAPL_Low below) as a percentage (%).

<수학식 1>&Quot; (1) &quot;

Figure pat00002
Figure pat00002

n은 입력 영상의 단위 프레임에 포함되는 서브픽셀 수이고, Gray는 각 서브픽셀의 계조값을 의미한다. n is the number of subpixels included in a unit frame of the input image, and Gray is a gray value of each subpixel.

그리고, 영상 특성 분석부(104)는 상기 수학식 1로부터 산출된 WAPL_Low가 제2 기준값 α% 보다 작은 경우 입력 영상을 어두운 영상으로 판단하고, 그 반대로 WAPL_Low가 제2 기준값 α% 이상인 경우 입력 영상을 밝은 영상으로 판단하며, 그 판단 결과에 따라 입력 영상이 어두운 영상인지 밝은 영상인지를 나타내는 제1 판단 신호를 판단부(108)로 출력한다. (S12) 여기서, 제2 기준값 α%는 설계자에 의해 미리 설정된 것으로 투명 표시 장치 및 차광판(700)의 특성에 따라 차이가 있으나 30≤α≤50 정도가 어두운 영상 여부를 판단하는 기준값으로 적당하다. If the WAPL_Low calculated from Equation (1) is smaller than the second reference value alpha%, the image characteristic analyzing unit 104 determines that the input image is a dark image. If the WAPL_Low is equal to or greater than the second reference value alpha% And outputs a first determination signal indicating whether the input image is a dark image or a bright image to the determination unit 108 according to the determination result. (S12) Here, the second reference value alpha% is predetermined by the designer, and is suitable as a reference value for judging whether or not the image of 30?? 50 is dark depending on the characteristics of the transparent display device and the light shielding plate 700. [

상기 수학식 1로부터 산출된 WAPL_Low가 제2 기준값 α% (30≤α≤50) 보다 작은 경우는 도 8에 도시된 입력 영상의 계조별 분포율을 나타낸 그래프와 같이 저계조 영역의 분포율이 상대적으로 큰 경우를 의미한다.When the WAPL_Low calculated from Equation (1) is smaller than the second reference value?% (30??? 50), as shown in the graph of the distribution ratio of the input image shown in FIG. 8, the distribution ratio of the low gradation region is relatively large .

배경 특성 분석부(106)는 배경 센서(600)에 의해 센싱된 배경 영상을 공급받아 배경 영상을 분석하여 밝은 정도를 산출하고, 그 밝은 정도에 따라 배경이 밝은지 어두운지를 나타내는 제2 판단 신호를 감마 보정부(108)로 출력한다. (S14)The background characteristic analyzing unit 106 receives the background image sensed by the background sensor 600 and analyzes the background image to calculate the degree of brightness, and determines a second determination signal indicative of whether the background is bright or dark depending on the degree of brightness And outputs it to the gamma correction unit 108. (S14)

예를 들면, 센싱된 후면 배경 정보가 영상 정보일 때, 배경 특성 분석부(106)는 아래 수학식 2를 이용하여 각 프레임의 배경 영상에서 고계조값의 픽셀수가 차지하는 정도, 즉 배경 영상의 밝은 정도를 나타내는 고계조 가중치 평균 영상 레벨(이하 WAPL_High)을 백분율(%)로 산출한다.For example, when the background information to be sensed is background information, the background characteristic analyzer 106 calculates the degree of occupation of the number of pixels of the high tone value in the background image of each frame, that is, (Hereinafter referred to as &quot; WAPL_High &quot;) is calculated as a percentage (%).

<수학식2>&Quot; (2) &quot;

Figure pat00003
Figure pat00003

n은 배경 영상의 단위 프레임에 포함되는 서브픽셀 수이고, Gray는 각 서브픽셀의 계조값을 의미한다. n is the number of subpixels included in the unit frame of the background image, and Gray is the gray value of each subpixel.

그리고, 배경 특성 분석부(106)는 상기 수학식 2로부터 산출된 WAPL_High 가 제3 기준값 β% 보다 큰 경우 배경 영상이 밝은 것으로 판단하고, 그 반대로 WAPL_High가 제2 기준값 β% 이하인 경우 배경 영상이 어두운 것으로 판단하며, 그 판단 결과에 따라 배경 영상이 밝은지 어두운지를 나타내는 제2 판단 신호를 판단부(108)로 출력한다. (S14) 여기서, 제2 기준값 β%는 설계자에 의해 미리 설정된 것으로 투명 표시 장치 및 차광판(700)의 특성에 따라 차이가 있으나 50≤β≤70 정도가 밝은 배경을 판단하는 기준값으로 적당하다.If the WAPL_High calculated from Equation (2) is larger than the third reference value beta%, the background characteristic analyzing unit 106 determines that the background image is bright. If the WAPL_High is equal to or less than the second reference value beta% And outputs to the determination unit 108 a second determination signal indicating whether the background image is bright or dark according to the determination result. (S14) Here, the second reference value [beta]% is predetermined by the designer, and differs depending on the characteristics of the transparent display device and the light shielding plate 700, but 50??? 70 is suitable as a reference value for determining a bright background.

상기 수학식 2로부터 산출된 WAPL_High가 제3 기준값 β% (50≤β≤70) 보다 큰 경우는 도 9에 도시된 배경 영상의 계조별 분포율을 나타낸 그래프와 같이 고계조 영역의 분포율이 상대적으로 큰 경우를 의미한다.When the WAPL_High calculated from the equation (2) is larger than the third reference value?% (50??? 70), as shown in the graph of the distribution of the gradation of the background image shown in FIG. 9, .

투과율 LUT(102)에는 구동 시간 경과에 따른 차광판(700)의 투과율이 미리 측정되어 저장되어 있다. 투과율 LUT(102)는 외부 시스템(도시 생략)으로부터 차광판(700)의 구동 시간을 공급받아 차광판(700)의 구동 시간에 따른 투과율을 선택하여 판단부(108)로 공급한다(S16). 투과율 LUT(102)는 구동 시간에 따른 투과율 구간을 다수개로 분류하여 저장할 수 있다. 예를 들면, 투과율(t) 구간은 t>70, 60<t≤70, ..., 20<t≤30, 10<t≤20, t≤10와 같이 분류되어 저장될 수 있다. 투과율 LUT(102)는 구동 시간에 대응하는 투과율(t) 구간에 대한 정보를 판단부(108)로 출력할 수 있다. (S18)The transmittance of the shield plate 700 is measured and stored in advance in the transmittance LUT 102 according to the elapsed driving time. The transmittance LUT 102 receives the drive time of the shield plate 700 from an external system (not shown), selects the transmittance according to the drive time of the shield plate 700, and supplies the transmittance to the determination unit 108 (S16). The transmittance LUT 102 can classify and store a plurality of transmittance sections according to driving time. For example, the transmittance (t) period can be classified and stored as t> 70, 60 <t≤70, ..., 20 <t≤30, 10 <t≤20, t≤10. The transmittance LUT 102 may output information on the transmittance (t) section corresponding to the driving time to the determiner 108. (S18)

판단부(108)는 영상 특성 분석부(104)로부터 공급된 입력 영상이 어두운지 밝은지를 나타내는 제1 판단 신호와, 배경 특성 분석부(106)로부터 공급된 배경이 밝은지 어두운지를 나타내는 제2 판단 신호를 논리 조합하여 감마 보정 여부를 결정한다. 판단부(108)는 감마 보정 여부가 결정된 신호와, 투과율 LUT(102)로부터 공급된 투과율 정보를 감마 보정부(110)로 출력한다. 판단부(108)는 차광판 구동부(800)에 의해 차광판(700)이 투과 모드일 때 최대 투과율 정보를 감마 보정부(110)로 출력할 수 있다.The determination unit 108 compares the first determination signal indicating whether the input image supplied from the image characteristic analysis unit 104 is dark or light and the second determination signal indicating whether the background supplied from the background characteristic analysis unit 106 is bright or dark The signals are logically combined to determine whether to perform gamma correction. The determination unit 108 outputs the signal for which the gamma correction is determined and the transmittance information supplied from the transmittance LUT 102 to the gamma correction unit 110. [ The determination unit 108 can output the maximum transmittance information to the gamma correction unit 110 when the light blocking plate 700 is in the transmission mode by the light blocking plate driving unit 800. [

판단부(108)는 영상 특성 분석부(104)로부터의 제1 판단 신호와, 배경 특성 분석부(106)로부터의 제2 판단 신호가 아래 표 1에 나타낸 4가지 조건 중 화질 저하가 예측되는 제1 내지 제3 조건(어두운 영상 및 밝은 배경, 어두운 영상 및 어두운 배경, 밝은 영상 및 밝은 배경) 중 어느 하나인 화질 저하 조건에 해당하고(S18, YES), 투과율 LUT(102)로부터 공급된 투과율 정보가 제1 기준값(예를 들면 10%)를 초과하는 경우(S20, YES), 감마 보정부(110)에 감마 보정 필요 신호를 출력한다. 판단부(108)는 감마 보정 필요 신호와 함께 투과율 정보도 함께 감마 보정부(110)로 출력한다.The judgment unit 108 judges whether the first judgment signal from the image characteristic analysis unit 104 and the second judgment signal from the background characteristic analysis unit 106 correspond to the first judgment signal (S18, YES), which corresponds to one of the first to third conditions (dark image and bright background, dark image and dark background, bright image and bright background) (S20, YES), the gamma correction section 110 outputs a gamma correction necessity signal to the gamma correction section 110. The gamma correction section 110 outputs the gamma correction required signal to the gamma correction section 110. [ The determination unit 108 also outputs the transmittance information together with the gamma correction required signal to the gamma correction unit 110. [

<표 1><Table 1>

Figure pat00004
Figure pat00004

반면에, 판단부(108)는 영상 특성 분석부(104)로부터의 제1 판단 신호와, 배경 특성 분석부(106)로부터의 제2 판단 신호가 상기 표 1에 나타낸 제4 조건(밝은 영상 및 어두운 배경)인 정상 조건에 해당하면, 투과율 정보에 관계없이 감마 보정 불필요 신호를 감마 보정부(110)에 출력한다(S18, NO) On the other hand, the determination unit 108 determines that the first determination signal from the image characteristic analysis unit 104 and the second determination signal from the background characteristic analysis unit 106 correspond to the fourth condition Dark background), a gamma correction unnecessary signal is output to the gamma correction unit 110 regardless of the transmittance information (S18, NO)

한편, 판단부(108)는 투과율 LUT(102)로부터 공급된 투과율 정보가 제1 기준값(예를 들면 10%) 이하일 때, 전술한 영상 특성 및 배경 특성과 관계없이 감마 보정 불필요 신호를 감마 보정부(110)에 출력한다. (S20, NO)On the other hand, when the transmittance information supplied from the transmittance LUT 102 is equal to or smaller than the first reference value (for example, 10%), the determination unit 108 outputs a gamma correction unnecessary signal to the gamma correction unit 102, (110). (S20, NO)

감마 보정부(110)는 판단부(108)로부터 감마 보정 필요 신호가 공급되면, 그 판단부(108)를 경유하여 공급된 투과율 정보에 따라 영상 특성 분석부(104)를 경유하여 공급된 입력 영상에 대한 감마 보정을 실시하여(S22), 감마 보정된 영상을 출력한다(S24).The gamma correction unit 110 receives the gamma correction necessity signal from the determination unit 108 and outputs the gamma correction required signal to the input image signal processing unit 110 via the image characteristic analysis unit 104 in accordance with the transmittance information supplied via the determination unit 108. [ (S22), and outputs the gamma corrected image (S24).

반면에, 감마 보정부(110)는 판단부(108)로부터 감마 보정 불필요 신호가 공급되면, 영상 특성 분석부(104)를 경유하여 공급된 입력 영상을 감마 보정없이 출력한다(S24).On the other hand, when the gamma correction unnecessary signal is supplied from the determination unit 108, the gamma correction unit 110 outputs the input image supplied via the image characteristic analysis unit 104 without gamma correction (S24).

감마 보정부(110)에는 투과율 정보에 따라 도 10에 도시된 바와 같이 감마값(입력 계조값에 대한 출력 계조값을 나타내는 감마 커브를 정의한 값)이 서로 다른 다수의 감마 보정 LUT가 미리 설정되어 저장되어 있다. The gamma correction unit 110 stores a plurality of gamma correction LUTs having different gamma values (values defining gamma curves representing the output gamma values for the input gamut values) as shown in FIG. 10 according to the transmittance information have.

예를 들면, 감마 보정부(110)는 아래 표 2와 같이 투과율(t) 정보에 따라 서로 다른 감마값(GMA)을 선택하고, 선택된 감마값에 해당하는 LUT를 이용하여 입력 영상의 각 데이터(입력 계조값)에 대응하는 출력 데이터(출력 계조값)를 선택하여 출력함으로써, 입력 영상에 대하여 투과율에 따라 차등적인 감마 보정을 실시하고 감마 보정된 영상을 출력한다. For example, the gamma correction unit 110 selects different gamma values (GMA) according to the transmittance (t) information as shown in Table 2 below, and uses the LUT corresponding to the selected gamma value to convert each data (Output grayscale value) corresponding to the input image (output grayscale value), and outputs the gamma-corrected image by subjecting the input image to differential gamma correction according to the transmittance.

<표 2><Table 2>

Figure pat00005
Figure pat00005

상기 표 2에서 투과율(t) 정보가 10% 미만인 경우에 해당하는 2.2 감마값은 투명 표시 장치의 기본 설정값으로 입력 영상을 감마 보정없이 출력하는 것을 의미한다.The 2.2 gamma value corresponding to the case where the transmittance (t) information is less than 10% in Table 2 means that the input image is output without gamma correction at the basic setting value of the transparent display device.

상기 표 2와 같이 투과율이 클수록 감마값은 증가하며, 도 9에 도시된 바와 같이 감마값이 클수록 입력 계조값에 대한 출력 계조값이 감소함을 알 수 있다.As shown in Table 2, as the transmittance increases, the gamma value increases. As shown in FIG. 9, the output tone value for the input tone value decreases as the gamma value increases.

도 11은 본 발명의 일 실시예에 따른 감마 보정 전후의 영상과 감마 보정이 불필요한 영상을 보여주는 사진이다.11 is a photograph showing an image before and after gamma correction and an image in which gamma correction is unnecessary according to an embodiment of the present invention.

차광판 투과율이 70%이고 입력 영상이 어둡고 배경이 밝은 경우, 도 11(a)에 도시된 바와 같이 본 발명이 적용되기 이전의 2.2 감마를 이용하여 영상을 표시하면, 표시 영상의 시인성이 저하되는 반면, 도 11(b)에 도시된 바와 같이 본 발명이 적용되어 3.4 감마를 이용하여 영상을 표시하면 시인성이 향상되어 화질이 향상되었음을 알 수 있다. When the light-shielding plate transmittance is 70% and the input image is dark and the background is bright, as shown in FIG. 11 (a), when the image is displayed using 2.2 gamma before the present invention is applied, the visibility of the display image is deteriorated , And FIG. 11 (b), the present invention is applied to display an image using 3.4 gamma, thereby improving visibility and image quality.

한편, 도 11(c)와 같이 배경이 어둡고 입력 영상이 밝은 경우에는 감마 보정이 필요하지 않음을 알 수 있다.On the other hand, when the background is dark and the input image is bright as shown in FIG. 11 (c), gamma correction is not necessary.

전술한 바와 같이, 본 발명의 일 실시예에 따른 투명 표시 장치 및 그 구동 방법은 차광판의 투과율 특성과, 입력 영상의 휘도 특성 및 배경 영상의 휘도 특성을 모두 분석하여, 투과율이 기준값 보다 크고 입력 영상과 후면 배경이 화질 저하 조건에 해당하는 경우 감마를 조절하여 영상 데이터를 보정함으로써 화질을 향상시킬 수 있다. As described above, the transparent display device and the driving method thereof according to an embodiment of the present invention analyze both the transmittance characteristics of the shading plate, the luminance characteristics of the input image, and the luminance characteristics of the background image, And the back-side background corresponds to the image quality degradation condition, the image quality can be improved by adjusting the gamma by correcting the image data.

도 12는 본 발명의 일 실시예에 따른 투명 표시 장치의 구성을 개략적으로 나타낸 블록도이다. 12 is a block diagram schematically showing a configuration of a transparent display device according to an embodiment of the present invention.

도 12에 도시된 투명 표시 장치는 도 4에 도시된 실시예와 대비하여, 영상 처리부(1000)가 영상 밝기 및 후면 배경(시청 환경)의 밝기의 영향을 받는 영상의 선명도 저하 정도(후면 배경의 인지 정도)에 따라 적응적으로 영상의 선명도를 개선하여 화질을 향상시키는 영상 처리를 수행하는 점에서 차이가 있다. 도 12에서 영상 처리부(1000)를 제외한 나머지 구성요소들은 도 4와 동일하므로 도 4와 동일한 구성요소들에 대한 설명은 생략하기로 한다. The transparent display device shown in FIG. 12 differs from the embodiment shown in FIG. 4 in that the image processing unit 1000 has a degree of sharpness degradation of an image (a backlight background) The image quality of the image is improved by adaptively adjusting the sharpness of the image according to the degree of recognition. Since the remaining components except for the image processing unit 1000 in FIG. 12 are the same as FIG. 4, description of the same components as those in FIG. 4 will be omitted.

도 12에 도시된 투명 표시 장치는 영상 표시와 함께 후면 배경에 대한 인지가 필요한 경우로, 도 12에 도시된 투명 표시 장치는 도 4에 도시된 차광판(700) 및 차광판 구동부(800)를 생략할 수 있다. 한편, 도 4에 도시된 차광판(700) 및 차광판 구동부(800)를 구비하는 경우에는 차광판(700)은 차광판 구동부(800)에 의해 투과 모드를 유지할 수 있다.The transparent display device shown in FIG. 12 requires recognition of the background on the back with the image display. The transparent display device shown in FIG. 12 omits the shield plate 700 and the shield plate driving part 800 shown in FIG. 4 . 4, the light blocking plate 700 can maintain the light transmission mode by the light blocking plate driving unit 800. [0156] In addition, in the case of the light blocking plate 700 and the light blocking plate driving unit 800 shown in FIG.

영상 처리부(1000)는 영상의 선명도를 개선하기 위하여 언샤프 마스킹(unsharp masking)을 적용하여 영상의 에지 강도에 비례하여 선명도를 개선하는 선명도 개선 방법을 이용할 수 있다. 또한, 영상 처리부(1000)는 영상의 밝기 및 후면 배경의 밝기에 따라 후면 배경의 인지 정도가 달라짐으로써 영상의 선명도와 화질 중 적어도 하나가 저하되는 것을 방지하기 위하여, 영상의 밝기 및 후면 배경의 밝기에 따라 적응적으로 선명도 개선 강도를 조절한다. 이 결과, 영상 처리부(1000)는 영상의 에지 강도 특성과 영상의 밝기 특성과 후면 배경의 밝기 특성을 모두 고려하여 선명도 개선 강도를 조절함으로써 영상 및 시청 환경에 적절하게 선명도를 개선할 수 있으므로 화질을 향상시킬 수 있다.The image processing unit 1000 may employ a sharpness improvement method that improves the sharpness in proportion to the edge strength of the image by applying unsharp masking in order to improve the sharpness of the image. Also, in order to prevent at least one of the sharpness and the image quality from being degraded, the brightness of the image and the brightness of the background of the background are changed according to the brightness of the image and the brightness of the background, To adjust the sharpness enhancement intensity adaptively according to the brightness. As a result, the image processing unit 1000 can improve the sharpness appropriately in the image and the viewing environment by adjusting the sharpness improvement intensity in consideration of both the edge strength characteristic of the image, the brightness characteristic of the image, and the brightness characteristic of the background background, Can be improved.

구체적으로, 투명 표시 장치에서 영상의 밝은 영역은 밝은 영상으로 인해 후면 배경이 잘 인지되지 않는 반면, 영상의 어두운 영역은 후면 배경이 영상과 함께 인지되어 영상의 에지 표현력이 저하되므로, 영상의 밝기가 감소할수록 영상의 선명도가 저감할 수 있다. 영상의 밝기에 따라 영상의 선명도가 저하되는 것을 방지하기 위하여, 영상 처리부(1000)는 영상의 어두운 영역은 후면 배경의 인지 정도가 높아 영상의 선명도 저하 정도가 높으므로 선명도 개선 강도를 증가시키고, 영상의 밝은 영역은 후면 배경의 인지 정도가 낮아 선명도 저하 정도도 낮으므로 선명도 개선 강도를 감소시킨다. 이를 위하여, 영상 처리부(100)는 영상 프레임을 복수의 픽셀 블록으로 분할하여 픽셀 블록별로 평균 계조를 계산하고, 블록별 평균 계조(블록별 평균 밝기)에 따라 블록별로 선명도 개선 강도를 조절한다.Specifically, in the transparent display device, the background of the bright region of the image is not well recognized due to the bright image, whereas the background region of the image is recognized together with the background of the background region, The sharpness of the image can be reduced. In order to prevent the sharpness of the image from being degraded according to the brightness of the image, the image processing unit 1000 increases the sharpness enhancement strength because the darkness of the image has a high degree of recognition of the background, The brightness of the background is low and the degree of sharpness reduction is low, thereby reducing the sharpness improving strength. For this purpose, the image processing unit 100 divides the image frame into a plurality of pixel blocks to calculate an average gradation for each pixel block, and adjusts the sharpness improvement strength for each block according to the average gradation (average brightness per block) for each block.

또한, 후면 배경의 밝기가 높을수록 배경 시인성이 증가하여 영상의 선명도가 저감되는 방지하기 위하여, 영상 처리부(100)는 후면 배경의 밝기에 따라 선명도 개선 강도를 조절한다. 영상 처리부(100)는 어두운 후면 배경의 경우 후면 배경의 인지 정도가 낮아 선명도 저하 정도도 낮으므로 선명도 개선 강도를 감소시키고 밝은 후면 배경의 경우 후면 배경의 인지 정도가 높아 선명도 저하 정도가 높으므로 선명도 개선 강도를 증가시킨다. 이를 위하여, 영상 처리부(100)는 후면 배경의 밝기를 센싱하고, 영상의 블록별 평균 계조에 따라 선명도 개선 강도를 결정하는 함수를, 후면 배경 밝기에 따른 배경 가중치를 적용하여 가변시킴으로써 후면 배경 밝기에 따라 선명도 개선 강도를 조절한다. 이에 대한 구체적인 설명은 후술한다.Also, the image processor 100 adjusts the sharpness enhancement intensity according to the brightness of the background background, in order to prevent the background visibility from increasing as the brightness of the background is higher. In the case of the dark background, the image processing unit 100 reduces the degree of sharpness degradation because the degree of recognition of the background is low, thereby reducing the intensity of sharpness enhancement. In the bright background, Increases strength. For this, the image processing unit 100 senses the brightness of the back background and adjusts the brightness enhancement strength according to the average gray level of each image by varying the background weight according to the background brightness, Adjust the sharpness improvement intensity accordingly. A detailed description thereof will be described later.

도 13은 본 발명의 일 실시예에 따른 투명 표시 장치의 영상 처리부(1000)의 구성을 나타낸 블록도이고, 도 14는 본 발명의 일 실시예에 따른 투명 표시 장치의 영상 처리 방법을 단계적으로 나타낸 순서도이고, 도 15는 본 발명의 일 실시예에 따른 영상의 블록별 평균 계조에 따른 선명도 개선 강도를 결정하는 함수의 그래프를 나타낸 것이다. 이하, 도 13 내지 도 15을 참조하여 설명한다. FIG. 13 is a block diagram illustrating a configuration of an image processing unit 1000 of a transparent display device according to an exemplary embodiment of the present invention. FIG. 14 is a flowchart illustrating a method of processing an image of a transparent display device according to an exemplary embodiment of the present invention. And FIG. 15 is a graph of a function for determining sharpness enhancement strength according to an average gradation of each block of an image according to an embodiment of the present invention. Hereinafter, a description will be given with reference to Figs. 13 to 15. Fig.

도 13에 도시된 영상 처리부(1000)는 영상 밝기와 후면 배경의 밝기에 따라 선명도 개선 강도(K)를 조절하는 선명도 개선 강도 조절부(1200)와, 언샤프 마스킹 처리를 통해 입력 영상(FD)의 에지 강도와 선명도 개선 강도(K)에 비례하여 영상의 선명도를 개선하고 선명도가 개선된 영상(FD')을 출력하는 언샤프 마스크 필터(1100)를 구비한다. The image processing unit 1000 shown in FIG. 13 includes a sharpness enhancement intensity adjuster 1200 that adjusts the sharpness enhancement intensity K according to the brightness of a video image and a background image, an input image FD through an unsharp masking process, And an unsharp mask filter 1100 for improving the sharpness of the image in proportion to the sharpness improving intensity K and outputting the image FD 'improved in sharpness.

언샤프 마스크 필터(1100)는 로우 패스 필터(1110), 마스크 생성부(1120), 선명도 개선 마스크 결정부(1130), 영상 보정부(1140)를 구비한다.The unsharp mask filter 1100 includes a low-pass filter 1110, a mask generating unit 1120, a sharpness improving mask determining unit 1130, and an image correcting unit 1140.

로우 패스 필터(1110)는 프레임 단위의 입력 영상(FD)을 로우 패스 필터링함으로써 픽셀간 휘도 차이가 감소된 블러 영상을 생성하고 블러 영상을 출력한다.The low-pass filter 1110 low-pass-filters the input image FD on a frame basis to generate a blurred image in which the luminance difference between pixels is reduced and outputs a blurred image.

마스크 생성부(1120)는 로우 패스 필터(1110)로부터 공급된 블러 영상을, 입력 영상(FD)으로부터 차감함으로써 입력 영상(FD)의 에지 성분을 나타내는 에지 마스크 영상(MD)을 생성하고 에지 마스크 영상(MD)을 출력한다. (S42)The mask generation unit 1120 generates an edge mask image MD representing an edge component of the input image FD by subtracting the blurred image supplied from the low pass filter 1110 from the input image FD, (MD). (S42)

선명도 개선 마스크 결정부(1130)는 마스크 생성부(1120)로부터 공급된 에지 마스크 영상(MD)에, 선명도 개선 강도 조절부(1200)에서 영상 밝기 및 후면 배경 밝기에 따라 조절된 선명도 개선 강도(K)를 적용하여 선명도 개선 마스크 영상(MD')을 결정하고 선명도 개선 마스크 영상(MD')을 출력한다. (S54) 선명도 개선 마스크 결정부(1130)는 에지 마스크 영상(MD)과 선명도 개선 강도(K)를 곱함으로써 에지 마스크 영상(MD)에서 에지 성분의 강도가 선명도 개선 강도(K)에 의해 증가된 선명도 개선 마스크 영상(MD')을 생성한다. 선명도 개선 강도 조절부(1200)는 픽셀 블록별 평균 계조와 후면 배경 밝기에 따라 조절된 블록별 선명도 개선 강도(K)를 출력한다. 따라서, 선명도 개선 마스크 결정부(1130)는 에지 마스크 영상(MD)의 픽셀 블록 단위로 블록별 선명도 개선 강도(K)를 적용하여 선명도 개선 마스크 영상(MD')을 생성한다.The sharpness improvement mask determination unit 1130 determines the sharpness enhancement intensity K (k) adjusted according to the image brightness and the background background brightness in the sharpness enhancement intensity adjuster 1200 to the edge mask image MD supplied from the mask generator 1120. [ ) To determine the sharpness improving mask image MD 'and output the sharpness improving mask image MD'. (S54) The sharpness improvement mask determination unit 1130 multiplies the edge mask image MD by the sharpness improvement strength K so that the strength of the edge component in the edge mask image MD is increased by the sharpness improvement strength K Thereby generating a sharpness improving mask image MD '. The sharpness improving intensity controller 1200 outputs the sharpness improving intensity K for each block adjusted according to the average gradation for each pixel block and the backside background brightness. Accordingly, the sharpness improvement mask determination unit 1130 generates the sharpness improvement mask image MD 'by applying the sharpness enhancement strength K for each block in units of pixel blocks of the edge mask image MD.

영상 보정부(1140)는 입력 영상(FD)과, 선명도 개선 마스크 결정부(1300)로부터 공급된 선명도 개선 마스크 영상(MD')을 합성함으로써 선명도가 개선된 출력 영상(FD')을 생성하고, 출력 영상(FD')을 출력한다. (S56)The image correcting unit 1140 generates the output image FD 'having improved sharpness by combining the input image FD and the sharpness improving mask image MD' supplied from the sharpness improving mask determining unit 1300, And outputs an output image FD '. (S56)

선명도 개선 강도 조절부(1200)는 입력 영상(FD)을 분할한 복수의 픽셀 블록 각각의 블록별 평균 계조(L)와, 후면 배경의 밝기에 따라 조절된 가중치(Kmax, Kmin)을 이용하여, 블록별로 선명도 개선 강도(K)를 결정하고, 블록별 선명도 개선 강도(K)를 출력한다. (S44, S46, S48, S50, S52) 이를 위하여, 선명도 개선 강도 조절부(1200)는 평균 계조 계산부(1210), 배경 가중치 결정부(1220), 선명도 강도 결정부(1230)를 구비한다.The sharpness improving intensity controller 1200 uses the average gradation L for each block of the plurality of pixel blocks obtained by dividing the input image FD and the weight Kmax and Kmin adjusted according to the brightness of the background, The sharpness improvement strength (K) is determined for each block, and the sharpness improvement strength (K) for each block is output. The sharpness enhancement intensity adjuster 1200 includes an average gray scale calculator 1210, a background weight determiner 1220, and a sharpness intensity determiner 1230. [

평균 계조 계산부(120)는 입력 영상(FD)을 복수의 픽셀 블록으로 분할하고, 블록별 평균 계조(L)를 계산하여, 블록별 평균 계조(L)를 출력한다. (S44) 평균 계조(L)를 계산하기 위한 각 픽셀 블록 각각의 크기(n*n, n은 픽셀수)는 다양하게 설정될 수 있으며, 예를 들면 영역별 평균 밝기 특성을 반영하기 위하여 3≤n≤10 정도가 적당하다.The average gradation calculation unit 120 divides the input image FD into a plurality of pixel blocks, calculates an average gradation L for each block, and outputs an average gradation L for each block. (S44) The size (n * n, n is the number of pixels) of each pixel block for calculating the average gradation L can be variously set. For example, in order to reflect the average brightness characteristic by region, n? 10 is suitable.

배경 가중치 결정부(1220)는 배경 센서(600; 도 12)로부터 센싱된 후면 배경의 밝기 정보(E)에 따른 가중치(Wmax, Wmin)를 결정하고, 이 가중치(Wmax, Wmin)를 아래 수학식 3과 같이 미리 설정된 암실 환경의 최대 및 최소 선명도 개선 강도(K0max, K0min)에 각각 적용함으로써 후면 배경의 밝기에 따른 최대 및 최소 선명도 개선 강도(Kmax, Kmin)를 결정하고, 최대 및 최소 선명도 개선 강도(Kmax, Kmin)를 배경 가중치로 출력한다. (S50)The background weight determiner 1220 determines weights Wmax and Wmin in accordance with the brightness information E of the background background sensed from the background sensor 600 (Kmax, Kmin) according to the brightness of the back side background are determined by applying them to the maximum and minimum sharpness enhancement intensities (K0max, K0min) of the preset darkroom environments such as the maximum and minimum sharpness enhancement intensities (Kmax, Kmin) as a background weight value. (S50)

<수학식 3>&Quot; (3) &quot;

Kmax = K0max * WmaxKmax = K0max * Wmax

Kmin = K0min * WminKmin = K0min * Wmin

다시 말하여, 배경 가중치 결정부(1220)는 후면 배경의 밝기(E)에 따라 최대 및 최소 선명도 개선 강도(Kmax, Kmin)를 가변시킨다. 예를 들면, 사무실 조도 환경을 기준으로 선명도 개선 강도의 최대값(Kmax)은 1.5≤Kmax≤3.0 정도가 적당하고, 최소값(Kmin)은 0.01≤Kmin≤0.5 정도가 적당하다.In other words, the background weight determiner 1220 varies the maximum and minimum sharpness enhancement intensities (Kmax, Kmin) according to the brightness (E) of the background background. For example, the maximum value (Kmax) of the sharpness improving strength on the basis of the office illuminance environment is preferably about 1.5? Kmax? 3.0, and the minimum value (Kmin) is preferably about 0.01? Kmin? 0.5.

선명도 강도 결정부(1230)는 평균 계조 계산부(120)로부터 공급된 블록별 평균 계조(L)와, 배경 가중치 결정부(1220)로부터 공급된 배경 가중치, 즉 후면 배경 밝기에 따라 가변된 최대 및 최소 선명도 개선 강도(Kmax, Kmin)를 이용하여 아래 수학식 4와 같이 블록별 선명도 개선 강도(K)를 결정하여 출력한다. (S52)The sharpness intensity determiner 1230 determines the sharpness intensity of each block based on the block average gray level L supplied from the average gray level calculator 120 and the background weights supplied from the background weight determiner 1220, The sharpness improving strength (K) for each block is determined and output as shown in Equation (4) below using the minimum sharpness improving strength (Kmax, Kmin). (S52)

<수학식 4>&Quot; (4) &quot;

Figure pat00006
Figure pat00006

상기 수학식 4에서 Lth는 블록별 평균 계조의 임계값을 의미한다. 상기 수학식 4를 이용한 선명도 개선 강도(K) 결정은 블록별 평균 계조(L)가 임계값(Lth) 보다 작은 경우에만 적용된다. (S52) 블록별 평균 계조(L)가 평균 계조가 일정 수준 이상인 경우 후면 배경이 잘 인지되지 않으므로 선명도 강도 결정부(1230)는 임계값(Lth)을 설정하고, 블록별 평균 계조(L)가 임계값(Lth) 이상일 때 그 블록의 선명도 개선 강도(K)는 설정치인 최소값으로 결정된다. (S48) 예를 들면, 평균 계조의 임계값(Lth)은 128≤ Lth ≤255 정도가 적당하다.In Equation (4), Lth denotes a threshold value of the average gray level of each block. The determination of the sharpness improving strength K using Equation (4) is applied only when the average gradation L of each block is smaller than the threshold value Lth. (S52) When the average gradation L of each block is equal to or higher than a certain level, the background of the background is not recognized well. Therefore, the sharpness intensity determiner 1230 sets the threshold Lth and the average gradation L When the threshold value Lth is equal to or larger than the threshold value Lth, the sharpness improving strength K of the block is determined as the minimum value which is the set value. (S48) For example, the threshold value Lth of the average gradation is suitably about 128 &amp;le; Lth &amp;le; 255.

도 15를 참조하면, 선명도 강도 결정부(1230)는 블록별 평균 계조(L)가 임계값(Lth)보다 큰 경우, 상기 수학식 2의 2차 함수를 이용하여 블록별 평균 계조(L)가 증가할수록 선명도 개선 강도(K)가 감소됨을 알 수 있다. 최대 및 최소 선명도 개선 강도(Kmax, Kmin)는 후면 배경의 밝기에 따라 가변되면, 도 15에 도시된 2차 함수의 커브 그래프가 가변되어 블록별 평균 계조(L)에 대응하는 블록별 선명도 개선 강도(K)도 가변하게 된다. 도 15에서 블록별 평균 계조(L)가 임계값(Lth) 이상일 때 블록별 선명도 개선 강도(K)는 최소값(Kmin)으로 결정된다.15, the sharpness intensity determiner 1230 determines the average gradation L for each block using the quadratic function of Equation (2) if the average gradation L for each block is larger than the threshold value Lth It is found that the sharpness improving strength (K) is reduced as the number of pixels increases. If the maximum and minimum sharpness enhancement intensities (Kmax, Kmin) are varied according to the brightness of the background, the curve graph of the quadratic function shown in FIG. 15 is varied, and the sharpness enhancement intensities (K) is also variable. In Fig. 15, when the average gradation L for each block is equal to or greater than the threshold value Lth, the sharpness improving strength K for each block is determined as the minimum value Kmin.

이와 같이, 본 발명의 일 실시예에 따른 투명 표시 장치 및 그 구동 방법은 영상의 밝기와 후면 배경의 밝기에 따라 선명도 개선 강도를 조절함으로써 영상 및 시청 환경에 따라 적절한 선명도 개선 강도를 적용하여 선명도 및 화질을 향상시킬 수 있다. 따라서, 영상과 후면 배경 모두 의미있는 정보를 전달하는 경우 배경과 영상 사이의 경계를 강조하여 영상 및 후면 배경 양측의 시인성을 개선할 수 있다.As described above, the transparent display device and the driving method thereof according to an embodiment of the present invention adjusts the intensity of sharpness enhancement according to the brightness of the image and the brightness of the background of the backlight so that appropriate sharpness enhancement strength is applied according to the image and the viewing environment, The image quality can be improved. Therefore, when both the image and the background are conveying meaningful information, the boundary between the background and the image can be emphasized to improve the visibility of both the image and the background.

도 16은 본 발명의 일 실시예에 따른 투명 표시 장치에서 영상의 밝기 및 후면 배경의 밝기에 따라 선명도 개선 강도를 조절하여 적용한 경우의 영상을 선행 기술의 영상과 대비하여 나타낸 것이다.FIG. 16 is a view illustrating an image obtained by adjusting the brightness enhancement intensity according to the brightness of the image and the brightness of the background in the transparent display device according to an embodiment of the present invention, in contrast to the image of the prior art.

도 16(a)를 참조하면 선행 기술의 투명 표시 장치는 영상의 어두운 영역이 밝은 후면 배경의 영향을 받아 선명도가 저하되는 문제점이 있는 반면, 본 발명의 일 실시예는 어두운 영역의 영상 밝기와 밝은 후면 배경에 따라 선명도 개선 강도가 증가시킴으로써 에지 강도가 향상되어 선명도가 향상되었음을 알 수 있다.Referring to FIG. 16A, the prior art transparent display device has a problem that a dark area of an image is influenced by a bright rear background, resulting in a decrease in sharpness. In contrast, in an embodiment of the present invention, It can be seen that the edge strength is improved and the sharpness is improved by increasing the sharpness improving strength according to the background in the background.

도 16(b)를 참조하면, 선행 기술의 투명 표시 장치는 영상의 밝은 영역은 후면 배경의 영향이 작아 선명도 저하가 낮으므로, 본 발명의 일 실시예는 영상의 밝은 영역에서 선명도 개선 강도를 감소시키더라도 화질 저하가 낮음을 알 수 있으며, 밝은 영상에서 선명도 개선 강도 증가로 인한 오버 샤프닝과 같은 화질 저하를 방지할 수 있다.Referring to FIG. 16B, in the transparent display device of the related art, since the influence of the background in the bright region of the image is small and the sharpness reduction is low, an embodiment of the present invention reduces the sharpness enhancement intensity in the bright region of the image It is possible to know that the image quality deterioration is low even in the case where the image quality is low.

도 16(c)를 참조하면, 선행 기술의 투명 표시 장치는 후면 배경의 밝기가 어두운 경우 영상의 어두운 영역은 선명도 저하가 낮으므로 본 발명의 일 실시예는 어두운 영역의 영상 밝기와 어두운 후면 배경에 따라 선명도 개선 강도를 감소시키더라도 화질 저하가 낮음을 알 수 있다.Referring to FIG. 16 (c), in the prior art transparent display device, when the brightness of the background of the background is dark, the darkness of the image is low and the brightness of the darkness of the image is low. Therefore, even if the sharpness improvement strength is decreased, the image quality deterioration is low.

전술한 바와 같이, 본 발명의 일 실시예에 따른 투명 표시 장치 및 그 구동 방법은 입력 영상의 밝기 특성 및 후면 배경의 밝기 특성을 고려하여 감마 보정 방법 및 선명도 개선 방법 중 하나의 영상 처리를 실시하여 영상을 보정함으로써 영상 및 시청 환경에 따라 적절하게 영상의 시인성 및 화질을 향상시킬 수 있다. As described above, the transparent display device and the driving method thereof according to an embodiment of the present invention perform image processing of one of the gamma correction method and the sharpness improvement method in consideration of the brightness characteristics of the input image and the background, It is possible to improve the visibility and image quality of the image appropriately according to the image and the viewing environment by correcting the image.

이상 설명한 내용을 통해 당업자라면 본 발명의 기술사상을 일탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다. 따라서, 본 발명의 기술적 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허 청구 범위에 의해 정하여져야만 할 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. Therefore, the technical scope of the present invention should not be limited to the contents described in the detailed description of the specification, but should be defined by the claims.

100, 1000: 영상 처리부 102: 투과율 LUT
104: 영상 특성 분석부 106: 배경 특성 분석부
108: 판단부 110: 감마 보정부
150: 타이밍 컨트롤러 200: 데이터 구동부
300: 게이트 구동부 400: 투명 표시부
500: 감마 전압 생성부 600: 배경 센서
700: 차광판 800: 차광판 구동부
1100: 언샤프 마스크 필터 1110: 로우 패스 필터
1120: 마스크 생성부 1130: 선명도 개선 마스크 결정부
1140: 영상 보정부 1200: 선명도 개선 강도 조절부
1210: 평균 계조 계산부 1220: 배경 가중치 결정부
1230: 선명도 강도 결정부
100, 1000: image processor 102: transmittance LUT
104: image characteristic analyzing unit 106: background characteristic analyzing unit
108: Judgment section 110: gamma correction section
150: timing controller 200: data driver
300: gate driver 400: transparent display part
500: gamma voltage generator 600: background sensor
700: Shading plate 800: Shading plate driving part
1100: Unsharp mask filter 1110: Low pass filter
1120: mask generation unit 1130: sharpness improvement mask determination unit
1140: image correction unit 1200: sharpness improvement intensity adjustment unit
1210: Average grayscale calculation unit 1220: Background weight determination unit
1230: Sharpness intensity determination unit

Claims (16)

투과 영역과, 영상 데이터를 표시하는 발광 영역을 포함하는 투명 표시부와,
상기 투명 표시부의 일측면에 배치되어 투과율이 가변하는 차광판과,
상기 투명 표시 장치의 후면에 배치되어 후면 배경을 센싱하는 배경 센서와,
상기 영상 데이터를 공급하여 상기 투명 표시부를 구동하는 표시 구동부와,
상기 차광판을 구동하는 차광판 구동부와,
입력 영상에 대하여 화질 개선을 위한 영상 처리를 수행하여 상기 표시 구동부에 상기 영상 데이터를 공급하는 영상 처리부를 구비하고,
상기 영상 처리부는 상기 입력 영상을 분석하여 그 입력 영상이 어두운 영상인지 밝은 영상인지를 나타내는 영상 특성을 판단하고, 상기 배경 센서로부터 센싱된 후면 배경 신호를 분석하여 상기 후면 배경이 밝은 배경인지 어두운 배경인지를 나타내는 배경 특성을 판단하고, 차광판의 투과율 특성을 판단하여, 상기 영상 특성과 상기 배경 특성이 밝은 영상과 상기 어두운 배경인 정상 조건을 제외한 나머지의 화질 저하 조건들 어느 하나에 해당하고, 상기 투과율이 제1 기준값을 초과할 때, 상기 입력 영상에 대하여 감마 보정을 실시하여, 감마 보정된 영상 데이터를 상기 표시 구동부로 출력하는 투명 표시 장치.
A transmissive display area including a transmissive area and a light emitting area for displaying image data;
A light shielding plate disposed on one side of the transparent display unit and having a variable transmittance,
A background sensor disposed on a rear surface of the transparent display device for sensing a background background,
A display driver for supplying the image data and driving the transparent display unit,
A light shield plate driving unit for driving the light shield plate,
And an image processing unit for performing image processing for improving an image quality of an input image and supplying the image data to the display driver,
The image processing unit analyzes the input image to determine an image characteristic indicating whether the input image is a dark image or a bright image, and analyzes the backside background signal sensed by the background sensor to determine whether the backside background is a light background or a dark background And determines the transmittance characteristic of the light shielding plate so as to correspond to any one of the remaining image quality degradation conditions except for the image in which the image characteristic and the background characteristic are bright and the normal condition which is the dark background, And performs gamma correction on the input image when the first reference value is exceeded to output gamma-corrected image data to the display driver.
청구항 1에 있어서,
상기 영상 처리부는
상기 영상 특성과 상기 배경 특성이 상기 정상 조건일 때, 상기 투과율과 관계없이 상기 입력 영상을 감마 보정없이 상기 표시 구동부로 출력하고, 상기 투과율이 상기 제1 기준값 이하일 때, 상기 영상 특성과 상기 배경 특성과 관계없이 상기 입력 영상을 감마 보정없이 상기 표시 구동부로 출력하는 투명 표시 장치.
The method according to claim 1,
The image processing unit
And outputting the input image to the display driver without gamma correction regardless of the transmittance when the image characteristic and the background characteristic are the normal conditions, and when the transmittance is equal to or less than the first reference value, And outputs the input image to the display driver without gamma correction.
청구항 1에 있어서,
상기 영상 처리부는
상기 감마 보정이 필요할 때, 상기 투과율에 따라, 차등적인 감마값을 갖는 다수의 감마 보정 룩-업 테이블(이하 LUT) 중 어느 하나를 선택하고, 선택된 감마 보정 LUT를 이용하여 상기 입력 영상의 데이터에 해당하는 출력 데이터를 선택하여 출력하고,
상기 투과율이 클수록 상기 감마값이 큰 감마 보정 LUT를 선택하는 투명 표시 장치.
The method according to claim 1,
The image processing unit
Up table (hereinafter referred to as &quot; LUT &quot;) having a different gamma value according to the transmittance when the gamma correction is required, and selects one of the plurality of gamma correction look- And outputs the selected output data,
And selects a gamma correction LUT having a larger gamma value as the transmittance increases.
청구항 1에 있어서,
상기 영상 처리부는
상기 차광판의 구동 시간에 따른 투과율이 LUT 형태로 저장된 투과율 LUT를 이용하여, 상기 차광판의 동작 이후의 구동 시간에 따라 해당하는 투과율을 선택하는 출력하는 것으로 상기 투과율 특성을 판단하는 투명 표시 장치.
The method according to claim 1,
The image processing unit
Wherein the transmittance characteristic is determined by outputting a transmittance corresponding to a driving time of the light shielding plate by using a transmittance LUT stored in an LUT form and selecting a transmittance corresponding to the drive time after the operation of the light shielding plate.
청구항 1에 있어서,
상기 영상 처리부는
상기 입력 영상을 분석하여, 아래 수학식 1과 같이 상기 입력 영상에서 프레임 단위로 저계조 가중치 평균 영상 레벨(이하 WAPL_Low)을 백분율(%)로 산출하고,
<수학식 1>
Figure pat00007

(n은 상기 입력 영상의 상기 프레임에 포함되는 서브픽셀 수이고, Gray는 각 서브픽셀의 계조값)
산출된 WAPL_Low를 제2 기준값 α% (30≤α≤50)와 비교하여 그 제2 기준값 α% 보다 작으면 상기 입력 영상을 상기 어두운 영상으로 판단하고, 그 반대이면 상기 입력 영상을 밝은 영상으로 판단하는 투명 표시 장치.
The method according to claim 1,
The image processing unit
The input image is analyzed to calculate a low grayscale weighted average image level (hereinafter referred to as &quot; WAPL_Low &quot;) as a percentage in units of frames in the input image as shown in Equation 1 below,
&Quot; (1) &quot;
Figure pat00007

(n is the number of subpixels included in the frame of the input image, and Gray is a gray value of each subpixel)
If the calculated WAPL_Low is compared with the second reference value?% (30??? 50), the input image is judged to be the dark image if it is smaller than the second reference value?%, .
청구항 1에 있어서,
상기 영상 처리부는
상기 후면 배경 신호로 센싱된 배경 영상을 분석하여, 아래 수학식 2와 같이 상기 배경 영상에서 프레임 단위로 고계조 가중치 평균 영상 레벨(이하 WAPL_High)을 백분율(%)로 산출하고,
<수학식2>
Figure pat00008

(n은 상기 배경 영상의 상기 프레임에 포함되는 서브픽셀 수이고, Gray는 각 서브픽셀의 계조값)
산출된 WAPL_High를 제3 기준값 β% (50≤β≤70)와 비교하여 그 제3 기준값 β% 보다 크면 상기 밝은 배경으로 판단하고, 그 반대이면 상기 어두운 배경으로 판단하는 투명 표시 장치.
The method according to claim 1,
The image processing unit
(WAPL_High) is calculated as a percentage (%) in units of frames in the background image by analyzing the background image sensed by the backside background signal,
&Quot; (2) &quot;
Figure pat00008

(n is the number of subpixels included in the frame of the background image, and Gray is a gray value of each subpixel)
Compares the calculated WAPL_High with the third reference value?% (50??? 70), judges the light background as being larger than the third reference value?%, And judges the dark background as the opposite.
청구항 1에 있어서,
상기 영상 처리부는
상기 영상 특성과 상기 배경 특성이 상기 어두운 영상 및 상기 밝은 배경이거나, 상기 어두운 영상 및 상기 어두운 배경이거나, 상기 밝은 영상 및 상기 밝은 배경인 경우를 상기 어느 하나의 화질 저하 조건으로 판단하는 투명 표시 장치.
The method according to claim 1,
The image processing unit
Wherein the image quality determining unit determines the image quality degradation condition to be one of the dark image and the bright background, the dark image, the dark background, the bright image, and the bright background.
입력 영상을 분석하여 그 입력 영상이 어두운 영상인지 밝은 영상인지를 나타내는 영상 특성을 판단하는 단계와,
투명 표시 장치의 후면 배경을 센싱하고, 센싱된 후면 배경 신호를 분석하여 상기 후면 배경이 밝은 배경인지 어두운 배경인지를 나타내는 배경 특성을 판단하는 단계와,
차광판의 투과율 특성을 판단하는 단계와,
상기 영상 특성과 상기 배경 특성이 밝은 영상과 상기 어두운 배경인 정상 조건을 제외한 나머지의 화질 저하 조건들 어느 하나에 해당하고, 상기 투과율이 제1 기준값을 초과할 때, 상기 입력 영상에 대하여 화질 개선을 위한 감마 보정을 실시하는 단계와;
상기 감마 보정된 영상을 출력하는 단계를 포함하는 투명 표시 장치의 구동 방법.
Analyzing an input image and determining an image characteristic indicating whether the input image is a dark image or a bright image;
Sensing a back side background of the transparent display device and analyzing the sensed back side background signal to determine a background characteristic indicating whether the back side background is a light background or a dark background;
Determining a transmittance characteristic of the shading plate,
When the transmittance of the input image exceeds the first reference value, image quality improvement is performed on the input image when the transmittance exceeds the first reference value, Performing gamma correction for the gamma correction;
And outputting the gamma-corrected image.
청구항 8에 있어서,
상기 영상 특성과 상기 배경 특성이 상기 정상 조건일 때, 상기 투과율과 관계없이 상기 입력 영상에 대한 감마 보정없이 출력하는 단계와,
상기 투과율이 상기 제1 기준값 이하일 때, 상기 영상 특성과 상기 배경 특성과 관계없이 상기 입력 영상에 대한 감마 보정없이 출력하는 단계를 추가로 포함하는 투명 표시 장치의 구동 방법.
The method of claim 8,
Outputting the input image without gamma correction regardless of the transmittance when the image characteristic and the background characteristic are the normal conditions;
And outputting the input image without performing gamma correction on the input image regardless of the image characteristic and the background characteristic when the transmittance is equal to or less than the first reference value.
청구항 8에 있어서,
상기 감마 보정을 실시하는 단계는
상기 투과율에 따라, 차등적인 감마값을 갖는 다수의 감마 보정 LUT 중 어느 하나를 선택하고, 선택된 감마 보정 LUT를 이용하여 상기 입력 영상의 데이터에 해당하는 출력 데이터를 선택하여 출력하고,
상기 투과율이 클수록 상기 감마값이 큰 감마 보정 LUT를 선택하는 투명 표시 장치의 구동 방법.
The method of claim 8,
The step of performing gamma correction
Selecting one of a plurality of gamma correction LUTs having different gamma values according to the transmittance and selecting and outputting output data corresponding to the input image data using the selected gamma correction LUT,
And selects a gamma correction LUT having a larger gamma value as the transmittance increases.
청구항 8에 있어서,
상기 투과율을 판단하는 단계는
상기 차광판의 구동 시간에 따른 투과율이 LUT 형태로 저장된 투과율 LUT를 이용하여, 상기 차광판의 동작 이후의 구동 시간에 따라 해당하는 투과율을 선택하여 출력하는 투명 표시 장치의 구동 방법.
The method of claim 8,
The step of determining the transmittance
And selecting and outputting a corresponding transmittance according to a driving time after the operation of the shading plate by using a transmittance LUT in which the transmittance according to the driving time of the shading plate is stored in an LUT form.
투명 표시 장치에 있어서,
투과 영역과, 발광 영역을 포함하는 투명 표시부와,
상기 투명 표시 장치의 후면에 배치되어 후면 배경을 센싱하는 배경 센서와,
상기 투명 표시부에 출력 영상을 공급하는 표시 구동부와,
입력 영상을 복수의 픽셀 블록으로 분할하여 픽셀 블록 단위로 계산된 블록별 밝기 특성과, 상기 센싱된 후면 배경의 밝기 특성에 따라 상기 픽셀 블록 단위로 블록별 선명도 개선 강도를 결정하고, 상기 입력 영상에 상기 블록별 선명도 개선 강도를 적용하여 상기 픽셀 블록 단위로 상기 입력 영상의 선명도를 보정하고, 선명도가 보정된 영상을 상기 표시 구동부로 출력하는 영상 처리부를 구비하는 투명 표시 장치.
In a transparent display device,
A transparent display portion including a transmissive region, a light emitting region,
A background sensor disposed on a rear surface of the transparent display device for sensing a background background,
A display driver for supplying an output image to the transparent display unit,
A brightness enhancement strength for each block is determined for each block in accordance with a brightness characteristic of each block calculated on a pixel block basis and a brightness characteristic of a background of the sensed back surface by dividing an input image into a plurality of pixel blocks, And an image processor for correcting the sharpness of the input image in units of the pixel block by applying the sharpness improving strength for each block and outputting the corrected sharpness image to the display driver.
청구항 12에 있어서,
상기 영상 처리부는
상기 입력 영상을 로우 패스 필터링하여 블러 영상을 생성하여 출력하는 로우 패스 필터와,
상기 로우 패스 필터로부터 공급된 상기 블러 영상을, 상기 입력 영상으로부터 차감하여 에지 마스크 영상을 생성하여 출력하는 마스크 생성부와,
상기 입력 영상의 상기 블록별 밝기 특성과, 상기 센싱된 후면 배경의 밝기 특성에 따라 상기 블록별 선명도 개선 강도를 조절하는 선명도 개선 강도 조절부와,
상기 마스크 생성부로부터 공급된 상기 에지 마스크 영상에, 상기 선명도 개선 강도 조절부로부터 공급된 상기 블록별 선명도 개선 강도를 적용하여, 선명도 개선 마스크 영상을 생성하여 출력하는 선명도 개선 마스크 결정부와,
상기 선명도 개선 마스크 결정부로부터 공급된 상기 선명도 개선 마스크 영상과 상기 입력 영상을 합성하여 상기 선명도가 보정된 영상을 상기 패널 구동부로 출력하는 영상 보정부를 구비하는 투명 표시 장치.
The method of claim 12,
The image processing unit
A low pass filter for low pass filtering the input image to generate and output a blur image;
A mask generator for subtracting the blurred image supplied from the low-pass filter from the input image to generate and output an edge mask image,
A sharpness enhancement intensity adjuster for adjusting the sharpness enhancement intensity for each block according to the brightness characteristics of the input image and the sensed background,
A sharpness enhancement mask determination unit for generating and outputting a sharpness enhancement mask image by applying the sharpness enhancement strength for each block supplied from the sharpness enhancement strength adjuster to the edge mask image supplied from the mask generator,
And an image correcting unit for synthesizing the sharpness improving mask image supplied from the sharpness improving mask determining unit and the input image and outputting the corrected image with sharpness to the panel driving unit.
청구항 13에 있어서
상기 선명도 개선 강도 조절부는
상기 입력 영상에 대하여 상기 복수의 픽셀 블록 각각의 블록별 평균 계조를 계산하여 출력하는 평균 계조 계산부와,
상기 센싱된 후면 배경의 밝기에 따라 선명도 개선 강도의 최대값 및 최소값을 결정하여 배경 가중치로 출력하는 배경 가중치 결정부와,
상기 평균 계조 계산부로부터 공급된 블록별 평균 계조(L)와, 상기 배경 가중치 결정부로부터 공급된 선명도 개선 강도의 최대값 및 최소값(Kmax, Kmin)과, 아래 수학식의 함수를 이용하여 상기 블록별 선명도 개선 강도(K)를 결정하는 선명도 개선 강도 결정부를 구비하고,
Figure pat00009

상기 선명도 개선 강도 결정부는
상기 블록별 평균 계조(L)가 미리 설정된 임계값(Lth) 미만일 때 상기 수학식으로 해당 블록의 선명도 개선 강도(K)를 결정하고,
상기 블록별 평균 계조가 상기 임계값 이상일 때 미리 설정된 최소값을 해당 블록의 선명도 개선 강도로 결정하는 투명 표시 장치.
Claim 13
The sharpness improving strength adjusting unit
An average gradation calculation unit for calculating an average gradation of each block of the plurality of pixel blocks with respect to the input image,
A background weight determiner for determining a maximum value and a minimum value of the sharpness enhancement intensity according to the brightness of the sensed back surface background and outputting the background weight value,
(Kmax, Kmin) of the sharpness enhancement strength supplied from the background weight determiner and a function of the following equation, using the average gradation L for each block supplied from the average gradation calculator and the maximum and minimum values And a sharpness improving strength determining section for determining the star sharpness improving strength (K)
Figure pat00009

The sharpness improving strength determining unit
Determines the sharpness improving strength K of the corresponding block when the average gray level L of each block is less than a preset threshold value Lth,
And determines a preset minimum value as the sharpness improving strength of the block when the average gray scale value of each block is equal to or greater than the threshold value.
입력 영상을 로우 패스 필터링하여 블러 영상을 생성하는 단계와,
상기 입력 영상으로부터 상기 블러 영상을 차감하여 에지 마스크 영상을 생성하는 단계와,
상기 입력 영상을 복수의 픽셀 블록으로 분할하여 픽셀 블록 단위로 계산된 블록별 밝기 특성과, 센싱된 후면 배경의 밝기 특성에 따라 상기 픽셀 블록 단위로 블록별 선명도 개선 강도를 결정하는 단계와,
상기 에지 마스크 영상에 상기 블록별 선명도 개선 강도를 적용하여, 선명도 개선 마스크 영상을 생성하는 단계와,
상기 선명도 개선 마스크 영상과 상기 입력 영상을 합성하여 선명도가 보정된 영상을 투명 표시부에 표시하는 단계를 투명 표시 장치의 구동 방법.
Generating a blur image by low-pass filtering an input image;
Generating an edge mask image by subtracting the blurred image from the input image;
Dividing the input image into a plurality of pixel blocks and determining brightness enhancement intensities for each block in units of the pixels in accordance with the brightness characteristics of each block calculated on a pixel block basis basis and the brightness characteristics of the sensed background,
Generating a sharpness enhancement mask image by applying the block sharpness enhancement strength to the edge mask image;
And combining the sharpness improving mask image and the input image to display an image having a corrected sharpness on a transparent display unit.
청구항 15에 있어서,
상기 블록별 선명도 개선 강도를 결정하는 단계는
상기 입력 영상에 대하여 상기 복수의 픽셀 블록 각각의 블록별 평균 계조를 계산하는 단계와,
상기 센싱된 후면 배경의 밝기에 따라 선명도 개선 강도의 최대값 및 최소값을 결정하는 단계와,
상기 블록별 평균 계조(L)가 미리 설정된 임계값(Lth) 미만일 때, 상기 블록별 평균 계조(L)와, 상기 선명도 개선 강도의 최대값 및 최소값(Kmax, Kmin)과, 아래 수학식의 함수를 이용하여 상기 블록별 선명도 개선 강도(K)를 결정하는 단계와,
Figure pat00010

상기 블록별 평균 계조가 상기 임계값 이상일 때 미리 설정된 최소값을 해당 블록의 선명도 개선 강도로 결정하는 단계를 포함하는 투명 표시 장치의 구동 방법.
16. The method of claim 15,
The step of determining the block-by-block sharpness improving strength
Calculating an average gray level of each of the plurality of pixel blocks with respect to the input image;
Determining a maximum value and a minimum value of the sharpness enhancement intensity according to the brightness of the sensed background;
(Kmax, Kmin) of the sharpness enhancement intensity and a function of a function of the following equation (Lmax) when the average gray-scale L of each block is less than a preset threshold value Lth Determining a sharpness improvement strength (K) for each block by using the block sharpness improving strength (K)
Figure pat00010

And determining the preset minimum value as the sharpness improving strength of the corresponding block when the average gradation of each block is equal to or greater than the threshold value.
KR1020160097355A 2015-12-16 2016-07-29 Transparent display device and method for driving the same KR102510568B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220109222A KR102510573B1 (en) 2015-12-16 2022-08-30 Transparent display device and method for driving the same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20150179729 2015-12-16
KR1020150179729 2015-12-16

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020220109222A Division KR102510573B1 (en) 2015-12-16 2022-08-30 Transparent display device and method for driving the same

Publications (2)

Publication Number Publication Date
KR20170072119A true KR20170072119A (en) 2017-06-26
KR102510568B1 KR102510568B1 (en) 2023-03-16

Family

ID=59282713

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020160097355A KR102510568B1 (en) 2015-12-16 2016-07-29 Transparent display device and method for driving the same
KR1020220109222A KR102510573B1 (en) 2015-12-16 2022-08-30 Transparent display device and method for driving the same

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020220109222A KR102510573B1 (en) 2015-12-16 2022-08-30 Transparent display device and method for driving the same

Country Status (1)

Country Link
KR (2) KR102510568B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210002829A (en) * 2019-07-01 2021-01-11 엘지디스플레이 주식회사 Transparent display device and image processing method thereof
KR102330949B1 (en) * 2021-05-26 2021-12-01 주식회사 노아엘이디 Smart LED display board and image output method using the same
WO2023238966A1 (en) * 2022-06-08 2023-12-14 엘지전자 주식회사 Transparent display device and operating method therefor

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130094095A (en) * 2012-02-15 2013-08-23 삼성디스플레이 주식회사 Transparent display device and operating method thereof
KR20140088041A (en) * 2012-12-31 2014-07-09 엘지디스플레이 주식회사 Transparent display apparatus and a method for controling the same
KR20150025872A (en) * 2013-08-30 2015-03-11 삼성디스플레이 주식회사 Transparent display device and driving method thereof

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060021665A (en) * 2004-09-03 2006-03-08 엘지전자 주식회사 Apparatus and method of controlling screen contrast for mobile station

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130094095A (en) * 2012-02-15 2013-08-23 삼성디스플레이 주식회사 Transparent display device and operating method thereof
KR20140088041A (en) * 2012-12-31 2014-07-09 엘지디스플레이 주식회사 Transparent display apparatus and a method for controling the same
KR20150025872A (en) * 2013-08-30 2015-03-11 삼성디스플레이 주식회사 Transparent display device and driving method thereof

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210002829A (en) * 2019-07-01 2021-01-11 엘지디스플레이 주식회사 Transparent display device and image processing method thereof
KR102330949B1 (en) * 2021-05-26 2021-12-01 주식회사 노아엘이디 Smart LED display board and image output method using the same
WO2023238966A1 (en) * 2022-06-08 2023-12-14 엘지전자 주식회사 Transparent display device and operating method therefor

Also Published As

Publication number Publication date
KR102510573B1 (en) 2023-03-16
KR20220127183A (en) 2022-09-19
KR102510568B1 (en) 2023-03-16

Similar Documents

Publication Publication Date Title
KR102322709B1 (en) Image processing method, image processing circuit and display device using the same
US9595229B2 (en) Local dimming method and liquid crystal display
KR102231046B1 (en) Display device and method for driving the same
US9524664B2 (en) Display device, display panel driver and drive method of display panel
EP1564714B1 (en) Display device, liquid crytal monitor, liquid crystal television receiver, and display method
KR100457484B1 (en) Display and driving method of the same
KR101443371B1 (en) Liquid crystal display device and driving method of the same
KR102510573B1 (en) Transparent display device and method for driving the same
TWI426492B (en) Liquid crystal display and method of local dimming thereof
EP3098803B1 (en) Image processing method, image processing circuit, and organic light emitting diode display device using the same
KR101608856B1 (en) Method of dimming driving and display apparatus for performing the method
KR101543277B1 (en) Method of driving a light-source
US20130147864A1 (en) Timing Controller, Liquid Crystal Display Device Having the Same, and Driving Method Thereof
KR101990335B1 (en) Data clipping method and device, and display device using the same
KR20110060268A (en) Liquid crystal display and local dimming control method of thereof
KR102390980B1 (en) Image processing method, image processing circuit and display device using the same
US20080246784A1 (en) Display device
US20190057659A1 (en) Brightness compensation method and circuit
US9779514B2 (en) Display device, display panel driver and driving method of display panel
US20120327140A1 (en) Liquid crystal display for reducing motion blur
CN113031353B (en) Liquid crystal display device having a light shielding layer
KR101761413B1 (en) Image quality enhancement method and display device using the same
KR102642018B1 (en) Transparent display device and method for driving the same
KR101936679B1 (en) Organic light emitting diode display and driving method thereof
KR20070121336A (en) Liquid crystal display and gamma compensative method for liquid crystal display

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
A107 Divisional application of patent
E701 Decision to grant or registration of patent right