KR101371243B1 - Display control apparatus and method thereof - Google Patents

Display control apparatus and method thereof Download PDF

Info

Publication number
KR101371243B1
KR101371243B1 KR1020100037855A KR20100037855A KR101371243B1 KR 101371243 B1 KR101371243 B1 KR 101371243B1 KR 1020100037855 A KR1020100037855 A KR 1020100037855A KR 20100037855 A KR20100037855 A KR 20100037855A KR 101371243 B1 KR101371243 B1 KR 101371243B1
Authority
KR
South Korea
Prior art keywords
user
power saving
display
screen
change
Prior art date
Application number
KR1020100037855A
Other languages
Korean (ko)
Other versions
KR20110118323A (en
Inventor
이주형
손선근
Original Assignee
주식회사 에이텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에이텍 filed Critical 주식회사 에이텍
Priority to KR1020100037855A priority Critical patent/KR101371243B1/en
Publication of KR20110118323A publication Critical patent/KR20110118323A/en
Application granted granted Critical
Publication of KR101371243B1 publication Critical patent/KR101371243B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406—Control of illumination source
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving

Abstract

사용자의 존재 유무와 화면의 변화 유무를 기반으로 디스플레이기를 최적으로 제어하여 절전을 구현할 수 있도록 한 디스플레이기 제어장치 및 그 방법이 개시된다.
개시된 디스플레이기 제어장치는, 사용자를 감지하기 위한 인체감지센서; 디스플레이기에 전달되는 영상신호의 변화를 분석하기 위한 영상신호 분석부와; 상기 인체감지센서와 영상신호 분석부의 출력 신호를 통해 사용자의 존재 유무와 화면의 변화 유무를 판별하고, 상기 판별한 사용자 존재 유무와 화면의 변화 유무를 기반으로 디스플레이기의 밝기를 제어하여 절전을 수행하는 제어부를 구비함으로써, 최적의 절전이 가능하고, 사용자의 시력 보호가 가능하다.Disclosed are a display device controller and a method for controlling power to a display device optimally based on the presence of a user and a change of a screen, thereby realizing power saving.
The disclosed display controller includes a human body sensor for sensing a user; An image signal analyzer for analyzing a change in the image signal transmitted to the display unit; The presence of the user and the change of the screen are determined by the output signal of the human body sensor and the image signal analyzer, and the power saving is performed by controlling the brightness of the display based on the presence of the user and the change of the screen. By providing a control unit, an optimal power saving is possible, and the vision of the user can be protected.

Figure R1020100037855
Figure R1020100037855

Description

디스플레이기 제어장치 및 그 방법{Display control apparatus and method thereof}Display control apparatus and method thereof

본 발명은 디스플레이 장치에 관한 것으로, 더욱 상세하게는 사용자의 존재 유무와 화면의 변화 유무를 기반으로 디스플레이 밝기를 최적으로 제어하여 절전 및 시력 보호를 구현할 수 있도록 한 디스플레이기 제어장치 및 그 방법에 관한 것이다.The present invention relates to a display apparatus, and more particularly, to a display apparatus control apparatus and method for enabling power saving and vision protection by optimally controlling display brightness based on the presence of a user and the change of a screen. will be.

데스크톱 컴퓨터와 휴대용 컴퓨터 등의 컴퓨터에는 사용자에게 정보를 표시하는 디스플레이 기기로서 모니터가 있다. 이러한 모니터는 컴퓨터 본체에 비하여 전력소비가 많아 그 소비전력을 절감하기 위한 방법에 대해서 많은 연구가 진행되고 있다.Computers such as desktop computers and portable computers have monitors as display devices for displaying information to the user. Since such monitors consume more power than computer bodies, many studies have been conducted on methods for reducing power consumption.

최근 디스플레이 모니터로 많이 사용되는 액정표시장치의 경우, 백라이트 유닛을 사용하는데, 이는 구동 전력이 많이 요구된다. 따라서 전력소비가 많아서 그 전력소비를 줄이고자 사용자가 일정시간 동안 입력이 없으면 자동으로 전원절감 모드로 들어가는 방법이 이용되고 있다.In the case of liquid crystal display devices, which are frequently used as display monitors, a backlight unit is used, which requires a lot of driving power. Therefore, in order to reduce the power consumption due to the high power consumption, a method of automatically entering a power saving mode is used when the user does not input for a predetermined time.

또한, 다른 방법으로는 인체감지센서 등을 이용하여 인체의 존재 유무를 판별하고, 인체가 감지되지 않으면 자동으로 절전 모드를 수행하여, 전원을 절감하는 방법도 이용되고 있다.As another method, a method of determining the presence or absence of a human body using a human body sensor or the like and automatically saving power by performing a power saving mode when a human body is not detected has been used.

그러나 상기와 같은 방법 중 첫 번째 방법은, 사용자가 키보드 등을 사용하는 경우에는 사용자와 디스플레이 장치 사이의 거리에 관계없이 일정한 전력을 공급하므로, 모니터의 밝기가 항상 일정하여 보다 사용자에게 효율적인 모니터 밝기를 제공해줄 수 없으며, 이로 인해 시력 보호 기능도 수행할 수 없는 단점이 있다.However, since the first method of the above method provides a constant power regardless of the distance between the user and the display device when the user uses a keyboard, the brightness of the monitor is always constant, thereby providing a more efficient monitor brightness to the user. There is a drawback that it can not provide, which also can not perform eye protection.

즉, 모니터의 밝기는 사용자의 시력에 영향을 끼치게 된다. 예컨대, 사용자가 모니터와 근접한 거리에 위치할 경우 모니터가 너무 밝게 되면 눈부심 현상이 발생할 수 있으며, 사용자가 모니터와 많이 떨어진 경우 모니터가 어둡게 되면 사용자가 모니터에 디스플레이되는 정보를 인식하는 데 어려움이 발생할 수 있다.In other words, the brightness of the monitor affects the eyesight of the user. For example, if the user is in close proximity to the monitor, the monitor may be too bright to cause glare. If the user is far from the monitor, the monitor may be dark, which may make it difficult for the user to recognize the information displayed on the monitor. have.

아울러 두 번째 방법은, 통상 인체감지센서를 모니터의 중앙에 설치하게 되는 데, 이러한 인체감지센서의 감지 영역이 정해져 있어, 사용자가 감지 영역을 벗어나 모니터를 사용하는 경우, 인체가 감지되지 않는 것으로 판단하고 자동으로 절전 모드를 수행하는 오류가 있었다.In addition, in the second method, the human body sensor is usually installed in the center of the monitor, and the detection area of the human body sensor is determined, and when the user uses the monitor out of the detection area, it is determined that the human body is not detected. And there was an error to perform sleep mode automatically.

또한, 인체감지센서를 이용하는 두 번째 방법은 사용자가 모니터를 사용하지 않아도, 모니터에서 인체가 감지되면 모니터를 사용하는 것으로 판단을 하여, 절전 모드를 수행하지 않기 때문에 최적의 절전 방법이라고 볼 수 없다.
In addition, the second method using the human body sensor is not an optimal power saving method because it does not perform a power saving mode by determining that the monitor is used when the human body is detected by the monitor even if the user does not use the monitor.

따라서 본 발명은 상기와 같은 종래 기술에서 발생하는 제반 문제점을 해결하기 위해서 제안된 것으로서,Therefore, the present invention has been proposed to solve all the problems occurring in the prior art as described above,

본 발명이 해결하려는 과제는, 사용자의 존재 유무와 화면의 변화 유무를 기반으로 디스플레이기를 최적으로 제어하여 절전을 구현할 수 있도록 한 디스플레이기 제어장치 및 그 방법을 제공하고자 한 것이다.An object of the present invention is to provide a display device control apparatus and a method for realizing power saving by optimally controlling a display device based on the presence or absence of a user and the change of a screen.

본 발명이 해결하려는 다른 과제는, 디스플레이 장치를 사용하는 사용자와 디스플레이기와의 거리에 따라 백라이트 유닛에 공급되는 전력을 제어하도록 한 절전형 디스플레이기 제어장치 및 그 방법을 제공하는 데 있다.Another object of the present invention is to provide a power saving display controller and apparatus for controlling power supplied to a backlight unit according to a distance between a user who uses the display device and a display.

본 발명이 해결하려는 또 다른 과제는, 사용자가 감지되지 않고 화면 변화가 없으면 자동으로 백라이트 유닛에 공급되는 전력의 최소화하여 절전 효과를 극대화하기 위한 절전형 디스플레이기 제어장치 및 그 방법을 제공하는 데 있다.Another problem to be solved by the present invention is to provide a power-saving display control device and method for maximizing the power saving effect by minimizing the power automatically supplied to the backlight unit when the user is not detected and there is no screen change.

본 발명이 해결하려는 또 다른 과제는, 디스플레이기를 사용하는 사용자와 디스플레이기와의 거리에 따라 화면의 밝기를 자동으로 조절함으로써, 사용자의 시력 보호를 도모해주기 위한 절전형 디스플레이기 제어장치 및 그 방법을 제공하는 데 있다.
Another object of the present invention is to provide a power-saving display controller and method for automatically protecting the user's vision by automatically adjusting the brightness of the screen according to the distance between the user using the display and the display. There is.

상기와 같은 과제들을 해결하기 위한 본 발명에 따른 "디스플레이기 제어장치"는,"Display control device" according to the present invention for solving the above problems,

사용자의 존재 유무와 디스플레이 화면의 변화 유무를 검출하고, 상기 검출한 사용자 존재 유무와 화면의 변화 유무를 기반으로 디스플레이기의 밝기를 제어하여 절전을 수행하는 것을 특징으로 한다.It is characterized in that the power saving is performed by detecting the presence of the user and the change of the display screen, and controlling the brightness of the display device based on the detected presence of the user and the change of the screen.

상기 디스플레이기의 밝기를 제어하여 절전을 수행하는 것은,To save power by controlling the brightness of the display,

절전시 백라이트 유닛의 공급 전력을 최소로 조절하여 절전을 수행하는 것을 특징으로 한다.When power saving, the power supply of the backlight unit is adjusted to the minimum, characterized in that to perform power saving.

상기 디스플레이기의 밝기를 제어하여 절전을 수행하는 것은,To save power by controlling the brightness of the display,

비 절전시 디스플레이기와 사용자와의 거리에 따라 백라이트 유닛의 공급 전력을 가변시켜 디스플레이기의 밝기 조절을 통해 사용자의 시력 보호를 수행하는 기능을 포함한다.
It includes a function to protect the user's eyesight by adjusting the brightness of the display unit by varying the power supply of the backlight unit according to the distance between the display unit and the user during non-power saving.

상기와 같은 과제들을 해결하기 위한 본 발명에 따른 "디스플레이기 제어장치"는,"Display control device" according to the present invention for solving the above problems,

사용자를 감지하기 위한 인체감지센서;A human body sensor for detecting a user;

디스플레이기에 전달되는 영상신호의 변화를 분석하기 위한 영상신호 분석부와;An image signal analyzer for analyzing a change in the image signal transmitted to the display unit;

상기 인체감지센서와 영상신호 분석부의 출력 신호를 통해 사용자의 존재 유무와 화면의 변화 유무를 판별하고, 상기 판별한 사용자 존재 유무와 화면의 변화 유무를 기반으로 디스플레이기의 밝기를 제어하여 절전을 수행하는 제어부를 포함한다.
The presence of the user and the change of the screen are determined by the output signal of the human body sensor and the image signal analyzer, and the power saving is performed by controlling the brightness of the display based on the presence of the user and the change of the screen. It includes a control unit.

또한, 본 발명에 따른 디스플레이기 제어장치는,In addition, the display device control apparatus according to the present invention,

절전 모드와 일반 모드를 선택하기 위한 스위치의 조작에 따라 절전 모드 신호 또는 일반 모드 신호를 상기 제어부에 제공해주며, 절전을 판단하기 위한 인체감지 설정시간 또는 화면 비 변화 설정 시간을 입력하기 위한 기능 입력부와;A function input unit for providing a power saving mode signal or a normal mode signal to the controller according to an operation of a switch for selecting a power saving mode and a normal mode, and inputting a human body detection setting time or an aspect ratio setting setting time to determine power saving; ;

상기 제어부의 디스플레이기 밝기 제어에 따라 백라이트 유닛에 공급되는 전력을 가변하여 화면 밝기를 조절하는 인버터를 더 포함한다.The display device may further include an inverter configured to adjust screen brightness by varying power supplied to the backlight unit according to display brightness control of the controller.

또한, 상기 영상신호 분석부는,In addition, the video signal analysis unit,

입력되는 영상을 프레임 단위로 분할하는 프레임 생성기와;A frame generator for dividing an input image into frame units;

상기 프레임 생성기에서 생성된 프레임을 임시 저장하는 프레임 버퍼와;A frame buffer for temporarily storing the frame generated by the frame generator;

상기 프레임 버퍼에 저장된 프레임에 포함된 화소를 기준 값과 비교하여 각각의 화소의 밝고 어두운 상태를 분석하는 화소 분석기와;A pixel analyzer for analyzing light and dark states of each pixel by comparing the pixels included in the frame stored in the frame buffer with reference values;

상기 화소 분석기에 의해 분석된 밝은 화소와 어두운 화소를 카운트하는 화소 카운터를 포함한다.And a pixel counter for counting bright and dark pixels analyzed by the pixel analyzer.

또한, 상기 영상신호 분석부는,In addition, the video signal analysis unit,

상기 화소 카운터에서 카운트한 밝은 화소 수와 어두운 화소 수를 평균화하여, 그 평균치를 화면 변화 판단 값으로 상기 제어부에 제공하는 평균화기를 더 포함한다.The apparatus further includes an averager for averaging the number of bright pixels and the number of dark pixels counted by the pixel counter and providing the average value to the controller as a screen change determination value.

또한, 상기 제어부는,In addition,

사용자가 감지되고 화면 변화가 있으면 비 절전으로 판단하고 사용자와 디스플레이기 간의 거리에 따라 시력 보호를 위해 디스플레이기의 밝기를 제어하며, 사용자가 감지되고 화면 변화가 설정시간 동안 없으면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하는 것을 특징으로 한다.If the user is detected and there is a screen change, it is judged as non-power saving and the brightness of the display is controlled to protect eyesight according to the distance between the user and the display. It characterized in that to control the supply power to a minimum.

또한, 상기 제어부는,In addition,

사용자가 감지되지 않고 화면의 변화가 없으면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하며, 사용자가 감지되지 않고 화면의 변화가 있으면 사용자가 감지되지 않는 시간을 검출하여 상기 사용자가 감지되지 않는 시간이 설정시간 이상지속되면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하는 것을 특징으로 한다.
If the user is not detected and there is no change in the screen, it is determined to be power saving and the power supply of the backlight unit is controlled to the minimum. If the time is longer than the set time is determined as the power saving, characterized in that to control the power supply of the backlight unit to a minimum.

또한, 상기 제어부는,In addition,

비 절전시 상기 디스플레이기와 상기 사용자와의 거리가 근접할수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 줄여 디스플레이기의 밝기를 어둡게 조절하고, 상기 디스플레이기와 상기 사용자와의 거리가 미리 정해진 감지거리 범위 이내에서 멀어질수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 증가시켜 디스플레이기의 밝기를 밝게 조절하는 것을 특징으로 한다.
During non-power saving, the closer the distance between the display device and the user is, the more gradually the power supplied to the backlight unit is reduced to adjust the brightness of the display device, and the distance between the display device and the user is within a predetermined sensing distance range. As the distance increases, the brightness of the display is brightened by gradually increasing the power supplied to the backlight unit.

상기와 같은 목적을 달성하기 위한 본 발명에 따른 "디스플레이기 제어방법"은,"Display control method" according to the present invention for achieving the above object,

인체감지센서, 영상신호 분석부, 백라이트 유닛의 공급전력을 제어하는 제어부를 포함하는 디스플레이기를 제어하는 방법에 있어서,In the method for controlling a display device comprising a human body sensor, an image signal analyzer, a control unit for controlling the power supply of the backlight unit,

절전 모드가 선택된 경우, 상기 인체감지센서에서 출력되는 감지신호를 분석하여 사용자의 존재 유무를 판단하는 제1단계와;A first step of determining whether a user exists by analyzing a detection signal output from the human body sensor when a power saving mode is selected;

상기 영상신호 분석부의 출력신호를 분석하여 화면 변화 유무를 판단하는 제2단계와;A second step of analyzing an output signal of the image signal analyzer to determine whether a screen change occurs;

상기 제1단계에서 판단한 사용자의 존재 유무와 상기 제2단계에서 판단한 화면 변화 유무를 기반으로 절전 모드와 비 절전 모드를 구분하고, 상기 구분한 절전 모드와 비 절전 모드에 따라 상기 백라이트 유닛의 공급전력을 차등적으로 제어하여 상기 디스플레이기의 밝기 조절을 통해 절전 및 시력 보호를 수행하는 제3단계를 포함한다.
The power saving mode and the non-power saving mode are classified based on the presence or absence of the user determined in the first step and the screen change in the second step, and the power supply of the backlight unit according to the divided power saving mode and the non-power saving mode. And differentially controlling the power saving and vision protection by adjusting the brightness of the display.

상기 제2단계는,The second step comprises:

현재 프레임에 대한 분석 값과 이전 프레임에 대한 분석 값을 연산하고, 차이 값이 설정 값 이하일 경우 화면 변화가 없다고 판단을 하고, 상기 차이 값이 상기 설정 값 이상일 경우 화면 변화가 있다고 판단을 하는 것을 특징으로 한다.Compute the analysis value for the current frame and the analysis value for the previous frame, and if the difference value is less than the set value, it is determined that there is no screen change, and if the difference value is more than the set value, it is determined that there is a screen change. It is done.

상기 제3단계는,In the third step,

사용자가 감지되고 화면 변화가 있으면 비 절전으로 판단하고 사용자와 디스플레이기의 거리에 따라 시력 보호를 위해 디스플레이기의 밝기를 제어하며, 사용자가 감지되고 화면 변화가 설정시간 동안 없으면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하는 것을 특징으로 한다.If the user is detected and there is a screen change, it is judged as non-power saving and the brightness of the display is controlled to protect eyesight according to the distance between the user and the display.If the user is detected and there is no screen change for the set time, it is judged as the power saving and the backlight unit It characterized in that to control the supply power to a minimum.

상기 제3단계는,In the third step,

사용자 감지되지 않고 화면의 변화가 없으면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하며, 사용자가 감지되지 않고 화면의 변화가 있으면 사용자가 감지되지 않는 시간을 검출하여 상기 사용자가 감지되지 않는 시간이 설정시간 이상지속되면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하는 것을 특징으로 한다.If it is not detected by the user and there is no change in the screen, it is determined to be power saving and the power supply of the backlight unit is controlled to the minimum. If more than this set time is determined as the power saving, characterized in that to control the power supply of the backlight unit to a minimum.

상기 제3단계는,In the third step,

비 절전시 상기 디스플레이기와 상기 사용자와의 거리가 근접할수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 줄여 디스플레이기의 밝기를 어둡게 조절하고, 상기 디스플레이기와 상기 사용자와의 거리가 미리 정해진 감지거리 범위 이내에서 멀어질수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 증가시켜 디스플레이기의 밝기를 밝게 조절하는 것을 특징으로 한다.During non-power saving, the closer the distance between the display device and the user is, the more gradually the power supplied to the backlight unit is reduced to adjust the brightness of the display device, and the distance between the display device and the user is within a predetermined sensing distance range. As the distance increases, the brightness of the display is brightened by gradually increasing the power supplied to the backlight unit.

상기 제3단계는,In the third step,

절전시 상기 백라이트 유닛에 공급되는 전력이 최소화되도록 제어하여 디스플레이의 밝기를 가장 어둡게 조절하는 것을 특징으로 한다.
When the power saving, the power supplied to the backlight unit is controlled to minimize the brightness of the display is characterized in that the darkest.

본 발명에 따르면, 사용자의 존재 유무와 화면의 변화 유무를 기반으로 디스플레이기를 최적으로 제어하여 절전을 구현할 수 있는 장점이 있다.According to the present invention, there is an advantage that power saving can be realized by optimally controlling a display device based on the presence or absence of a user and the change of a screen.

또한, 본 발명에 따르면, 사용자가 있는 경우에는, 디스플레이기와 사용자 사이의 거리에 따라 백라이트 유닛에 공급되는 전력을 차등적으로 조절할 수 있으므로, 거리가 가까운 경우에는 전력 공급을 감소함으로써 소비전력을 줄일 수 있는 장점이 있다.In addition, according to the present invention, when there is a user, the power supplied to the backlight unit can be differentially adjusted according to the distance between the display and the user, and when the distance is close, power consumption can be reduced by reducing the power supply. There is an advantage.

또한, 본 발명에 따르면, 사용자와 디스플레이기의 거리에 따라 화면 밝기를 조절함으로써, 사용자의 시력 보호를 도모해주는 장점도 있다.
In addition, according to the present invention, by adjusting the screen brightness according to the distance between the user and the display device, there is an advantage to protect the eyesight of the user.

도 1은 본 발명에 따른 디스플레이기 제어장치의 전체 구성도.
도 2는 도 1의 영상신호 분석부의 실시 예 구성도.
도 3a 및 도 3b는 본 발명에 따른 디스플레이기 제어방법을 보인 흐름도.1 is an overall configuration diagram of a display device control apparatus according to the present invention.
FIG. 2 is a block diagram of an embodiment of an image signal analyzer of FIG. 1. FIG.
3A and 3B are flowcharts illustrating a display device control method according to the present invention.

이하 본 발명의 바람직한 실시 예를 첨부한 도면에 의거 상세히 설명하면 다음과 같다. 본 발명을 설명하기에 앞서 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그에 대한 상세한 설명은 생략한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail.

도 1은 본 발명의 바람직한 실시 예에 따른 디스플레이기 제어장치의 구성을 나타낸 도면이다.1 is a view showing the configuration of a display device control apparatus according to a preferred embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명에 따른 디스플레이기 제어장치는 기능 입력부(110), 인체감지센서(120), 아날로그/디지털 변환기(130), 영상신호 분석부(140), 제어부(150), 전력 공급부(160), 인버터(170) 및 백라이트 유닛(180)을 포함하여 구성된다.As shown in FIG. 1, the display device control apparatus according to the present invention includes a function input unit 110, a human body sensor 120, an analog / digital converter 130, an image signal analyzer 140, and a controller 150. The power supply unit 160 includes an inverter 170 and a backlight unit 180.

기능 입력부(110)는 절전 모드와 일반 모드를 선택하기 위한 모드 선택 스위치와 시간을 설정하기 위한 숫자 키 및 다수의 기능 키를 구비하고, 사용자의 스위치 조작에 따라 절전 모드 신호 또는 일반 모드 신호를 상기 제어부(150)에 제공해주며, 사용자의 조작에 따라 절전을 판단하기 위한 인체감지 설정시간 또는 화면 비 변화 설정 시간을 설정하는 기능을 수행한다.The function input unit 110 includes a mode selection switch for selecting a power saving mode and a normal mode, a numeric key for setting a time and a plurality of function keys, and recalls a power saving mode signal or a normal mode signal according to a user's switch operation. Provided to the controller 150, and performs a function of setting the human body detection setting time or screen ratio change setting time for determining the power saving according to the user's operation.

인체감지센서(120)는 디스플레이기 사용자가 디스플레이기 앞에 있는지 여부와 디스플레이기와 사용자 간의 거리를 감지하기 위한 것으로, 일반적인 정전용량 센서나 적외선 센서 등을 이용할 수 있다. 정전용량 센서는 전계를 발생하는 전계 중에 존재하는 물체 내의 전하의 이동, 분리에 따른 정전용량의 변화를 검출하는 것으로, 플라스틱, 유리, 도자기, 목재와 같은 절연물(유전체) 그리고 물, 기름, 약물과 같은 액체도 검출이 가능하다.The human body sensor 120 is used to detect whether the display user is in front of the display and the distance between the display and the user, and may use a general capacitive sensor or an infrared sensor. The capacitive sensor detects the change in capacitance due to the movement and separation of charges in an object in an electric field that generates an electric field, and insulates (dielectrics) such as plastic, glass, ceramics and wood, and water, oil, and drugs The same liquid can also be detected.

아날로그/디지털 변환기(130)는 컴퓨터 본체에서 디스플레이기에 전달되는 영상 신호가 아날로그 신호일 경우 그에 대응하는 디지털 신호로 변환하는 기능을 수행한다.The analog / digital converter 130 converts an image signal transmitted from the computer main body to the display unit into a digital signal corresponding to the analog signal.

영상신호 분석부(140)는 디스플레이기에 전달되는 영상신호의 변화를 분석하는 기능을 수행하는 것으로서, 도 2에 도시한 바와 같이, 입력되는 영상을 프레임 단위로 분할하는 프레임 생성기(141)와, 상기 프레임 생성기(141)에서 생성된 프레임을 임시 저장하는 프레임 버퍼(142)와, 상기 프레임 버퍼(142)에 저장된 프레임에 포함된 화소를 기준 값과 비교하여 각각의 화소의 밝고 어두운 상태를 분석하는 화소 분석기(143)와, 상기 화소 분석기(143)에 의해 분석된 밝은 화소와 어두운 화소를 카운트하는 화소 카운터(144)와, 상기 화소 카운터(144)에서 카운트한 밝은 화소 수와 어두운 화소 수를 평균화하여, 그 평균치를 화면 변화 판단 값으로 상기 제어부(150)에 제공하는 평균화기(145)를 포함한다.The image signal analyzer 140 performs a function of analyzing a change in the image signal transmitted to the display. As shown in FIG. 2, the image signal analyzer 140 divides the input image into frame units, and A frame buffer 142 for temporarily storing a frame generated by the frame generator 141 and a pixel for analyzing light and dark states of each pixel by comparing pixels included in a frame stored in the frame buffer 142 with reference values An analyzer 143, a pixel counter 144 that counts bright and dark pixels analyzed by the pixel analyzer 143, and an average of the number of bright and dark pixels counted by the pixel counter 144 And an averager 145 which provides the average value to the controller 150 as a screen change determination value.

제어부(150)는 상기 인체감지센서(120)와 영상신호 분석부(140)의 출력 신호를 통해 사용자의 존재 유무와 사용자와 디스플레이기와의 거리, 화면의 변화 유무를 판별하고, 상기 판별한 사용자 존재 유무와 사용자와 디스플레이기와의 거리 및 화면의 변화 유무를 기반으로 디스플레이기의 밝기를 제어하여 절전을 수행하는 기능을 수행하는 것으로서, 일반적인 마이크로프로세서, 마이컴, 중앙처리장치, 컨트롤러와 같은 제어장치를 이용하는 것이 바람직하다.The controller 150 determines whether the user exists, the distance between the user and the display device, and whether there is a change in the screen through the output signals of the human body sensor 120 and the image signal analyzer 140. It performs power saving function by controlling the brightness of the display device based on the presence or absence, the distance between the user and the display device, and whether there is a change in the screen. It is preferable.

전력 공급부(160)는 백라이트용 전력을 공급해주는 기능을 수행하며, 백라이트 유닛(180)은 LCD(Liquid Crystal Display)의 액정이 그 자체로 빛을 내지 못하고 단지 빛을 차단 내지 투과시키는 역할만 하기 때문에 패널 뒤에서 빛을 발산하는 형광등과 같은 광원 장치이다. 이는 광원인 램프와 광학부자재인 반사시트, 도광판, 확산시트, 프리즘시트, 보호시트 및 구조물인 프레임 등으로 구성된다.The power supply unit 160 performs a function of supplying power for the backlight, and the backlight unit 180 does not emit light by itself but merely serves to block or transmit light. A light source device such as a fluorescent lamp that emits light behind a panel. It consists of a lamp, which is a light source, a reflective sheet, an optical subsidiary material, a light guide plate, a diffusion sheet, a prism sheet, a protective sheet, and a frame, which is a structure.

인버터(170)는 전력 공급부(160)로부터 공급되는 전력을 백라이트 유닛(180)에 알맞게 공급해주되, 제어부(150)에서 발생하는 차등적인 제어신호에 따라 백라이트 유닛(180)에 공급된 전력을 조절해주는 역할을 한다.The inverter 170 properly supplies the power supplied from the power supply unit 160 to the backlight unit 180, and adjusts the power supplied to the backlight unit 180 according to the differential control signal generated by the controller 150. Play a role.

절전해제 검출부(190)는 사용자가 절전 해제를 위해 미리 구비된 키를 조작하면 절전 해제 신호를 생성하여 상기 제어부(150)에 전달해주는 역할을 한다. 제어부(150)는 상기와 같은 방법 이외에 절전 상태에서 인체감지센서(120)의 출력을 이용하여 절전을 해제하는 것도 가능하다.The power saving release detection unit 190 generates a power saving release signal and transmits the generated power saving release signal to the control unit 150 when the user manipulates a key provided in advance for power saving release. In addition to the above-described method, the controller 150 may release the power saving by using the output of the human body sensor 120 in the power saving state.

이와 같이 구성된 본 발명에 따른 디스플레이기 제어장치의 작용을 구체적으로 설명하면 다음과 같다.Referring to the operation of the display device control apparatus according to the present invention configured as described above in detail.

먼저, 사용자가 디스플레이기의 전원 스위치를 온 상태로 조작하면, 제어부(150)에는 구동 전원이 공급되어 초기화가 이루어지고, 이후 제어부(150)는 미리 설정된 초기 제어신호를 이용하여 인버터(170)를 제어하게 된다. 이러한 제어에 따라 인버터(170)는 전력 공급부(160)에서 공급되는 전력을 조절한 후, 백라이트 유닛(180)에 공급하여 디스플레이기를 초기 상태의 밝기로 구동하게 된다.First, when the user operates the power switch of the display unit in the on state, the controller 150 is supplied with driving power to perform initialization, and then the controller 150 operates the inverter 170 using a preset initial control signal. To control. According to such control, the inverter 170 adjusts the power supplied from the power supply unit 160, and then supplies the power to the backlight unit 180 to drive the display to the initial state brightness.

이와 같이 디스플레이기가 초기 상태로 구동된 상태에서, 제어부(150)는 일반 제어 또는 절전 제어를 선택적으로 수행하기 위해서, 기능 입력부(110)의 모드 선택 스위치의 조작 상태를 검색하여 모드를 판단하게 된다. 여기서 모드는 절전 동작 없이 디스플레이기를 사용자가 설정한 레벨에 맞게 항상 동일한 밝기로 구동시키기 위한 일반 모드와, 사용자의 존재 유무와 화면 변화 유무 및 사용자와 디스플레이기와의 거리에 따라 디스플레이기의 밝기를 자동으로 조절하여 절전과 시력 보호를 수행하기 위한 절전 모드로 대별된다.In this state in which the display is driven to the initial state, the controller 150 determines the mode by searching the operation state of the mode selection switch of the function input unit 110 to selectively perform general control or power saving control. Here, the mode is a normal mode for always driving the display at the same brightness level according to the user set level without power saving operation, and the brightness of the display is automatically adjusted according to the presence and change of the screen and the distance between the user and the display. It is roughly divided into power saving mode to adjust power saving and eyesight protection.

이러한 일반 모드와 절전 모드는 사용자의 선택 사항으로서, 사용자는 절전 모드를 원할 경우 모드 선택 스위치를 통해 절전 모드를 선택하면 된다. 모드 선택 스위치는 일반적인 온/오프 스위치이거나 슬라이드 스위치 등으로 구현할 수 있다.The normal mode and the power saving mode are optional by the user. The user can select the power saving mode through the mode selection switch if the user wants the power saving mode. The mode selection switch may be implemented as a general on / off switch or a slide switch.

일반 제어(일반 모드)에 대해서는 종래의 디스플레이기 제어 방법과 동일하므로, 본 발명에서는 절전 모드가 선택된 것으로 가정하여 설명한다.General control (normal mode) is the same as the conventional display control method, and therefore, the present invention will be described assuming that the power saving mode is selected.

제어부(150)는 모드를 검색한 결과 절전 모드일 경우에, 인체감지센서(120)에서 출력되는 인체감지신호 즉, 사용자 존재 유무 신호와 사용자와 디스플레이기와의 거리 및 영상신호 분석부(140)에서 출력되는 화면 변화 유무 신호를 기반으로 절전 상태와 비 절전 상태를 판단하고, 그 판단 결과에 따라 백라이트 유닛(180)의 공급 전력을 가변하여 디스플레이기의 밝기를 조절하게 된다.The controller 150 searches for a mode, and when in the power saving mode, the human body detection signal output from the human body sensor 120, that is, a user presence signal and the distance between the user and the display, and the image signal analyzer 140. The power saving state and the non-power saving state are determined based on the output screen change signal and the brightness of the display is adjusted by varying the power supply of the backlight unit 180 according to the determination result.

여기서 인체감지신호는 인체감지 유무 및 거리를 나타내는 신호로서, 제어부(150)는 인체 감지 신호를 분석하여 인체감지 유무와 인체감지에 소요되는 시간을 판단한다. 또한, 인체가 감지되지 않는 경우에는 이러한 비 감지 지속 시간을 누적하여 추후 백라이트 유닛의 전력 제어에 이용하기도 한다. 이러한 인체감지센서는 단순히 인체의 존재만을 감지하는 센서와 인체에 적외선을 송출하고 상기 인체로부터 반사되는 적외선을 수신하고 그 도착시간을 산출하는 센서를 동시에 이용하거나, 상기 인체에 적외선을 송출하고 인체로부터 반사되는 적외선을 수신하여 그 도착시간을 산출하는 센서 하나만을 이용할 수도 있다.Here, the human body detection signal is a signal indicating the presence or absence of human body detection, and the controller 150 analyzes the human body detection signal to determine whether human body is detected and the time required for human body detection. In addition, when the human body is not detected, the non-sensing duration may be accumulated and used for power control of the backlight unit later. The human body sensor uses a sensor that simply detects the presence of the human body and a sensor that emits infrared rays to the human body and receives the infrared rays reflected from the human body and calculates the arrival time, or sends the infrared rays to the human body, Only one sensor can be used to receive the reflected infrared light and calculate its arrival time.

다음으로, 영상신호 분석부(140)는 입력되는 영상신호를 분석하여, 프레임당 평균치를 제어부(150)에 제공한다.Next, the image signal analyzer 140 analyzes the input image signal and provides the average value per frame to the controller 150.

즉, 영상신호 분석부(140)는 프레임 생성기(141)에서 PC 본체에서 디스플레이기로 입력되는 영상신호를 프레임 단위로 분할하게 되고, 프레임 버퍼(142)에서는 상기 프레임 생성기(141)에서 생성된 프레임을 임시 저장하게 된다. 즉, 프레임 단위로 저장을 하게 된다.That is, the image signal analyzer 140 divides the image signal input from the PC main body into the display unit in the frame unit 141 in frame units, and the frame buffer 142 divides the frame generated in the frame generator 141. It will be temporarily saved. That is, it is stored in frame unit.

화소 분석기(143)는 상기 프레임 버퍼(142)에 임시 저장된 프레임을 추출하고, 프레임을 구성하는 각 화소별 밝고 어두움을 분석한다. 여기서 밝고 어두움은 이를 비교하기 위한 기준 값을 이용하는 데, 이러한 기준 값은 일반적인 영상처리장치에서 화소의 밝고 어두움을 판별하기 위해 사용하는 기준 값과 동일하다.The pixel analyzer 143 extracts a frame temporarily stored in the frame buffer 142 and analyzes light and dark for each pixel constituting the frame. Here, the light and dark uses a reference value for comparing the same, which is the same as the reference value used to determine the light and dark of the pixel in a typical image processing apparatus.

따라서 화소별 각각의 밝기를 구분하는 값이 있으며, 이러한 값과 상기 기준 값을 비교하여 해당 화소가 밝은지 아니면 어두운지를 분석한다. 이렇게 분석되는 명암 값은 하나의 화소별로 화소 카운터(144)에 전달된다. 즉, 화소 카운터(144)에는 하나의 프레임을 구성하는 모든 화소에 대한 명암 값이 입력된다.Therefore, there is a value for distinguishing each brightness for each pixel, and the value is compared with the reference value to analyze whether the pixel is bright or dark. The contrast value analyzed in this way is transmitted to the pixel counter 144 for each pixel. That is, the contrast values for all the pixels constituting one frame are input to the pixel counter 144.

화소 카운터(144)는 입력되는 한 프레임에 대한 화소 명암 값을 카운트하고, 그 결과를 평균화기(145)에 전달한다. 즉, 한 프레임에 대해서 각 화소별로 입력되는 명암 값을 카운트하되, 밝은 화소와 어두운 화소를 따로 카운트하여, 밝은 화소 수와 어두운 화소 수를 평균화기(145)에 제공한다.The pixel counter 144 counts pixel contrast values for one input frame and transfers the result to the averager 145. That is, the intensity value input for each pixel is counted for one frame, and the bright and dark pixels are counted separately, and the bright and dark pixels are provided to the averager 145.

평균화기(145)는 제공되는 밝은 화소 수와 어두운 화소 수를 평균치로 환산하여 해당 프레임에 대한 화면 변화 값으로 제어부(150)에 전달하며, 제어부(150)는 하나의 프레임(예를 들어, 현재 프레임)에 대한 화면 변화 값이 입력되면 이전 프레임의 화면 변화 값과 비교하여, 그 차이를 추출하고, 추출한 차이 값과 화면 변화를 판별하기 위해서 미리 설정한 값을 비교하여 그 대소 여부로 화면 변화를 판별하게 된다. 여기서 하나의 프레임에 대한 화면 변환 값이 처음 프레임에 대한 화면 변화 값이고, 이전 프레임이 존재하지 않으면 화면 변화를 바로 판단하지 않고, 현재 프레임을 이전 프레임 값으로 저장하고, 그 다음 프레임에 대해서 입력되는 화면 변화 값을 현재 프레임으로 하여, 그 차이를 추출하면 된다.The averager 145 converts the provided number of bright pixels and dark pixels into an average value and transmits the average value to the controller 150 as a screen change value for the corresponding frame, and the controller 150 transmits one frame (for example, When the screen change value for the frame) is input, the screen change value is compared with the screen change value of the previous frame, and the difference is extracted. Will be determined. Here, the screen change value for one frame is the screen change value for the first frame. If the previous frame does not exist, the screen change value is not immediately determined, and the current frame is stored as the previous frame value and input for the next frame. It is enough to extract the difference by using the screen change value as the current frame.

여기서 차이 값이 상기 미리 설정한 값보다 작을 경우에는 화면의 변화가 없는 것으로 간주하며, 상기 차이 값이 상기 미리 설정한 값과 동일하거나 클 경우에는 화면의 변화가 있다고 판단을 한다. 화면의 변화가 없는 경우에는 화면 변화가 없는 시간을 지속적으로 카운트하여, 이를 추후 백라이트 유닛 제어에 이용한다.If the difference value is smaller than the preset value, it is considered that there is no change of the screen. If the difference value is equal to or larger than the preset value, it is determined that there is a change in the screen. If there is no change in the screen, the time without change in the screen is continuously counted and used for later control of the backlight unit.

다음으로, 제어부(150)는 상기와 같이 인체감지센서(120)에서 획득한 신호와 영상신호 분석부(140)에서 획득한 신호를 기반으로, 절전 모드를 수행해야하는지 비 절전 모드를 수행해야하는지를 판단한다.Next, the controller 150 determines whether to perform the power saving mode or the non-power saving mode based on the signal acquired by the human body sensor 120 and the signal acquired by the image signal analyzer 140 as described above. do.

즉, 제어부(150)는, 인체감지신호를 통해 사용자가 감지되고 영상신호 분석 신호를 통해 화면 변화가 있으면 사용자가 디스플레이기를 사용하는 상태이므로 비 절전 상태로 판단하고, 인체감지신호를 이용하여 사용자와 디스플레이기 간의 거리를 산출한 후, 상기 산출한 사용자와 디스플레이 간의 거리에 따라 시력 보호를 위해 디스플레이기의 밝기를 제어하게 된다.That is, if the user is detected through the human body detection signal and there is a screen change through the image signal analysis signal, the controller 150 determines that the user is in a non-power saving state because the user is using the display device, and uses the human body detection signal to detect the user. After calculating the distance between the display, the brightness of the display is controlled to protect eyesight according to the calculated distance between the user and the display.

또한, 제어부(150)는 인체감지신호를 통해 사용자가 감지되고 영상신호 분석신호를 통해 화면 변화가 없으면, 상기 화면 변화가 없는 시간을 검색한다. 이후 화면 변화가 없는 시간이 미리 설정된 설정시간이상 지속되면 사용자가 존재는 하나 디스플레이기를 사용하지 않는 상태이므로 절전 상태로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하게 된다. 여기서 설정시간은 사용자가 임의로 지정할 수 있으며, 실험에 의해 미리 지정된 시간을 이용할 수도 있다.In addition, if the user is detected through the human body detection signal and there is no screen change through the image signal analysis signal, the controller 150 searches for a time without the screen change. After that, if the time without change of the screen is longer than the preset time, the user is present, but the display unit is not used, and thus the power saving state is determined and the power supply of the backlight unit is minimized. In this case, the setting time may be arbitrarily designated by the user, and a predetermined time may be used by experiment.

또한, 상기 제어부(150)는 인체감지신호를 통해 사용자가 감지되지 않고 영상신호 분석신호를 통해 화면의 변화가 없으면, 사용자가 없으며 디스플레이기를 사용하지 않은 상태이므로 절전 상태로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하게 된다.In addition, if the user is not detected through the human body detection signal and there is no change of the screen through the image signal analysis signal, the controller 150 determines that it is a power saving state because there is no user and the display unit is not used, and the power supply of the backlight unit is applied. Will be controlled to the minimum.

또한, 상기 제어부(150)는 인체감지신호를 통해 사용자가 감지되지 않고 영상신호 분석신호를 통해 화면의 변화가 있으면, 사용자가 감지되지 않는 시간을 검출하여 상기 사용자가 감지되지 않는 시간이 설정시간 이상지속되면, 사용자가 없는 상태에서 영화나 인터넷 플래시 화면이 디스플레이되는 상태이므로 절전 상태로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하게 된다. 여기서 설정시간은 사용자가 임의로 지정할 수 있으며, 실험에 의해 미리 지정된 시간을 이용할 수도 있다.In addition, if the user is not detected through the human body detection signal and the screen is changed through the image signal analysis signal, the controller 150 detects the time when the user is not detected and the time when the user is not detected is longer than the set time. If it continues, the movie or the Internet flash screen is displayed in the absence of the user is determined as a power saving state and the power supply of the backlight unit is minimized. In this case, the setting time may be arbitrarily designated by the user, and a predetermined time may be used by experiment.

백라이트 유닛(180)의 제어는 인버터(170)의 제어를 통해 이루어지게 되는 데, 그 방법은, 비 절전시 상기 디스플레이기와 상기 사용자와의 거리가 근접할수록 상기 백라이트 유닛(180)에 공급되는 전력을 점진적으로 줄여 디스플레이기의 밝기를 어둡게 조절하고, 상기 디스플레이기와 상기 사용자와의 거리가 미리 정해진 감지거리 범위 이내에서 멀어질수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 증가시켜 디스플레이기의 밝기를 밝게 조절하게 된다. 이렇게 디스플레이기의 밝기를 조절하면, 사용자의 시력 보호도 가능하다.The control of the backlight unit 180 is performed through the control of the inverter 170. The method may further include controlling the power supplied to the backlight unit 180 when the distance between the display unit and the user is close when the power saving is not performed. The brightness of the display is gradually reduced to decrease the brightness of the display, and as the distance between the display and the user increases within a predetermined sensing range, the power of the backlight unit is gradually increased to brighten the brightness of the display. Done. By adjusting the brightness of the display in this way, it is possible to protect the eyesight of the user.

또한, 절전시에는 상기 백라이트 유닛(180)에 공급되는 전력이 최소화가 되도록 제어를 하여, 디스플레이기의 밝기를 가장 어둡게 한다.In addition, during power saving, the power supplied to the backlight unit 180 is controlled to minimize the brightness of the display.

여기서 백라이트 유닛(180)을 제어하기 위한 제어 값은, 내부 메모리에 거리에 따라 미리 테이블로 만들어 저장된 제어신호를 인출하여 인버터(170)에 전달하는 방식을 이용하는 것이 바람직하다. 테이블은 미리 실험에 의해 사용자와 디스플레이기와의 거리에 따라 디스플레이기의 밝기를 최적화하기 위해 산출한 백라이트 유닛의 전력 조절용 제어신호가 데이터로 등록된 것을 의미한다. 제어신호는 사용자와 디스플레이기와의 거리에 따라 차등적으로 설정된다.In this case, the control value for controlling the backlight unit 180 may be a method of extracting a control signal that is stored in a table in advance according to a distance in the internal memory and transferring the stored control signal to the inverter 170. The table means that the control signal for adjusting the power of the backlight unit calculated in advance to optimize the brightness of the display device according to the distance between the user and the display device is registered as data. The control signal is differentially set according to the distance between the user and the display.

상기 인버터(170)는 제어부(150)에서 발생한 차등적인 제어신호에 대응하게 전력 공급부(160)에서 공급된 백라이트 유닛 구동용 전력을 조절하여, 백라이트 유닛(180)에 공급하게 되고, 이에 따라 백라이트의 세기가 달라져 결론적으로 디스플레이기의 밝기가 사용자와 디스플레이기와의 거리 및 절전 모드에 따라 조절이 이루어지게 된다. 여기서 전력을 조절하는 인버터는 통상의 전기장치에서 전력을 조절하는 기능이 구비된 인버터를 그대로 채택하게 되므로, 그에 대한 자세한 설명은 생략한다.The inverter 170 adjusts the power for driving the backlight unit supplied from the power supply unit 160 to supply the backlight unit 180 in response to the differential control signal generated by the controller 150. As a result, the brightness of the display is adjusted according to the distance between the user and the display and the power saving mode. In this case, since the inverter for adjusting power adopts an inverter having a function of adjusting power in a general electric device, a detailed description thereof will be omitted.

또한, 디스플레이의 밝기는 최대가 될 경우에는 기존과 동일한 소비전력을 사용하나, 최대가 아닌 경우에는 기존 대비 무조건 소비전력이 줄어들게 되어, 전력이 절감된다.In addition, when the brightness of the display is maximized, the same power consumption is used as before, but when the display brightness is not the maximum, power consumption is unconditionally reduced compared to the existing, and power is saved.

도 3a 및 도 3b는 본 발명의 바람직한 실시 예에 따른 디스플레이기 제어방법을 도시한 흐름도로서, S는 단계(Step)를 나타낸다.3A and 3B are flowcharts illustrating a display device control method according to an exemplary embodiment of the present invention, where S represents a step.

이에 도시한 바와 같이, 절전 모드가 선택된 경우, 인체감지센서에서 출력되는 감지신호를 분석하여 사용자의 존재 유무를 판단하는 제1단계(S101 ~ S109)와; 상기 영상신호 분석부의 출력신호를 분석하여 화면 변화 유무를 판단하는 제2단계(S111, S123)와; 상기 제1단계에서 판단한 사용자의 존재 유무와 상기 제2단계에서 판단한 화면 변화 유무를 기반으로 절전 모드와 비 절전 모드를 구분하고, 상기 구분한 절전 모드와 비 절전 모드에 따라 상기 백라이트 유닛의 공급전력을 차등적으로 제어하여 상기 디스플레이기의 밝기 조절을 통해 절전 및 시력 보호를 수행하는 제3단계(S115 ~ S121, S125 ~ S143)를 포함한다.As shown in the drawing, when the power saving mode is selected, a first step (S101 to S109) of analyzing the detection signal output from the human body sensor to determine the presence of the user; A second step (S111, S123) of analyzing the output signal of the image signal analyzer to determine whether there is a screen change; The power saving mode and the non-power saving mode are classified based on the presence or absence of the user determined in the first step and the screen change in the second step, and the power supply of the backlight unit according to the divided power saving mode and the non-power saving mode. And differentially controlling the power saving and vision protection by controlling the brightness of the display (S115 to S121, S125 to S143).

이와 같이 구성된 본 발명에 따른 디스플레이기 제어방법은, 먼저 단계 S101에서 디스플레이기에 전원이 공급되었는지를 확인하여, 디스플레이기에 전원이 공급된 상태이면 제어부는 모드를 검색한다(S103).In the display control method according to the present invention configured as described above, first check whether power is supplied to the display in step S101, and if the power is supplied to the display, the controller searches for a mode (S103).

여기서 모드는 일반 모드와 절전 모드가 있으며, 상기 모드 검색 결과 사용자가 절전 모드를 선택한 경우에는(S105), 단계 S107로 이동하여 인체 감지 센서의 출력 신호를 분석하게 된다.Here, the mode includes a normal mode and a power saving mode. When the user selects the power saving mode as a result of the mode search (S105), the mode moves to step S107 to analyze the output signal of the human body sensor.

상기 인체 감지 센서의 출력신호를 분석한 결과 사용자가 존재하거나 또는 사용자가 존재하지 않을 경우에 무관하게, 영상신호 분석부의 출력신호를 분석하여, 화면의 변화가 있는지 아니면 화면의 변화가 없는지를 확인한다(S111, S113, S123, S125).As a result of analyzing the output signal of the human body detecting sensor, regardless of the presence or absence of the user, the output signal of the image signal analyzer is analyzed to determine whether there is a change in the screen or there is no change in the screen. (S111, S113, S123, S125).

여기서 화면 변화의 판단은, 현재 프레임에 대한 분석 값과 이전 프레임에 대한 분석 값을 비교하여, 차이 값이 설정 값 이하일 경우 화면 변화가 없다고 판단을 하고, 상기 차이 값이 상기 설정 값 이상일 경우 화면 변화가 있다고 판단을 한다. 상기 설정 값은 화면 변화를 판단하기 위해 적절한 값으로 설정하는 것이 바람직하다. Here, the determination of the screen change, by comparing the analysis value for the current frame and the analysis value for the previous frame, it is determined that there is no screen change when the difference value is less than the set value, and the screen change when the difference value is more than the set value Judging that there is. The setting value is preferably set to an appropriate value to determine the screen change.

다음으로, 인체감지신호를 통해 사용자가 감지되고 영상신호 분석을 통해 화면 변화가 있으면, 사용자가 디스플레이기를 사용하는 상태이므로, 비 절전 상태로 판단하고 사용자와 디스플레이기의 거리에 따라 시력 보호를 위해 디스플레이기의 밝기를 제어하게 된다(S127 ~ S131). Next, if the user is detected through the human body detection signal and there is a screen change through the image signal analysis, the user is using the display, so it is determined to be in a non-power saving state and displayed to protect eyesight according to the distance between the user and the display. The brightness of the device is controlled (S127 to S131).

아울러 인체감지신호를 통해 사용자가 감지되고 영상신호 분석을 통해 화면 변화가 설정시간 동안 없으면, 사용자는 있으나 디스플레이기를 사용하지 않는 상태이므로 절전 상태로 판단하고, 백라이트 유닛의 공급전력을 최소로 제어하게 된다(S135 ~ S139).In addition, if the user is detected through the human body detection signal and the screen change is not performed during the set time through the image signal analysis, the user is determined to be in the power saving state because the user does not use the display device, and the power supply of the backlight unit is minimized. (S135-S139).

또한, 인체감지신호를 통해 사용자가 감지되지 않고 영상신호 분석을 통해 화면의 변화가 없으면, 사용자가 없으며 디스플레이기를 사용하지 않는 상태이므로 절전 상태로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하게 된다(S115 ~ S117).In addition, if the user is not detected through the human body detection signal and there is no change in the screen through the image signal analysis, there is no user and the display unit is not used, so it is determined as a power saving state and the power supply of the backlight unit is controlled to the minimum ( S115-S117).

아울러 인체감지신호를 통해 사용자가 감지되지 않고 영상신호 분석을 통해 화면의 변화가 있으면 사용자가 감지되지 않는 시간을 검출하여 상기 사용자가 감지되지 않는 시간이 설정시간 이상지속되면, 사용자가 없는 상태에서 디스플레이가 영화나 인터넷 플래시 영상을 디스플레이하는 상태이므로 절전 상태로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하게 된다(S119 ~ S121, S115 ~ S117).In addition, if the user is not detected through the human body detection signal and the screen is changed through the analysis of the image signal, the user detects the time when the user is not detected. Since it is a state displaying a movie or an Internet flash image, it is determined as a power saving state and the power supply of the backlight unit is controlled to the minimum (S119 to S121, S115 to S117).

여기서 비 절전시에는 상기 디스플레이기와 상기 사용자와의 거리가 근접할수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 줄여 디스플레이기의 밝기를 어둡게 조절하고, 상기 디스플레이기와 상기 사용자와의 거리가 미리 정해진 감지거리 범위 이내에서 멀어질수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 증가시켜 디스플레이기의 밝기를 밝게 조절하게 된다.In the case of non-power saving, the closer the distance between the display device and the user is, the more gradually the power supplied to the backlight unit is reduced to adjust the brightness of the display to be dark, and the distance between the display device and the user is a predetermined sensing distance range. As the distance increases, the power supplied to the backlight unit is gradually increased to brighten the brightness of the display.

또한, 절전시에는 상기 백라이트 유닛에 공급되는 전력이 최소화되도록 제어하여 디스플레이의 밝기를 가장 어둡게 조절하게 된다.In addition, during power saving, the brightness of the display is darkened by controlling the power supplied to the backlight unit to be minimized.

한편, 절전 상태에서 절전 해제를 위한 신호가 발생하면, 예컨대, 사용자의 움직임이 감지되거나 절전 해제를 위해 별도로 구비된 키가 조작되는 경우에는 즉시 절전 모드를 해제하게 된다(S141 ~ S143).On the other hand, when a signal for canceling power saving occurs in the power saving state, for example, when a user's movement is detected or a key provided separately for power saving is operated, the power saving mode is immediately canceled (S141 to S143).

본 발명은 상술한 특정의 바람직한 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.
It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined in the appended claims and their equivalents. Of course, such modifications are within the scope of the claims.

120… 인체감지센서
140… 영상신호 분석부
141… 프레임 생성기
142… 프레임 버퍼
143… 화소 분석기
144… 화소 카운터
145… 평균화기
150… 제어부
180… 백라이트 유닛120 ... Human sensor
140 ... Image signal analyzer
141 ... Frame generator
142 ... Frame buffer
143... Pixel analyzer
144... Pixel counter
145... Averaging
150 ... The control unit
180... Backlight unit

Claims (16)

삭제delete 삭제delete 삭제delete 디스플레이기를 제어하는 장치에 있어서,
사용자를 감지하기 위한 인체감지센서;
디스플레이기에 전달되는 영상신호의 변화를 분석하기 위한 영상신호 분석부; 및
상기 인체감지센서와 영상신호 분석부의 출력 신호를 통해 사용자의 존재 유무와 화면의 변화 유무를 판별하고, 상기 판별한 사용자 존재 유무와 화면의 변화 유무를 기반으로 디스플레이기의 밝기를 제어하여 절전을 수행하는 제어부를 포함하고,
상기 제어부는,
사용자가 감지되고 화면 변화가 있으면 비 절전으로 판단하고 사용자와 디스플레이기 간의 거리에 따라 시력 보호를 위해 디스플레이기의 밝기를 제어하며,
상기 비 절전시 상기 디스플레이기와 상기 사용자와의 거리가 근접할수록 백라이트 유닛에 공급되는 전력을 점진적으로 줄여 디스플레이기의 밝기를 어둡게 조절하고, 상기 디스플레이기와 상기 사용자와의 거리가 미리 정해진 감지거리 범위 이내에서 멀어질수록 백라이트 유닛에 공급되는 전력을 점진적으로 증가시켜 디스플레이기의 밝기를 밝게 조절하며,
상기 영상신호 분석부는,
입력되는 영상을 프레임 단위로 분할하는 프레임 생성기와;
상기 프레임 생성기에서 생성된 프레임을 임시 저장하는 프레임 버퍼와;
상기 프레임 버퍼에 저장된 프레임에 포함된 화소를 기준 값과 비교하여 각각의 화소의 밝고 어두운 상태를 분석하는 화소 분석기와;
상기 화소 분석기에 의해 분석된 밝은 화소와 어두운 화소를 카운트하는 화소 카운터; 및
상기 화소 카운터에서 카운트한 밝은 화소 수와 어두운 화소 수를 평균화하여, 그 평균치를 화면 변화 판단 값으로 상기 제어부에 제공하는 평균화기를 포함하는 것을 특징으로 하는 디스플레이기 제어장치.
In the apparatus for controlling a display device,
A human body sensor for detecting a user;
An image signal analyzer for analyzing a change in the image signal transmitted to the display unit; And
The presence of the user and the change of the screen are determined by the output signal of the human body sensor and the image signal analyzer, and the power saving is performed by controlling the brightness of the display based on the presence of the user and the change of the screen. Including a control unit
The control unit,
If the user is detected and there is a change in the screen, it is judged as non-power saving and controls the brightness of the display to protect eyesight based on the distance between the user and the display,
In the non-power saving mode, the closer the distance between the display device and the user is, the more gradually the power supplied to the backlight unit is reduced to adjust the brightness of the display device, and the distance between the display device and the user is within a predetermined sensing distance range. As the distance increases, the brightness of the display is brightened by gradually increasing the power supplied to the backlight unit.
The video signal analyzer,
A frame generator for dividing an input image into frame units;
A frame buffer for temporarily storing the frame generated by the frame generator;
A pixel analyzer for analyzing light and dark states of each pixel by comparing the pixels included in the frame stored in the frame buffer with reference values;
A pixel counter for counting bright and dark pixels analyzed by the pixel analyzer; And
And an averager for averaging the number of bright pixels and the number of dark pixels counted by the pixel counter and providing the average value to the controller as a screen change determination value.
삭제delete 삭제delete 삭제delete 삭제delete 제4항에 있어서, 상기 제어부는,
사용자가 감지되지 않고 화면의 변화가 없으면 절전으로 판단하고 백라이트 유닛의 공급전력을 제어하며, 사용자가 감지되지 않고 화면의 변화가 있으면 사용자가 감지되지 않는 시간을 검출하여 상기 사용자가 감지되지 않는 시간이 설정시간 이상지속되면 절전으로 판단하고 백라이트 유닛의 공급전력을 제어하는 것을 특징으로 하는 디스플레이기 제어장치.
5. The apparatus of claim 4,
If the user is not detected and there is no change in the screen, it is determined as a power saving and the power supply of the backlight unit is controlled.If the user is not detected and there is a change in the screen, the time for which the user is not detected The display device control device, characterized in that the power supply of the backlight unit and determines the power saving when the set time is over.
삭제delete 인체감지센서, 영상신호 분석부, 백라이트 유닛의 공급전력을 제어하는 제어부를 포함하는 디스플레이기를 제어하는 방법에 있어서,
절전 모드가 선택된 경우, 상기 인체감지센서에서 출력되는 감지신호를 분석하여 사용자의 존재 유무를 판단하는 제1단계와;
상기 영상신호 분석부의 출력신호를 분석하여 화면 변화 유무를 판단하는 제2단계; 및
상기 제1단계에서 판단한 사용자의 존재 유무와 상기 제2단계에서 판단한 화면 변화 유무를 기반으로 절전 모드와 비 절전 모드를 구분하고, 상기 구분한 절전 모드와 비 절전 모드에 따라 상기 백라이트 유닛의 공급전력을 차등적으로 제어하여 상기 디스플레이기의 밝기 조절을 통해 절전 및 시력 보호를 수행하는 제3단계를 포함하고,
상기 제2단계는,
현재 프레임에 대한 분석 값과 이전 프레임에 대한 분석 값을 연산하여, 차이 값이 설정 값 이하일 경우 화면 변화가 없다고 판단을 하고, 상기 차이 값이 상기 설정 값 이상일 경우 화면 변화가 있다고 판단을 하는 것을 특징으로 하는 디스플레이기 제어방법.
In the method for controlling a display device comprising a human body sensor, an image signal analyzer, a control unit for controlling the power supply of the backlight unit,
A first step of determining whether a user exists by analyzing a detection signal output from the human body sensor when a power saving mode is selected;
A second step of analyzing the output signal of the image signal analyzer to determine whether there is a screen change; And
The power saving mode and the non-power saving mode are classified based on the presence or absence of the user determined in the first step and the screen change in the second step, and the power supply of the backlight unit according to the divided power saving mode and the non-power saving mode. A third step of differentially controlling power saving and vision protection by adjusting brightness of the display;
The second step comprises:
By analyzing the analysis value for the current frame and the analysis value for the previous frame, it is determined that there is no screen change when the difference value is less than the set value, and it is determined that there is a screen change when the difference value is more than the set value. Display control method.
삭제delete 제11항에 있어서, 상기 제3단계는,
사용자가 감지되고 화면 변화가 있으면 비 절전으로 판단하고 사용자와 디스플레이기의 거리에 따라 시력 보호를 위해 디스플레이기의 밝기를 제어하며, 사용자가 감지되고 화면 변화가 설정시간 동안 없으면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하는 것을 특징으로 하는 디스플레이기 제어방법.
The method of claim 11, wherein the third step,
If the user is detected and there is a screen change, it is judged as non-power saving and the brightness of the display is controlled to protect eyesight according to the distance between the user and the display.If the user is detected and there is no screen change for the set time, it is judged as the power saving and the backlight unit Display control method, characterized in that to control the power supply of the minimum.
제11항에 있어서, 상기 제3단계는,
사용자가 감지되지 않고 화면의 변화가 없으면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하며, 사용자가 감지되지 않고 화면의 변화가 있으면 사용자가 감지되지 않는 시간을 검출하여 상기 사용자가 감지되지 않는 시간이 설정시간 이상지속되면 절전으로 판단하고 백라이트 유닛의 공급전력을 최소로 제어하는 것을 특징으로 하는 디스플레이기 제어방법.
The method of claim 11, wherein the third step,
If the user is not detected and there is no change in the screen, it is determined to be power saving and the power supply of the backlight unit is controlled to the minimum. The display device control method, characterized in that when the time is longer than the set time to determine the power saving and to control the power supply of the backlight unit to a minimum.
제11항에 있어서, 상기 제3단계는,
비 절전시 상기 디스플레이기와 상기 사용자와의 거리가 근접할수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 줄여 디스플레이기의 밝기를 어둡게 조절하고, 상기 디스플레이기와 상기 사용자와의 거리가 미리 정해진 감지거리 범위 이내에서 멀어질수록 상기 백라이트 유닛에 공급되는 전력을 점진적으로 증가시켜 디스플레이기의 밝기를 밝게 조절하는 것을 특징으로 하는 디스플레이기 제어방법.
The method of claim 11, wherein the third step,
During non-power saving, the closer the distance between the display device and the user is, the more gradually the power supplied to the backlight unit is reduced to adjust the brightness of the display device, and the distance between the display device and the user is within a predetermined sensing distance range. Display control method, characterized in that to gradually increase the power supplied to the backlight unit to increase the brightness of the display brighter.
제11항에 있어서, 상기 제3단계는,
절전시 상기 백라이트 유닛에 공급되는 전력을 제어하여 디스플레이의 밝기를 가장 어둡게 조절하는 것을 특징으로 하는 디스플레이기 제어방법.The method of claim 11, wherein the third step,
And controlling the power supplied to the backlight unit during power saving to adjust the brightness of the display to be the darkest.
KR1020100037855A 2010-04-23 2010-04-23 Display control apparatus and method thereof KR101371243B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100037855A KR101371243B1 (en) 2010-04-23 2010-04-23 Display control apparatus and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100037855A KR101371243B1 (en) 2010-04-23 2010-04-23 Display control apparatus and method thereof

Publications (2)

Publication Number Publication Date
KR20110118323A KR20110118323A (en) 2011-10-31
KR101371243B1 true KR101371243B1 (en) 2014-03-26

Family

ID=45031942

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100037855A KR101371243B1 (en) 2010-04-23 2010-04-23 Display control apparatus and method thereof

Country Status (1)

Country Link
KR (1) KR101371243B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200027174A (en) 2018-09-04 2020-03-12 주식회사 에이텍 Display control apparatus and method
WO2023033456A1 (en) * 2021-09-06 2023-03-09 삼성전자주식회사 Electronic device and electronic device control method
US11741893B2 (en) 2021-10-22 2023-08-29 Samsung Display Co., Ltd. Display device and method of driving display device

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9208753B2 (en) 2012-09-17 2015-12-08 Elwha Llc Unauthorized viewer detection system and method
US8600110B1 (en) * 2012-09-17 2013-12-03 Elwha Llc Unauthorized viewer detection system and method
KR102121592B1 (en) 2013-05-31 2020-06-10 삼성전자주식회사 Method and apparatus for protecting eyesight
KR102600692B1 (en) * 2016-05-31 2023-11-09 엘지디스플레이 주식회사 Organic Light Emitting Diode Display and Method for the Same
KR20190048977A (en) 2017-10-31 2019-05-09 주식회사 에이텍 PC system with power saving and power control function and method thereof
KR101953209B1 (en) * 2018-08-02 2019-02-28 주식회사 다나와컴퓨터 A method for controling a monitor having the most power saving function during the sleep mode and idle mode
CN114237534A (en) * 2021-12-02 2022-03-25 北京德为智慧科技有限公司 Display and control method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060034780A (en) * 2004-10-19 2006-04-26 엘지전자 주식회사 Display apparatus
KR20080048807A (en) * 2006-11-29 2008-06-03 삼성전자주식회사 Display apparatus and control method thereof
KR20080069410A (en) * 2007-01-23 2008-07-28 삼성전자주식회사 Method and apparatus for controlling backlight of portable display apparatus
KR20090079316A (en) * 2008-01-17 2009-07-22 엘지전자 주식회사 Apparatus and method for image output of display

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060034780A (en) * 2004-10-19 2006-04-26 엘지전자 주식회사 Display apparatus
KR20080048807A (en) * 2006-11-29 2008-06-03 삼성전자주식회사 Display apparatus and control method thereof
KR20080069410A (en) * 2007-01-23 2008-07-28 삼성전자주식회사 Method and apparatus for controlling backlight of portable display apparatus
KR20090079316A (en) * 2008-01-17 2009-07-22 엘지전자 주식회사 Apparatus and method for image output of display

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200027174A (en) 2018-09-04 2020-03-12 주식회사 에이텍 Display control apparatus and method
WO2023033456A1 (en) * 2021-09-06 2023-03-09 삼성전자주식회사 Electronic device and electronic device control method
US11741893B2 (en) 2021-10-22 2023-08-29 Samsung Display Co., Ltd. Display device and method of driving display device

Also Published As

Publication number Publication date
KR20110118323A (en) 2011-10-31

Similar Documents

Publication Publication Date Title
KR101371243B1 (en) Display control apparatus and method thereof
US10585474B2 (en) Electronic display illumination
US8581974B2 (en) Systems and methods for presence detection
TWI442286B (en) Touch control input method and apparatus thereof
KR101917638B1 (en) Power-saving method in display device
CN101814272B (en) Display device and brightness adjusting method thereof
US9384708B2 (en) Display screen management method and device
US10147393B2 (en) Display apparatus and control method thereof
JP2010097608A (en) Liquid crystal display device and driving method thereof
TWI386910B (en) Display device and method for adjusting the luminance thereof
TW201610955A (en) Method and system for adjusting brightness of display screen
US20150109192A1 (en) Image sensing system, image sensing method, eye tracking system, eye tracking method
CN105677089A (en) Touch displayer, touch display device and brightness adjusting method thereof
KR101833992B1 (en) Power saving method of monitor
CN107968939B (en) Display screen processing method and device, storage medium and electronic device
US20060077214A1 (en) Method and apparatus for adjusting the brightness of a display device
US9697797B2 (en) Method and apparatus for displaying content
KR20150043934A (en) Method and apparatus for control brightness of display
KR102110928B1 (en) Display control apparatus and method
KR101929217B1 (en) Method for power consumption reduction of the monitor
KR20110058333A (en) Touch screen device and driving method thereof
CN102163103A (en) Touch input method and touch input device
KR102449879B1 (en) Display device and driving method of the same
KR20120034491A (en) Apparatus and method for control of display
KR20180018971A (en) Brightness control apparatus and method for organic light emitting diode display device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
J201 Request for trial against refusal decision
S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170224

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180402

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190227

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20200303

Year of fee payment: 7