KR100590659B1 - Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith - Google Patents

Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith Download PDF

Info

Publication number
KR100590659B1
KR100590659B1 KR1020040096554A KR20040096554A KR100590659B1 KR 100590659 B1 KR100590659 B1 KR 100590659B1 KR 1020040096554 A KR1020040096554 A KR 1020040096554A KR 20040096554 A KR20040096554 A KR 20040096554A KR 100590659 B1 KR100590659 B1 KR 100590659B1
Authority
KR
South Korea
Prior art keywords
brightness
pupil size
display
size ratio
pupil
Prior art date
Application number
KR1020040096554A
Other languages
Korean (ko)
Other versions
KR20060057405A (en
Inventor
이철연
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020040096554A priority Critical patent/KR100590659B1/en
Publication of KR20060057405A publication Critical patent/KR20060057405A/en
Application granted granted Critical
Publication of KR100590659B1 publication Critical patent/KR100590659B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/16Calculation or use of calculated indices related to luminance levels in display data

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Ophthalmology & Optometry (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치 및 이를 구비한 이동통신 단말기 방법 및 장치에 관한 것이다. The present invention relates to a display device capable of adjusting brightness by sensing a pupil size, and a mobile communication terminal method and apparatus having the same.

본 발명은 자동으로 밝기 조절이 가능한 디스플레이 장치에 있어서, 상기 디스플레이 장치의 사용자의 눈 영상을 캡처하여 눈 영상 데이터를 동공 크기 검출기로 전달하는 기능을 수행하는 카메라부; 상기 카메라부로부터 전달 받은 상기 눈 영상 데이터를 분석하여 동공 및 홍채의 반지름의 비율(이하 “동공 크기비”라 함)을 계산하여 디스플레이 제어부로 전달하는 동공 크기 검출기; 평균 동공 크기비 및 상기 평균 동공 크기비에 대응하는 디스플레이의 밝기값에 대한 데이터를 저장하며, 상기 동공 크기 검출기에서 전달 받은 상기 동공 크기비를 기 저장된 상기 평균 동공 크기비와 비교하여 디스플레이의 밝기를 조절하도록 하는 기능을 수행하는 밝기 조절 프로그램을 저장하는 메모리부; 상기 밝기 조절 프로그램을 구동하여 상기 동공 크기 검출기에서 구한 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기를 조절하는 밝기 조절 제어 신호를 디스플레이로 전달하는 기능을 수행하는 디스플레이 제어부; 및 상기 디스플레이 제어부로부터 상기 밝기 조절 제어 신호를 받아 상기 사용자에게 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기를 제공하는 디스플레이를 포함하는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치를 제공한다.The present invention provides a display device capable of automatically adjusting brightness, comprising: a camera unit for capturing an eye image of a user of the display device and transferring eye image data to a pupil size detector; A pupil size detector which analyzes the eye image data transmitted from the camera unit, calculates a ratio of a radius of a pupil and an iris (hereinafter referred to as a “pupillary size ratio”) and transmits the same to a display controller; Storing data about an average pupil size ratio and a brightness value of the display corresponding to the average pupil size ratio, and comparing the pupil size ratio received from the pupil size detector with the previously stored average pupil size ratio to determine the brightness of the display. A memory unit for storing a brightness adjustment program for performing a function of adjusting; A display controller configured to drive the brightness control program to transmit a brightness control signal for controlling the brightness of the display corresponding to the pupil size ratio obtained by the pupil size detector to a display; And a display configured to receive the brightness adjustment control signal from the display control unit and provide the user with the brightness of the display corresponding to the pupil size ratio. do.

본 발명에 의하면, 디스플레이 장치가 사용자의 동공 크기 변화를 감지하여 사용자 주변의 밝기에 맞춰 디스플레이의 밝기를 자동으로 조절하게 함으로써, 사용자의 눈에 맞는 최적의 디스플레이 밝기를 자동으로 제공할 수 있는 효과가 있다.According to the present invention, the display device detects a change in the pupil size of the user and automatically adjusts the brightness of the display according to the brightness of the user's surroundings, thereby automatically providing an optimal display brightness suitable for the user's eyes. have.

동공 크기, 밝기 조절, 디스플레이Pupil size, brightness control, display

Description

동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치 및 이를 구비한 이동통신 단말기{Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith}Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith}

도 1a는 주변이 보통 정도의 밝기인 경우 동공과 홍채를 나타내는 도면,Figure 1a is a view showing the pupil and the iris when the surrounding is moderate brightness,

도 1b는 주변이 보통 정도의 밝기보다 어두운 경우 홍채가 수축되어 동공이 커지는 것을 나타내는 도면,1B is a view showing that the iris contracts when the surroundings are darker than normal brightness, and the pupils become larger;

도 1c는 주변이 보통 정도의 밝기보다 밝은 경우 홍채가 이완되어 동공이 작아지는 것을 나타내는 도면,Figure 1c is a view showing that the pupil is smaller because the iris is relaxed when the surroundings are brighter than normal brightness,

도 2는 본 발명의 실시예에 따른 동공의 크기 변화를 판단하기 위한 동공과 홍채의 반지름을 나타내는 도면,2 is a view showing the radius of the pupil and the iris for determining the change in the size of the pupil in accordance with an embodiment of the present invention,

도 3은 본 발명의 실시예에 의한 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치의 내부 구성을 간략히 나타낸 블럭도,3 is a block diagram briefly illustrating an internal configuration of a display device capable of adjusting brightness by detecting a pupil size according to an embodiment of the present invention;

도 4a는 구간 설정법을 이용하여, 검출된 동공 크기비에 따라 그에 대응하는 디스플레이의 밝기값을 찾아내는 것을 나타내는 그래프,4A is a graph illustrating finding a brightness value of a display corresponding to the detected pupil size ratio using a segment setting method;

도 4b는 직선 보간법을 이용하여, 검출된 동공 크기비에 따라 그에 대응하는 디스플레이의 밝기값을 찾아내는 것을 나타내는 그래프,4B is a graph illustrating finding a brightness value of a display corresponding to the detected pupil size ratio using linear interpolation;

도 5는 본 발명의 실시예에 따른 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능이 있는 이동통신 단말기의 내부 구성을 개략적으로 나타낸 블럭도이다.5 is a block diagram schematically illustrating an internal configuration of a mobile communication terminal having a function of adjusting a display brightness by detecting a pupil size according to an exemplary embodiment of the present invention.

< 도면의 주요 부분에 대한 부호의 설명 ><Description of Symbols for Main Parts of Drawings>

300 : 카메라부 302 : 동공 크기 검출기 300: camera unit 302: pupil size detector

304 : 메모리부 306 : 디스플레이 제어부304: memory unit 306: display control unit

308 : 디스플레이308: Display

본 발명은 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치 및 이를 구비한 이동통신 단말기에 관한 것이다. 더욱 상세하게는, 주변의 밝기에 따른 사용자의 동공 크기의 변화를 감지하여 디스플레이의 밝기를 자동으로 조절함으로써, 주변의 밝기 상황에 따라 사용자의 눈에 피로를 최소화할 수 있는 최적의 밝기를 자동으로 제공할 수 있는 디스플레이 장치 및 이를 구비한 이동통신 단말기에 관한 것이다.The present invention relates to a display device capable of adjusting brightness by sensing a pupil size and a mobile communication terminal having the same. More specifically, by automatically adjusting the brightness of the display by detecting a change in the pupil size according to the brightness of the surroundings, the optimal brightness is automatically minimized to minimize the fatigue of the eyes according to the surrounding brightness situation. A display device that can be provided and a mobile communication terminal having the same.

종래의 디스플레이 장치, 예를 들어 모니터 또는 TV, 이동통신 단말기의 액정(LCD) 화면 등은 제조 시부터 디스플레이의 밝기가 고정되어 있는 경우도 있으나, 사용자의 편의에 따라 디스플레이의 밝기를 조절할 수 있는 것이 거의 대부분이다. Conventional display devices, such as a monitor or TV, a liquid crystal (LCD) screen of a mobile communication terminal may have a fixed brightness from the beginning of manufacture, but the brightness of the display may be adjusted according to the user's convenience. Almost all of them.

그러나, 디스플레이의 밝기를 조절할 수 있는 디스플레이 장치들도 사용자가 자신에게 맞는 밝기를 원하는 경우, 디스플레이의 밝기를 사용자가 그때마다 직접 셋팅 해야만 하는 불편함이 있었다. However, display devices that can adjust the brightness of the display also have inconveniences in that the user must manually set the brightness of the display whenever the user wants the brightness that suits them.

TV 화면을 예를 들어 보면, 방의 전등이 꺼져서 주위가 평소보다 어두워진 경우, TV 화면이 더 밝게 보여서 눈이 부시므로 TV 화면의 밝기를 더 어둡게 조절할 필요가 있다. 이때 사용자가 TV 화면의 밝기를 더 어둡게 조절하기 위해서는 직접 TV 화면의 밝기를 새로이 셋팅 해야 하는 것이다. 이와 반대로, 방의 전등이 켜져서 주위가 평소보다 밝아진 경우, TV 화면이 더 어둡게 보여서 잘 안보이게 되므로 TV 화면의 밝기를 더 밝게 조절할 필요가 있다. 이때에도 사용자는 TV 화면의 밝기를 더 밝게 조절하기 위해서 직접 TV 화면의 밝기를 새로이 셋팅 해야 하는 불편함이 있는 것이다.Taking a TV screen as an example, if the lights in the room are turned off and the surroundings are darker than usual, the TV screen looks brighter and dazzles, so it is necessary to make the brightness of the TV screen darker. In this case, in order for the user to adjust the brightness of the TV screen to be darker, the user must manually set the brightness of the TV screen. Conversely, if the room's lights are turned on and the surroundings are brighter than usual, the TV screen looks darker and less visible, so it is necessary to adjust the brightness of the TV screen brighter. In this case, the user is inconvenient to set the brightness of the TV screen directly in order to adjust the brightness of the TV screen more brightly.

이처럼 모니터 등과 같이 자체적으로 빛을 발하는 디스플레이 장치를 사용자가 바라보는 경우에는, 사용자가 느끼는 눈의 피로를 최소화하기 위해 주위의 밝기와 차이가 많이 나지 않도록 디스플레이 장치 자체의 밝기 또한 조절될 필요가 있는데, 종래의 디스플레이 장치에서는 주위 환경에 따라 밝기 조절을 그때그때 사용자가 직접 해야만 하는 불편함이 있는 것이다.When the user looks at a display device that emits light of itself, such as a monitor, the brightness of the display device itself needs to be adjusted so that the brightness of the display device does not differ much from the surrounding brightness in order to minimize eye fatigue. In the conventional display device, there is an inconvenience that the user must adjust the brightness at that time according to the surrounding environment.

한편, 이러한 불편함은 특히 이동통신 단말기에서 더욱 두드러지는데, 이동통신 단말기는 사용 시 이동성이 큰 바 주변의 밝기 변화가 많아 그에 따른 이동통신 단말기의 화면 밝기 조절의 필요성이 큼에도 불구하고, 마찬가지로 그때마다 사용자가 밝기 조절을 해야 하는 불편함이 있는 것이다. On the other hand, this inconvenience is particularly prominent in the mobile communication terminal, the mobile communication terminal has a large portability when using it, despite the need to adjust the screen brightness of the mobile communication terminal according to the large change in the brightness of the surroundings, accordingly, then There is an inconvenience that the user must adjust the brightness every time.

이러한 문제점을 해결하기 위해 본 발명은, 사람의 눈동자에 있는 동공이 주변의 밝기에 따라 커지거나 작아지는 원리를 이용해서, 디스플레이 장치가 사용자의 동공 크기 변화를 감지하여 사용자 주변의 밝기에 맞춰 디스플레이의 밝기를 자동으로 조절하게 함으로써, 사용자의 눈에 맞는 최적의 디스플레이 밝기를 자동으로 제공할 수 있는 디스플레이 장치 및 이를 구비한 이동통신 단말기를 제공하는 데 그 목적이 있다. In order to solve this problem, the present invention, by using the principle that the pupil of the human pupil is enlarged or reduced in accordance with the brightness of the surroundings, the display device detects a change in the pupil size of the user to match the brightness of the display around the user It is an object of the present invention to provide a display device capable of automatically providing an optimal display brightness for a user's eyes by automatically adjusting the brightness, and a mobile communication terminal having the same.

이러한 목적을 달성하기 위한 본 발명의 제 1 목적에 의하면, 자동으로 밝기 조절이 가능한 디스플레이 장치에 있어서, 디스플레이 장치의 사용자의 눈 영상을 캡처하여 눈 영상 데이터를 동공 크기 검출기로 전달하는 기능을 수행하는 카메라부; 카메라부로부터 전달 받은 눈 영상 데이터를 분석하여 동공 및 홍채의 반지름의 비율(이하 “동공 크기비”라 함)을 계산하여 디스플레이 제어부로 전달하는 동공 크기 검출기; 평균 동공 크기비 및 평균 동공 크기비에 대응하는 디스플레이의 밝기값에 대한 데이터를 저장하며, 동공 크기 검출기에서 전달 받은 동공 크기비를 기 저장된 평균 동공 크기비와 비교하여 디스플레이의 밝기를 조절하도록 하는 기능을 수행하는 밝기 조절 프로그램을 저장하는 메모리부; 밝기 조절 프로그램을 구동하여 동공 크기 검출기에서 구한 동공 크기비에 대응하는 디스플레이의 밝기를 조절하는 밝기 조절 제어 신호를 디스플레이로 전달하는 기능을 수행하는 디스플레이 제어부; 및 디스플레이 제어부로부터 밝기 조절 제어 신호를 받아 사용자에게 동공 크기비에 대응하는 디스플레이의 밝기를 제공하는 디스플레이를 포함하는 것 을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치를 제공한다.According to a first object of the present invention for achieving this object, in the display device capable of automatically adjusting the brightness, to perform the function of capturing the eye image of the user of the display device to deliver the eye image data to the pupil size detector Camera unit; A pupil size detector which analyzes the eye image data received from the camera unit, calculates a ratio of the radius of the pupil and the iris (hereinafter, referred to as the “pupillary size ratio”) and transmits it to the display controller; This function stores the data on the brightness value of the display corresponding to the average pupil size ratio and average pupil size ratio, and adjusts the brightness of the display by comparing the pupil size ratio received from the pupil size detector with the stored average pupil size ratio. A memory unit for storing a brightness adjusting program for performing the operation; A display control unit for driving a brightness control program to transmit a brightness control signal for controlling a brightness of a display corresponding to a pupil size ratio obtained from a pupil size detector to a display; And a display configured to receive a brightness control signal from a display controller and provide a brightness of a display corresponding to a pupil size ratio to a user.

본 발명의 제 2 목적에 의하면, 자동으로 디스플레이 밝기를 조절하는 디스플레이 밝기 조절 기능을 구비한 이동통신 단말기에서, 이동통신 단말기의 사용자의 눈 영상을 캡처하여 눈 영상 데이터를 동공 크기 검출기로 전달하는 기능을 수행하는 카메라부; 카메라부로부터 전달 받은 눈 영상 데이터를 분석하여 동공 및 홍채의 반지름의 비율(이하 “동공 크기비”라 함)을 계산하여 마이크로프로세서로 전달하는 동공 크기 검출기; 평균 동공 크기비 및 평균 동공 크기비에 대응하는 디스플레이의 밝기값에 대한 데이터를 저장하며, 동공 크기 검출기에서 전달 받은 동공 크기비를 기 저장된 평균 동공 크기비와 비교하여 디스플레이의 밝기를 조절하도록 하는 기능을 수행하는 밝기 조절 프로그램을 저장하는 메모리부; 카메라부 및 동공 크기 검출기를 제어하며, 밝기 조절 프로그램을 구동하여 동공 크기 검출기에서 구한 동공 크기비에 대응하는 디스플레이의 밝기를 조절하는 밝기 조절 제어 신호를 디스플레이부로 전달하는 기능을 수행하는 마이크로프로세서; 마이크로프로세서로부터 밝기 조절 제어 신호를 받아 사용자에게 동공 크기비에 대응하는 디스플레이의 밝기를 제공하는 디스플레이부; 숫자 및 문자 버튼, 기능 선택을 위한 기능 버튼을 구비하는 키 입력부; 및 마이크로프로세서의 제어를 받아 이동통신 단말기와 이동통신망 간의 데이터의 송신과 수신을 담당하는 송/수신부를 포함하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능을 구비한 이동통신 단말기를 제공한다.According to a second object of the present invention, a function of capturing an eye image of a user of a mobile communication terminal and delivering eye image data to a pupil size detector in a mobile communication terminal having a display brightness adjustment function for automatically adjusting display brightness. Camera unit for performing; A pupil size detector which analyzes the eye image data transmitted from the camera unit, calculates a ratio of the radius of the pupil and the iris (hereinafter, referred to as the “pore size ratio”) and transmits it to the microprocessor; This function stores the data on the brightness value of the display corresponding to the average pupil size ratio and average pupil size ratio, and adjusts the brightness of the display by comparing the pupil size ratio received from the pupil size detector with the stored average pupil size ratio. A memory unit for storing a brightness adjusting program for performing the operation; A microprocessor which controls a camera unit and a pupil size detector, and transmits a brightness control signal for controlling a brightness of a display corresponding to a pupil size ratio obtained by the pupil size detector to a display unit by driving a brightness adjustment program; A display unit configured to receive a brightness control signal from a microprocessor and provide a brightness of a display corresponding to a pupil size ratio to a user; A key input unit having number and letter buttons and function buttons for function selection; And a transmitter / receiver configured to transmit and receive data between the mobile communication terminal and the mobile communication network under the control of a microprocessor. to provide.

본 발명의 제 3 목적에 의하면, 디스플레이 장치의 밝기를 자동으로 조절하는 방법으로서, (a) 디스플레이 장치의 사용자의 눈 영상을 캡처하여 눈 영상 데이터를 출력하는 단계; (b) 눈 영상 데이터를 분석하여 동공 및 홍채의 반지름의 비율(이하 “동공 크기비”라 함)을 구하는 단계; (c) 동공 크기비를 기 저장된 평균 동공 크기비와 비교하는 단계; (d) 비교 결과에 따라 디스플레이 장치의 밝기값을 결정하는 단계; 및 (e) 결정된 디스플레이 장치의 밝기값에 따라 디스플레이 장치의 밝기를 설정하는 단계를 포함하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 장치의 밝기 조절을 제어하는 방법을 제공한다.According to a third object of the present invention, there is provided a method of automatically adjusting brightness of a display device, the method comprising: (a) capturing an eye image of a user of a display device and outputting eye image data; (b) analyzing the eye image data to obtain a ratio of the radius of the pupil and the iris (hereinafter referred to as “the pupil size ratio”); (c) comparing the pupil size ratio with a pre-stored average pupil size ratio; (d) determining a brightness value of the display device according to the comparison result; And (e) setting the brightness of the display device according to the determined brightness value of the display device.

이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. First of all, in adding reference numerals to the components of each drawing, it should be noted that the same reference numerals are used as much as possible even if displayed on different drawings. In addition, in describing the present invention, when it is determined that the detailed description of the related well-known configuration or function may obscure the gist of the present invention, the detailed description thereof will be omitted.

사람의 눈동자는 크게 동공과 홍채로 구분되는데, 홍채가 이완하거나 수축함에 따라 동공의 크기가 변하고, 따라서 동공을 통해 망막에 도달하는 광선의 양이 조절된다. 즉, 홍채는 카메라의 조리개에 해당하는 것이다. 홍채의 이완과 수축은 그 속에 있는 동공산대근 및 동공괄약근에 의하여 이루어지는데, 주위의 밝기에 따라서 어두울 때는 빛을 더 많이 받아들이기 위해 홍채가 수축되어 동공이 커지고, 밝을 때는 빛을 더 적게 받아들이도록 홍채가 이완되어 동공이 작아지게 된다. 다 만, 홍채가 이완 또는 수축을 하여도 홍채의 바깥쪽 경계는 변하지 않는다.Human pupils are largely divided into pupils and irises. As the iris relaxes or contracts, the size of the pupil changes, thus controlling the amount of light that reaches the retina through the pupil. That is, the iris corresponds to the aperture of the camera. The relaxation and contraction of the iris is carried out by the sympathetic muscles and coccyx muscles in it, depending on the brightness of the surroundings, the iris contracts to receive more light when it is dark so that the pupils become larger and less light when it is bright. The iris relaxes, resulting in a smaller pupil. However, the outer boundary of the iris does not change when the iris relaxes or contracts.

도 1a 내지 도 1c는 사람의 눈동자에서 동공이 주변의 밝기에 따라 크기가 변하는 것을 나타내는 상태도이다.1A to 1C are state diagrams illustrating the size of a pupil in a human eye according to the surrounding brightness.

도 1a는 주변이 보통 정도의 밝기인 경우 동공(100)과 홍채(102)를 나타낸다. 동공(100)은 홍채(102)와 색깔이 달라 서로의 경계가 구별된다.1A shows the pupil 100 and iris 102 when the surroundings are of moderate brightness. The pupil 100 is different from the iris 102 and the boundaries of each other are distinguished.

도 1b는 주변이 보통 정도의 밝기보다 어두운 경우 홍채(102)가 수축되어 동공(100)이 커지는 것을 나타내며, 도 1c는 주변이 보통 정도의 밝기보다 밝은 경우 홍채(102)가 이완되어 동공(100)이 작아지는 것을 나타낸다. 즉, 주위의 밝기에 따라 동공(100)과 홍채(102)의 크기 비율이 크게 변화되는 것이다.FIG. 1B shows that the iris 102 contracts when the surroundings are darker than normal brightness, resulting in a larger pupil 100. FIG. 1C shows the pupils 100 being relaxed when the surroundings are brighter than normal brightness. ) Decreases. That is, the size ratio of the pupil 100 and the iris 102 is greatly changed according to the surrounding brightness.

이와 같이 사람의 동공은 주변의 밝기에 따라 동공의 크기가 상대적으로 변하기 때문에, 반대로 동공의 크기 변화를 파악하면 주변의 상대적인 밝고 어두운 정도를 판단할 수가 있는 것이다.In this way, the size of the pupil is relatively changed according to the brightness of the human surroundings, on the contrary, by grasping the change in the size of the pupil, it is possible to determine the relative light and dark degree of the surrounding.

한편, 동공의 크기 변화를 알아내기 위해서는 동공과 홍채의 영역을 구분해서 상대적인 크기 비율을 이용하면 된다. 동공과 홍채의 영역 구분은 동공과 홍채의 경계에 해당 하는 홍채 내부 경계와, 공막(Sclera : 흰자위)과 홍채의 경계에 해당하는 홍채 외부 경계를 검출함으로써 가능하다. 홍채 내,외부의 경계추출은 동공 및 홍채의 중심과 반지름의 결정을 통해서 이루어진다. 홍채 영역을 찾아내는 기술은 여러 가지가 공지되어 있는데, 폐곡선적분 연산을 이용하는 방법, 원형 에지 검출기(Circular Edge Detector)를 이용하는 방법, 허프 변환(Hough Transform)을 이용하는 방법, 템플릿을 이용하는 방법 등이 있다. 위의 방법들은 홍채 경계의 모양이 원이라는 가정과, 동공은 다른 영역에 비하여 어둡다는 정보를 이용한다. 일반적으로 사용되는 홍채 영역 추출은 원형 에지(Edge) 검출기를 이용 하는 방법으로, 중심과 반지름을 바꿔가면서 원주의 변화량이 가장 큰 곳을 동공 및 홍채의 경계로 정의한다.On the other hand, in order to find out the change in the size of the pupil, a relative size ratio may be used by dividing the pupil and the iris region. The distinction between the pupil and the iris can be achieved by detecting the inner iris boundary corresponding to the boundary between the pupil and the iris, and the outer iris boundary corresponding to the sclera and the iris boundary. Boundary extraction within and outside the iris is achieved by determining the center and radius of the pupil and iris. Various techniques for finding an iris region are known, such as a method using a closed curve integral calculation, a method using a circular edge detector, a method using a Hough transform, a method using a template, and the like. The above methods use the assumption that the shape of the iris boundary is a circle, and that the pupil is darker than other areas. The commonly used iris region extraction is a method using a circular edge detector, which defines the largest change of the circumference as the boundary between the pupil and the iris by changing the center and radius.

도 2는 본 발명의 실시예에 따른 동공의 크기 변화를 판단하기 위한 동공(200)과 홍채(202)의 반지름을 나타내는 도면이다.2 is a view showing the radius of the pupil 200 and the iris 202 for determining the change in the size of the pupil in accordance with an embodiment of the present invention.

앞서 본 바와 같이 홍채(202)의 반지름(R)은 일정하나 주변의 밝기가 밝아지면 동공(200)의 반지름(r)이 작아지므로 홍채(202)에 대한 동공(200)의 크기 비율(r/R)은 평소보다 작아지게 된다.As seen above, the radius R of the iris 202 is constant, but if the brightness of the surroundings becomes brighter, the radius r of the pupil 200 becomes smaller, so the size ratio of the pupil 200 to the iris 202 (r / R) becomes smaller than usual.

또한, 주변의 밝기가 어두워지면 동공(200)의 반지름(r)이 커지므로 홍채(202)에 대한 동공(200)의 크기 비율(r/R)은 평소보다 커지게 되는 것이다.In addition, when the surrounding brightness becomes dark, the radius r of the pupil 200 increases, so that the size ratio r / R of the pupil 200 to the iris 202 becomes larger than usual.

이와 같이 디스플레이 장치 사용자의 동공의 크기 비율을 이용하면 주변의 상대적인 밝기 변화를 알 수 있고 사용자에게 맞는 디스플레이의 밝기를 찾아낼 수가 있다.As such, by using the size ratio of the pupil of the display device user, the relative brightness change of the surroundings can be known and the brightness of the display suitable for the user can be found.

도 3은 본 발명의 실시예에 의한 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치의 내부 구성을 간략히 나타낸 블럭도이다.3 is a block diagram briefly illustrating an internal configuration of a display device capable of adjusting brightness by detecting a pupil size according to an exemplary embodiment of the present invention.

카메라부(300)는 디스플레이 제어부의 제어에 따라 사용자의 눈 영상, 즉 공막과 동공 및 홍채를 캡처하여 영상 데이터를 동공 크기 검출기(302)로 전달하는 기능을 수행한다. 카메라부(300)는 줌(Zoom) 렌즈를 포함하는 고성능 카메라를 사용하는 것이 바람직하다.The camera unit 300 performs a function of capturing the eye image of the user, that is, the sclera, the pupil, and the iris under the control of the display controller, and transferring the image data to the pupil size detector 302. The camera unit 300 preferably uses a high performance camera including a zoom lens.

동공 크기 검출기(302)는 카메라부(300)로부터 전달 받은 눈 영상 데이터를 파악하여 동공 및 홍채의 반지름의 비율(이하 동공 크기비라 함)을 구해서 디스플레이 제어부(304)로 전달하는 기능을 수행한다. 여기서 동공 크기비를 구하는 과정은 앞서 언급한 폐곡선적분 연산을 이용하는 방법, 원형 에지 검출기를 이용하는 방법, 허프 변환을 이용하는 방법, 템플릿을 이용하는 방법 등이 있다.The pupil size detector 302 grasps the eye image data transmitted from the camera unit 300, obtains a ratio of the radius of the pupil and the iris (hereinafter referred to as the pupil size ratio), and transmits the image to the display controller 304. Here, the process of obtaining the pupil size ratio may include a method using the above-described closed curve integral calculation, a method using a circular edge detector, a method using a Hough transform, a method using a template, and the like.

동공 크기비를 구하는 방법을 보다 구체적인 예로 설명하면 다음과 같다. 먼저 동공의 위치를 찾아야 하는데, 눈 영상에서 동공은 다른 부분에 비하여 낮은 Ggray 레벨 값을 가지므로 눈 영상을 이진화하여 윤곽선(Edge)을 추출하는 방법으로 찾을 수 있다. 이렇게 얻어진 윤곽선을 기반으로 허프 변환을 적용하여 동공의 중심을 추출한다. 이와 같이 찾아낸 동공의 중심을 기반으로 그 중심과 일직선상에 있는 픽셀들의 밝기 차를 비교하여 홍채의 양끝 지점을 찾게 된다. 홍채의 중심과 지름을 알아내기 위해서는 동공과 홍채의 중심은 항상 정확히 일치하지는 않으나 비슷한 위치를 갖게 되는 특징을 이용한다. 찾은 동공의 중심에서 일직선상에 있는 픽셀들의 Gray 레벨 값의 차이를 비교하여 그 변화가 큰 양쪽 지점을 찾아 두 반경을 정규화하여 홍채의 반경을 결정한다.The method of obtaining the pupil size ratio will be described in more detail as follows. First, the position of the pupil should be found. Since the pupil has a lower gray level value than the other parts, it can be found by extracting an edge by binarizing the eye image. The center of the pupil is extracted by applying a Hough transform based on the contour thus obtained. Based on the found center of the pupil, the difference between the brightness of the pixels in the line and the center of the pupil is compared to find the end points of the iris. To determine the center and diameter of the iris, the pupil and the center of the iris do not always exactly match, but use a feature that has a similar position. The radius of the iris is determined by comparing the difference between the gray level values of the pixels in a straight line at the center of the found pupil and finding both points where the change is large.

메모리부(304)는 프로그램 메모리와 일반 메모리를 포함한다. 프로그램 메모리는 동공 크기 검출기(302)에서 구한 동공 크기비를 미리 저장된 평균 동공 크기비와 비교하여 디스플레이(308)의 밝기를 조절하도록 하는 기능을 수행하는 밝기 조절 프로그램을 저장한다. 즉, 밝기 조절 프로그램은 새로 검출한 동공 크기비가 평균 동공 크기비보다 더 작은 경우는 주위가 더 밝아진 경우이므로 디스플레이 (308)의 밝기를 현재 디스플레이의 밝기보다 더 밝게 되도록 하며, 새로 검출한 동공 크기비가 평균 동공 크기비보다 더 큰 경우는 주위가 더 어두워진 경우이므로 디스플레이(308)의 밝기를 현재 디스플레이의 밝기보다 더 어둡게 되도록 하는 기능을 수행한다.The memory unit 304 includes a program memory and a general memory. The program memory stores a brightness adjustment program that performs a function of adjusting the brightness of the display 308 by comparing the pupil size ratio obtained by the pupil size detector 302 with a previously stored average pupil size ratio. That is, the brightness control program causes the brightness of the display 308 to be brighter than the brightness of the current display when the newly detected pupil size ratio is smaller than the average pupil size ratio, so that the brightness of the display 308 is brighter. If the ratio is larger than the average pupil size ratio, the surrounding is darker, and thus the brightness of the display 308 is made darker than the brightness of the current display.

한편, 일반 메모리는 평균 동공 크기비 및 아래에서 설명하게 될 눈금 조정에 필요한 동공 크기비 및 그에 대응하는 디스플레이(308)의 밝기에 대한 데이터들을 저장한다.On the other hand, the general memory stores data on the average pupil size ratio and the pupil size ratio required for the scale adjustment described below and the brightness of the display 308 corresponding thereto.

디스플레이 제어부(306)는 카메라부(300) 및 동공 크기 검출기(302)를 제어하며, 밝기 조절 프로그램을 구동하여 검출된 동공 크기비에 따라 디스플레이(308)의 밝기를 조절하는 제어 신호를 디스플레이로 전달하는 기능을 수행한다.The display controller 306 controls the camera unit 300 and the pupil size detector 302, and transmits a control signal for adjusting the brightness of the display 308 according to the detected pupil size ratio by driving a brightness adjusting program to the display. It performs the function.

디스플레이(308)는 모니터, TV 브라운관, 또는 액정화면 등을 포함하며, 액정화면의 경우 백라이트를 포함하는 개념이다. 디스플레이 제어부(306)로부터 밝기 조절에 대한 제어 신호를 받아 그에 해당하는 디스플레이(308)의 밝기를 제공하게 된다. The display 308 includes a monitor, a TV CRT, or a liquid crystal screen, and in the case of a liquid crystal screen, includes a backlight. The display controller 306 receives the control signal for adjusting the brightness and provides the brightness of the corresponding display 308.

한편, 동공 크기 검출기(302)에서 구한 동공 크기비를 미리 저장된 평균 동공 크기비와 비교하여 디스플레이(308)의 밝기를 조절하는 과정을 보다 상세히 설명하면 다음과 같다.Meanwhile, a process of adjusting the brightness of the display 308 by comparing the pupil size ratio obtained by the pupil size detector 302 with a previously stored average pupil size ratio will be described in detail as follows.

우선 본 발명에 의한 동공 크기에 따른 디스플레이 밝기 조절을 실행하기 위해서는, 사람마다 동공의 크기나 밝기에 따른 동공 크기 변화가 다르고 사용자가 느끼는 주변의 밝기에 따른 최적의 디스플레이 밝기 또한 사람마다 다르기 때문에 사용자가 미리 자신의 동공 크기비 및 그에 대응하는 디스플레이(308)의 밝기를 메모리부(304)에 저장해 놓을 필요가 있다. 즉, 평균적인 밝기의 환경에서 사용자의 동공 크기비를 검출하고 사용자가 그 때의 주위 밝기에 적합하다고 판단되는 디스플레이(308)의 밝기값을 선택하여 저장하는 것이다. 이렇게 저장된 평균 동공 크기비를 기준으로 밝기 조절 프로그램이 검출된 동공 크기비에 맞는 디스플레이(308)의 밝기를 결정하여 밝기를 조절하게 되는 것이다. 또한 사용자에 의해 저장된 평균 동공 크기 및 그에 대응하는 디스플레이(308)의 밝기는 사용자가 임의로 삭제 및 변경이 가능한 사항이다.First of all, in order to perform display brightness adjustment according to the pupil size according to the present invention, a change in pupil size according to pupil size or brightness varies from person to person, and the optimal display brightness according to the surrounding brightness felt by the user also varies from person to person. It is necessary to store the pupil size ratio and the brightness of the display 308 corresponding thereto in advance in the memory unit 304. That is, the pupil size ratio of the user is detected in an environment of average brightness, and the user selects and stores the brightness value of the display 308 determined to be suitable for the ambient brightness at that time. The brightness adjustment program determines the brightness of the display 308 according to the detected pupil size ratio based on the stored average pupil size ratio to adjust the brightness. In addition, the average pupil size stored by the user and the brightness of the display 308 corresponding thereto may be arbitrarily deleted and changed by the user.

한편, 좀 더 정확하게 동공 크기비와 그에 대응하는 디스플레이(308)의 밝기를 결정하기 위해서는 동공 크기비 및 그에 대응하는 디스플레이(308)의 밝기값에 대한 눈금 조정을 좀 더 치밀하게 할 필요가 있는데, 이는 사용자가 보다 많은 동공 크기비 및 그에 대응하는 디스플레이(308)의 밝기값을 저장해서 눈금을 좀 더 촘촘하게 하면 된다. 또한, 이와 같이 저장된 동공 크기비 및 그에 대응하는 디스플레이(308)의 밝기값에 대한 데이터를 이용하여 실제 사용 시 검출된 동공 크기비 및 그에 대응하는 디스플레이(308)의 밝기값을 찾아내는 방법은 여러 가지가 있을 수 있는데, 그 중에서 구간 설정을 이용하는 방법과 보간법을 이용하는 방법을 적용할 수 있을 것이다.On the other hand, in order to more accurately determine the pupil size ratio and the brightness of the display 308 corresponding thereto, it is necessary to more closely adjust the scale of the pupil size ratio and the brightness value of the display 308 corresponding thereto. This allows the user to store more pupil size ratios and corresponding brightness values of the display 308 to make the scale more dense. In addition, there are various methods of finding the pupil size ratio detected in actual use and the brightness value of the display 308 corresponding thereto using data on the stored pupil size ratio and the brightness value of the display 308 corresponding thereto. There may be, among them, a method using interval setting and a method using interpolation may be applied.

도 4a는 구간 설정법을 이용하여, 검출된 동공 크기비에 따라 그에 대응하는 디스플레이의 밝기값을 찾아내는 것을 나타내는 그래프이다.4A is a graph illustrating finding a brightness value of a display corresponding to the detected pupil size ratio using a segment setting method.

사용자가 우선 평균 동공 크기비 및 그에 맞는 디스플레이의 밝기값을 저장 하고, 그 외에 주변이 더 밝은 곳 및 어두운 곳에서의 동공 크기비 및 그에 맞는 디스플레이의 밝기값들을 저장하면, 밝기 조절 프로그램은 저장된 데이터들을 구간 단위로 설정함으로써 실제 검출된 동공 크기비에 맞는 디스플레이의 밝기값을 찾아 디스플레이의 밝기를 조절하게 되는 것이다. 여기서 주위 밝기가 밝아서 동공 크기비가 작아지면 더 밝은 디스플레이의 밝기값이 요구되는 바, 동공 크기비에 대한 디스플레이의 밝기값은 그래프와 같이 반비례하는 형태가 될 것이다.When the user first saves the average pupil size ratio and the corresponding brightness value of the display, and also saves the pupil size ratio in the brighter and darker surroundings and the corresponding brightness values of the display, the brightness control program stores the stored data. By setting them in units of intervals, the brightness of the display that matches the detected pupil size ratio is found and the brightness of the display is adjusted. If the ambient brightness is bright and the pupil size ratio is small, the brightness value of the brighter display is required. The brightness value of the display with respect to the pupil size ratio will be inversely proportional to the graph.

도 4b는 직선 보간법을 이용하여 검출된 동공 크기비에 따라 그에 대응하는 디스플레이의 밝기값을 찾아내는 것을 나타내는 그래프이다.4B is a graph illustrating finding a brightness value of a display corresponding to the pupil size ratio detected using linear interpolation.

보간법이란 실변수 x의 함수 f(x)의 모양은 미지이나, 어떤 간격(등간격이든 부등간격이든 상관없음)을 가지는 2개 이상인 변수의 값 xi(i=1,2,…,n)에 대한 함수값 f(xi)가 알려져 있을 경우, 그 사이의 임의의 x에 대한 함수값을 추정하는 것을 말한다. 실험이나 관측에 의하여 얻은 관측값으로부터 관측하지 않은 점에서의 값을 추정하는 경우 사용되는 방법으로, 직선 보간법 또는 2차, 3차 등의 보간법이 있다.Interpolation means that the shape of the function f (x) of the real variable x is unknown, but the value xi (i = 1,2,…, n) of two or more variables having any interval (regardless of equal or unequal interval). If the function value f (xi) is known, this means estimating the function value for any x in between. As a method used when estimating a value at an unobserved point from observations obtained by experiments or observations, there are linear interpolation methods or interpolation methods such as second and third orders.

사용자가 주변이 밝거나 어두운 곳에서 동공 크기비를 검출시키고 그 주변 밝기에 적합하다고 판단되는 디스플레이의 밝기값들을 저장하면, 밝기 조절 프로그램은 보간법에 의해 실제 검출된 동공 크기비에 맞는 디스플레이의 밝기값을 찾아 디스플레이의 밝기를 조절하게 되는 것이다.When the user detects the pupil size ratio in bright or dark surroundings and stores the brightness values of the display determined to be suitable for the ambient brightness, the brightness control program displays the brightness value of the display corresponding to the pupil size ratio actually detected by interpolation. To adjust the brightness of the display.

도 5는 본 발명의 실시예에 따른 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능이 있는 이동통신 단말기의 내부 구성을 개략적으로 나타낸 블럭도이 다.5 is a block diagram schematically illustrating an internal configuration of a mobile communication terminal having a function of adjusting a display brightness by detecting a pupil size according to an exemplary embodiment of the present invention.

본 발명에 따른 이동통신 단말기(500)는 카메라부(502), 동공 크기 검출기(504), 메모리부(506), 마이크로프로세서(508), 표시부(510), 키 입력부(512), 송/수신부(514) 등을 포함한 구성을 갖는다. The mobile communication terminal 500 according to the present invention includes a camera unit 502, a pupil size detector 504, a memory unit 506, a microprocessor 508, a display unit 510, a key input unit 512, and a transmitter / receiver unit. 514 and the like.

본 발명의 실시예에 따른 이동통신 단말기(500)는 PDA(Personal Digital Assistant), 셀룰러폰, PCS(Personal Communication Service)폰, GSM(Global System for Mobile)폰, W-CDMA(Wideband CDMA)폰, CDMA-2000폰, MBS(Mobile Broadband System)폰 등을 포함한다. 여기서, MBS폰은 현재 논의되고 있는 제 4세대 시스템에서 사용될 핸드폰을 말한다. 또한, 이동통신 단말기(500)가 무선 인터넷망을 통해 무선 인터넷으로 접속하여 멀티미디어 데이터를 수신하기 위해서는 소정의 프로토콜을 이용하여 무선 인터넷과 데이터를 송수신할 수 있는 브라우저(Browser)가 설치되어 있어야 하는데, 이러한 브라우저는 WAP(Wireless Application Protocol) 브라우저, ME(Mobile Explorer) 브라우저, I-mode, BREW(Binary Runtime Environment for Wireless) 등이 될 수 있으나, 여기에 한정되는 것은 아니다.Mobile communication terminal 500 according to an embodiment of the present invention is a PDA (Personal Digital Assistant), cellular phone, PCS (Personal Communication Service) phone, GSM (Global System for Mobile) phone, W-CDMA (Wideband CDMA) phone, CDMA-2000 phone, Mobile Broadband System (MBS) phone and the like. Here, MBS phone refers to a mobile phone to be used in the fourth generation system currently being discussed. In addition, in order for the mobile communication terminal 500 to access the wireless Internet through a wireless Internet network and receive multimedia data, a browser capable of transmitting and receiving data with the wireless Internet using a predetermined protocol should be installed. Such a browser may be a wireless application protocol (WAP) browser, a mobile explorer (ME) browser, an I-mode, a binary runtime environment for wireless (BREW), etc., but is not limited thereto.

카메라부(502)는 사용자의 눈 영상, 즉 공막과 동공 및 홍채를 캡처하여 영상 데이터를 동공 크기 검출기(504)로 전달하는 기능을 수행한다. 카메라부(502)는 줌(Zoom) 렌즈를 포함하는 고성능 카메라를 사용하는 것이 바람직하다.The camera 502 captures an eye image of the user, that is, the sclera, the pupil, and the iris, and transmits the image data to the pupil size detector 504. The camera unit 502 preferably uses a high performance camera including a zoom lens.

동공 크기 검출기(504)는 카메라부(502)로부터 전달 받은 눈 영상 데이터를 파악하여 동공 크기비를 구해서 마이크로프로세서(508)로 전달하는 기능을 수행한 다. 동공 크기 검출기(504)에서 동공 크기비를 구하는 과정은 앞서 설명한 바와 같다.The pupil size detector 504 grasps the eye image data received from the camera unit 502, obtains the pupil size ratio, and delivers it to the microprocessor 508. The process of obtaining the pupil size ratio in the pupil size detector 504 is as described above.

메모리부(506)는 램(RAM), NV(Non Volatile) 메모리, 플래쉬(Flash) 메모리 및 MMC(Multi Media Card) 메모리 등을 포함하는 개념으로서, 마이크로프로세서(508)의 동작 프로그램, 시스템 프로그램이 저장되며, 동작 프로그램, 시스템 프로그램은 통상 롬(ROM) 영역에 저장되고 필요에 의해 소거가 가능하다. The memory unit 506 is a concept including a RAM, a non-volatile memory, a flash memory, a MMC memory, and the like. An operation program and a system program of the microprocessor 508 may be used. The operating program and the system program are usually stored in a ROM area and can be erased as necessary.

또한 메모리부(506)는 본 발명의 실시예에 따른 이동통신 단말기(500)의 디스플레이부의 백라이트가 켜진 상태인 경우, 동공 크기 검출기(504)에서 구한 동공 크기비를 미리 저장된 평균 동공 크기비와 비교하여 디스플레이부(510)의 밝기를 조절하도록 하는 기능을 수행하는 밝기 조절 프로그램을 저장한다. 즉, 밝기 조절 프로그램은 새로 검출한 동공 크기비가 평균 동공 크기비보다 더 작은 경우는 주위가 더 밝아진 경우이므로 디스플레이부(510)의 밝기를 현재 디스플레이의 밝기보다 더 밝게 되도록 하며, 새로 검출한 동공 크기비가 평균 동공 크기비보다 더 큰 경우는 주위가 더 어두워진 경우이므로 디스플레이부(510)의 밝기를 현재 디스플레이의 밝기보다 더 어둡게 되도록 하는 기능을 수행한다. 또한, 메모리부(506)는 평균 동공 크기비 및 앞서 설명한 눈금 조절에 필요한 동공 크기비 및 그에 대응하는 디스플레이부(510)의 밝기에 대한 데이터들을 저장한다.In addition, when the backlight of the display unit of the mobile communication terminal 500 is turned on, the memory unit 506 compares the pupil size ratio obtained by the pupil size detector 504 with a previously stored average pupil size ratio. Store a brightness adjustment program that performs a function of adjusting the brightness of the display unit 510. That is, if the newly detected pupil size ratio is smaller than the average pupil size ratio, the brightness is increased. Therefore, the brightness control program makes the brightness of the display unit 510 brighter than the brightness of the current display. If the ratio is larger than the average pupil size ratio, the surrounding becomes darker, and thus the brightness of the display unit 510 is made darker than the brightness of the current display. In addition, the memory unit 506 stores data on the average pupil size ratio, the pupil size ratio required for the scale adjustment described above, and the brightness of the display unit 510 corresponding thereto.

한편, 이동통신 단말기는 모드 상태 저장부와 가입자 정보 저장부(SIM: Subscriber Identity Module)를 포함한다(미도시). 모드 상태 저장부는 키 입력부에 의해 선택된 이동통신 단말기의 현재 동작 모드를 상태 플래그(Flag)(0, 1, 2, ...)로 저장하는데, 마이크로프로세서(508)는 이동통신 단말기가 수신 모드인지, 발신 모드인지, 촬영 모드인지, 저장 모드인지, 통화 모드인지 등을 구분하기 위해 각각의 모드마다 고유한 상태 플래그를 할당하여 모드 상태 저장부를 갱신한다. 가입자 정보 저장부에는 가입자 단말기 등록 정보가 저장되어 있다. 여기서, 가입자 단말기 등록 정보는 이동통신망에서 가입자 단말기마다 부여되는 고유 번호로서, 가입자 정보 저장부는 카드 형태로 삽입하도록 되어 있다. Meanwhile, the mobile communication terminal includes a mode state storage unit and a subscriber identity module (SIM) (not shown). The mode state storage unit stores the current operation mode of the mobile communication terminal selected by the key input unit as status flags (0, 1, 2, ...), and the microprocessor 508 determines whether the mobile communication terminal is the reception mode. The mode state storage unit is updated by assigning a unique state flag to each mode to distinguish whether the call mode, the shooting mode, the storage mode, the call mode, and the like is performed. Subscriber terminal registration information is stored in the subscriber information storage unit. Here, the subscriber station registration information is a unique number assigned to each subscriber station in the mobile communication network, and the subscriber information storage unit is inserted in the form of a card.

마이크로프로세서(508)는 모드 상태 저장부에 저장되어 있는 상태 플래그를 근거로 이동통신 단말기(500)의 전반적인 동작을 제어하며, 내부는 산술논리연산기, 레지스터, 프로그램 카운터, 명령 디코더, 제어회로 등으로 구성되어 있다. 마이크로프로세서(508)는 주기억장치에 저장되어 있는 명령어를 인출하여 해독하고, 해독된 명령어를 실행하며 실행 결과를 다시 주기억장치에 저장할 수 있는 기능 등을 자동으로 수행함과 동시에 입출력 장치들과도 데이터 교환을 수행한다. The microprocessor 508 controls the overall operation of the mobile communication terminal 500 based on the state flag stored in the mode state storage unit. The microprocessor 508 uses arithmetic logic operators, registers, program counters, command decoders, control circuits, and the like. Consists of. The microprocessor 508 automatically retrieves and decodes the instructions stored in the main memory, executes the decoded instructions, and automatically executes a function of storing the execution result again in the main memory. Do this.

특히, 마이크로프로세서(508)는 본 발명의 실시예에 따른 이동통신 단말기(500)의 디스플레이부(510)의 전원 또는 백라이트가 켜지는 경우, 밝기 조절 프로그램을 구동하여 디스플레이부(510)의 밝기를 조절하도록 제어하는 기능을 수행한다. 또한, 카메라부(502) 및 동공 크기 검출기(504)를 제어한다.In particular, when the power or the backlight of the display unit 510 of the mobile communication terminal 500 is turned on, the microprocessor 508 drives the brightness control program to adjust the brightness of the display unit 510. Function to control to adjust. In addition, the camera unit 502 and the pupil size detector 504 are controlled.

디스플레이부(510)는 백라이트를 포함하는 개념으로 주로 액정(LCD) 화면을 사용하며, 일반적으로 배터리(Battery)의 사용 상태, 전파의 수신 강도, 날짜와 시간을 포함하여 이동통신 단말기(500)의 전반적인 동작 상태를 표시해 준다. The display unit 510 mainly includes a liquid crystal (LCD) screen, which includes a backlight, and generally includes a state of use of a battery, a reception strength of radio waves, and a date and time. Displays the overall operating status.

키 입력부(512)는 전화번호 등의 숫자를 입력하기 위한 다수의 키버튼을 구 비하고 있다. 이러한 키버튼은 통상적으로 12개의 숫자키(0 ~ 9, *, #), 다수의 기능키, 다수의 커서(Cursor) 이동키 등을 포함한다. The key input unit 512 has a plurality of key buttons for inputting numbers such as telephone numbers. Such key buttons typically include 12 numeric keys (0 to 9, *, #), a plurality of function keys, a plurality of cursor movement keys, and the like.

송/수신부(514)는 마이크로프로세서(508)의 제어를 받아 음성 신호와 전기 신호를 증폭하고 변조하여 안테나를 통해 데이터를 송/수신하는 기능을 수행하며, 디지털 신호 처리부(516), 베이스밴드 변환부(518), 스피커(520), 마이크로폰(522), RF 신호 처리부(524), 안테나(528) 등으로 구성된다. The transmitter / receiver 514 performs a function of amplifying and modulating a voice signal and an electric signal under the control of the microprocessor 508 to transmit / receive data through an antenna, and the digital signal processor 516 and baseband conversion. The unit 518, the speaker 520, the microphone 522, the RF signal processor 524, the antenna 528, and the like.

디지털 신호 처리부(516)는 베이스밴드 변환부(518)와 주고받는 데이터에 대해 부호화(Encoding)하거나 복호화(Decoding)하는 데이터 처리 기능을 수행하고, 다중 경로의 잡음 제거를 위해 이퀄라이즈 기능을 수행하는 디지털 신호 처리 프로세서이다. 또한, 디지털 신호 처리부(516)는 베이스밴드 변환부(518)로부터 수신 메시지 데이터(RX DATA)를 수신한다. The digital signal processor 516 performs a data processing function of encoding or decoding data transmitted and received with the baseband converter 518, and performs an equalization function to remove noise of a multipath. Digital signal processing processor. In addition, the digital signal processor 516 receives the received message data RX DATA from the baseband converter 518.

베이스밴드 변환부(518)는 RF 신호 처리부(524)와 디지털 신호 처리부(516), 스피커(520) 및 마이크로폰(522) 사이에 송수신되는 신호를 기저 대역의 신호로 변환하며, 디지털-아날로그 변환 및 아날로그-디지털 변환 등을 처리하는 기능을 수행한다. 또한, 베이스밴드 변환부(518)는 마이크로프로세서(508)로부터 입력된 송신 메시지 데이터(TX DATA)를 송신 메시지 신호(TXIQ)로 변환해 RF 신호 처리부(524)로 출력하거나, RF 신호 처리부(524)로부터 입력된 수신 메시지 신호(RXIQ)를 수신 메시지 데이터(RX DATA)로 변환해 디지털 신호 처리부(516)로 출력한다. 그리고 베이스밴드 변환부(518)는 RF 신호 처리부(524)의 전력에 대한 이득을 자동으로 제어한다(AGC).The baseband converter 518 converts signals transmitted and received between the RF signal processor 524 and the digital signal processor 516, the speaker 520, and the microphone 522 into baseband signals, and converts the digital-to-analog converter and the It performs functions such as analog-to-digital conversion. In addition, the baseband converter 518 converts the transmission message data TX DATA input from the microprocessor 508 into a transmission message signal TXIQ and outputs it to the RF signal processor 524 or the RF signal processor 524. The received message signal (RXIQ) inputted from) is converted into received message data (RX DATA) and output to the digital signal processor 516. The baseband converter 518 automatically controls the gain for the power of the RF signal processor 524 (AGC).

스피커(520)는 베이스밴드 변환부(518)로부터 출력되는 오디오 신호를 가청음으로 출력하며, 마이크로폰(522)은 사용자의 음성 입력을 전기적인 신호로 변환한다. The speaker 520 outputs an audio signal output from the baseband converter 518 as an audible sound, and the microphone 522 converts a user's voice input into an electrical signal.

RF 신호 처리부(524)는 송신 메시지 신호(TXIQ)를 RF(Radio Frequency) 신호로 변환해 안테나(526)로 출력하거나, 안테나(526)로부터 인가된 RF 신호를 수신 메시지 신호(RXIQ)로 변환해 베이스밴드 변환부(518)로 출력한다. 안테나(526)는 RF 신호를 공중으로 송출하거나, 공중으로부터 수신한 RF 신호를 RF 신호 처리부(524)로 전달한다.The RF signal processor 524 converts the transmission message signal TXIQ into a radio frequency (RF) signal and outputs it to the antenna 526, or converts an RF signal applied from the antenna 526 into a reception message signal RXIQ. Output to the baseband converter 518. The antenna 526 transmits an RF signal to the air or transmits an RF signal received from the air to the RF signal processor 524.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely illustrative of the technical idea of the present invention, and those skilled in the art to which the present invention pertains may make various modifications and changes without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The protection scope of the present invention should be interpreted by the following claims, and all technical ideas within the equivalent scope should be interpreted as being included in the scope of the present invention.

이상에서 설명한 바와 같이 본 발명에 의하면, 디스플레이 장치가 사용자의 동공 크기 변화를 감지하여 사용자 주변의 밝기에 적합한 디스플레이의 밝기를 자동으로 조절하게 하는 효과가 있다. 또한, 사용자마다 사용자가 느끼는 주변 밝기 에 맞는 디스플레이의 밝기 정도가 다르므로, 사용자가 직접 자신에게 가장 적합하다고 판단되는 밝기 데이터를 저장하여 이를 이용해 디스플레이의 밝기를 자동으로 조절하도록 함으로써, 사용자의 눈에 맞는 최적의 디스플레이 밝기를 자동으로 제공하여 눈의 피로를 최소화할 수 있는 효과가 있다.As described above, according to the present invention, the display device detects a change in the pupil size of the user and automatically adjusts the brightness of the display suitable for the brightness around the user. In addition, since the brightness of the display is different according to the ambient brightness felt by the user, the user directly stores the brightness data that is determined to be the most suitable for the user and automatically adjusts the brightness of the display. By automatically providing the optimal display brightness that fits, you can minimize eye strain.

Claims (21)

자동으로 밝기 조절이 가능한 디스플레이 장치에 있어서,In the display device that can automatically adjust the brightness, 상기 디스플레이 장치의 사용자의 눈 영상을 캡처하여 눈 영상 데이터를 동공 크기 검출기로 전달하는 기능을 수행하는 카메라부;A camera unit for capturing an eye image of a user of the display device and transferring the eye image data to a pupil size detector; 상기 카메라부로부터 전달 받은 상기 눈 영상 데이터를 분석하여 동공 및 홍채의 반지름의 비율(이하 “동공 크기비”라 함)을 계산하여 디스플레이 제어부로 전달하는 동공 크기 검출기;A pupil size detector which analyzes the eye image data transmitted from the camera unit, calculates a ratio of a radius of a pupil and an iris (hereinafter referred to as a “pupillary size ratio”) and transmits the same to a display controller; 평균 동공 크기비 및 상기 평균 동공 크기비에 대응하는 디스플레이의 밝기값에 대한 데이터를 저장하며, 상기 동공 크기 검출기에서 전달 받은 상기 동공 크기비를 기 저장된 상기 평균 동공 크기비와 비교하여 디스플레이의 밝기를 조절하도록 하는 기능을 수행하는 밝기 조절 프로그램을 저장하는 메모리부;Storing data about an average pupil size ratio and a brightness value of the display corresponding to the average pupil size ratio, and comparing the pupil size ratio received from the pupil size detector with the previously stored average pupil size ratio to determine the brightness of the display. A memory unit for storing a brightness adjustment program for performing a function of adjusting; 상기 밝기 조절 프로그램을 구동하여 상기 동공 크기 검출기에서 구한 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기를 조절하는 밝기 조절 제어 신호를 디스플레이로 전달하는 기능을 수행하는 디스플레이 제어부; 및A display controller configured to drive the brightness control program to transmit a brightness control signal for controlling the brightness of the display corresponding to the pupil size ratio obtained by the pupil size detector to a display; And 상기 디스플레이 제어부로부터 상기 밝기 조절 제어 신호를 받아 상기 사용자에게 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기를 제공하는 디스플레이A display configured to receive the brightness control signal from the display controller and provide the user with the brightness of the display corresponding to the pupil size ratio 를 포함하는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.Display device capable of adjusting the brightness by detecting the pupil size, characterized in that it comprises a. 제 1 항에 있어서,The method of claim 1, 상기 동공 크기 검출기는 원형 에지 검출 방법 또는 허프 변환을 이용하는 방법으로 상기 동공 크기비를 구하는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.And the pupil size detector is configured to obtain the pupil size ratio by using a circular edge detection method or a Hough transform. 제 1 항에 있어서,The method of claim 1, 상기 메모리부에 저장되는 상기 평균 동공 크기비 및 상기 평균 동공 크기비에 대응하는 상기 디스플레이의 밝기값은, 상기 사용자의 편의에 따라 선택되어 저장되는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The brightness value of the display corresponding to the average pupil size ratio and the average pupil size ratio stored in the memory unit may be selected and stored according to the user's convenience. Display device. 제 3 항에 있어서,The method of claim 3, wherein 상기 사용자의 편의에 따라 선택되어 저장되는 상기 평균 동공 크기비 및 상기 평균 동공 크기비에 대응하는 상기 디스플레이의 밝기값은, 상기 사용자의 편의에 따라 삭제 및 변경이 가능한 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The brightness value of the display corresponding to the average pupil size ratio and the average pupil size ratio that are selected and stored according to the user's convenience may be deleted and changed according to the user's convenience. Display device with adjustable brightness. 제 1 항에 있어서,The method of claim 1, 상기 밝기 조절 프로그램은 상기 동공 크기 검출기에서 전달 받은 상기 동공 크기비를 기 저장된 상기 평균 동공 크기비와 비교하여, 상기 동공 크기비가 상기 평균 동공 크기비보다 크면 상기 디스플레이의 밝기를 평균 디스플레이의 밝기보다 어둡게 하고, 상기 동공 크기비가 상기 평균 동공 크기비보다 작으면 상기 디스플레이의 밝기를 상기 평균 디스플레이의 밝기보다 밝게 조절하도록 하는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The brightness adjusting program compares the pupil size ratio received from the pupil size detector with the previously stored average pupil size ratio, and if the pupil size ratio is larger than the average pupil size ratio, the brightness of the display is darker than the brightness of the average display. And adjusting the brightness of the display so that the brightness of the display is brighter than the brightness of the average display when the pupil size ratio is smaller than the average pupil size ratio. 제 1 항에 있어서,The method of claim 1, 상기 밝기 조절 프로그램은 상기 메모리부에 기 저장된 두 개 이상의 동공 크기비 및 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기값들을 기초로 하여, 상기 동공 크기 검출기에서 구한 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기값을 결정하는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The brightness control program is configured to display the display corresponding to the pupil size ratio obtained by the pupil size detector based on two or more pupil size ratios previously stored in the memory unit and brightness values of the display corresponding to the pupil size ratio. Display device capable of adjusting the brightness by detecting the pupil size, characterized in that for determining the brightness value of. 제 6 항에 있어서,The method of claim 6, 상기 메모리부에 기 저장된 상기 두 개 이상의 동공 크기비 및 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기값들은, 상기 디스플레이 장치의 사용자의 편의에 따라 선택되어 저장되는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The brightness values of the display corresponding to the two or more pupil size ratios and the pupil size ratios pre-stored in the memory unit are selected and stored according to the user's convenience of the display device. Display device with adjustable brightness. 제 7 항에 있어서,The method of claim 7, wherein 상기 사용자 편의에 따라 선택되어 저장되는 상기 두 개 이상의 동공 크기비 및 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기값들은, 상기 사용자의 편의에 따라 삭제 및 변경이 가능한 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The two or more pupil size ratios selected and stored according to the user's convenience and the brightness values of the display corresponding to the pupil size ratio can be deleted and changed according to the user's convenience. Display device with adjustable brightness. 제 6 항에 있어서,The method of claim 6, 상기 밝기 조절 프로그램은 구간 설정법 또는 보간법을 이용하여, 상기 동공 크기 검출기에서 구한 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기값을 결정하는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The brightness control program is a display device capable of adjusting the brightness by detecting the pupil size, characterized in that for determining the brightness value of the display corresponding to the pupil size ratio obtained by the pupil size detector using the interval setting method or interpolation method. 제 1 항에 있어서,The method of claim 1, 상기 디스플레이는 모니터, TV 브라운관, 액정 화면(LCD : Liquid Crystal Display)을 포함하는 것을 특징으로 하는 동공 크기를 감지하여 밝기 조절이 가능한 디스플레이 장치.The display may include a monitor, a TV CRT, and a liquid crystal display (LCD). The display apparatus may detect brightness of the pupil and adjust brightness. 자동으로 디스플레이 밝기를 조절하는 디스플레이 밝기 조절 기능을 구비한 이동통신 단말기에서,In a mobile communication terminal having a display brightness control function to automatically adjust the display brightness, 상기 이동통신 단말기의 사용자의 눈 영상을 캡처하여 눈 영상 데이터를 동공 크기 검출기로 전달하는 기능을 수행하는 카메라부;A camera unit for capturing an eye image of a user of the mobile communication terminal and delivering eye image data to a pupil size detector; 상기 카메라부로부터 전달 받은 상기 눈 영상 데이터를 분석하여 동공 및 홍채의 반지름의 비율(이하 “동공 크기비”라 함)을 계산하여 마이크로프로세서로 전달하는 동공 크기 검출기;A pupil size detector which analyzes the eye image data received from the camera unit, calculates a ratio of the radius of the pupil and the iris (hereinafter referred to as the “pore size ratio”) and transmits it to a microprocessor; 평균 동공 크기비 및 상기 평균 동공 크기비에 대응하는 상기 디스플레이의 밝기값에 대한 데이터를 저장하며, 상기 동공 크기 검출기에서 전달 받은 상기 동공 크기비를 기 저장된 상기 평균 동공 크기비와 비교하여 상기 디스플레이의 밝기를 조절하도록 하는 기능을 수행하는 밝기 조절 프로그램을 저장하는 메모리부;Storing data about an average pupil size ratio and a brightness value of the display corresponding to the average pupil size ratio, and comparing the pupil size ratio received from the pupil size detector with the previously stored average pupil size ratio A memory unit for storing a brightness adjusting program for performing a function of adjusting the brightness; 상기 카메라부 및 상기 동공 크기 검출기를 제어하며, 상기 밝기 조절 프로그램을 구동하여 상기 동공 크기 검출기에서 구한 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기를 조절하는 밝기 조절 제어 신호를 디스플레이부로 전달하는 기능을 수행하는 마이크로프로세서; A function of controlling the camera unit and the pupil size detector and transmitting a brightness control signal for controlling the brightness of the display corresponding to the pupil size ratio obtained by the pupil size detector by driving the brightness adjustment program to a display unit; A microprocessor for performing; 상기 마이크로프로세서로부터 상기 밝기 조절 제어 신호를 받아 상기 사용자에게 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기를 제공하는 디스플레이부;A display unit configured to receive the brightness control signal from the microprocessor and provide the user with brightness of the display corresponding to the pupil size ratio; 숫자 및 문자 버튼, 기능 선택을 위한 기능 버튼을 구비하는 키 입력부; 및A key input unit having number and letter buttons and function buttons for function selection; And 상기 마이크로프로세서의 제어를 받아 상기 이동통신 단말기와 이동통신망 간의 데이터의 송신과 수신을 담당하는 송/수신부Transmitter / receiver responsible for transmitting and receiving data between the mobile communication terminal and the mobile communication network under the control of the microprocessor. 를 포함하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능을 구비한 이동통신 단말기.Mobile communication terminal having a function of adjusting the display brightness by detecting the pupil size, characterized in that it comprises a. 제 11 항에 있어서,The method of claim 11, 상기 디스플레이부는 LCD(Liquid Crystal Display) 및 백라이트를 포함하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능을 구비한 이동통신 단말기.The display unit includes a liquid crystal display (LCD) and a backlight, the mobile communication terminal having a function of adjusting the display brightness by detecting the pupil size. 제 11 항에 있어서,The method of claim 11, 상기 마이크로프로세서는 상기 디스플레이부의 전원이 켜져 있을 때 상기 카메라부를 작동시키는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능을 구비한 이동통신 단말기.The microprocessor is a mobile communication terminal having a function of adjusting the display brightness by detecting the pupil size, characterized in that for operating the camera unit when the display unit is powered on. 제 11 항에 있어서,The method of claim 11, 상기 밝기 조절 프로그램은 상기 동공 크기 검출기에서 전달 받은 상기 동공 크기비를 기 저장된 상기 평균 동공 크기비와 비교하여, 상기 동공 크기비가 상기 평균 동공 크기비보다 크면 상기 디스플레이의 밝기를 평균 디스플레이의 밝기보다 어둡게 하고, 상기 동공 크기비가 상기 평균 동공 크기비보다 작으면 상기 디스플레이의 밝기를 상기 평균 디스플레이의 밝기보다 밝게 조절하도록 하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능을 구비한 이동통신 단말기.The brightness adjusting program compares the pupil size ratio received from the pupil size detector with the previously stored average pupil size ratio, and if the pupil size ratio is larger than the average pupil size ratio, the brightness of the display is darker than the brightness of the average display. And when the pupil size ratio is smaller than the average pupil size ratio, adjusting the display brightness by detecting the pupil size, wherein the display brightness is adjusted to be brighter than the average display brightness. . 제 11 항에 있어서,The method of claim 11, 상기 밝기 조절 프로그램은 상기 메모리부에 기 저장된 두 개 이상의 동공 크기비 및 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기값들을 기초로 하여, 상기 동공 크기 검출기에서 구한 상기 동공 크기비에 대응하는 상기 디스플레이의 밝기값을 결정하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능을 구비한 이동통신 단말기.The brightness control program is configured to display the display corresponding to the pupil size ratio obtained by the pupil size detector based on two or more pupil size ratios previously stored in the memory unit and brightness values of the display corresponding to the pupil size ratio. The mobile communication terminal having a function of adjusting the display brightness by detecting the pupil size, characterized in that for determining the brightness value of. 제 11 항에 있어서, The method of claim 11, 상기 이동통신 단말기는 셀룰러폰, PCS폰, 개인휴대정보 단말기(PDA : Personal Digital Assistant), GSM(Global System for Mobile)폰, W-CDMA(Wideband CDMA)폰, CDMA-2000폰, MBS(Mobile Broadband System)폰을 포함하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 밝기를 조절하는 기능을 구비한 이동통신 단말기.The mobile communication terminal includes a cellular phone, a PCS phone, a personal digital assistant (PDA), a global system for mobile (GSM) phone, a wideband CDMA (W-CDMA) phone, a CDMA-2000 phone, and a mobile broadband (MBS). System) A mobile communication terminal having a function of adjusting the display brightness by detecting the pupil size, characterized in that it comprises a phone. 디스플레이 장치의 밝기를 자동으로 조절하는 방법으로서,As a method of automatically adjusting the brightness of the display device, (a) 상기 디스플레이 장치의 사용자의 눈 영상을 캡처하여 눈 영상 데이터를 출력하는 단계;(a) capturing an eye image of a user of the display device and outputting eye image data; (b) 상기 눈 영상 데이터를 분석하여 동공 및 홍채의 반지름의 비율(이하 “동공 크기비”라 함)을 구하는 단계;(b) analyzing the eye image data to obtain a ratio of the radius of the pupil and the iris (hereinafter referred to as “pupillary size ratio”); (c) 상기 동공 크기비를 기 저장된 평균 동공 크기비와 비교하는 단계;(c) comparing the pupil size ratio with a previously stored average pupil size ratio; (d) 비교 결과에 따라 상기 디스플레이 장치의 밝기값을 결정하는 단계; 및determining brightness values of the display device according to a comparison result; And (e) 결정된 상기 디스플레이 장치의 밝기값에 따라 상기 디스플레이 장치의 밝기를 설정하는 단계(e) setting brightness of the display device according to the determined brightness value of the display device; 를 포함하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 장치의 밝기 조절을 제어하는 방법.Method of controlling the brightness adjustment of the display device by detecting the pupil size comprising a. 제 17 항에 있어서, 상기 단계 (d)에서,18. The method of claim 17, wherein in step (d), 상기 동공 크기비가 상기 평균 동공 크기비보다 크면 상기 디스플레이 장치의 밝기값을 평균 디스플레이 장치의 밝기값보다 어두운 값으로 결정하고, 상기 동공 크기비가 상기 평균 동공 크기비보다 작으면 상기 디스플레이 장치의 밝기값을 상기 평균 디스플레이 장치의 밝기값보다 밝은 값으로 결정하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 장치의 밝기 조절을 제어하는 방법.If the pupil size ratio is greater than the average pupil size ratio, the brightness value of the display device is determined to be darker than the brightness value of the average display device. If the pupil size ratio is less than the average pupil size ratio, the brightness value of the display device is determined. And controlling the brightness of the display device by detecting the pupil size, wherein the pupil size is determined to be brighter than the brightness value of the average display device. 제 17 항에 있어서, 상기 단계 (d)에서,18. The method of claim 17, wherein in step (d), 상기 디스플레이 장치의 밝기값을 결정하는 것은, 기 저장된 두 개 이상의 동공 크기비 및 상기 동공 크기비에 대응하는 상기 디스플레이 장치의 밝기값들을 기초로 하여, 상기 동공 크기비에 대응하는 상기 디스플레이 장치의 밝기값을 결정하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 장치의 밝기 조절을 제어하는 방법.The determining of the brightness value of the display device is based on two or more pre-stored pupil size ratios and brightness values of the display device corresponding to the pupil size ratios, and the brightness of the display device corresponding to the pupil size ratios. A method for controlling brightness control of a display device by detecting a pupil size, the method comprising determining a value. 제 19 항에 있어서,The method of claim 19, 상기 동공 크기비에 대응하는 상기 디스플레이 장치의 밝기값을 결정하는 것은, 구간 설정법 또는 보간법을 이용하여 결정하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 장치의 밝기 조절을 제어하는 방법.The determining of the brightness value of the display device corresponding to the pupil size ratio is determined by using an interval setting method or an interpolation method. 제 17 항에 있어서,The method of claim 17, 상기 디스플레이 장치는 모니터, TV 브라운관, 액정 화면(LCD : Liquid Crystal Display)을 포함하는 것을 특징으로 하는 동공 크기를 감지하여 디스플레이 장치의 밝기 조절을 제어하는 방법.The display device includes a monitor, a TV CRT, and a liquid crystal display (LCD).
KR1020040096554A 2004-11-23 2004-11-23 Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith KR100590659B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040096554A KR100590659B1 (en) 2004-11-23 2004-11-23 Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040096554A KR100590659B1 (en) 2004-11-23 2004-11-23 Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith

Publications (2)

Publication Number Publication Date
KR20060057405A KR20060057405A (en) 2006-05-26
KR100590659B1 true KR100590659B1 (en) 2006-06-19

Family

ID=37152842

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040096554A KR100590659B1 (en) 2004-11-23 2004-11-23 Display Apparatus for Controlling Brightness According to Size of User's Pupil and Mobile Communication Terminal Therewith

Country Status (1)

Country Link
KR (1) KR100590659B1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218990A (en) * 2013-03-29 2013-07-24 深圳市金立通信设备有限公司 Method for adjusting screen brightness and terminal
CN103325358A (en) * 2012-03-23 2013-09-25 宇龙计算机通信科技(深圳)有限公司 Terminal and method for controlling display effect of terminal
CN103327172A (en) * 2013-04-28 2013-09-25 华为终端有限公司 Method and terminal for regulating terminal screen luminance
KR101526351B1 (en) * 2012-07-20 2015-06-05 엘지전자 주식회사 Mobile terminal and control method for mobile terminal
DE102014019598A1 (en) * 2014-09-02 2016-03-03 Lenovo (Beijing) Co., Ltd. Method for setting a display effect and electronic device
US9317114B2 (en) 2013-05-07 2016-04-19 Korea Advanced Institute Of Science And Technology Display property determination

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009126741A2 (en) * 2008-04-09 2009-10-15 Videntity System, Inc. Biometric device
KR101286137B1 (en) * 2011-05-06 2013-07-16 경북대학교 산학협력단 Pupil size modeling device and method for modeling of pupil size
US20140104436A1 (en) * 2012-10-14 2014-04-17 Stephan Bork Circuit to adjust backlighting for a display device
KR102142624B1 (en) 2013-12-30 2020-08-10 삼성디스플레이 주식회사 Display device
KR101984805B1 (en) * 2014-03-31 2019-06-03 이종섭 Mobile terminal and method for controlling display the same
WO2015183259A1 (en) * 2014-05-28 2015-12-03 Hewlett-Packard Development Company, L.P. Changing screen brightness of a computing device
KR102277212B1 (en) 2015-01-23 2021-07-15 삼성전자주식회사 Apparatus and method for iris recognition using display information
CN105070272A (en) * 2015-09-01 2015-11-18 上海斐讯数据通信技术有限公司 A mobile terminal display screen brightness intelligent adjustment method and a mobile terminal
CN110169202B (en) * 2017-01-12 2022-07-05 昕诺飞控股有限公司 Lighting control
JP2019095680A (en) * 2017-11-27 2019-06-20 京セラ株式会社 Electronic equipment and display unit
CN114722450A (en) * 2021-01-06 2022-07-08 南通秉匠信息科技有限公司 Multimedia classroom light-adjustable equipment management system based on three-dimensional simulation
KR20230053215A (en) * 2021-10-14 2023-04-21 삼성전자주식회사 Wearable electronic device adjusting the transmittance of a visor and the brightness of a display

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103325358A (en) * 2012-03-23 2013-09-25 宇龙计算机通信科技(深圳)有限公司 Terminal and method for controlling display effect of terminal
CN103325358B (en) * 2012-03-23 2016-02-10 宇龙计算机通信科技(深圳)有限公司 The control method of terminal and display effect of terminal
KR101526351B1 (en) * 2012-07-20 2015-06-05 엘지전자 주식회사 Mobile terminal and control method for mobile terminal
CN103218990A (en) * 2013-03-29 2013-07-24 深圳市金立通信设备有限公司 Method for adjusting screen brightness and terminal
CN103327172A (en) * 2013-04-28 2013-09-25 华为终端有限公司 Method and terminal for regulating terminal screen luminance
US9317114B2 (en) 2013-05-07 2016-04-19 Korea Advanced Institute Of Science And Technology Display property determination
DE102014019598A1 (en) * 2014-09-02 2016-03-03 Lenovo (Beijing) Co., Ltd. Method for setting a display effect and electronic device

Also Published As

Publication number Publication date
KR20060057405A (en) 2006-05-26

Similar Documents

Publication Publication Date Title
KR100590659B1 (en) Display Apparatus for Controlling Brightness According to Size of User&#39;s Pupil and Mobile Communication Terminal Therewith
CN110139262B (en) Bluetooth communication control method and related product
CN106527160B (en) Equipment control method and device
US20170045866A1 (en) Methods and apparatuses for operating an appliance
EP1650938A1 (en) Apparatus and method for automatically changing communication mode in mobile video communication terminal
RU2659484C1 (en) Method and device for display brightness adjusting
US20130162611A1 (en) Apparatus and method for controlling screen brightness in a mobile terminal
CN107562406B (en) Volume adjusting method, mobile terminal and computer readable storage medium
CN108763999B (en) Bar code identification method and terminal equipment
KR20110070087A (en) Apparatus and method for controlling size of display data in portable terminal
CN110417999B (en) Screen brightness adjusting method, mobile terminal and computer readable storage medium
CN111179861A (en) Brightness calibration method and device, storage medium and terminal
CN107124556B (en) Focusing method, focusing device, computer readable storage medium and mobile terminal
CN108040209B (en) Shooting method and mobile terminal
EP3623973A1 (en) Unlocking control method and related product
CN110225195B (en) Voice communication method and terminal
CN108052304B (en) Volume adjusting method, volume adjusting equipment and computer storage medium
US20180374485A1 (en) Initialization method and device for smart home
CN109743141B (en) Data transmission adjusting method and terminal equipment
CN109727212B (en) Image processing method and mobile terminal
CN113473574B (en) Wireless local area network connection method and device, storage medium and electronic equipment
CN108156272B (en) Associated frequency band determination method and device and electronic equipment
KR20040100746A (en) Device and method for compensating photographing of back light in mobile telephone with camera
EP3086311A1 (en) Method and device for adjusting display brightness
CN109194808B (en) Volume adjusting method and device

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130530

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140529

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20150601

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20160601

Year of fee payment: 11

LAPS Lapse due to unpaid annual fee