KR20220030615A - 전자장치 및 그 제어방법 - Google Patents

전자장치 및 그 제어방법 Download PDF

Info

Publication number
KR20220030615A
KR20220030615A KR1020200112192A KR20200112192A KR20220030615A KR 20220030615 A KR20220030615 A KR 20220030615A KR 1020200112192 A KR1020200112192 A KR 1020200112192A KR 20200112192 A KR20200112192 A KR 20200112192A KR 20220030615 A KR20220030615 A KR 20220030615A
Authority
KR
South Korea
Prior art keywords
correction value
image
display
brightness
electronic device
Prior art date
Application number
KR1020200112192A
Other languages
English (en)
Inventor
김종환
서귀원
정영훈
박승호
문영수
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020200112192A priority Critical patent/KR20220030615A/ko
Priority to EP21864613.1A priority patent/EP4195657A4/en
Priority to PCT/KR2021/011642 priority patent/WO2022050653A1/ko
Priority to CN202180054514.3A priority patent/CN116134810A/zh
Publication of KR20220030615A publication Critical patent/KR20220030615A/ko
Priority to US18/117,235 priority patent/US20230206811A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003—Display of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57—Control of contrast or brightness
    • H04N5/58—Control of contrast or brightness in dependence upon ambient light
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6027—Correction or control of colour gradation or colour contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/603—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
    • H04N1/6033—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer using test pattern analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6083—Colour correction or control controlled by factors external to the apparatus
    • H04N1/6088—Colour correction or control controlled by factors external to the apparatus by viewing conditions, i.e. conditions at picture output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/02—Diagnosis, testing or measuring for television systems or their details for colour television signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0233—Improving the luminance or brightness uniformity across the screen
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0242—Compensation of deficiencies in the appearance of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0693—Calibration of display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/08—Arrangements within a display terminal for setting, manually or automatically, display parameters of the display terminal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/144—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/643—Hue control means, e.g. flesh tone control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

전자장치는, 영상의 표시 환경을 식별하고, 영상의 특성에 관한 사용자의 시인성을 식별하도록 제공된 테스트영상의 특성을 표시 환경에 대응하도록 보정하고, 보정된 테스트영상이 디스플레이에 표시되도록 제어하고, 표시된 테스트영상의 특성에 대한 사용자의 조정 입력에 기초하여 영상의 특성을 보정하는 프로세서를 포함한다.

Description

전자장치 및 그 제어방법 {ELECTRONIC APPARATUS AND CONTROL METHOD THEREOF}
본 발명은 영상신호에 기반한 영상이 표시되도록 영상신호를 처리하는 전자장치 및 그 제어방법에 관한 것으로서, 상세하게는 영상에 대한 사용자의 인지 왜곡을 보정하게 마련된 전자장치 및 그 제어방법에 관한 것이다.
소정의 정보를 특정 프로세스에 따라서 연산 및 처리하기 위해, 연산을 위한 CPU, 칩셋, 메모리 등의 전자부품들을 기본적으로 포함하는 전자장치는, 처리 대상이 되는 정보 또는 사용 용도가 무엇인지에 따라서 다양한 종류로 구분될 수 있다. 예를 들면, 전자장치에는 범용의 정보를 처리하는 PC나 서버 등의 정보처리장치, 영상데이터를 처리하는 영상처리장치, 오디오를 처리하는 오디오장치, 가정 내 잡무를 수행하는 생활가전 등이 있다. 영상처리장치는 영상을 표시하기 위한 디스플레이 패널(display panel)을 구비하는 장치(즉, 디스플레이장치)와, 디스플레이 패널을 구비하지 않는 장치로 구분될 수 있다. 디스플레이장치는 영상소스로부터 제공되는 영상신호를 처리하여 자체 구비된 디스플레이 패널에 표시할 수 있고, 디스플레이 패널을 구비하지 않은 영상처리장치는 처리된 영상신호를 디스플레이장치에 출력함으로써 해당 디스플레이장치에서 영상이 표시되도록 한다.
이와 같이 표시되는 영상은 사용자가 정확히 인지하기에 저하 요인이 있을 수 있다. 예를 들면, Color wash-out 현상이 있는데, 이 현상은 사용자가 시각적으로 인지하는 밝기가 높을수록 사용자가 인지하는 영상의 채도가 낮아지는 상황이다. 또한, 각 사용자가 영상을 인지하는 고유한 능력이 서로 상이하다. 이 때문에, 동일한 디스플레이장치 및 동일한 주변 환경 하에서 표시되는 영상을 각 사용자가 시청하더라도, 각 사용자가 인지하는 영상의 색감은 다를 수 있다. 즉, 사용자가 영상을 인지하는 데에 관여하는 여러 요인 때문에, 사용자가 인지하는 영상의 왜곡이 발생할 수 있다.
이와 같은 영상 인지에서의 왜곡을 줄이고, 영상의 컨텐트를 제공하는 측에서 의도하는 영상의 특성(예를 들면 색상 등)이 사용자에게 가능한 한 그대로 전달될 수 있도록 마련된, 영상처리장치 또는 디스플레이장치가 요구될 수 있다.
본 발명의 실시예에 따른 전자장치는, 영상의 표시 환경을 식별하고, 상기 영상의 특성에 관한 사용자의 시인성을 식별하도록 제공된 테스트영상의 특성을 상기 식별된 표시 환경에 대응하도록 보정하고, 상기 보정된 테스트영상이 디스플레이에 표시되도록 제어하고, 상기 표시된 테스트영상의 특성에 대한 사용자의 조정 입력에 기초하여 상기 영상의 특성을 보정하는 프로세서를 포함한다.
또한, 상기 표시 환경은, 상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나를 포함하고, 상기 프로세서는, 상기 디스플레이의 밝기 및 주변 밝기에 대응하여 상기 테스트영상의 특성을 보정할 수 있다.
또한, 상기 프로세서는, 상기 테스트영상의 색상 별 채도를 보정할 수 있다.
또한, 상기 프로세서는, 상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나에 비례하도록 기 정의된 제1보정값을 식별하고, 상기 제1보정값을 상기 테스트영상의 특성의 값에 반영할 수 있다.
또한, 영상신호를 수신하는 인터페이스부를 더 포함하고, 상기 프로세서는, 상기 인터페이스부를 통해 수신되는 상기 영상신호의 색상정보에, 상기 제1보정값 및 상기 조정 입력에 기초한 제2보정값을 함께 반영함으로써 상기 영상의 특성을 보정할 수 있다.
또한, 상기 프로세서는, 상기 인터페이스부를 통해 수신되는 상기 영상신호의 밝기정보에, 상기 제1보정값에 반비례하도록 기 정의된 제3보정값을 반영할 수 있다.
또한, 상기 프로세서는, 상기 디스플레이의 밝기에 대응하는 보정값 및 상기 주변 밝기에 대응하는 보정값을 합산하여 상기 제1보정값을 산출할 수 있다.
또한, 상기 프로세서는, 상기 디스플레이의 밝기에 대응하는 보정값 및 상기 주변 밝기에 대응하는 보정값 각각에 상이한 가중치를 부여하여 상기 제1보정값을 산출할 수 있다.
또한, 영상신호를 수신하는 인터페이스부를 더 포함하고, 상기 프로세서는, 상기 인터페이스부를 통해 수신되는 상기 영상신호의 색상정보에 상기 조정 입력에 기초한 제2보정값을 반영함으로써 상기 영상의 특성을 보정할 수 있다.
또한, 상기 테스트영상은 동일 색상을 가진 복수의 분할된 영역을 포함하고, 상기 복수의 영역 중 하나는 나머지 영역들과 상이한 채도를 가지고, 상기 프로세서는, 상기 조정 입력이 상기 채도가 상이한 영역을 정상적으로 선택하는지 여부에 대응하여 상기 색상에 대한 사용자의 점수를 계측하고, 상기 계측된 점수에 기초하여 상기 제2보정값을 도출할 수 있다.
또한, 사용자에 대응하는 제2보정값을 저장하는 저장부를 더 포함하고, 상기 프로세서는, 상기 영상의 표시 시에 상기 저장부에 저장된 제2보정값을 획득하고, 상기 제2보정값의 도출 시점의 상기 표시 환경 및 현재 시점의 상기 표시 환경의 차이에 기초하여 상기 제2보정값을 조정할 수 있다.
또한, 본 발명의 실시예에 따른 전자장치의 제어방법은, 영상의 표시 환경을 식별하는 단계와, 상기 영상의 특성에 관한 사용자의 시인성을 식별하도록 제공된 테스트영상의 특성을 상기 식별된 표시 환경에 대응하도록 보정하는 단계와, 상기 보정된 테스트영상이 디스플레이에 표시되도록 제어하는 단계와, 상기 표시된 테스트영상의 특성에 대한 사용자의 조정 입력에 기초하여 상기 영상의 특성을 보정하는 단계를 포함한다.
도 1은 전자장치의 예시도이다.
도 2는 전자장치의 구성 블록도이다.
도 3은 전자장치의 제어방법을 나타내는 플로우차트이다.
도 4는 전자장치가 영상의 특성을 보정하는 실시예를 나타내는 블록 다이어그램이다.
도 5는 전자장치가 영상의 특성을 보정하는 다른 실시예를 나타내는 블록 다이어그램이다.
도 6은 제1보정값을 식별하는 원리를 나타내는 예시도이다.
도 7은 색상 별 보정값의 커브를 나타내는 그래프이다.
도 8은 인지실험을 통해 디스플레이 밝기에 따른 채도 보정값을 결정하는 원리를 나타내는 예시도이다.
도 9는 인지실험을 통해 주변 밝기에 따른 채도 보정값을 결정하는 원리를 나타내는 예시도이다.
도 10은 전자장치가 사용자 인지특성 테스트를 실행하는 모습을 나타내는 예시도이다.
도 11은 전자장치가 사용자 별로 영상의 인지특성 보정값을 관리 및 적용하는 원리를 나타내는 구성 블록도이다.
도 12는 전자장치가 환경 변화에 대응하여 보정값을 조정하는 과정을 나타내는 플로우차트이다.
이하에서는 첨부도면을 참조하여 본 발명에 따른 실시예들에 관해 상세히 설명한다. 각 도면을 참조하여 설명하는 실시예들은 특별한 언급이 없는 한 상호 배타적인 구성이 아니며, 하나의 장치 내에서 복수 개의 실시예가 선택적으로 조합되어 구현될 수 있다. 이러한 복수의 실시예의 조합은 본 발명의 기술분야에서 숙련된 기술자가 본 발명의 사상을 구현함에 있어서 임의로 선택되어 적용될 수 있다.
만일, 실시예에서 제1구성요소, 제2구성요소 등과 같이 서수를 포함하는 용어가 있다면, 이러한 용어는 다양한 구성요소들을 설명하기 위해 사용되는 것이며, 용어는 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용되는 바, 이들 구성요소는 용어에 의해 그 의미가 한정되지 않는다. 실시예에서 사용하는 용어는 해당 실시예를 설명하기 위해 적용되는 것으로서, 본 발명의 사상을 한정하지 않는다.
또한, 본 명세서에서의 복수의 구성요소 중 "적어도 하나(at least one)"라는 표현이 나오는 경우에, 본 표현은 복수의 구성요소 전체 뿐만 아니라, 복수의 구성요소 중 나머지를 배제한 각 하나 혹은 이들의 조합 모두를 지칭한다.
도 1은 전자장치의 예시도이다.
도 1에 도시된 바와 같이, 본 실시예에 따른 전자장치(100)는 디스플레이부(110)를 가진 디스플레이장치로 구현된다. 그러나, 본 발명의 사상이 반드시 디스플레이장치에만 적용되는 것으로 한정되지 않으며, 디스플레이부(110)를 구비하지 않고 영상신호를 처리하여 별도의 디스플레이장치에 출력하는 영상처리장치에도 적용될 수 있다. 전자장치(100)는 다양한 종류의 장치로 구현될 수 있는 바, 예를 들면 TV, 모니터, 디지털 사이니지(signage), 전자칠판, 전자액자, 비디오 월(video wall) 등을 포함하는 고정형 디스플레이장치이거나; 스마트폰, 태블릿기기, 휴대용 멀티미디어 재생기기 등을 포함하는 모바일기기이거나; 웨어러블 디바이스(wearable device)이거나; 셋탑박스, 릴레이장치, 광학미디어 재생장치 등을 포함하는 영상처리장치 등의 구현 예시가 가능하다.
전자장치(100)가 디스플레이부(110)에 표시되는 영상은 사용자(101)에 의해 인지된다. 이 때, 영상에 대한 사용자(101)의 인지 상태는, 크게 영상의 표시 환경 및 사용자(101)의 인지 능력의 두 가지에 달려 있다. 여기서, 영상의 표시 환경은, 전자장치(100)의 장치 환경의 요소와 전자장치(100)의 주변 환경의 요소를 포함한다. 예를 들어, 사용자(101)가 인지하는 영상은 디스플레이부(110)에서 방출되는 광 L1과, 주변광 L2의 영향을 받는다. 정리하면, 사용자(101)에 의해 인지되는 영상은, 전자장치(100)의 장치 특성, 전자장치(100)가 설치된 주변 환경의 특성, 영상을 인지하는 사용자(101) 자신의 인지 특성의 세 가지 요소에 영향을 받는다.
전자장치(100)의 장치 특성은, 예를 들면 영상을 표시하는 디스플레이부(110)의 밝기를 포함한다. 영상을 사용자(101)가 인지함에 있어서, 디스플레이부(110)의 밝기에 따라서 사용자(101)에게 인지되는 채도(saturation)의 강도가 달라진다. 예를 들면, 밝기가 서로 상이한 두 디스플레이부(110) 각각에 동일한 색상의 영상이 표시될 때, 통상적으로 사용자(101)는 상대적으로 밝기가 높은 디스플레이부(110)에 표시되는 영상에서의 채도를 더 낮다고 느낀다. 이러한 상황은, 디스플레이부(110)가 표현 가능한 최대 밝기의 한계가 점점 높아지는 추세에 따라서, 빈번히 나타날 수 있다.
전자장치(100)가 설치된 주변 환경의 특성은, 예를 들면 사용자(101)가 전자장치(100)의 영상을 시청하는 장소의 환경의 밝기를 포함한다. 일례로서, 전자장치(100)가 있는 방에 전등(102)이 있을 때, 사용자(101)는 전등(102)이 켜진 상태에서의 영상의 채도와 전등(102)이 꺼진 상태에서의 영상의 채도를 다르게 인지한다. 사용자(101)가 영상을 볼 때, 주변 환경의 밝기에 따라서 인지되는 채도의 강도가 달라진다. 앞서 설명한 디스플레이부(110)의 밝기의 경우와 유사하게, 주변광의 밝기가 높을수록 사용자(101)가 느끼는 영상의 채도는 낮아진다.
사용자(101)의 인지 특성은, 예를 들면 사용자(101)의 주관적인 감각에 따라서 영상의 특성을 상이하게 인지하는 것을 나타낸다. 예를 들어 주변광 L2의 주변 환경 하에서 광량 L1을 방출하는 디스플레이부(110)에 표시되는 영상을 두 사용자(101)가 함께 시청하고 있다고 하더라도, 각 사용자(101)가 느끼는 영상의 색상 또는 채도는 서로 상이할 수 있다.
본 발명의 실시예에 따른 전자장치(100)는 이러한 사항들을 모두 고려하여, 사용자(101)의 인지하는 영상의 왜곡을 최소화하도록 동작한다. 이에 관한 자세한 설명은 후술한다.
도 2는 전자장치의 구성 블록도이다.
도 2에 도시된 바와 같이, 전자장치(100)는 동작에 필요한 여러 하드웨어적 구성요소들을 포함한다. 전자장치(100)가 포함하는 구성요소는 본 예시만으로 한정되는 것은 아니며, 전자장치(100)의 구현 시에 필요에 따라서 추가적인 구성을 더 포함할 수도 있고, 또는 본 예시에서 나타내는 일부 구성을 포함하지 않을 수도 있다. 예를 들어 전자장치(100)는 디스플레이부(110)를 포함하지 않는 경우에, 인터페이스부(120)를 통해 영상신호를 타 디스플레이장치에 출력하도록 마련될 수도 있다.
전자장치(100)는 디스플레이부(110)를 포함할 수 있다. 디스플레이부(110)는 화면 상에 영상을 표시할 수 있는 디스플레이 패널을 포함한다. 디스플레이 패널은 액정 방식과 같은 수광 구조 또는 OLED 방식과 같은 자발광 구조로 마련된다. 디스플레이부(110)는 디스플레이 패널의 구조에 따라서 부가적인 구성을 추가로 포함할 수 있는데, 예를 들면 디스플레이 패널이 액정 방식이라면, 디스플레이부(110)는 액정 디스플레이 패널과, 광을 공급하는 백라이트유닛과, 액정 디스플레이 패널의 액정을 구동시키는 패널구동기판을 포함한다.
전자장치(100)는 인터페이스부(120)를 포함할 수 있다. 인터페이스부(120)는 전자장치(100)가 다양한 종류의 외부장치와 통신을 수행하고, 또한 데이터를 송수신하기 위한 인터페이스 회로를 포함한다. 인터페이스부(120)는 복수의 외부장치와 병행하여 통신이 가능하게 마련된다. 예를 들면, 인터페이스부(120)는 이하 설명하는 복수의 통신수단을 포함하는데, 동일한 통신수단을 사용하여 복수의 외부장치와 통신할 수도 있고, 서로 다른 통신수단을 사용하여 복수의 외부장치와 각기 통신할 수도 있다.
인터페이스부(120)는 유선 통신연결을 위한 하나 이상의 유선인터페이스부(121)를 포함할 수 있다. 유선인터페이스부(121)는 기 정의된 전송규격의 케이블이 접속되는 커넥터 또는 포트를 포함한다. 예를 들면, 유선인터페이스부(121)는 방송신호를 수신하도록 지상파 또는 위성방송 안테나에 접속되거나 케이블방송의 케이블이 접속되는 포트를 포함한다. 또는, 유선인터페이스부(121)는 다양한 영상처리장치와 접속하도록 HDMI, DP, DVI, 컴포넌트, 컴포지트, S-Video, 썬더볼트 등 다양한 유선전송규격의 케이블이 접속되는 포트를 포함한다. 또는, 유선인터페이스부(121)는 USB 기기와 접속하기 위한 USB 규격의 포트를 포함한다. 또는, 유선인터페이스부(121)는 광케이블이 접속되는 광포트를 포함한다. 또는, 유선인터페이스부(121)는 외부 마이크로폰이 접속되는 오디오 입력 포트와, 헤드셋, 이어폰, 외부 스피커 등이 접속되는 오디오 출력 포트를 포함한다. 또는, 유선인터페이스부(121)는 광역 네트워크에 접속하기 위해 게이트웨이, 라우터, 허브 등에 접속하는 이더넷 포트를 포함한다.
인터페이스부(120)는 무선 통신연결을 위한 하나 이상의 무선인터페이스부(122)를 포함할 수 있다. 무선인터페이스부(122)는 다양한 종류의 무선통신 프로토콜에 대응하는 통신모듈, 통신칩 등의 구성요소들 중 적어도 하나 이상을 포함하는 양방향 통신회로를 포함한다. 예를 들면, 무선인터페이스부(122)는 와이파이 방식에 따라서 AP와 무선통신을 수행하는 와이파이 통신칩과, 블루투스, Zigbee, Z-Wave, WirelessHD, WiGig, NFC 등의 무선통신을 수행하는 통신칩, IR 통신을 위한 IR 모듈, 모바일기기와 이동통신을 수행하는 이동통신칩 등을 포함한다.
전자장치(100)는 사용자입력부(130)를 포함할 수 있다. 사용자입력부(130)는 사용자의 입력을 수행하기 위해 사용자가 조작할 수 있도록 마련된 다양한 종류의 입력 인터페이스 관련 회로를 포함한다. 사용자입력부(130)는 전자장치(100)의 종류에 따라서 여러 가지 형태의 구성이 가능하며, 예를 들면 전자장치(100)의 기계적 또는 전자적 버튼부, 터치패드, 센서, 카메라, 디스플레이부(110)에 설치된 터치스크린, 전자장치(100)의 본체와 분리된 리모트 컨트롤러 등이 있다.
한편, 설계 방식에 따라서는, 전자장치(100)는 사용자의 음성을 수집하여 오디오신호를 생성하기 위한 마이크로폰을 더 포함할 수도 있다. 마이크로폰은 전자장치(100)의 본체에 구비될 수도 있고, 전자장치(100)의 본체와 분리된 리모트 컨트롤러에 구비될 수도 있다. 마이크로폰이 리모트 컨트롤러에 구비되는 경우에, 리모트 컨트롤러는 마이크로폰을 통해 수신되는 오디오신호를 무선전송을 위한 캐리어신호로 전환하여 무선인터페이스부(122)로 전송한다.
한편, 사용자의 음성을 전자장치(100)에 입력하는 수단은 전자장치(100)에 마련된 마이크로폰만으로 한정되지는 않으며, 전자장치(100)와 통신하는 별도의 외부장치에 의해서도 음성입력이 수행될 수 있다. 예를 들어 전자장치(100)가 TV인 경우에, 스마트폰, 태블릿기기 등과 같은 모바일기기에 사전에 마련된 TV 제어용 어플리케이션을 인스 톨함으로써, 해당 모바일기기를 통한 전자장치(100)의 동작 제어가 가능하다. 여기서, TV 제어용 어플리케이션은 TV가 음성인식기능을 지원하는 경우에, 사용자의 음성에 대응하는 오디오신호를 처리하도록 마련된다. 모바일기기가 마이크로폰을 구비한 경우, 모바일기기는 TV 제어용 어플리케이션이 동작하는 동안에 모바일기기의 마이크로폰을 통해 사용자의 음성을 수신할 수 있다. 모바일기기는 수신되는 사용자의 음성의 오디오신호를 캐리어신호로 전환하여 무선인터페이스부(122)로 전송한다.
한편, 상기한 외부장치는 모바일기기에만 한정되는 것은 아니며, AI 스피커 등과 같이 고정 설치되거나 또는 휴대 가능한, TV 제어용 어플리케이션이 인스톨되어 실행될 수 있게 마련된 다양한 종류의 전자장치를 포함한다.
전자장치(100)는 저장부(140)를 포함할 수 있다. 저장부(140)는 디지털화된 데이터를 저장한다. 저장부(140)는 전원의 제공 유무와 무관하게 데이터를 보존할 수 있는 비휘발성 속성의 스토리지(storage)와, 프로세서(160)에 의해 처리되기 위한 데이터가 로딩되며 전원이 제공되지 않으면 데이터를 보존할 수 없는 휘발성 속성의 메모리(memory)를 포함한다. 스토리지에는 플래시메모리(flash-memory), HDD(hard-disc drive), SSD(solid-state drive) ROM(Read Only Memory) 등이 있으며, 메모리에는 버퍼(buffer), 램(RAM; Random Access Memory) 등이 있다. 본 실시예에 따른 저장부(140)는, 예를 들면 전자장치(100)의 사용자 계정, 전자장치(100)의 제조사, 브랜드, 기기정보 등을 저장할 수 있다.
본 실시예에 따른 저장부(140)는, 예를 들면 기 정의된 테스트영상의 데이터를 저장할 수 있다. 테스트영상은, 디스플레이부(110)에 표시되는 영상의 소정 특성에 관한 사용자의 시인성을 식별하도록 사전에 마련되어 저장부(140)에 저장된다. 다만, 테스트영상의 데이터는 반드시 저장부(140)에 저장되어야만 하는 것은 아니며, 전자장치(100)가 필요 시 테스트영상의 데이터를 인터페이스부(120)를 통해 수신하는 경우도 가능하다.
전자장치(100)는 센서(150)를 포함할 수 있다. 센서(150)는 전자장치(100)의 주변 환경의 광량 또는 밝기를 감지하여 프로세서(160)에 전달한다. 센서(150)는 예를 들면 포토센서, 카메라 등을 포함한다. 다만, 프로세서(160)가 주변 환경의 밝기에 관한 정보를 획득하는 방법이 센서(150)에만 한정된 것은 아니다. 설계 방식에 따라서는 전자장치(100)가 센서(150)를 포함하지 않을 수도 있으며, 인터페이스부(120)를 통해 주변 환경의 밝기에 관한 정보를 수신하는 경우도 가능하다.
전자장치(100)는 프로세서(160)를 포함할 수 있다. 프로세서(160)는 인쇄회로기판 상에 장착되는 CPU, 칩셋, 버퍼, 회로 등으로 구현되는 하나 이상의 하드웨어 프로세서를 포함하며, 설계 방식에 따라서는 SOC(system on chip)로 구현될 수도 있다. 프로세서(160)는 전자장치(100)가 디스플레이장치로 구현되는 경우에 디멀티플렉서, 디코더, 스케일러, 오디오 DSP(Digital Signal Processor), 앰프 등의 다양한 프로세스에 대응하는 모듈들을 포함한다. 여기서, 이러한 모듈들 중 일부 또는 전체가 SOC로 구현될 수 있다. 예를 들면, 디멀티플렉서, 디코더, 스케일러 등 영상처리와 관련된 모듈이 영상처리 SOC로 구현되고, 오디오 DSP는 SOC와 별도의 칩셋으로 구현되는 것이 가능하다.
본 실시예에 따른 프로세서(160)는, 디스플레이부(110)에 표시되는 영상의 특성에 관한 사용자의 인지 왜곡을 최소화시키기 위한 동작을 수행한다. 이하, 이러한 동작에 관해 설명한다.
도 3은 전자장치의 제어방법을 나타내는 플로우차트이다.
도 3에 도시된 바와 같이, 하기 동작은 전자장치(100, 도 2 참조)의 프로세서(160, 도 2 참조)에 의해 수행된다.
310 단계에서 전자장치는 영상의 표시 환경을 식별한다. 영상의 표시 환경은, 예를 들면 전자장치의 디스플레이부(110, 도 2 참조)의 밝기 및 전자장치의 주변 환경의 밝기일 수 있다. 반면, 전자장치가 타 디스플레이장치에 영상이 표시되도록 영상신호를 출력하는 구성이라면, 영상의 표시 환경은 타 디스플레이장치에 구비된 디스플레이부의 밝기를 포함할 수 있다.
320 단계에서 전자장치는 영상의 특성에 관한 사용자의 시인성을 식별하도록 마련된 테스트영상의 특성을, 식별된 표시 환경에 대응하도록 보정한다. 영상의 특성은 예를 들면 영상의 색상, 채도 등을 포함한다.
330 단계에서 전자장치는 보정된 테스트영상을 표시한다. 전자장치가 디스플레이부를 포함하면, 전자장치는 자체 구비한 디스플레이부에 테스트영상을 표시한다. 반면에 전자장치가 디스플레이부를 포함하지 않는다면, 보정된 테스트영상을 타 디스플레이장치에 표시되도록 출력한다.
340 단계에서 전자장치는 표시된 테스트영상의 특성에 대한 사용자의 조정 입력을 수신한다. 전자장치는 사용자입력부(130, 도 2 참조)로부터 사용자의 입력을 수신한다. 반면에 테스트영상이 타 디스플레이장치에 표시되고 타 디스플레이장치에 사용자입력부가 마련된 경우라면, 전자장치는 타 디스플레이장치로부터 사용자의 조정 입력에 관한 신호를 수신할 수도 있다.
350 단계에서 전자장치는 수신된 사용자의 조정 입력에 기초하여 영상의 특성을 보정한다. 전자장치가 디스플레이부를 포함하면, 전자장치는 자체 구비한 디스플레이부에 보정된 영상을 표시한다. 반면에 전자장치가 디스플레이부를 포함하지 않는다면, 보정된 영상에 관한 영상신호를 타 디스플레이장치에 표시되도록 출력한다.
이로써, 전자장치는 표시되는 영상의 특성에 관한 사용자의 인지 왜곡을 최소화시킴으로써, 영상의 컨텐트의 제공자가 의도하는 영상의 특성이 사용자에게 가능한 한 그대로 전달될 수 있도록 할 수 있다.
상기한 동작은 전자장치 단독으로 수행할 수 있다. 다만, 설계 방식에 따라서는 시스템 내에서, 전자장치와, 전자장치가 통신하는 별도의 장치(예를 들면, 서버)가 동작의 복수의 단계를 분담하여 수행할 수도 있다. 한 가지 예시로서, 전자장치는 기본적인 입출력 동작만을 수행하고, 전자장치보다 시스템 자원의 가용도가 높은 서버는 전자장치로부터 수신되는 입출력 내용에 기초한 분석 및 보정 동작을 수행하여 전자장치에 전달할 수 있다. 본 실시예의 예를 들면, 전자장치는 사용자 입력(340 단계) 및 테스트영상의 표시(330 단계)를 수행하고, 서버가 주요 식별 동작 및 보정 동작(310, 320, 350 단계)을 수행하여 전자장치에 그 결과를 전달하도록 마련될 수 있다. 이 경우에, 주요 동작은 서버에서 이루어지고, 전자장치는 입력정보를 서버에 전달하거나 또는 서버로부터 수신되는 결과를 출력하는 동작만을 수행한다.
구체적으로는, 310 단계에서 서버는 전자장치로부터 수신되는 주변환경의 정보에 기초하여 전자장치에서의 영상의 표시 환경을 식별한다. 설계 방식에 따라서는, 전자장치가 310 단계를 수행할 수도 있으며, 이 경우에 전자장치는 영상의 표시 환경에 관해 식별된 정보를 서버에 전달한다.
320 단계에서 서버는 테스트영상의 특성을, 식별된 표시 환경에 대응하도록 보정하고, 보정된 결과를 전자장치에 전달한다.
330 단계에서 전자장치는 서버로부터 수신되는 보정된 결과에 기초하여 보정된 테스트영상을 표시한다. 여기서, 전자장치는 테스트영상을 사전에 저장하고 있는 상태에서 테스트영상의 보정용 오프셋값을 서버로부터 수신하여 자체적으로 테스트영상을 보정할 수도 있고, 또는 서버에 의해 보정된 테스트영상의 데이터를 수신하여 그대로 표시하기만 할 수도 있다.
340 단계에서 전자장치는 테스트영상의 특성에 대한 사용자의 조정 입력을 수신하여 서버에 전달한다.
350 단계에서 서버는 전자장치로부터 수신되는 사용자의 조정 입력에 기초하여 영상의 특성을 보정하고, 보정된 결과를 전자장치에 전달한다. 이에, 전자장치는 서버로부터 수신되는 보정된 결과에 기초하여 영상의 특성을 보정하고, 보정된 영상을 표시할 수 있다.
이하, 전자장치가 영상의 특성을 보정하는 실시예에 관해 구체적으로 설명한다.
도 4는 전자장치가 영상의 특성을 보정하는 실시예를 나타내는 블록 다이어그램이다.
도 4에 도시된 바와 같이, 전자장치(100)는 제1보정값 식별 단계(410)를 수행한다. 본 단계(410)는 앞선 도 3의 310 단계 및 320 단계에 해당한다. 전자장치(100)는 현 시점에서 디스플레이의 밝기와, 주변 밝기의 두 가지 패러미터를 획득한다. 전자장치(100)는 획득한 두 가지 패러미터에 대응하는 제1보정값을 식별한다. 제1보정값의 식별 방법은 여러 가지가 가능한데, 예를 들면 사전에 실행된 시험 데이터 또는 시뮬레이션 데이터에 기반한 DB 또는 테이블로부터 상기한 두 가지 패러미터에 대응하는 제1보정값을 검색하거나, 사전 정의된 수식 또는 함수에 상기한 두 가지 패러미터를 대입하여 결과값으로서의 제1보정값을 산출하는 등의 방법이 가능하다.
제1보정값은 영상을 구현하는 다양한 특성 중 하나에 관한 값으로서, 그 종류가 한정되지 않는다. 다양한 예시 중 하나로서, 본 실시예에서는 제1보정값이 소정 색상에서의 채도에 대한 오프셋(offset)값인 경우에 관해 설명한다.
전자장치(100)는 사용자 인지특성 테스트 단계(420)를 수행한다. 본 단계(420)는 앞선 도 3의 330 단계 및 340 단계에 해당한다. 전자장치(100)는 사전에 마련된 테스트영상을 사용자에게 제공하도록 표시하되, 제1보정값 식별 단계(410)에서 식별된 제1보정값을 이 테스트영상에 반영하여 표시한다. 테스트영상을 어떤 방식으로 표시할지에 관해서는 전자장치(100)에 디폴트(default) 값이 정의되어 있다. 예를 들면, 소정의 색상에 관한 테스트영상을 표시할 때에는 해당 테스트영상의 채도를 어느 정도의 레벨로 표시할 것인지가 디폴트 값으로 정해져 있다. 이에 대해, 전자장치(100)는 제1보정값을 적용하여 이 디폴트 값을 조정함으로써, 테스트영상의 채도가 조정된 상태로 표시되도록 한다. 이로써, 사용자는 디스플레이의 밝기 및 주변 밝기에 대응하도록 조정된 테스트영상을 보게 된다.
사용자 인지특성 테스트 단계(420)에서, 전자장치(100)는 표시하는 테스트영상의 특성에 대한 사용자의 조정 입력, 예를 들면 테스트영상의 색상 별 채도에 대한 사용자의 조정 입력을 수신한다. 사용자의 입력 방법은 테스트영상의 구현 방식에 따라서 달라지며, 그 예시는 설계 방식에 따라서 다양하게 마련될 수 있다. 이에 관한 구체적인 방식에 관해서는 후술한다.
전자장치(100)는 제2보정값 식별 단계(430)를 수행한다. 사용자 인지특성 테스트 단계(420)에서 수행된 사용자의 조정 입력에 관한 수신 결과를 반영하여, 전자장치(100)는 제2보정값을 식별한다. 앞서 제1보정값이 사용자 인지특성 테스트 단계(420)에서 표시하는 테스트영상에 대한 보정값인 것에 비해, 제2보정값은 전자장치(100)가 표시하기 위한 영상(또는 타 디스플레이장치에서 표시되도록 처리하기 위한 영상)에 대한 보정값이다. 제2보정값은 설계 방식에 따라서 다양한 영상의 특성값일 수 있으며, 예를 들면 영상의 소정 색상에 대한 채도의 오프셋값일 수 있다.
전자장치(100)는 밝기 및 색상 분리 단계(440)를 수행한다. 전자장치(100)는 소정의 입력영상신호로부터 색상정보 및 밝기정보를 분리시켜 획득한다. 입력영상신호는 다양한 형식의 신호가 가능한데, 예를 들면 RGB, YCbCr, CIE Lab, HSV(hue-saturation-value), CIECAM02 등이 있다. 예를 들어 입력영상신호가 YCbCr 형식인 경우에, 전자장치(100)는 밝기정보인 Y와, 색상정보인 Cb, Cr을 분리시킨다.
전자장치(100)는 색상 조정 단계(450)를 수행한다. 제2보정값 식별 단계(430) 및 색상 조정 단계(450)는 앞선 도 3의 350 단계에 해당한다. 전자장치(100)는 입력영상신호의 색상정보에 제2보정값을 반영하여 조정하고, 조정된 색상정보를 밝기정보와 함께 조합함으로써 출력영상신호로 변환시킨다. 출력영상신호는 디스플레이의 밝기, 주변 밝기 및 사용자의 인지 특성이 모두 고려되도록 입력영상신호가 보정된 결과가 된다. 밝기정보는 조정되지 않을 수도 있고, 설계 방식에 따라서는 별도의 조정 방법이 반영될 수도 있다.
앞선 실시예에서는, 전자장치(100)가 제1보정값 식별 단계(410)에서 현 시점의 디스플레이의 밝기 및 주변 밝기의 두 가지 패러미터를 획득하고, 획득한 두 가지 패러미터에 대응하는 제1보정값을 식별하는 경우에 관해 설명하였다. 그러나, 제1보정값이 반드시 상기한 두 가지 패러미터에 모두 대응하는 예시만 있는 것은 아니다. 설계 방식에 따라서는, 전자장치(100)는 현 시점의 디스플레이 밝기 또는 주변 밝기의 어느 하나의 패러미터를 획득하고, 획득한 패러미터에 대응하는 제1보정값을 식별할 수도 있다. 이와 같이 제1보정값이 식별된 이후의 동작은, 앞선 실시예에서 설명한 바와 같다.
한편, 설계 방식에 따라서는, 밝기 및 색상 분리 단계(440) 및 색상 조정 단계(450)의 사이에서, 추가적인 조정이 반영될 수도 있다. 이하, 이러한 실시예에 관해 설명한다.
도 5는 전자장치가 영상의 특성을 보정하는 다른 실시예를 나타내는 블록 다이어그램이다.
도 5에 도시된 바와 같이, 전자장치(100)는 영상의 특정을 보정하는 과정을 통해 입력영상신호를 출력영상신호로 변환하여 출력한다. 여기서, 제1보정값 식별 단계(410), 사용자 인지특성 테스트 단계(420), 제2보정값 식별 단계(430), 밝기 및 색상 분리 단계(440)는 앞선 도 4의 실시예와 실질적으로 동일한 단계이므로, 자세한 설명을 생략한다. 다만, 제1보정값 식별 단계(410)에서 식별된 제1보정값은, 사용자 인지특성 테스트 단계(420) 뿐만 아니라, 후술할 1차 색상 조정 단계(510)에서도 사용된다.
전자장치(100)는 1차 색상 조정 단계(510)를 수행한다. 전자장치(100)는 제1보정값으로 입력영상신호의 색상정보를 보정한다. 제1보정값이 Gainpercept 이고, 입력영상신호의 색상정보에서 일 색상의 채도가 Cbin, Crin 일 때, 보정된 채도 Cbout, Crout 은 다음과 같다.
Cbout=Cbin*Gainpercept
Crout=Crin*Gainpercept
위 수식에서 "*"은 곱셈기호일 수도 있고, 설계 방식에 따라서는 다양한 수학적 의미를 가진 연산기호일 수도 있다. 이로써, 전자장치(100)는 디스플레이의 밝기 및 주변 밝기에 대응하여 입력영상신호의 색상정보를 1차적으로 조정한다.
전자장치(100)는 밝기 조정 단계(520)를 수행한다. 밝기 조정 단계(520)는 1차 색상 조정 단계(510)에서 발생할 수 있는 영상의 밝기 증가의 부작용을 최소화하기 위해 적용된다. 설계 방식에 따라서는, 밝기 조정 단계(520)는 상기한 부작용이 미비하다고 식별되는 경우에는 수행되지 않음으로써, 입력영상신호의 밝기정보가 조정되지 않고 유지될 수도 있다. 밝기 증가 부작용에 관한 보정값이 Gaincompress 이고, 입력영상신호의 밝기정보의 값이 Yin, 출력영상신호의 밝기정보의 값이 Yout 이면, 다음 관계를 만족한다.
Yout=Yin*Gaincompress
보정값 Gaincompress 는 제1보정값 Gainpercept 에 따라서 결정되며, 제1보정값에 반비례하는 값을 가지도록 마련됨으로써 채도의 증가에 따른 과도한 밝기의 향상을 방지한다.
전자장치(100)는 2차 색상 조정 단계(530)를 수행한다. 전자장치(100)는 1차 색상 조정 단계(510)를 적용한 입력영상신호의 색상정보에서의 소정 색상의 채도에 대해, 제2보정값을 적용한다. 입력영상신호의 색상을 Huein, 제2보정값이 반영된 색상을 Huepercept 라고 하면, 출력영상신호의 색상 Hueout 은 다음과 같다.
Hueout=Huein+Huepercept
전자장치(100)는 이와 같이 조정된 색상정보에 밝기정보를 조합함으로써 입력영상신호를 출력영상신호로 변환한다.
이하, 제1보정값의 식별 방법에 관해 설명한다.
도 6은 제1보정값을 식별하는 원리를 나타내는 예시도이다.
도 6에 도시된 바와 같이, 제1보정값은 디스플레이 밝기 및 주변 밝기의 두 가지 패러미터에 기반하여 도출된다. 본 도면에서 좌측 그래프는 디스플레이 밝기 및 보정값의 대응 커브의 예시를 나타내며, 우측 그래프는 주변 밝기 및 보정값의 대응 커브의 예시를 나타낸다. 본 실시예에서는 디스플레이 밝기 및 주변 밝기 각각에 대응하는 보정값을 그래프로 나타내었으나, 이는 하나의 예시에 불과하다. 디스플레이 밝기 또는 주변 밝기 각각에 대응하는 보정값은 수식, 함수, 테이블 등 다양한 형식으로 사전에 정의될 수 있다.
두 그래프 각각의 커브는 디스플레이 밝기 및 주변 밝기 각각에 대해 보정값이 비례하도록 나타나고 있다. 이는 디스플레이 밝기 또는 주변 밝기가 높을수록 사용자는 색상의 채도를 낮게 인지하므로, 이러한 상태를 보상하도록 채도에 대한 보정값이 많아져야 하기 때문이다. 예를 들어 디스플레이 밝기 x1에 대응하는 보정값이 y1이고, 주변 밝기 x2에 대응하는 보정값이 y2라고 할 때, 제1보정값 y는 다음과 같이 산출될 수 있다.
y=W1*y1+W2*y2
W1은 디스플레이 밝기에 대한 가중치, W2는 주변 밝기에 대한 가중치이다. 본 수식은 가능한 다양한 방법 중 하나의 예시에 불과하므로, 제1보정값의 산출 방법이 본 실시예에 의해 한정되지 않는다. W1, W2는 설계 방식에 따라서 동일한 1의 수치를 가지거나, 또는 서로 상이한 값을 가질 수도 있다. 만일 영상에 대한 디스플레이 밝기의 영향 및 주변 밝기의 영향이 거의 차이가 없는 환경의 경우라면, W1, W2는 1의 수치를 가질 수 있다. 디스플레이 밝기의 영향이 주변 밝기의 영향보다 큰 환경의 경우라면 W1>W2로 설정될 수 있다. 반면, 주변 밝기의 영향이 디스플레이 밝기의 영향보다 큰 환경의 경우라면 W1<W2로 설정될 수 있다. 가중치의 설정은 다양한 환경적 요인을 고려하여 다양한 수치로 설정될 수 있는 사항이므로, 구체적인 수치가 한정되지 않는다.
한편, 디스플레이의 밝기 및 주변 밝기 모두에 기초하여 제1보정값이 산출되는 것이 아니라, 설계 방식에 따라서는 디스플레이의 밝기 또는 주변 밝기의 어느 하나에 기초하여 제1보정값이 산출되는 것도 가능하다. 디스플레이의 밝기 x1에 기초하여 제1보정값 y가 산출되는 경우에, y=W3*y1을 만족할 수 있다(W3은 가중치, y1은 디스플레이 밝기 x1에 대응하는 보정값). 한편, 주변 밝기 x2에 기초하여 제1보정값 y가 산출되는 경우에, y=W4*y2를 만족할 수 있다(W4는 가중치, y2는 주변 밝기 x2에 대응하는 보정값). 각각의 경우의 가중치 W3, W4는, 설계 방식에 따라서 다양한 수치로 마련될 수 있다.
이하, 색상 별로 달라지는 보정값의 예시에 관해 설명한다.
도 7은 색상 별 보정값의 커브를 나타내는 그래프이다.
도 7에 도시된 바와 같이, 복수의 색상 별로 영상 특성에 대한 보정값이 산출될 수 있다. 사람의 눈은 색상 별로 민감도가 상이하다. 예를 들어, 어떤 사용자는 붉은색 계열의 색상에는 민감한 반면, 초록색 및 푸른색 계열의 색상에는 상대적으로 둔감할 수 있다. 또 어떤 사용자는, 이와 반대로 푸른색 계열의 색상에 상대적으로 민감할 수도 있다. 따라서, 제2보정값은 복수의 색상에 대해 동일한 값을 가지기보다는, 각 색상 별로 상이한 값을 가지는 것이 보다 사용자의 인지 특성을 정확하게 반영할 수 있다.
입력영상신호의 채도를 Chromain, 출력영상신호의 채도를 Chromaout, 사용자의 인지 특성에 관한 제2보정값을 Gainpercept 라고 하면, 다음 수식의 관계를 만족한다.
Chromaout=Chromain*Gainpercept
Gainpercept=Gainpanel*Gainenviron*Gainhue
Gainpanel 는 디스플레이 밝기에 따른 채도 보정값, Gainenviron 는 주변 밝기에 따른 채도 보정값, Gainhue 는 색상에 따른 채도 보정값을 나타낸다. 여기서, 설계 방식에 따라서는 본 수식의 각 보정값에 가중치가 반영될 수도 있다.
앞서 설명한 바와 같은 테스트영상에 대한 사용자의 조정 입력 결과에 기반하여, 복수의 색상 별로 보정값이 도출될 수 있다. 그러나, 실질적으로 영상이 표현 가능한 모든 색상에 대해 테스트영상을 사용하여 보정값을 도출하는 것은 용이하지 않다. 따라서, 전자장치(100)는 사용자의 조정 입력 결과를 기반으로 하여, 다양한 기법을 통해 사용자가 조정 입력을 수행하지 않은 색상에 대한 보정값을 도출할 수도 있다.
한 가지 예시로서, 전자장치(100)는 복수의 색상, 예를 들면 7가지의 색상 h1 내지 h7 각각에 대한 보정값을 도출한다. 색상 h1 및 h2를 고려할 때, h1 계열의 소정 색상에 관한 보정값은 h2의 경우보다 h1의 경우와 보다 유사할 것으로 예측된다. 이러한 관점에서, 다양한 선형적 기법을 통해, 색상 스펙트럼에서 상호 인접하는 색상 h1 및 h2 사이의 색상들에 관한 보정값이 도출될 수 있다. 이러한 방법으로, 색상 h2 및 h3, h3 및 h4, h4 및 h5, h5 및 h6, h6 및 h7 사이의 색상들에 관한 보정값이 도출될 수 있다.
다른 한 가지 예시로서, 사전에 마련된 수학적 시뮬레이션을 사용하거나, 인공지능을 사용하여 모든 색상에 관한 보정값이 도출될 수 있다. 예를 들면, 테스트영상에 대한 사용자의 조정 입력 결과에 따른 복수의 색상 h1 내지 h7 각각의 보정값이 사전에 마련된 인공지능에 따른 기계학습, 신경망 네트워크(neural network), 또는 딥러닝 알고리즘 중 적어도 하나에 적용될 수 있다.
일 예로, 전자장치(100)는 학습부 및 인식부의 기능을 함께 수행할 수 있다. 학습부는 학습된 신경망 네트워크를 생성하는 기능을 수행하고, 인식부는 학습된 신경망 네트워크를 이용하여 데이터를 인식(또는, 추론, 예측, 추정, 판단)하는 기능을 수행할 수 있다. 학습부는 신경망 네트워크를 생성하거나 갱신할 수 있다. 학습부는 신경망 네트워크를 생성하기 위해서 학습 데이터를 획득할 수 있다. 일 예로, 학습부는 학습 데이터를 전자장치(100)의 저장부 또는 외부로부터 획득할 수 있다. 학습 데이터는, 신경망 네트워크의 학습을 위해 이용되는 데이터일 수 있으며, 상기한 동작을 수행한 데이터를 학습데이터로 이용하여 신경망 네트워크를 학습시킬 수 있다.
학습부는 학습 데이터를 이용하여 신경망 네트워크를 학습시키기 전에, 획득된 학습 데이터에 대하여 전처리 작업을 수행하거나, 또는 복수 개의 학습 데이터들 중에서 학습에 이용될 데이터를 선별할 수 있다. 일 예로, 학습부는 학습 데이터를 기 설정된 포맷으로 가공하거나, 필터링하거나, 또는 노이즈를 추가/제거하여 학습에 적절한 데이터의 형태로 가공할 수 있다. 학습부는 전처리된 학습 데이터를 이용하여 상기한 동작을 수행하도록 설정된 신경망 네트워크를 생성할 수 있다.
학습된 신경망 네트워크는, 복수의 신경망 네트워크(또는, 레이어)들로 구성될 수 있다. 복수의 신경망 네트워크의 노드들은 가중치를 가지며, 복수의 신경망 네트워크들은 일 신경망 네트워크의 출력 값이 다른 신경망 네트워크의 입력 값으로 이용되도록 서로 연결될 수 있다. 신경망 네트워크의 예로는, CNN (Convolutional Neural Network), DNN (Deep Neural Network), RNN (Recurrent Neural Network), RBM (Restricted Boltzmann Machine), DBN (Deep Belief Network), BRDNN (Bidirectional Recurrent Deep Neural Network) 및 심층 Q-네트워크 (Deep Q-Networks)과 같은 모델을 포함할 수 있다.
한편 인식부는 상기한 동작을 수행하기 위해, 타겟 데이터를 획득할 수 있다. 타겟 데이터는 전자장치(100)의 저장부 또는 외부로부터 획득된 것일 수 있다. 타겟 데이터는 신경망 네트워크의 인식 대상이 되는 데이터일 수 있다. 인식부는 타겟 데이터를 학습된 신경망 네트워크에 적용하기 전에, 획득된 타겟 데이터에 대하여 전처리 작업을 수행하거나, 또는 복수 개의 타겟 데이터들 중에서 인식에 이용될 데이터를 선별할 수 있다. 일 예로, 인식부는 타겟 데이터를 기 설정된 포맷으로 가공하거나, 필터링 하거나, 또는 노이즈를 추가/제거하여 인식에 적절한 데이터의 형태로 가공할 수 있다. 인식부는 전처리된 타겟 데이터를 신경망 네트워크에 적용함으로써, 신경망 네트워크로부터 출력되는 출력값을 획득할 수 있다. 인식부는 출력값과 함께, 확률값 또는 신뢰도값을 획득할 수 있다.
한편, 디스플레이 밝기, 주변 밝기, 또는 색상에 따른 채도 보정값은 사전에 정의될 수 있으며, 그 방법은 여러 가지가 가능하다. 이하, 상기한 채도 보정값들을 사전에 마련하는 다양한 예시 중 일부에 관해 설명한다.
도 8은 인지실험을 통해 디스플레이 밝기에 따른 채도 보정값을 결정하는 원리를 나타내는 예시도이다.
도 8에 도시된 바와 같이, 디스플레이 밝기에 따른 채도 보정값을 결정하기 위한 인지 실험이 사전에 수행될 수 있다. 앞선 도 6 관련 실시예에서는 디스플레이 밝기에 따른 채도 보정값 및 주변 밝기에 따른 채도 보정값에 기초하여 제1보정값을 도출하는 경우에 관해 설명하였는데, 이 중에서 디스플레이 밝기에 따른 채도 보정값을 마련하기 위한 인지 실험에 관해 설명한다.
예를 들어, 동일한 최대 밝기 성능을 가진 두 대의 디스플레이(810, 820)가 마련되며, 각 디스플레이(810, 820)에는 동일한 색상의 영상(811, 821)이 표시된다. 이 때, 어느 한 디스플레이(820)는 최대 밝기로 영상(821)을 표시하는 한편, 다른 디스플레이(810)는 최대 밝기보다 낮은 밝기, 예를 들면 최대 밝기의 70% 수준으로 영상(811)을 표시하도록 설정된다. 이러한 경우에, Color wash-out 현상에 따라서, 최대 밝기로 설정된 디스플레이(820)에 표시되는 영상(821)의 채도가 낮게 인지되는 현상이 발생한다.
이러한 상태에서, 최대 밝기 대비 70% 수준으로 설정된 디스플레이(810)는 그대로 유지되는 한편, 최대 밝기로 설정된 디스플레이(820)에 표시되는 영상(821)의 채도가 단계적으로 증가되면서 피실험자들에게 제공된다. 여기서, 피실험자들에게는, 70% 밝기의 디스플레이(810)에 표시되는 영상(810)의 채도와 가장 유사해 보이는 채도를 가진, 최대 밝기의 디스플레이(820)에 표시되는 영상(821)을 선택하도록 한다. 이상의 실험을 디스플레이(810, 820)의 밝기를 변화시켜 가면서 진행하여 실험 데이터가 축적되도록 한다.
축적된 실험 데이터를 기반으로, 디스플레이 밝기에 따라서 발생하는 Color wash-out 현상을 방지할 수 있는 보정값이 도출될 수 있다.
한편, 상기한 방법 이외에, Color Appearance Model(CAM)을 이용한 보정값의 도출 방법이 가능하다. CAM은 인지되는 색상을 정량화하는 방법으로 개발된 수식 기반의 모델이다. 본 모델을 적용함으로써, 밝기에 따라서 인지되는 채도를 식별할 수 있고, 밝기의 상승에 따라서 저하되는 채도의 양을 역으로 산출할 수도 있다.
CIELAB 모델을 사용하는 경우의 채도 보정값 Sab 는 다음과 같다.
Sab=[C*/(√(C*2+L*2))](100%), C*=√(a*2+b*2)
L* 는 lightness of CIELAB coordinate, a* 및 b* 는 color coordinate of CIELAB (a*: green to red, b*:blue to yellow), C* 는 chromaticity of CIELAB (from a* and b*)를 각각 나타낸다.
1,000nit (1Knit) 디스플레이와 500nit의 디스플레이가 있다고 했을 때, 1,000nit 디스플레이에서 500nit 디스플레이와 동일한 채도를 가지기 위한 색상 보정값 k를 다음과 같이 산출 할 수 있다.
Sat1k=C1k/(√(C1k 2+L1k 2)), Sat500=C500/(√(C500 2+L500 2))
Sat1k_new=kC1k/(√(k2C1k 2+L1k 2))=Sat500
k=(C500L1k)/(L500C1k)
각 픽셀값마다 보정값 k를 구할 수 있다. 이상의 방법은 수식을 사용하여 보정값을 도출하기 위한 다양한 방법 중 한 가지 예시에 불과하다.
도 9는 인지실험을 통해 주변 밝기에 따른 채도 보정값을 결정하는 원리를 나타내는 예시도이다.
도 9에 도시된 바와 같이, 주변 밝기에 따른 채도 보정값을 결정하기 위한 인지 실험이 사전에 수행될 수 있다. 앞선 도 6 관련 실시예에서는 디스플레이 밝기에 따른 채도 보정값 및 주변 밝기에 따른 채도 보정값에 기초하여 제1보정값을 도출하는 경우에 관해 설명하였는데, 이 중에서 주변 밝기에 따른 채도 보정값을 마련하기 위한 인지 실험에 관해 설명한다.
예를 들어, 동일한 최대 밝기 성능을 가진 두 대의 디스플레이(910, 920)가 마련되며, 각 디스플레이(910, 920)에는 동일한 색상의 영상(911, 921)이 표시된다. 여기서, 하나의 디스플레이(910)는 암실 환경 하에서 영상(911)을 표시하는 반면, 다른 디스플레이(920)는 전등을 켜는 등의 주변 밝기를 높인 환경 하에서 영상(921)을 표시한다. 이러한 경우에, Color wash-out 현상에 따라서, 디스플레이(920)에 표시되는 영상(921)의 채도가 낮게 인지되는 현상이 발생한다.
이러한 상태에서, 주변 밝기가 상대적으로 높은 주변 환경 하의 디스플레이(920)에 표시되는 영상(921)의 채도가 단계적으로 증가되면서 피실험자들에게 제공된다. 여기서, 피실험자들에게는, 주변 밝기가 상대적으로 낮은 디스플레이(910)에 표시되는 영상(910)의 채도와 가장 유사해 보이는 채도를 가진, 주변 밝기가 상대적으로 높은 디스플레이(920)에 표시되는 영상(921)을 선택하도록 한다. 이상의 실험을 주변 밝기를 변화시켜 가면서 진행하여 실험 데이터가 축적되도록 한다.
축적된 실험 데이터를 기반으로, 주변 밝기에 따라서 발생하는 Color wash-out 현상을 방지할 수 있는 보정값이 도출될 수 있다.
한편, 색상 별 채도 보정값 또한 인지 실험을 통해 마련될 수 있다. 색상 별로 디스플레이의 밝기 및 주변 밝기의 변화가, 사용자에게 색상을 다르게 인지하도록 하는 정도가 다르다. 통상적으로, 원색에 가까운 색상보다는 중간색들에서 색상의 인지 왜곡 정도가 크다. 이러한 경향을 보정값에 반영하기 위해, 디스플레이의 밝기에 관련된 인지 실험 및 주변 밝기에 관련된 인지 실험을 진행함에 있어서, 다양한 색상 별로 진행되는 테스트를 통해 색상 별로 상이한 채도 보정값이 결정될 수 있다.
이하, 사용자 인지특성 테스트를 수행하는 예시에 관해 설명한다.
도 10은 전자장치가 사용자 인지특성 테스트를 실행하는 모습을 나타내는 예시도이다.
도 10에 도시된 바와 같이, 전자장치(100)는 사용자 개인의 인지 특성, 예를 들면 영상의 색상 별 채도에 관한 인지 특성을 식별하기 위한 테스트를 진행한다. 테스트 진행 시, 전자장치(100)는 기 정의된 디폴트값에 대해, 식별된 제1보정값 Gainpercept 이 반영된 테스트영상을 사용하게 된다. 제1보정값 Gainpercept 에 관해서는 앞선 실시예(도 5 관련 실시예 참조)에서 설명한 바와 같다. 전자장치(100)는 테스트영상의 신호값인 Rin, Gin, Bin 를 YCbCr 신호인 Yin, Cbin, Crin 로 변환하고, CbCr 신호에 제1보정값 Gainpercept 를 적용하여 Cbout, Crout 을 산출한다. 전자장치(100)는 Yin 에 채도 보상에 따른 밝기의 보정값 Gaincompress 가 적용된 밝기 정보 Yout 을 구하여, 표시 환경에 따른 인지 채도가 보상된 YCbCr 출력신호를 구성한다. 전자장치(100)는 YCbCr 출력신호를 RGB 신호로 변환하여, 최종적인 테스트영상의 신호 Rtest, Gtest, Btest 를 획득한다. 이상의 내용을 수식으로 나타내면 다음과 같다.
(Yin, Cbin, Crin)=RGBtoYCbCr(Rin, Gin, Bin)
Yout=Yin*Gaincompress
Cbout=Cbin*Gainpercept
Crout=Crin*Gainpercept
(Rtest, Gtest, Btest)=YCbCrtoRGB(Yout, Cbout, Crout)
위 수식에서 RGBtoYCbCr는 RGB 신호를 YCbCr 신호로 변환하는 함수이며, YCbCrtoRGB는 YCbCr 신호를 RGB 신호로 변환하는 함수이다.
전자장치(100)는 이와 같이 생성된 테스트영상을 화면 상에 표시한다. 예를 들어, 전자장치(100)는 9분할된 화면에 동일한 색상의 테스트영상을 표시하되, 어느 한 분할영역(예를 들어 본 도면의 경우에는 3번 영역)의 색상의 채도를 나머지 분할영역의 채도와 다르게 하여 표시한다. 전자장치(100)는 이와 같이 표시된 테스트영상에서, 다르게 인지되는 분할영역을 사용자입력부(130)를 통해 사용자가 선택하도록 한다. 예를 들어 화면이 9분할되었을 때에 각 분할영역은 1번부터 9번까지 넘버링된다. 사용자는 3번 영역의 채도가 다르게 인지되면, 사용자입력부(130)에 마련된 숫자 버튼 중에서 3번 버튼을 누른다. 만일, 모든 분할영역의 채도가 같게 인지되면, 사용자는 사용자입력부(130)의 숫자 버튼 중에서 0번 버튼을 누른다. 이 외에도, 다양한 사용자의 입력 방법이 마련될 수 있다.
전자장치(100)는 사용자입력부(130)를 통해 수신되는 사용자의 선택이 정답인 경우에, 해당 색상에 대한 점수를 가산한다. 전자장치(100)는 채도의 값을 다르게 조정하고, 채도가 상이한 분할영역의 위치를 변화시켜서, 이와 같은 테스트를 여러 번 반복적으로 수행한다.
전자장치(100)는 사전에 정의된 여러 색상에 대해 상기한 테스트를 수행함으로써, 복수의 색상 각각에 대한 사용자의 인지 점수를 획득할 수 있다.
한편, 사용자의 인지특성 테스트를 위한 테스트영상 세트 Testset 를 구성하기 위해, HSV color domain이 활용될 수 있다. 다양한 색상의 세트를 구성하기 위해서 Hue가 일정 간격으로 등분될 수 있는데, 예를 들어 6등분을 적용하는 경우에 대표 색상의 집합 Hueset 는 다음과 같다.
Hueset={0°, 60°, 120°, 180°, 240°, 300°}
테스트영상을 위한 Saturation 값과 Value 값이 너무 작거나 크면 인지적인 분별력이 떨어질 수 있으므로, 예를 들면 중간값인 0.5 정도가 사용될 수 있다. 테스트 단계를 늘리기 위해서 각 Hue 별로 다른 값을 가지는 Saturation 값과 Value 값이 사용될 수도 있다. 해당 값들이 0.5로 적용된다고 할 때, 최종적인 테스트영상 세트는 다음과 같이 표현될 수 있다.
Testset={(H1, S1, V1=0°, 0.5, 0.5), (H2, S2, V2=60°, 0.5, 0.5), ... (H6, S6, V6=300°, 0.5, 0.5)}
이와 같은 여섯 가지의 대표 색상들에 대해서, 전자장치(100)는 앞서 설명한 바와 같은 방식으로 인지특성 테스트를 수행한다. 전자장치(100)는 화면을 9분할하여, 8개의 분할영역에는 Testset 에 따른 테스트영상을 표시하고, 나머지 하나의 분할영역에는 Saturation 값에 오프셋을 반영하여 조정된 테스트영상을 표시한다. Testset 의각각의 색상에 대해서 여러 번의 테스트를 진행하되, Saturation 값의 오프셋의 강도를 점차 작게 하여 사용자의 인지력을 테스트한다.
사용자가 테스트에서 정확한 선택을 했을 경우에는 분별력 점수가 부여되는데, 이 점수는 예를 들면 Saturation 값의 오프셋의 크기와 반비례하게 부여될 수 있다. 오프셋의 크기가 작을수록 사용자는 타 분할영역에 근접한 채도의 분할영역을 구분해내어야 하므로, 사용자가 정확히 분별하였을 때에는 분별력 점수가 보다 크게 부여되도록 마련된다. 이러한 방식으로 Testset 의 각 색상 별로 인지특성 테스트가 진행되고, 전자장치(100)는 색상 별 분별력 점수 Scoreset 를 획득한다.
한편, 전자장치(100)는 획득한 Scoreset 에 기초하여 사용자의 인지 특성에 맞는 색상의 보정을 수행한다. 전자장치(100)는 Scoreset 에서사용자의 색상 구분력이 비고적 약한 색상 Huemin 을 찾은 후에, Huemin 를 기준축으로 할 때 좌측에 속하는 색상들의 구분력 점수를 더한 값 Scoreleft 과 우측에 속하는 색상들의 구분력 점수를 더한 값 Scoreright 을 산출한다. 전자장치(100)는 값을 더할 때, 같은 측면에 있는 색상들 중에서 Huemin 에 근접한 색상일수록 가중치를 부여하여 해당 색상의 구분력 점수의 영향을 높일 수 있도록 한다. 전자장치(100)는 산출된 Scoreleft 및 Scoreright 중에서 보다 큰 값 Scoremax 을 이용하여, 최종적으로 사용자의 인지 색상 보정값 Huepercept 을 산출한다.
Huepercept=Hueoffset, if Scoreleft < Scoreright
Huepercept=-Hueoffset, if Scoreleft > Scoreright
Hueoffset 은 Scoremax 에 비례하여 결정된다. Huepercept 는 앞선 실시예의 2차 색상 조정 단계(530, 도 5 참조)에서, 입력영상신호의 색상 Huein 중 Huemin 의 색상범위 안에 있는 색에 대해, 다음과 같은 색상 보정을 진행한다.
Hueout=Huein +Huepercept
이러한 방식에 따라서 전자장치(100)는 사용자의 인지특성, 예를 들면 각 색상 별 채도에 대한 인지 능력을 반영하여, 입력영상신호를 출력영상신호로 변환할 수 있다. 상기한 방식은 전자장치(100)가 사용자의 인지특성을 영상신호에 반영할 수 있는 다양한 방법 중 하나의 예시에 불과하므로, 본 실시예가 본 발명의 사상에 따른 전자장치(100)의 동작을 한정하는 것은 아니다.
예를 들어, 전자장치(100)는 UI를 사용자가 직접 색상 별 채도의 보정값을 입력할 수 있도록 마련된 UI를 표시하고, UI를 통한 입력을 수신할 수도 있다. 본 UI는 채도의 값을 수치로 입력할 수 있게 마련되거나, 채도의 조정이 가능한 슬라이드바 형태의 조정 메뉴를 포함할 수도 있다.
이상 설명한 실시예는, 전자장치(100)가 한 명의 사용자를 식별한 상태에서, 식별된 사용자의 인지특성을 고려하는 경우에 관한 것이다. 그러나, 전자장치(100)를 사용하는 사용자는 여러 명일 수 있으며, 해당 전자장치(100)를 사용하는 시점에 따라서 사용자가 달라질 수 있다. 이러한 경우를 고려하여, 전자장치(100)는 사용자 별로 영상의 인지특성 보정값을 관리하는 바, 이하 이러한 실시예에 관해 설명한다.
도 11은 전자장치가 사용자 별로 영상의 인지특성 보정값을 관리 및 적용하는 원리를 나타내는 구성 블록도이다.
도 11에 도시된 바와 같이, 전자장치(100)의 프로세서(160)는 저장부(140)에 소정 사용자의 인지 특성에 대응하는 보정값을 저장할 수 있으며, 각 보정값은 복수의 사용자에 대응하도록 저장됨으로써 DB(1100)로 구축된다. 전자장치(100)는 사용자가 식별된 상태에서 해당 사용자의 인지특성에 맞는 보정값을 도출하면, 도출된 보정값을 해당 사용자의 식별된 ID에 대응하도록 DB(1100)로 저장한다. 보정값의 도출 방법은 앞선 실시예에서 설명한 바 있으므로, 자세한 설명을 생략한다.
프로세서(160)가 사용자를 식별하는 방법은 여러 가지가 있으며, 어느 한 가지로 한정되지 않는다. 예를 들면, 프로세서(160)는 사용자입력부(130)를 통해 사용자가 입력한 사용자 ID 정보를 수신하여 로그인을 수행하고, 로그인이 정상적으로 수행되는 경우에 해당 사용자를 식별할 수 있다. 또는, 프로세서(160)는 인터페이스부(120)를 통해서도 사용자 ID 정보를 수신할 수도 있다. 또는, 프로세서(160)는 카메라로 구현된 센서(150)로부터 사용자를 촬상한 이미지를 수신하고, 이미지 분석을 통해 이미지 내에서 사용자 ID를 식별할 수도 있다.
프로세서(160)는 식별된 사용자 ID에 대응하는 보정값을 DB(1100)에서 검색한다. 사용자 ID에 대응하는 보정값이 DB(1100)에서 검색되지 않으면, 프로세서(160)는 앞선 실시예에서 설명한 바와 같은 사용자의 인지특성 테스트를 수행할 수 있다. 사용자 ID에 대응하는 보정값이 DB(1100)에서 검색되면, 프로세서(160)는 검색된 보정값을 반영하여 영상을 표시한다.
한편, 사용자의 인지특성을 고려한 보정값이 도출되는 제1시점과, 차후 보정값을 반영하여 영상을 표시하는 제2시점 사이의 환경의 차이가 발생할 수 있다. 즉, 제1시점에서의 디스플레이의 밝기 또는 주변 밝기와, 제2시점에서의 디스플레이의 밝기 또는 주변 밝기가 차이가 발생할 수 있다. 예를 들면, 제1시점 이후에 실내 전등을 보다 밝은 것으로 바꾸었다고 하면, 제2시점에서는 제1시점에 비해 주변 밝기가 올라간 환경 하에 영상이 표시된다. 이러한 점을 고려하여, 전자장치(100)는 보정값에 대한 추가 조정을 수행할 수 있는데, 이하 이러한 실시예에 관해 설명한다.
도 12는 전자장치가 환경 변화에 대응하여 보정값을 조정하는 과정을 나타내는 플로우차트이다.
도 12에 도시된 바와 같이, 하기 동작은 전자장치의 프로세서(160, 도 2 참조)에 의해 수행된다.
1210 단계에서 전자장치는 사용자의 인지특성에 관한 보정값을 도출하여 저장한다. 보정값의 도출 방법은 앞선 실시예에서 설명한 바와 같다.
1220 단계에서 전자장치는 영상의 표시 이벤트를 감지한다.
1230 단계에서 전자장치는 현재 전자장치를 사용하는 사용자를 식별한다.
1240 단계에서 전자장치는 식별된 사용자에 대응하는 보정값의 도출 시점의 표시 환경의 값과, 현재 시점의 표시 환경의 값의 차이를 산출한다. 예를 들면, 전자장치는 보정값의 도출 시점에서의 디스플레이 밝기와 현재 시점의 디스플레이 밝기의 차이, 그리고 보정값의 도출 시점에서의 주변 밝기와 현재 시점의 주변 밝기의 차이를 산출할 수 있다.
1250 단계에서 전자장치는 산출된 차이값이 문턱값보다 큰지 여부를 식별한다.
산출된 차이값이 문턱값보다 크다고 식별되면(1250 단계에서 "Yes"), 1260 단계에서 전자장치는 산출된 차이값에 대응하도록 기 정의된 오프셋값을 보정값에 반영한다. 이러한 오프셋값은 사전에 실험, 시뮬레이션 등에 의해 정의되거나, 함수 또는 수식에 따라서 정해질 수 있다. 예를 들어 디스플레이 밝기에 관한 차이가 소정의 제1문턱값을 넘지 않고, 주변 밝기에 관한 차이가 소정의 제2문턱값을 넘는 경우에, 전자장치는 주변 밝기의 차이값에 대응하는 오프셋값을 보정값에 반영할 수 있다.
1270 단계에서 전자장치는 보정값에 따라서 보정된 영상을 표시한다.
반면에, 산출된 차이값이 문턱값보다 크지 않다고 식별되면(1250 단계에서 "No"), 전자장치는 그대로 1270 단계로 이행한다. 차이값이 문턱값보다 크지 않다는 것은, 두 표시 환경 사이에 차이가 있지만 그 차이가 의미가 있을 정도로 크지 않다는 것을 의미한다.
이상 실시예들에서 설명한 바와 같은 장치의 동작은, 해당 장치에 탑재된 인공지능에 의해 수행될 수 있다. 인공지능은 기계 학습 알고리즘을 활용하여 다양한 제반 시스템에 적용될 수 있다. 인공지능 시스템은 인간 수준 내지는 인간 수준에 버금가는 지능을 구현하는 컴퓨터 시스템으로서, 기계, 장치 또는 시스템이 자율적으로 학습하고 판단하며, 사용 경험의 누적에 기반하여 인식률 및 판단 정확도가 향상되는 시스템이다. 인공지능 기술은 입력되는 데이터들의 특징을 스스로 분류하고 학습하는 알고리즘을 이용한 기계학습 기술 및 알고리즘을 활용하여, 인간의 두뇌의 인지, 판단 등의 기능을 모사하는 요소 기술들로 구성된다.
요소 기술들은, 예를 들면 인간의 언어와 문자를 인식하는 언어적 이해 기술, 사물을 인간의 시각처럼 인식하는 시각적 이해 기술, 정보를 판단하여 논리적으로 추론하고 예측하는 추론 및 예측 기술, 인간의 경험 정보를 지식 데이터로 처리하는 지식 표현 기술, 차량의 자율 주행이나 로봇의 움직임을 제어하는 동작 제어 기술 중 적어도 어느 하나를 포함한다.
여기서, 언어적인 이해는 인간의 언어 또는 문자를 인식하고 응용 처리하는 기술로서, 자연어의 처리, 기계 번역, 대화 시스템, 질의 응답, 음성 인식 및 합성 등을 포함한다.
추론 예측은 정보를 판단하여 논리적으로 예측하는 기술로서, 지식 및 확률 기반 추론, 최적화 예측, 선호 기반 계획, 추천 등을 포함한다.
지식 표현은 인간의 경험 정보를 지식 데이터로 자동화 처리하는 기술로서, 데이터의 생성 및 분류와 같은 지식 구축, 데이터의 활용과 같은 지식 관리 등을 포함한다.
본 발명의 예시적 실시예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 이러한 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 예를 들어, 컴퓨터 판독 가능 매체는 삭제 가능 또는 재기록 가능 여부와 상관없이, USB 메모리장치와 같은 비휘발성 저장 장치, 또는 예를 들어 RAM, ROM, 플래시메모리, 메모리 칩, 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 이동 단말 내에 포함될 수 있는 메모리는 본 발명의 실시 예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 본 저장 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어의 기술 분야에서 숙련된 기술자에게 공지되어 사용 가능한 것일 수도 있다. 또는, 본 컴퓨터 프로그램 명령은 컴퓨터 프로그램 프로덕트에 의해 구현될 수도 있다.
100 : 전자장치
110 : 디스플레이부
120 : 인터페이스부
130 : 사용자입력부
140 : 저장부
150 : 센서
160 : 프로세서

Claims (20)

  1. 전자장치에 있어서,
    영상의 표시 환경을 식별하고,
    상기 영상의 특성에 관한 사용자의 시인성을 식별하도록 제공된 테스트영상의 특성을 상기 식별된 표시 환경에 대응하도록 보정하고,
    상기 보정된 테스트영상이 디스플레이에 표시되도록 제어하고,
    상기 표시된 테스트영상의 특성에 대한 사용자의 조정 입력에 기초하여 상기 영상의 특성을 보정하는 프로세서를 포함하는 전자장치.
  2. 제1항에 있어서,
    상기 표시 환경은, 상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나를 포함하고,
    상기 프로세서는, 상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나에 대응하여 상기 테스트영상의 특성을 보정하는 전자장치.
  3. 제2항에 있어서,
    상기 프로세서는, 상기 테스트영상의 색상 별 채도를 보정하는 전자장치.
  4. 제2항에 있어서,
    상기 프로세서는, 상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나에 비례하도록 기 정의된 제1보정값을 식별하고, 상기 제1보정값을 상기 테스트영상의 특성의 값에 반영하는 전자장치.
  5. 제4항에 있어서,
    영상신호를 수신하는 인터페이스부를 더 포함하고,
    상기 프로세서는, 상기 인터페이스부를 통해 수신되는 상기 영상신호의 색상정보에, 상기 제1보정값 및 상기 조정 입력에 기초한 제2보정값을 함께 반영함으로써 상기 영상의 특성을 보정하는 전자장치.
  6. 제5항에 있어서,
    상기 프로세서는, 상기 인터페이스부를 통해 수신되는 상기 영상신호의 밝기정보에, 상기 제1보정값에 반비례하도록 기 정의된 제3보정값을 반영하는 전자장치.
  7. 제4항에 있어서,
    상기 프로세서는, 상기 디스플레이의 밝기에 대응하는 보정값 및 상기 주변 밝기에 대응하는 보정값을 합산하여 상기 제1보정값을 산출하는 전자장치.
  8. 제7항에 있어서,
    상기 프로세서는, 상기 디스플레이의 밝기에 대응하는 보정값 및 상기 주변 밝기에 대응하는 보정값 각각에 상이한 가중치를 부여하여 상기 제1보정값을 산출하는 전자장치.
  9. 제1항에 있어서,
    영상신호를 수신하는 인터페이스부를 더 포함하고,
    상기 프로세서는, 상기 인터페이스부를 통해 수신되는 상기 영상신호의 색상정보에 상기 조정 입력에 기초한 제2보정값을 반영함으로써 상기 영상의 특성을 보정하는 전자장치.
  10. 제9항에 있어서,
    상기 테스트영상은 동일 색상을 가진 복수의 분할된 영역을 포함하고, 상기 복수의 영역 중 하나는 나머지 영역들과 상이한 채도를 가지고,
    상기 프로세서는, 상기 조정 입력이 상기 채도가 상이한 영역을 정상적으로 선택하는지 여부에 대응하여 상기 색상에 대한 사용자의 점수를 계측하고, 상기 계측된 점수에 기초하여 상기 제2보정값을 도출하는 전자장치.
  11. 제1항에 있어서,
    사용자에 대응하는 제2보정값을 저장하는 저장부를 더 포함하고,
    상기 프로세서는,
    상기 영상의 표시 시에 상기 저장부에 저장된 제2보정값을 획득하고,
    상기 제2보정값의 도출 시점의 상기 표시 환경 및 현재 시점의 상기 표시 환경의 차이에 기초하여 상기 제2보정값을 조정하는 전자장치.
  12. 전자장치의 제어방법에 있어서,
    영상의 표시 환경을 식별하는 단계와,
    상기 영상의 특성에 관한 사용자의 시인성을 식별하도록 제공된 테스트영상의 특성을 상기 식별된 표시 환경에 대응하도록 보정하는 단계와,
    상기 보정된 테스트영상이 디스플레이에 표시되도록 제어하는 단계와,
    상기 표시된 테스트영상의 특성에 대한 사용자의 조정 입력에 기초하여 상기 영상의 특성을 보정하는 단계를 포함하는 전자장치의 제어방법.
  13. 제12항에 있어서,
    상기 표시 환경은, 상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나를 포함하고,
    상기 테스트영상의 특성을 보정하는 단계는, 상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나에 대응하여 상기 테스트영상의 특성을 보정하는 단계를 포함하는 전자장치의 제어방법.
  14. 제13항에 있어서,
    상기 영상의 특성을 보정하는 단계는, 상기 테스트영상의 색상 별 채도를 보정하는 전자장치의 제어방법.
  15. 제13항에 있어서,
    상기 프로세서는,
    상기 테스트영상의 특성을 보정하는 단계는,
    상기 디스플레이의 밝기 또는 주변 밝기 중 적어도 하나에 비례하도록 기 정의된 제1보정값을 식별하고, 상기 제1보정값을 상기 테스트영상의 특성의 값에 반영하는 단계를 포함하는 전자장치의 제어방법.
  16. 제15항에 있어서,
    상기 영상의 특성을 보정하는 단계는,
    영상신호의 색상정보에, 상기 제1보정값 및 상기 조정 입력에 기초한 제2보정값을 함께 반영함으로써 상기 영상의 특성을 보정하는 단계를 포함하는 전자장치의 제어방법.
  17. 제16항에 있어서,
    상기 영상의 특성을 보정하는 단계는,
    상기 영상신호의 밝기정보에, 상기 제1보정값에 반비례하도록 기 정의된 제3보정값을 반영하는 단계를 포함하는 전자장치의 제어방법.
  18. 제15항에 있어서,
    상기 테스트영상의 특성을 보정하는 단계는,
    상기 디스플레이의 밝기에 대응하는 보정값 및 상기 주변 밝기에 대응하는 보정값을 합산하여 상기 제1보정값을 산출하는 단계를 포함하는 전자장치의 제어방법.
  19. 제18항에 있어서,
    상기 테스트영상의 특성을 보정하는 단계는,
    상기 디스플레이의 밝기에 대응하는 보정값 및 상기 주변 밝기에 대응하는 보정값 각각에 상이한 가중치를 부여하여 상기 제1보정값을 산출하는 단계를 포함하는 전자장치의 제어방법.
  20. 제12항에 있어서,
    상기 영상의 특성을 보정하는 단계는,
    영상신호의 색상정보에 상기 조정 입력에 기초한 제2보정값을 반영함으로써 상기 영상의 특성을 보정하는 전자장치의 제어방법.
KR1020200112192A 2020-09-03 2020-09-03 전자장치 및 그 제어방법 KR20220030615A (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020200112192A KR20220030615A (ko) 2020-09-03 2020-09-03 전자장치 및 그 제어방법
EP21864613.1A EP4195657A4 (en) 2020-09-03 2021-08-31 ELECTRONIC DEVICE AND ITS CONTROL METHOD
PCT/KR2021/011642 WO2022050653A1 (ko) 2020-09-03 2021-08-31 전자장치 및 그 제어방법
CN202180054514.3A CN116134810A (zh) 2020-09-03 2021-08-31 电子装置及其控制方法
US18/117,235 US20230206811A1 (en) 2020-09-03 2023-03-03 Electronic apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200112192A KR20220030615A (ko) 2020-09-03 2020-09-03 전자장치 및 그 제어방법

Publications (1)

Publication Number Publication Date
KR20220030615A true KR20220030615A (ko) 2022-03-11

Family

ID=80491214

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200112192A KR20220030615A (ko) 2020-09-03 2020-09-03 전자장치 및 그 제어방법

Country Status (5)

Country Link
US (1) US20230206811A1 (ko)
EP (1) EP4195657A4 (ko)
KR (1) KR20220030615A (ko)
CN (1) CN116134810A (ko)
WO (1) WO2022050653A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117857762B (zh) * 2024-03-08 2024-05-14 深圳市东陆科技有限公司 显示模组的图像处理方法、装置、芯片及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5582778B2 (ja) * 2009-12-21 2014-09-03 キヤノン株式会社 投射装置、プログラム、及び投射装置の制御方法
CN103295558B (zh) * 2012-03-05 2016-01-27 联想(北京)有限公司 显示方法及显示设备
EP3211892A4 (en) * 2014-11-14 2017-11-29 Samsung Electronics Co., Ltd. Method and device for image display based on metadata, and recording medium therefor
KR102317118B1 (ko) * 2015-09-09 2021-10-25 삼성디스플레이 주식회사 영상 보정 장치 및 이를 포함하는 표시 장치
KR102545813B1 (ko) * 2016-12-30 2023-06-21 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법
KR102116024B1 (ko) * 2018-07-20 2020-06-05 제이지인더스트리 주식회사 채도 보정 기능을 갖는 디지털 사이니지
US11302288B2 (en) * 2018-09-28 2022-04-12 Apple Inc. Ambient saturation adaptation

Also Published As

Publication number Publication date
US20230206811A1 (en) 2023-06-29
EP4195657A1 (en) 2023-06-14
EP4195657A4 (en) 2024-01-17
CN116134810A (zh) 2023-05-16
WO2022050653A1 (ko) 2022-03-10

Similar Documents

Publication Publication Date Title
US9927867B2 (en) Method and apparatus for processing an image based on detected information
US10354124B2 (en) Electronic apparatus and controlling method for improve the image quality preference of skin area
US20130128074A1 (en) Display unit, image sensing unit and display system
EP3732670B1 (en) Mobile terminal adjusting image quality of display, and method of operating the same
US20230206811A1 (en) Electronic apparatus and control method thereof
US20190373206A1 (en) Mobile terminal adjusting image quality of display, and method of operating the same
WO2021167231A1 (ko) 전자장치 및 그 제어방법
EP3596700B1 (en) Methods, systems, and media for color palette extraction for video content items
CN114613327B (zh) 一种oled显示设备及oled显示方法
KR102558472B1 (ko) 밝기 정보에 기반하여 콘텐트의 표시를 제어하는 전자 장치 및 그의 동작 방법
US20230116831A1 (en) Display device
CN115410534A (zh) 显示设备及显示设备的显示校正方法
KR20220164222A (ko) 전자장치 및 그 제어방법
EP3942790B1 (en) Camera color image processing
US20230043455A1 (en) Customized display color profiles for individual color preference
US20220044648A1 (en) Electronic apparatus and method of controlling the same
US11281525B1 (en) Electronic apparatus and method of controlling the same
WO2021251733A1 (ko) 디스플레이장치 및 그 제어방법
TW202311934A (zh) 用於個人顏色偏好的客製化顯示顏色設定
KR20220017609A (ko) 전자장치 및 그 제어방법
JP4400727B2 (ja) 画像処理装置および画像処理方法
KR20230068894A (ko) 디스플레이 장치 및 그 동작방법
CN117670659A (zh) 一种图像效果调整方法、设备及介质
JP2011044926A (ja) 画像処理装置、画像処理方法、及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination