KR102556275B1 - 디스플레이의 픽셀 휘도 및/또는 색차 응답 변화의 검출 및/또는 보정을 위한 시스템 및 방법 - Google Patents

디스플레이의 픽셀 휘도 및/또는 색차 응답 변화의 검출 및/또는 보정을 위한 시스템 및 방법 Download PDF

Info

Publication number
KR102556275B1
KR102556275B1 KR1020187007665A KR20187007665A KR102556275B1 KR 102556275 B1 KR102556275 B1 KR 102556275B1 KR 1020187007665 A KR1020187007665 A KR 1020187007665A KR 20187007665 A KR20187007665 A KR 20187007665A KR 102556275 B1 KR102556275 B1 KR 102556275B1
Authority
KR
South Korea
Prior art keywords
pixel
display panel
offset
correction
code value
Prior art date
Application number
KR1020187007665A
Other languages
English (en)
Other versions
KR20180039725A (ko
Inventor
제레미 셀란
Original Assignee
밸브 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 밸브 코포레이션 filed Critical 밸브 코포레이션
Publication of KR20180039725A publication Critical patent/KR20180039725A/ko
Application granted granted Critical
Publication of KR102556275B1 publication Critical patent/KR102556275B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • G09G3/3208—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED]
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/006—Electronic inspection or testing of displays and display drivers, e.g. of LED or LCD displays
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/06—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed using colour palettes, e.g. look-up tables
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0242—Compensation of deficiencies in the appearance of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0247—Flicker reduction other than flicker reduction circuits used for single beam cathode-ray tubes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0285—Improving the quality of display appearance using tables for spatial correction of display data

Abstract

디스플레이상의 픽셀 별 휘도 및/또는 색차 변화를 측정하기 위한 방법 및 시스템이 개시되며, 상기 측정치들을 전역 및 / 또는 픽셀 별 보정 계수들의 세트로서 인코딩 및/또는 저장하는 것, 및/또는 상기 측정된 변화들과 역효과를 갖는 영상을 디지털 방식으로 조작하여, 상기 변화들에 의해 야기된 시각적인 아티팩트의 출현을 줄인다. 이러한 방법 및 시스템은 예를 들어, 가상 현실 헤드셋의 생산 과정의 일부로서, 그리고 그러한 아티팩트를 전시하는 디스플레이(예 : 휴대폰, 시계, 증강 현실 디스플레이)를 고 충실도로 사용하는 다른 응용 분야에서도 사용될 수 있다.

Description

디스플레이의 픽셀 휘도 및/또는 색차 응답 변화의 검출 및/또는 보정을 위한 시스템 및 방법
본 출원은 2015년 8월 19일자로 출원된 임시 출원 일련 번호 62/207,091의 이익을 주장하며, 그 내용은 모든 목적을 위해 그 전체가 본원에 참고로 인용된다.
본 발명은 일반적으로 비디오 디스플레이 기술에 관한 것으로, 보다 구체적으로는 디스플레이에서 픽셀 별 에너지 방출 변화를 측정하고, 이러한 측정값을 전역 및 픽셀 단위 보정 계수 세트로 인코딩 및 저장하고, 측정된 변화량과 역효과를 갖는 이미지를 디지털 방식으로 조작하는 시스템 및 방법에 관한 것으로, 그러한 변화에 의해 야기되는 아티팩트의 출현이 감소 될 수 있다.
특정 디스플레이 기술은 픽셀마다 다른 휘도 및/또는 비색 (감마) 에너지 방출 응답을 나타낸다.
용어 및 그 정확한 의미가 디스플레이 업계에서 표준화된 것으로 알려지지는 않았지만 이러한 변형을 때때로 "무라 결함(mura defect)", "무라 변형(mura variation)"또는 단순히 "무라(mura)"라고 한다.
예를 들어, 액정 디스플레이(Liquid Crystal Display, "LCDs")에서, 백라이트는 디스플레이에 걸쳐 사용자에게 보이는 공간적 변화를 나타낼 수 있다. 다른 예로서, 유기 발광 다이오드("OLED") 디스플레이에서, 인접한 픽셀은 실질적으로 상이한 컬러 응답을 나타낼 수 있다.
이러한 효과는 일정한 색상과 부드러운 경사도 영역에서 특히 두드러지며, 이 영역은 관찰자에게 "잡음"처럼 보일 수 있다. 이 아티팩트는 헤드 마운트 디스플레이("HMD")에서 특히 바람직하지 않으며 때로는 시청자가 보고 있는 "오염된 윈도우"로 보인다.
다양한 범위에 대한 이러한 변화를 해결하기 위해 다양한 주관/수동 및 물체/광전자 방법(때로는 일반적으로 "무라 보정"기술로 알려짐)이 당 업계에 알려져 있다. 그러나, 본 발명의 양태에 따른 이 기술 분야의 현재의 한계를 해소하는 것이 바람직하다.
본 발명은 일반적으로 비디오 디스플레이 기술에 관한 것으로, 보다 구체적으로는 디스플레이에서 픽셀 별 에너지 방출 변화를 측정하고, 이러한 측정값을 전역 및 픽셀 단위 보정 계수 세트로 인코딩 및 저장하고, 측정된 변화량과 역효과를 갖는 이미지를 디지털 방식으로 조작하는 시스템 및 방법에 관한 것으로, 그러한 변화에 의해 야기되는 아티팩트의 출현이 감소 될 수 있다.
본 발명은 디스플레이 패널의 부분의 각 서브-픽셀에 대해 방출된 에너지를 추정하는 단계; 미리 결정된 보정 모델에 기초하여 상기 디스플레이 패널의 상기 부분에 대응하는 픽셀 별 보정 계수들의 세트를 계산하는 단계; 및 상기 디스플레이 패널의 상기 부분에 전송되는 이미지 데이터에 상기 보정 계수를 실시간으로 적용하는 단계를 포함한다.
또한, 본 발명은 디스플레이 패널의 부분의 각 서브-픽셀에 대해 방출된 에너지를 추정하는 단계; 미리 결정된 보정 모델에 기초하여 상기 디스플레이 패널의 상기 부분에 대응하는 전역 및 픽셀 단위 보정 계수들의 세트를 계산하는 단계; 및 상기 디스플레이 패널의 상기 부분에 전송되는 이미지 데이터에 상기 보정 계수를 실시간으로 적용하는 단계를 포함한다.
본 발명은 일반적으로 비디오 디스플레이 기술에 관한 것으로, 보다 구체적으로는 디스플레이에서 픽셀 별 에너지 방출 변화를 측정하고, 이러한 측정값을 전역 및 픽셀 단위 보정 계수 세트로 인코딩 및 저장하고, 측정된 변화량과 역효과를 갖는 이미지를 디지털 방식으로 조작하는 시스템 및 방법에 관한 것으로, 그러한 변화에 의해 야기되는 아티팩트의 출현이 감소 될 수 있다.
예로써, 실제 크기와 비례하지 않은 첨부 도면을 참조할 것이다.
도 1은 본 발명의 특정 실시 예의 양태들을 구현하는데 사용될 수 있는 컴퓨팅 장치의 예시적인 다이어그램이다.
도 2a는 디스플레이로 보내지는 예시적인 모든 녹색 미가공 이미지를 묘사하는 사진의 그레이 스케일 버전이다.
도 2b는 도 2a의 디스플레이로 보내지는 예시적인 모든 녹색 미가공 이미지를 묘사하는 사진의 그레이 스케일 버전으로, 본 발명의 예시적인 실시 예에 따라 관찰자에게 표시되고, 보정되지 않은 상태로 유지된다.
도 2c는 본 발명의 양태에 따른 예시적인 픽셀 별 보정 계수를 묘사하는 사진이다.
도 2d는 예시적인 디스플레이로 전송되고, 도 2b에 도시된 이미지에 대응하는, 본 발명의 양상에 따른 미리 보정된 이미지를 묘사하는 사진의 그레이 스케일 버전이다.
도 2e는 도 2d에 도시된 이미지에 대응하는, 본 발명의 양태에 따라 관찰자에게 보여지는 예시적인 최종 이미지를 묘사하는 사진의 그레이 스케일 버전이다.
도 3은 본 발명의 양태에 따라 각 서브-픽셀에 대한 에너지 추정을 달성하기에 충분한 해상도를 갖는 일정한 녹색 이미지의 디스플레이 패널상의 예시적인 이미지 캡쳐를 묘사하는 사진의 그레이 스케일 버전이다.
도 4는 도 3에 도시된 이미지의 일부의 확대된 그레이 스케일 버전의 사진(대략적인 줌 계수=1000)이며, 녹색 채널만이 조명되고, 시각적인 서브-픽셀을 갖는 5*5 픽셀 영역을 포함한다.
도 5a 및 도 5b는 본 발명의 양태에 따른 예시적인 이미지 캡쳐 시스템 및 구성의 양상을 도시 한 사진이다.
도 6은 헤드 장착 디스플레이 구성을 시뮬레이션하기 위해 본 발명의 양태에 따른 맞춤형 전자 장치(630)에 의해 구동되는 2 개의 예시적인 디스플레이 패널 (610, 620)을 도시한다.
도 7은 본 발명의 양태에 따른 기하학적 렌즈 편심에 대한 해결을 용이하게 하는 교정 중에 사용하기 위한 테스트중인 디스플레이 패널 상에 도시된 그리드 패턴을 도시한다.
도 8은 특정 실시 예에서 사용된 암 필드 감산 및 렌즈 보정 단계 이후에 본 발명의 양상에 따라 캡쳐된 이미지를 묘사하는 사진의 그레이 스케일 버전이다.
도 9는 본 발명의 양상에 따라 캡쳐된 이미지의 코너 검출 단계들을 묘사하는 사진의 그레이 스케일 버전이다.
도 10은 본 발명의 양태에 따른 직선 정렬 후의 테스트 패널의 캡쳐된 이미지의 예시적인 32*32 픽셀 삽입 영역을 묘사하는 사진의 그레이 스케일 버전이다.
도 11은 본 발명의 양상에 따라 테스트중인 예시적인 디스플레이 패널의 일부에서 픽셀 단위 에너지 방출을 그래프로 도시한다.
당업자는 본 발명의 다음의 설명이 단지 예시적인 것이며 임의의 방식으로 제한하는 것이 아님을 알 수 있을 것이다. 본 발명의 다른 실시 예는 본 개시의 이점을 갖는 당업자에게 용이하게 제안될 것이며, 본 명세서에서 정의된 일반적인 원리는 본 발명의 사상 및 범위를 벗어나지 않고 다른 실시 예 및 응용에 적용될 수있다. 따라서, 본 발명은 도시된 실시 예들에 한정되는 것이 아니라, 본 명세서에 개시된 원리들 및 특징들과 일치하는 가장 넓은 범위에 따른다. 이제 첨부된 도면에 도시된 바와 같이 본 발명의 특정 구현 예를 상세하게 참조 할 것이다. 동일한 참조 번호는 도면 및 이하의 설명 전체에 걸쳐 동일하거나 유사한 부분을 지칭하기 위해 사용될 것이다.
이 상세한 설명에서 기술된 데이터 구조 및 코드는 전형적으로 컴퓨터 시스템에 의해 사용하기 위한 코드 및/또는 데이터를 저장할 수 있는 임의의 장치 또는 매체일 수 있는 컴퓨터 판독 가능 저장 매체에 저장된다. 여기에는 디스크 드라이브, 자기 테이프, CD(컴팩트 디스크) 및 DVD(디지털 다용도 디스크 또는 디지털 비디오 디스크)와 같은 자기 및 광학 저장 장치와 (신호가 변조되는 반송파를 갖거나 갖지 않는) 전송 매체에 내장된 컴퓨터 명령 신호 전송 매체에 내장된 컴퓨터 명령 신호가 포함된다. 예를 들어, 전송 매체는 인터넷과 같은 통신 네트워크를 포함할 수 있다.
도 1은 본 발명의 특정 실시 예의 양태들을 구현하는데 사용될 수 있는 컴퓨팅 장치(100)의 예시적인 다이어그램이다. 컴퓨팅 장치(100)는 버스(101), 하나 이상의 프로세서(105), 메인 메모리(110), 판독 전용 기억 장치(ROM)(115), 저장 장치(120), 하나 이상의 입력 장치(125), 하나 이상의 출력 장치(130) 및 통신 인터페이스(135)를 포함할 수 있다. 버스(101)는 컴퓨팅 장치(100)의 구성 요소들간의 통신을 허용하는 하나 이상의 컨덕터를 포함할 수 있다. 프로세서(105)는 명령을 해석하고 실행하는 임의의 유형의 종래 프로세서, 마이크로 프로세서 또는 프로세싱 로직을 포함할 수 있다. 메인 메모리(110)는 랜덤 액세스 메모리(RAM) 또는 프로세서에 의한 실행을 위한 정보 및 명령어를 저장하는 다른 유형의 동적 저장 장치를 포함할 수 있다. ROM(115)은 프로세서(105)에 의한 사용을 위한 정적 정보 및 명령들을 저장하는 종래의 ROM 장치 또는 다른 유형의 정적 저장 장치를 포함할 수 있다. 저장 장치(120)는 자기 및/또는 광학 기록 매체 및 대응하는 드라이브를 포함할 수 있다. 입력 장치(들)(125)는 사용자가 키보드, 마우스, 펜, 스타일러스, 필기 인식, 음성 인식, 생체 인식 메커니즘 등과 같은 컴퓨팅 장치(100)에 정보를 입력할 수 있게 하는 하나 이상의 종래 메커니즘을 포함할 수 있다. 출력 장치(들)(130)는 디스플레이, 프로젝터, A / V 수신기, 프린터, 스피커 등을 포함하는 정보를 사용자에게 출력하는 하나 이상의 종래 메커니즘을 포함할 수 있다. 통신 인터페이스(135)는 컴퓨팅 장치/서버(100)가 다른 장치 및/또는 시스템과 통신할 수 있게 하는 임의의 트랜시버와 유사한 메커니즘을 포함할 수 있다. 컴퓨팅 장치(100)는 데이터 저장 장치(120)와 같은 다른 컴퓨터 판독 가능 매체 또는 통신 인터페이스(135)를 통해 다른 장치로부터 메모리(110)로 판독될 수 있는 소프트웨어 명령에 기초한 동작을 수행할 수 있다. 메모리(110)에 포함된 소프트웨어 명령은 프로세서(105)로 하여금 후술 될 프로세스를 수행하게 한다. 대안적으로, 본 발명에 따른 프로세스를 구현하기 위해 소프트웨어 명령어 대신에 또는 하드웨어 명령어와 함께 하드 와이어드 회로가 사용될 수 있다. 따라서, 다양한 구현 예는 하드웨어 회로 및 소프트웨어의 특정 조합으로 제한되지 않는다.
특정 실시 예에서, 메모리(110)는 DRAM, SRAM, DDR RAM 또는 다른 랜덤 액세스 솔리드 스테이트 메모리 장치와 같은 제한없는 고속 랜덤 액세스 메모리; 하나 이상의 자기 디스크 저장 장치, 광학 디스크 저장 장치, 플래시 메모리 장치 또는 다른 비 휘발성 고체 저장 장치와 같은 비 휘발성 메모리를 제한없이 포함할 수 있다. 메모리(110)는 선택적으로 프로세서(들)(105)로부터 원격으로 위치된 하나 이상의 저장 장치를 포함할 수 있다. 메모리(110) 또는 메모리 내의 하나 이상의 저장 장치(예를 들어, 하나 이상의 비휘발성 저장 장치)는 컴퓨터 판독 가능 저장 매체를 포함할 수 있다. 특정 실시 예에서, 메모리(110) 또는 메모리의 컴퓨터 판독 가능 저장 매체(110)는 다음의 프로그램, 모듈 및 데이터 구조 중 하나 이상을 저장할 수 있다: 다양한 기본 시스템 서비스를 처리하고 하드웨어 종속 작업을 수행하는 절차가 포함 된 운영 체제; 하나 이상의 통신 네트워크 인터페이스 및 인터넷, 다른 광역 네트워크, 근거리 통신망, 대도시 통신망 등과 같은 하나 이상의 통신 네트워크를 통해 컴퓨팅 장치(100)를 다른 컴퓨터에 연결하기 위해 사용되는 네트워크 통신 모듈; 사용자가 컴퓨팅 장치(100)와 상호 작용할 수 있게 하는 클라이언트 응용 프로그램.
이 명세서의 특정 텍스트 및/또는 도면들은 방법 및 시스템을 설명하는 순서도를 참조하거나 설명할 수 있다. 이들 흐름도의 각 블록 및 이러한 흐름도의 블록들의 조합은 컴퓨터 프로그램 명령에 의해 구현될 수 있음을 이해할 것이다. 이들 컴퓨터 프로그램 명령들은 컴퓨터 또는 다른 프로그램 가능한 장치상에 로딩되어, 컴퓨터 또는 다른 프로그램 가능한 장치상에서 실행되는 명령들이 흐름도 블록 (들)에서 특정된 기능들을 구현하기 위한 구조들을 생성하도록 한다. 또한, 이들 컴퓨터 프로그램 명령어는 컴퓨터 판독 가능 메모리에 저장되어, 컴퓨터 판독 가능 메모리에 저장된 명령이 흐름도 블록(들)에서 특정된 기능을 구현하는 명령 구조를 포함하는 제품을 생성하도록 컴퓨터 판독 가능 메모리에 저장된 명령어가 특정 동작 방식을 구현하는 명령어 구조를 포함하는 제품을 생성하도록 특정 방식으로 기능하도록 컴퓨터 또는 다른 프로그램 가능 장치에 지시할 수 있다. 컴퓨터 프로그램 명령어는 또한 컴퓨터 또는 다른 프로그램 가능 장치상에 로딩되어 일련의 동작 단계들이 컴퓨터 또는 다른 프로그램 가능한 장치상에서 수행되어 컴퓨터 구현 프로세스를 생성함으로써, 컴퓨터 또는 다른 컴퓨터상에서 실행되는 명령어 프로그램 가능 장치가 흐름도 블록(들)에서 특정된 기능들을 구현하기 위한 단계들을 제공한다.
따라서, 흐름도의 블록은 특정 기능을 수행하기 위한 구조의 조합 및 특정 기능을 수행하기 위한 단계의 조합을 지원한다. 또한, 흐름도의 각 블록 및 흐름도의 블록들의 조합은 특정 기능 또는 단계, 또는 특수 목적 하드웨어 및 컴퓨터 명령의 조합을 수행하는 특수 목적 하드웨어 기반 컴퓨터 시스템에 의해 구현될 수 있음이 이해될 것이다.
예를 들어, C, C ++, C #(CSharp), Perl, Ada, Python, Pascal, SmallTalk, FORTRAN, 어셈블리 언어 등과 같은 임의의 수의 컴퓨터 프로그래밍 언어가 본 발명의 양상을 구현하는데 사용될 수 있다 . 또한, 절차적, 객체 지향적 또는 인공 지능 기법과 같은 다양한 프로그래밍 접근법이 각 특정 구현의 요구 사항에 따라 채택될 수 있다. 컴퓨터 시스템에 의해 실행되는 컴파일러 프로그램 및/또는 가상 머신 프로그램은 일반적으로 프로그래밍 된 기능 또는 기능 세트를 수행하기 위해 하나 이상의 프로세서에 의해 실행될 수있는 기계 명령어 세트를 생성하기 위해 상위 레벨 프로그래밍 언어를 번역한다.
여기에 설명된 상세에서, 특정 실시 예는 특정 데이터 구조, 바람직한 및 선택적인 시행, 바람직한 제어 흐름 및 예에 의해 설명된다. 당해 기술 분야의 당업자가 본원을 검토한 후에 이해되는 바와 같이, 설명된 방법의 다른 적용은 본 발명의 범위 내에 있다.
"기계 판독 가능 매체"라는 용어는 컴퓨터 시스템의 요소에 의해 판독될 수있는 데이터를 제공하는데 참여하는 임의의 구조를 포함하는 것으로 이해되어야한다. 그러한 매체는 비휘발성 매체, 휘발성 매체 및 전송 매체를 포함하지만 이에 한정되지 않는 많은 형태를 취할 수 있다. 비휘발성 매체는 예를 들어 광학 또는 자기 디스크 및 플래시 메모리 (고체 상태 드라이브 또는 SSD와 같은) 기반의 장치와 같은 기타 영구 메모리를 포함한다. 휘발성 매체는 동적 랜덤 액세스 메모리 (DRAM) 및/또는 정적 랜덤 액세스 메모리 (SRAM)를 포함한다. 전송 매체는 프로세서에 연결된 시스템 버스를 구성하는 와이어를 포함하여 케이블, 와이어 및 파이버를 포함한다. 기계 가용 매체의 통상적인 형태는 예를 들어 플로피 디스크, 플렉시블 디스크, 하드 디스크, 솔리드 스테이트 드라이브, 자기 테이프, 임의의 다른 자기 매체, CD-ROM, DVD, 또는 임의의 다른 광학 매체일 수 있다.
특정 실시 양태에서, 본 발명의 양태에 따른 방법은 3 개의 단계를 포함한다 (각 단계는 하기 입문 목록 이후에보다 상세히 기술된다).
1) 디스플레이 측정 기술(A technique for display measuring): 이 접근법은 디스플레이의 각 서브-픽셀에 대해 방출 된 에너지의 정확한 추정을 필요로 한다. 캡쳐된 특정 이미지는 사용되는 보정 모델과 함께 디스플레이 기술의 알려진 결함을 목표로 한다.
2) 측정을 적용하는 기술(A technique for applying measurement): 각 디스플레이 패널에 대해, 적절한 보정 모델에 기초하여, 전역 및 픽셀 단위 보정 계수세트가 계산된다. 반복적 접근 및 비반복적 접근과 같은 본 발명의 범위를 벗어나지 않고도 이들의 조합 및/또는 변형이 구현될 수 있지만, 보정 인자를 계산하는 두 가지 일반적인 접근법이 설명된다.
3) 실시간 이미지 프로세싱(Real-time imagery processing):이미지는 위의 두 번째 단계에서 계산된 보정 계수를 사용하여 실시간으로 처리되어 위의 1 단계에서 측정된 픽셀 별 에너지 방출 변화로 인해 발생하는 시각적 결함을 줄인다.
<디스플레이 측정(Display Measurement)>
디스플레이에서 일반적으로 많은 수의 서브 픽셀 소자 (통상적으로 1 백만 이상)로 인해, 각각의 서브 픽셀에 대한 정확한 에너지 추정치를 생성하는 것은 비교적 복잡한 작업을 포함할 수 있다.
특정 실시 예에서, 단계 1은 각각의 컬러 채널을 개별적으로 (예를 들어, 적색, 녹색, 청색) 이미지화하여 이미지화되는 방출 소자의 수를 감소시키는 것이다.
또한, 카메라 센서 소자와 발광형 디스플레이 소자 사이의 정확한 서브-픽셀 정렬은 일반적으로 불가능하기 때문에, 일부 실시 예에서는 이미지 센서를 사용하여 테스트중인 패널을 슈퍼 샘플링하는 것이 필요하다.
그러한 1 : 1 서브-픽셀 측정을 통상적으로 불가능하게 만드는 한가지 요인은, 카메라 기술이 전형적으로 컬러 재생을 위해 직사각형 래스터 및 베이어 패턴을 사용하는 반면, 디스플레이 패널이 펜타일(pentile) 맵핑과 같은 대안적인 (예를 들어, 비-직사각형) 패턴을 종종 사용한다는 것이다.
특정 실시 예에서, 디스플레이의 각 서브 픽셀에 대해 카메라 센서상의 25 개 또는 그 이상의 포토 사이트(photosite)를 사용함으로써 정확한 디스플레이 측정이 생성될 수 있다는 것이 관찰되었다. 서브 픽셀 단위의 추가 카메라 포토 사이트는 특정 실시 예에서 더 나은 결과를 산출한다.
도 2a는 디스플레이에 전송된 예시적인 모든 녹색 미가공 이미지를 묘사하는 사진(200A)의 그레이 스케일 버전이다.
도 2b는 본 발명의 예시적인 실시 예에 따라 관찰자에게 디스플레이될 때 도 2a의 디스플레이로 보내지는 보정되지 않은 예시적인 모든 녹색 미가공 이미지를 묘사하는 사진(200B)의 그레이 스케일 버전이다.
도 2c는 본 발명의 양태에 따른 예시적인 픽셀 별 보정 계수를 묘사하는 사진(200C)이다.
도 2d는 예시적인 디스플레이에 전송될 때, 도 2b에 도시된 이미지에 대응하는, 본 발명의 양태에 따른 미리 보정된 이미지를 묘사하는 사진(200D)의 그레이 스케일 버전이다.
도 2e는 도 2d에 도시된 이미지에 대응하는, 본 발명의 양태에 따른, 관찰자에게 보여지는 예시적인 최종 이미지를 묘사하는 사진(200E)의 그레이 스케일 버전이다.
도 3은 본 발명의 양태에 따라 각 서브-픽셀에 대한 에너지 추정을 달성하기에 충분한 해상도를 갖는 일정한 녹색 이미지의 디스플레이 패널(320)상의 예시적인 이미지 캡쳐를 나타내는 사진(300)의 그레이 스케일 버전이다.
도 4는 도 3에 도시된 이미지의 일부의 사진(400) (대략 줌 계수=1000)의 확대된 그레이 스케일 버전이며, 녹색 채널만 조명되고, 시각적인 서브 픽셀을 가지는 5*5 픽셀 영역을 포함한다.
전체 패널에 걸쳐 이 해상도를 유지하기에 충분한 해상도를 가지지 않는 카메라가 이용되면, 일부 실시 예에서는 하위 영역이 이미지화될 수 있고, 그 후 결과적인 데이터 세트는 부드럽게 블렌딩될 수 있다.
또는 HMD와 같은 일부 디스플레이 응용 프로그램의 경우 전체 시각 필드를 이미지화 할 필요는 없다. 예를 들어, (보정을 급작스럽게 중단하는 대신) 보정 영역의 주변부에서 보정층이 '보정 없음'과 부드럽게 블렌드된다면, 특정 실시 예에서는 중심 시야만 측정하고 보정하는 것이 종종 충분하다. 이는 특정 실시 예에서, 주변 픽셀을 향한 '널 값 (null value)'으로 픽셀 단위의 보정 계수(후술 됨)를 부드럽게 블렌딩함으로써 달성될 수 있다.
도 5a 및 도 5b는 본 발명의 양태에 따른 예시적인 이미지 캡쳐 시스템 및 구성의 양상을 도시 한 사진이다.
예시적인 디스플레이 측정 시스템의 일 실시 예(도 5a 및 도 5b에 도시됨)에서, 캐논 5Ds 디지털 SLR 카메라, 180mm 매크로 사진 렌즈(510) 및 강성 매크로 스탠드와 같은 다음 장비가 사용될 수 있다. HMD 사용(즉, 낮은 지속성, 90Hz 또는 120Hz 프레임 속도)과 일치하는 방식으로 디스플레이(610, 620)를 구동하는 구동 전자 장치가 또한 포함된다(도 6에 도시된 630). 디스플레이 생산 환경에서, 측정은 전형적으로 어떤 실시 예에서는 먼지가 없고 빛을 차단하는 엔클로저에서 취해진다.
수백만 개의 서브 픽셀 각각에 대한 배치를 정확하게 예측하기 위해, 특정 실시 예에서 이미징 시스템(렌즈)은 서브 픽셀 레벨을 넘어서 공간적으로 교정되어야 한다. 이 보정은 일반적으로 카메라 렌즈 모델 및 라이브 포커스, f 스탑 설정과 같은 요인에 따라 다르다.
특정 실시 예에서 컬러 측정을 하기 전에, 기하 렌즈 편심은 공지된 그리드 패턴을 디스플레이 상에 배치함으로써 설명된다. 이는 본 발명의 특정 구현 예에 따른 요구 사항의 정밀도가 전형적인 용도를 넘어서는 것이지만 컴퓨터 비전 분야에서 당업자가 사용하는 일반적인 기술이다. 사후 교정(post-calibration), 렌즈 및 이미지 시스템의 기하학적 정확도는 특정 실시 예에서 이미징 장치의 서브 픽셀 레벨 이상으로 정확해야한다. 즉, 그러한 실시 예에서 디스플레이 래스터의 5*5인 서브 픽셀 이미지의 경우, 전체적인 기하학적 왜곡은 디스플레이 서브-픽셀들 사이의 간격의 1/5이하에 해당하는 하나의 출력 픽셀보다 훨씬 작아야 한다.
도 7은 교정 중에 사용하기 위한 테스트중인 디스플레이 패널상에 도시된 그리드 패턴 (710)을 도시하며, 본 발명의 양태에 따른 기하학적 렌즈 편심에 대한 해결을 용이하게 한다.
다음으로, 특정 실시 예에서, 블랙 이미지가 캡쳐되어 카메라의 암 필드 응답을 결정한다.
마지막으로, 픽셀 단위 응답을 특성화하기에 적합한 이미지가 표시된다. 특정 실시 예에서, 이것은 전형적으로 일정 색의 단색 이미지이다.
모든 이미지는 특정 실시 예에서 '카메라 미가공' 처리를 사용하여 포착되며, 이는 광도 선형성을 보존한다.
특정 실시 예에서, 암 필드는 캡쳐된 이미지로부터 감산되고, 렌즈 솔루션에 의해 비뚤어지지 않는다. 도 8은 특정 실시 예에서 사용된 암 필드 감산 및 렌즈 왜곡 보정 단계 후에, 본 발명의 양태에 따라 캡쳐된 이미지(800)를 묘사하는 사진의 그레이 스케일 버전이다.
디콘볼루션 커널은 특정 실시 예들에서 적용될 수 있으며, 이는 이미지 체인에서 로컬 플레어를 제거한다. 이 플레어 보상은 "PFS"(point-spread function 포인트 스프레드 기능)를 측정하는 이미지를 사용하여 유효성을 검사할 수 있다. 통상적으로, 단일 지점 픽셀은 이 값을 계산하기 위해 다른 값을 갖는 상수 영역에서 조명된다.
특정 실시 예에서, 캡쳐된 직사각형 영역에 대한 픽셀 코너가 검출되고, 4- 코너 투시 워프는 축 정렬된 표현을 생성하며, 여기서 각 서브 픽셀은 일정한 크기 및 정렬을 갖는다. 도 9는 본 발명의 양상에 따라 캡쳐된 이미지(900)에서의 코너 검출 단계들을 묘사하는 사진이다.
도 10은 본 발명의 양상에 따른 직선 정렬 후의 테스트 패널의 캡쳐된 이미지에서 예시적인 32*32 픽셀 삽입 영역을 묘사하는 사진(1000)의 그레이 스케일 버전이다.
각 서브-픽셀은 특정 실시 예에서 각 박스의 중앙에 위치하며, 정확한 에너지 추정을 허용하며, 여기서 각 박스는 각각의 서브-픽셀에 대해 통합된 영역이다. 각각의 서브-픽셀은 전형적으로 도 11에 도시된 바와 같이 상이한 세기를 갖는다; 이는 본 발명의 양태에 따라 전체적으로 또는 부분적으로 측정 및/또는 보정되는 효과이다.
마지막으로, 특정 실시 예에 따르면, 각 픽셀에 대한 에너지는 각 픽셀 영역의 모든 값을 합산함으로써 계산된다.
도 11은 본 발명의 양상에 따라 테스트중인 예시적인 디스플레이 패널 (1100)의 일부분에서 픽셀 별 에너지 방출을 그래프로 도시한다.
이 프로세스는 일반적으로 이미지를 수집하는 동안 패널의 내려 앉은 먼지에 매우 민감하다. 디스플레이에 먼지나 섬유가 묻으면 일부 빛을 흡수하거나 산란해 버리므로 겹치는 픽셀이 어둡게 잘못 측정된다. 보상이 적용될 때, 이 픽셀은 강한 양의 이득 계수가 적용되고 불쾌한 "과잉 밝기" 픽셀로 돋보인다. 먼지를 보상하기 위해, 특정 실시 예에서는 패널의 다수의 이미지가 취해질 수 있으며, 각 이미지 캡쳐 사이에 공기의 분사(또는 다른 세정 프로세스)가 수행된다. 에너지 추정치는 각 캡쳐된 이미지에 대해 개별적으로 계산된 다음 각 픽셀에 대해 max() 연산자를 사용하여 병합된다. 먼지 및 기타 미립자는 일반적으로 캡쳐하는 동안 픽셀을 어둡게(밝지 않게) 만들 수 있으므로 먼지가 다음 캡쳐 사이에서 움직이는 한 그 영향은 제거될 수 있다.
특정 실시 예에서 캡쳐 프로세스의 요약 :
-초점과 노출을 포함하여 카메라를 적절한 패널 위치에 맞추고 잠근다.
-그리드 패턴 캡쳐(단색) 및 렌즈 기하학적 특성 해결
-암 필드를 캡쳐하기 위해 모든 검정색 이미지를 표시한다.
-타겟 플랫 필드 컬러(단색)를 표시하고 측광 선형 데이터(카메라 미가공)의 픽셀 캡쳐
o 암 필드 감산
o 이미징 시스템 PSF를 고려한 디콘볼루션 적용
o 렌즈 용액에 의한 왜곡 보정
o 모든 네 코너의 시야에 대한 픽셀 모서리 감지
o 4-코너 투시 워프(warp)를 사용하여 이상적인 축 정렬 직선 그리드를 합성한다. 디스플레이의 각 서브 픽셀은 정렬된 출력 이미지에서 일정한 크기의 알려진 축 정렬 상자에 해당해야 한다.
o 서브 픽셀에 해당하는 각 상자의 에너지를 합한다.
-먼지에 강인한 추적을 위해서는 캡쳐 사이의 클리닝/에어 블로스트(blast)를 N 번 반복한다. 모든 캡쳐에서 각 서브 픽셀에 대한 최대값 추정치를 사용하여 캡쳐를 병합한다.
<보정 계수 모델링>
각각의 디스플레이 패널에 대해, 보정 모델에 기초하여, 일 실시 예에서는 전역 및 픽셀 단위 보정 계수 세트가 계산될 수 있다. 보정 계수를 계산하기 위한 반복적 및 비반복적인 접근 방식은 각 구현의 특정 요구 사항에 따라 이러한 접근 방식의 변형 및/또는 조합을 구현할 수 있다.
<비반복적인 접근>
OLED 패널에서 무라 효과의 90% 이상을 차지하는 다음 모델을 출발점으로 사용할 수 있다(다른 디스플레이 기술의 경우, 당업자에게 공지된 바와 같이, 대안적인 공식이 아티팩트를 콤팩트하게 표현하기 위해 사용될 수 있다).
CCV(x,y) = ICV(x,y) + PPD(x,y)
여기에서:
CCV: 장치 네이티브(native) 감마 인코딩의 보정된 코드값
ICV: 장치 네이티브 감마 인코딩의 입력 코드값
PPD: 픽셀 단위 델타
(x,y) 그 양이 디스플레이 공간에서의 출력 픽셀 위치(x, y)의 함수로서 변화량을 나타낸다.
최종 재생 동안 (새로운 이미지에 실시간으로 보정 계수를 적용하는), 소정의 실시 예에서, min 및 max 값을 전역 상수로 끌어내어 코딩 공간을 최대화하는 픽셀-단위 델타를 인코딩하는 것이 편리할 수 있다.
PPD(x,y)=PPV(x,y)*CG+CO
CCV(x,y)=ICV(x,y)+PPD(x,y)
여기에서:
CCV: 장치 네이티브 감마 인코딩의 보정된 코드값
ICV: 장치 네이티브 감마 인코딩의 입력 코드값
PPV: 제한된 비트로 인코딩된 픽셀 단위 값
PPD: 픽셀 단위 델타
CG: 보정 이득
CO: 보정 오프셋
이득/오프셋: 픽셀 단위 델타를 해석하는 데 사용되는 전역 값
상기 수학 공식의 간략 함(즉, 장치의 고유한 코딩 공간에서 픽셀 당 일정한 델타 값을 가산 함)에도 불구하고 디스플레이 기술이 이러한 방식으로 행동한다는 것은 직관적이지 못하다는 것을 알아야한다. 실제로, 관련 동작에 대한 보다 직관적인 모델이 선형 이득 동작을 갖는 픽셀 별 보정 계수일지라도(예를 들어, 하나의 픽셀이 20% 더 많은 빛을 방출하게 하고, 다른 하나는 5% 더 밝게 하는 등), 직관적인 방식으로 공식화될 때, 이득의 양은 입력 코드값의 함수로서 변한다. 중요한 조사 및 실험 후에, 이들 고차 항이 상쇄됨으로써, 본원에 기술된 특정 양태에서 사용된 단순화 된 공식을 얻는 것으로 결정되었다.
본 발명의 양태에 따르면, 장치의 감마 인코딩에 부가 오프셋이 적용된 OLED 디스플레이에 대해 무라 효과가 제거될 수 있다는 것이 판명되었다.
<픽셀 단위 델타의 계산>
부가적인 오프셋이 모델링될 때, 대표적인 코드값이 선택되고 플랫 필드 이미지에 대해 픽셀 단위 에너지 추정치가 측정된다. 특히, 특정 실시 예에서 OLED의 경우에 대해, 코드값 51(255 중에서)이 선택될 수 있다. 이 값은 고정된 부가 오프셋이 높은 신호 대 잡음비를 갖기에 충분할 정도로 어두우나 노출 시간이 길지 않을만큼 충분히 밝다. 물론, 다른 구현은 상이한 대표 코드값에 더 적합할 수 있다.
PPD=TCV-pow(LPE(x,y)/LPELA(x,y) * pow(TCV, DG), 1.0 / DG)
여기에서:
PPD: 픽셀 단위 델타
TCV: 목표 코드값(측정 중에 표시하기 위해 보낸 값)
LPE: 선형 픽셀 에너지
LPE: 선형 픽셀 에너지로, 로컬 평균(주변 지역에 대한 로컬 에너지 평균, 종종 센터 / 가우스 가중치).
DG: 디스플레이 감마(일반적으로 상수 = 2.2)
위의 방정식은 질문을 모델링한다: 디스플레이에 대한 이상화된 감마 전달 함수--"pow(x,gamma)"--를 가정할 때에, 측정한 선형 광을 모델링하는 입력 코드값은 무엇인가? 선형 픽셀 에너지를 로컬 평균으로 나누면 전역적 렌즈 캡쳐 효과에 견딜 수 있는 방식으로 이 픽셀이 이상적인 경우와 비교하는 방법을 견고하게 계산할 수 있다. 로컬 평균 윈도우의 크기는 특정 실시 예에서 측정되는 디스플레이 기술에 맞추어진다.
또한, 특정 실시 예에서의 서브-표현 "pow(x, gamma)"를 보다 정확한 디스플레이 감마 특성으로 대체 할 수 있다:
PPD=TCV-inv_display_response(LPE(x,y)/LPELA(x,y)*display_response(TCV) )
또한 측정된 에너지 추정치로부터 픽셀 단위 델타 보정을 계산하기 위해 디스플레이 응답은 다른 수학적 가정을 기반으로 다른 구성이 존재한다.
로컬 선형 및 대칭 디스플레이 응답 가정 :
PPD=log(LPE(x,y)/LPELA(x,y))*display_response_constant
비대칭 디스플레이 응답(응답의 차이를 만들기 위해 딤 픽셀(dim pixel)을 비례적으로 더 큰 이득으로 구동해야하는 경우)을 가정한다.
PPD=TCV+pow(LPELA(x,y)/LPE(x,y)*pow(TCV,DG), 1.0/DG)
위에 나열된 모든 방정식은 동일하지는 않지만 유사한 보정 계수를 산출한다. OLED 기술을 모델링 할 때 정확도가 떨어지더라도 픽셀 단위 델타를 근사하는 다른 공식이 존재하는 것으로 알려져 있다. 일반적으로, 선호되는 기술은 인간 관측자에 의해 판단되는 바와 같이, 보정 후(post-correction)에 무라 출현(mura appearance)을 최소화하는 기술이다.
<반복 접근법>
단일 캡처로 효과의 90% 이상을 보정할 수는 있지만 일부 실시 예에서는 여전히 잘못된 정확도가 고려되고 있다. 반복적인 접근법에서, 먼저 상술 한 바와 같이 특정 실시 예에서 픽셀 단위 일정한 상수를 구한다. 그러나, 이 프로세스는 디스플레이에 보정된 플랫 필드 이미지를 전송하고 잔차의 보정되지 않은 델타를 기록함으로써 특정 실시 예에서 증가 될 수 있다. 이 잔차는 특정 실시 예에서 다수의 입력 코드값에 대해 측정된 다음, 픽셀 단위 잔차가 계산되어 기록된 데이터 세트를 보간함으로써 적용된다.
CCV(x,y)=ICV(x,y)+PPD(x,y)+PPR(ICV,x,y )
여기에서:
CCV: 장치 네이티브 감마 인코딩의 보정된 코드값
ICV: 장치 네이티브 감마 인코딩의 입력 코드값
PPD: 픽셀 단위 델타
PPR: 입력 코드값의 함수인 픽셀 단위 잔차
픽셀 단위 잔차가 픽셀 단위 델타보다 훨씬 작기 때문에, 다수의 잔차가 원래의 픽셀 단위 계수와 비슷한 양의 공간에 효율적으로 저장될 수 있다.
디스플레이 패널의 수명 동안, 무라 아티팩트는 종종 강도가 변한다. 이것은 특정 실시 예에서 보정의 필요에 따라 더 많거나 적은 것을 적용하기 위해 보정 이득 계수를 조작함으로써 설명될 수 있다.
디스플레이 출력이 광의 정수 출력 값(예를 들어, 8비트 입력에 의해 산출 된 256단계)으로 양자화되는 동안, 픽셀 별 강도 변화는 소정의 실시 예에서 더 큰 정밀도로 모델링될 수 있다. 디스플레이보다 더 높은 정밀도로 픽셀 별 델타를 저장함으로써, 입력의 단계 수보다 더 높은 정밀도로 출력 휘도 값을 전역으로 재현할 수 있다(즉, 각 개별 픽셀은 256개의 주소 지정 가능한 단계만 가질 수 있지만 로컬 영역 특정 실시 예에서는 평균적으로 더 많은 개별 출력 레벨을 가질 수 있다).
밴딩(banding) 아티팩트를 줄이기 위해 픽셀 단위 디스플레이 밝기 변화를 활용하면 무라 디스플레이 아티팩트와 관계없이 흥미로운 전송 기술이 된다. 예를 들어, 높은 비트 정밀도 이미지 합성, "무라 프리" 높은 비트 정밀도 디스플레이, 그러나 낮은 비트 심도 전송 링크를 갖는 시스템에서, 밴딩의 출현을 감소시키기 위해 디스플레이에 인공적인 픽셀 변화를 도입할 수 있다.
OLED 디스플레이에서 볼 수 있는 자연스러운 무라보다 더 컴팩트 한 표현과 낮은 샘플링 불일치를 갖는 합성 픽셀 변형 패턴을 만들 수 있다. 하나의 공식은 +/-0.5 코드 값의 루마 도메인에 대해 균일한 샘플링으로 타일링 가능한(tileable) 노이즈 패턴을 사용하는 것이다. 노이즈 타일링은 특정 실시 예에서 지터된 층화 샘플링(jittered stratified sampling) 또는 블루 노이즈(blue noise)이며, 따라서 픽셀 값들이 그 이웃들과 유사한 오프셋을 갖지 않을 것이다. 전송 소스가 디스플레이의 픽셀 변화 알고리즘을 인식하게 함으로써, 밴딩 모양이 감소되도록 픽셀 단위로 적절한 양자화가 적용될 수 있다.
그러한 시스템에서, 특정 실시 예에서의 이미지 합성은 픽셀 변동에 적용하기 위해 노이즈의 "프레임"을 인코딩하고 전송할 필요가 있지만, 타일링 가능한 노이즈 패턴이 또한 생성되어 밴딩 아티팩트를 추가로 감소시킬 수 있다.
특정 실시 예에서의 또 다른 진전은 클리핑된 값이 도입되지 않도록 코드값의 함수로서 균일 샘플링을 바이어싱하는 것이다. 예시적인 8- 비트 전송 링크의 경우, 코드값 0은 [0.0,1.0], 중간 코드값(128)은 [-0.5,0.5]가 선택되며, 코드값 255에 대해 [-1.0, 0.0]이 사용된다.
특정 HMD 관련 실시 예에서, 본 발명의 양태에 따른 무라 보정 처리는 그래픽 처리 장치("GPU")상에서 호스트 측에서 수행된다. 그러나, 각각의 특정 구현 예에 따라, 이러한 처리는 실리콘, 헤드셋 자체, 테더 또는 디스플레이 패널 일렉트로닉스에서 수행될 수 있다. 이러한 대안적인 구현은 제한된 링크 대역폭(예를 들어, 무선 시스템)을 포함하는 상황에서 중요한 이미지 압축률을 제공할 수 있다.
상기 설명은 많은 세부 사항을 포함하고 특정 예시적인 실시 예가 첨부된 도면에 기술되고 도시되었지만, 그러한 실시 예는 단지 폭 넓은 발명을 설명하는 것이지 제한적인 것은 아니며 본 발명은 상술 한 바와 같이, 당업자에게 다양한 다른 변형이 발생할 수 있기 때문에, 도시되고 설명된 특정의 구조 및 배열을 의미한다. 본 발명은 여기에 개시된 상이한 종 및/또는 실시 예로부터의 요소의 임의의 조합 또는 하위 조합을 포함한다.

Claims (20)

  1. 디스플레이 패널의 일부분에 나타난 픽셀별 에너지 방출 변화에 의해 야기되는 시각적 아티팩트의 출현을 감소시키는 방법에 있어서,
    상기 디스플레이 패널의 일부분의 각 서브-픽셀에 대해 방출된 에너지를 추정하는 단계로서, 상기 추정은 광학 센서 상의 복수의 포토사이트에서 각각의 상기 서브-픽셀에 의해 방출된 광을 감지하는 단계를 포함하는 단계;
    미리 결정된 보정 모델에 기초하여 상기 디스플레이 패널의 일부분에 대응하는 픽셀 단위 보정 계수들의 세트를 계산하는 단계로서, 상기 미리 결정된 보정 모델은, 상기 세트의 상기 픽셀 단위 보정 계수들 각각에 대해, 상기 디스플레이 패널의 네이티브 감마 인코딩에 적용된 오프셋을 상기 세트의 상기 픽셀 단위 보정 계수가 관련된 픽셀에 대응하는 입력 코드 값에 부가하는 단계를 포함하는 단계; 및
    상기 디스플레이 패널의 일부분에 전송되는 이미지 데이터에 상기 보정 계수를 실시간으로 적용하는 단계를 포함하고,
    상기 오프셋을 부가하는 단계는, 제1 중간 픽셀 단위 결과를 생성하기 위해 오프셋을 부가하는 단계; 및 상기 입력 코드 값의 함수인 상기 제1 중간 픽셀 단위 결과에 픽셀 단위 잔차를 부가하는 단계를 포함하거나, 또는,
    상기 오프셋을 부가하는 단계는, 제1 중간 픽셀 단위 결과를 생성하기 위해 고정된 오프셋을 부가하는 단계; 및 상기 입력 코드 값의 함수인 상기 제1 중간 픽셀 단위 결과에 픽셀 단위 잔차를 부가하는 단계를 포함하는 방법.
  2. 디스플레이 패널의 일부분에 나타난 픽셀별 에너지 방출 변화에 의해 야기되는 시각적 아티팩트의 출현을 감소시키는 방법에 있어서,
    상기 디스플레이 패널의 일부분의 각 서브-픽셀에 대해 방출된 에너지를 추정하는 단계로서, 상기 추정은 광학 센서 상의 복수의 포토사이트에서 각각의 상기 서브-픽셀에 의해 방출된 광을 감지하는 단계를 포함하는 단계;
    미리 결정된 보정 모델에 기초하여 상기 디스플레이 패널의 상기 일부분에 대응하는 전역 및 픽셀 단위 보정 계수들의 세트를 계산하는 단계로서, 상기 미리 결정된 보정 모델은, 상기 세트의 상기 픽셀 단위 보정 계수들 각각에 대해, 상기 디스플레이 패널의 네이티브 감마 인코딩에 적용된 오프셋을 상기 세트의 상기 픽셀 단위 보정 계수가 관련된 픽셀에 대응하는 입력 코드 값에 부가하는 단계를 포함하는 단계; 및
    상기 디스플레이 패널의 일부분에 전송되는 이미지 데이터에 상기 보정 계수를 실시간으로 적용하는 단계를 포함하고,
    상기 오프셋을 부가하는 단계는, 제1 중간 픽셀 단위 결과를 생성하기 위해 오프셋을 부가하는 단계; 및 상기 입력 코드 값의 함수인 상기 제1 중간 픽셀 단위 결과에 픽셀 단위 잔차를 부가하는 단계를 포함하거나, 또는,
    상기 오프셋을 부가하는 단계는, 제1 중간 픽셀 단위 결과를 생성하기 위해 고정된 오프셋을 부가하는 단계; 및 상기 입력 코드 값의 함수인 상기 제1 중간 픽셀 단위 결과에 픽셀 단위 잔차를 부가하는 단계를 포함하는 방법.
  3. 제1항에 있어서, 상기 감지는 복수의 컬러 채널 각각을 개별적으로 이미지화하는 단계를 포함하는 방법.
  4. 제3항에 있어서, 상기 복수의 컬러 채널은 적색, 녹색 및 청색 컬러 채널을 포함하는 방법.
  5. 제2항에 있어서, 상기 감지는 복수의 컬러 채널 각각을 개별적으로 이미지화하는 단계를 포함하는 방법.
  6. 제5항에 있어서, 상기 복수의 컬러 채널은 적색, 녹색 및 청색 컬러 채널을 포함하는 방법.
  7. 제1항에 있어서, 상기 각각의 상기 서브-픽셀에 의해 방출된 광을 감지하는 단계는, 상기 서브-픽셀 각각에 대한 상기 광학 센서의 적어도 25개의 포토사이트를 사용하여 광을 감지하는 단계를 포함하는 방법.
  8. 제1항에 있어서, 상기 오프셋을 부가하는 단계는, 상기 세트의 상기 픽셀 단위 보정 계수가 관련된 픽셀에 대응하는 입력 코드 값에 상기 디스플레이 패널의 네이티브 감마 인코딩의 고정된 오프셋을 부가하는 단계를 포함하는 방법.
  9. 삭제
  10. 삭제
  11. 디스플레이 패널의 일부분에 나타나는 픽셀별 에너지 방출 변화에 의해 야기되는 시각적 아티팩트의 출현을 감소시키는 장치에 있어서,
    각각의 서브-픽셀에 의해 방출된 에너지를 추정하기 위해, 상기 디스플레이 패널의 일부분의 각 서브-픽셀에 대해, 복수의 포토사이트를 포함하는 광학 센서로부터 에너지 데이터 세트를 수신하는 에너지 추정기; 및
    미리 결정된 보정 모델에 기초하여 상기 디스플레이 패널의 일부분에 대응하는 픽셀 단위 보정 계수들의 세트를 계산하고 상기 디스플레이 패널의 일부분에 전송되는 이미지 데이터에 실시간으로 상기 보정 계수들을 적용하는 에너지 방출 보정기를 포함하고,
    상기 미리 결정된 보정 모델은, 상기 픽셀 단위 보정 계수들의 세트의 픽셀 단위 보정 계수 각각에 대해, 상기 디스플레이 패널의 네이티브 감마 인코딩에서 상기 픽셀 단위 보정 계수가 관련된 픽셀에 대응하는 입력 코드 값에 적용되는 오프셋 가산기를 포함하며,
    상기 오프셋 가산기가, 상기 디스플레이 패널의 네이티브 감마 인코딩에서 상기 세트의 상기 픽셀 단위 보정 계수가 제1 중간 픽셀 단위 결과를 생성하는 것과 관련된 픽셀에 대응하는 입력 코드 값에 적용되고, 픽셀 단위 잔차 가산기가 상기 입력 코드 값의 함수인 상기 제1 중간 픽셀 단위 결과에 적용되는, 장치.
  12. 디스플레이 패널의 일부분에 나타나는 픽셀별 에너지 방출 변화에 의해 야기되는 시각적 아티팩트의 출현을 감소시키는 장치에 있어서,
    각각의 서브-픽셀에 의해 방출된 에너지를 추정하기 위해, 상기 디스플레이 패널의 일부분의 각 서브-픽셀에 대해, 복수의 포토사이트를 포함하는 광학 센서로부터 에너지 데이터 세트를 수신하는 에너지 추정기; 및
    미리 결정된 보정 모델에 기초하여 상기 디스플레이 패널의 일부분에 대응하는 전역 및 픽셀 단위 보정 계수들의 세트를 계산하고 상기 디스플레이 패널의 일부분에 전송되는 이미지 데이터에 실시간으로 상기 보정 계수들을 적용하는 에너지 방출 보정기를 포함하고,
    상기 미리 결정된 보정 모델은, 상기 전역 및 픽셀 단위 보정 계수들의 세트의 픽셀 단위 보정 계수 각각에 대해, 상기 디스플레이 패널의 네이티브 감마 인코딩에서 상기 픽셀 단위 보정 계수가 관련된 픽셀에 대응하는 입력 코드 값에 적용되는 오프셋 가산기를 포함하며,
    상기 오프셋 가산기가, 상기 디스플레이 패널의 네이티브 감마 인코딩에서 상기 세트의 상기 픽셀 단위 보정 계수가 제1 중간 픽셀 단위 결과를 생성하는 것과 관련된 픽셀에 대응하는 입력 코드 값에 적용되고, 픽셀 단위 잔차 가산기가 상기 입력 코드 값의 함수인 상기 제1 중간 픽셀 단위 결과에 적용되는, 장치.
  13. 제11항에 있어서, 상기 광학 센서는 복수의 컬러 채널 각각을 개별적으로 이미지화하는 장치.
  14. 제13항에 있어서, 상기 복수의 컬러 채널은 적색, 녹색 및 청색 컬러 채널을 포함하는 장치.
  15. 제12항에 있어서, 상기 광학 센서는 복수의 컬러 채널 각각을 개별적으로 이미지화하는 장치.
  16. 제15항에 있어서, 상기 복수의 컬러 채널은 적색, 녹색 및 청색 컬러 채널을 포함하는 장치.
  17. 제11항에 있어서, 상기 디스플레이 패널은 헤드 마운트 디스플레이의 디스플레이 패널을 포함하는 장치.
  18. 제11항에 있어서, 상기 오프셋 가산기는 고정된 오프셋의 가산기를 포함하는 장치.
  19. 삭제
  20. 삭제
KR1020187007665A 2015-08-19 2016-08-18 디스플레이의 픽셀 휘도 및/또는 색차 응답 변화의 검출 및/또는 보정을 위한 시스템 및 방법 KR102556275B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562207091P 2015-08-19 2015-08-19
US62/207,091 2015-08-19
PCT/US2016/047470 WO2017031268A1 (en) 2015-08-19 2016-08-18 Systems and methods for detection and/or correction of pixel luminosity and/or chrominance response variation in displays

Publications (2)

Publication Number Publication Date
KR20180039725A KR20180039725A (ko) 2018-04-18
KR102556275B1 true KR102556275B1 (ko) 2023-07-18

Family

ID=58050993

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187007665A KR102556275B1 (ko) 2015-08-19 2016-08-18 디스플레이의 픽셀 휘도 및/또는 색차 응답 변화의 검출 및/또는 보정을 위한 시스템 및 방법

Country Status (6)

Country Link
EP (1) EP3338274A4 (ko)
JP (1) JP6688878B2 (ko)
KR (1) KR102556275B1 (ko)
CN (1) CN108140359B (ko)
HK (2) HK1249270A1 (ko)
WO (1) WO2017031268A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10733783B2 (en) * 2018-10-09 2020-08-04 Valve Corporation Motion smoothing for re-projected frames
CN110086961A (zh) * 2019-05-28 2019-08-02 易诚高科（大连）科技有限公司 一种针对OLED屏的DeMURA算法
US10891890B1 (en) * 2019-08-13 2021-01-12 Facebook Technologies, Llc Asymmetric pixel operation for compensating lens optics limitations
US11308868B2 (en) * 2020-01-03 2022-04-19 Qualcomm Incorporated Methods and apparatus for utilizing display correction factors
CN111462697B (zh) * 2020-04-28 2022-07-19 苏州佳智彩光电科技有限公司 基于可配置脚本的AMOLED屏mura外部光学补偿方法与系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102218531B1 (ko) 2015-01-29 2021-02-23 삼성디스플레이 주식회사 데이터 보상기 및 이를 포함하는 표시 장치
KR102304893B1 (ko) 2014-06-02 2021-09-24 삼성디스플레이 주식회사 디스플레이 패널, 디스플레이 패널의 픽셀 휘도 보상 방법 및 픽셀 파라미터들을 보상하기 위한 방법

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3529505B2 (ja) * 1995-08-04 2004-05-24 大日本印刷株式会社 単色光を用いたカラー画像の表示方法
CN1144081C (zh) * 1999-11-06 2004-03-31 三星电子株式会社 显示装置和显示方法
GB0014961D0 (en) * 2000-06-20 2000-08-09 Koninkl Philips Electronics Nv Light-emitting matrix array display devices with light sensing elements
US6507159B2 (en) * 2001-03-29 2003-01-14 Koninklijke Philips Electronics N.V. Controlling method and system for RGB based LED luminary
US7221381B2 (en) * 2001-05-09 2007-05-22 Clairvoyante, Inc Methods and systems for sub-pixel rendering with gamma adjustment
KR100438918B1 (ko) * 2001-12-08 2004-07-03 엘지전자 주식회사 플라즈마 디스플레이 패널의 구동방법 및 장치
US7639849B2 (en) * 2005-05-17 2009-12-29 Barco N.V. Methods, apparatus, and devices for noise reduction
US20070069632A1 (en) * 2005-09-26 2007-03-29 Toppoly Optoelectronics Corp. Electroluminescent device and pixel device
JP4884744B2 (ja) * 2005-10-07 2012-02-29 シャープ株式会社 バックライト装置及びこれを備える表示装置
CN101460917B (zh) * 2006-06-02 2011-09-28 三星电子株式会社 具有多分段背光的高动态对比度显示系统
WO2008038568A1 (fr) * 2006-09-26 2008-04-03 Sharp Kabushiki Kaisha Dispositif d'affichage à cristaux liquides
US8525762B2 (en) * 2006-11-16 2013-09-03 Innolux Corporation Systems and methods for adjusting display parameters of an active matrix organic light emitting diode panel
KR20080101680A (ko) * 2007-05-18 2008-11-21 가부시키가이샤 한도오따이 에네루기 켄큐쇼 액정 표시장치, 전자 기기, 및 그의 구동방법
US8026873B2 (en) * 2007-12-21 2011-09-27 Global Oled Technology Llc Electroluminescent display compensated analog transistor drive signal
JP5446216B2 (ja) * 2008-11-07 2014-03-19 ソニー株式会社 表示装置及び電子機器
US8831343B2 (en) * 2009-01-19 2014-09-09 Dolby Laboratories Licensing Corporation Image processing and displaying methods for devices that implement color appearance models
CN102708837B (zh) * 2009-09-29 2014-07-09 盛群半导体股份有限公司 亮度补偿装置及方法
CA2696778A1 (en) * 2010-03-17 2011-09-17 Ignis Innovation Inc. Lifetime, uniformity, parameter extraction methods
US9135864B2 (en) * 2010-05-14 2015-09-15 Dolby Laboratories Licensing Corporation Systems and methods for accurately representing high contrast imagery on high dynamic range display systems
WO2012149001A2 (en) * 2011-04-28 2012-11-01 Dolby Laboratories Licensing Corporation Dual lcd display with color correction to compensate for varying achromatic lcd panel drive conditions
US9864243B2 (en) * 2010-05-14 2018-01-09 Dolby Laboratories Licensing Corporation High dynamic range displays using filterless LCD(s) for increasing contrast and resolution
CN102655161A (zh) * 2011-05-03 2012-09-05 京东方科技集团股份有限公司 一种像素结构及其制造方法、显示装置
US8773451B2 (en) * 2011-05-03 2014-07-08 Apple Inc. Color correction method and apparatus for displays
KR20150051437A (ko) * 2013-11-04 2015-05-13 삼성디스플레이 주식회사 휘도 보정 시스템 및 방법
JP2015125243A (ja) * 2013-12-26 2015-07-06 シャープ株式会社 マルチディスプレイシステム、画像表示装置、画面制御方法およびプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102304893B1 (ko) 2014-06-02 2021-09-24 삼성디스플레이 주식회사 디스플레이 패널, 디스플레이 패널의 픽셀 휘도 보상 방법 및 픽셀 파라미터들을 보상하기 위한 방법
KR102218531B1 (ko) 2015-01-29 2021-02-23 삼성디스플레이 주식회사 데이터 보상기 및 이를 포함하는 표시 장치

Also Published As

Publication number Publication date
EP3338274A1 (en) 2018-06-27
CN108140359B (zh) 2020-10-30
WO2017031268A1 (en) 2017-02-23
EP3338274A4 (en) 2019-04-17
CN108140359A (zh) 2018-06-08
HK1249270A1 (zh) 2018-10-26
KR20180039725A (ko) 2018-04-18
JP2018536884A (ja) 2018-12-13
HK1256132A1 (zh) 2019-09-13
JP6688878B2 (ja) 2020-04-28

Similar Documents

Publication Publication Date Title
KR102556275B1 (ko) 디스플레이의 픽셀 휘도 및/또는 색차 응답 변화의 검출 및/또는 보정을 위한 시스템 및 방법
RU2433477C1 (ru) Расширение динамического диапазона изображений
US7663640B2 (en) Methods and systems for compensating an image projected onto a surface having spatially varying photometric properties
Kovaleski et al. High-quality reverse tone mapping for a wide range of exposures
US8174626B2 (en) Apparatus and method for correcting images displayed by a plurality of image apparatus
CN105103539A (zh) 补正数据生成方法、补正数据生成系统以及使用它们的画质调整技术
WO2016157670A1 (ja) 画像表示装置、画像表示方法、情報処理装置、情報処理方法、及びプログラム
KR101874738B1 (ko) 영상처리를 이용하여 ldr 영상으로부터 hdr 영상을 생성하는 장치 및 방법
US10540921B2 (en) Systems and methods for detection and/or correction of pixel luminosity and/or chrominance response variation in displays
Damera-Venkata et al. Realizing super-resolution with superimposed projection
KR20170026975A (ko) 표시장치와 그 얼룩 보상 방법
JP5691290B2 (ja) 表示システムの設定方法、表示システムの設定装置、およびコンピューター読み取り可能な記憶媒体
JP2017147638A (ja) 映像投影システム、映像処理装置、映像処理プログラムおよび映像処理方法
Kurth et al. Real-time adaptive color correction in dynamic projection mapping
KR20150040559A (ko) 관심영역 기반의 화질개선 장치와 그를 위한 컴퓨터로 읽을 수 있는 기록 매체
JP2016014712A (ja) シェーディング補正値算出装置およびシェーディング補正値算出方法
KR20190035629A (ko) 표시 장치의 보상 값 생성 방법
JP6350356B2 (ja) 画像処理装置、プロジェクタ、画像処理方法、及びプログラム
JP6361111B2 (ja) 画像処理装置、画像処理方法および投射装置
Sankar Projector Compensation for Unconventional Projection Surface
Wu et al. Event-based Asynchronous HDR Imaging by Temporal Incident Light Modulation
WO2024006987A2 (en) Systems, methods, and devices for image processing
EP4341929A1 (en) Display management with position-varying adaptivity to ambient light and/or non-display-originating surface light
JP6270448B2 (ja) 画像処理装置、画像処理方法及びプログラム
Elbrandt et al. Photometric color calibration of the joint monitor-camera response function

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant