KR20230027265A - 디스플레이 디바이스의 컬러 균일성 보정 - Google Patents

디스플레이 디바이스의 컬러 균일성 보정 Download PDF

Info

Publication number
KR20230027265A
KR20230027265A KR1020237002543A KR20237002543A KR20230027265A KR 20230027265 A KR20230027265 A KR 20230027265A KR 1020237002543 A KR1020237002543 A KR 1020237002543A KR 20237002543 A KR20237002543 A KR 20237002543A KR 20230027265 A KR20230027265 A KR 20230027265A
Authority
KR
South Korea
Prior art keywords
images
color
display
merit
weighting factors
Prior art date
Application number
KR1020237002543A
Other languages
English (en)
Inventor
케빈 메서
밀러 해리 3세. 슈크
니콜라스 일레 몰리
포-강 황
누쿨 산제이 샤
마샬 찰스 캡스
로버트 블레이크 테일러
Original Assignee
매직 립, 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 매직 립, 인코포레이티드 filed Critical 매직 립, 인코포레이티드
Publication of KR20230027265A publication Critical patent/KR20230027265A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003—Display of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/04—Structural and physical details of display devices
    • G09G2300/0439—Pixel structures
    • G09G2300/0452—Details of colour pixel setup, e.g. pixel composed of a red, a blue and two green components
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0242—Compensation of deficiencies in the appearance of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/04—Maintaining the quality of display appearance
    • G09G2320/041—Temperature compensation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0693—Calibration of display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/06—Colour space transformation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Of Color Television Signals (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Control Of Gas Discharge Display Tubes (AREA)
  • Video Image Reproduction Devices For Color Tv Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

디스플레이 디바이스의 디스플레이의 컬러 균일성을 개선하기 위한 기술들이 개시된다. 디스플레이의 복수의 이미지들이 이미지 캡처 디바이스를 사용하여 캡처된다. 복수의 이미지들은 컬러 공간에서 캡처되고, 각각의 이미지는 복수의 컬러 채널들 중 하나에 대응한다. 복수의 정규화된 이미지들을 획득하기 위해 복수의 이미지들에 대해 전역적 백색 밸런스가 수행된다. 복수의 보정 행렬들을 획득하기 위해 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스가 수행된다. 국지적 백색 밸런스를 수행하는 것은 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것, 및 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 것을 포함한다. 복수의 보정 행렬들은 복수의 가중된 이미지들에 기초하여 계산된다.

Description

디스플레이 디바이스의 컬러 균일성 보정
[0001] 본 출원은 2020년 6월 26일자로 출원되고 발명의 명칭이 "COLOR UNIFORMITY CORRECTION OF DISPLAY DEVICE"인 미국 가특허 출원 번호 제63/044,995호에 대한 우선권의 이익을 주장하며, 그 전체 내용은 모든 목적들을 위해 본 명세서에 인용에 의해 통합된다.
[0002] 디스플레이 또는 디스플레이 디바이스는 종종 투영 또는 방출을 통해 광을 사용자의 눈과 같은 수광 객체를 향해 출력함으로써 시각적 형태로 정보를 제시하는 출력 디바이스이다. 많은 디스플레이들은 가색(additive color) 모델을 이용하여 다양한 강도들의 적색, 녹색, 및 청색과 같은 몇몇 가색들을 동시에 또는 순차적으로 디스플레이함으로써 컬러들의 광범위한 어레이를 달성한다. 예를 들어, 일부 가색 모델들의 경우, 백색(또는 타겟 백색 포인트)은 가색들 각각을 0이 아닌 비교적 유사한 강도로 동시에 또는 순차적으로 디스플레이함으로써 달성되고, 흑색은 가색들 각각을 0의 강도로 디스플레이함으로써 달성된다.
[0003] 디스플레이의 컬러의 정확도는 디스플레이의 각각의 픽셀에서의 각각의 가색에 대한 실제 강도와 관련될 수 있다. 많은 디스플레이 기술들의 경우, 특히 픽셀 레벨에서, 가색들의 실제 강도들을 결정하고 제어하기가 어려울 수 있다. 따라서, 이러한 디스플레이들에 걸쳐 컬러 균일성을 개선하기 위한 새로운 시스템들, 방법들 및 다른 기술들이 필요하다.
[0004] 본 개시내용은 일반적으로 디스플레이들 및 디스플레이 디바이스들의 컬러 균일성을 개선하기 위한 기술들에 관한 것이다. 더 구체적으로, 본 개시내용의 실시예들은 다수의 컬러 채널들에 대한 디스플레이의 이미지들을 캡처하고 처리함으로써 멀티-채널 디스플레이들을 교정하기 위한 기술들을 제공한다. 본 개시내용의 부분들은 증강 현실(AR) 디바이스들을 참조하여 설명되지만, 본 개시내용은 컴퓨터 비전 및 디스플레이 기술들에서의 다양한 응용들에 적용가능하다.
[0005] 본 발명의 다양한 실시예들의 요약이 아래에서 예들의 리스트로서 제공된다. 아래에서 사용되는 바와 같이, 일련의 예들에 대한 임의의 참조는 분리적으로 그러한 예들 각각에 대한 참조로서 이해되어야 한다(예를 들어, "예들 1-4"는 "예들 1, 2, 3, 또는 4"로서 이해되어야 한다).
[0006] 예 1은 디스플레이 상에 일련의 이미지들을 포함하는 비디오 시퀀스를 디스플레이하는 방법이며, 방법은 디스플레이 디바이스에서 비디오 시퀀스를 수신하는 단계 ― 비디오 시퀀스는 복수의 컬러 채널들을 가짐 ―; 복수의 보정 행렬들 중의 보정 행렬을 사용하여 비디오 시퀀스의 복수의 컬러 채널들 각각에 픽셀별 보정을 적용하는 단계 ― 복수의 보정 행렬들 각각은 복수의 컬러 채널들 중 하나에 대응하고, 픽셀별 보정을 적용하는 단계는 복수의 컬러 채널들을 갖는 보정된 비디오 시퀀스를 생성함 ―; 및 디스플레이 디바이스의 디스플레이 상에 보정된 비디오 시퀀스를 디스플레이하는 단계를 포함한다.
[0007] 예 2는 예(들) 1의 방법이며, 여기서 복수의 보정 행렬들은: 이미지 캡처 디바이스를 사용하여 디스플레이의 복수의 이미지들을 캡처하고 ― 복수의 이미지들은 컬러 공간에서 캡처되고, 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―; 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하고; 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하여 복수의 보정 행렬들을 획득함으로써 미리 계산되었으며, 국지적 백색 밸런스를 수행하는 것은: 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것; 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 것; 및 복수의 가중된 이미지들에 기초하여 복수의 보정 행렬들을 계산하는 것을 포함한다.
[0008] 예 3은 예(들) 1의 방법이며, 복수의 보정 행렬들을 사용하여 복수의 타겟 소스 전류들을 결정하는 단계; 및 디스플레이 디바이스의 복수의 소스 전류를 복수의 타겟 소스 전류들로 설정하는 단계를 추가로 포함한다.
[0009] 예 4는 하나 이상의 프로세서들에 의해 실행될 때 하나 이상의 프로세서들로 하여금 동작들을 수행하게 하는 명령들을 포함하는 비일시적 컴퓨터 판독가능 매체이며, 동작들은: 디스플레이 디바이스에서 일련의 이미지들을 포함하는 비디오 시퀀스를 수신하는 동작 ― 비디오 시퀀스는 복수의 컬러 채널들을 가짐 ―; 복수의 보정 행렬들 중의 보정 행렬을 사용하여 비디오 시퀀스의 복수의 컬러 채널들 각각에 픽셀별 보정을 적용하는 동작 ― 복수의 보정 행렬들 각각은 복수의 컬러 채널들 중 하나에 대응하고, 픽셀별 보정을 적용하는 동작은 복수의 컬러 채널들을 갖는 보정된 비디오 시퀀스를 생성함 ―; 및 디스플레이 디바이스의 디스플레이 상에 보정된 비디오 시퀀스를 디스플레이하는 동작을 포함한다.
[0010] 예 5는 예(들) 4의 비일시적 컴퓨터 판독가능 매체이며, 여기서 복수의 보정 행렬들은: 이미지 캡처 디바이스를 사용하여 디스플레이의 복수의 이미지들을 캡처하고 ― 복수의 이미지들은 컬러 공간에서 캡처되고, 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―; 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하고; 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하여 복수의 보정 행렬들을 획득함으로써 이전에 계산되었고, 국지적 백색 밸런스를 수행하는 것은: 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것; 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 것; 및 복수의 가중된 이미지들에 기초하여 복수의 보정 행렬들을 계산하는 것을 포함한다.
[0011] 예 6은 예(들) 4의 비일시적 컴퓨터 판독가능 매체이며, 여기서 동작들은 복수의 보정 행렬들을 사용하여 복수의 타겟 소스 전류들을 결정하는 동작; 및 디스플레이 디바이스의 복수의 소스 전류들을 복수의 타겟 소스 전류들로 설정하는 동작을 추가로 포함한다.
[0012] 예 7은 시스템이며, 시스템은 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행될 때 하나 이상의 프로세서들로 하여금 동작들을 수행하게 하는 명령들을 포함하는 비일시적 컴퓨터 판독가능 매체를 포함하고, 동작들은: 디스플레이 디바이스에서 일련의 이미지들을 포함하는 비디오 시퀀스를 수신하는 동작 ― 비디오 시퀀스는 복수의 컬러 채널들을 가짐 ―; 복수의 보정 행렬들 중의 보정 행렬을 사용하여 비디오 시퀀스의 복수의 컬러 채널들 각각에 픽셀별 보정을 적용하는 동작 ― 복수의 보정 행렬들 각각은 복수의 컬러 채널들 중 하나에 대응하고, 픽셀별 보정을 적용하는 동작은 복수의 컬러 채널들을 갖는 보정된 비디오 시퀀스를 생성함 ―; 및 디스플레이 디바이스의 디스플레이 상에 보정된 비디오 시퀀스를 디스플레이하는 동작을 포함한다.
[0013] 예 8은 예(들) 7의 시스템이며, 여기서 복수의 보정 행렬들은: 이미지 캡처 디바이스를 사용하여 디스플레이의 복수의 이미지들을 캡처하고 ― 복수의 이미지들은 컬러 공간에서 캡처되고, 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―; 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하고; 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하여 복수의 보정 행렬들을 획득함으로써 이전에 계산되었고, 국지적 백색 밸런스를 수행하는 것은: 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것; 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 것; 및 복수의 가중된 이미지들에 기초하여 복수의 보정 행렬들을 계산하는 것을 포함한다.
[0014] 예 9는 예(들) 7의 시스템이며, 여기서 동작들은 복수의 보정 행렬들을 사용하여 복수의 타겟 소스 전류들을 결정하는 동작; 및 디스플레이 디바이스의 복수의 소스 전류를 복수의 타겟 소스 전류들로 설정하는 동작을 추가로 포함한다.
[0015] 예 10은 디스플레이의 컬러 균일성을 개선하는 방법이며, 방법은: 이미지 캡처 디바이스를 사용하여 디스플레이 디바이스의 디스플레이의 복수의 이미지들을 캡처하는 단계 ― 복수의 이미지들은 컬러 공간에서 캡처되고, 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―; 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하는 단계; 및 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 보정 행렬들을 획득하는 단계를 포함하고, 국지적 백색 밸런스를 수행하는 것은: 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것; 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 것; 및 복수의 가중된 이미지들에 기초하여 복수의 보정 행렬들을 계산하는 것을 포함한다.
[0016] 예 11은 예(들) 10의 방법이며, 복수의 보정 행렬들을 디스플레이 디바이스에 적용하는 단계를 추가로 포함한다.
[0017] 예 12는 예(들) 10-11의 방법이며, 여기서 성능 지수는 전력 소비; 컬러 에러; 또는 최소 비트 깊이 중 적어도 하나이다.
[0018] 예 13은 예(들) 10-12의 방법이며, 여기서 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것은: 가중 인자들의 세트를 변경함으로써 성능 지수를 최소화하는 것; 및 성능 지수가 최소화되는 가중 인자들의 세트를 결정하는 것을 포함한다.
[0019] 예 14는 예(들) 10-13의 방법이며, 여기서 컬러 공간은 CIELUV 컬러 공간; CIEXYZ 컬러 공간; 또는 sRGB 컬러 공간 중 하나이다.
[0020] 예 15는 예(들) 10-14의 방법이며, 여기서 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하는 것은: 타겟 백색 포인트에 기초하여 컬러 공간에서 타겟 조도 값들을 결정하는 것을 포함하고, 복수의 정규화된 이미지들은 타겟 조도 값들에 기초하여 계산된다.
[0021] 예 16은 예(들) 15의 방법이며, 여기서 복수의 보정 행렬들은 타겟 조도 값들에 추가로 기초하여 계산된다.
[0022] 예 17은 예(들) 10-16의 방법이며, 여기서 디스플레이는 회절 도파관 디스플레이이다.
[0023] 예 18은 하나 이상의 프로세서들에 의해 실행될 때 하나 이상의 프로세서들로 하여금 동작들을 수행하게 하는 명령들을 포함하는 비일시적 컴퓨터 판독가능 매체이며, 동작들은: 이미지 캡처 디바이스를 사용하여 디스플레이 디바이스의 디스플레이의 복수의 이미지들을 캡처하는 동작 ― 복수의 이미지들은 컬러 공간에서 캡처되고, 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―; 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하는 동작; 및 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 보정 행렬들을 획득하는 동작을 포함하고, 국지적 백색 밸런스를 수행하는 것은: 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것; 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 것; 및 복수의 가중된 이미지들에 기초하여 복수의 보정 행렬들을 계산하는 것을 포함한다.
[0024] 예 19는 예(들) 18의 비일시적 컴퓨터 판독가능 매체이며, 여기서 동작들은 복수의 보정 행렬들을 디스플레이 디바이스에 적용하는 동작을 추가로 포함한다.
[0025] 예 20은 예(들) 18-19의 비일시적 컴퓨터 판독가능 매체이며, 여기서 성능 지수는 전력 소비; 컬러 에러; 또는 최소 비트 깊이 중 적어도 하나이다.
[0026] 예 21은 예(들) 18-20의 비일시적 컴퓨터 판독가능 매체이며, 여기서 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것은: 가중 인자들의 세트를 변경함으로써 성능 지수를 최소화하는 것; 및 성능 지수가 최소화되는 가중 인자들의 세트를 결정하는 것을 포함한다.
[0027] 예 22는 예(들) 18-21 의 비일시적 컴퓨터 판독가능 매체이며, 여기서 컬러 공간은 CIELUV 컬러 공간; CIEXYZ 컬러 공간; 또는 sRGB 컬러 공간 중 하나이다.
[0028] 예 23은 예(들) 18-22의 비일시적 컴퓨터 판독가능 매체이며, 여기서 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하는 것은 타겟 백색 포인트에 기초하여 컬러 공간에서 타겟 조도 값들을 결정하는 것을 포함하고, 복수의 정규화된 이미지들은 타겟 조도 값들에 기초하여 계산된다.
[0029] 예 24는 예(들) 23의 비일시적 컴퓨터 판독가능 매체이며, 여기서 복수의 보정 행렬들은 타겟 조도 값들에 추가로 기초하여 계산된다.
[0030] 예 25는 예(들) 18-24의 비일시적 컴퓨터 판독가능 매체이며, 여기서 디스플레이는 회절 도파관 디스플레이이다.
[0031] 예 26은 시스템이며, 시스템은 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행될 때 하나 이상의 프로세서들로 하여금 동작들을 수행하게 하는 명령들을 포함하는 비일시적 컴퓨터 판독가능 매체를 포함하고, 동작들은: 이미지 캡처 디바이스를 사용하여 디스플레이 디바이스의 디스플레이의 복수의 이미지들을 캡처하는 동작 ― 복수의 이미지들은 컬러 공간에서 캡처되고, 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―; 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하는 동작; 및 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하여 각각이 복수의 컬러 채널들 중 하나에 대응하는 복수의 보정 행렬들을 획득하는 동작을 포함하고, 국지적 백색 밸런스를 수행하는 것은: 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것; 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 것; 및 복수의 가중된 이미지들에 기초하여 복수의 보정 행렬들을 계산하는 것을 포함한다.
[0032] 예 27은 예(들) 26의 시스템이며, 여기서 동작들은 복수의 보정 행렬들을 디스플레이 디바이스에 적용하는 동작을 추가로 포함한다.
[0033] 예 28은 예(들) 26-27의 시스템이며, 여기서 성능 지수는 전력 소비; 컬러 에러; 또는 최소 비트 깊이 중 적어도 하나이다.
[0034] 예 29는 예(들) 26-28의 시스템이며, 여기서 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 것은: 가중 인자들의 세트를 변경함으로써 성능 지수를 최소화하는 것; 및 성능 지수가 최소화되는 가중 인자들의 세트를 결정하는 것을 포함한다.
[0035] 예 30은 예(들) 26-29의 시스템이며, 여기서 컬러 공간은 CIELUV 컬러 공간; CIEXYZ 컬러 공간; 또는 sRGB 컬러 공간 중 하나이다.
[0036] 예 31은 예(들) 26-30의 시스템이며, 여기서 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하는 것은 타겟 백색 포인트에 기초하여 컬러 공간에서 타겟 조도 값들을 결정하는 것을 포함하고, 복수의 정규화된 이미지들은 타겟 조도 값들에 기초하여 계산된다.
[0037] 예 32는 예(들) 31의 시스템이며, 여기서 복수의 보정 행렬들은 타겟 조도 값들에 추가로 기초하여 계산된다.
[0038] 예 33은 예(들) 26-32의 시스템이며, 여기서 디스플레이는 회절 도파관 디스플레이이다.
[0039] 본 개시내용에 따르면, 종래의 기술들에 비해 다수의 이익들이 달성된다. 예를 들어, 본 명세서에서 설명되는 실시예들은 높은 레벨의 컬러 불균일성을 보정할 수 있다. 실시예들은 또한 다양한 응용들에서 강건성을 위해 눈 포지션, 전력 및 비트 깊이를 고려할 수 있다. 실시예들은 소정 레벨의 컬러 균일성의 디스플레이를 생성하는 데 필요한 (웨이퍼 두께 변화와 관련된) TTV, 회절 구조 충실도, 층 대 층 정렬, 프로젝터 대 층 정렬 등과 같은) 제조 요구들 및 공차들을 더 완화할 수 있다. 본 명세서에서 설명되는 기술들은 회절 도파관 아이피스들을 이용하는 디스플레이들에 적용가능할 뿐만 아니라, 많은 가능성 가운데 특히 반사형 홀로그래픽 광학 요소(H0E) 디스플레이들, 반사형 결합기 디스플레이들, 버드배스(bird-bath) 결합기 디스플레이들, 내장형 반사기 도파관 디스플레이들과 같은 다양한 디스플레이들에 사용될 수 있다.
[0040] 본 개시내용의 추가적인 이해를 제공하기 위해 포함되며 본 명세서에 포함되고 그 일부를 구성하는 첨부 도면들은 본 개시내용의 실시예들을 예시하며, 상세한 설명과 함께 본 개시내용의 원리들을 설명하는 역할을 한다. 본 개시내용의 구조적 세부사항들을 본 개시내용 및 이를 실시할 수 있는 다양한 방식들의 기본적인 이해에 필요할 수 있는 것보다 더 상세하게 도시하려는 시도는 이루어지지 않는다.
[0041] 도 1은 예시적인 디스플레이 교정 스킴을 예시한다.
[0042] 도 2는 회절 도파관 아이피스에서 상이한 컬러 채널들에 대해 발생할 수 있는 휘도 균일성 패턴들의 예들을 예시한다.
[0043] 도 3은 일련의 이미지를 포함하는 비디오 시퀀스를 디스플레이 상에 디스플레이하는 방법을 예시한다.
[0044] 도 4는 디스플레이의 컬러 균일성을 개선하는 방법을 예시한다.
[0045] 도 5는 개선된 컬러 균일성의 예를 예시한다.
[0046] 도 6은 도 5에 도시된 예에 대한 에러 히스토그램들의 세트를 예시한다.
[0047] 도 7은 예시적인 보정 행렬을 예시한다.
[0048] 도 8은 하나의 디스플레이 컬러 채널에 대한 휘도 균일성 패턴들의 예들을 예시한다.
[0049] 도 9는 다수의 눈 포지션들에 대한 디스플레이의 컬러 균일성을 개선하는 방법을 예시한다.
[0050] 도 10은 다수의 눈 포지션들에 대한 디스플레이의 컬러 균일성을 개선하는 방법을 예시한다.
[0051] 도 11은 다수의 눈 포지션들에 대한 개선된 컬러 균일성의 예를 예시한다.
[0052] 도 12는 디스플레이 디바이스의 소스 전류들을 결정하고 설정하는 방법을 예시한다.
[0053] 도 13은 예시적인 웨어러블 시스템의 개략도를 예시한다.
[0054] 도 14는 간략화된 컴퓨터 시스템을 예시한다.
[0055] 첨부 도면들 중 몇몇은 재생 목적들을 위해 그레이스케일로 변환된 컬러 특징들을 포함한다. 출원인은 나중에 컬러 특징들을 재도입할 권리를 보유한다.
[0056] 증강 현실(AR) 디스플레이들을 포함하는 많은 유형의 디스플레이들은 사용자의 시야(FoV)에 걸친 컬러 불균일성을 겪는다. 이러한 불균일성들의 소스는 디스플레이 기술에 의해 변하지만, 회절 도파관 아이피스들에 대해 특히 문제가 된다. 이러한 디스플레이들의 경우, 컬러 불균일성에 대한 중요한 기여자는 아이피스 기판의 국지적 두께 변화 프로파일의 부분 대 부분 변화이며, 이는 출력 이미지 균일성 패턴의 큰 변화들을 유발할 수 있다. 다수의 층들을 포함하는 아이피스들에서, 디스플레이 채널들(예로서, 적색, 녹색 및 청색 디스플레이 채널들)의 균일성 패턴들은 상당히 상이한 균일성 패턴들을 가질 수 있고, 이는 컬러 불균일성을 유발한다. 컬러 불균일성을 유발할 수 있는 다른 인자들은 많은 가능성들 가운데 특히, 아이피스에 걸친 격자 구조의 변화들, 시스템 내의 광학 요소들의 정렬의 변화들, 디스플레이 채널들의 광 경로들 간의 체계적 차이들을 포함한다.
[0057] 본 개시내용의 실시예들은 디스플레이들 및 디스플레이 디바이스들의 컬러 균일성을 개선하기 위한 기술들을 제공한다. 이러한 기술들은, 보정 후에, 사용자가 디스플레이의 전체 FoV에 걸쳐 더 균일한 컬러를 볼 수 있도록, AR 디스플레이들을 포함하는 많은 디스플레이들에 의해 생성되는 컬러 불균일성을 보정할 수 있다. 일부 실시예들에서, 기술들은 공간-광 변조기(SLM)에 의해 사용되는 컬러 채널 및 각각의 픽셀에 대한 0과 1 사이의 값에 대응하는 보정 행렬을 생성하는 교정 프로세스 및 알고리즘을 포함할 수 있다. 생성된 보정 행렬들은 컬러 균일성을 개선하기 위해 SLM으로 전송되는 각각의 이미지 프레임과 곱해질 수 있다.
[0058] 이하의 설명에서는, 다양한 예들이 설명될 것이다. 설명의 목적들을 위해, 구체적인 구성들 및 세부사항들이 예들의 철저한 이해를 제공하기 위해 제시된다. 그러나, 이러한 예는 구체적인 세부사항들 없이도 실시될 수 있다는 점이 이 분야의 기술자에게 또한 명백할 것이다. 또한, 설명되는 실시예들을 모호하게 하지 않기 위해 잘 알려진 특징들은 생략되거나 단순화될 수 있다.
[0059] 도 1은 본 개시내용의 일부 실시예들에 따른 예시적인 디스플레이 교정 스킴을 예시한다. 예시된 예에서, 카메라들(108)은 웨어러블 디바이스(102)의 디스플레이들(112)에 대한 사용자 눈 포지션들에 포지셔닝된다. 일부 예들에서, 카메라들(108)은 스테이션에서 웨어러블 디바이스(102)에 인접하여 설치될 수 있다. 카메라들(108)은 좌안 및 우안에 대한 웨어러블 디바이스의 디스플레이 출력을 동시에 또는 순차적으로 측정하기 위해 사용될 수 있다. 카메라들(108) 각각은 예시를 단순화하기 위해 단일 눈 포지션에 포지셔닝되는 것으로 도시되지만, 카메라들(108) 각각은 사용자의 눈 포지션, 동공간 거리, 및 움직임 등의 변화들에 따른 가능한 컬러 시프트를 고려하기 위해 여러 포지션들로 시프트될 수 있다는 것을 이해해야 한다. 단지 예로서, 카메라들(108)(또는 유사하게 웨어러블 디바이스(102)) 각각은 -3mm, 0mm, 및 +3mm에서의 3개의 측방 로케이션들에서 시프트될 수 있다. 또한, 카메라들(108) 각각에 대한 웨어러블 디바이스(102)의 상대적 각도들은 또한 추가적인 교정 조건들을 제공하기 위해 변화될 수 있다.
[0060] 디스플레이들(112) 각각은 발광 다이오드들(LED들)과 같은 하나 이상의 광원을 포함할 수 있다. 일부 실시예들에서, LCOS(liquid crystal on silicon)가 디스플레이 이미지들을 제공하기 위해 사용될 수 있다. LCOS는 웨어러블 디바이스(102)에 내장될 수 있다. 교정 동안, 이미지 광은 웨어러블 디바이스(102)에 의해 필드 순차 컬러로, 예를 들어 적색, 녹색, 및 청색의 시퀀스로 투영될 수 있다. 필드-순차 컬러 시스템에서, 원색 정보는 연속적인 이미지들로 전송되고, 이는 연속적인 이미지들을 컬러 픽처로 융합하기 위한 인간 시각 시스템에 의존한다. 카메라들(108) 각각은 카메라의 컬러 공간에서 이미지들을 캡처하고 데이터를 교정 워크스테이션에 제공할 수 있다. 캡처된 이미지들의 추가 처리 전에, 컬러 공간은 제1 컬러 공간(예를 들어, 카메라의 컬러 공간)으로부터 제2 컬러 공간으로 변환될 수 있다. 예를 들어, 캡처된 이미지들은 카메라의 RGB 공간으로부터 XYZ 컬러 공간으로 변환될 수 있다.
[0061] 일부 실시예들에서, 디스플레이들(112) 각각은 타겟 백색 포인트를 생성하기 위해 각각의 광원에 대한 개별적인 이미지를 디스플레이하게 된다. 디스플레이들(112) 각각이 각각의 이미지를 디스플레이하고 있는 동안, 대응하는 카메라는 디스플레이된 이미지를 캡처할 수 있다. 예를 들어, 적색 조명원을 사용하여 적색 이미지를 디스플레이하는 동안 디스플레이의 제1 이미지가 캡처될 수 있고, 녹색 조명원을 사용하여 녹색 이미지를 디스플레이하는 동안 동일한 디스플레이의 제2 이미지가 캡처될 수 있으며, 청색 조명원을 사용하여 청색 이미지를 디스플레이하는 동안 동일한 디스플레이의 제3 이미지가 캡처될 수 있다. 이어서, 3개의 캡처된 이미지는, 다른 디스플레이에 대한 3개의 캡처된 이미지와 함께, 설명된 실시예들에 따라 처리될 수 있다.
[0062] 도 2는 본 개시내용의 일부 실시예들에 따른, 회절 도파관 아이피스 내의 상이한 컬러 채널들에 대해 발생할 수 있는 휘도 균일성 패턴들의 예들을 예시한다. 좌측으로부터 우측으로, 휘도 균일성 패턴들이 회절 도파관 아이피스 내의 적색, 녹색 및 청색 디스플레이 채널들에 대해 도시된다. 개별 디스플레이 채널들의 조합은 전반적으로 불균일한 컬러를 보이는 먼 우측의 컬러 균일성 이미지를 초래한다. 예시된 예들에서, 이미지들(감마=2.2)은 3개의 층들(각각의 디스플레이 채널에 대해 하나씩)로 구성되는 회절 도파관 아이피스를 통해 취해졌다. 각각의 이미지는 45°x 55°FoV에 대응한다. 도 2는 재생 목적들을 위해 그레이스케일로 변환된 컬러 특징들을 포함한다.
[0063] 도 3은 본 개시내용의 일부 실시예들에 따른, 일련의 이미지를 포함하는 비디오 시퀀스를 디스플레이 상에 디스플레이하는 방법(300)을 예시한다. 방법(300)의 하나 이상의 단계들은 방법(300)의 수행 동안 생략될 수 있고, 방법(300)의 단계들은 도시된 순서로 수행될 필요가 없다. 방법(300)의 하나 이상의 단계들은 하나 이상의 프로세서들에 의해 수행될 수 있다. 방법(300)은, 프로그램이 하나 이상의 컴퓨터에 의해 실행될 때, 하나 이상의 컴퓨터로 하여금 방법(300)의 단계들을 수행하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체 또는 컴퓨터 프로그램 제품으로서 구현될 수 있다.
[0064] 단계 302에서, 비디오 시퀀스가 디스플레이 디바이스에서 수신된다. 비디오 시퀀스는 일련의 이미지들을 포함할 수 있다. 비디오 시퀀스는 복수의 컬러 채널들을 포함할 수 있고, 컬러 채널들 각각은 디스플레이 디바이스의 복수의 조명원들 중 하나에 대응한다. 예를 들어, 비디오 시퀀스는 적색, 녹색 및 청색 컬러 채널들을 포함할 수 있고, 디스플레이 디바이스는 적색, 녹색 및 청색 조명원들을 포함할 수 있다. 조명원들은 LED들일 수 있다.
[0065] 단계 304에서, 복수의 보정 행렬들이 결정된다. 복수의 보정 행렬들 각각은 복수의 컬러 채널들 중 하나에 대응할 수 있다. 예를 들어, 복수의 보정 행렬들은 적색, 녹색 및 청색 보정 행렬들을 포함할 수 있다.
[0066] 단계 306에서, 복수의 보정 행렬들 중의 보정 행렬을 사용하여 비디오 시퀀스의 복수의 컬러 채널들 각각에 픽셀별 보정이 적용된다. 예를 들어, 적색 보정 행렬은 비디오 시퀀스의 적색 채널에 적용될 수 있고, 녹색 보정 행렬은 비디오 시퀀스의 녹색 채널에 적용될 수 있고, 청색 보정 행렬은 비디오 시퀀스의 청색 채널에 적용될 수 있다. 일부 실시예들에서, 픽셀별 보정을 적용하는 것은 복수의 컬러 채널들을 갖는 보정된 비디오 시퀀스가 생성되게 한다.
[0067] 단계 308에서, 보정된 비디오 시퀀스는 디스플레이 디바이스의 디스플레이 상에 디스플레이된다. 예를 들어, 보정된 비디오 시퀀스는 디스플레이 디바이스의 프로젝터(예를 들어, LCOS)에 전송될 수 있다. 프로젝터는 보정된 비디오 시퀀스를 디스플레이 상에 투영할 수 있다. 디스플레이는 회절 도파관 디스플레이일 수 있다.
[0068] 단계 310에서, 복수의 타겟 소스 전류들이 결정된다. 타겟 소스 전류들 각각은 복수의 조명원들 중 하나 및 복수의 컬러 채널들 중 하나에 대응할 수 있다. 예를 들어, 복수의 타겟 소스 전류들은 적색, 녹색 및 청색 타겟 소스 전류들을 포함할 수 있다. 일부 실시예들에서, 복수의 타겟 소스 전류들은 복수의 보정 행렬들에 기초하여 결정된다.
[0069] 단계 312에서, 디스플레이 디바이스의 복수의 소스 전류들이 복수의 타겟 소스 전류들로 설정된다. 예를 들어, 적색 소스 전류(적색 조명원을 통해 흐르는 전기 전류의 양에 대응함)는 적색 소스 전류를 적색 타겟 전류의 값을 향해 또는 그와 동일하게 조정함으로써 적색 타겟 전류로 설정될 수 있고, 녹색 소스 전류(녹색 조명원을 통해 흐르는 전기 전류의 양에 대응함)는 녹색 소스 전류를 녹색 타겟 전류의 값을 향해 또는 그와 동일하게 조정함으로써 녹색 타겟 전류로 설정될 수 있고, 청색 소스 전류(청색 조명원을 통해 흐르는 전기 전류의 양에 대응함)는 청색 소스 전류를 청색 타겟 전류의 값을 향해 또는 그와 동일하게 조정함으로써 청색 타겟 전류로 설정될 수 있다.
[0070] 도 4는 본 개시내용의 일부 실시예들에 따른, 디스플레이의 컬러 균일성을 개선하는 방법(400)을 예시한다. 방법(400)의 하나 이상의 단계들은 방법(400)의 수행 동안 생략될 수 있고, 방법(400)의 단계들은 도시된 순서로 수행될 필요가 없다. 방법(400)의 하나 이상의 단계들은 하나 이상의 프로세서들에 의해 수행될 수 있다. 방법(400)은, 프로그램이 하나 이상의 컴퓨터들에 의해 실행될 때, 하나 이상의 컴퓨터들로 하여금 방법(400)의 단계들을 수행하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체 또는 컴퓨터 프로그램 제품으로서 구현될 수 있다. 방법(400)의 단계들은 본 명세서에 설명된 다양한 다른 방법들의 하나 이상의 단계들을 포함할 수 있고/있거나 그들과 함께 사용될 수 있다.
[0071] 디스플레이에서의 컬러 불균일성의 양은 백색 이미지가 디스플레이 상에 보여질 때 원하는 백색 포인트로부터의 컬러 좌표들의 시프트와 관련하여 특성화될 수 있다. FoV에 걸친 컬러의 변화의 양을 캡처하기 위해, FoV 내의 각각의 픽셀에서의 컬러 좌표의 타겟 백색 포인트(예로서, D65)로부터의 편차의 제곱 평균(RMS: root-mean-square)이 계산될 수 있다. CIELUV 컬러 공간을 사용할 때, RMS 컬러 에러는 다음과 같이 계산될 수 있다.
Figure pct00001
여기서, u'px는 픽셀 px에서의 u' 값이고, v'px는 픽셀 px에서의 v' 값이며, D65u'는 D65 백색 포인트에 대한 u' 값이고, D65v'는 D65 백색 포인트에 대한 v' 값이며, npx'는 픽셀들의 수이다.
[0072] 컬러 균일성 보정의 하나의 목표는 디스플레이 전력 소비, 디스플레이 밝기 및 컬러 비트 깊이에 대한 부정적인 영향들을 최소화하면서 눈 상자 내의 눈 포지션들의 범위에 걸쳐 가능한 한 많이 RMS 컬러 에러를 최소화하는 것일 수 있다. 방법(400)의 출력들은 각각의 컬러 채널 및 복수의 타겟 소스 전류들 IR, IG 및 IB에 대한 디스플레이의 각각의 픽셀에서의 0과 1 사이의 값들을 포함하는 보정 행렬들 CR,G,B의 세트일 수 있다.
[0073] 컬러 불균일성을 보정하고, 디스플레이를 백색-밸런싱하고, 전력 소비를 최소화하기 위해 충분히 상세하게 디스플레이의 출력을 설명하기 위해 입력 데이터의 세트가 이용될 수 있다. 일부 실시예들에서, 입력 데이터의 세트는 FoV에 걸친 CIE XYZ 삼자극 값들의 맵, 및 각각의 디스플레이 채널의 휘도를 조명원의 전기 구동 속성들에 관련시키는 데이터를 포함할 수 있다. 이 정보는 아래에 설명되는 바와 같이 수집되고 처리될 수 있다.
[0074] 단계 402에서, 디스플레이의 복수의 이미지들(예를 들어, 이미지들(450))이 이미지 캡처 디바이스를 사용하여 캡처된다. 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응할 수 있다. 예를 들어, 디스플레이의 제1 이미지는 제1 컬러 채널에 대응하는 제1 조명원을 사용하여 디스플레이하는 동안 캡처될 수 있고, 디스플레이의 제2 이미지는 제2 컬러 채널에 대응하는 제2 조명원을 사용하여 디스플레이하는 동안 캡처될 수 있고, 디스플레이의 제3 이미지는 제3 컬러 채널에 대응하는 제3 조명원을 사용하여 디스플레이하는 동안 캡처될 수 있다.
[0075] 복수의 이미지들은 특정 컬러 공간에서 캡처될 수 있다. 예를 들어, 각각의 이미지의 각각의 픽셀은 특정 컬러 공간에 대한 값들을 포함할 수 있다. 컬러 공간은 많은 가능성들 가운데 특히, CIELUV 컬러 공간, CIEXYZ 컬러 공간, sRGB 컬러 공간, 또는 CIELAB 컬러 공간일 수 있다. 예를 들어, 각각의 이미지의 각각의 픽셀은 CIEXYZ 삼자극 값들을 포함할 수 있다. 값들은 많은 가능성들 가운데 특히, 색도계, 분광 광도계, 또는 교정된 RGB 카메라에 의해 FoV에 걸쳐 캡처될 수 있다. 일부 예들에서, 각각의 컬러 채널이 FoV에 걸쳐 색도의 강한 변동들을 나타내지 않는 경우, 단색 카메라에 의해 캡처된 균일성 패턴을 단일 필드 포인트에서의 색도의 측정과 조합하는 더 간단한 옵션이 또한 사용될 수 있다. 필요한 해상도는 디스플레이에서의 컬러 불균일성의 각도 주파수에 의존할 수 있다. 디스플레이의 출력을 조명원의 전기 구동 속성들에 관련시키기 위해, 조명원의 전류 및 온도를 변화시키면서 각각의 디스플레이 채널의 출력 전력 또는 휘도가 특성화될 수 있다.
[0076] XYZ 삼자극 이미지들은 다음과 같이 표시될 수 있다.
Figure pct00002
Figure pct00003
Figure pct00004
여기서, X, Y 및 Z는 각각 삼자극 값이고, R은 적색/디스플레이 채널을 지칭하고, G는 녹색/디스플레이 채널을 지칭하고, B는 청색/디스플레이 채널을 지칭하고, px 및 py는 FoV 내의 픽셀들이고, I는 조명원 구동 전류이고, T는 디스플레이 또는 디스플레이 디바이스의 특성 온도이다.
[0077] 조명원들을 구동하는 데 사용되는 전력은 전류 및 전압의 함수일 수 있다. 전류-전압 관계는 공지될 수 있고,
Figure pct00005
는 전력을 나타내는 데 사용될 수 있다. 조명원 전류들, 특성 온도 및 평균 디스플레이 휘도 간의 관계는
Figure pct00006
를 사용하여 사용되고 참조될 수 있다.
[0078] 단계 404에서, 복수의 정규화된 이미지들(예를 들어, 정규화된 이미지들(452))을 획득하기 위해 복수의 이미지들에 대해 전역적 백색 밸런스가 수행된다. 복수의 정규화된 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응할 수 있다. 전역적 백색 밸런스를 수행하기 위해(또는 디스플레이 또는 디스플레이 채널들을 전역적 백색 밸런싱하기 위해), 일부 실시예들에서, FoV의 삼자극 이미지들의 평균들은
Figure pct00007
로 표시되는 타겟 조도 값들(454)의 세트를 향해 증가되거나 감소될 수 있다. D65 타겟 백색 포인트에 대해(100 니트 휘도에서), 타겟 조도 값들(454)은 다음의 삼자극 값들을 갖는다.
Figure pct00008
Figure pct00009
Figure pct00010
[0079] 각각의 컬러/디스플레이 채널에 대한 (전류 및 온도에 대한 일부 테스트 조건들에서의) 측정된 평균 삼자극 값은 다음을 사용하여 계산될 수 있다.
Figure pct00011
Figure pct00012
Figure pct00013
[0080] 다음으로, 각각의 컬러/디스플레이 채널의 타겟 휘도는 행렬 방정식을 사용하여 풀릴 수 있다.
Figure pct00014
각각의 컬러/디스플레이 채널의 전역적 밸런싱된 휘도를 사용하여, 다음과 같이 이미지들(450)을 정규화함으로써 정규화된 이미지들(452)이 계산될 수 있다.
Figure pct00015
Figure pct00016
Figure pct00017
[0081] 단계 406에서, 복수의 보정 행렬들(예를 들어, 보정 행렬들(456))을 획득하기 위해 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스가 수행된다. 복수의 보정 행렬들 각각은 복수의 컬러 채널들 중 하나에 대응할 수 있다. 국지적 백색 밸런스를 수행하기 위해, 보정 행렬들은 전역적 백색 밸런싱된 휘도 타겟을 히트하기 위해 총 전력 소모를 최소화하는 방식으로 최적화될 수 있다.
[0082] 단계 408에서, WR,G,B로 표시되는 가중 인자들(예컨대, 가중 인자들(458))의 세트가 정의된다. 가중 인자들의 세트 각각은 복수의 컬러 채널들 중의 하나에 대응할 수 있다. 가중 인자들의 세트는 성능 지수(예컨대, 성능 지수(464))에 기초하여 정의될 수 있다. 루프(460)를 통한 각각의 반복 동안에, 가중 인자들의 세트는 최저 효율을 갖는 컬러/디스플레이 채널을 위하여 보정 행렬을 바이어싱하기 위하여 사용된다. 예를 들어, 적색 채널의 효율이 녹색 및 청색보다 실질적으로 더 낮을 경우, 더 양호한 국지적 백색 밸런싱을 달성하기 위하여 녹색 및 청색 채널들에 대한 보정 행렬들에서 더 낮은 값들이 사용되는 동안 적색에 대한 보정 행렬이 전체 FoV에 걸쳐 1의 값을 갖는 것이 바람직하다.
[0083] 단계 410에서, 복수의 가중된 이미지들(예컨대, 가중된 이미지들(466))은 복수의 정규화된 이미지들 및 가중 인자들의 세트에 기초하여 계산된다. 복수의 가중된 이미지들 각각은 복수의 컬러 채널들 중의 하나에 대응할 수 있다. 복수의 가중된 이미지들은
Figure pct00018
로 표시될 수 있다. 예시된 예에서 도시된 바와 같이, 가중 인자들(458)은 초기 가중 인자들(462)이 사용되는 제1 반복을 제외하고는 루프(460)를 통한 각각의 반복 동안에 가중 인자들의 세트로서 사용될 수 있다. 국지적 백색 밸런싱을 위하여 사용되는 해상도는 선택될 수 있는 파라미터이고, 디스플레이 디바이스(예컨대, SLM)의 해상도와 매칭될 필요가 없다. 일부 실시예들에서, 보정 행렬들(456)이 계산된 후에, 계산된 보정 행렬들의 크기를 SLM의 해상도와 매칭시키기 위하여 보간 단계가 추가될 수 있다.
[0084] 가중된 이미지들(466)은 다음과 같이 계산될 수 있다.
Figure pct00019
Figure pct00020
Figure pct00021
여기서, cx 및 cy는 ncx 및 ncy 요소들을 갖는 보정 행렬들에서의 좌표들이다.
[0085] 단계 412에서, 복수의 가중된 이미지들 및 복수의 타겟 조도 값들에 기초하여 복수의 상대 비율 맵들(예를 들어, 상대 비율들(468))이 계산된다. 복수의 상대 비율 맵들 각각은 복수의 컬러 채널들 중 하나에 대응할 수 있다. 복수의 상대 비율 맵들은
Figure pct00022
로서 표시될 수 있다. 보정 (cx, cy)에서의 각각의 픽셀에 대해, 타겟 백색 포인트를 히트하는 데 요구되는 컬러 채널의 상대 비율들이 결정될 수 있다. 전역적 보정을 위한 프로세스와 유사하게, 상대 비율들(468)은 다음과 같이 계산될 수 있다.
Figure pct00023
양들(
Figure pct00024
)은 타겟 백색 밸런스(예를 들어, D65)를 히트하는 데 요구되는 픽셀의 상대적 가중치들로서 해석될 수 있다. 전역적 백색 밸런스 보정이 이미 수행되어 정규화된 이미지들(452)을 초래했기 때문에, 이미지들이 cx 및 cy에 대해 완벽하게 균일한 경우, 상대적 비율들(468)은
Figure pct00025
로서 계산될 것이다. cx 및 cy에 대한 불균일성으로 인해,
Figure pct00026
및
Figure pct00027
사이에 변동들이 존재할 수 있다.
[0086] 단계 414에서, 복수의 보정 행렬들은 복수의 상대 비율 맵들에 기초하여 계산된다. 일부 실시예들에서, 각각의 컬러 채널에 대한 보정 행렬은 각각의 픽셀에서 다음과 같이 계산될 수 있다.
Figure pct00028
보정 행렬의 이러한 정의에 따라, cx, cy 내의 모든 포인트에서, 적색, 녹색 및 청색 채널의 상대적 비율들은 타겟 백색 포인트(예를 들어, D65)를 정확하게 생성할 것이다. 또한, 적어도 하나의 컬러 채널은 모든 cx, cy에서 1의 값을 가질 것이고, 이는 컬러 불균일성의 보정으로 인해 사용자가 보는 휘도의 감소인 광학 손실을 최소화한다.
[0087] 단계 416에서, 성능 지수(예를 들어, 성능 지수(464))는 복수의 보정 행렬들 및 하나 이상의 성능 지수 입력(예를 들어, 성능 지수 입력(들)(470))에 기초하여 계산된다. 계산된 성능 지수는 루프(460)를 통해 다음 반복에 대한 가중 인자들의 세트를 계산하기 위해 단계 408과 관련하여 사용된다. 예로서, 최소화할 하나의 성능 지수는 전력 소비이다. 최적화는 다음의 방식으로 설명될 수 있다.
Figure pct00029
여기서,
Figure pct00030
은 다변수 최적화 함수이고, FOM은 성능 지수 함수이고,
Figure pct00031
는 이전 반복 또는 초기 추정치들로부터의 가중 인자들이다. 루프(460)를 통한 각각의 반복 동안, 계산된 성능 지수가 수렴되었는지가 결정될 수 있고, 이 경우 방법(400)은 루프(460)를 종료하고 보정 행렬들(456)을 출력할 수 있다.
[0088] 사용될 수 있는 성능 지수들의 예들은 많은 가능성들 중에서 특히, 1) 전력 소비
Figure pct00032
, 2) 눈 포지션들에 대한 전력 소비 및 RMS 컬러 에러의 조합(이 경우, 보정 행렬에서의 저역 통과 필터의 각도 주파수가 최적화에 포함될 수 있음), 및 3) 전력 소비, RMS 컬러 에러, 및 최소 비트 깊이의 조합을 포함한다.
[0089] 많은 시스템 구성들에서, 보정 행렬은 디스플레이 디바이스 내의 픽셀들의 최대 비트 깊이를 감소시킬 수 있다. 보정 행렬의 더 낮은 값들은 더 낮은 비트 깊이를 초래할 수 있는 반면, 1의 값은 비트 깊이를 변경되지 않은 채로 남긴다. 추가적인 제약은 SLM의 선형 체제에서 동작하기 위한 요구일 수 있다. LCoS와 같은 디바이스가 액정(LC) 스위칭(전자 비디오 신호로 인한 LC의 동적 광학 응답임), 온도 효과들, 또는 전자 잡음으로 인해 더 낮거나 더 높은 그레이 레벨들에서 덜 예측가능한 응답을 가질 때 잡음이 발생할 수 있다. 원하는 임계치 아래로 비트 깊이를 감소시키는 것 또는 SLM의 바람직하지 않은 체제에서 동작하는 것을 회피하기 위해 보정 행렬에 제약이 가해질 수 있고, RMS 컬러 에러에 대한 영향이 최적화에 포함될 수 있다.
[0090] 일부 실시예들에서, 전역적 백색 밸런스는 재실행될 수 있고, 요구되는 소스 전류들은 새롭게 생성된 보정 행렬들이 적용되어 계산될 수 있다. 각각의 채널에 대한 타겟 휘도
Figure pct00033
는 이전에 계산되었다. 그러나, 보정 행렬로 인한 유효 효율
Figure pct00034
이 적용될 수 있다. 유효 효율은 다음과 같이 계산될 수 있다.
Figure pct00035
여기서, · 연산자는 요소별 곱셈을 나타낸다.
[0091] 휘도 응답(472)이라고도 하는 휘도 곡선들 대 전류(그리고, 필요한 경우, 온도)는 다음을 사용하여 업데이트될 수 있다.
Figure pct00036
이제, 각각의 컬러 채널에 대한 이전에 정의된 타겟 D65 휘도 값들
Figure pct00037
에 도달하는 데 필요한 전류들
Figure pct00038
는
Figure pct00039
대
Figure pct00040
곡선들을 포함하는 휘도 응답(472)으로부터 발견될 수 있다. 알려진 전류들에 따라, 각각의 컬러 채널의 효능 및 총 전력 소비
Figure pct00041
도 발견될 수 있다.
[0092] 일부 실시예들에서, 최적 가중 인자들이 발견되면, 위에서 설명된 동일한 방법이 최적 보정 행렬들을 생성하기 위해 최종 시간에 뒤따를 수 있다.
Figure pct00042
를 사용하여, 모든 동작 온도들 및 타겟 디스플레이 조도들에 대한 필요한 조명 소스 전류들을 얻기 위해 전역적 백색 밸런스가 수행될 수 있다.
[0093] 일부 실시예들에서, 각각의 컬러 채널의 원하는 휘도
Figure pct00043
는 전역적 백색 밸런스를 수행하기 위해 사용된 것과 유사한 행렬 방정식을 사용하여 결정될 수 있다. 그러나, 타겟 백색 포인트 삼자극 값들 (
Figure pct00044
)은 이제 타겟 디스플레이 휘도
Figure pct00045
에 의해 스케일링될 수 있다. D65 백색 포인트에 대해, 이것은 다음을 유도한다.
Figure pct00046
Figure pct00047
Figure pct00048
다른 타겟 백색 포인트들은
Figure pct00049
의 값들을 변경할 수 있다. 이제,
Figure pct00050
는 다음과 같이 풀릴 수 있다.
Figure pct00051
여기서,
Figure pct00052
는 각각의 디스플레이 컬러 채널에 대한 이전에 정의된 평균 삼자극 값들이다.
[0094] 디스플레이 휘도 대 전류 및 온도에 관한 데이터는 휘도 응답(472)에 포함될 수 있는 함수
Figure pct00053
에 의해 알려져 있다. 이 정보는 또한 휘도 응답(472)에 포함될 수 있는
Figure pct00054
로서 표현될 수 있다. 이것뿐만 아니라, 위의 행렬 방정식으로부터의 결과들을 사용하여,
Figure pct00055
및 온도
Figure pct00056
의 함수로서 소스 전류들을 산출한다.
[0095] 단계 418에서,
Figure pct00057
으로 표시된 디스플레이의 타겟 휘도(예를 들어, 타겟 휘도(472))가 결정된다. 일부 실시예들에서, 타겟 휘도(472)는 전형적인 모니터 휘도들에 대해(예를 들어, 데스크톱 모니터들 또는 텔레비전들에 대해) 웨어러블 디바이스의 휘도를 벤치마킹함으로써 결정될 수 있다.
[0096] 단계 420에서,
Figure pct00058
로 표시되는 복수의 타겟 소스 전류들(예를 들어, 타겟 소스 전류들(474))은 디스플레이의 휘도와 전류(그리고 선택적으로 온도) 사이의 타겟 휘도 및 휘도 응답(예를 들어, 휘도 응답(472))에 기초하여 결정된다. 일부 실시예들에서, 타겟 소스 전류들(474) 및 보정 행렬들(456)은 방법(400)의 출력들이다.
[0097] 보정 행렬들(456)의 눈 포지션 의존성을 해결하기 위해 다양한 기술들이 이용될 수 있다. 제1 접근법에서, 눈 포지션에 대한 감도를 줄이기 위해 보정 행렬들에 저역 통과 필터가 적용될 수 있다. 필터의 각도 주파수 컷오프는 주어진 디스플레이에 대해 최적화될 수 있다. σ = 2-10°를 갖는 가우스 필터는 그러한 필터에 대한 적절한 범위일 수 있다. 제2 접근법에서, 이미지들은 대략 4mm의 입사 동공 직경을 갖는 카메라를 사용하여 다수의 눈 포지션들에서 획득될 수 있고, 평균은 유효 눈 상자 이미지를 생성하는 데 사용될 수 있다. 눈 상자 이미지는 특정 눈 포지션에서 취해진 이미지보다 눈 포지션에 덜 민감한 보정 행렬을 생성하는 데 사용될 수 있다.
[0098] 제3 접근법에서, 이미지들은 설계된 눈 상자(~10-20mm)만큼 큰 입사 동공 직경을 갖는 카메라를 사용하여 획득될 수 있다. 다시, 눈 상자 이미지는 4mm 입사 동공으로 특정 눈 포지션에서 취해진 이미지보다 눈 포지션에 덜 민감한 보정 행렬들을 생성할 수 있다. 제4 접근법에서, 이미지들은 사용자가 응시하고 있는 FoV의 부분에서 눈 회전에 대한 컬러 균일성 보정의 감도를 감소시키기 위해 공칭 사용자의 눈 회전 중심에 로케이팅된 대략 4mm의 입사 동공 직경을 갖는 카메라를 사용하여 획득될 수 있다. 제5 접근법에서, 이미지들은 대략 4mm의 입사 동공 직경을 갖는 카메라를 사용하여 다수의 눈 포지션들에서 획득될 수 있다. 각각의 카메라 포지션에 대해 개별 보정 행렬들이 생성될 수 있다. 이러한 보정들은 웨어러블 시스템으로부터의 눈-추적 정보를 사용하여 눈 포지션 의존적 컬러 보정을 적용하기 위해 사용될 수 있다.
[0099] 도 5는 본 개시내용의 일부 실시예들에 따른 방법들(300 및 400)을 사용하는 개선된 컬러 균일성의 예를 예시한다. 예시된 예에서, 컬러 균일성 보정 알고리즘들은 LED 조명된 LCOS SLM 회절 도파관 디스플레이 시스템에 적용되었다. 이미지들의 FoV는 45°x 55°에 대응한다. 눈 포지션 감도를 줄이기 위해 σ = 5°를 갖는 가우스 필터가 보정 행렬들에 적용되었다. 최소화 최적화 함수에 사용된 성능 지수는 전력 소비였다. 이미지들 모두는 4mm 입사 동공을 갖는 카메라를 사용하여 취해졌다. 컬러 균일성 보정 알고리즘들을 수행하기 전과 후에, RMS 컬러 에러들은 각각 0.0396 및 0.0191이었다. 컬러 균일성의 개선을 보이는 미보정 및 보정 이미지들은 각각 도 5의 좌측 및 우측에 도시되어 있다. 도 5는 재생 목적들을 위해 그레이스케일로 변환된 컬러 특징들을 포함한다.
[0100] 도 6은 본 개시내용의 일부 실시예들에 따른, 도 5에 도시된 예에 대한 한 세트의 에러 히스토그램들을 예시한다. 에러 히스토그램들 각각은 미보정 및 보정 이미지들 각각에서의 한 세트의 에러 범위들 각각에서의 다수의 픽셀들을 나타낸다. 에러는 FoV 내의 픽셀들에 대한 D65로부터의 u'v' 에러이다. 예시된 예는 보정을 적용하는 것이 컬러 에러를 상당히 감소시킨다는 것을 보여준다.
[0101] 도 7은 본 개시내용의 일부 실시예들에 따른, RGB 이미지로서 보여지는 예시적인 보정 행렬(700)을 예시한다. 보정 행렬(700)은 3개의 별개의 보정 행렬
Figure pct00059
의 중첩일 수 있다. 예시된 예에서, 보정 행렬(700)은 상이한 컬러 채널들이 디스플레이의 상이한 영역들을 따라 상이한 레벨들의 불균일성을 보일 수 있음을 보여준다. 도 7은 재생 목적들을 위해 그레이스케일로 변환된 컬러 특징들을 포함한다.
[0102] 도 8은 본 개시내용의 일부 실시예들에 따른, 하나의 디스플레이 컬러 채널에 대한 휘도 균일성 패턴들의 예들을 예시한다. 각각의 이미지는 단일 디스플레이 컬러 채널의 눈 상자 내의 상이한 눈 포지션에서 취해진 45°x 55°FoV에 대응한다. 도 8에서 관찰될 수 있는 바와 같이, 휘도 균일성 패턴은 다수의 방향들에서의 눈 포지션에 의존할 수 있다.
[0103] 도 9는 본 개시내용의 일부 실시예들에 따른, 눈 상자 내의 다수의 눈 포지션들(또는 눈 상자 포지션들)에 대한 디스플레이의 컬러 균일성을 개선하는 방법(900)을 예시한다. 방법(900)의 하나 이상의 단계들은 방법(900)의 수행 동안 생략될 수 있고, 방법(900)의 단계들은 도시된 순서로 수행될 필요가 없다. 방법(900)의 하나 이상의 단계들은 하나 이상의 프로세서들에 의해 수행될 수 있다. 방법(900)은, 프로그램이 하나 이상의 컴퓨터들에 의해 실행될 때, 하나 이상의 컴퓨터들로 하여금 방법(900)의 단계들을 수행하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체 또는 컴퓨터 프로그램 제품으로서 구현될 수 있다. 방법(900)의 단계들은 본 명세서에 설명된 다양한 다른 방법들의 하나 이상의 단계들을 포함할 수 있고/있거나 그들과 함께 사용될 수 있다.
[0104] 단계 902에서, 디스플레이의 제1 복수의 이미지가 이미지 캡처 디바이스를 사용하여 캡처된다. 제1 복수의 이미지는 눈 상자 내의 제1 눈 포지션에서 캡처될 수 있다.
[0105] 단계 904에서, 제1 복수의 이미지에 대해 전역적 백색 밸런스가 수행되어 제1 복수의 정규화된 이미지가 획득된다.
[0106] 단계 906에서, 제1 복수의 정규화된 이미지에 대해 국지적 백색 밸런스가 수행되어 제1 복수의 보정 행렬들 및 선택적으로 제1 복수의 타겟 소스 전류들이 획득하고, 이들은 메모리 디바이스에 저장될 수 있다.
[0107] 단계 908에서, 이미지 캡처 디바이스의 포지션이 디스플레이에 대해 변경된다. 단계 902 내지 906을 통한 후속 반복 동안, 디스플레이의 제2 복수의 이미지가 눈 상자 내의 제2 눈 포지션에서 캡처되고, 국지적 백색 밸런스가 제2 복수의 정규화된 이미지에 대해 수행되어 제2 복수의 보정 행렬들 및 선택적으로 제2 복수의 타겟 소스 전류들이 획득되고, 이들은 메모리 디바이스에 저장될 수 있다. 유사하게, 단계 902 내지 906을 통한 후속 반복 동안, 디스플레이의 제3 복수의 이미지가 눈 상자 내의 제3 눈 포지션에서 캡처되고, 국지적 백색 밸런스가 제3 복수의 정규화된 이미지에 대해 수행되어 제3 복수의 보정 행렬들 및 선택적으로 제3 복수의 타겟 소스 전류들이 획득되고, 이들은 메모리 디바이스에 저장될 수 있다.
[0108] 도 10은 본 개시내용의 일부 실시예들에 따른, 눈 상자 내의 다수의 눈 포지션들(또는 눈 상자 포지션들)에 대한 디스플레이의 컬러 균일성을 개선하는 방법(1000)을 예시한다. 방법(1000)의 하나 이상의 단계들은 방법(1000)의 수행 동안 생략될 수 있고, 방법(1000)의 단계들은 도시된 순서로 수행될 필요가 없다. 방법(1000)의 하나 이상의 단계들은 하나 이상의 프로세서들에 의해 수행될 수 있다. 방법(1000)은, 프로그램이 하나 이상의 컴퓨터들에 의해 실행될 때, 하나 이상의 컴퓨터들로 하여금 방법(1000)의 단계들을 수행하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체 또는 컴퓨터 프로그램 제품으로서 구현될 수 있다. 방법(100)의 단계들은 본 명세서에 설명된 다양한 다른 방법들의 하나 이상의 단계들을 포함할 수 있고/있거나 그들과 함께 사용될 수 있다.
[0109] 단계 1002에서, 사용자의 눈의 이미지가 이미지 캡처 디바이스를 사용하여 캡처된다. 이미지 캡처 디바이스는 웨어러블 디바이스의 눈 지향 카메라일 수 있다.
[0110] 단계 1004에서, 눈 상자 내의 눈의 포지션이 눈의 이미지에 기초하여 결정된다.
[0111] 단계 1006에서, 복수의 보정 행렬들이 눈 상자 내의 눈의 포지션에 기초하여 검색된다. 예를 들어, 다수의 눈 포지션들에 대응하는 다수의 복수의 보정 행렬들은 도 9를 참조하여 설명된 바와 같이 메모리 디바이스에 저장될 수 있다. 결정된 눈 포지션에 가장 가까운 눈 포지션에 대응하는 복수의 보정 행렬들은 검색될 수 있다. 선택적으로, 단계 1006에서, 복수의 타겟 소스 전류들은 또한 눈 상자 내의 눈의 포지션에 기초하여 검색된다. 예를 들어, 다수의 눈 포지션들에 대응하는 타겟 소스 전류들의 다수의 세트들은 도 9를 참조하여 설명된 바와 같이 메모리 디바이스에 저장될 수 있다. 결정된 눈 포지션에 가장 가까운 눈 포지션에 대응하는 복수의 타겟 소스 전류들은 검색될 수 있다.
[0112] 단계 1008에서, 보정이 단계 1006에서 검색된 복수의 보정 행렬들을 사용하여 디스플레이될 비디오 시퀀스 및/또는 이미지들에 적용된다. 일부 실시예들에서, 보정은 비디오 시퀀스를 SLM에 전송하기 전에 비디오 시퀀스에 적용될 수 있다. 일부 실시예들에서, 보정은 SLM의 설정들에 적용될 수 있다. 다른 가능성들이 고려된다.
[0113] 단계 1010에서, 디스플레이와 연관된 복수의 소스 전류들은 단계 1006에서 검색된 복수의 타겟 소스 전류들로 설정된다.
[0114] 도 11은 본 명세서에서 설명되는 다양한 방법들을 사용하는 다수의 눈 포지션들에 대한 개선된 컬러 균일성의 예를 예시한다. 예시된 예에서, 컬러 균일성 보정 알고리즘들은 LED 조명된 LCOS SLM 회절 도파관 디스플레이 시스템에 적용되었다. 컬러 균일성의 개선을 보여주는 미보정 및 보정 이미지들이 도 11의 좌측 및 우측에 각각 도시되어 있다. 도 11은 재생 목적들을 위해 그레이스케일로 변환된 컬러 특징들을 포함한다.
[0115] 도 12는 본 개시내용의 일부 실시예들에 따른, 디스플레이 디바이스의 소스 전류들을 결정하고 설정하는 방법(1200)을 예시한다. 방법(1200)의 하나 이상의 단계들은 방법(1200)의 수행 동안 생략될 수 있고, 방법(1200)의 단계들은 도시된 순서로 수행될 필요가 없다. 방법(1200)의 하나 이상의 단계들은 하나 이상의 프로세서들에 의해 수행될 수 있다. 방법(1200)은, 프로그램이 하나 이상의 컴퓨터들에 의해 실행될 때, 하나 이상의 컴퓨터들로 하여금 방법(1200)의 단계들을 수행하게 하는 명령들을 포함하는 컴퓨터 판독 가능 매체 또는 컴퓨터 프로그램 제품으로서 구현될 수 있다. 방법(1200)의 단계들은 본 명세서에 설명된 다양한 다른 방법들의 하나 이상의 단계들을 포함할 수 있고/있거나 그들과 함께 사용될 수 있다.
[0116] 단계 1202에서, 디스플레이의 복수의 이미지들이 이미지 캡처 디바이스에 의해 캡처된다. 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응할 수 있다.
[0117] 단계 1204에서, 복수의 이미지들이 FoV에 걸쳐 평균된다.
[0118] 단계 1206에서, 디스플레이의 휘도 응답이 측정된다.
[0119] 단계 1208에서, 복수의 보정 행렬들이 출력된다. 일부 실시예들에서, 복수의 보정 행렬들은 컬러 보정 알고리즘에 의해 출력된다.
[0120] 단계 1210에서, 휘도 응답은 복수의 보정 행렬들을 사용하여 조정된다.
[0121] 단계 1212에서, 타겟 백색 포인트가 결정된다.
[0122] 단계 1214에서, 타겟 디스플레이 휘도가 결정된다.
[0123] 단계 1216에서, 요구되는 디스플레이 채널 휘도들이 타겟 백색 포인트 및 타겟 디스플레이 휘도에 기초하여 결정된다.
[0124] 단계 1218에서, 디스플레이의 온도가 결정된다.
[0125] 단계 1220에서, 휘도 응답, 요구되는 디스플레이 채널 휘도들 및/또는 온도에 기초하여 복수의 타겟 소스 전류들이 결정된다.
[0126] 단계 1222에서, 복수의 소스 전류들은 복수의 타겟 소스 전류들로 설정된다.
[0127] 도 13은 본 개시내용의 일부 실시예들에 따른, 위에 설명된 실시예들 중 하나 이상에서 사용될 수 있는 예시적인 웨어러블 시스템(1300)의 개략도를 예시한다. 웨어러블 시스템(1300)은 웨어러블 디바이스(1301) 및 웨어러블 디바이스(1301)로부터 원격인 적어도 하나의 원격 디바이스(1303)(예를 들어, 별개의 하드웨어이지만 통신가능하게 결합됨)를 포함할 수 있다. 웨어러블 디바이스(1301)가 사용자에 의해 (일반적으로 헤드셋으로서) 착용되는 동안, 원격 디바이스(1303)는 사용자에 의해 (예를 들어, 핸드헬드 제어기로서) 유지되거나, 프레임에 고정되게 부착되거나, 사용자에 의해 착용된 헬멧 또는 모자에 고정되게 부착되거나, 헤드폰들에 내장되거나, 다른 방식으로 (예를 들어, 백팩 스타일 구성, 벨트 결합 스타일 구성 등으로) 사용자에 제거가능하게 부착되는 것과 같은 다양한 구성들로 장착될 수 있다.
[0128] 웨어러블 디바이스(1301)는 나란한 구성으로 배열되고 좌측 광학 스택을 구성하는 좌측 아이피스(1302A) 및 좌측 렌즈 조립체(1305A)를 포함할 수 있다. 좌측 렌즈 조립체(1305A)는 좌측 광학 스택의 사용자 측 상의 수용 렌즈뿐만 아니라 좌측 광학 스택의 세계 측 상의 보상 렌즈를 포함할 수 있다. 유사하게, 웨어러블 디바이스(1301)는 나란한 구성으로 배열되고 우측 광학 스택을 구성하는 우측 아이피스(1302B) 및 우측 렌즈 조립체(1305B)를 포함할 수 있다. 우측 렌즈 조립체(1305B)는 우측 광학 스택의 사용자 측 상의 수용 렌즈뿐만 아니라 우측 광학 스택의 세계 측 상의 보상 렌즈를 포함할 수 있다.
[0129] 일부 실시예들에서, 웨어러블 디바이스(1301)는 좌측 아이피스(1302A)에 직접 또는 그 부근에 부착된 좌측 전방-지향 세계 카메라(1306A), 우측 아이피스(1302B)에 직접 또는 그 부근에 부착된 우측 전방-지향 세계 카메라(1306B), 좌측 아이피스(1302A)에 직접 또는 그 부근에 부착된 좌측 측면-지향 세계 카메라(1306C), 우측 아이피스(1302B)에 직접 또는 그 부근에 부착된 우측 측면-지향 세계 카메라(1306D), 좌측 눈을 향하는 좌측 눈 추적 카메라(1326A), 우측 눈을 향하는 우측 눈 추적 카메라(1326B), 및 아이피스들(1302) 사이에 부착된 깊이 센서(1328)를 포함하지만 이것으로 제한되지 않는 하나 이상의 센서를 포함한다. 웨어러블 디바이스(1301)는 좌측 아이피스(1302A)에 광학적으로 링크된 좌측 프로젝터(1314A) 및 우측 아이피스(1302B)에 광학적으로 링크된 우측 프로젝터(1314B)와 같은 하나 이상의 이미지 투영 디바이스를 포함할 수 있다.
[0130] 웨어러블 시스템(1300)은 시스템 내에서 데이터를 수집, 처리 및/또는 제어하기 위한 처리 모듈(1350)을 포함할 수 있다. 처리 모듈(1350)의 컴포넌트들은 웨어러블 디바이스(1301)와 원격 디바이스(1303) 사이에 분산될 수 있다. 예를 들어, 처리 모듈(1350)은 웨어러블 시스템(1300)의 웨어러블 부분 상의 국지적 처리 모듈(1352) 및 국지적 처리 모듈(1352)과 물리적으로 분리되고 그에 통신 가능하게 링크된 원격 처리 모듈(1356)을 포함할 수 있다. 국지적 처리 모듈(1352) 및 원격 처리 모듈(1356) 각각은 하나 이상의 처리 유닛(예로서, 중앙 처리 유닛(CPU)들, 그래픽 처리 유닛(GPU)들 등) 및 하나 이상의 저장 디바이스, 예로서 비휘발성 메모리(예로서, 플래시 메모리)를 포함할 수 있다.
[0131] 처리 모듈(1350)은 카메라들(1306), 눈 추적 카메라들(1326), 깊이 센서(1328), 원격 센서들(1330), 주변 광 센서들, 마이크로폰들, 관성 측정 유닛(IMU)들, 가속도계들, 나침반들, 전역적 내비게이션 위성 시스템(GNSS) 유닛들, 라디오 디바이스들, 및/또는 자이로스코프들과 같은 웨어러블 시스템(1300)의 다양한 센서들에 의해 캡처된 데이터를 수집할 수 있다. 예를 들어, 처리 모듈(1350)은 카메라들(1306)로부터 이미지(들)(1320)를 수신할 수 있다. 구체적으로, 처리 모듈(1350)은 좌측 전방-지향 세계 카메라(1306A)로부터 좌측 전방 이미지(들)(1320A)를, 우측 전방-지향 세계 카메라(1306B)로부터 우측 전방 이미지(들)(1320B)를, 좌측 측면-지향 세계 카메라(1306C)로부터 좌측 측면 이미지(들)(1320C)를, 그리고 우측 측면-지향 세계 카메라(1306D)로부터 우측 측면 이미지(들)(1320D)를 수신할 수 있다. 일부 실시예들에서, 이미지(들)(1320)는 단일 이미지, 이미지들의 쌍, 이미지들의 스트림을 포함하는 비디오, 짝을 이룬 이미지들의 스트림을 포함하는 비디오 등을 포함할 수 있다. 이미지(들)(1320)는 웨어러블 시스템(1300)이 파워 온되어 있는 동안 주기적으로 생성되어 처리 모듈(1350)에 전송될 수 있거나, 처리 모듈(1350)에 의해 카메라들 중 하나 이상에 전송된 명령에 응답하여 생성될 수 있다.
[0132] 카메라들(1306)은 사용자의 주변의 이미지들을 캡처하기 위해 웨어러블 디바이스(1301)의 외부 표면을 따라 다양한 포지션들 및 배향들로 구성될 수 있다. 일부 경우들에서, 카메라들(1306A, 1306B)은 각각 사용자의 좌안 및 우안의 FOV들과 실질적으로 중첩하는 이미지들을 캡처하도록 포지셔닝될 수 있다. 따라서, 카메라들(1306)의 배치는 사용자의 눈들 근처에 있지만 사용자의 FOV를 가릴 정도로 가깝지는 않을 수 있다. 대안적으로 또는 부가적으로, 카메라들(1306A, 1306B)은 각각 가상 이미지 광(1322A, 1322B)의 인커플링 로케이션들과 정렬하도록 포지셔닝될 수 있다. 카메라들(1306C, 1306D)은 사용자의 측면에 대해, 예를 들어 사용자의 주변 시야 내에서 또는 사용자의 주변 시야 밖에서 이미지들을 캡처하도록 포지셔닝될 수 있다. 카메라들(1306C, 1306D)을 사용하여 캡처된 이미지(들)(1320C, 1320D)는 카메라들(1306A, 1306B)을 사용하여 캡처된 이미지(들)(1320A, 1320B)와 반드시 중첩될 필요는 없다.
[0133] 일부 실시예들에서, 처리 모듈(1350)은 주변 광 센서로부터 주변 광 정보를 수신할 수 있다. 주변 광 정보는 밝기 값 또는 공간적으로 분해된 밝기 값들의 범위를 나타낼 수 있다. 깊이 센서(1328)는 웨어러블 디바이스(1301)의 정면 방향으로 깊이 이미지(1332)를 캡처할 수 있다. 깊이 이미지(1332)의 각각의 값은 특정 방향으로의 깊이 센서(1328)와 가장 가까운 검출된 물체 사이의 거리에 대응할 수 있다. 다른 예로서, 처리 모듈(1350)은 좌안 및 우안의 이미지들을 포함할 수 있는 눈 추적 카메라들(1326)로부터의 눈 추적 데이터(1334)를 수신할 수 있다. 또 다른 예로서, 처리 모듈(1350)은 프로젝터들(1314) 중 하나 또는 둘 다로부터 투영된 이미지 밝기 값들을 수신할 수 있다. 원격 디바이스(1303) 내에 로케이팅된 원격 센서들(1330)은 유사한 기능을 갖는 전술된 센서들 중 임의의 것을 포함할 수 있다.
[0134] 광학 스택들 내의 다른 컴포넌트들과 함께 프로젝터들(1314) 및 아이피스들(1302)를 사용하여 가상 콘텐츠가 웨어러블 시스템(1300)의 사용자에게 전달된다. 예를 들어, 아이피스들(1302A, 1302B)은 각각 프로젝터들(1314A, 1314B)에 의해 생성된 광을 지향시키고 아웃커플링하도록 구성된 투명 또는 반투명 도파관들을 포함할 수 있다. 구체적으로, 처리 모듈(1350)은 좌측 프로젝터(1314A)가 좌측 가상 이미지 광(1322A)을 좌측 아이피스(1302A) 상으로 출력하게 할 수 있고, 우측 프로젝터(1314B)가 우측 가상 이미지 광(1322B)을 우측 아이피스(1302B) 상으로 출력하게 할 수 있다. 일부 실시예들에서, 프로젝터들(1314)은 마이크로-전자기계 시스템(MEMS) SLM 스캐닝 디바이스들을 포함할 수 있다. 일부 실시예들에서, 아이피스들(1302A, 1302B) 각각은 상이한 컬러들에 대응하는 복수의 도파관들을 포함할 수 있다. 일부 실시예들에서, 렌즈 조립체들(1305A, 1305B)은 아이피스들(1302A, 1302B)에 결합 및/또는 통합될 수 있다. 예를 들어, 렌즈 조립체들(1305A, 1305B)은 다층 아이피스에 통합될 수 있고, 아이피스들(1302A, 1302B) 중 하나를 구성하는 하나 이상의 층들을 형성할 수 있다.
[0135] 도 14는 본 개시내용의 일부 실시예들에 따른 간략화된 컴퓨터 시스템을 예시한다. 도 14에 예시된 바와 같은 컴퓨터 시스템(1400)은 본 명세서에 설명된 디바이스들에 포함될 수 있다. 도 14는 다양한 실시예들에 의해 제공되는 방법들의 단계들의 일부 또는 전부를 수행할 수 있는 컴퓨터 시스템(1400)의 일 실시예의 개략적인 예시를 제공한다. 도 14는 다양한 컴포넌트들의 일반화된 예시를 제공하는 것을 의도할 뿐이며, 그들 중 임의의 것 또는 전부는 적절히 이용될 수 있다는 점에 유의해야 한다. 따라서, 도 14는 개별 시스템 요소들이 어떻게 비교적 분리되거나 비교적 더 통합된 방식으로 구현될 수 있는지를 광범위하게 예시한다.
[0136] 컴퓨터 시스템(1400)은 버스(1405)를 통해 전기적으로 결합될 수 있거나, 적절한 경우에 다른 방식으로 통신할 수 있는 하드웨어 요소들을 포함하는 것으로 도시된다. 하드웨어 요소들은 하나 이상의 범용 프로세서 및/또는 디지털 신호 처리 칩들, 그래픽 가속 프로세서들 등과 같은 하나 이상의 특수 목적 프로세서를 포함하지만 이에 한정되지 않는 하나 이상의 프로세서(1410); 마우스, 키보드, 카메라 등을 포함하지만 이에 한정되지 않는 하나 이상의 입력 디바이스(1415); 및 디스플레이 디바이스, 프린터 등을 포함하지만 이에 한정되지 않는 하나 이상의 출력 디바이스(1420)를 포함할 수 있다.
[0137] 컴퓨터 시스템(1400)은, 제한 없이, 국지적 및/또는 네트워크 액세스가능 저장소를 포함할 수 있고/있거나, 제한 없이, 디스크 드라이브, 드라이브 어레이, 광학 저장 디바이스, 프로그래밍 가능하고, 플래시 업데이트 가능하고/하거나 기타 등등일 수 있는 랜덤 액세스 메모리("RAM") 및/또는 판독 전용 메모리("ROM")와 같은 솔리드 스테이트 저장 디바이스를 포함할 수 있는, 하나 이상의 비일시적 저장 디바이스(1425)를 추가로 포함할 수 있고/있거나 그들과 통신할 수 있다. 이러한 저장 디바이스들은, 제한 없이, 다양한 파일 시스템들, 데이터베이스 구조들 등을 포함하는 임의의 적절한 데이터 저장소들을 구현하도록 구성될 수 있다.
[0138] 컴퓨터 시스템(1400)은 또한 모뎀, 네트워크 카드(무선 또는 유선), 적외선 통신 디바이스, 무선 통신 디바이스, 및/또는 칩셋, 예컨대 Bluetooth® 디바이스, 802.11 디바이스, WiFi 디바이스, WiMax 디바이스, 셀룰러 통신 시설 등을 포함할 수 있지만 이들로 제한되지 않는 통신 서브시스템(1419)을 포함할 수 있다. 통신 서브시스템(1419)은 하나의 예시적인, 다른 컴퓨터 시스템들, 텔레비전, 및/또는 본 명세서에 설명된 임의의 다른 디바이스들을 명명하기 위해 데이터가 이하에 설명되는 네트워크와 같은 네트워크와 교환될 수 있게 해주는 하나 이상의 입력 및/또는 출력 통신 인터페이스를 포함할 수 있다. 원하는 기능 및/또는 다른 구현 관심사들에 따라, 휴대용 전자 디바이스 또는 유사한 디바이스는 통신 서브시스템(1419)을 통해 이미지 및/또는 다른 정보를 통신할 수 있다. 다른 실시예들에서, 휴대용 전자 디바이스, 예를 들어 제1 전자 디바이스는 컴퓨터 시스템(1400), 예를 들어 전자 디바이스에 입력 디바이스(1415)로서 포함될 수 있다. 일부 실시예들에서, 컴퓨터 시스템(1400)은 전술한 바와 같이 RAM 또는 ROM 디바이스를 포함할 수 있는 작업 메모리(1435)를 추가로 포함할 것이다.
[0139] 컴퓨터 시스템(1400)은 또한 운영 체제(1440), 디바이스 드라이버들, 실행 가능 라이브러리들, 및/또는 하나 이상의 애플리케이션 프로그램들(1445)과 같은 다른 코드를 포함하는, 작업 메모리(1435) 내에 현재 로케이팅된 것으로 도시된 소프트웨어 요소들을 포함할 수 있으며, 하나 이상의 애플리케이션 프로그램들은 다양한 실시예들에 의해 제공되는 컴퓨터 프로그램들을 포함할 수 있고/있거나, 본 명세서에 설명된 바와 같이, 다른 실시예들에 의해 제공되는 방법들을 구현하고/하거나 시스템들을 구성하도록 설계될 수 있다. 단지 예로서, 위에 논의된 방법들과 관련하여 설명된 하나 이상의 절차들은 컴퓨터 및/또는 컴퓨터 내의 프로세서에 의해 실행 가능한 코드 및/또는 명령들로서 구현될 수 있고; 일 양태에서, 그러한 코드 및/또는 명령들은 설명된 방법들에 따라 하나 이상의 동작들을 수행하도록 범용 컴퓨터 또는 다른 디바이스를 구성 및/또는 적응시키는 데 사용될 수 있다.
[0140] 이러한 명령들 및/또는 코드의 세트는 전술한 저장 디바이스(들)(1425)와 같은 비일시적 컴퓨터 판독가능 저장 매체 상에 저장될 수 있다. 일부 예들에서, 저장 매체는 컴퓨터 시스템(1400)과 같은 컴퓨터 시스템 내에 포함될 수 있다. 다른 실시예들에서, 저장 매체는 예를 들어 컴팩트 디스크와 같은 이동식 매체와 같이 컴퓨터 시스템과 분리될 수 있고/있거나, 설치 패키지 내에 제공될 수 있으며, 따라서 저장 매체는 명령들/코드가 저장된 범용 컴퓨터를 프로그래밍, 구성 및/또는 적응시키는 데 사용될 수 있다. 이러한 명령들은 컴퓨터 시스템(1400)에 의해 실행될 수 있는 실행 가능 코드의 형태를 취할 수 있고/있거나, 예를 들어 다양한 일반적으로 이용 가능한 컴파일러들, 설치 프로그램들, 압축/압축해제 유틸리티들 등 중 임의의 것을 사용하여 컴퓨터 시스템(1400) 상에 컴파일 및/또는 설치될 때 실행 가능 코드의 형태를 취하는 소스 및 설치가능 코드의 형태를 취할 수 있다.
[0141] 특정 요건들에 따라 실질적인 변경들이 이루어질 수 있다는 것이 이 분야의 기술자들에게 명백할 것이다. 예를 들어, 맞춤화된 하드웨어가 또한 사용될 수 있고/있거나, 특정 요소들이 하드웨어, 애플릿들 등과 같은 휴대용 소프트웨어를 포함하는 소프트웨어, 또는 둘 다로 구현될 수 있다. 또한, 네트워크 입력/출력 디바이스들과 같은 다른 컴퓨팅 디바이스들에 대한 접속이 이용될 수 있다.
[0142] 전술한 바와 같이, 일 양태에서, 일부 실시예들은 기술의 다양한 실시예들에 따른 방법들을 수행하기 위해 컴퓨터 시스템(1400)과 같은 컴퓨터 시스템을 이용할 수 있다. 한 세트의 실시예들에 따르면, 그러한 방법들의 절차들 중 일부 또는 전부는 프로세서(1410)가 운영 체제(1440) 및/또는 작업 메모리(1435)에 포함된 애플리케이션 프로그램(1445)과 같은 다른 코드에 통합될 수 있는 하나 이상의 명령의 하나 이상의 시퀀스를 실행하는 것에 응답하여 컴퓨터 시스템(1400)에 의해 수행된다. 그러한 명령들은 저장 디바이스(들)(1425) 중 하나 이상과 같은 다른 컴퓨터 판독가능 매체로부터 작업 메모리(1435) 내로 판독될 수 있다. 단지 예로서, 작업 메모리(1435)에 포함된 명령들의 시퀀스들의 실행은 프로세서(들)(1410)로 하여금 본 명세서에 설명된 방법들의 하나 이상의 절차를 수행하게 할 수 있다. 부가적으로 또는 대안적으로, 본 명세서에 설명된 방법들의 부분들은 특수 하드웨어를 통해 실행될 수 있다.
[0143] "머신 판독가능 매체" 및 "컴퓨터 판독가능 매체"라는 용어는, 본 명세서에서 사용되는 바와 같이, 머신으로 하여금 특정 방식으로 동작하게 하는 데이터를 제공하는 데 참여하는 임의의 매체를 지칭한다. 컴퓨터 시스템(1400)을 사용하여 구현되는 실시예에서, 다양한 컴퓨터 판독가능 매체들은 실행을 위해 프로세서(들)(1410)에 명령들/코드를 제공하는 데 관여될 수 있고/있거나, 이러한 명령들/코드를 저장 및/또는 운반하는 데 사용될 수 있다. 많은 구현들에서, 컴퓨터 판독가능 매체는 물리적 및/또는 유형적 저장 매체이다. 이러한 매체는 비휘발성 매체들 또는 휘발성 매체들의 형태를 취할 수 있다. 비휘발성 매체들은 예를 들어 저장 디바이스(들)(1425)와 같은 광학 및/또는 자기 디스크들을 포함한다. 휘발성 매체들은 작업 메모리(1435)와 같은 동적 메모리를 포함하지만 이에 한정되지 않는다.
[0144] 물리적 및/또는 유형적 컴퓨터 판독가능 매체들의 일반적인 형태들은 예를 들어 플로피 디스크, 플렉시블 디스크, 하드 디스크, 자기 테이프 또는 임의의 다른 자기 매체, CD-ROM, 임의의 다른 광학 매체, 펀치카드들, 종이 테이프, 구멍들의 패턴들을 갖는 임의의 다른 물리적 매체, RAM, PROM, EPROM, 플래시-EPROM, 임의의 다른 메모리 칩 또는 카트리지, 또는 컴퓨터가 명령들 및/또는 코드를 판독할 수 있는 임의의 다른 매체를 포함한다.
[0145] 다양한 형태의 컴퓨터 판독가능 매체들이 실행을 위해 하나 이상의 명령의 하나 이상의 시퀀스를 프로세서(들)(1410)로 운반하는 데 관련될 수 있다. 단지 예로서, 명령들은 처음에 원격 컴퓨터의 자기 디스크 및/또는 광학 디스크 상에서 운반될 수 있다. 원격 컴퓨터는 명령들을 그의 동적 메모리에 로드하고 명령들을 컴퓨터 시스템(1400)에 의해 수신 및/또는 실행되도록 전송 매체를 통해 신호들로서 전송할 수 있다.
[0146] 통신 서브시스템(1419) 및/또는 그의 컴포넌트들은 일반적으로 신호들을 수신할 것이고, 이어서 버스(1405)는 신호들 및/또는 신호들에 의해 운반되는 데이터, 명령들 등을 작업 메모리(1435)로 운반할 수 있으며, 작업 메모리(1435)로부터 프로세서(들)(1410)는 명령들을 검색하고 실행한다. 작업 메모리(1435)에 의해 수신된 명령들은 선택적으로, 프로세서(들)(1410)에 의한 실행 전에 또는 후에 비일시적 저장 디바이스(1425) 상에 저장될 수 있다.
[0147] 앞서 논의된 방법들, 시스템들 및 디바이스들은 예들이다. 다양한 구성들은 적절한 경우에 다양한 절차들 또는 컴포넌트들을 생략, 대체 또는 추가할 수 있다. 예를 들어, 대안적인 구성들에서, 방법들이 설명된 것과 상이한 순서로 수행될 수 있고/있거나, 다양한 스테이지들이 추가, 생략 및/또는 조합될 수 있다. 또한, 특정 구성들과 관련하여 설명된 특징들이 다양한 다른 구성들에서 조합될 수 있다. 구성들의 상이한 양태들 및 요소들이 유사한 방식으로 조합될 수 있다. 또한, 기술이 발전하고, 따라서 요소들 중 다수는 예들이고 본 개시내용 또는 청구항들의 범위를 제한하지 않는다.
[0148] 구현들을 포함하는 예시적인 구성들의 철저한 이해를 제공하기 위해 설명에서 특정 세부사항들이 주어진다. 그러나, 구성들은 이러한 특정 세부사항들 없이 실시될 수 있다. 예를 들어, 잘 알려진 회로들, 프로세스들, 알고리즘들, 구조들, 및 기술들은 구성들을 모호하게 하는 것을 피하기 위해 불필요한 상세 없이 도시되었다. 본 설명은 예시적인 구성들만을 제공하고, 청구항들의 범위, 적용가능성, 또는 구성들을 제한하지 않는다. 오히려, 구성들의 이전 설명은 설명된 기술들을 구현하기 위한 가능한 설명을 이 분야의 기술자들에게 제공할 것이다. 본 개시내용의 사상 또는 범위로부터 벗어나지 않고 요소들의 기능 및 배열에서 다양한 변경들이 이루어질 수 있다.
[0149] 또한, 구성들은 개략적인 흐름도 또는 블록도로서 묘사되는 프로세스로서 설명될 수 있다. 각각이 동작들을 순차적인 프로세스로서 설명할 수 있지만, 동작들 중 다수는 병렬로 또는 동시에 수행될 수 있다. 또한, 동작들의 순서는 재배열될 수 있다. 프로세스는 도면에 포함되지 않은 추가적인 단계들을 가질 수 있다. 또한, 방법들의 예들은 하드웨어, 소프트웨어, 펌웨어, 미들웨어, 마이크로코드, 하드웨어 기술 언어들, 또는 이들의 임의의 조합에 의해 구현될 수 있다. 소프트웨어, 펌웨어, 미들웨어, 또는 마이크로코드로 구현될 때, 필요한 작업들을 수행하기 위한 프로그램 코드 또는 코드 세그먼트들은 저장 매체와 같은 비일시적 컴퓨터 판독가능 매체에 저장될 수 있다. 프로세서들은 설명된 작업들을 수행할 수 있다.
[0150] 몇몇 예시적인 구성들을 설명하였으며, 다양한 수정들, 대안적인 구성들, 및 균등물들이 본 개시내용의 사상으로부터 벗어나지 않고 사용될 수 있다. 예를 들어, 전술한 요소들은 더 큰 시스템의 컴포넌트들일 수 있고, 여기서는 다른 규칙들이 기술의 적용에 우선하거나 그렇지 않으면 이를 수정할 수 있다. 또한, 다수의 단계들은 전술한 요소들이 고려되기 전에, 고려되는 동안에 또는 고려된 후에 착수될 수 있다. 따라서, 위의 설명은 청구항들의 범위를 한정하지 않는다.
[0151] 본 명세서 및 첨부된 청구항들에서 사용되는 바와 같이, 단수 형태들("a", "an", 및 "the")은 문맥이 명백하게 달리 지시하지 않는 한 복수의 참조들을 포함한다. 따라서, 예를 들어, "사용자"에 대한 참조는 복수의 이러한 사용자들을 포함하고, "프로세서"에 대한 참조는 이 분야의 기술자들에게 공지된 하나 이상의 프로세서들 및 그 균등물들에 대한 참조를 포함하고, 기타 등등이다.
[0152] 또한, "포함한다(comprise)", "포함하는(comprising)", "함유한다(contains)", "함유하는(containing)", "구비한다(include)", "구비하는(including)", 및 "구비한다(includes)"라는 단어들은, 본 명세서 및 이하의 청구항들에서 사용될 때, 언급된 특징들, 정수들, 컴포넌트들, 또는 단계들의 존재를 특정하도록 의도되지만, 이들은 하나 이상의 다른 특징들, 정수들, 컴포넌트들, 단계들, 액트들, 또는 그룹들의 존재 또는 추가를 배제하지 않는다.
[0153] 또한, 본 명세서에 설명된 예들 및 실시예들은 단지 예시적인 목적들을 위한 것이며, 이에 비추어 다양한 수정들 또는 변경들이 이 분야의 기술자들에게 시사될 것이며, 본 출원의 사상 및 범위 및 첨부된 청구항들의 범위 내에 포함되어야 한다는 것이 이해된다.

Claims (20)

  1. 디스플레이의 컬러 균일성을 개선하는 방법으로서,
    이미지 캡처 디바이스를 사용하여 디스플레이 디바이스의 상기 디스플레이의 복수의 이미지들을 캡처하는 단계 ― 상기 복수의 이미지들은 컬러 공간에서 캡처되고, 상기 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―;
    각각이 상기 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하기 위해 상기 복수의 이미지들에 대해 전역적 백색 밸런스(global white balance)를 수행하는 단계; 및
    각각이 상기 복수의 컬러 채널들 중 하나에 대응하는 복수의 보정 행렬들을 획득하기 위해 상기 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하는 단계를 포함하고,
    상기 국지적 백색 밸런스를 수행하는 단계는:
    성능 지수에 기초하여 가중 인자들의 세트를 정의하는 단계;
    상기 복수의 정규화된 이미지들 및 상기 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 단계; 및
    상기 복수의 가중된 이미지들에 기초하여 상기 복수의 보정 행렬들을 계산하는 단계를 포함하는, 방법.
  2. 제1항에 있어서,
    상기 복수의 보정 행렬들을 상기 디스플레이 디바이스에 적용하는 단계를 더 포함하는, 방법.
  3. 제1항에 있어서,
    상기 성능 지수는:
    전력 소비;
    컬러 에러; 또는
    최소 비트 깊이
    중 적어도 하나인, 방법.
  4. 제1항에 있어서,
    상기 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 단계는:
    상기 가중 인자들의 세트를 변경함으로써 상기 성능 지수를 최소화하는 단계; 및
    상기 성능 지수가 최소화되는 상기 가중 인자들의 세트를 결정하는 단계를 포함하는, 방법.
  5. 제1항에 있어서,
    상기 컬러 공간은:
    CIELUV 컬러 공간;
    CIEXYZ 컬러 공간; 또는
    sRGB 컬러 공간
    중 하나인, 방법.
  6. 제1항에 있어서,
    상기 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하는 단계는:
    타겟 백색 포인트에 기초하여 상기 컬러 공간에서 타겟 조도 값들을 결정하는 단계를 포함하고,
    상기 복수의 정규화된 이미지들은 상기 타겟 조도 값들에 기초하여 계산되는, 방법.
  7. 제6항에 있어서,
    상기 복수의 보정 행렬들은 상기 타겟 조도 값들에 더 기초하여 계산되는, 방법.
  8. 제1항에 있어서,
    상기 디스플레이는 회절 도파관 디스플레이인, 방법.
  9. 하나 이상의 프로세서들에 의해 실행될 때 상기 하나 이상의 프로세서들로 하여금 동작들을 수행하게 하는 명령들을 포함하는 비일시적 컴퓨터 판독가능 매체로서,
    상기 동작들은:
    이미지 캡처 디바이스를 사용하여 디스플레이 디바이스의 디스플레이의 복수의 이미지들을 캡처하는 동작 ― 상기 복수의 이미지들은 컬러 공간에서 캡처되고, 상기 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―;
    각각이 상기 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하기 위해 상기 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하는 동작; 및
    각각이 상기 복수의 컬러 채널들 중 하나에 대응하는 복수의 보정 행렬들을 획득하기 위해 상기 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하는 동작을 포함하고,
    상기 국지적 백색 밸런스를 수행하는 동작은:
    성능 지수에 기초하여 가중 인자들의 세트를 정의하는 동작;
    상기 복수의 정규화된 이미지들 및 상기 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 동작; 및
    상기 복수의 가중된 이미지들에 기초하여 상기 복수의 보정 행렬들을 계산하는 동작을 포함하는, 비일시적 컴퓨터 판독가능 매체.
  10. 제9항에 있어서,
    상기 동작들은:
    상기 복수의 보정 행렬들을 상기 디스플레이 디바이스에 적용하는 동작을 더 포함하는, 비일시적 컴퓨터 판독가능 매체.
  11. 제9항에 있어서,
    상기 성능 지수는:
    전력 소비;
    컬러 에러; 또는
    최소 비트 깊이
    중 적어도 하나인, 비일시적 컴퓨터 판독가능 매체.
  12. 제9항에 있어서,
    상기 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 동작은:
    상기 가중 인자들의 세트를 변경함으로써 상기 성능 지수를 최소화하는 동작; 및
    상기 성능 지수가 최소화되는 상기 가중 인자들의 세트를 결정하는 동작을 포함하는, 비일시적 컴퓨터 판독가능 매체.
  13. 제9항에 있어서,
    상기 컬러 공간은:
    CIELUV 컬러 공간;
    CIEXYZ 컬러 공간; 또는
    sRGB 컬러 공간
    중 하나인, 비일시적 컴퓨터 판독가능 매체.
  14. 제9항에 있어서,
    상기 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하는 동작은:
    타겟 백색 포인트에 기초하여 상기 컬러 공간에서 타겟 조도 값들을 결정하는 동작을 포함하고,
    상기 복수의 정규화된 이미지들은 상기 타겟 조도 값들에 기초하여 계산되는, 비일시적 컴퓨터 판독가능 매체.
  15. 제14항에 있어서,
    상기 복수의 보정 행렬들은 상기 타겟 조도 값들에 더 기초하여 계산되는, 비일시적 컴퓨터 판독가능 매체.
  16. 제9항에 있어서,
    상기 디스플레이는 회절 도파관 디스플레이인, 비일시적 컴퓨터 판독가능 매체.
  17. 시스템으로서,
    하나 이상의 프로세서들; 및
    상기 하나 이상의 프로세서들에 의해 실행될 때 상기 하나 이상의 프로세서들로 하여금 동작들을 수행하게 하는 명령들을 포함하는 비일시적 컴퓨터 판독가능 매체를 포함하고,
    상기 동작들은:
    이미지 캡처 디바이스를 사용하여 디스플레이 디바이스의 디스플레이의 복수의 이미지들을 캡처하는 동작 ― 상기 복수의 이미지들은 컬러 공간에서 캡처되고, 상기 복수의 이미지들 각각은 복수의 컬러 채널들 중 하나에 대응함 ―;
    각각이 상기 복수의 컬러 채널들 중 하나에 대응하는 복수의 정규화된 이미지들을 획득하기 위해 상기 복수의 이미지들에 대해 전역적 백색 밸런스를 수행하는 동작; 및
    각각이 상기 복수의 컬러 채널들 중 하나에 대응하는 복수의 보정 행렬들을 획득하기 위해 상기 복수의 정규화된 이미지들에 대해 국지적 백색 밸런스를 수행하는 동작을 포함하고,
    상기 국지적 백색 밸런스를 수행하는 동작은:
    성능 지수에 기초하여 가중 인자들의 세트를 정의하는 동작;
    상기 복수의 정규화된 이미지들 및 상기 가중 인자들의 세트에 기초하여 복수의 가중된 이미지들을 계산하는 동작; 및
    상기 복수의 가중된 이미지들에 기초하여 상기 복수의 보정 행렬들을 계산하는 동작을 포함하는, 시스템.
  18. 제17항에 있어서,
    상기 동작들은:
    상기 복수의 보정 행렬들을 상기 디스플레이 디바이스에 적용하는 동작을 더 포함하는, 시스템.
  19. 제17항에 있어서,
    상기 성능 지수는:
    전력 소비;
    컬러 에러; 또는
    최소 비트 깊이
    중 적어도 하나인, 시스템.
  20. 제17항에 있어서,
    상기 성능 지수에 기초하여 가중 인자들의 세트를 정의하는 동작은:
    상기 가중 인자들의 세트를 변경함으로써 상기 성능 지수를 최소화하는 동작; 및
    상기 성능 지수가 최소화되는 상기 가중 인자들의 세트를 결정하는 동작을 포함하는, 시스템.
KR1020237002543A 2020-06-26 2021-06-25 디스플레이 디바이스의 컬러 균일성 보정 KR20230027265A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202063044995P 2020-06-26 2020-06-26
US63/044,995 2020-06-26
PCT/US2021/039233 WO2021263196A1 (en) 2020-06-26 2021-06-25 Color uniformity correction of display device

Publications (1)

Publication Number Publication Date
KR20230027265A true KR20230027265A (ko) 2023-02-27

Family

ID=79031265

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020237002543A KR20230027265A (ko) 2020-06-26 2021-06-25 디스플레이 디바이스의 컬러 균일성 보정

Country Status (7)

Country Link
US (1) US11942013B2 (ko)
EP (1) EP4172980A4 (ko)
JP (1) JP2023531492A (ko)
KR (1) KR20230027265A (ko)
CN (1) CN115867962A (ko)
IL (1) IL299315A (ko)
WO (1) WO2021263196A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11817065B2 (en) * 2021-05-19 2023-11-14 Apple Inc. Methods for color or luminance compensation based on view location in foldable displays
CN117575954A (zh) * 2022-08-04 2024-02-20 浙江宇视科技有限公司 一种颜色校正矩阵优化方法、装置、电子设备及介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6995791B2 (en) * 2002-04-02 2006-02-07 Freescale Semiconductor, Inc. Automatic white balance for digital imaging
US20090147098A1 (en) * 2007-12-10 2009-06-11 Omnivision Technologies, Inc. Image sensor apparatus and method for color correction with an illuminant-dependent color correction matrix
US9036047B2 (en) * 2013-03-12 2015-05-19 Intel Corporation Apparatus and techniques for image processing
US9686448B2 (en) * 2015-06-22 2017-06-20 Apple Inc. Adaptive black-level restoration
US10378882B2 (en) * 2015-11-04 2019-08-13 Magic Leap, Inc. Light field display metrology
US20170171523A1 (en) * 2015-12-10 2017-06-15 Motorola Mobility Llc Assisted Auto White Balance
US11270377B1 (en) * 2016-04-01 2022-03-08 Chicago Mercantile Exchange Inc. Compression of an exchange traded derivative portfolio
US10129485B2 (en) * 2016-06-10 2018-11-13 Microsoft Technology Licensing, Llc Methods and systems for generating high dynamic range images
US10542243B2 (en) * 2018-04-10 2020-01-21 Intel Corporation Method and system of light source estimation for image processing

Also Published As

Publication number Publication date
IL299315A (en) 2023-02-01
US11942013B2 (en) 2024-03-26
WO2021263196A1 (en) 2021-12-30
CN115867962A (zh) 2023-03-28
US20210407365A1 (en) 2021-12-30
JP2023531492A (ja) 2023-07-24
EP4172980A1 (en) 2023-05-03
EP4172980A4 (en) 2023-12-20

Similar Documents

Publication Publication Date Title
EP3831053B1 (en) Method and system for subgrid calibration of a display device
US9513169B2 (en) Display calibration system and storage medium
CN102376294B (zh) 多显示器系统
US11494960B2 (en) Display that uses a light sensor to generate environmentally matched artificial reality content
CN112437872B (zh) 用于成像设备的颜色校准的方法和系统
KR20230027265A (ko) 디스플레이 디바이스의 컬러 균일성 보정
CN112534225B (zh) 光学显示器的led热特性表征和校准
US20120268437A1 (en) Image display device and color correction method used by the same
JP2023500026A (ja) 瞳孔サイズに基づく画像調整のためのシステムおよび方法
WO2005002239A1 (ja) 画像表示装置における補正データ取得方法およびキャリブレーションシステム
CN111095389A (zh) 显示系统和显示校正方法
JP2021101204A (ja) 制御装置の動作方法、プロジェクターの制御方法およびプロジェクター
US10360829B2 (en) Head-mounted display and chroma aberration compensation method using sub-pixel shifting
JP2011150111A (ja) 画像処理装置、画像表示システム及び画像処理方法
US9554102B2 (en) Processing digital images to be projected on a screen
US20240119574A1 (en) Method of adjusting displayed image and display system
JP5857453B2 (ja) 画像処理装置、画像表示システム、画像表示装置、画像処理装置の制御方法、プログラム及び記録媒体
JP2011150110A (ja) 画像処理装置、画像表示システム、画像処理方法及びむら補正値生成方法