RU2772236C2 - Rendering images with wide colour palette, displaying two-dimensional images on displays capable of displaying three-dimensional images - Google Patents

Rendering images with wide colour palette, displaying two-dimensional images on displays capable of displaying three-dimensional images Download PDF

Info

Publication number
RU2772236C2
RU2772236C2 RU2020128579A RU2020128579A RU2772236C2 RU 2772236 C2 RU2772236 C2 RU 2772236C2 RU 2020128579 A RU2020128579 A RU 2020128579A RU 2020128579 A RU2020128579 A RU 2020128579A RU 2772236 C2 RU2772236 C2 RU 2772236C2
Authority
RU
Russia
Prior art keywords
intensity values
palette
intensity
virtual
values
Prior art date
Application number
RU2020128579A
Other languages
Russian (ru)
Other versions
RU2020128579A (en
RU2020128579A3 (en
Inventor
Эшли Николь ПЕННА
Тревор ДЭЙВИС
Мартин Дж. РИЧАРДЗ
Original Assignee
Долби Лэборетериз Лайсенсинг Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Долби Лэборетериз Лайсенсинг Корпорейшн filed Critical Долби Лэборетериз Лайсенсинг Корпорейшн
Priority claimed from PCT/US2019/065330 external-priority patent/WO2020139546A1/en
Publication of RU2020128579A publication Critical patent/RU2020128579A/en
Publication of RU2020128579A3 publication Critical patent/RU2020128579A3/ru
Application granted granted Critical
Publication of RU2772236C2 publication Critical patent/RU2772236C2/en

Links

Images

Abstract

FIELD: physics.
SUBSTANCE: invention relates to computer engineering. Display system with two heads comprises first and second projection heads; spatial modulator; electronic processor configured to: receive two-dimensional video data; generate, from video data, first and second sets of intensity values of virtual primary colours of the first virtual colour palette; convert first and second sets of intensity values into third and fourth sets of intensity values of predetermined primary colours of the first projection head, respectively, and dynamically adjust pixel levels of at least one spatial modulator of the first and second projection heads based on the third plurality of intensity values and the fourth plurality of intensity values; wherein the threshold brightness value is a vector of threshold values and wherein each threshold value is determined based on conversion of the first virtual colour palette to a predetermined colour palette.
EFFECT: improved rendering of two two-dimensional images on three-dimensional 6P- projectors and display systems.
12 cl, 14 dwg

Description

Уровень техникиState of the art

Область техники, к которой относится изобретениеThe field of technology to which the invention belongs

Данная заявка, в общем, относится к рендерингу изображений с широкой цветовой палитрой.This application generally relates to rendering images with a wide color gamut.

Описание уровня техникиDescription of the prior art

Дисплеи, допускающие отображение трехмерных изображений, могут отображать изображение для левого глаза и изображение для правого глаза с использованием двух отдельных наборов первичных цветов (6P), которые, при просмотре вместе, создают внешний вид трехмерного изображения. Такие дисплеи также могут использоваться для того, чтобы отображать двумерные изображения.Displays capable of displaying 3D images can display a left-eye image and a right-eye image using two separate sets of primary colors (6P) that, when viewed together, produce the appearance of a 3D image. Such displays can also be used to display two-dimensional images.

Сущность изобретенияThe essence of the invention

Различные аспекты настоящего раскрытия сущности относятся к системам и способам для улучшенного рендеринга двух двумерных изображений на трехмерных 6P-проекторах и системах отображения (в частности, на трехмерных проекторах и системах отображения со спектральным разделением).Various aspects of the present disclosure relate to systems and methods for enhanced rendering of two 2D images on 3D 6P projectors and display systems (particularly 3D projectors and spectral division display systems).

В одном примерном аспекте настоящего раскрытия сущности, предусмотрена проекционная система с двумя головками, содержащая первую проекционную головку, вторую проекционную головку, по меньшей мере, один пространственный модулятор и электронный процессор. Электронный процессор выполнен с возможностью принимать двумерные видеоданные, формировать, из видеоданных, первое множество значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второе множество значений интенсивности виртуальных первичных цветов второй виртуальной цветовой палитры, причем первое множество значений интенсивности составляют ниже порогового значения яркости и аппроксимируют предварительно заданную цветовую палитру, и причем второе множество значений интенсивности составляют выше порогового значения яркости, преобразовывать первое множество значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов первой проекционной головки и второе множество значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов второй проекционной головки и динамически регулировать пиксельные уровни пространственных модуляторов первой проекционной головки и второй проекционной головки.In one exemplary aspect of the present disclosure, a dual-head projection system is provided, comprising a first projection head, a second projection head, at least one spatial modulator, and an electronics processor. The electronic processor is configured to receive two-dimensional video data, to form, from the video data, the first set of intensity values of virtual primary colors of the first virtual color palette and the second set of intensity values of virtual primary colors of the second virtual color palette, the first set of intensity values being below the brightness threshold value and approximating a predetermined color palette, and wherein the second set of intensity values are above the threshold brightness value, convert the first set of intensity values into a third set of intensity values of the predefined primary colors of the first projection head and the second set of intensity values into the fourth set of intensity values of the predefined primary colors of the second projection head heads and dynamically adjust the pixel levels of the spatial modulators of the first projection head and the second projection head.

В другом примерном аспекте настоящего раскрытия сущности, предусмотрен способ для отображения данных изображений. Способ содержит прием двумерных видеоданных, формирование, из видеоданных, первого множества значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второго множества значений интенсивности второй виртуальной цветовой палитры, причем первое множество значений интенсивности первой виртуальной цветовой палитры составляют ниже порогового значения яркости и аппроксимируют предварительно заданную цветовую палитру, и причем второе множество значений интенсивности составляют выше порогового значения яркости, преобразование первого множества значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов первой проекционной головки системы отображения и второго множества значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов второй проекционной головки системы отображения и динамическое регулирование пиксельных уровней пространственных модуляторов первой и второй проекционных головок системы отображения на основе третьего множества значений интенсивности и четвертого множества значений интенсивности.In another exemplary aspect of the present disclosure, a method is provided for displaying image data. The method comprises receiving two-dimensional video data, generating, from the video data, a first set of intensity values of the virtual primary colors of the first virtual color palette and a second set of intensity values of the second virtual color palette, the first set of intensity values of the first virtual color palette being below a threshold brightness value and approximating a predetermined the color palette, and wherein the second set of intensity values are above the threshold brightness value, converting the first set of intensity values into a third set of intensity values of the predefined primary colors of the first projection head of the display system and the second set of intensity values into the fourth set of intensity values of the predefined primary colors of the second projection head display system heads and dynamic adjustment of pixel levels of spatial modulators of the first and second projection heads of the display system based on the third set of intensity values and the fourth set of intensity values.

В другом примерном аспекте настоящего раскрытия сущности, предусмотрен способ для отображения данных изображений. Способ содержит прием видеоданных, формирование, на основе уровня интенсивности видеоданных, первого множества значений интенсивности, ассоциированных с первой виртуальной цветовой палитрой, формирование, на основе сравнения между уровнем интенсивности и, по меньшей мере, одним предварительно определенным пороговым значением, второго множества значений интенсивности, ассоциированных со второй виртуальной цветовой палитрой, формирование, на основе первого множества и второго множества значений интенсивности, третьего множества значений интенсивности и четвертого множества значений интенсивности, ассоциированных с множеством первичных цветов отображения, и предоставление третьего множества значений интенсивности и четвертого множества значений интенсивности, по меньшей мере, в один пространственный светомодулятор.In another exemplary aspect of the present disclosure, a method is provided for displaying image data. The method comprises receiving video data, generating, based on the intensity level of the video data, a first set of intensity values associated with the first virtual color palette, generating, based on a comparison between the intensity level and at least one predetermined threshold value, a second set of intensity values, associated with the second virtual color palette, generating, based on the first set and the second set of intensity values, a third set of intensity values and a fourth set of intensity values associated with a set of primary display colors, and providing a third set of intensity values and a fourth set of intensity values, at least at least one spatial light modulator.

В другом примерном аспекте настоящего раскрытия сущности, предусмотрен энергонезависимый машиночитаемый носитель, сохраняющий инструкции, которые, при выполнении посредством процессора компьютера, инструктируют компьютеру выполнять операции, содержащие прием двумерных видеоданных, включающих в себя трехцветные пиксельные значения предварительно заданных первичных цветов предварительно заданного цветового пространства, формирование, из видеоданных, первого множества значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второго множества значений интенсивности второй виртуальной цветовой палитры, чтобы аппроксимировать предварительно заданную цветовую палитру, причем первое множество значений интенсивности составляют ниже порогового значения яркости первой виртуальной цветовой палитры, и причем второе множество значений интенсивности составляют выше порогового значения яркости, преобразование, через смешивающую функцию, первого множества значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов и второго множества значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов и динамическое регулирование пиксельных уровней, по меньшей мере, одного пространственного модулятора проекционной системы с двумя головками на основе третьего множества значений интенсивности и четвертого множества значений интенсивности.In another exemplary aspect of the present disclosure, a non-volatile computer-readable medium is provided that stores instructions that, when executed by a computer processor, instructs the computer to perform operations comprising receiving two-dimensional video data including tricolor pixel values of predefined primary colors of a predefined color space, generating , from the video data, a first set of intensity values of the virtual primary colors of the first virtual color palette and a second set of intensity values of the second virtual color palette to approximate a predetermined color palette, the first set of intensity values being below the brightness threshold value of the first virtual color palette, and wherein the second the set of intensity values are above the threshold value of the brightness, the transformation, through a blending function, of the first set of intensity values intensity values into a third set of intensity values of predetermined primary colors and a second set of intensity values into a fourth set of intensity values of predetermined primary colors and dynamic adjustment of pixel levels of at least one spatial modulator of a dual-head projection system based on the third set of intensity values and the fourth sets of intensity values.

Таким образом, различные аспекты настоящего раскрытия сущности предоставляют рендеринг двумерных изображений из трехмерного проекционного устройства и улучшения, по меньшей мере, в областях техники проецирования изображений, обработки сигналов и т.п.Thus, various aspects of the present disclosure provide rendering of 2D images from a 3D projection device and improvements in at least the fields of image projection technology, signal processing, and the like.

Краткое описание чертежейBrief description of the drawings

Прилагаемые чертежи, на которых аналогичные ссылки с номером ссылаются на идентичные или функционально аналогичные элементы в отдельных представлениях, вместе с нижеприведенным подробным описанием включаются и составляют часть подробного описания и служат для того, чтобы дополнительно иллюстрировать варианты осуществления концепций и пояснять различные принципы и преимущества этих вариантов осуществления.The accompanying drawings, in which like reference numbers refer to identical or functionally similar elements in separate representations, together with the following detailed description, are incorporated and form part of the detailed description and serve to further illustrate embodiments of the concepts and explain the various principles and advantages of those embodiments. implementation.

Фиг. 1A является спектральной диаграммой проекционной 6P-системы согласно различным аспектам настоящего раскрытия сущности.Fig. 1A is a spectral diagram of a 6P projection system according to various aspects of the present disclosure.

Фиг. 1B является блок-схемой проекционной системы согласно различным аспектам настоящего раскрытия сущности.Fig. 1B is a block diagram of a projection system according to various aspects of the present disclosure.

Фиг. 1C является блок-схемой проекционной системы согласно различным аспектам настоящего раскрытия сущности.Fig. 1C is a block diagram of a projection system according to various aspects of the present disclosure.

Фиг. 2 является блок-схемой контроллера, включенного в систему фиг. 1B и 1C согласно различным аспектам настоящего раскрытия сущности.Fig. 2 is a block diagram of a controller included in the system of FIG. 1B and 1C according to various aspects of the present disclosure.

Фиг. 3 является блок-схемой последовательности операций, иллюстрирующей способ, реализованный посредством контроллера по фиг. 2 согласно различным аспектам настоящего раскрытия сущности.Fig. 3 is a flowchart illustrating the method implemented by the controller of FIG. 2 according to various aspects of the present disclosure.

Фиг. 4 является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 4 is a color chart according to various aspects of the present disclosure.

Фиг. 5A является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 5A is a chromaticity diagram according to various aspects of the present disclosure.

Фиг. 5B является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 5B is a chromaticity diagram according to various aspects of the present disclosure.

Фиг. 6A является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 6A is a chromaticity diagram according to various aspects of the present disclosure.

Фиг. 6B является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 6B is a chromaticity diagram according to various aspects of the present disclosure.

Фиг. 7A является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 7A is a chromaticity diagram according to various aspects of the present disclosure.

Фиг. 7B является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 7B is a color chart according to various aspects of the present disclosure.

Фиг. 8A является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 8A is a chromaticity diagram according to various aspects of the present disclosure.

Фиг. 8B является диаграммой цветности согласно различным аспектам настоящего раскрытия сущности.Fig. 8B is a chromaticity diagram according to various aspects of the present disclosure.

Специалисты в данной области техники должны принимать во внимание, что элементы на чертежах проиллюстрированы для простоты и ясности и не обязательно нарисованы в масштабе. Например, размеры некоторых элементов чертежей могут быть чрезмерно увеличены относительно других элементов, чтобы помогать улучшать понимание вариантов осуществления настоящего раскрытия сущности.Those skilled in the art will appreciate that the elements in the drawings are illustrated for simplicity and clarity and are not necessarily drawn to scale. For example, some elements of the drawings may be oversized relative to other elements to help improve understanding of embodiments of the present disclosure.

Компоненты оборудования и способов представлены надлежащим образом посредством символов на чертежах, показывающих только те конкретные детали, которые относятся к пониманию вариантов осуществления настоящего раскрытия сущности, с тем чтобы не затруднять понимание сущности подробностями, которые должны быть очевидными для специалистов в данной области техники с использованием преимущества описания в данном документе.Components of equipment and methods are appropriately represented by symbols in the drawings showing only those specific details that are relevant to an understanding of embodiments of the present disclosure so as not to obscure the essence with details that should be obvious to those skilled in the art taking advantage of descriptions in this document.

Подробное описание изобретенияDetailed description of the invention

Как упомянуто выше, некоторые 6P-дисплеи, выполненные с возможностью проецировать трехмерные изображения, могут использоваться для того, чтобы проецировать/отображать двумерные изображения. При проецировании трехмерных изображений, шесть первичных цветов используются для того, чтобы отображать изображения для левого глаза и для правого глаза с использованием одного набора из трех (красного, зеленого и синего) первичных цветов для изображения для левого глаза и другого набора из трех первичных цветов для изображения для правого глаза. Трехмерные очки для использования с таким дисплеем могут иметь соответствующие фильтры (к примеру, полосовые фильтры), чтобы обеспечивать возможность каждому глазу видеть соответствующее изображение. Двумерные изображения могут отображаться посредством трехмерных дисплеев посредством управления каждой парой первичных источников света с идентичными данными без необходимости для зрителя носить трехмерные очки. Например, значения двумерных данных красного цвета используются для того, чтобы управлять первичными цветами red1 и red2. Аналогично, значения двумерных данных зеленого цвета используются для того, чтобы управлять первичными цветами green1 и green2, и значения двумерных данных синего цвета, используются для того, чтобы управлять первичными цветами blue1 и blue2. Система калибруется с комбинированными первичными цветами, и могут формироваться изображения. Тем не менее, результирующая цветовая палитра может ограничена в значительной степени относительно требуемой цветовой палитры (например, установленной Rec2020-палитры).As mentioned above, some 6P displays capable of projecting 3D images can be used to project/display 2D images. When projecting 3D images, six primary colors are used to display left eye and right eye images using one set of three (red, green, and blue) primary colors for the left eye image and another set of three primary colors for the left eye image. images for the right eye. 3D glasses for use with such a display may have appropriate filters (eg, bandpass filters) to allow each eye to see the appropriate image. Two-dimensional images can be displayed by three-dimensional displays by controlling each pair of primary light sources with identical data without the viewer having to wear three-dimensional glasses. For example, red 2D data values are used to control the primary colors red1 and red2. Similarly, green 2D data values are used to control the green1 and green2 primary colors, and blue 2D data values are used to control the blue1 and blue2 primary colors. The system is calibrated with the combined primary colors and images can be formed. However, the resulting color palette may be limited to a large extent relative to the desired color palette (for example, the installed Rec2020 palette).

Это раскрытие сущности и его аспекты могут осуществляться в различных формах, включающих в себя аппаратные средства или схемы, управляемые посредством машинореализованных способов, компьютерных программных продуктов, компьютерных систем и сетей, пользовательских интерфейсов и интерфейсов прикладного программирования; а также аппаратно-реализованные способы, схемы обработки сигналов, матрицы запоминающего устройства, специализированные интегральные схемы, программируемые пользователем вентильные матрицы и т.п. Вышеприведенное сущность изобретения предназначена только для того, чтобы выдавать общую идею относительно различных аспектов настоящего раскрытия сущности, и не ограничивает объем раскрытия сущности каким-либо образом.This disclosure and aspects thereof may take various forms, including hardware or circuitry controlled by computer implemented methods, computer program products, computer systems and networks, user interfaces and application programming interfaces; as well as hardwired methods, signal processing circuits, memory arrays, ASICs, field programmable gate arrays, and the like. The foregoing summary is only intended to provide a general idea regarding the various aspects of the present disclosure, and does not limit the scope of the disclosure in any way.

В нижеприведенном описании, изложено множество подробностей, таких как схемные конфигурации, временные синхронизации по формам сигнала, схемные операции и т.п., чтобы предоставлять понимание одного или более аспектов настоящего раскрытия сущности. Специалистам в данной области техники должно быть очевидным, что эти конкретные подробности являются просто примерными и не имеют намерение ограничивать объем этой заявки.In the description below, many details are set forth, such as circuit configurations, waveform timings, circuit operations, and the like, to provide an understanding of one or more aspects of the present disclosure. Those skilled in the art will appreciate that these specific details are merely exemplary and are not intended to limit the scope of this application.

Кроме того, хотя настоящее раскрытие сущности фокусируется главным образом на примерах, в которых принимаемые видеоданные принадлежат Rec2020, следует понимать, что это представляет собой просто один пример реализации, и что может использоваться другое цветовое пространство. Дополнительно следует понимать, что раскрытые системы и способы могут использоваться в любой проекционной системе, чтобы улучшать рендеринг двумерных изображений на шести первичных дисплеях.Also, while the present disclosure focuses primarily on examples in which the received video data is Rec2020, it should be understood that this is just one implementation example and that a different color space may be used. Additionally, it should be understood that the disclosed systems and methods can be used in any projection system to enhance the rendering of two-dimensional images on up to six primary displays.

Для простоты описания, некоторые или все примерные системы, представленные в данном документе, проиллюстрированы с одним образцом каждой из своих компонентных частей. Некоторые примеры могут не описывать или иллюстрировать все компоненты систем. Другие примерные варианты осуществления могут включать в себя большее или меньшее число каждого из проиллюстрированных компонентов, могут комбинировать некоторые компоненты либо могут включать в себя дополнительные или альтернативные компоненты. Например, в некоторых вариантах осуществления, нижеприведенная система 100 по фиг. 1B и 1C включает в себя боле одного источника 102 света.For ease of description, some or all of the exemplary systems provided herein are illustrated with one example of each of their component parts. Some examples may not describe or illustrate all system components. Other exemplary embodiments may include more or less of each of the illustrated components, may combine some components, or may include additional or alternative components. For example, in some embodiments, the system 100 of FIG. 1B and 1C includes more than one light source 102.

Как описано выше, некоторые трехмерные дисплеи, называемые "6P-системами", одновременно отображают изображение для левого глаза и правого глаза с использованием двух отдельных наборов первичных цветов. Фиг. 1A является спектральной диаграммой 1 6P-системы в соответствии с некоторыми вариантами осуществления. Диаграмма 1 включает в себя три небольших длины 2A, 3A и 4A волны (в данном документе называются "короткими первичными цветами") и три больших длины 2B, 3B и 4B волны (в данном документе называются "длинными первичными цветами"). Примерные системы отображения, описанные в данном документе, выполнены с возможностью использовать короткие первичные цвета 2A, 3A и 4A для изображения для левого глаза (например, через указанный левый проектор) и длинные первичные цвета 2B, 3B и 4B для изображения для правого глаза (например, через указанный правый проектор). Следует понимать, что в дополнительных вариантах осуществления, комбинация коротких и длинных первичных цветов может использоваться для изображения для каждого глаза. Как подробнее пояснено ниже, каждый проектор выводит модулированный световой выход (указанных первичных цветов проектора) на дисплей или просмотровый экран. В вариантах осуществления, описанных в данном документе, изображение для левого глаза и изображение для правого глаза одновременно отображаются.As described above, some 3D displays, referred to as "6P systems", simultaneously display an image for the left eye and the right eye using two separate sets of primary colors. Fig. 1A is a spectral diagram 1 of a 6P system, in accordance with some embodiments. Chart 1 includes three small wavelengths 2A, 3A and 4A (referred to herein as "short primaries") and three large wavelengths 2B, 3B and 4B (referred to herein as "long primaries"). The exemplary display systems described herein are configured to use short primaries 2A, 3A, and 4A for a left-eye image (for example, through said left projector) and long primaries 2B, 3B, and 4B for a right-eye image (for example, , through the indicated right projector). It should be understood that in additional embodiments, a combination of short and long primary colors may be used for the image for each eye. As explained in more detail below, each projector outputs a modulated light output (of the specified projector primary colors) to a display or viewing screen. In the embodiments described herein, the left eye image and the right eye image are simultaneously displayed.

Фиг. 1B и 1C являются блок-схемами примерных систем 100 отображения в соответствии с некоторыми вариантами осуществления. Каждая система включает в себя, по меньшей мере, некоторые компоненты с аналогичной конфигурацией, которые помечаются в этом качестве. Система 100 отображения выполнена с возможностью отображать трехмерные и двумерные видеоданные, принимаемые из источника 101 видеоданных. Система 100 отображения может представлять собой любой вид системы, выполненной с возможностью отображать изображения, например, проекционной системы или системы отображения на светоизлучающих диодах (светодиодах). Система 100 отображения включает в себя источник 102 света, осветительную оптику 104, разделитель 106, один или более модуляторов 108, модуль 110 комбинирования, проекционную оптику 112 и контроллер 114. Хотя фиг. 1B и 1C иллюстрируют один источник 102 света, системы 100 отображения в соответствии с некоторыми вариантами осуществления могут содержать несколько источников 102 света. Компоненты системы 100 могут размешаться в одном проекционном устройстве (к примеру, в одном проекторе) или, в некоторых вариантах осуществления, в нескольких устройствах. Например, в некоторых вариантах осуществления, источники света, модуляторы и другие компоненты системы 100 отображения могут разделяться на два или более отдельных, координированных проекционных устройства.Fig. 1B and 1C are block diagrams of exemplary display systems 100 in accordance with some embodiments. Each system includes at least some similarly configured components that are labeled as such. The display system 100 is configured to display 3D and 2D video data received from the video data source 101 . The display system 100 may be any kind of system capable of displaying images, such as a projection system or a light emitting diode (LED) display system. The display system 100 includes a light source 102, an illumination optics 104, a splitter 106, one or more modulators 108, a combiner 110, a projection optics 112, and a controller 114. Although FIG. 1B and 1C illustrate a single light source 102, display systems 100 in accordance with some embodiments may comprise multiple light sources 102. The components of system 100 may reside in a single projection device (eg, a single projector) or, in some embodiments, multiple devices. For example, in some embodiments, light sources, modulators, and other components of display system 100 may be split into two or more separate, coordinated projection devices.

Источник 102 света управляется посредством контроллера 114 таким образом, чтобы формировать осветительный луч, включающий в себя, в проиллюстрированном варианте осуществления, шесть первичных цветов. Осветительный луч направляется через осветительную оптику 104 и в цветоразделитель 106. Цветоразделитель 106 разделяет осветительный луч на шесть первичных лучей и направляет каждый первичный луч в ассоциированный один из пространственных светомодуляторов 108 (SLM). Каждый модулятор 108 модулирует первичные осветительные лучи на основе ввода из контроллера 114, как подробнее описано ниже. Проекционная оптика 112 фокусирует модулированный луч, чтобы формировать луч 116 для формирования изображений. Луч 116 для формирования изображений затем проецируется для того, чтобы создавать изображение, например, на поверхность для просмотра (не показана). В примерной системе по фиг. 1B, изображения для левого и правого глаза могут попеременно проецироваться (также называется "мультиплексированием с временным разделением каналов").The light source 102 is controlled by the controller 114 so as to generate an illumination beam including, in the illustrated embodiment, six primary colors. The illumination beam is directed through the illumination optics 104 and into a color spacer 106. The color spacer 106 divides the illumination beam into six primary beams and directs each primary beam to an associated one of the spatial light modulators (SLMs) 108. Each modulator 108 modulates primary illumination beams based on input from controller 114, as described in more detail below. The projection optics 112 focuses the modulated beam to form an imaging beam 116 . The imaging beam 116 is then projected to create an image onto, for example, a viewing surface (not shown). In the exemplary system of FIG. 1B, images for the left and right eyes may be alternately projected (also referred to as "time division multiplexing").

В некоторых вариантах осуществления, каждый первичный цвет может быть ассоциирован с отдельным модулятором 108. Альтернативно, как показано на фиг. 1B, число модуляторов может уменьшаться, например, посредством использования схемы последовательной модуляции на эффекте поля. В некоторых вариантах осуществления, модуляторы могут включать в себя множество модуляторов для каждого первичного цвета, как, например, в проекторе с двойной модуляцией. В некоторых вариантах осуществления, каждый модулятор 108 ассоциирован с набором первичных цветов. Например, как описано выше в отношении фиг. 1A, 6P-система, как показано на фиг. 1C, может включать в себя левый проектор и правый проектор. Фиг. 1C иллюстрирует систему 100 отображения с двумя головками, которая включает в себя отдельные модуляторы 108A и 108B, проекционную оптику 112A и 112B и два результирующих луча 116A и 116B для формирования изображений, каждый набор из которых предназначен для канала для левого глаза и для канала для правого глаза, соответственно. Модулятор 108A, проекционная оптика 112A и результирующий луч 116A для формирования изображений могут считаться компонентами левого проектора (проекционной головки), и модулятор 108B, проекционная оптика 112B и результирующий луч 116B для формирования изображений могут считаться компонентами правого проектора (проекционной головки). Как описано выше, световые выходы из обоих каналов показаны одновременно, чтобы формировать одно результирующее изображение на дисплее или на экране. Кроме того, хотя фиг. 1B и 1C иллюстрируют источник 101 видеоданных как отдельный от системы 100 отображения, в некоторых вариантах осуществления источник 101 видеоданных может быть внутренним по отношению к системе 100 отображения (например, в запоминающем устройстве, ассоциированном с системой 100 отображения).In some embodiments, each primary color may be associated with a separate modulator 108. Alternatively, as shown in FIG. 1B, the number of modulators can be reduced, for example, by using a field effect serial modulation scheme. In some embodiments, the modulators may include multiple modulators for each primary color, such as in a dual modulation projector. In some embodiments, each modulator 108 is associated with a set of primary colors. For example, as described above with respect to FIG. 1A, 6P system as shown in FIG. 1C may include a left projector and a right projector. Fig. 1C illustrates a dual-head display system 100 that includes separate modulators 108A and 108B, projection optics 112A and 112B, and two resulting imaging beams 116A and 116B, each set for a left eye channel and a right eye channel. eyes, respectively. Modulator 108A, projection optics 112A, and imaging resultant beam 116A may be considered components of the left projector (projection head), and modulator 108B, projection optics 112B, and imaging resultant beam 116B may be considered components of the right projector (projection head). As described above, the light outputs from both channels are shown simultaneously to form one resulting image on the display or screen. In addition, although FIG. 1B and 1C illustrate video source 101 as separate from display system 100, in some embodiments, video source 101 may be internal to display system 100 (eg, in a storage device associated with display system 100).

Фиг. 1B является блок-схемой контроллера 135 в соответствии с некоторыми вариантами осуществления. Контроллер 114 включает в себя электронный процессор 205, запоминающее устройство 210 и интерфейс 215 ввода-вывода. Электронный процессор 205 получает и предоставляет информацию (например, из запоминающего устройства 210 и/или интерфейса 215 ввода-вывода) и обрабатывает информацию посредством выполнения одной или более программных инструкций или модулей, допускающих сохранение, например, в области оперативного запоминающего устройства (RAM) запоминающего устройства 210 или в постоянном запоминающем устройстве (ROM) запоминающего устройства 210 либо в другом энергонезависимом машиночитаемом носителе (не показан). Программное обеспечение может включать в себя микропрограммное обеспечение, одно или более приложений, программные данные, фильтры, правила, один или более программных модулей и других выполняемых инструкций. Электронный процессор 205 может включать в себя несколько ядер или отдельных блоков обработки. Электронный процессор 205 выполнен с возможностью извлекать из запоминающего устройства 210 и выполнять, в числе прочего, программное обеспечение, связанное с процессами и способами управления, описанными в данном документе.Fig. 1B is a block diagram of a controller 135, in accordance with some embodiments. The controller 114 includes an electronic processor 205, a storage device 210, and an I/O interface 215. The electronic processor 205 receives and provides information (e.g., from memory 210 and/or I/O interface 215) and processes the information by executing one or more program instructions or modules capable of being stored, for example, in a random access memory (RAM) area of the memory. device 210 or read only memory (ROM) memory device 210 or other non-volatile computer-readable media (not shown). The software may include firmware, one or more applications, program data, filters, rules, one or more program modules, and other executable instructions. Electronic processor 205 may include multiple cores or separate processing units. The electronic processor 205 is configured to retrieve from the storage device 210 and execute, among other things, software associated with the processes and control methods described herein.

Запоминающее устройство 210 может включать в себя один или более энергонезависимых машиночитаемых носителей и включает в себя область хранения программ и область хранения данных. Область хранения программ и область хранения данных могут включать в себя комбинации различных типов запоминающего устройства, как описано в данном документе. Запоминающее устройство 210 может принимать форму любого энергонезависимого машиночитаемого носителя.The storage device 210 may include one or more non-volatile computer-readable media and includes a program storage area and a data storage area. The program storage area and the data storage area may include combinations of various types of storage device, as described herein. The storage device 210 may take the form of any non-volatile computer-readable medium.

Интерфейс 215 ввода-вывода выполнен с возможностью принимать ввод и предоставлять системный вывод. Интерфейс 215 ввода-вывода получает информацию и сигналы и предоставляет информацию и сигналы (например, по одному или более проводных и/или беспроводных соединений) из/в устройства, внутренние и внешние по отношению к системе 100 отображения, например, из/в источник 102 света, модулятор(ы) 108 и источник 101 видеоданных.I/O interface 215 is configured to receive input and provide system output. I / O interface 215 receives information and signals and provides information and signals (for example, over one or more wired and / or wireless connections) from / to devices internal and external to the display system 100, for example, from / to source 102 light, modulator(s) 108 and source 101 of video data.

Фиг. 3 является блок-схемой последовательности операций способа, иллюстрирующей примерный способ 300 работы проекционной системы в соответствии с некоторыми вариантами осуществления. В качестве примера, способ 300 описывается как осуществляемый посредством контроллера 114, проиллюстрированного на фиг. 1B и 1C, и, в частности, электронного процессора 205, проиллюстрированного на фиг. 2.Fig. 3 is a flowchart illustrating an exemplary method 300 of operating a projection system in accordance with some embodiments. As an example, method 300 is described as being performed by controller 114 illustrated in FIG. 1B and 1C, and in particular the electronic processor 205 illustrated in FIG. 2.

На этапе 302, электронный процессор 205 принимает видеоданные из источника видеоданных, такого как источник 101 видеоданных, проиллюстрированный на фиг. 1B и 1C. Видеоданные могут включать в себя последовательность трехцветных пиксельных значений из потока или файла видеоконтента. В некоторых вариантах осуществления, видеоданные включают в себя пиксельные значения в цветовом пространстве (или палитре), таком как Rec2020 (также называется "Рекомендацией ITU-R BT.2020). На этапе 304, электронный процессор 205 формирует, из видеоданных, первое множество значений интенсивности виртуальных первичных цветов первой цветовой палитры и, на этапе 306, формирует, из видеоданных, второе множество значений интенсивности виртуальных первичных цветов второй цветовой палитры. В частности, объем палитр для двумерных изображений разбивается на две виртуальных палитры: палитру A и палитру B. Каждая палитра включает в себя виртуальные первичные цвета, которые представляют собой конкретные смешения предварительно заданных первичных цветов. Как подробнее пояснено ниже, палитра A оптимизируется таким образом, что она находится как можно ближе к предварительно заданной цветовой палитре, например, к заданному стандартному цветовому пространству (например, Rec2020), тогда как палитра B используется для любой остаточной энергии из предварительно заданных первичных цветов. Другими словами, палитра A используется для более низких уровней яркости, и палитра B добавляется для того, чтобы достигать более высоких уровней яркости, если применимо. В некоторых вариантах осуществления, палитра A оптимизируется таким образом, чтобы достигать наибольшей возможной цветовой палитры.In step 302, the electronic processor 205 receives video data from a video data source, such as the video data source 101 illustrated in FIG. 1B and 1C. The video data may include a sequence of tricolor pixel values from a video content stream or file. In some embodiments, the video data includes pixel values in a color space (or palette) such as Rec2020 (also referred to as "ITU-R BT.2020 Recommendation). In step 304, the electronics processor 205 generates, from the video data, a first set of values intensities of the virtual primary colors of the first color palette and, from the video data, generates a second set of virtual primary color intensities of the second color palette, in step 306. In particular, the scope of palettes for two-dimensional images is divided into two virtual palettes: palette A and palette B. Each the palette includes virtual primaries, which are specific mixtures of predefined primaries As explained in more detail below, palette A is optimized so that it is as close as possible to a predefined color palette, such as a given standard color space (for example , Rec2020), while palette B and Useful for any residual energy from predefined primary colors. In other words, palette A is used for lower brightness levels, and palette B is added in order to achieve higher brightness levels, if applicable. In some embodiments, palette A is optimized to achieve the largest possible color palette.

Возвращаясь к фиг. 3, на этапе 308, электронный процессор 205 преобразует первое множество значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов канала для первого глаза (например, канала первой проекционной головки) и второе множество значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов канала для второго глаза (например, канала второй проекционной головки).Returning to FIG. 3, in step 308, the electronic processor 205 converts the first set of intensity values into a third set of intensity values of the predefined channel primary colors for the first eye (e.g., the channel of the first projection head) and the second set of intensity values into a fourth set of intensity values of the predefined channel primary colors. for the second eye (for example, the channel of the second projection head).

В некоторых вариантах осуществления, смешивающая функция применяется к палитре A и палитре B, чтобы оптимизировать каждую палитру таким образом, что она находится близко к цветовому пространству видеоданных (в настоящем примере, Rec2020). Другими словами, в этих вариантах осуществления, электронный процессор 205 преобразует, например, через одну или более смешивающих функций, первое множество значений интенсивности и второе множество значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов канала для первого глаза (например, канала первой проекционной головки). Электронный процессор 205 также преобразует, например, через одну или более смешивающих функций, первое множество значений интенсивности и второе множество значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов канала для второго глаза (например, канала второй проекционной головки). Нижеприведенные уравнения [1] и [2] иллюстрируют смешивающую функцию, выполняемую на этапе 308 для канала для левого глаза и канала для правого глаза, соответственно.In some embodiments, a blending function is applied to palette A and palette B to optimize each palette so that it is close to the color space of the video data (in the present example, Rec2020). In other words, in these embodiments, the electronic processor 205 converts, for example, through one or more blending functions, a first set of intensity values and a second set of intensity values into a third set of intensity values of the predetermined primary colors of the first eye channel (e.g., the first projection channel). heads). The electronic processor 205 also converts, for example, through one or more blending functions, the first set of intensity values and the second set of intensity values into a fourth set of intensity values of the predetermined primary colors of the channel for the second eye (eg, the channel of the second projection head). Equations [1] and [2] below illustrate the blending function performed in step 308 for the left eye channel and the right eye channel, respectively.

Figure 00000001
+
Figure 00000002
[1]
Figure 00000001
+
Figure 00000002
[one]

иand

Figure 00000003
+
Figure 00000004
[2]
Figure 00000003
+
Figure 00000004
[2]

Матрица RL BL GL соответствует третьему множеству значений интенсивности, например, первичным цветам канала для правого глаза, и матрица BS GS RS соответствует четвертому множеству значений интенсивности, например, первичным цветам канала для левого глаза, при этом R означает красный первичный цвет, G означает зеленый первичный цвет, B означает синий первичный цвет, подстрочный индекс L означает "длинные" первичные цвета длины волны, и подстрочный индекс S означает "короткие" первичные цвета длины волны. В некоторых вариантах осуществления, канал для правого глаза может включать в себя первичные цвета с небольшой длиной волны, тогда как канал для левого глаза включает в себя первичные цвета с большой длиной волны. В обоих уравнениях, палитра A (матрица, включающая в себя RA GA BA) и палитра B (матрица, включающая в себя RB GB BB) каждого канала масштабируются посредством смешивающей матрицы (матриц BAL, BBL, BAS и BBS). Конкретные значения смешивающих матриц могут быть предварительно определенными значениями, определенными на основе местоположения первичных цветов и предварительно определенного цветового пространства. Конкретные значения также могут зависеть от используемой проекционной системы/системы отображения (например, типа головы проектора). Ниже подробнее описываются примерные способы определения каждой из смешивающих матриц. В настоящем примере, используются следующие значения смешивающих матриц:Matrix R L B L G L corresponds to a third set of intensity values, such as the right eye channel primary colors, and matrix B S G S R S corresponds to a fourth intensity set, such as the left eye channel primary colors, where R stands for red primary color, G means green primary color, B means blue primary color, subscript L means "long" wavelength primary colors, and subscript S means "short" wavelength primary colors. In some embodiments, the right eye channel may include short wavelength primaries while the left eye channel includes long wavelength primaries. In both equations, palette A (matrix including R A G A B A ) and palette B (matrix including R B G B B B ) of each channel are scaled by the mixing matrix (matrices B AL , B BL , B AS and BBS ). The particular values of the blending matrices may be predetermined values determined based on the location of the primary colors and the predetermined color space. Specific values may also depend on the projection/display system used (eg, type of projector head). Exemplary methods for determining each of the blending matrices are described in more detail below. In this example, the following mixing matrix values are used:

Figure 00000005
=
Figure 00000006
Figure 00000005
=
Figure 00000006

Figure 00000007
=
Figure 00000008
Figure 00000007
=
Figure 00000008

Figure 00000009
=
Figure 00000010
Figure 00000009
=
Figure 00000010

Figure 00000011
=
Figure 00000012
Figure 00000011
=
Figure 00000012

Возвращаясь к фиг. 3, на этапе 310, электронный процессор 205 динамически регулирует пиксельные уровни, по меньшей мере, одного пространственного модулятора, такого как модулятор 108, проиллюстрированный на фиг. 1B и C, на основе третьего множества значений интенсивности и четвертого множества значений интенсивности. В вариантах осуществления, в которых система 100 представляет собой проекционную систему с двумя головками, пиксельные уровни модулятора каждой из проекционных головок регулируются.Returning to FIG. 3, in step 310, electronics processor 205 dynamically adjusts the pixel levels of at least one spatial modulator, such as modulator 108 illustrated in FIG. 1B and C, based on the third set of intensity values and the fourth set of intensity values. In embodiments in which system 100 is a dual-head projection system, the modulator pixel levels of each of the projection heads are adjusted.

Как упомянуто выше, палитра A оптимизируется таким образом, что она находится как можно ближе к предварительно заданной цветовой палитре, например, к заданному стандартному цветовому пространству (например, Rec2020), тогда как палитра B используется для любой остаточной энергии из предварительно заданных первичных цветов. Ниже описываются два примерных способа, реализованных посредством процессора 205 для того, чтобы обрабатывать принимаемые видеоданные в палитры A и B.As mentioned above, palette A is optimized so that it is as close as possible to a predefined color palette, such as a given standard color space (eg Rec2020), while palette B is used for any residual energy from the predefined primary colors. Two exemplary methods implemented by processor 205 for processing received video data into palettes A and B are described below.

Один способ для того, чтобы оптимизировать палитру A, заключается в масштабировании (сжатии) цветностей видеоданных таким образом, что они вписываются в пределы достижимого объема палитр источника 102 света, что называется в данном документе "масштабированием палитр". В способе масштабирования палитр, задаются две функции:One way to optimize palette A is to scale (compress) the chrominances of the video data so that they fit within the achievable palette volume of the light source 102, which is referred to herein as "palette scaling". In the palette scaling method, two functions are defined:

Figure 00000013
Figure 00000014
, C, иначе 0,5
Figure 00000013
Figure 00000014
, C, otherwise 0.5

Figure 00000015
-
Figure 00000016
Figure 00000015
-
Figure 00000016

Figure 00000017
Figure 00000017

Переменная C представляет пиксельные значения принимаемых видеоданных, которые здесь предположительно представляют собой трехцветные Rec2020-данные. Функция fl(C) представляет таблицу поиска для палитры A, тогда как функция fu(C) представляет таблицу поиска для палитры B. В настоящем примере, функция fl(C) задает линейное изменение с возрастанием от 0 до 0,5 и плоское выравнивание за пределами 0,5, тогда как функция fu(C) задает плоскую линию от 0 до 0,5 и линейное изменение с возрастанием от 0,5. Значение 0,5 соответствует пороговому значению яркости. В некоторых вариантах осуществления, может использоваться другое пороговое значение яркости.The variable C represents the pixel values of the received video data, which here is assumed to be three-color Rec2020 data. The function f l (C) represents the lookup table for palette A, while the function f u (C) represents the lookup table for palette B. In the present example, the function f l (C) specifies a ramp from 0 to 0.5 and flattening beyond 0.5, while the function f u (C) flattens from 0 to 0.5 and ramps up from 0.5. A value of 0.5 corresponds to the brightness threshold. In some embodiments, a different brightness threshold may be used.

Для каждого из пиксельных значений принимаемых видеоданных, палитра A и палитра B извлекаются следующим образом:For each of the pixel values of the received video data, gamut A and gamut B are extracted as follows:

Figure 00000018
Figure 00000018

Figure 00000019
Figure 00000019

Другими словами, для каждого первичного канала входящих видеоданных R2020, G2020 и B2020, пиксельные значения с уровнем яркости ниже 0,5 (соответствующего 50% диапазона полной яркости системы 100 и 100% диапазона яркости палитры A) включаются в палитру A, тогда как пиксельные значения, которые превышают 0,5 (что означает то, что они находятся за пределами диапазона яркости палитры A), выделяются палитре B. Извлеченные сигналы палитры A и палитры B затем преобразуются в заданные первичные цвета, как описано выше в отношении этапа 308 и уравнений 1 и 2.In other words, for each primary channel of incoming video data R 2020 , G 2020 and B 2020, pixel values with a luminance level below 0.5 (corresponding to 50% of the full luminance range of system 100 and 100% of the luminance range of palette A) are included in palette A, then how pixel values that are greater than 0.5 (meaning they are outside the luminance range of palette A) are allocated to palette B. The extracted palette A and palette B signals are then converted to the specified primary colors as described above in relation to step 308 and equations 1 and 2.

Другой способ для того, чтобы обрабатывать принимаемые видеоданные в палитру A, заключается в отсечении цветностей таким образом, что они вписываются в палитры A и B, так что они вписываются в пределы достижимого объема палитр источника 102 света. Во-первых, взаимосвязь [C]A и [C]B преобразования из цветового пространства источника 102 в палитру A и палитру B, соответственно, задается. Извлечение может выполняться следующим образом.Another way to process the received video data into palette A is to clip the chroma so that they fit into palettes A and B so that they fit within the achievable palette volume of the light source 102. First, the relationship of [C] A and [C] B conversion from the color space of the source 102 to palette A and palette B, respectively, is specified. Extraction can be done in the following way.

При знании нормализованных первичных матриц для левого канала и правого канала, произвольные точки в обоих каналах могут задаваться следующим образом:With the knowledge of the normalized primary matrices for the left channel and the right channel, arbitrary points in both channels can be given as follows:

Figure 00000020
=
Figure 00000021
+
Figure 00000022
,
Figure 00000020
=
Figure 00000021
+
Figure 00000022
,

где матрица X, Y и Z соответствует произвольной точке, матрицы NPMLLL и NPMSSS соответствуют нормализованным первичным матрицам канала для правого глаза и канала для левого глаза, соответственно, и матрицы RL, GL и BL и RS, GS и BS соответствуют ненормализованным матрицам канала для правого глаза и канала для левого глаза, соответственно.where the X, Y, and Z matrix corresponds to an arbitrary point, the NPM LLL and NPM SSS matrices correspond to the normalized primary matrices of the right-eye channel and the left-eye channel, respectively, and the matrices R L , G L and B L and R S , G S and B S correspond to the unnormalized channel matrices for the right eye and the channel for the left eye, respectively.

Смешивающие функции, заданные в вышеприведенных уравнениях 1 и 2, подставляются в качестве ненормализованных матриц канала для правого глаза и канала для левого глаза, соответственно.The blending functions defined in Equations 1 and 2 above are substituted as unnormalized right-eye channel and left-eye channel matrices, respectively.

Figure 00000023
Figure 00000023

При преобразовании вышеприведенной формулы в условия первичных матриц, формула становится следующей:When converting the above formula into terms of primary matrices, the formula becomes the following:

Figure 00000024
Figure 00000024

при этом:wherein:

Figure 00000025
Figure 00000025

и:and:

Figure 00000026
Figure 00000026

При знании нижеприведенной нормализованной первичной матрицы для Rec2020:With the knowledge of the below normalized primary matrix for Rec2020:

Figure 00000027
Figure 00000027

преобразование из исходных Rec2020-векторов в палитры A и B, соответственно, представляет собой:the transformation from the original Rec2020 vectors to palettes A and B, respectively, is:

Figure 00000028
=
Figure 00000029
Figure 00000030
Figure 00000028
=
Figure 00000029
Figure 00000030

и:and:

Figure 00000031
=
Figure 00000032
Figure 00000033
Figure 00000031
=
Figure 00000032
Figure 00000033

Как упомянуто выше, палитра A используется для более низких уровней яркости, тогда как палитра B используется, где применимо, для того, чтобы достигать более высоких уровней яркости. В отличие от способа масштабирования палитр, в котором диапазон яркости палитры A является идентичным для всех каналов, здесь вектор пороговых значений используется в качестве порогового значения яркости, что означает то, что диапазон яркости палитры A варьируется в расчете на один канал. Вектор пороговых значений, представляющий переход между палитрами A и B в Rec2020-пространстве, может быть найден следующим образом:As mentioned above, palette A is used for lower brightness levels, while palette B is used, where applicable, in order to achieve higher brightness levels. Unlike the palette scaling method in which the luminance range of palette A is the same for all channels, here a threshold vector is used as a luminance threshold, which means that the luminance range of palette A varies per channel. The threshold vector representing the transition between palettes A and B in Rec2020 space can be found as follows:

Figure 00000034
Figure 00000034

Другими словами, каждое пороговое значение в векторе пороговых значений определяется на основе преобразования первой виртуальной цветовой палитры в предварительно заданную цветовую палитру.In other words, each threshold value in the threshold vector is determined based on the transformation of the first virtual color palette into a predefined color palette.

После этого задаются следующие функции:After that, the following functions are set:

Figure 00000013
Figure 00000035
, С, иначе Т с
Figure 00000013
Figure 00000035
, C, otherwise T c

Figure 00000015
-
Figure 00000016
Figure 00000015
-
Figure 00000016

Figure 00000017
Figure 00000017

Переменная C представляет пиксельные значения принимаемых видеоданных, которые здесь предположительно представляют собой трехцветные Rec2020-данные. Аналогично функциям fl(C) и fu(C) способа масштабирования палитр, описанного выше, функция fl(C) снова представляет таблицу поиска для палитры A, тогда как функция fu(C) представляет таблицу поиска для палитры B. В настоящем примере, функция fl(C) задает линейное изменение с возрастанием от 0 до порогового значения конкретного канала, как задано в векторе пороговых значений, и плоское выравнивание за пределами конкретного порогового значения, тогда как функция fu(C) задает плоскую линию от 0 до конкретного порогового значения и линейное изменение с возрастанием от конкретного порогового значения. С другой стороны, здесь конкретные пороговые значения надлежащим образом соответствуют пороговому значению яркости каждого из каналов палитры A. В некоторых вариантах осуществления, функции fl(C) и fu(C) могут задавать переходы, отличный от линейных изменений, описанных выше (до тех пор, пока сумма функций равна 1). Например, любая одна или обе функции fl(C) и fu(C) могут задавать кривую для плоской линии.The variable C represents the pixel values of the received video data, which here is assumed to be three-color Rec2020 data. Similar to the functions f l (C) and f u (C) of the palette scaling method described above, the function f l (C) again represents the lookup table for palette A, while the function f u (C) represents the lookup table for palette B. In In this example, the function f l (C) defines a ramp from 0 to the specific channel threshold as specified in the threshold vector and a flat leveling beyond the specific threshold, while the function f u (C) defines a flat line from 0 to a specific threshold, and ramping up from a specific threshold. On the other hand, here, the specific thresholds appropriately correspond to the luminance threshold of each of the channels of palette A. In some embodiments, the functions f l (C) and f u (C) may define transitions other than the ramps described above (up to as long as the sum of the functions is equal to 1). For example, any one or both of the functions f l (C) and f u (C) can define a curve for a flat line.

Для каждого из пиксельных значений принимаемых видеоданных, палитра A и палитра B извлекаются следующим образом:For each of the pixel values of the received video data, gamut A and gamut B are extracted as follows:

Figure 00000018
Figure 00000018

Figure 00000019
Figure 00000019

Другими словами, для каждого первичного канала входящих видеоданных R2020, G2020 и B2020, пиксельные значения с уровнем яркости ниже соответствующего порогового значения вектора TR, TG and TB пороговых значений (соответствующего конкретному диапазону яркости палитры A) включаются в палитру A, тогда как пиксельные значения, которые превышают конкретное пороговое значение (что означает то, что они находятся за пределами диапазона яркости палитры A), выделяются палитре B.In other words, for each primary channel of incoming video data R 2020 , G 2020 and B 2020, pixel values with a luminance level below the corresponding threshold value of the threshold vector T R , T G and T B (corresponding to a specific luminance range of palette A) are included in palette A , while pixel values that exceed a particular threshold (meaning that they are outside the brightness range of palette A) are highlighted to palette B.

Любые значения интенсивности извлеченной палитры A и палитры B, которые являются отрицательными значениями, после этого отсекаются до 0 (или белого цвета).Any intensity values of the extracted palette A and palette B that are negative values are then clipped to 0 (or white).

Figure 00000036
[3]
Figure 00000036
[3]

Figure 00000037
[4]
Figure 00000037
[4]

Извлеченные сигналы палитры A и палитры B затем преобразуются в заданные первичные цвета, как описано выше в отношении этапа 308 и уравнений 1 и 2.The extracted palette A and palette B signals are then converted to the specified primary colors as described above in relation to step 308 and Equations 1 and 2.

Способ отсечения палитр отсекает цвета до края палитр A и B, которые могут создаваться приблизительно идентично для любой системы с проектором. Другими словами, цвета, сформированные посредством одного проектора, могут верно воспроизводиться посредством любого другого вида проектора, независимо от того, являются или нет идентичными исходные первичные цвета.The palette clipping method clips colors to the edge of palettes A and B, which can be generated approximately identically for any system with a projector. In other words, colors generated by one projector can be correctly reproduced by any other kind of projector, whether or not the original primary colors are identical.

Альтернативно, функция смешения может применяться к палитрам A и B до отсечения отрицательных значений. Посредством применения смешивающей функции к каждой палитре, значения каждой палитры преобразуются таким образом, что они содержат условия предварительно заданных первичных цветов цветового пространства принимаемых видеоданных. Отсечение затем может применяться, как показано ниже.Alternatively, the blending function can be applied to palettes A and B before clipping negative values. By applying a blending function to each palette, the values of each palette are converted such that they contain the terms of the predefined primary colors of the color space of the received video data. Clipping can then be applied as shown below.

Figure 00000038
Figure 00000038

Figure 00000039
Figure 00000039

Этот способ максимизирует покрытие палитр для конкретных первичных цветов любой системы с проектором.This method maximizes palette coverage for specific primary colors of any system with a projector.

Фиг. 4 иллюстрирует диаграмму 400 цветности. Диаграмма 400 включает в себя цветовые палитры, ассоциированные с системой 100 отображения и целевой цветовой палитрой (здесь, Rec2020). Палитра 402 представляет собой Rec2020-палитру. Палитра 404 представляет собой палитру, заданную посредством (длинных) первичных цветов RL, GL и BL канала для правого глаза (первичных LLL-цветов), тогда как палитра 406 представляет собой палитру, заданную посредством (коротких) первичных цветов RS, GS и BS канала для левого глаза (первичных SSS-цветов). Палитра 416 представляет собой палитру, заданную посредством управления первичными цветами каналов для правого глаза и левого глаза с идентичными значениями (WCG-палитры). Как проиллюстрировано, палитра 408 значительно отличается от Rec2020-палитры 402. Палитра 410 представляет собой виртуальную цветовую палитру A, и палитра 412 представляет собой виртуальную цветовую палитру B. Как описано выше, палитра A задается как комбинация виртуальных первичных цветов, чтобы аппроксимировать Rec2020-палитру 402 максимально близко, тогда как палитра B задается посредством оставшегося энергетического выхода виртуальных первичных цветов после того, как вычтена энергия, используемая для палитры A. Как показано, палитра A (палитра 410) совпадает с Rec2020-палитрой 402 более близко по сравнению с суммирующей палитрой 408.Fig. 4 illustrates a chromaticity diagram 400. Chart 400 includes color palettes associated with display system 100 and a target color palette (here, Rec2020). Palette 402 is a Rec2020 palette. Palette 404 is the palette specified by the (long) primary colors R L , G L and B L of the right eye channel (LLL primary colors), while palette 406 is the palette specified by the (short) primary colors R S . G S and B S channels for the left eye (primary SSS colors). The palette 416 is a palette defined by controlling the primary colors of the right eye and left eye channels with identical values (WCG palettes). As illustrated, palette 408 is significantly different from Rec2020 palette 402. Palette 410 is virtual color palette A and palette 412 is virtual color palette B. As described above, palette A is defined as a combination of virtual primary colors to approximate the Rec2020 palette 402 is as close as possible, while palette B is specified by the remaining energy output of the virtual primaries after the energy used for palette A is subtracted. As shown, palette A (palette 410) matches Rec2020 palette 402 more closely than the sum palette 408.

Фиг. 5A иллюстрирует диаграмму 500A цветности, включающую в себя палитры 402, 404, 406, 408, 410 и 412, описанные выше в отношении фиг. 4. Диаграмма 500A цветности включает в себя входную цветность (черный цвет) и результирующую выходную цветность (серый цвет), достигаемые с использованием способа отсечения палитр, описанного выше. Линии, соединяющие любую точку входной цветности с точкой выходной цветности (например, линия, соединяющая входную точку 502A с выходной точкой 502B), указывают то, как изменен входной цвет (при необходимости изменения). Следует отметить, что на проиллюстрированной диаграмме 500A, максимальный ввод меньше порогового значения яркости, и в силу этого палитра B не используется, и что использован второй способ отсечения, описанный выше.Fig. 5A illustrates a chromaticity diagram 500A including the palettes 402, 404, 406, 408, 410, and 412 described above with respect to FIG. 4. Chroma chart 500A includes an input chroma (black) and a result output chroma (gray) achieved using the palette clipping method described above. Lines connecting any input color point to an output color point (eg, a line connecting input point 502A to output point 502B) indicate how the input color has been changed (if needed). It should be noted that in the illustrated diagram 500A, the maximum input is less than the luminance threshold, and therefore palette B is not used, and that the second clipping method described above is used.

Фиг. 5B иллюстрирует диаграмму 500B цветности, включающую в себя палитры 402, 404, 406, 408, 410 и 412, описанные выше в отношении фиг. 4. Диаграмма 500B цветности включает в себя входную цветность (черный цвет) и результирующую выходную цветность (серый цвет), достигаемые с использованием способа отсечения палитр, описанного выше. На проиллюстрированной диаграмме 500B, максимальный ввод превышает пороговое значение яркости, и в силу этого используется палитра B.Fig. 5B illustrates a chromaticity diagram 500B including the palettes 402, 404, 406, 408, 410, and 412 described above with respect to FIG. 4. Chroma chart 500B includes an input chroma (black) and a result output chroma (gray) achieved using the palette clipping method described above. In the illustrated diagram 500B, the maximum input exceeds the luminance threshold, and therefore palette B is used.

Как упомянуто выше, смешивающие матрицы являются извлеченными значениями, определенными на основе местоположения первичного цвета по сравнению с Rec2020. Смешивающие матрицы, в частности, задаются таким образом, чтобы размещать короткие и длинные первичные цвета каналов для правого и левого глаза, соответственно, в конкретном требуемом местоположении. Ниже описываются примерные способы для того, чтобы определять смешивающие матрицы для каждого первичного цвета.As mentioned above, blending matrices are extracted values determined based on the location of the primary color compared to Rec2020. The blending matrices are specifically defined to place the short and long primary colors of the right and left eye channels, respectively, at the particular desired location. Exemplary methods for determining mixing matrices for each primary color are described below.

Фиг. 6A иллюстрирует улучшенный вид 600A диаграммы 400 цветности по фиг. 4. Как показано в виде 600A, как короткий красный первичный цвет RS, так и длинный красный первичный цвет RL находятся за пределами цветовой Rec2020-палитры 402. Необходимо согласовывать палитру A с цветовой Rec2020-палитрой 402. Чтобы определять смешивающую матрицу для красного первичного цвета R, один способ заключается в том, чтобы привязывать первичный цвет к Rec2020-палитре. Это может осуществляться посредством смешения длины волны короткого красного цвета (RS) с длиной волны длинного зеленого цвета для палитры A и посредством смешения длины волны короткого красного цвета с длиной волны длинного красного цвета (RL) для палитры B. Расстояние между длинами волны длинного и короткого красного цвета и Rec2020-границей минимизируется посредством нахождения точки минимального расстояния между результирующей цветностью и Rec2020-границей или точкой пересечения. Это местоположение затем используется для того, чтобы задавать смешивающие матрицы. Например, линия улучшенного вида 600A представляет смесь длин волны длинного красного цвета и короткого зеленого цвета. Точка A представляет то, где смесь пересекается с Rec2020-палитрой.Fig. 6A illustrates an enhanced view 600A of the color chart 400 of FIG. 4. As shown in view 600A, both the short red primary R S and the long red primary RL are outside the Rec2020 color palette 402. Palette A must be matched to Rec2020 color palette 402. To define the blending matrix for red primary color R, one way is to bind the primary color to the Rec2020 palette. This can be done by mixing the short red wavelength (R S ) with the long green wavelength for palette A, and by mixing the short red wavelength with the long red wavelength (R L ) for palette B. and short red and the Rec2020 border is minimized by finding the minimum distance point between the resulting chroma and the Rec2020 border or intersection point. This location is then used to define the mixing matrices. For example, enhanced view line 600A is a mixture of long red and short green wavelengths. Point A represents where the blend intersects with the Rec2020 palette.

Другой способ для того, чтобы не привязываться к Rec2020-палитре, заключается в том, чтобы максимизировать покрытие результирующей палитры. Фиг. 6B иллюстрирует улучшенный вид 600B диаграммы 400 цветности по фиг. 4. Здесь, точка кратчайшего расстояния от линии между синим и зеленым первичными цветами Rec2020-палитры до смеси длин волны короткого красного цвета (RL) и длинного красного цвета (RS). Это приводит к использованию длинного красного цвета для палитры A и короткого красного цвета для палитры B.Another way to not be tied to the Rec2020 palette is to maximize the coverage of the resulting palette. Fig. 6B illustrates an enhanced view 600B of the color chart 400 of FIG. 4. Here, the point of the shortest distance from the line between the blue and green primary colors of the Rec2020 palette to the mixture of short red (R L ) and long red (R S ) wavelengths. This results in long red for palette A and short red for palette B.

Фиг. 7A иллюстрирует улучшенный вид 700A диаграммы 400 цветности по фиг. 4. Как показано в виде 700A, как короткий зеленый первичный цвет GS, так и длинный зеленый первичный цвет GL окружают цветовую Rec2020-палитру 402. С другой стороны, необходимо согласовывать палитру A с цветовой Rec2020-палитрой 402. Здесь, первичные цвета привязываются к Rec2020-палитре 402 посредством задания точки пересечения линии B между двумя зелеными первичными цветами с Rec2020-границей. Это местоположение затем используется для того, чтобы задавать смешивающие матрицы. Зеленая точка C иллюстрирует точку, в которой находится зеленый первичный цвет палитры A.Fig. 7A illustrates an enhanced view 700A of the color chart 400 of FIG. 4. As shown in view 700A, both the short green primary G S and the long green primary G L surround the Rec2020 color palette 402. On the other hand, it is necessary to match palette A to the Rec2020 color palette 402. Here, the primary colors are linked to the Rec2020 palette 402 by specifying the intersection point of line B between the two green primary colors with the Rec2020 border. This location is then used to define the mixing matrices. Green point C illustrates the point where the green primary color of palette A is located.

Другой способ для того, чтобы не привязываться к Rec2020-палитре, заключается в том, чтобы максимизировать покрытие результирующей палитры. Фиг. 7B иллюстрирует улучшенный вид 700B диаграммы 400 цветности по фиг. 4. Здесь, точка кратчайшего расстояния от линии между красным и синим первичными цветами Rec2020-палитры до смеси длин волны длинного зеленого цвета (GL) и короткого зеленого цвета (GS). Это приводит к использованию длин волны короткого зеленого цвета.Another way to not be tied to the Rec2020 palette is to maximize the coverage of the resulting palette. Fig. 7B illustrates an enhanced view 700B of the color chart 400 of FIG. 4. Here, the point of the shortest distance from the line between the red and blue primary colors of the Rec2020 palette to the mixture of long green (G L ) and short green ( GS ) wavelengths. This results in the use of short green wavelengths.

Фиг. 8A иллюстрирует улучшенный вид 800A диаграммы 400 цветности по фиг. 4. Как показано в виде 800A, как короткий синий первичный цвет BS, так и длинный синий первичный цвет BL находятся в цветовой Rec2020-палитре 402. Оба первичных цвета должны выступать к границе цветовой Rec2020-палитры 402. Здесь, первичные цвета привязываются к Rec2020-палитре 402 посредством задания точки пересечения линии D между длиной волны длинного синего первичного цвета и короткого зеленого цвета с Rec2020-границей. Это местоположение затем используется для того, чтобы задавать смешивающие матрицы. Точка E иллюстрирует точку, в которой находится синий первичный цвет палитры A.Fig. 8A illustrates an enhanced view 800A of the color chart 400 of FIG. 4. As shown in view 800A, both the short blue primary B S and the long blue primary B L are in the Rec2020 color palette 402. Both primary colors must protrude to the boundary of the Rec2020 color palette 402. Here, the primary colors are bound to the Rec2020 palette 402 by specifying the intersection point of line D between the wavelength of the long blue primary color and the short green color with the Rec2020 boundary. This location is then used to define the mixing matrices. Point E illustrates the point at which the blue primary color of palette A is located.

Другой способ для того, чтобы не привязывать синие первичные цвета к Rec2020-палитре, например, заключается в том, чтобы максимизировать покрытие результирующей палитры. Фиг. 8B иллюстрирует улучшенный вид 800B диаграммы 400 цветности по фиг. 4. Здесь, точка кратчайшего расстояния от линии между красным и зеленым первичными цветами Rec2020-палитры до смеси длин волны длинного синего цвета (BL) и короткого зеленого цвета (GS). Это местоположение затем используется для того, чтобы задавать смешивающие матрицы. Как проиллюстрировано, длинный синий первичный цвет используется для палитры A, тогда как короткий синий первичный цвет используется для палитры B.Another way to keep the blue primary colors from being tied to the Rec2020 palette, for example, is to maximize coverage of the resulting palette. Fig. 8B illustrates an enhanced view 800B of the color chart 400 of FIG. 4. Here, the point of the shortest distance from the line between the red and green primary colors of the Rec2020 palette to the mixture of long blue (B L ) and short green ( GS ) wavelengths. This location is then used to define the mixing matrices. As illustrated, the long blue primary is used for palette A, while the short blue primary is used for palette B.

В вышеприведенном подробном описании, пояснены конкретные варианты осуществления. Тем не менее, специалисты в данной области техники должны принимать во внимание, что различные модификации и изменения могут вноситься без отступления от объема раскрытия сущности, изложенного в нижеприведенной формуле изобретения. Следовательно, подробное описание и чертежи должны рассматриваться в иллюстративном, а не ограничительном смысле, и все подобные модификации имеют намерения включения в объем настоящих идей. Например, технологии, раскрытые в данном документе, могут применяться к проекционным системам, которые проектируются для нетрехмерного контента. Например, проекционная система с двумя головками может использовать раскрытую технологию. Кроме того, раскрытые технологии могут применяться более чем к двум проекционным головкам.In the above detailed description, specific embodiments are explained. However, those skilled in the art should appreciate that various modifications and changes may be made without departing from the scope of the disclosure set forth in the following claims. Accordingly, the detailed description and drawings are to be considered in an illustrative and not restrictive sense, and all such modifications are intended to be included within the scope of the present teachings. For example, the techniques disclosed herein may be applied to projection systems that are designed for non-3D content. For example, a dual-head projection system may use the disclosed technology. In addition, the disclosed techniques may apply to more than two projection heads.

Кроме того, в этом документе относительные термины, такие как первый и второй, верхний и нижний и т.п., могут использоваться исключительно для того, чтобы отличать один объект или действие от другого объекта или действия без обязательного требования или подразумевания какого-либо такой фактической взаимосвязи или порядка между этими объектами или действиями. Термины "содержит", "содержащий", "имеет", "имеющий", "включает в себя", "включающий в себя", "содержит в себе", "содержащий в себе" или любые другие их разновидности имеют намерение охватывать неисключительное включение, так что процесс, способ, изделие или оборудование, которое содержит, имеет, включает в себя, содержит в себе список элементов, не включает в себя только эти элементы, а может включать в себя другие элементы, не перечисленные в явном виде или внутренне присущие такому процессу, способу, изделию или оборудованию. Элемент, после которого идет "содержит...", "имеет...", "включает в себя...", "содержит в себе...", не исключает возможность, без дополнительных ограничений, наличия дополнительных идентичных элементов в процессе, способе, изделии или оборудовании, которое содержит, имеет, включает в себя, содержит в себе элемент. Термины "a" и "an" задаются как один или более, если иное не заявлено в явном виде в данном документе. Термины "практически", "по существу", "приблизительно", "примерно" или любая другая их версия задаются как нахождение близко согласно пониманию специалистами в данной области техники, и в одном неограничивающем варианте осуществления термин задается как в пределах 10%, в другом варианте осуществления - в пределах 5%, в еще одном варианте осуществления - в пределах 1%, и в еще одном другом варианте осуществления - в пределах 0,5%. Термин "соединенный", при использовании в данном документе, задается как "подключенный", хотя не обязательно непосредственно и не обязательно механически. Устройство или структура, которая "конфигурируется" определенным способом, конфигурируется, по меньшей мере, таким способом, но также может конфигурироваться способами, которые не перечисляются.Also, in this document, relative terms such as first and second, top and bottom, etc., may be used solely to distinguish one object or action from another object or action without necessarily requiring or implying any such the actual relationship or order between those objects or activities. The terms "comprises", "comprising", "has", "having", "includes", "comprising", "comprises", "comprising", or any other variations thereof, are intended to cover non-exclusive inclusion , so that a process, method, product or equipment that contains, has, includes, contains a list of elements, does not include only these elements, but may include other elements not explicitly listed or inherent such process, method, product or equipment. An element followed by "contains...", "has...", "includes...", "contains..." does not exclude the possibility, without further limitation, of additional identical elements in process, method, product or equipment that contains, has, includes, contains an element. The terms "a" and "an" are defined as one or more unless otherwise explicitly stated herein. The terms "substantially", "substantially", "about", "about" or any other version thereof are defined as being close as understood by those skilled in the art, and in one non-limiting embodiment the term is defined as being within 10%, in another in an embodiment, within 5%, in yet another embodiment, within 1%, and in yet another embodiment, within 0.5%. The term "connected", as used herein, is defined as "connected", although not necessarily directly and not necessarily mechanically. A device or structure that is "configured" in a certain way is configured in at least that way, but may also be configured in ways that are not listed.

Следует принимать во внимание, что некоторые варианты осуществления могут состоять из одного или более общих или специализированных процессоров (или "устройств обработки"), таких как микропроцессоры, процессоры цифровых сигналов, специализированные процессоры и программируемые пользователем вентильные матрицы (FPGA), и уникальных сохраненных программных инструкций (включающих как программное обеспечение, так и микропрограммное обеспечение), которые управляют одним или более процессорами таким образом, чтобы реализовывать, вместе с определенными непроцессорными схемами, некоторые, большинство или все функции способа и/или оборудования, описанные в данном документе. Альтернативно, часть или все функции могут реализовываться посредством машины состояний, которая не хранит программные инструкции, либо в одной или более специализированных интегральных схем (ASIC), в которых каждая функция или некоторые комбинации конкретных функций реализуются как настраиваемая логика. Разумеется, может использоваться комбинация двух означенных подходов.It should be appreciated that some embodiments may consist of one or more general or specialty processors (or "processors"), such as microprocessors, digital signal processors, specialty processors, and field programmable gate arrays (FPGAs), and unique stored software instructions (including both software and firmware) that control one or more processors so as to implement, together with certain non-processor circuitry, some, most, or all of the method and/or hardware functions described herein. Alternatively, some or all of the functions may be implemented in a state machine that does not store program instructions, or in one or more application specific integrated circuits (ASICs) in which each function, or some combination of specific functions, is implemented as custom logic. Of course, a combination of the two approaches mentioned can be used.

Кроме того, вариант осуществления может реализовываться как машиночитаемый носитель хранения данных, имеющий сохраненным машиночитаемый код для программирования компьютера (к примеру, содержащего процессор), чтобы осуществлять способ, описанный и заявленный в данном документе. Примеры таких машиночитаемых носителей хранения данных включают в себя, но не только, жесткий диск, CD-ROM, оптическое устройство хранения данных, магнитное устройство хранения данных, ROM (постоянное запоминающее устройство), PROM (программируемое постоянное запоминающее устройство), EPROM (стираемое программируемое постоянное запоминающее устройство), EEPROM (электрически стираемое программируемое постоянное запоминающее устройство) и флэш-память. Кроме того, ожидается, что специалисты в данной области техники, несмотря на, возможно, значительные усилия и множество проектных решений, обусловленных, например, доступным временем, современной технологией и экономическими соображениями, если руководствуются концепциями и принципами, раскрытыми в данном документе, допускают простое формирование таких программных инструкций и программ и IC с минимальным экспериментированием.In addition, an embodiment may be implemented as a computer-readable storage medium having stored computer-readable code for programming a computer (eg, including a processor) to carry out the method described and claimed herein. Examples of such computer-readable storage media include, but are not limited to, hard disk, CD-ROM, optical storage, magnetic storage, ROM (Read Only Memory), PROM (Programmable Read Only Memory), EPROM (Erasable Programmable Memory). Read Only Memory), EEPROM (Electrically Erasable Programmable Read Only Memory), and Flash Memory. In addition, it is expected that those skilled in the art, despite possibly significant effort and many design decisions due to, for example, available time, current technology and economic considerations, if guided by the concepts and principles disclosed in this document, allow a simple the formation of such program instructions and programs and IC with minimal experimentation.

Различные аспекты настоящего изобретения могут приниматься во внимание из следующих перечислимых примерных вариантов осуществления (EEE):Various aspects of the present invention may be taken into account from the following enumerated exemplary embodiments (EEE):

1. Система отображения с двумя головками, содержащая:1. Display system with two heads, containing:

- первую проекционную головку;- the first projection head;

- вторую проекционную головку;- second projection head;

- по меньшей мере, один пространственный модулятор; и- at least one spatial modulator; and

- электронный процессор, выполненный с возможностью:- an electronic processor configured to:

- принимать двумерные видеоданные;- receive two-dimensional video data;

- формировать, из видеоданных, первое множество значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второе множество значений интенсивности второй виртуальной цветовой палитры, причем первое множество значений интенсивности составляют ниже порогового значения яркости и аппроксимируют предварительно заданную цветовую палитру, и причем второе множество значений интенсивности составляют выше порогового значения яркости;- to form, from the video data, the first set of intensity values of the virtual primary colors of the first virtual color palette and the second set of intensity values of the second virtual color palette, the first set of intensity values being below the threshold brightness value and approximating the predetermined color palette, and the second set of intensity values are above the brightness threshold value;

- преобразовывать первое множество значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов первой проекционной головки и второе множество значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов второй проекционной головки; и- converting the first set of intensity values into the third set of intensity values of the predefined primary colors of the first projection head and the second set of intensity values into the fourth set of intensity values of the predefined primary colors of the second projection head; and

- динамически регулировать пиксельные уровни, по меньшей мере, одного пространственного модулятора первой и второй проекционных головок на основе третьего множества значений интенсивности и четвертого множества значений интенсивности.- dynamically adjust the pixel levels of at least one spatial modulator of the first and second projection heads based on the third set of intensity values and the fourth set of intensity values.

2. Система по EEE 1, в которой пороговое значение яркости представляет собой вектор пороговых значений, включающий в себя пороговое значение для каждого цветового канала первой виртуальной цветовой палитры.2. An EEE 1 system wherein the luminance threshold is a threshold vector including a threshold for each color channel of the first virtual color palette.

3. Система по EEE 2, в которой каждое пороговое значение определяется на основе преобразования первой виртуальной цветовой палитры и второй виртуальной цветовой палитры в предварительно заданную цветовую палитру.3. An EEE 2 system in which each threshold value is determined based on the transformation of the first virtual color palette and the second virtual color palette into a predetermined color palette.

4. Система по любому из EEE 1-3, в которой любые отрицательные значения для первого множества значений интенсивности и второго множества значений интенсивности отсекаются.4. The system of any one of EEE 1-3, wherein any negative values for the first intensity value set and the second intensity value set are cut off.

5. Система по любому из EEE 1-4, в которой любые отрицательные значения для третьего множества значений интенсивности и четвертого множества значений интенсивности отсекаются.5. The system of any one of EEE 1-4, wherein any negative values for the third intensity value set and the fourth intensity value set are cut off.

6. Способ для отображения данных изображений, при этом способ содержит:6. A method for displaying image data, the method comprising:

- прием двумерных видеоданных;- reception of two-dimensional video data;

- формирование, из видеоданных, первого множества значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второго множества значений интенсивности второй виртуальной цветовой палитры, причем первое множество значений интенсивности первой виртуальной цветовой палитры составляют ниже порогового значения яркости и аппроксимируют предварительно заданную цветовую палитру, и причем второе множество значений интенсивности составляют выше порогового значения яркости;- generating, from the video data, a first set of intensity values of the virtual primary colors of the first virtual color palette and a second set of intensity values of the second virtual color palette, wherein the first set of intensity values of the first virtual color palette are below a threshold brightness value and approximate a predetermined color palette, and moreover the second set of intensity values are above the brightness threshold value;

- преобразование первого множества значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов первой проекционной головки системы отображения и второго множества значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов второй проекционной головки системы отображения; и- converting the first set of intensity values into a third set of intensity values of predefined primary colors of the first projection head of the display system and the second set of intensity values into a fourth set of intensity values of predefined primary colors of the second projection head of the display system; and

- динамическое регулирование пиксельных уровней пространственных модуляторов первой проекционной головки и второй проекционной головки системы отображения на основе третьего множества значений интенсивности и четвертого множества значений интенсивности.- dynamically adjusting the pixel levels of the spatial modulators of the first projection head and the second projection head of the display system based on the third set of intensity values and the fourth set of intensity values.

7. Способ по EEE 6, в котором пороговое значение яркости представляет собой вектор пороговых значений, включающий в себя пороговое значение для каждого цветового канала.7. The EEE 6 method, wherein the luminance threshold is a threshold vector including a threshold for each color channel.

8. Способ по EEE 7, в котором каждое пороговое значение определяется на основе преобразования первой виртуальной цветовой палитры в предварительно заданную цветовую палитру.8. The method according to EEE 7, wherein each threshold value is determined based on the transformation of the first virtual color palette into a predetermined color palette.

9. Способ по любому из EEE 6-8, в котором любые отрицательные значения для первого множества значений интенсивности и второго множества значений интенсивности отсекаются.9. A method according to any one of EEE 6-8, wherein any negative values for the first intensity value set and the second intensity value set are cut off.

10. Способ по любому из EEE 6-9, в котором любые отрицательные значения для третьего множества значений интенсивности и четвертого множества значений интенсивности отсекаются.10. A method according to any one of EEE 6-9, wherein any negative values for the third intensity value set and the fourth intensity value set are cut off.

11. Способ по любому из EEE 6-10, в котором преобразование первого множества значений интенсивности в третье множество значений интенсивности и второго множества значений интенсивности в четвертое множество значений интенсивности выполняется через смешивающую функцию.11. The method according to any of EEE 6-10, wherein the conversion of the first intensity value set to the third intensity value set and the second intensity value set to the fourth intensity value set is performed via a blending function.

12. Способ для отображения данных изображений, при этом способ содержит:12. A method for displaying image data, the method comprising:

- прием видеоданных;- reception of video data;

- формирование, на основе уровня интенсивности видеоданных, первого множества значений интенсивности, ассоциированных с первой виртуальной цветовой палитрой;- generating, based on the intensity level of the video data, a first set of intensity values associated with the first virtual color palette;

- формирование, на основе сравнения между уровнем интенсивности и, по меньшей мере, одним предварительно определенным пороговым значением, второго множества значений интенсивности, ассоциированных со второй виртуальной цветовой палитрой;- generating, based on a comparison between the intensity level and at least one predetermined threshold value, a second set of intensity values associated with the second virtual color palette;

- формирование, на основе первого множества и второго множества значений интенсивности, третьего множества значений интенсивности и четвертого множества значений интенсивности, оба из которых выполнены с возможностью аппроксимировать предварительно заданное цветовое пространство, ассоциированное с видеоданными; и- generating, based on the first set and the second set of intensity values, the third set of intensity values and the fourth set of intensity values, both of which are configured to approximate a predetermined color space associated with video data; and

- предоставление третьего множества значений интенсивности и четвертого множества значений интенсивности, по меньшей мере, в один пространственный светомодулятор.providing a third set of intensity values and a fourth set of intensity values to at least one spatial light modulator.

13. Способ по EEE 12, в котором в случае, если уровень интенсивности не превышает предварительно определенное пороговое значение, второе множество значений интенсивности задаются равными нулю.13. The method according to EEE 12, wherein if the intensity level does not exceed a predetermined threshold value, the second set of intensity values is set to zero.

14. Способ по EEE 12 или 13, в котором второе множество значений интенсивности задаются на основе величины, на которую уровень интенсивности превышает предварительно определенное пороговое значение, когда уровень интенсивности превышает предварительно определенное пороговое значение.14. The method of EEE 12 or 13, wherein the second set of intensity values are set based on the amount by which the intensity level exceeds the predetermined threshold when the intensity level exceeds the predetermined threshold.

15. Способ по любому из EEE 12-14, при этом способ дополнительно содержит: модификацию любого одного или обоих из первого множества значений интенсивности и второго множества значений интенсивности, когда, по меньшей мере, одно значение интенсивности находится за пределами достижимого объема палитр для первой виртуальной палитры и второй виртуальной палитры.15. The method according to any one of EEE 12-14, the method further comprising: modifying any one or both of the first set of intensity values and the second set of intensity values when at least one intensity value is outside the achievable palette volume for the first virtual palette and a second virtual palette.

16. Способ по любому из EEE 12-15, при этом способ дополнительно содержит: модификацию любого одного или обоих из третьего множества значений интенсивности и четвертого множества значений интенсивности, когда, по меньшей мере, одно значение интенсивности находится за пределами достижимого объема палитр для первой виртуальной палитры и второй виртуальной палитры.16. The method according to any one of EEE 12-15, the method further comprising: modifying any one or both of the third set of intensity values and the fourth set of intensity values, when at least one intensity value is outside the achievable volume of palettes for the first virtual palette and a second virtual palette.

17. Способ по любому из EEE 12-16, в котором, по меньшей мере, одно предварительно определенное пороговое значение представляет собой вектор на основе взаимосвязи между первой виртуальной цветовой палитрой и второй виртуальной цветовой палитрой в предварительно заданном цветовом пространстве.17. The method of any one of EEE 12-16, wherein the at least one predetermined threshold is a vector based on a relationship between a first virtual color palette and a second virtual color palette in a predetermined color space.

18. Способ по любому из EEE 12-17, при этом способ дополнительно содержит задание первой виртуальной цветовой палитры на основе комбинации множества первичных цветов отображения, ассоциированных с источником света, чтобы аппроксимировать предварительно заданную цветовую палитру, ассоциированную с предварительно заданным цветовым пространством и второй виртуальной цветовой палитрой, на основе остаточной мощности источника света и первой виртуальной цветовой палитры.18. The method of any one of EEE 12-17, the method further comprising specifying a first virtual color palette based on a combination of a plurality of display primary colors associated with a light source to approximate a predefined color palette associated with the predefined color space and a second virtual color palette, based on the residual power of the light source and the first virtual color palette.

19. Способ по любому из EEE 12-18, в котором, по меньшей мере, один пространственный светомодулятор составляет часть проектора с двумя головками.19. The method of any one of EEE 12-18, wherein the at least one spatial light modulator is part of a dual head projector.

20. Способ по EEE 19, в котором проектор с двумя головками отображает двумерное изображение на основе третьего множества значений интенсивности и четвертого множества значений интенсивности.20. The EEE 19 method, wherein the dual-head projector displays a two-dimensional image based on a third intensity value set and a fourth intensity value set.

21. Энергонезависимый машиночитаемый носитель, сохраняющий инструкции, которые, при выполнении посредством процессора компьютера, инструктируют компьютеру выполнять операции, содержащие:21. A non-volatile computer-readable medium that stores instructions that, when executed by a computer processor, instructs the computer to perform operations comprising:

- прием двумерных видеоданных, включающих в себя трехцветные пиксельные значения предварительно заданных первичных цветов предварительно заданного цветового пространства;- receiving two-dimensional video data including three-color pixel values of predefined primary colors of a predefined color space;

- формирование, из видеоданных, первого множества значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второго множества значений интенсивности второй виртуальной цветовой палитры, чтобы аппроксимировать предварительно заданную цветовую палитру, причем первое множество значений интенсивности составляют ниже порогового значения яркости первой виртуальной цветовой палитры, и причем второе множество значений интенсивности составляют выше порогового значения яркости;- generating, from the video data, a first set of intensity values of the virtual primary colors of the first virtual color palette and a second set of intensity values of the second virtual color palette to approximate a predetermined color palette, the first set of intensity values being below the threshold value of the brightness of the first virtual color palette, and and the second set of intensity values are above the threshold value of the brightness;

- преобразование, через смешивающую функцию, первого множества значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов и второго множества значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов; и- converting, via a blending function, the first set of intensity values into a third set of intensity values of predefined primary colors and the second set of intensity values into a fourth set of intensity values of predefined primary colors; and

- динамическое регулирование пиксельных уровней, по меньшей мере, одного пространственного модулятора проекционной системы с двумя головками на основе третьего множества значений интенсивности и четвертого множества значений интенсивности.- dynamically adjusting pixel levels of at least one spatial modulator of the dual-head projection system based on a third set of intensity values and a fourth set of intensity values.

Claims (26)

1. Система отображения с двумя головками, содержащая:1. Display system with two heads, containing: - первую проекционную головку;- the first projection head; - вторую проекционную головку;- second projection head; - по меньшей мере один пространственный модулятор и- at least one spatial modulator and - электронный процессор, выполненный с возможностью:- an electronic processor configured to: - принимать двумерные видеоданные;- receive two-dimensional video data; - формировать, из видеоданных, первое множество значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второе множество значений интенсивности виртуальных первичных цветов второй виртуальной цветовой палитры, причем первое множество значений интенсивности составляют ниже порогового значения яркости и аппроксимируют предварительно заданную цветовую палитру и причем второе множество значений интенсивности составляют выше порогового значения яркости;- to form, from the video data, the first set of intensity values of the virtual primary colors of the first virtual color palette and the second set of intensity values of the virtual primary colors of the second virtual color palette, the first set of intensity values being below the threshold brightness value and approximating the predetermined color palette, and the second set intensity values are above the brightness threshold value; - преобразовывать первое множество значений интенсивности и второе множество значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов первой проекционной головки и в четвертое множество значений интенсивности предварительно заданных первичных цветов второй проекционной головки соответственно и- converting the first set of intensity values and the second set of intensity values into a third set of intensity values of the predefined primary colors of the first projection head and into a fourth set of intensity values of the predefined primary colors of the second projection head, respectively, and - динамически регулировать пиксельные уровни по меньшей мере одного пространственного модулятора первой и второй проекционных головок на основе третьего множества значений интенсивности и четвертого множества значений интенсивности;- dynamically adjust the pixel levels of at least one spatial modulator of the first and second projection heads based on the third set of intensity values and the fourth set of intensity values; - при этом пороговое значение яркости представляет собой вектор пороговых значений, включающий в себя пороговое значение для каждого цветового канала первой виртуальной цветовой палитры, и при этом каждое пороговое значение определяется на основе преобразования первой виртуальной цветовой палитры в предварительно заданную цветовую палитру.wherein the brightness threshold value is a threshold vector including a threshold value for each color channel of the first virtual color palette, and each threshold value is determined based on the transformation of the first virtual color palette into a predetermined color palette. 2. Система по п. 1, в которой любые отрицательные значения для первого множества значений интенсивности и второго множества значений интенсивности отсекаются.2. The system of claim. 1, in which any negative values for the first set of intensity values and the second set of intensity values are cut off. 3. Система по любому из пп. 1 или 2, в которой любые отрицательные значения для третьего множества значений интенсивности и четвертого множества значений интенсивности отсекаются.3. The system according to any one of paragraphs. 1 or 2, in which any negative values for the third intensity value set and the fourth intensity value set are cut off. 4. Система по любому из пп. 1-3, в которой система отображения с двумя головками выполнена с возможностью отображать двумерное изображение на основе третьего множества значений интенсивности и четвертого множества значений интенсивности.4. The system according to any one of paragraphs. 1-3, in which the dual-head display system is configured to display a two-dimensional image based on a third set of intensity values and a fourth set of intensity values. 5. Способ для отображения данных изображений, при этом способ содержит этапы, на которых:5. A method for displaying image data, the method comprising the steps of: - принимают двумерные видеоданные;- receive two-dimensional video data; - формируют, из видеоданных, первое множество значений интенсивности виртуальных первичных цветов первой виртуальной цветовой палитры и второе множество значений интенсивности виртуальных первичных цветов второй виртуальной цветовой палитры, причем первое множество значений интенсивности первой виртуальной цветовой палитры составляют ниже порогового значения яркости и аппроксимируют предварительно заданную цветовую палитру и причем второе множество значений интенсивности составляют выше порогового значения яркости;- form, from video data, the first set of intensity values of virtual primary colors of the first virtual color palette and the second set of intensity values of virtual primary colors of the second virtual color palette, wherein the first set of intensity values of the first virtual color palette are below the threshold value of brightness and approximate a predetermined color palette and moreover, the second set of intensity values are above the threshold value of brightness; - преобразуют первое множество значений интенсивности и второе множество значений интенсивности в третье множество значений интенсивности предварительно заданных первичных цветов первой проекционной головки системы отображения и преобразуют первое множество значений интенсивности и второе множество значений интенсивности в четвертое множество значений интенсивности предварительно заданных первичных цветов второй проекционной головки системы отображения и- converting the first set of intensity values and the second set of intensity values into the third set of intensity values of predefined primary colors of the first projection head of the display system and converting the first set of intensity values and the second set of intensity values into the fourth set of intensity values of predefined primary colors of the second projection head of the display system and - динамически регулируют пиксельные уровни по меньшей мере одного пространственного модулятора первой проекционной головки и второй проекционной головки системы отображения на основе третьего множества значений интенсивности и четвертого множества значений интенсивности;dynamically adjusting pixel levels of at least one spatial modulator of the first projection head and the second projection head of the display system based on the third set of intensity values and the fourth set of intensity values; - при этом пороговое значение яркости представляет собой вектор пороговых значений, включающий в себя пороговое значение для каждого цветового канала, и при этом каждое пороговое значение определяется на основе преобразования первой виртуальной цветовой палитры в предварительно заданную цветовую палитру.wherein the luminance threshold is a threshold vector including a threshold for each color channel, and each threshold is determined based on the transformation of the first virtual color palette into a predetermined color palette. 6. Способ по п. 5, в котором любые отрицательные значения для первого множества значений интенсивности и второго множества значений интенсивности отсекаются.6. The method of claim 5, wherein any negative values for the first intensity value set and the second intensity value set are cut off. 7. Способ по любому из пп. 5 или 6, в котором любые отрицательные значения для третьего множества значений интенсивности и четвертого множества значений интенсивности отсекаются.7. The method according to any one of paragraphs. 5 or 6, in which any negative values for the third intensity value set and the fourth intensity value set are cut off. 8. Способ по любому из пп. 5-7, в котором преобразование первого множества значений интенсивности и второго множества значений интенсивности в третье множество значений интенсивности и преобразование первого множества значений интенсивности и второго множества значений интенсивности в четвертое множество значений интенсивности выполняется через смешивающую функцию.8. The method according to any one of paragraphs. 5-7, wherein the transformation of the first intensity value set and the second intensity value set into the third intensity value set, and the transformation of the first intensity value set and the second intensity value set into the fourth intensity value set is performed via a blending function. 9. Способ по любому из пп. 5-8, при этом способ дополнительно содержит этап, на котором модифицируют любое одно или оба из первого множества значений интенсивности и второго множества значений интенсивности, когда по меньшей мере одно значение интенсивности находится за пределами достижимого объема палитр для первой виртуальной палитры и второй виртуальной палитры.9. The method according to any one of paragraphs. 5-8, wherein the method further comprises modifying any one or both of the first set of intensity values and the second set of intensity values when at least one intensity value is outside the achievable palette volume for the first virtual palette and the second virtual palette . 10. Способ по любому из пп. 5-9, при этом способ дополнительно содержит этап, на котором модифицируют любое одно или оба из третьего множества значений интенсивности и четвертого множества значений интенсивности, когда по меньшей мере одно значение интенсивности находится за пределами достижимого объема палитр для первой виртуальной палитры и второй виртуальной палитры.10. The method according to any one of paragraphs. 5-9, the method further comprising modifying any one or both of the third set of intensity values and the fourth set of intensity values when at least one intensity value is outside the achievable palette volume for the first virtual palette and the second virtual palette . 11. Способ по любому из пп. 5-10, при этом способ дополнительно содержит этап, на котором задают первую виртуальную цветовую палитру на основе комбинации множества первичных цветов отображения, ассоциированных с источником света, чтобы аппроксимировать предварительно заданную цветовую палитру, ассоциированную с предварительно заданным цветовым пространством и второй виртуальной цветовой палитрой, на основе остаточной мощности источника света и первой виртуальной цветовой палитры.11. The method according to any one of paragraphs. 5-10, wherein the method further comprises defining a first virtual color palette based on a combination of a plurality of display primary colors associated with a light source to approximate a predetermined color palette associated with a predetermined color space and a second virtual color palette, based on the residual power of the light source and the first virtual color palette. 12. Энергонезависимый машиночитаемый носитель, сохраняющий инструкции, которые, при выполнении посредством процессора компьютера, инструктируют компьютеру выполнять операции согласно любому из способов по пп. 5-11.12. Non-volatile computer-readable media that stores instructions that, when executed by a computer processor, instruct the computer to perform operations according to any of the methods according to claims. 5-11.
RU2020128579A 2018-12-27 2019-12-10 Rendering images with wide colour palette, displaying two-dimensional images on displays capable of displaying three-dimensional images RU2772236C2 (en)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201862785470P 2018-12-27 2018-12-27
US62/785,470 2018-12-27
EP19155881.6 2019-02-07
EP19155881 2019-02-07
PCT/US2019/065330 WO2020139546A1 (en) 2018-12-27 2019-12-10 Rendering wide color gamut, two-dimensional (2d) images on three-dimensional (3d) capable displays

Publications (3)

Publication Number Publication Date
RU2020128579A RU2020128579A (en) 2022-02-28
RU2020128579A3 RU2020128579A3 (en) 2022-02-28
RU2772236C2 true RU2772236C2 (en) 2022-05-18

Family

ID=

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050206979A1 (en) * 2004-03-18 2005-09-22 Kazunari Tomizawa Color signal converter, display unit, color signal conversion program, computer-readable storage medium storing color signal conversion program, and color signal conversion method
RU2294002C2 (en) * 2005-03-25 2007-02-20 Самсунг Электроникс Ко., Лтд. Projection system
US20110285705A1 (en) * 2008-01-29 2011-11-24 Ellinger Carolyn R 2d/3d switchable color display apparatus with narrow band emitters
US20170118461A1 (en) * 2008-05-29 2017-04-27 Seiko Epson Corporation Electro-optic device and stereoscopic vision display apparatus
WO2017223355A1 (en) * 2016-06-22 2017-12-28 Dolby Laboratories Licensing Corporation Rendering wide color gamut, two-dimensional (2d) images on three-dimensional (3d) capable displays

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050206979A1 (en) * 2004-03-18 2005-09-22 Kazunari Tomizawa Color signal converter, display unit, color signal conversion program, computer-readable storage medium storing color signal conversion program, and color signal conversion method
RU2294002C2 (en) * 2005-03-25 2007-02-20 Самсунг Электроникс Ко., Лтд. Projection system
US20110285705A1 (en) * 2008-01-29 2011-11-24 Ellinger Carolyn R 2d/3d switchable color display apparatus with narrow band emitters
US20170118461A1 (en) * 2008-05-29 2017-04-27 Seiko Epson Corporation Electro-optic device and stereoscopic vision display apparatus
WO2017223355A1 (en) * 2016-06-22 2017-12-28 Dolby Laboratories Licensing Corporation Rendering wide color gamut, two-dimensional (2d) images on three-dimensional (3d) capable displays

Similar Documents

Publication Publication Date Title
JP2000358252A (en) Extended color correction
JP7444919B2 (en) Drawing wide color gamut two-dimensional (2D) images on three-dimensional (3D) compatible displays
US11606545B2 (en) Rendering wide color gamut, two-dimensional (2D) images on three-dimensional (3D) capable displays
EP4097970B1 (en) Projection system and method with blended color gamut
RU2772236C2 (en) Rendering images with wide colour palette, displaying two-dimensional images on displays capable of displaying three-dimensional images
KR20110070835A (en) Full visible gamut color video display
Kim et al. Wide color gamut five channel multi-primary display for HDTV application