RU2020117045A

RU2020117045A - Восприятия многослойных дополненных развлечений

Info

Publication number: RU2020117045A
Application number: RU2020117045A
Authority: RU
Inventors: Аджит НИНАН; Нил МАММЕН; Тайром И. БРАУН
Original assignee: Долби Лэборетериз Лайсенсинг Корпорейшн
Priority date: 2017-04-11
Filing date: 2018-04-10
Publication date: 2020-07-27
Also published as: RU2020117045A3; BR112019016820B1; US10991164B2; CN113660539A; ES2902979T3; US20200388077A1; CN111406412A; KR102087414B1; RU2722495C1; US11893700B2; JP2020123952A; CN113709439A; EP3610654B1; US20220254126A1; JP6654275B1; KR20200026328A; CN111406412B; RU2743518C2; EP3610654A1; BR112019016820A2

Claims

1. Способ, содержащий этапы, на которых:

принимают многослойный многовидовой видеосигнал, содержащий одно или более однослойных киноизображений в слое киноизображений и одно или более однослойных изображений, предназначенных для устройства, в одном или более слоях изображений, предназначенных для устройства, причем однослойные киноизображения в слое киноизображений и однослойные изображения, предназначенные для устройства, в одном или более слоях изображений, предназначенных для устройства, ранее извлечены из одного или более многовидовых немногослойных изображений;

извлекают из слоя киноизображений многослойного многовидового видеосигнала одно или более однослойных киноизображений, причем одно или более однослойных киноизображений иллюстрируют первые визуальные объекты во множестве визуальных объектов, как первоначально проиллюстрировано посредством одного или более многовидовых немногослойных изображений;

извлекают из одного или более слоев изображений, предназначенных для устройства, многослойного многовидового видеосигнала одно или более однослойных изображений, предназначенных для устройства, причем одно или более изображений, предназначенных для устройства, иллюстрируют один или более вторых визуальных объектов во множестве визуальных объектов, как первоначально проиллюстрировано посредством одного или более многовидовых немногослойных изображений;

обеспечивают выполнение рендеринга первых визуальных объектов, как проиллюстрировано в одном или более однослойных киноизображениях, для зрителя на кинодисплее в трехмерном пространстве;

обеспечивают параллельное выполнение рендеринга одного или более вторых визуальных объектов, как проиллюстрировано в одном или более однослойных изображениях, предназначенных для устройства, для зрителя на дисплее устройства в трехмерном пространстве;

при этом пространственная информация, описывающая пространственные местоположения в пространстве трехмерных изображений, в котором расположено множество визуальных объектов, ранее использовалась для сегментирования множества визуальных объектов, как первоначально проиллюстрировано посредством одного или более многовидовых немногослойных изображений, на слой киноизображений и один или более слоев изображений, предназначенных для устройства.

2. Способ по п.1, в котором дисплей устройства является пространственно перемещаемым с одной или более степенями свободы относительно кинодисплея.

3. Способ по п.1, в котором дисплей устройства используется носимым устройством, чтобы выполнять рендеринг изображений; при этом дисплей устройства является пространственно фиксированным относительно носимого устройства.

4. Способ по п.1, в котором кинодисплей представляет собой стационарный дисплей, при этом дисплей устройства представляет наголовный дисплей носимого устройства, используемого зрителем.

5. Способ по п.1, в котором кинодисплей в трехмерном пространстве используется для того, чтобы задавать поверхность разделения слоев в пространстве трехмерных изображений; при этом множество визуальных объектов сегментируются на первые визуальные объекты и один или более вторых визуальных объектов, по меньшей мере, отчасти на основе пространственных взаимосвязей множества визуальных объектов относительно поверхности разделения слоев.

6. Способ по п.5, в котором один или более вторых визуальных объектов выбираются из множества визуальных объектов на основе пространственных расстояний до поверхности разделения слоев.

7. Способ по п.5, в котором по меньшей мере один визуальный объект из множества визуальных объектов идет по поверхности разделения слоев; причем первые визуальные объекты включают в себя часть этого по меньшей мере одного визуального объекта; при этом один или более вторых визуальных объектов включают в себя оставшуюся часть данного по меньшей мере одного визуального объекта.

8. Способ по п.1, в котором кинодисплей представляет пространственную поверхность с нулевым параллаксом в трехмерном пространстве; при этом визуальный объект, проиллюстрированный посредством отображаемого киноизображения как находящийся позади кинодисплея, имеет положительные параллаксы; причем визуальный объект, проиллюстрированный посредством отображаемого киноизображения как находящийся перед кинодисплеем, имеет отрицательные параллаксы; при этом множество визуальных объектов сегментируются на первые визуальные объекты и один или более вторых визуальных объектов на основе отдельных параллаксов отдельных визуальных объектов во множестве визуальных объектов.

9. Способ по п.8, в котором все визуальные объекты в одном или более вторых визуальных объектах должны иметь отрицательные параллаксы, если рендеринг одного или более вторых визуальных объектов должен был выполняться посредством отображаемых киноизображений, рендеринг которых осуществлялся на кинодисплее.

10. Способ по п.8, в котором по меньшей мере один визуальный объект в одном или более вторых визуальных объектах должен иметь положительный параллакс, если рендеринг одного или более вторых визуальных объектов выполнялся посредством отображаемых киноизображений, рендеринг которых осуществлялся на кинодисплее.

11. Способ по п.1, дополнительно содержащий этап, на котором: обеспечивают выполнение рендеринга двух разных поднаборов визуальных объектов в одном или более вторых визуальных объектах, как проиллюстрировано в одном или более однослойных изображениях, предназначенных для устройства, на дисплее устройства в двух разных плоскостях изображений с двумя разными расстояниями до зрителя.

12. Способ по п.1, в котором дисплей устройства выполняет рендеринг отображаемых изображений, предназначенных для устройства, в плоскости изображений с расстоянием, которое является настраиваемым на основе углов вергентности зрителя.

13. Способ по п.1, в котором дисплей устройства выполняет рендеринг отображаемых изображений, предназначенных для устройства, в плоскости изображений с расстоянием, которое является фиксированным относительно зрителя.

14. Способ по п.1, дополнительно содержащий этап, на котором адаптируют одно или более однослойных изображений, предназначенных для устройства, к отображаемым изображениям, предназначенным для устройства, с использованием пространственных преобразований на основе одного или более из конкретных пространственных позиций и конкретных пространственных направлений носимого устройства, которое включает в себя дисплей устройства.

15. Способ по п.14, в котором пространственные преобразования восстанавливают тензорную модель, которая ранее использовалась для формирования слоя киноизображений и одного или более слоев изображений, предназначенных для устройства, из одного или более многовидовых немногослойных изображений.

16. Способ по п.1, в котором отображаемые киноизображения, рендеринг которых осуществляется на кинодисплее, представляют одно из следующего: двумерные изображения и трехмерные изображения.

17. Способ по п.1, в котором носимое устройство, которое включает в себя дисплей устройства, находится в числе носимых устройств в трехмерном пространстве, которые автоматически регистрируются в мультимедийной системе для приема контента изображений, предназначенных для устройства, рендеринг которых должен параллельно выполняться по мере того, как рендеринг контента киноизображений выполняется на кинодисплее.

18. Способ по п.17, в котором носимые устройства автоматически регистрируются в мультимедийной системе на основе одного или более из следующего: конкретные посадочные позиции на основе конкретных выданных билетов для зрителей носимых устройств, реперные маркеры, встраиваемые в контент киноизображений или в окружающие пространственные области на кинодисплее, световые лучи, кодированные с идентификационной информацией устройства, радиочастотное (RF) обнаружение местоположения и конкретные зоны области аудитории в трехмерном пространстве.

19. Способ по п.1, в котором носимое устройство, которое включает в себя дисплей устройства, находится в числе носимых устройств в трехмерном пространстве, которое разделено на множество зон в области аудитории в трехмерном пространстве; при этом первые носимые устройства в первой зоне во множестве зон принимают контент изображений, предназначенных для устройства, из первого сервера контента изображений, предназначенных для устройства; при этом вторые носимые устройства во второй зоне во множестве зон принимают контент изображений, предназначенных для устройства, из второго сервера контента изображений, предназначенных для устройства.

20. Способ по п.1, дополнительно содержащий этап, на котором отслеживают носимые устройства с помощью узлов датчиков устройств, которые устанавливаются в одном или более пространственных местоположениях установки в трехмерном пространстве.

21. Способ по п.20, в котором по меньшей мере один из узлов датчиков устройств находится в одном из следующего: потолок, стена, пол, пространственные области около кинодисплея, пространственные области вдали от кинодисплея, посадочные места и спинки сидений в трехмерном пространстве.