RU2019112864A - Способы, устройства и поток для обеспечения указания отображения всенаправленных изображений - Google Patents

Способы, устройства и поток для обеспечения указания отображения всенаправленных изображений Download PDF

Info

Publication number
RU2019112864A
RU2019112864A RU2019112864A RU2019112864A RU2019112864A RU 2019112864 A RU2019112864 A RU 2019112864A RU 2019112864 A RU2019112864 A RU 2019112864A RU 2019112864 A RU2019112864 A RU 2019112864A RU 2019112864 A RU2019112864 A RU 2019112864A
Authority
RU
Russia
Prior art keywords
video
multidimensional
indication
sampling space
intermediate sampling
Prior art date
Application number
RU2019112864A
Other languages
English (en)
Inventor
Фабрис ЛЕЛЕАННЕК
Франк ГАЛЬПЭН
Гаган РАТ
Original Assignee
ИНТЕРДИДЖИТАЛ ВиСи ХОЛДИНГЗ, ИНК.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ИНТЕРДИДЖИТАЛ ВиСи ХОЛДИНГЗ, ИНК. filed Critical ИНТЕРДИДЖИТАЛ ВиСи ХОЛДИНГЗ, ИНК.
Publication of RU2019112864A publication Critical patent/RU2019112864A/ru

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/08Volume rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/10Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • G06T3/12
    • G06T3/16
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Claims (30)

1. Способ, содержащий этапы, на которых:
- передают (193) кодированное изображение видео, причем видео представляет собой 2D видео, на которое отображено всенаправленное видео; и
- передают указание отображения всенаправленного видео на 2D видео, причем указание содержит обобщенный элемент отображения, упомянутый обобщенный элемент отображения содержит для положения пиксела выборки в многомерном промежуточном пространстве дискретизации, 2D координаты (x,y) пиксела на кодированном изображении видео, причем многомерное промежуточное пространство дискретизации содержит набор из по меньшей мере одной параметрической поверхности, на которую проецируется изображение всенаправленного видео.
2. Способ, содержащий этапы, на которых:
- получают (211) кодированное изображение видео, причем видео представляет собой 2D видео, на которое отображено всенаправленное видео; и
- получают (211) указание (MI) отображения всенаправленного видео на 2D видео, причем указание содержит обобщенный элемент отображения, содержащий для положения пиксела выборки в многомерном промежуточном пространстве дискретизации, 2D координаты пиксела на кодированном изображении видео, причем многомерное промежуточное пространство дискретизации содержит набор из по меньшей мере одной параметрической поверхности, на которую проецируется изображение всенаправленного видео; и
- осуществляют рендеринг (213) изображения (15), сгенерированного из декодированной версии кодированного изображения и из указания (MI) отображения всенаправленного видео на 2D видео, используемое при генерации кодированного изображения.
3. Устройство (230), содержащее интерфейс для:
- передачи кодированного изображения видео, причем видео представляет собой 2D видео, на которое отображено всенаправленное видео; и
- передачи указания отображения всенаправленного видео на 2D видео, причем указание содержит обобщенный элемент отображения, упомянутый обобщенный элемент отображения содержит для положения пиксела выборки в многомерном промежуточном пространстве дискретизации, 2D координаты пиксела на кодированном изображении видео, причем многомерное промежуточное пространство дискретизации содержит набор из по меньшей мере одной параметрической поверхности, на которую проецируется изображение всенаправленного видео.
4. Устройство (230), содержащее процессор и по меньшей мере одну память, причем упомянутый процессор сконфигурирован для:
- получения (211) кодированного изображения видео, причем видео представляет собой 2D видео, на которое отображено всенаправленное видео; и
- получения (211) указания (MI) отображения всенаправленного видео на 2D видео, причем указание содержит обобщенный элемент отображения, содержащий для положения пиксела выборки в многомерном промежуточном пространстве дискретизации, 2D координаты пиксела на кодированном изображении видео, причем многомерное промежуточное пространство дискретизации содержит набор из по меньшей мере одной параметрической поверхности, на которую проецируется изображение всенаправленного видео; и
- рендеринга (213) изображения (15), сгенерированного из декодированной версии кодированного изображения и из указания (MI) отображения всенаправленного видео на 2D видео, используемое при генерации кодированного изображения.
5. Способ по любому из пп. 1, 2 или устройство по любому из пп. 3, 4, причем указание передают или получают из:
- сообщения информации дополнительного улучшения или
- информации заголовка на уровне последовательности или
- информации заголовка на уровне изображения.
6. Способ по любому из пп. 1, 2 или 5 или устройство по любому из пп. 3-5, причем многомерное промежуточное пространство дискретизации содержит набор из по меньшей мере одной 2D прямоугольной поверхности, на которую проецируется изображение всенаправленного видео.
7. Способ или устройство по п. 6, причем указание дополнительно содержит элемент, представляющий размерность многомерного промежуточного пространства дискретизации, причем упомянутая размерность соответствует числу 2D прямоугольных поверхностей многомерного промежуточного пространства дискретизации.
8. Способ или устройство по п. 6 или 7, причем указание дополнительно содержит элемент, представляющий идентификатор 2D прямоугольной поверхности многомерного промежуточного пространства дискретизации и ширину и высоту вдоль каждой оси упомянутой 2D прямоугольной поверхности.
9. Способ по любому из пп. 1, 2 или 5-8 или устройство по любому из пп. 3-8, причем указание дополнительно содержит обобщенный элемент проецирования, причем упомянутый обобщенный элемент проецирования содержит для каждого дискретизированного пиксела сферы во всенаправленном видео, координаты пиксела в промежуточном пространстве дискретизации.
10. Данные сигнала видео, содержащие:
- закодированное изображение видео, причем видео представляет собой 2D видео, на которое отображается всенаправленное видео; и
- указание отображения всенаправленного видео на 2D видео, причем указание содержит обобщенный элемент отображения, упомянутый обобщенный элемент отображения содержит для положения пиксела выборки в многомерном промежуточном пространстве дискретизации, 2D координаты (x,y) пиксела на кодированном изображении видео, причем многомерное промежуточное пространство дискретизации содержит набор из по меньшей мере одной параметрической поверхности, на которую проецируется изображение всенаправленного видео.
11. Сигнал видео по п. 10, причем многомерное промежуточное пространство дискретизации содержит набор из по меньшей мере одной 2D прямоугольной поверхности, на которую проецируется изображение всенаправленного видео.
12. Сигнал видео по п. 11, причем указание дополнительно содержит элемент, представляющий размерность многомерного промежуточного пространства дискретизации, причем упомянутая размерность соответствует числу 2D прямоугольных поверхностей многомерного промежуточного пространства дискретизации.
13. Сигнал видео по п. 10 или 11, причем указание дополнительно содержит элемент, представляющий идентификатор 2D прямоугольной поверхности многомерного промежуточного пространства дискретизации и ширину вдоль первой оси и высоту вдоль второй оси упомянутой 2D прямоугольной поверхности.
14. Сигнал видео по любому из пп. 10-13, причем указание дополнительно содержит обобщенный элемент проецирования, причем упомянутый обобщенный элемент проецирования содержит, для каждого дискретизированного пиксела сферы во всенаправленном видео, координаты пиксела в промежуточном пространстве дискретизации.
15. Компьютерный программный продукт, содержащий инструкции программного кода для исполнения способа по любому из пп. 1, 2 или 5-9, когда эта программа исполняется на компьютере.
RU2019112864A 2016-09-30 2017-09-28 Способы, устройства и поток для обеспечения указания отображения всенаправленных изображений RU2019112864A (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP16306265.6A EP3301933A1 (en) 2016-09-30 2016-09-30 Methods, devices and stream to provide indication of mapping of omnidirectional images
EP16306265.6 2016-09-30
PCT/EP2017/074658 WO2018060347A1 (en) 2016-09-30 2017-09-28 Methods, devices and stream to provide indication of mapping of omnidirectional images

Publications (1)

Publication Number Publication Date
RU2019112864A true RU2019112864A (ru) 2020-10-30

Family

ID=57138001

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2019112864A RU2019112864A (ru) 2016-09-30 2017-09-28 Способы, устройства и поток для обеспечения указания отображения всенаправленных изображений

Country Status (7)

Country Link
US (1) US20190268584A1 (ru)
EP (2) EP3301933A1 (ru)
KR (1) KR20190055228A (ru)
CN (1) CN109997364A (ru)
CA (1) CA3043247A1 (ru)
RU (1) RU2019112864A (ru)
WO (1) WO2018060347A1 (ru)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102133849B1 (ko) * 2017-01-10 2020-07-14 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치
US10818087B2 (en) * 2017-10-02 2020-10-27 At&T Intellectual Property I, L.P. Selective streaming of immersive video based on field-of-view prediction
CN110662087B (zh) 2018-06-30 2021-05-11 华为技术有限公司 点云编解码方法和编解码器
US11575976B2 (en) 2018-08-07 2023-02-07 Coredinate Inc. Omnidirectional video streaming
EP3895425A4 (en) * 2018-12-14 2021-12-15 ZTE Corporation PROCESSING AN IMMERSIVE VIDEO BITSTREAM
WO2020197086A1 (ko) * 2019-03-25 2020-10-01 엘지전자 주식회사 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법
US10909668B1 (en) * 2019-07-31 2021-02-02 Nxp Usa, Inc. Adaptive sub-tiles for distortion correction in vision-based assistance systems and methods
KR20210027918A (ko) * 2019-09-03 2021-03-11 (주)코믹스브이 2차원 이미지로부터 hmd를 위한 3차원 이미지를 생성하는 방법
JP6698929B1 (ja) * 2019-10-31 2020-05-27 株式会社Cygames プログラム、ゲーム仮想空間提供方法、及びゲーム仮想空間提供装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6897858B1 (en) * 2000-02-16 2005-05-24 Enroute, Inc. Partial image decompression of a tiled image
JP2003141562A (ja) * 2001-10-29 2003-05-16 Sony Corp 非平面画像の画像処理装置及び画像処理方法、記憶媒体、並びにコンピュータ・プログラム
US8854486B2 (en) * 2004-12-17 2014-10-07 Mitsubishi Electric Research Laboratories, Inc. Method and system for processing multiview videos for view synthesis using skip and direct modes
JP6030230B2 (ja) * 2012-07-04 2016-11-24 インテル コーポレイション パノラマベースの3dビデオコーディング
US10136119B2 (en) * 2013-01-10 2018-11-20 Qualcomm Incoporated View synthesis in 3D video
US9571812B2 (en) * 2013-04-12 2017-02-14 Disney Enterprises, Inc. Signaling warp maps using a high efficiency video coding (HEVC) extension for 3D video coding
US10104361B2 (en) * 2014-11-14 2018-10-16 Samsung Electronics Co., Ltd. Coding of 360 degree videos using region adaptive smoothing
US20190141311A1 (en) * 2016-04-26 2019-05-09 Lg Electronics Inc. Method for transmitting 360-degree video, method for receiving 360-degree video, apparatus for transmitting 360-degree video, apparatus for receiving 360-degree video

Also Published As

Publication number Publication date
CA3043247A1 (en) 2018-04-05
CN109997364A (zh) 2019-07-09
WO2018060347A1 (en) 2018-04-05
EP3301933A1 (en) 2018-04-04
EP3520417A1 (en) 2019-08-07
KR20190055228A (ko) 2019-05-22
US20190268584A1 (en) 2019-08-29

Similar Documents

Publication Publication Date Title
RU2019112864A (ru) Способы, устройства и поток для обеспечения указания отображения всенаправленных изображений
TWI533027B (zh) 色彩頻道及光學標誌
US11625841B2 (en) Localization and tracking method and platform, head-mounted display system, and computer-readable storage medium
US9519968B2 (en) Calibrating visual sensors using homography operators
AU2018200055B2 (en) Show personalized preview for 360 or panoramic images based on search query to enhance customer experience by providing them most relevant view of images
US9972091B2 (en) System and method for detecting object from depth image
US20130176337A1 (en) Device and Method For Information Processing
CN105046213A (zh) 一种增强现实的方法
US10674328B2 (en) Providing visualization data to a co-located plurality of mobile devices
US20180020203A1 (en) Information processing apparatus, method for panoramic image display, and non-transitory computer-readable storage medium
KR20180056124A (ko) 전자 장치 및 그 이미지 처리 방법
RU2013149804A (ru) Система обработки изображений и способ
Selvam et al. Augmented reality for information retrieval aimed at museum exhibitions using smartphones
RU2015102056A (ru) Электронное устройство и способ для отрисовки панорамного изображения
US10242463B2 (en) Providing visualization data to a co-located plurality of mobile devices
CN113610702A (zh) 一种建图方法、装置、电子设备及存储介质
CN103631962A (zh) 一种图像标签的显示方法和设备
US9864890B1 (en) Systems and methods for contextualizing data obtained from barcode images
US20220005223A1 (en) Coordinate calculation apparatus, coordinate calculation method, and computer-readable recording medium
JP6586852B2 (ja) 画像処理装置
CN108021243B (zh) 一种虚拟鼠标位置的确定方法、装置及系统
CN111091848B (zh) 一种用于预测头部姿态的方法和装置
US20230360265A1 (en) Information processing apparatus, information processing method, and program
JP6484418B2 (ja) 位置算出装置、シンボル表示装置、及びシート
JP2019186588A (ja) コンテンツ表示システム

Legal Events

Date Code Title Description
FA93 Acknowledgement of application withdrawn (no request for examination)

Effective date: 20200929