RU2020121964A - Устройство и способ обработки информации - Google Patents

Устройство и способ обработки информации Download PDF

Info

Publication number
RU2020121964A
RU2020121964A RU2020121964A RU2020121964A RU2020121964A RU 2020121964 A RU2020121964 A RU 2020121964A RU 2020121964 A RU2020121964 A RU 2020121964A RU 2020121964 A RU2020121964 A RU 2020121964A RU 2020121964 A RU2020121964 A RU 2020121964A
Authority
RU
Russia
Prior art keywords
information
file
image
sub
information processing
Prior art date
Application number
RU2020121964A
Other languages
English (en)
Inventor
Рёхэй ТАКАХАСИ
Мицухиро ХИРАБАЯСИ
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2020121964A publication Critical patent/RU2020121964A/ru

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)

Claims (31)

1. Устройство обработки информации, содержащее блок формирования файла, выполненный с возможностью формирования файла, содержащего информацию, связанную с областью, причем связанную с областью в целом изображении, соответствующем сохраненному субизображению, в качестве информации, отличающейся от информации о расположении для каждой из областей изображения и дополнительно содержащей кодированные данные изображения, полученные в результате кодирования субизображения.
2. Устройство обработки информации по п. 1, в котором целое изображение содержит всенаправленное видео.
3. Устройство обработки информации по п. 1, в котором информация, связанная с областью, содержится в файле в качестве информации для каждого из субизображения.
4. Устройство обработки информации по п. 3, в котором
файл содержит файл ISOBMFF (International Organization for Standardization Base Media File Format, базовый формат медиафайла Международной организации по стандартизации),
информация о расположении для каждой из областей изображения содержит информацию, сообщенную в поле Region Wise Packing Box, и
информация, связанная с областью, хранится в поле Scheme Information Box в файле ISOBMFF, которое отличается от поля Region Wise Packing Box или в поле, которое отличается от поля Region Wise Packing Box и располагается на уровне ниже поля Scheme Information Box.
5. Устройство обработки информации по п. 1, в котором информация, связанная с областью, содержит информацию, указывающую, идентично ли целое изображение спроецированному изображению.
6. Устройство обработки информации по п. 5, в котором
файл содержит файл ISOBMFF (International Organization for Standardization Base Media File Format, базовый формат медиафайла Международной организации по стандартизации), и
информация, связанная с областью, указывается присутствием или отсутствием определенного поля, хранящегося в поле Sub Picture Composition Box.
7. Устройство обработки информации по п. 1, в котором файл дополнительно содержит стереоинформацию, содержащую информацию, связанную со стереоотображением целого изображения.
8. Устройство обработки информации по п. 7, в котором целое изображение содержит всенаправленное видео.
9. Устройство обработки информации по п. 7, в котором стереоинформация содержится в файле в качестве информации для каждого из субизображений.
10. Устройство обработки информации по п. 9, в котором
файл содержит файл ISOBMFF (International Organization for Standardization Base Media File Format, базовый формат медиафайла Международной организации по стандартизации), и
стереоинформация хранится в поле Scheme Information Box файла ISOBMFF или в поле на уровне ниже Scheme Information Box.
11. Устройство обработки информации по п. 7, в котором файл дополнительно содержит информацию, связанную с размером отображения субизображения.
12. Устройство обработки информации по п. 7, в котором файл дополнительно содержит субстереоинформацию, включающую информацию, связанную со стереоотображением каждого из субизображений.
13. Устройство обработки информации по п. 7, в котором файл дополнительно содержит информацию о проекции, указывающую тип проекции субизображения.
14. Устройство обработки информации по п. 13, в котором информация о проекции содержит информацию для каждой из областей, содержащихся в субизображении.
15. Способ обработки информации, содержащий этап, на котором формируют файл, содержащий информацию, связанную с областью, причем связанную с областью в целом изображении, соответствующем сохраненному субизображению, в качестве информации, отличающейся от информации о расположении для каждой из областей изображения, и дополнительно содержащей кодированные данные изображения, полученные в результате кодирования субизображения.
16. Устройство обработки информации, содержащее:
блок получения файла, выполненный с возможностью получения файла, содержащего информацию, связанную с областью, причем связанную с областью в целом изображении, соответствующем сохраненному субизображению, в качестве информации, отличающейся от информации о расположении для каждой из областей изображения и дополнительно содержащей кодированные данные изображения, полученные в результате кодирования субизображения; и
блок обработки изображений, выполненный с возможностью выбора потока кодированных данных изображения на основе связанной с областью информации, содержащейся в файле, полученном блоком получения файла.
17. Устройство обработки информации по п. 16, в котором целое изображение содержит всенаправленное видео.
18. Устройство обработки информации по п. 16, в котором информация, связанная с областью, содержится в файле в качестве информации для каждого субизображения.
19. Устройство обработки информации по п. 16, в котором информация, связанная с областью, изменяется динамически внутри потока.
20. Способ обработки информации, содержащий этапы, на которых:
получают файл, содержащий информацию, связанную с областью, причем связанную с областью в целом изображении, соответствующем сохраненному субизображению, в качестве информации, отличающейся от информации о расположении для каждой из областей изображения и дополнительно содержащий кодированные данные изображения, полученные в результате кодирования субизображения; и
выбирают поток кодированных данных изображения на основе информации, связанной с областью, содержащейся в полученном файле.
RU2020121964A 2018-01-12 2018-12-28 Устройство и способ обработки информации RU2020121964A (ru)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2018-003795 2018-01-12
JP2018003795 2018-01-12
JP2018127665 2018-07-04
JP2018-127665 2018-07-04
PCT/JP2018/048423 WO2019138928A1 (ja) 2018-01-12 2018-12-28 情報処理装置および方法

Publications (1)

Publication Number Publication Date
RU2020121964A true RU2020121964A (ru) 2022-01-12

Family

ID=67219566

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2020121964A RU2020121964A (ru) 2018-01-12 2018-12-28 Устройство и способ обработки информации

Country Status (11)

Country Link
US (1) US20210092374A1 (ru)
EP (1) EP3716638A4 (ru)
JP (1) JPWO2019138928A1 (ru)
KR (1) KR20200107948A (ru)
CN (1) CN111567058A (ru)
BR (1) BR112020013710A2 (ru)
MX (1) MX2020007076A (ru)
RU (1) RU2020121964A (ru)
SG (1) SG11202005646PA (ru)
TW (1) TW201939965A (ru)
WO (1) WO2019138928A1 (ru)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11190786B2 (en) * 2019-09-24 2021-11-30 At&T Intellectual Property I, L.P. Transcoding ultra-high-definition panoramic videos

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3451675A4 (en) * 2016-04-26 2019-12-04 LG Electronics Inc. -1- METHOD FOR TRANSFERRING 360 DEGREE VIDEOS, METHOD FOR RECEIVING 360 DEGREE VIDEOS, DEVICE FOR TRANSMITTING 360 DEGREE VIDEOS AND DEVICE FOR RECEIVING 360 DEGREE VIDEOS
JP6657475B2 (ja) * 2016-08-25 2020-03-04 エルジー エレクトロニクス インコーポレイティド 全方位ビデオを伝送する方法、全方位ビデオを受信する方法、全方位ビデオの伝送装置及び全方位ビデオの受信装置

Also Published As

Publication number Publication date
WO2019138928A1 (ja) 2019-07-18
KR20200107948A (ko) 2020-09-16
US20210092374A1 (en) 2021-03-25
TW201939965A (zh) 2019-10-01
CN111567058A (zh) 2020-08-21
BR112020013710A2 (pt) 2020-12-01
MX2020007076A (es) 2020-09-09
JPWO2019138928A1 (ja) 2020-12-24
EP3716638A4 (en) 2021-02-17
SG11202005646PA (en) 2020-07-29
EP3716638A1 (en) 2020-09-30

Similar Documents

Publication Publication Date Title
JP2019517212A5 (ru)
CN107454468B (zh) 对沉浸式视频进行格式化的方法、装置和流
JP2019521583A5 (ru)
TWI735038B (zh) 將軌道推導用於基於網路的媒體處理的方法和裝置
JP2019519981A5 (ru)
GB2567625A (en) Method, device, and computer program for generating timed media data
TWI688263B (zh) 一種推導合成軌道的方法及裝置
TWI674797B (zh) 球面區域呈現之方法與裝置
CN113557729B (zh) 视频码流解码方法、系统、装置和电子设备
US10757463B2 (en) Information processing apparatus and information processing method
US20180176650A1 (en) Information processing apparatus and information processing method
CN111095937B (zh) 图像处理设备和文件生成设备
US10313763B2 (en) Method and apparatus for requesting and receiving selected segment streams based on projection information
RU2009147012A (ru) Способ кодирования видеосигнала и способ декодирования, устройства для этого, программы для этого и носители информации, которые хранят программы
WO2021067501A1 (en) Object-based volumetric video coding
US11902540B2 (en) Immersive video coding using object metadata
CA3057924A1 (en) System and method to optimize the size of a video recording or video transmission by identifying and recording a region of interest in a higher definition than the rest of the image that is saved or transmitted in a lower definition format
RU2018136879A (ru) Способ, аппарат и поток для форматирования иммерсивного видеоизображения для традиционных и иммерсивных устройств воспроизведения
US20220247991A1 (en) Information processing apparatus, information processing method, reproduction processing device, and reproduction processing method
RU2020121964A (ru) Устройство и способ обработки информации
RU2020122086A (ru) Способ и устройство обработки информации
US20220286659A1 (en) Multi-view video processing method and apparatus
US11743502B2 (en) Compact description of region-wise packing information
KR102053814B1 (ko) 배경 영상 및 전경 영상 분리 기반 360도 영상 스트리밍 장치 및 방법
KR20200054960A (ko) 패딩 정보를 이용하여 전자 장치에서 직사각형 투영 상에 360도 이미지 컨텐츠를 생성하는 방법