RU2020112245A - Передающее устройство, способ передачи и программа - Google Patents

Передающее устройство, способ передачи и программа Download PDF

Info

Publication number
RU2020112245A
RU2020112245A RU2020112245A RU2020112245A RU2020112245A RU 2020112245 A RU2020112245 A RU 2020112245A RU 2020112245 A RU2020112245 A RU 2020112245A RU 2020112245 A RU2020112245 A RU 2020112245A RU 2020112245 A RU2020112245 A RU 2020112245A
Authority
RU
Russia
Prior art keywords
transmitting
layer
transmission
unit
negative overflow
Prior art date
Application number
RU2020112245A
Other languages
English (en)
Other versions
RU2020112245A3 (ru
Inventor
Хидэтомо ХИРАО
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2020112245A publication Critical patent/RU2020112245A/ru
Publication of RU2020112245A3 publication Critical patent/RU2020112245A3/ru

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H04N19/166—Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2401—Monitoring of the client buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440227—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server

Claims (16)

1. Передающее устройство, содержащее:
блок кодирования, выполняющий пространственно масштабируемое кодирование движущегося изображения;
процессорный передающий блок, выполняющий процесс передачи через сеть картинки для каждого уровня, кодированного блоком кодирования; и
процессорный блок управления опорным уровнем, заставляющий блок кодирования ограничивать опорный уровень, к которому должны обращаться при кодировании верхнего уровня в промежуточный уровень, формируемый из нижнего уровня в случае, когда прогнозируется высокая вероятность, что в приемном буфере произойдет отрицательное переполнение, или принимается сигнал обратной связи, указывающий, что в приемном буфере произошло отрицательное переполнение.
2. Передающее устройство по п. 1, дополнительно содержащее процессорный блок выбора пути прохождения передачи, выбирающий путь прохождения передачи, по которому передача, как предсказывается, должна закончиться раньше, в соответствии с величиной кода картинки для каждого уровня, кодированного блоком кодирования, и заставляющий процессорный передающий блок выполнять передачу по выбранному пути прохождения передачи.
3. Передающее устройство по п. 2, в котором процессорный блок выбора пути прохождения передачи выбирает путь прохождения передачи на основе сравнения между величиной кода картинки и граничной величиной кода, полученной, используя статистическое значение величины запаздывания до тех пор, пока не начнется передача в процессорном передающем блоке, и статистическую величину скорости после того, как процессорный передающий блок начинает передачу.
4. Передающее устройство по п. 3, в котором процессорный блок управления опорным уровнем предсказывает, является ли высокой вероятность, что в приемном буфере произойдет отрицательное переполнение, основываясь на статистическом значении величины запаздывания и статистической величине скорости.
5. Передающее устройство по п. 1, в котором сеть содержит множество виртуальных сетей, которые получают посредством виртуального деления всей сети, и к которым добавляются соответствующие функции.
6. Способ передачи, содержащий этапы, на которых:
выполняют посредством передающего устройства, передающего движущееся изображение, пространственно масштабируемое кодирование движущегося изображения;
выполняют посредством передающего устройства процесс передачи через сеть картинки для каждого кодированного уровня; и
выполняют посредством передающего устройства управление ограничением опорного уровня, к которому должны обращаться при кодировании верхнего уровня в промежуточный уровень, формируемый из нижнего уровня, в случае, когда прогнозируется высокая вероятность, что в приемном буфере произойдет отрицательное переполнение, или принимается сигнал обратной связи, указывающий, что в приемном буфере произошло отрицательное переполнение.
7. Программа, заставляющая компьютер передающего устройства, которое передает движущееся изображение, выполнять процесс, содержащий этапы, на которых:
выполняют пространственно масштабируемое кодирование движущегося изображения;
выполняют процесс передачи через сеть картинки для каждого кодированного уровня; и
выполняют управление ограничением опорного уровня, к которому должны обращаться при кодировании верхнего уровня в промежуточный уровень, формируемый из нижнего уровня, в случае, когда прогнозируется высокая вероятность, что в приемном буфере произойдет отрицательное переполнение, или принимается сигнал обратной связи, указывающий, что в приемном буфере произошло отрицательное переполнение.
RU2020112245A 2017-10-11 2018-09-27 Передающее устройство, способ передачи и программа RU2020112245A (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017197723 2017-10-11
JP2017-197723 2017-10-11
PCT/JP2018/035841 WO2019073802A1 (ja) 2017-10-11 2018-09-27 送信装置および送信方法、並びにプログラム

Publications (2)

Publication Number Publication Date
RU2020112245A true RU2020112245A (ru) 2021-09-27
RU2020112245A3 RU2020112245A3 (ru) 2022-01-21

Family

ID=66100712

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2020112245A RU2020112245A (ru) 2017-10-11 2018-09-27 Передающее устройство, способ передачи и программа

Country Status (9)

Country Link
US (1) US11070827B2 (ru)
EP (1) EP3678372A4 (ru)
JP (1) JP7173028B2 (ru)
KR (1) KR20200058431A (ru)
CN (1) CN111183640A (ru)
BR (1) BR112020006752A2 (ru)
RU (1) RU2020112245A (ru)
TW (1) TW201933867A (ru)
WO (1) WO2019073802A1 (ru)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021199131A1 (ja) * 2020-03-30 2021-10-07 ソニーグループ株式会社 情報処理装置及び情報処理システム
US20230136388A1 (en) * 2020-03-31 2023-05-04 Sony Group Corporation Information processing apparatus and information processing method
WO2022185795A1 (ja) * 2021-03-05 2022-09-09 ソニーグループ株式会社 情報処理装置、情報処理方法およびプログラム
CN116033147A (zh) * 2021-10-27 2023-04-28 华为技术有限公司 图像编解码方法和装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BE790089A (fr) 1971-10-14 1973-04-13 Ici Ltd Derives de l'imidazole
JP2000236547A (ja) * 1998-12-15 2000-08-29 Sony Corp 画像情報変換装置及び画像情報変換方法
CA2644753A1 (en) 2006-03-03 2007-09-13 Vidyo, Inc. System and method for providing error resilience, random access and rate control in scalable video communications
CN102860010A (zh) * 2010-05-06 2013-01-02 日本电信电话株式会社 视频编码控制方法及装置
JP2015019319A (ja) * 2013-07-12 2015-01-29 キヤノン株式会社 符号化装置、符号化方法及びプログラム
JP2016184844A (ja) * 2015-03-26 2016-10-20 ソニー株式会社 画像処理装置および方法
EP3387835A1 (en) * 2015-12-11 2018-10-17 VID SCALE, Inc. Scheduling multiple-layer video segments

Also Published As

Publication number Publication date
WO2019073802A1 (ja) 2019-04-18
EP3678372A4 (en) 2020-09-09
US20200314439A1 (en) 2020-10-01
TW201933867A (zh) 2019-08-16
KR20200058431A (ko) 2020-05-27
EP3678372A1 (en) 2020-07-08
CN111183640A (zh) 2020-05-19
US11070827B2 (en) 2021-07-20
JP7173028B2 (ja) 2022-11-16
JPWO2019073802A1 (ja) 2020-11-12
BR112020006752A2 (pt) 2020-10-06
RU2020112245A3 (ru) 2022-01-21

Similar Documents

Publication Publication Date Title
RU2020112245A (ru) Передающее устройство, способ передачи и программа
CN109524015B (zh) 音频编码方法、解码方法、装置及音频编解码系统
CN108551586B (zh) 多用户360度视频流服务器端码率自适应分配方法及系统
WO2019237821A1 (zh) 虚拟场景的场景图像传输方法、装置、计算机设备及计算机可读存储介质
RU2014117037A (ru) Способ управления полосой пропускания и соответсвующее устройство
JP2016528799A5 (ru)
US20140258463A1 (en) Adaptive bandwidth switching via short-circuitable download
EP3161827B1 (en) Efficient frame rendering
RU2015102812A (ru) Концепция потока видеоданных
CN109286957B (zh) 一种回源链路的切换方法、装置、电子设备及存储介质
RU2010105038A (ru) Устройство обработки изображений и способ обработки изображений
CN111107382A (zh) 数据流的控制方法、装置和系统
EP3509305A1 (en) Intra-prediction video coding method and device
US20140120930A1 (en) Method, Apparatus, Computer Program Product and System for Communicating Predictions
CN117597920A (zh) 视频编码的方法、装置、设备和存储介质
CN110809167A (zh) 一种视频播放方法、装置、电子设备及存储介质
WO2016000211A1 (zh) 视频数据传输装置、方法、服务器、基站和客户端
RU2016143825A (ru) Способы кодирования и декодирования кадров в телекоммуникационной сети
CN107566795B (zh) 一种提高实时画面流畅度的方法、装置及系统
CN105704052A (zh) 一种量化的拥塞通告消息生成方法及装置
CN111385574A (zh) 视频编码中的码率控制方法、装置、移动终端及存储介质
CN112672227B (zh) 基于边缘节点的业务处理方法、装置、节点以及存储介质
KR20170072788A (ko) 기계 학습 기반의 패킷 손실 예측 장치 및 방법
WO2020063635A1 (zh) 数据传输方法和装置
CN108259400B (zh) 软比特处理方法、装置以及存储介质