JP7431329B2 - ビデオ処理方法、装置、コンピュータデバイスおよびコンピュータプログラム - Google Patents
ビデオ処理方法、装置、コンピュータデバイスおよびコンピュータプログラム Download PDFInfo
- Publication number
- JP7431329B2 JP7431329B2 JP2022539104A JP2022539104A JP7431329B2 JP 7431329 B2 JP7431329 B2 JP 7431329B2 JP 2022539104 A JP2022539104 A JP 2022539104A JP 2022539104 A JP2022539104 A JP 2022539104A JP 7431329 B2 JP7431329 B2 JP 7431329B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- substreams
- substream
- slice
- stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004590 computer program Methods 0.000 title claims description 51
- 238000003672 processing method Methods 0.000 title claims description 21
- 238000000034 method Methods 0.000 claims description 42
- 238000012545 processing Methods 0.000 claims description 36
- 230000000153 supplemental effect Effects 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 16
- 238000009877 rendering Methods 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 18
- 238000004891 communication Methods 0.000 description 14
- 230000008014 freezing Effects 0.000 description 8
- 238000007710 freezing Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 2
- 238000004806 packaging method and process Methods 0.000 description 2
- 206010060904 Freezing phenomenon Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002040 relaxant effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/637—Control signals issued by the client directed to the server or network components
- H04N21/6375—Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
- H04N21/64784—Data processing by the network
- H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本願は、2020年5月21日に中国特許局に出願された、出願番号が202010433505.2であり、発明名称が「ビデオ処理方法、装置、コンピュータデバイスおよび記憶媒体」である中国特許出願の優先権を主張しており、そのすべての内容が、参照により本願に組み込まれる。
[技術分野]
本願は、ビデオ処理技術の分野に関し、特に、ビデオ処理方法、装置、コンピュータデバイスおよび記憶媒体に関する。
従来のビデオ再生方式では、各クライアントは、いずれも、指定されたプロトコルによって、サーバからビデオデータを取得する。クライアントの数が一定の規模に達した後、サーバは、巨大なI/O(Input/Output、入力/出力)および帯域幅などによる圧力を受けることがある。サーバがクライアントの要求をタイムリーに処理できない場合、クライアントには、フリーズという問題が発生してしまう。
少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得るステップと、
前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出するステップと、
抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定するステップと、
前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードするステップと、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生するステップと、
を含む。
少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得る第1ダウンロードモジュールと、
前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出する抽出モジュールと、
抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定する決定モジュールと、
前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードする第2ダウンロードモジュールと、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生する再生モジュールと、
を含む。
少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得るステップと、
前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出するステップと、
抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定するステップと、
前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードするステップと、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生するステップと、
を実現する。
少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得るステップと、
前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出するステップと、
抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定するステップと、
前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードするステップと、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生するステップと、
を実現させる。
ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信するステップと、
前記オリジナルビデオストリームに対してスライス処理を順次に行って、対応するビデオスライスを得るステップと、
得られたビデオスライスを番号付けて、ビデオスライス番号を得るステップと、
前記ビデオスライス番号を補足強化情報フレームに保存して、スライスされた前記ターゲットビデオフォーマットのビデオストリームを得るステップと、
ターゲットサーバがクライアントによって送信されたビデオ再生コマンドに基づいて、対応するビデオストリームを返信するように、前記ビデオストリームを前記ターゲットサーバに送信するステップと、
を含む。
ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信する受信モジュールと、
前記オリジナルビデオストリームに対してスライス処理を順次に行って、対応するビデオスライスを得る処理モジュールと、
得られたビデオスライスを番号付けて、ビデオスライス番号を得る番号付けモジュールと、
前記ビデオスライス番号を補足強化情報フレームに保存して、スライスされた前記ターゲットビデオフォーマットのビデオストリームを得る保存モジュールと、
ターゲットサーバがクライアントによって送信されたビデオ再生コマンドに基づいて、対応するビデオストリームを返信するように、前記ビデオストリームを前記ターゲットサーバに送信する送信モジュールと、
を含む。
ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信するステップと、
前記オリジナルビデオストリームに対してスライス処理を順次に行って、対応するビデオスライスを得るステップと、
得られたビデオスライスを番号付けて、ビデオスライス番号を得るステップと、
前記ビデオスライス番号を補足強化情報フレームに保存して、スライスされた前記ターゲットビデオフォーマットのビデオストリームを得るステップと、
ターゲットサーバがクライアントによって送信されたビデオ再生コマンドに基づいて、対応するビデオストリームを返信するように、前記ビデオストリームを前記ターゲットサーバに送信するステップと、
を実現する。
ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信するステップと、
前記オリジナルビデオストリームに対してスライス処理を順次に行って、対応するビデオスライスを得るステップと、
得られたビデオスライスを番号付けて、ビデオスライス番号を得るステップと、
前記ビデオスライス番号を補足強化情報フレームに保存して、スライスされた前記ターゲットビデオフォーマットのビデオストリームを得るステップと、
ターゲットサーバがクライアントによって送信されたビデオ再生コマンドに基づいて、対応するビデオストリームを返信するように、前記ビデオストリームを前記ターゲットサーバに送信するステップと、
を実現させる。
1)1番目のビデオサブストリームについて、ビデオスライス番号が4nであるビデオを、1番目のビデオサブストリームにスライス化する。例えば、ビデオスライス番号が0、4、8などであるビデオを、1番目のビデオサブストリームにスライス化する。端末は、コンテンツ配信ネットワークシステムのターゲットサーバから1番目のビデオサブストリームをダウンロードする。
1)1番目のビデオサブストリームについて、端末は、他のクライアントから1番目のビデオサブストリームをダウンロードし、かつ、コンテンツ配信ネットワークシステムのターゲットサーバから1番目のビデオサブストリームをダウンロードすることを一時停止する。
1)1番目のビデオサブストリームはについて、端末は、他のクライアントから1番目のビデオサブストリームをダウンロードし、かつ、コンテンツ配信ネットワークシステムのターゲットサーバから1番目のビデオサブストリームをダウンロードすることを一時停止する。
S302で、ビデオ再生コマンドを取得する。
S402で、ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信する。
S502で、ビデオ収集システムは、ターゲットビデオフォーマットのオリジナルビデオストリームをトランスコーディングサーバにプッシュする。
図6に示すように、図6は、FLVストリーミングメディアフォーマットのオリジナルライブビデオストリームに対してP2Pスライスを行うフロー概略図である。
(1)生放送を開始する前に、端末は、CDNサーバから1段落の固定時間長さの完全なライブデータストリーム(対応するスライス番号は、0、1、2、3、4、5…であり)をダウンロードし、次に、安定的な放送状態に達した場合にステップ(2)を実行するまでに、再生を行う。
第1ダウンロードモジュール802は、少なくとも2つのチャネルを介してビデオサブストリームを取得して、少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得るために使用される。
第1ダウンロードモジュール802は、さらに、他のクライアントから少なくとも1つのビデオサブストリームをダウンロードすることと、ターゲットサーバから残りのビデオサブストリームをダウンロードすることと、を実行するために使用される。
取得モジュール814は、少なくとも2つのチャネルを介してビデオストリームのダウンロードを行う前に、ビデオ再生コマンドを取得するために使用される。
受信モジュール1002は、ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信するために使用される。
ここで、本願によって提供される実施例において使用されるメモリ、ストレージ、データベースまたは他の媒体への任意の参照は、不揮発性および揮発性メモリのうちの少なくとも1つを含むことができる。不揮発性メモリは、リードオンリーメモリ(ROM:Read-ONly Memory)、磁気テープ、フロッピーディスク、フラッシュメモリ、または光メモリなどを含み得る。揮発性メモリは、ランダムアクセスメモリ(RAM:Random Access Memory)または外部キャッシュメモリを含み得る。説明として、限定されるものではなく、RAMは、静的ランダムアクセスメモリ(SRAM:Static Random Access Memory)や、動的ランダムアクセスメモリ(DRAM:Dynamic Random Access Memory)など、様々な形態であってもよい。
Claims (20)
- 端末によって実行されるビデオ処理方法であって、
少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得るステップと、
前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出するステップと、
抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定するステップと、
前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードするステップと、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生するステップと、
を含むことを特徴とする方法。 - 少なくとも2つのチャネルを介してビデオサブストリームを取得する前記ステップの前に、前記方法は、さらに、
ビデオ再生コマンドを取得するステップと、
前記ビデオ再生コマンドに応答して、コンテンツ配信ネットワークシステムのターゲットサーバから、予め設定された時間範囲内の完全なビデオストリームをダウンロードするステップであって、前記完全なビデオストリームと、前記少なくとも2つのビデオサブストリームとが、いずれも、同じビデオのデータストリームに属するものであるステップと、
前記端末により、前記完全なビデオストリームを再生するステップと、
前記端末が前記完全なビデオストリームを再生する過程において安定的な再生状態に達した場合、少なくとも2つのチャネルを介してビデオサブストリームを取得する前記ステップを実行するステップと、を含む、
ことを特徴とする請求項1に記載の方法。 - 少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得る前記ステップは、
ダウンロードするビデオストリームを、少なくとも2つのビデオサブストリームに分割するステップと、
コンテンツ配信ネットワークシステムのターゲットサーバから、少なくとも2つのチャネルを介して、前記少なくとも2つのビデオサブストリームをそれぞれダウンロードするステップと、を含む、
ことを特徴とする請求項1に記載の方法。 - 少なくとも2つのチャネルを介してビデオサブストリームを取得する前記ステップは、
他のクライアントから、少なくとも1つのビデオサブストリームをダウンロードするステップと、
コンテンツ配信ネットワークシステムのターゲットサーバから、残りのビデオサブストリームをダウンロードするステップと、を含む、
ことを特徴とする請求項1に記載の方法。 - 他のクライアントから、少なくとも1つのビデオサブストリームをダウンロードする前記ステップは、
前記少なくとも2つのビデオサブストリームから、少なくとも1つのターゲットビデオサブストリームを選択するステップと、
他のクライアントから、前記ターゲットビデオサブストリームをダウンロードするステップと、を含み、
前記方法は、さらに、
前記他のクライアントから前記ターゲットビデオサブストリームをダウンロードすると決定した場合、前記ターゲットサーバから前記ターゲットビデオサブストリームをダウンロードすることを一時停止するステップ、を含む、
ことを特徴とする請求項4に記載の方法。 - 抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定する前記ステップは、
前記少なくとも2つのビデオサブストリームがビデオスライス番号を欠失しているかどうかを判断するステップと、
前記ビデオスライス番号が欠失されているビデオサブストリームが少なくとも1つ存在すれば、欠失されている前記ビデオスライス番号に基づいて、前記少なくとも1つのビデオサブストリームにおいて欠失されているビデオスライスを決定するステップと、を含む、
ことを特徴とする請求項1~5のいずれか1項に記載の方法。 - ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生する前記ステップは、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを保存するステップと、
保存されているビデオスライスと、各ビデオサブストリームとを、前記ビデオスライス番号の順序に従ってクライアントに順次にロードして、相応の再生対象となるビデオストリームを得るステップと、
前記再生対象となるビデオストリームにおける各ビデオスライスを順次にレンダリングして、再生対象となる画像シーケンスを得るステップと、
前記クライアントにより、前記再生対象となる画像シーケンスを再生するステップと、を含む、
ことを特徴とする請求項1~6のいずれか1項に記載の方法。 - 前記ビデオストリームは、ビデオ収集システムによってプッシュされたオリジナルビデオストリームに対してスライス処理をサーバが順次に行って得られたものであり、前記ビデオスライス番号は、スライスされた各ビデオスライスを前記サーバが番号付けて得られたものである、
ことを特徴とする請求項2、3、7のいずれか1項に記載の方法。 - 前記オリジナルビデオストリームと前記ビデオストリームは、いずれも、FLVストリーミングメディアフォーマットのビデオストリームである、
ことを特徴とする請求項8に記載の方法。 - サーバと、ターゲットサーバと、端末とを含むビデオ処理システムによって実行されるビデオ処理方法であって、
前記サーバが、ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信するステップと、
前記サーバが、前記オリジナルビデオストリームに対してスライス処理を順次に行って、対応するビデオスライスを得るステップと、
前記サーバが、得られたビデオスライスを番号付けて、ビデオスライス番号を得るステップと、
前記サーバが、前記ビデオスライス番号を補足強化情報フレームに保存して、スライスされた前記ターゲットビデオフォーマットのビデオストリームを得るステップと、
前記ターゲットサーバがクライアントによって送信されたビデオ再生コマンドに基づいて、対応するビデオストリームを返信するように、前記サーバが、前記ビデオストリームを前記ターゲットサーバに送信するステップと、
前記端末が、少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得るステップと、
前記端末が、前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出するステップと、
前記端末が、抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定するステップと、
前記端末が、前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードするステップと、
前記端末が、ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生するステップと、
を含むことを特徴とするビデオ処理方法。 - 前記オリジナルビデオストリームと前記ビデオストリームは、いずれも、FLVストリーミングメディアフォーマットのビデオストリームである、
ことを特徴とする請求項10に記載の方法。 - ビデオ処理装置であって、
少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得る第1ダウンロードモジュールと、
前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出する抽出モジュールと、
抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定する決定モジュールと、
前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードする第2ダウンロードモジュールと、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生する再生モジュールと、
を含むことを特徴とするビデオ処理装置。 - 前記装置は、さらに、
ビデオ再生コマンドを取得する取得モジュールを、含み、
前記第1ダウンロードモジュールは、さらに、前記ビデオ再生コマンドに応答して、コンテンツ配信ネットワークシステムのターゲットサーバから、予め設定された時間範囲内の完全なビデオストリームをダウンロードするために使用され、前記完全なビデオストリームと、前記少なくとも2つのビデオサブストリームとが、いずれも、同じビデオのデータストリームに属するものであり、
前記再生モジュールは、さらに、前記完全なビデオストリームを再生するために使用され、
前記第1ダウンロードモジュールは、さらに、前記完全なビデオストリームを再生する過程において安定的な再生状態に達した場合、少なくとも2つのチャネルを介してビデオサブストリーム取得するために使用される、
ことを特徴とする請求項12に記載の装置。 - 前記第1ダウンロードモジュールは、さらに、他のクライアントから、少なくとも1つのビデオサブストリームをダウンロードし、コンテンツ配信ネットワークシステムのターゲットサーバから、残りのビデオサブストリームをダウンロードするために使用される、
ことを特徴とする請求項12に記載の装置。 - 前記第1ダウンロードモジュールが、さらに、前記少なくとも2つのビデオサブストリームから、少なくとも1つのターゲットビデオサブストリームを選択し、他のクライアントから、前記ターゲットビデオサブストリームをダウンロードし、前記他のクライアントから前記ターゲットビデオサブストリームをダウンロードすると決定した場合、前記ターゲットサーバから前記ターゲットビデオサブストリームをダウンロードすることを一時停止するために使用される、
ことを特徴とする請求項14に記載の装置。 - 前記決定モジュールは、さらに、前記少なくとも2つのビデオサブストリームがビデオスライス番号を欠失しているかどうかを判断し、前記ビデオスライス番号が欠失されているビデオサブストリームが少なくとも1つ存在すれば、欠失されている前記ビデオスライス番号に基づいて、前記少なくとも1つのビデオサブストリームにおいて欠失されているビデオスライスを決定するために使用される、
ことを特徴とする請求項12~15のいずれか1項に記載の装置。 - 前記再生モジュールは、さらに、ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを保存し、保存されているビデオスライスと、各ビデオサブストリームとを、前記ビデオスライス番号の順序に従ってクライアントに順次にロードして、相応の再生対象となるビデオストリームを得、前記再生対象となるビデオストリームにおける各ビデオスライスを順次にレンダリングして、再生対象となる画像シーケンスを得て、前記クライアントにより、前記再生対象となる画像シーケンスを再生するために使用される、
ことを特徴とする請求項12~16のいずれか1項に記載の装置。 - ビデオ処理サーバと、端末とを含むビデオ処理システムであって、
前記ビデオ処理サーバは、
ビデオ収集システムによってプッシュされたターゲットビデオフォーマットのオリジナルビデオストリームを受信する受信モジュールと、
前記オリジナルビデオストリームに対してスライス処理を順次に行って、対応するビデオスライスを得る処理モジュールと、
得られたビデオスライスを番号付けて、ビデオスライス番号を得る番号付けモジュールと、
前記ビデオスライス番号を補足強化情報フレームに保存して、スライスされた前記ターゲットビデオフォーマットのビデオストリームを得る保存モジュールと、
ターゲットサーバがクライアントによって送信されたビデオ再生コマンドに基づいて、対応するビデオストリームを返信するように、前記ビデオストリームを前記ターゲットサーバに送信する送信モジュールと、
を含み、
前記端末は、
少なくとも2つのチャネルを介してビデオサブストリームを取得して、前記少なくとも2つのチャネルと1対1に対応する少なくとも2つのビデオサブストリームを得る第1ダウンロードモジュールと、
前記少なくとも2つのビデオサブストリームの補足強化情報フレームから、ビデオスライス番号を抽出する抽出モジュールと、
抽出されたビデオスライス番号に基づいて、前記少なくとも2つのビデオサブストリームのうちの相応のビデオサブストリームがビデオスライスを欠失していることを決定する決定モジュールと、
前記相応のビデオサブストリームに対応するビデオソースから、欠失されている前記ビデオスライスをダウンロードする第2ダウンロードモジュールと、
ダウンロードされた前記ビデオスライスと、前記少なくとも2つのビデオサブストリームとを、前記ビデオスライス番号の順序に従って再生する再生モジュールと、
を含むことを特徴とするビデオ処理システム。 - コンピュータプログラムが記憶されているメモリと、プロセッサとを含むコンピュータデバイスであって、
前記プロセッサは、前記コンピュータプログラムを実行するとき、請求項1~9のいずれか1項に記載の方法のステップを実現する、
ことを特徴とするコンピュータデバイス。 - コンピュータプログラムであって、
前記コンピュータプログラムが、コンピュータデバイスによって実行されるとき、請求項1~9のいずれか1項に記載の方法のステップを実現させる、
ことを特徴とするコンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010433505.2A CN111343504B (zh) | 2020-05-21 | 2020-05-21 | 视频处理方法、装置、计算机设备和存储介质 |
CN202010433505.2 | 2020-05-21 | ||
PCT/CN2021/091889 WO2021233123A1 (zh) | 2020-05-21 | 2021-05-06 | 视频处理方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023511019A JP2023511019A (ja) | 2023-03-16 |
JP7431329B2 true JP7431329B2 (ja) | 2024-02-14 |
Family
ID=71187582
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022539104A Active JP7431329B2 (ja) | 2020-05-21 | 2021-05-06 | ビデオ処理方法、装置、コンピュータデバイスおよびコンピュータプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220256205A1 (ja) |
JP (1) | JP7431329B2 (ja) |
CN (1) | CN111343504B (ja) |
WO (1) | WO2021233123A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111343504B (zh) * | 2020-05-21 | 2020-09-18 | 腾讯科技(深圳)有限公司 | 视频处理方法、装置、计算机设备和存储介质 |
CN111782151A (zh) * | 2020-07-03 | 2020-10-16 | 珠海金山网络游戏科技有限公司 | 一种下载管理方法与装置 |
CN112383792B (zh) * | 2020-11-12 | 2023-04-18 | 咪咕视讯科技有限公司 | 直播内容同步处理方法、电子设备及存储介质 |
CN115484239B (zh) * | 2022-09-15 | 2023-10-27 | 北京百度网讯科技有限公司 | 多媒体数据流的处理方法、装置、电子设备及存储介质 |
CN116993253A (zh) * | 2023-07-12 | 2023-11-03 | 哈尔滨商业大学 | 一种实时物流信息跟踪方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004080145A (ja) | 2002-08-12 | 2004-03-11 | Canon Inc | 映像サーバシステム及びその映像再生方法 |
US20080291999A1 (en) | 2007-05-24 | 2008-11-27 | Julien Lerouge | Method and apparatus for video frame marking |
JP2009065551A (ja) | 2007-09-07 | 2009-03-26 | Fujifilm Corp | 関連情報伝達方法、関連情報伝達サーバ、端末装置、関連情報伝達システム |
US20180131742A1 (en) | 2016-11-04 | 2018-05-10 | Verizon Patent And Licensing Inc. | Mpeg-dash delivery over multicast |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2577976A2 (en) * | 2010-06-01 | 2013-04-10 | GI Provision Limited | Data transmission apparatus, system and method |
CN101945129A (zh) * | 2010-09-10 | 2011-01-12 | 北京易视腾科技有限公司 | P2p流媒体直播的低延时传输方法及系统 |
CN102497387A (zh) * | 2011-11-11 | 2012-06-13 | 合一网络技术(北京)有限公司 | 一种基于P2P客户端状态分析的Flash视频分发方法 |
CN104967685B (zh) * | 2015-06-25 | 2018-12-14 | 广东德诚科教有限公司 | 基于Flash P2P的流媒体多级缓存网络加速方法 |
CN105142035B (zh) * | 2015-09-14 | 2018-07-24 | 桂林电子科技大学 | 一种视频流切片转发系统及方法 |
US20170105010A1 (en) * | 2015-10-09 | 2017-04-13 | Microsoft Technology Licensing, Llc | Receiver-side modifications for reduced video latency |
CN107277558B (zh) * | 2017-06-19 | 2020-03-31 | 网宿科技股份有限公司 | 一种实现直播视频同步的播放器客户端、系统及方法 |
US10291936B2 (en) * | 2017-08-15 | 2019-05-14 | Electronic Arts Inc. | Overcoming lost or corrupted slices in video streaming |
CN108055594B (zh) * | 2017-11-14 | 2020-09-29 | 北京百度网讯科技有限公司 | 边缘切片的实现方法、装置、计算机设备及存储介质 |
CN109819266A (zh) * | 2017-11-20 | 2019-05-28 | 中兴通讯股份有限公司 | 一种cdn中心组网方法及系统 |
US10779012B2 (en) * | 2018-12-04 | 2020-09-15 | Agora Lab, Inc. | Error concealment in video communications systems |
CN111343504B (zh) * | 2020-05-21 | 2020-09-18 | 腾讯科技(深圳)有限公司 | 视频处理方法、装置、计算机设备和存储介质 |
-
2020
- 2020-05-21 CN CN202010433505.2A patent/CN111343504B/zh active Active
-
2021
- 2021-05-06 JP JP2022539104A patent/JP7431329B2/ja active Active
- 2021-05-06 WO PCT/CN2021/091889 patent/WO2021233123A1/zh active Application Filing
-
2022
- 2022-04-28 US US17/732,486 patent/US20220256205A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004080145A (ja) | 2002-08-12 | 2004-03-11 | Canon Inc | 映像サーバシステム及びその映像再生方法 |
US20080291999A1 (en) | 2007-05-24 | 2008-11-27 | Julien Lerouge | Method and apparatus for video frame marking |
JP2009065551A (ja) | 2007-09-07 | 2009-03-26 | Fujifilm Corp | 関連情報伝達方法、関連情報伝達サーバ、端末装置、関連情報伝達システム |
US20180131742A1 (en) | 2016-11-04 | 2018-05-10 | Verizon Patent And Licensing Inc. | Mpeg-dash delivery over multicast |
Also Published As
Publication number | Publication date |
---|---|
WO2021233123A1 (zh) | 2021-11-25 |
JP2023511019A (ja) | 2023-03-16 |
CN111343504B (zh) | 2020-09-18 |
US20220256205A1 (en) | 2022-08-11 |
CN111343504A (zh) | 2020-06-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7431329B2 (ja) | ビデオ処理方法、装置、コンピュータデバイスおよびコンピュータプログラム | |
US20220038516A1 (en) | Low-latency http live streaming | |
US9549000B2 (en) | Streaming media from a server delivering individualized content streams to clients | |
US11405699B2 (en) | Using GLTF2 extensions to support video and audio data | |
US20190075148A1 (en) | Personalized content streams using aligned encoded content segments | |
US20170302988A1 (en) | Method And System For Realizing Streaming Media Data Seamlessly Connecting In Intelligent Home | |
US10887645B2 (en) | Processing media data using file tracks for web content | |
US20140359679A1 (en) | Content streaming with client device trick play index | |
CN107819809B (zh) | 对内容进行同步操作的方法及装置 | |
US20100242066A1 (en) | Method of Performing Random Seek Preview for Streaming Video | |
US10277927B2 (en) | Movie package file format | |
KR20170074866A (ko) | 수신 장치, 송신 장치, 및 데이터 처리 방법 | |
US20130031222A1 (en) | Methods, apparatuses and computer program products for pausing video streaming content | |
US20210021655A1 (en) | System and method for streaming music on mobile devices | |
US11321516B2 (en) | Processing dynamic web content of an ISO BMFF web resource track | |
CN113141522B (zh) | 资源传输方法、装置、计算机设备及存储介质 | |
KR20200109359A (ko) | 비디오 스트리밍 | |
WO2019061256A1 (zh) | 基于流媒体的音视频播放方法及装置 | |
CN114222156A (zh) | 视频剪辑方法、装置、计算机设备和存储介质 | |
US9106802B2 (en) | Dual-type of playback for multimedia content | |
KR20140126094A (ko) | 멀티미디어 시스템에서 컨텐츠 재생 방법 및 장치 | |
Vincken | Multi-layer en multi-resolutie streaming van omni-directionele video |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220722 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230815 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230822 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231121 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240123 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240201 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7431329 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |