JP5917638B2 - エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム - Google Patents
エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム Download PDFInfo
- Publication number
- JP5917638B2 JP5917638B2 JP2014191384A JP2014191384A JP5917638B2 JP 5917638 B2 JP5917638 B2 JP 5917638B2 JP 2014191384 A JP2014191384 A JP 2014191384A JP 2014191384 A JP2014191384 A JP 2014191384A JP 5917638 B2 JP5917638 B2 JP 5917638B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- time
- video encoder
- intra
- error
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/507—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction using conditional replenishment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/637—Control signals issued by the client directed to the server or network components
- H04N21/6375—Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/28—Flow control; Congestion control in relation to timing considerations
- H04L47/283—Flow control; Congestion control in relation to timing considerations in response to processing delays, e.g. caused by jitter or round trip time [RTT]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
実現してもよい、高いレベルの方法の詳細を示し、さまざまな観点のさらなる詳細は、図5ないし8のような、後続の図中で示されている。図4の以下の説明において、説明のためだけに、方法はビデオエンコーダ2により実行されることを仮定するであろう。
Target_Correction_Time(秒):ビデオエンコーダ2がエラーを訂正しなければならない、パケットロスのようなエラーの、ビデオエンコーダ2による検出後の時間の最大量
Current_Frame_Rate(1秒当たりのフレーム):ビデオエンコーダ2により使用される、1秒当たりのフレームの現在の数。ビデオエンコーダ2が、target_enc_rate(ターゲットエンコードレート)パラメータにおける変更により、このパラメータを変える場合、レート適合モジュール10は、ビデオエンコーダ2からのフレームの引渡しから、これを推定してもよい。いくつかのケースにおいて、ビデオエンコーダ2は、Current_Frame_Rateの値を、レート適合モジュール10に示してもよい。
Max_Intra_MB_%(0ないし100%):イントラコード化されるマクロブロックの最大許容百分率。データおよびフレームレートにしたがってフレームサイズを固定してもよいことから、このパラメータを使用して、ビデオ品質の劣化を制限してもよい。
Intra_Repeat(整数):パケットロスが検出されたときに、(フレームのシーケンスにわたる)フルのマクロブロックのイントラリフレッシュシーケンスが全画像にわたって実行される回数。
Intra_MB_%_No_Loss(0ないし100%):検出されるパケットロスがないときの、イントラコード化される(リフレッシュされる)マクロブロックの百分率。
Intra_MB_%(0ないし100%):ビデオエンコーダ2が、1フレーム(またはスライス)当たりに挿入すべき、イントラコード化される(リフレッシュされる)マクロブロックの百分率。
Num_Intra_Frames(整数):ビデオエンコーダ2がマクロブロックをイントラコード化している(リフレッシュしている)フレームの数。
Target_Err_Pr(0−1):単一のイントラリフレッシュシーケンス(すなわち、ビデオフレームのシーケンス)後の画像中にエラーがまだ存在する、ターゲットの確率。図6の例において、このパラメータは、1フレーム当たりのパケットの数の、予測されるPER(パケットエラーレート)倍よりも高く設定される。
α(0−1):avg_norm_ppf(1フレーム当たりの平均標準化パケット)を推定するためのIIR(無限インパルス応答)フィルタの更新ファクタ。ビデオエンコーダ2は、0.1の値により開始してもよい。
β(0−10):Intra_MB_%を決定するための調整ファクタ。ビデオエンコーダ2は、1.0の値により開始してもよい。
PER(0−1):パケットエラーレートであり、ビデオデコーダ20から受信される最も最近のRTCP受信者報告からのfraction_lostパラメータに等しいように設定されてもよい。
avg_norm_ppf(実数):1フレーム当たりの平均の“標準化された”パケットであり、50kbps(キロビットパー秒)のターゲットのエンコードレートおよび10fps(フレームパー秒)に標準化されてもよい。
inst_ppf(整数):現在のフレーム中の、1フレーム当たりのパケット
est_ppf(実数):将来の1フレーム当たりの、パケットの推定数
Target_enc_rate(ビットパー秒):レート適合モジュール10により設定されるtarget_encode_rateの現在の値
avg_norm_ppf=(1-α)×avg_norm_ppf+(α×inst_ppf)×(50kbps/target_encode_rate)×(Current_Frame_Rate/10fps)
ここで、この特定の例において、ターゲットのエンコードレートは、50kbpsの予め規定されている値を基準にして標準化され、現在のフレームレートは、10fpsの予め規定されている値を基準にして標準されると仮定してもよい。これらの予め規定されている値は、いくつかの例示的なシナリオだけで使用され、異なる設定において、さまざまな異なる値を有していてもよい。inst_ppfの値は、次のフレームに対してゼロにリセットできる(160)。示すように、avg_norm_ppfの値は、inst_ppfと、target_encode_rateと、(現在のフレームのフレームレートである)Current_Frame_Rateとの値に基づいている。図6中で示すように、このavg_norm_ppfの値は、est_ppfの値を計算するために使用されてもよい。
est_ppf=avg_norm_ppf×(target_enc_rate/50kbps)×(10fps/Current_Frame_Rate)
ここで、この例において、ターゲットエンコードレートは、50kbpsの予め規定されている値を基準として標準化され、現在のフレームレートは、10fpsの予め規定されている値を基準として標準化される(166)。予め規定されている値は、最適化されてもよく、さまざまな異なる設定において異なる値を有していてもよい。ターゲットのエンコードレート(target_enc_rate)を、等式に対する1つの入力パラメータとして提供してもよく、図5中で示した基本アルゴリズムからのIntra_MB_%を別のものとして提供してもよい(164)。1つの観点において、ターゲットのエンコードレート、target_enc_rateは、例えば、ビデオエンコーダ2により実行されているアプリケーションのタイプに基づいて調整されてもよい調整可能なパラメータを含んでいてもよい。1つの観点において、ターゲットのエンコードレートは、ダイナミックなレート適合アルゴリズムに基づいて調整されてもよく、ビデオエンコーダ2は、そのレートをネットワーク状態に適合させる。
Target_Err_Pr=Max{Target_Err_Pr,est_ppf×PER]
Min{Max_Intra_MB_%, Max{β×100%×log(1-PER)×est_ppf/log(1-Target_Err_Pr), 基本アルゴリズムからのIntra_MB_%}}
IRシーケンス中の#フレーム×IRシーケンス間の1フレーム当たりの平均の#パケット、ここで、IRシーケンス中の#フレーム=100%/Intra_MB_%
est_ppf=Avg_norm_ppf×(target_enc_rate/50kbps)×(10fps/Current_Frame_Rate)
log(1-Target_Err_Pr)/log(1-PER)>=(100%/Intra_MB_%)×est_ppf
受信したGNACKにより識別される、パケットのシーケンス番号を決定すると、ビデオエンコーダ2は、イントラコード化マクロブロックを含む、最後のイントラリフレッシュされたフレームシーケンスの、最初のパケットのシーケンス番号(RTP_SN_Last_IR_Sequence)よりも大きい、識別されたパケットに対する最も早いまたは最も小さいシーケンス番号(RTP_SN)、すなわち、RTP_SN>RTP_SN_Last_IR_Sequenceを決定してもよい(192)。
Time_elapsed=Current_Time−Ts_of_earliest_GNACK_RTP_SN
Set Intra_MB_%=Min{Max_Intra_MB_%, 100%/[(Target_Correction_Time−Time_elapsed)×Current_Frame_Rate]}
以前に記述した、いくつかの式または計算と同様に、レート適合モジュール10は、いくつかのケースにおいて、Intra_MB_%の値をMax_Intra_MB_%までに制限してもよい。Max_Intra_MB_%の値は、ビデオエンコーダ2により実行されるアプリケーションのタイプまたは、ビデオエンコーダ2により提供される環境に基づいて、ビデオエンコーダ2により、またはユーザにより、コンフィグレーションされ、または調整されてもよい。上述のケースにおいて、レート適合モジュール10はまた、Target_Correction_TimeとTime_elapsedとの間の差に少なくとも部分的に基づいて、Intra_MB_%の修正値を決定してもよい。以前に記述したように、Target_Correction_Timeパラメータは、ビデオエンコーダ2がエラーを訂正しなければならないパケットロスのようなエラーの、ビデオエンコーダ2による検出後の時間の最大量を示す。このケースにおいて、この最大訂正時間は、受信機がエラーの伝搬を理解する時間のターゲットとされる最大量になる。Target_Correction_Timeの値は、最適化のためにコンフィグレーションされ、または変更されてもよい。
current_time>RTT+Time_Last_Sent_PLI
ここで、Time_Last_Sent_PLIは、ビデオデコーダ20がPLIをビデオエンコーダ2に最後に送った(ビデオデコーダ20のクロックにしたがった)時間に等しい。現在の時間が、実際に、Time_Last_Sent_PLIを加えたRTTよりも大きい場合、ビデオデコーダ20は、別のPLIメッセージをビデオエンコーダ2に送ってもよく、また、ビデオデコーダ20のクロックにしたがって、Time_Last_Sent_PLIの値を現在の時間に設定してもよい。
Number_of_packets_lost>=%_Packet_Loss_Threshold)×avg_ppf
ここで、avg_ppfは、ビデオデコーダ20により受信される、1フレーム当たりのパケットの平均の数に等しい。ビデオデコーダ20は、ビデオエンコーダ2により受信される各フレーム中のパケットの数を絶え間なく決定することにより、avg_ppfの値を推定できる。失われたパケットの数が、(先に示したような、また、avg_ppfに基づいていてもよい)しきい値を超えるように、PLIを最後に送った以降に、非常に多くの数のパケットが失われている場合、ビデオデコーダ20は、フルのイントラリフレッシュシーケンスを開始するために、別のPLIメッセージをビデオエンコーダ2に送ってもよい(218)。ビデオデコーダ20はまた、Number_of_packets_lostの値をゼロにリセットしてもよい。1つの観点において、PLIを送るのに先立って、ビデオデコーダ20はまた、図9中で示した方法を実行して、前のPLIが、1つの往復時間窓内ですでに送られているかどうかを決定してもよく、以前に記述したように、そのようなケースのときに、別のPLIを送ることを控えてもよい。
以下に、出願当初の特許請求の範囲に記載された発明を付記する。
[C1]
方法において、
コード化されているビデオデータに関係するエラーを示すフィードバックを、ビデオデコーダから受信することと、
前記フィードバックを受信すると、ビデオユニットのシーケンス内の各ビデオユニットに対する、ビデオデータの指定された数のセグメントをイントラコード化するレートを決定することとを含み、
1つのビデオユニット内のビデオデータのセグメントのイントラコード化は、前記シーケンス内の他のビデオユニット内のビデオデータのセグメントのコード化から独立している方法。
[C2]
前記フィードバックを受信することは、前記コード化ビデオデータの少なくとも1つのパケットのロスを示すフィードバックを、前記ビデオデコーダから受信することを含み、前記少なくとも1つのパケットは、前記ビデオデコーダに対して以前に送られているが、前記ビデオデコーダにより受信されていないC1記載の方法。
[C3]
ビデオデータの各セグメントは、ビデオデータの1つ以上のブロックを含み、前記ビデオユニットのシーケンス内の各ビデオユニットは、ビデオデータの1つ以上のフレームを含むC1記載の方法。
[C4]
前記レートを決定することは、前記シーケンス内の1つ以上のビデオユニットにわたってエラーを訂正するためのターゲット訂正時間に少なくとも部分的に基づいて、前記レートを決定することを含むC1記載の方法。
[C5]
前記フィードバックは、ピクチャロス表示(PLI)と、汎用否定応答(GNACK)とのうちの少なくとも1つを含むC1記載の方法。
[C6]
前記フィードバックは、前記GNACKを含み、前記GNACKは、失われたパケットの数を示し、前記イントラコード化するレートを決定することは、前記失われたパケットの数に少なくとも部分的に基づいているC5記載の方法。
[C7]
失われたパケットの第2の数を示す報告を、前記ビデオデコーダから受信することと、
前記GNACKより示された、前記失われたパケットの数と、前記報告により示された、前記失われたパケットの第2の数とのうちの少なくとも1つに基づいて、パケットエラーレートを計算することとをさらに含み、
前記イントラコード化するレートを決定することは、前記パケットエラーレートに少なくとも部分的に基づいているC6記載の方法。
[C8]
前記レートを決定することは、さらに、前記ビデオユニットのシーケンス内の各ビデオユニット内に含まれているパケットの推定された数に少なくとも部分的に基づいているC7記載の方法。
[C9]
前記GNACKは、失われた各パケットを識別し、前記方法は、現在の時間と、前記識別された、失われたパケットのうちの1つが前記ビデオデコーダに以前に送られた時間との間の差に基づいて、経過時間を計算することをさらに含み、前記レートを決定することは、さらに、前記経過時間に少なくとも部分的に基づいているC6記載の方法。
[C10]
前記GNACKにより識別されている、失われた各パケットは、シーケンス番号を有し、前記経過時間を計算することは、
前記GNACKにより識別されている、どの、失われたパケットが、イントラコード化されたセグメントを有するビデオユニットの前のシーケンスの最初のパケットのシーケンス番号よりも大きいシーケンス番号を有するかを決定することと、
前記現在の時間と、前記決定された、失われたパケットが、前記ビデオデコーダに以前に送られた時間との間の差に基づいて、前記経過時間を計算することとを含むC9記載の方法。
[C11]
ビデオユニットの1つのシーケンス内の異なるビデオユニットにわたる、動きの検出量が、動きのしきい値を超えているかどうかに基づいて、ビデオユニットの複数のシーケンスにおいて、イントラコード化するレートの決定を繰り返すかどうかを決定することをさらに含むC1記載の方法。
[C12]
コンピュータ読取り可能媒体において、
コード化されているビデオデータに関係するエラーを示すフィードバックを、ビデオデコーダから受信することと、
前記フィードバックを受信すると、ビデオユニットのシーケンス内の各ビデオユニットに対する、ビデオデータの指定された数のセグメントをイントラコード化するレートを決定することと、
を1つ以上のプロセッサに生じさせるための命令を含み、
1つのビデオユニット内のビデオデータのセグメントのイントラコード化は、前記シーケンス内の他のビデオユニット内のビデオデータのセグメントのコード化から独立しているコンピュータ読取り可能媒体。
[C13]
前記フィードバックを受信することを前記1つ以上のプロセッサに生じさせるための命令は、前記コード化ビデオデータの少なくとも1つのパケットのロスを示すフィードバックを、前記ビデオデコーダから受信することを前記1つ以上のプロセッサに生じさせるための命令を含み、前記少なくとも1つのパケットは、前記ビデオデコーダに対して以前に送られているが、前記ビデオデコーダにより受信されていないC12記載のコンピュータ読取り可能媒体。
[C14]
ビデオデータの各セグメントは、ビデオデータの1つ以上のブロックを含み、前記ビデオユニットのシーケンス内の各ビデオユニットは、ビデオデータの1つ以上のフレームを含むC12記載のコンピュータ読取り可能媒体。
[C15]
前記イントラコード化するレートは、前記シーケンス内の1つ以上のビデオユニットにわたってエラーを訂正するためのターゲット訂正時間に少なくとも部分的に基づいているC12記載のコンピュータ読取り可能媒体。
[C16]
前記フィードバックは、ピクチャロス表示(PLI)と、汎用否定応答(GNACK)とのうちの少なくとも1つを含むC12記載のコンピュータ読取り可能媒体。
[C17]
前記フィードバックは、前記GNACKを含み、前記GNACKは、失われたパケットの数を示し、前記イントラコード化するレートは、前記失われたパケットの数に少なくとも部分的に基づいているC16記載のコンピュータ読取り可能媒体。
[C18]
失われたパケットの第2の数を示す報告を、前記ビデオデコーダから受信することと、
前記GNACKより示された、前記失われたパケットの数と、前記報告により示された、前記失われたパケットの第2の数とのうちの少なくとも1つに基づいて、パケットエラーレートを計算することと、
を前記1つ以上のプロセッサに生じさせるための命令をさらに含み、
前記イントラコード化するレートは、前記パケットエラーレートに少なくとも部分的に基づいているC17記載のコンピュータ読取り可能媒体。
[C19]
前記イントラコード化するレートは、さらに、前記ビデオユニットのシーケンス内の各ビデオユニット内に含まれているパケットの推定された数に少なくとも部分的に基づいているC18記載のコンピュータ読取り可能媒体。
[C20]
前記GNACKは、失われた各パケットを識別し、前記コンピュータ読取り可能媒体は、現在の時間と、前記識別された、失われたパケットのうちの1つが前記ビデオデコーダに以前に送られた時間との間の差に基づいて、経過時間を計算することを、前記1つ以上のプロセッサに生じさせるための命令をさらに含み、前記イントラコード化するレートは、さらに、前記経過時間に少なくとも部分的に基づいているC17記載のコンピュータ読取り可能媒体。
[C21]
前記GNACKにより識別されている、失われた各パケットは、シーケンス番号を有し、前記経過時間を計算することを前記1つ以上のプロセッサに生じさせるための命令は、
前記GNACKにより識別されている、どの、失われたパケットが、イントラコード化されたセグメントを有するビデオユニットの前のシーケンスの最初のパケットのシーケンス番号よりも大きいシーケンス番号を有するかを決定することと、
前記現在の時間と、前記決定された、失われたパケットが、前記ビデオデコーダに以前に送られた時間との間の差に基づいて、前記経過時間を計算することと、
を前記1つ以上のプロセッサに生じさせるための命令を含むC20記載のコンピュータ読取り可能媒体。
[C22]
ビデオユニットの1つのシーケンス内の異なるビデオユニットにわたる、動きの検出量が、動きのしきい値を超えているかどうかに基づいて、ビデオユニットの複数のシーケンスにおいて、イントラコード化するレートの決定を繰り返すかどうかを決定することを、前記1つ以上のプロセッサに生じさせるための命令をさらに含むC12記載のコンピュータ読取り可能媒体。
[C23]
デバイスにおいて、
記憶デバイスと、
前記記憶デバイスに結合されている1つ以上のプロセッサとを具備し、
前記1つ以上のプロセッサは、
コード化されているビデオデータに関係するエラーを示すフィードバックを、ビデオデコーダから受信し、
前記フィードバックを受信すると、ビデオユニットのシーケンス内の各ビデオユニットに対する、ビデオデータの指定された数のセグメントをイントラコード化するレートを決定するように構成されており、
1つのビデオユニット内のビデオデータのセグメントのイントラコード化は、前記シーケンス内の他のビデオユニット内のビデオデータのセグメントのコード化から独立しているデバイス。
[C24]
前記1つ以上のプロセッサは、少なくとも、前記コード化ビデオデータの少なくとも1つのパケットのロスを示すフィードバックを前記ビデオデコーダから受信することにより、前記フィードバックを受信するように構成されており、前記少なくとも1つのパケットは、前記ビデオデコーダに対して以前に送られているが、前記ビデオデコーダにより受信されていないC23記載のデバイス。
[C25]
ビデオデータの各セグメントは、ビデオデータの1つ以上のブロックを含み、前記ビデオユニットのシーケンス内の各ビデオユニットは、ビデオデータの1つ以上のフレームを含むC23記載のデバイス。
[C26]
前記イントラコード化するレートは、前記シーケンス内の1つ以上のビデオユニットにわたってエラーを訂正するためのターゲット訂正時間に少なくとも部分的に基づいているC23記載のデバイス。
[C27]
前記フィードバックは、ピクチャロス表示(PLI)と、汎用否定応答(GNACK)とのうちの少なくとも1つを含むC23記載のデバイス。
[C28]
前記フィードバックは、前記GNACKを含み、前記GNACKは、失われたパケットの数を示し、前記イントラコード化するレートは、前記失われたパケットの数に少なくとも部分的に基づいているC27記載のデバイス。
[C29]
前記1つ以上のプロセッサは、
失われたパケットの第2の数を示す報告を、前記ビデオデコーダから受信し、
前記GNACKより示された、前記失われたパケットの数と、前記報告により示された、前記失われたパケットの第2の数とのうちの少なくとも1つに基づいて、パケットエラーレートを計算するようにさらに構成されており、
前記イントラコード化するレートは、前記パケットエラーレートに少なくとも部分的に基づいているC28記載のデバイス。
[C30]
前記イントラコード化するレートは、さらに、前記ビデオユニットのシーケンス内の各ビデオユニット内に含まれているパケットの推定された数に少なくとも部分的に基づいているC29記載のデバイス。
[C31]
前記GNACKは、失われた各パケットを識別し、前記1つ以上のプロセッサは、現在の時間と、前記識別された、失われたパケットのうちの1つが前記ビデオデコーダに以前に送られた時間との間の差に基づいて、経過時間を計算するようにさらに構成されており、前記イントラコード化するレートは、さらに、前記経過時間に少なくとも部分的に基づいているC28記載のデバイス。
[C32]
前記GNACKにより識別されている、失われた各パケットは、シーケンス番号を有し、前記1つ以上のプロセッサは、少なくとも、前記GNACKにより識別されている、どの、失われたパケットが、イントラコード化されたセグメントを有するビデオユニットの前のシーケンスの最初のパケットのシーケンス番号よりも大きいシーケンス番号を有するかを決定することと、前記現在の時間と、前記決定された、失われたパケットが、前記ビデオデコーダに以前に送られた時間との間の差に基づいて、前記経過時間を計算することとにより、前記経過時間を計算するように構成されているC31記載のデバイス。
[C33]
前記1つ以上のプロセッサは、ビデオユニットの1つのシーケンス内の異なるビデオユニットにわたる、動きの検出量が、動きのしきい値を超えているかどうかに基づいて、ビデオユニットの複数のシーケンスにおいて、イントラコード化するレートの決定を繰り返すかどうかを決定するようにさらに構成されているC23記載のデバイス。
[C34]
前記デバイスは、ワイヤレス通信デバイスハンドセットを具備するC23記載のデバイス。
[C35]
前記デバイスは、1つ以上の集積回路デバイスを具備するC23記載のデバイス。
[C36]
デバイスにおいて、
コード化されているビデオデータに関係するエラーを示すフィードバックを、ビデオデコーダから受信する手段と、
前記フィードバックを受信すると、ビデオユニットのシーケンス内の各ビデオユニットに対する、ビデオデータの指定された数のセグメントをイントラコード化するレートを決定する手段とを具備し、
1つのビデオユニット内のビデオデータのセグメントのイントラコード化は、前記シーケンス内の他のビデオユニット内のビデオデータのセグメントのコード化から独立しているデバイス。
[C37]
前記フィードバックを受信する手段は、前記コード化ビデオデータの少なくとも1つのパケットのロスを示すフィードバックを、前記ビデオデコーダから受信する手段を備え、前記少なくとも1つのパケットは、前記ビデオデコーダに対して以前に送られているが、前記ビデオデコーダにより受信されていないC36記載のデバイス。
[C38]
ビデオデータの各セグメントは、ビデオデータの1つ以上のブロックを含み、前記ビデオユニットのシーケンス内の各ビデオユニットは、ビデオデータの1つ以上のフレームを含むC36記載のデバイス。
[C39]
前記イントラコード化するレートは、前記シーケンス内の1つ以上のビデオユニットにわたってエラーを訂正するためのターゲット訂正時間に少なくとも部分的に基づいているC36記載のデバイス。
[C40]
前記フィードバックは、ピクチャロス表示(PLI)と、汎用否定応答(GNACK)とのうちの少なくとも1つを含むC36記載のデバイス。
[C41]
前記フィードバックは、前記GNACKを含み、前記GNACKは、失われたパケットの数を示し、前記イントラコード化するレートは、前記失われたパケットの数に少なくとも部分的に基づいているC40記載のデバイス。
[C42]
失われたパケットの第2の数を示す報告を、前記ビデオデコーダから受信する手段と、
前記GNACKより示された、前記失われたパケットの数と、前記報告により示された、前記失われたパケットの第2の数とのうちの少なくとも1つに基づいて、パケットエラーレートを計算する手段とをさらに具備し、
前記イントラコード化するレートは、前記パケットエラーレートに少なくとも部分的に基づいているC41記載のデバイス。
[C43]
前記イントラコード化するレートは、さらに、前記ビデオユニットのシーケンス内の各ビデオユニット内に含まれているパケットの推定された数に少なくとも部分的に基づいているC42記載のデバイス。
[C44]
前記GNACKは、失われた各パケットを識別し、前記デバイスは、現在の時間と、前記識別された、失われたパケットのうちの1つが前記ビデオデコーダに以前に送られた時間との間の差に基づいて、経過時間を計算する手段をさらに具備し、前記イントラコード化するレートは、さらに、前記経過時間に少なくとも部分的に基づいているC41記載のデバイス。
[C45]
前記GNACKにより識別されている、失われた各パケットは、シーケンス番号を有し、前記経過時間を計算する手段は、
前記GNACKにより識別されている、どの、失われたパケットが、イントラコード化されたセグメントを有するビデオユニットの前のシーケンスの最初のパケットのシーケンス番号よりも大きいシーケンス番号を有するかを決定する手段と、
前記現在の時間と、前記決定された、失われたパケットが、前記ビデオデコーダに以前に送られた時間との間の差に基づいて、前記経過時間を計算する手段とを備えるC44記載のデバイス。
[C46]
ビデオユニットの1つのシーケンス内の異なるビデオユニットにわたる、動きの検出量が、動きのしきい値を超えているかどうかに基づいて、ビデオユニットの複数のシーケンスにおいて、イントラコード化するレートの決定を繰り返すかどうかを決定する手段をさらに具備するC36記載のデバイス。
[C47]
方法において、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを、ビデオデコーダにより検出することと、
前記ビデオデコーダと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定することと、
前記ビデオデコーダにより検出された以前のエラーを示しているフィードバックメッセージを、前記ビデオデコーダが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定することと、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較することと、
前記比較に基づいて、前記ビデオデコーダにより検出された少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定することとを含む方法。
[C48]
前記第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定することは、
前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを送ることと、
前記最後に送られた時間を、前記現在の時間に等しいように設定することとを含むC47記載の方法。
[C49]
前記往復移動時間を決定することは、前記ビデオデコーダと前記ビデオエンコーダとの間で交換される、少なくとも1つの対のメッセージに基づいて、前記往復移動時間を測定または推定することを含むC47記載の方法。
[C50]
前記ビデオエンコーダから、前記コード化ビデオデータを受信することをさらに含み、前記少なくとも1つのエラーを検出することは、前記ビデオデコーダによる前記コード化ビデオデータのデコーディングの際に、少なくとも1つのデコーディングエラーを検出することを含むC47記載の方法。
[C51]
前記少なくとも1つのエラーを検出することは、パケットロスを検出することを含み、
前記方法は、
前記パケットロスを検出すると、失われたパケットのカウントをインクリメントすることと、
前記失われたパケットのカウントをしきい値と比較することと、
前記失われたパケットのカウントが、前記しきい値を超えている場合に、および、前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを前記ビデオエンコーダに送ることと、
前記失われたパケットのカウントが、前記しきい値を超えていない場合に、前記パケットロスを示している、別のタイプのフィードバックメッセージを、前記ビデオエンコーダに送ることとをさらに含むC47記載の方法。
[C52]
前記第2のフィードバックメッセージを前記ビデオエンコーダに送ると、前記失われたパケットのカウントをゼロに等しいように設定することをさらに含むC51記載の方法。
[C53]
前記しきい値は、パケットロスしきい値と、1フレーム当たりのパケットの平均数とに少なくとも部分的に基づいているC51記載の方法。
[C54]
デバイスにおいて、
記憶デバイスと、
前記記憶デバイスに結合されている1つ以上のプロセッサとを具備し、
前記1つ以上のプロセッサは、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを検出し、
前記デバイスと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定し、
前記デバイスにより検出された以前のエラーを示しているフィードバックメッセージを、前記デバイスが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定し、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較し、
前記比較に基づいて、前記デバイスにより検出された少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定するように構成されているデバイス。
[C55]
前記1つ以上のプロセッサは、少なくとも、前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを送ることと、前記最後に送られた時間を、前記現在の時間に等しいように設定することとにより、前記第2のフィードバックメッセージを前記ビデオエンコーダに送るかどうかを決定するように構成されているC54記載のデバイス。
[C56]
前記1つ以上のプロセッサは、少なくとも、前記デバイスと前記ビデオエンコーダとの間で交換される、少なくとも1つの対のメッセージに基づいて、前記往復移動時間を測定または推定することにより、前記往復移動時間を決定するように構成されているC54記載のデバイス。
[C57]
前記1つ以上のプロセッサは、前記ビデオエンコーダから、前記コード化ビデオデータを受信するようにさらに構成されており、前記1つ以上のプロセッサは、前記デバイスによる前記コード化ビデオデータのデコーディングの際に、少なくとも1つのデコーディングエラーを検出することにより、前記少なくとも1つのエラーを検出するように構成されているC54記載のデバイス。
[C58]
前記少なくとも1つのエラーは、パケットロスを含み、前記1つ以上のプロセッサは、
前記パケットロスを検出すると、失われたパケットのカウントをインクリメントし、
前記失われたパケットのカウントをしきい値と比較し、
前記失われたパケットのカウントが、前記しきい値を超えている場合に、および、前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを前記ビデオエンコーダに送り、
前記失われたパケットのカウントが、前記しきい値を超えていない場合に、前記パケットロスを示している、別のタイプのフィードバックメッセージを、前記ビデオエンコーダに送るようにさらに構成されているC54記載のデバイス。
[C59]
前記1つ以上のプロセッサは、前記第2のフィードバックメッセージを前記ビデオエンコーダに送ると、前記失われたパケットのカウントをゼロに等しいように設定するようにさらに構成されているC58記載のデバイス。
[C60]
前記しきい値は、パケットロスしきい値と、1フレーム当たりのパケットの平均数とに少なくとも部分的に基づいているC58記載のデバイス。
[C61]
前記デバイスは、ワイヤレス通信デバイスハンドセットを具備するC54記載のデバイス。
[C62]
前記デバイスは、1つ以上の集積回路デバイスを具備するC54記載のデバイス。
[C63]
デバイスにおいて、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを検出する手段と、
前記デバイスと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定する手段と、
前記デバイスにより検出された以前のエラーを示しているフィードバックメッセージを、前記デバイスが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定する手段と、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較する手段と、
前記比較に基づいて、前記デバイスにより検出された少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定する手段とを具備するデバイス。
[C64]
コンピュータ読取り可能媒体において、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを、ビデオデコーダにより検出することと、
前記ビデオデコーダと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定することと、
前記ビデオデコーダにより検出された以前のエラーを示しているフィードバックメッセージを、前記ビデオデコーダが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定することと、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較することと、
前記比較に基づいて、前記ビデオデコーダにより検出された少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定することと、
を1つ以上のプロセッサに生じさせるための命令を含むコンピュータ読取り可能媒体。
Claims (16)
- 方法において、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを、ビデオデコーダにより検出することと、
前記ビデオデコーダと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定することと、
前記ビデオデコーダにより検出された以前のエラーを示している第1のフィードバックメッセージを、前記ビデオデコーダが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定することと、前記以前のエラーは、前記ビデオデコーダにより以後に検出された前記少なくとも1つのエラーとは異なるエラーであり、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較することと、
前記比較に基づいて、前記ビデオデコーダにより以後に検出された前記少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定することとを含み、
前記第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定することは、
前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを送ることと、
前記最後に送られた時間を、前記現在の時間に等しいように設定することと
を含む方法。 - 前記往復移動時間を決定することは、前記ビデオデコーダと前記ビデオエンコーダとの間で交換される、少なくとも1つの対のメッセージに基づいて、前記往復移動時間を測定または推定することを含む請求項1記載の方法。
- 前記ビデオエンコーダから、前記コード化ビデオデータを受信することをさらに含み、前記少なくとも1つのエラーを検出することは、前記ビデオデコーダによる前記コード化ビデオデータのデコーディングの際に、少なくとも1つのデコーディングエラーを検出することを含む請求項1記載の方法。
- 前記少なくとも1つのエラーを検出することは、パケットロスを検出することを含み、
前記方法は、
前記パケットロスを検出すると、失われたパケットのカウントをインクリメントすることと、
前記失われたパケットのカウントをしきい値と比較することと、
前記失われたパケットのカウントが、前記しきい値を超えている場合に、および、前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを前記ビデオエンコーダに送ることと、
前記失われたパケットのカウントが、前記しきい値を超えていない場合に、前記パケットロスを示している、別のタイプのフィードバックメッセージを、前記ビデオエンコーダに送ることと
をさらに含む請求項1記載の方法。 - 前記第2のフィードバックメッセージを前記ビデオエンコーダに送ると、前記失われたパケットのカウントをゼロに等しいように設定することをさらに含む請求項4記載の方法。
- 前記しきい値は、パケットロスしきい値と、1フレーム当たりのパケットの平均数とに少なくとも部分的に基づいている請求項4記載の方法。
- デバイスにおいて、
記憶デバイスと、
前記記憶デバイスに結合されている1つ以上のプロセッサとを具備し、
前記1つ以上のプロセッサは、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを検出し、
前記デバイスと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定し、
前記プロセッサにより検出された以前のエラーを示している第1のフィードバックメッセージを、前記デバイスが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定し、前記以前のエラーは、前記プロセッサにより以後に検出された前記少なくとも1つのエラーとは異なるエラーであり、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較し、
前記比較に基づいて、前記プロセッサにより以後に検出された少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定するように構成されており、
前記1つ以上のプロセッサは、少なくとも、前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを送ることと、前記最後に送られた時間を、前記現在の時間に等しいように設定することとにより、前記第2のフィードバックメッセージを前記ビデオエンコーダに送るかどうかを決定するように構成されているデバイス。 - 前記1つ以上のプロセッサは、少なくとも、前記デバイスと前記ビデオエンコーダとの間で交換される、少なくとも1つの対のメッセージに基づいて、前記往復移動時間を測定または推定することにより、前記往復移動時間を決定するように構成されている請求項7記載のデバイス。
- 前記1つ以上のプロセッサは、前記ビデオエンコーダから、前記コード化ビデオデータを受信するようにさらに構成されており、前記1つ以上のプロセッサは、前記デバイスによる前記コード化ビデオデータのデコーディングの際に、少なくとも1つのデコーディングエラーを検出することにより、前記少なくとも1つのエラーを検出するように構成されている請求項7記載のデバイス。
- 前記少なくとも1つのエラーは、パケットロスを含み、
前記1つ以上のプロセッサは、
前記パケットロスを検出すると、失われたパケットのカウントをインクリメントし、
前記失われたパケットのカウントをしきい値と比較し、
前記失われたパケットのカウントが、前記しきい値を超えている場合に、および、前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを前記ビデオエンコーダに送り、
前記失われたパケットのカウントが、前記しきい値を超えていない場合に、前記パケットロスを示している、別のタイプのフィードバックメッセージを、前記ビデオエンコーダに送るようにさらに構成されている請求項7記載のデバイス。 - 前記1つ以上のプロセッサは、前記第2のフィードバックメッセージを前記ビデオエンコーダに送ると、前記失われたパケットのカウントをゼロに等しいように設定するようにさらに構成されている請求項10記載のデバイス。
- 前記しきい値は、パケットロスしきい値と、1フレーム当たりのパケットの平均数とに少なくとも部分的に基づいている請求項10記載のデバイス。
- 前記デバイスは、ワイヤレス通信デバイスハンドセットを具備する請求項7記載のデバイス。
- 前記デバイスは、1つ以上の集積回路デバイスを具備する請求項7記載のデバイス。
- デバイスにおいて、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを検出する手段と、
前記デバイスと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定する手段と、
前記検出する手段により検出された以前のエラーを示している第1のフィードバックメッセージを、前記デバイスが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定する手段と、前記以前のエラーは、前記検出する手段により以後に検出された前記少なくとも1つのエラーとは異なるエラーであり、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較する手段と、
前記比較に基づいて、前記検出する手段により以後に検出された少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定する手段とを具備し、
前記第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定する手段は、
前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを送り、
前記最後に送られた時間を、前記現在の時間に等しいように設定するように構成されているデバイス。 - コンピュータ読取り可能記憶媒体において、
ビデオエンコーダから送られた、コード化されているビデオデータに関係する少なくとも1つのエラーを、ビデオデコーダにより検出することと、
前記ビデオデコーダと前記ビデオエンコーダとの間のデータ通信に対する往復移動時間を決定することと、
前記ビデオデコーダにより検出された以前のエラーを示している第1のフィードバックメッセージを、前記ビデオデコーダが前記ビデオエンコーダに最後に送った時間である、最後に送られた時間を決定することと、前記以前のエラーは、前記ビデオデコーダにより以後に検出された前記少なくとも1つのエラーとは異なるエラーであり、
現在の時間を、前記最後に送られた時間と前記往復移動時間との合計と比較することと、
前記比較に基づいて、前記ビデオデコーダにより以後に検出された少なくとも1つのエラーを示している第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定することとを1つ以上のプロセッサに生じさせるための命令を含み、
前記第2のフィードバックメッセージを、前記ビデオエンコーダに送るかどうかを決定することは、
前記現在の時間が、前記最後に送られた時間と前記往復移動時間との合計を超えている場合に、前記第2のフィードバックメッセージを送ることと、
前記最後に送られた時間を、前記現在の時間に等しいように設定することと
を含むコンピュータ読取り可能記憶媒体。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US4300508P | 2008-04-07 | 2008-04-07 | |
US61/043,005 | 2008-04-07 | ||
US12/349,386 US8406296B2 (en) | 2008-04-07 | 2009-01-06 | Video refresh adaptation algorithms responsive to error feedback |
US12/349,386 | 2009-01-06 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013011107A Division JP2013138447A (ja) | 2008-04-07 | 2013-01-24 | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015039189A JP2015039189A (ja) | 2015-02-26 |
JP2015039189A5 JP2015039189A5 (ja) | 2015-12-10 |
JP5917638B2 true JP5917638B2 (ja) | 2016-05-18 |
Family
ID=41133248
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011504113A Expired - Fee Related JP5248673B2 (ja) | 2008-04-07 | 2009-04-06 | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
JP2013011107A Pending JP2013138447A (ja) | 2008-04-07 | 2013-01-24 | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
JP2014191384A Expired - Fee Related JP5917638B2 (ja) | 2008-04-07 | 2014-09-19 | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011504113A Expired - Fee Related JP5248673B2 (ja) | 2008-04-07 | 2009-04-06 | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
JP2013011107A Pending JP2013138447A (ja) | 2008-04-07 | 2013-01-24 | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
Country Status (7)
Country | Link |
---|---|
US (2) | US8406296B2 (ja) |
EP (3) | EP2274914B1 (ja) |
JP (3) | JP5248673B2 (ja) |
KR (2) | KR101330931B1 (ja) |
CN (2) | CN102857757B (ja) |
TW (1) | TW201004356A (ja) |
WO (1) | WO2009126583A1 (ja) |
Families Citing this family (51)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8406296B2 (en) * | 2008-04-07 | 2013-03-26 | Qualcomm Incorporated | Video refresh adaptation algorithms responsive to error feedback |
JP5197238B2 (ja) * | 2008-08-29 | 2013-05-15 | キヤノン株式会社 | 映像送信装置、その制御方法、および制御方法を実行するプログラム |
JP4987034B2 (ja) * | 2008-12-26 | 2012-07-25 | 三菱電機株式会社 | 映像表示装置 |
US8468566B2 (en) | 2009-04-10 | 2013-06-18 | Echostar Technologies L.L.C. | Control message feedback in a satellite broadcast communication system |
US8506402B2 (en) * | 2009-06-01 | 2013-08-13 | Sony Computer Entertainment America Llc | Game execution environments |
US20110072148A1 (en) * | 2009-09-24 | 2011-03-24 | Cisco Technology, Inc. | Distributed Coordination of Network Elements for Packet Encapsulation |
US20110249729A1 (en) * | 2010-04-07 | 2011-10-13 | Apple Inc. | Error resilient hierarchical long term reference frames |
US20130307847A1 (en) * | 2010-12-06 | 2013-11-21 | The Regents Of The University Of California | Rendering and encoding adaptation to address computation and network |
US9025672B2 (en) * | 2011-05-04 | 2015-05-05 | Cavium, Inc. | On-demand intra-refresh for end-to end coded video transmission systems |
GB2492329B (en) | 2011-06-24 | 2018-02-28 | Skype | Video coding |
GB2492163B (en) | 2011-06-24 | 2018-05-02 | Skype | Video coding |
GB2492330B (en) | 2011-06-24 | 2017-10-18 | Skype | Rate-Distortion Optimization with Encoding Mode Selection |
GB2493777A (en) | 2011-08-19 | 2013-02-20 | Skype | Image encoding mode selection based on error propagation distortion map |
CN102946533B (zh) * | 2011-09-02 | 2016-08-17 | 斯凯普公司 | 视频编码 |
GB2495467B (en) | 2011-09-02 | 2017-12-13 | Skype | Video coding |
GB2495469B (en) | 2011-09-02 | 2017-12-13 | Skype | Video coding |
GB2495468B (en) | 2011-09-02 | 2017-12-13 | Skype | Video coding |
EP2582141A3 (en) * | 2011-10-14 | 2013-08-07 | Richwave Technology Corp. | Method for providing error-resilient digital video content |
CN102520897B (zh) * | 2011-11-14 | 2015-01-28 | 中兴通讯股份有限公司 | 一种移动终端及其提高屏幕界面绘制速度的方法 |
CN104081771B (zh) * | 2011-11-14 | 2018-06-05 | 瑞典爱立信有限公司 | 用于对图像序列中的图像进行压缩编码的方法和设备 |
US20130170559A1 (en) * | 2011-12-28 | 2013-07-04 | Rovi Technologies Corporation | Systems and methods for region of interest video processing |
US9661325B1 (en) * | 2012-02-17 | 2017-05-23 | Polycom, Inc. | Lossy channel video blur avoidance |
EP2867891B1 (en) * | 2012-06-28 | 2016-12-28 | ANT - Advanced Network Technologies OY | Processing and error concealment of digital signals |
US9762939B2 (en) | 2012-09-28 | 2017-09-12 | Marvell World Trade Ltd. | Enhanced user experience for miracast devices |
US9930082B2 (en) | 2012-11-20 | 2018-03-27 | Nvidia Corporation | Method and system for network driven automatic adaptive rendering impedance |
US10616086B2 (en) * | 2012-12-27 | 2020-04-07 | Navidia Corporation | Network adaptive latency reduction through frame rate control |
US20140281994A1 (en) * | 2013-03-15 | 2014-09-18 | Xiaomi Inc. | Interactive method, terminal device and system for communicating multimedia information |
US9407923B2 (en) * | 2013-05-20 | 2016-08-02 | Gamefly Israel Ltd. | Overconing lost IP packets in streaming video in IP networks |
US9350683B2 (en) * | 2013-06-18 | 2016-05-24 | Cisco Technology, Inc. | Reliable bulk data dissemination using rateless codes |
US9819604B2 (en) | 2013-07-31 | 2017-11-14 | Nvidia Corporation | Real time network adaptive low latency transport stream muxing of audio/video streams for miracast |
CN104780029B (zh) * | 2014-01-14 | 2019-02-19 | 华为技术有限公司 | 一种混合自动重传请求方法及相关装置 |
KR101599888B1 (ko) | 2014-05-02 | 2016-03-04 | 삼성전자주식회사 | 적응적 영상 데이터 압축 방법 및 장치 |
CN104079859B (zh) * | 2014-07-03 | 2017-04-26 | 天津瑞发科半导体技术有限公司 | 基于反馈机制的视频传输速率自适应系统 |
WO2016022982A1 (en) * | 2014-08-08 | 2016-02-11 | University Of Florida Research Foundation, Inc. | Joint fountain coding and network coding for loss-tolerant information spreading |
US10032430B2 (en) * | 2014-09-17 | 2018-07-24 | Mediatek Inc. | Processor for use in dynamic refresh rate switching and related electronic device |
US9905199B2 (en) | 2014-09-17 | 2018-02-27 | Mediatek Inc. | Processor for use in dynamic refresh rate switching and related electronic device and method |
GB2536059B (en) | 2015-03-06 | 2017-03-01 | Garrison Tech Ltd | Secure control of insecure device |
WO2016208241A1 (ja) * | 2015-06-24 | 2016-12-29 | ソニー株式会社 | 符号化装置、復号装置及び伝送制御方法 |
US10085029B2 (en) | 2015-07-21 | 2018-09-25 | Qualcomm Incorporated | Switching display devices in video telephony |
CN106488229B (zh) * | 2015-09-01 | 2022-01-21 | 恩智浦美国有限公司 | 具有可调整帧内刷新率的视频编码器 |
US10595025B2 (en) | 2015-09-08 | 2020-03-17 | Microsoft Technology Licensing, Llc | Video coding |
US10313685B2 (en) * | 2015-09-08 | 2019-06-04 | Microsoft Technology Licensing, Llc | Video coding |
US10200694B2 (en) * | 2015-09-17 | 2019-02-05 | Mediatek Inc. | Method and apparatus for response of feedback information during video call |
GB2545010B (en) | 2015-12-03 | 2018-01-03 | Garrison Tech Ltd | Secure boot device |
WO2018120218A1 (zh) * | 2016-12-30 | 2018-07-05 | 深圳市大疆创新科技有限公司 | 图像处理方法与设备 |
CN107113441B (zh) | 2016-12-30 | 2019-07-26 | 深圳市大疆创新科技有限公司 | 图像处理方法、装置、无人飞行器和接收端 |
US10291936B2 (en) | 2017-08-15 | 2019-05-14 | Electronic Arts Inc. | Overcoming lost or corrupted slices in video streaming |
CN111886823B (zh) * | 2018-03-08 | 2024-06-11 | 诺基亚技术有限公司 | 方法、装置和计算机程序 |
WO2020237466A1 (zh) * | 2019-05-27 | 2020-12-03 | 深圳市大疆创新科技有限公司 | 视频传输方法、装置、飞行器、播放设备及存储介质 |
CN111713107A (zh) * | 2019-06-28 | 2020-09-25 | 深圳市大疆创新科技有限公司 | 图像处理方法、设备、无人飞行器和接收端 |
US11039149B2 (en) * | 2019-08-01 | 2021-06-15 | Qualcomm Incorporated | Dynamic video insertion based on feedback information |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2834313B2 (ja) | 1990-11-09 | 1998-12-09 | 株式会社日立製作所 | 画像符号化復号装置 |
JPH04334189A (ja) | 1991-05-09 | 1992-11-20 | Mitsubishi Electric Corp | 画像伝送装置 |
KR0132894B1 (ko) | 1992-03-13 | 1998-10-01 | 강진구 | 영상압축부호화 및 복호화 방법과 그 장치 |
US5682204A (en) | 1995-12-26 | 1997-10-28 | C Cube Microsystems, Inc. | Video encoder which uses intra-coding when an activity level of a current macro-block is smaller than a threshold level |
JPH10200897A (ja) | 1997-01-08 | 1998-07-31 | Nippon Telegr & Teleph Corp <Ntt> | 動画像伝送装置 |
JPH11289542A (ja) | 1998-02-09 | 1999-10-19 | Matsushita Electric Ind Co Ltd | 画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体 |
US6765964B1 (en) | 2000-12-06 | 2004-07-20 | Realnetworks, Inc. | System and method for intracoding video data |
WO2002071736A2 (en) | 2001-03-05 | 2002-09-12 | Intervideo, Inc. | Systems and methods of error resilience in a video decoder |
JP2002330437A (ja) | 2001-05-01 | 2002-11-15 | Sony Corp | 画像伝送方法、画像伝送方法のプログラム、画像伝送方法のプログラムを記録した記録媒体及び画像伝送装置 |
KR100399932B1 (ko) | 2001-05-07 | 2003-09-29 | 주식회사 하이닉스반도체 | 메모리의 양을 감소시키기 위한 비디오 프레임의압축/역압축 하드웨어 시스템 |
DE60213196T2 (de) * | 2002-02-13 | 2006-11-23 | Matsushita Electric Industrial Co., Ltd., Kadoma | Verfahren zum Übertragen von Datenpaketen unter Verwendung der Protokolle RTP und RTCP |
JP2004215201A (ja) | 2003-01-09 | 2004-07-29 | Sony Corp | 情報処理装置および情報処理方法、データ通信システム、記録媒体、並びにプログラム |
JP4244159B2 (ja) | 2003-05-16 | 2009-03-25 | 株式会社エヌ・ティ・ティ・ドコモ | 受信装置、通信システムおよびプログラム |
US20040252761A1 (en) * | 2003-06-16 | 2004-12-16 | Dilithium Networks Pty Limited (An Australian Corporation) | Method and apparatus for handling video communication errors |
JP3871661B2 (ja) | 2003-07-25 | 2007-01-24 | 株式会社東芝 | マルチメディアコンテンツ受信装置及びマルチメディアコンテンツ受信方法 |
US7796499B2 (en) | 2003-12-05 | 2010-09-14 | Telefonaktiebolaget L M Ericsson (Publ) | Method of and system for video fast update |
EP1638333A1 (en) | 2004-09-17 | 2006-03-22 | Mitsubishi Electric Information Technology Centre Europe B.V. | Rate adaptive video coding |
US8948266B2 (en) | 2004-10-12 | 2015-02-03 | Qualcomm Incorporated | Adaptive intra-refresh for digital video encoding |
US8634413B2 (en) | 2004-12-30 | 2014-01-21 | Microsoft Corporation | Use of frame caching to improve packet loss recovery |
CN100459717C (zh) * | 2005-04-20 | 2009-02-04 | 华为技术有限公司 | 基于h.264的压缩视频传输误码消除方法 |
TWI259725B (en) | 2005-04-28 | 2006-08-01 | Benq Corp | Methods and systems for transmitting AV information |
JP4688566B2 (ja) | 2005-05-10 | 2011-05-25 | 富士通東芝モバイルコミュニケーションズ株式会社 | 送信機及び受信機 |
EP2521338B1 (en) * | 2005-07-08 | 2017-10-18 | Fujitsu Limited | Transmitting apparatus, receiving apparatus and information communication method |
JP4513725B2 (ja) * | 2005-11-09 | 2010-07-28 | ソニー株式会社 | パケット送信装置、通信システム及びプログラム |
JP4687538B2 (ja) | 2006-04-04 | 2011-05-25 | パナソニック株式会社 | 受信装置、送信装置およびその通信方法 |
KR100827152B1 (ko) * | 2006-10-20 | 2008-05-02 | 삼성전자주식회사 | Nal 유닛 에러 검출을 위한 효율적인 h.264 복호 방법및 장치 |
US8175075B2 (en) * | 2006-12-26 | 2012-05-08 | Alcatel Lucent | Adaptive header compression in a wireless communication network |
US8265171B2 (en) * | 2008-02-26 | 2012-09-11 | Richwave Technology Corp. | Error resilient video transmission using instantaneous receiver feedback and channel quality adaptive packet retransmission |
US8406296B2 (en) | 2008-04-07 | 2013-03-26 | Qualcomm Incorporated | Video refresh adaptation algorithms responsive to error feedback |
-
2009
- 2009-01-06 US US12/349,386 patent/US8406296B2/en not_active Expired - Fee Related
- 2009-04-06 EP EP09730601.3A patent/EP2274914B1/en not_active Not-in-force
- 2009-04-06 WO PCT/US2009/039677 patent/WO2009126583A1/en active Application Filing
- 2009-04-06 EP EP13156796.8A patent/EP2621173A3/en not_active Ceased
- 2009-04-06 EP EP17193896.2A patent/EP3288263A1/en not_active Withdrawn
- 2009-04-06 KR KR1020127034357A patent/KR101330931B1/ko not_active IP Right Cessation
- 2009-04-06 KR KR1020107024998A patent/KR101248265B1/ko not_active IP Right Cessation
- 2009-04-06 JP JP2011504113A patent/JP5248673B2/ja not_active Expired - Fee Related
- 2009-04-06 CN CN201210298842.0A patent/CN102857757B/zh active Active
- 2009-04-06 CN CN2009801121142A patent/CN101983509B/zh not_active Expired - Fee Related
- 2009-04-07 TW TW098111524A patent/TW201004356A/zh unknown
-
2012
- 2012-05-10 US US13/468,395 patent/US9479800B2/en active Active
-
2013
- 2013-01-24 JP JP2013011107A patent/JP2013138447A/ja active Pending
-
2014
- 2014-09-19 JP JP2014191384A patent/JP5917638B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
CN101983509B (zh) | 2013-11-13 |
EP2274914A1 (en) | 2011-01-19 |
US8406296B2 (en) | 2013-03-26 |
KR20100131520A (ko) | 2010-12-15 |
TW201004356A (en) | 2010-01-16 |
EP2274914B1 (en) | 2013-05-08 |
CN102857757A (zh) | 2013-01-02 |
JP2011517233A (ja) | 2011-05-26 |
CN101983509A (zh) | 2011-03-02 |
EP2621173A3 (en) | 2014-06-25 |
CN102857757B (zh) | 2015-12-16 |
KR101330931B1 (ko) | 2013-11-18 |
JP5248673B2 (ja) | 2013-07-31 |
EP2621173A2 (en) | 2013-07-31 |
JP2015039189A (ja) | 2015-02-26 |
WO2009126583A1 (en) | 2009-10-15 |
EP3288263A1 (en) | 2018-02-28 |
KR101248265B1 (ko) | 2013-03-27 |
US20120219073A1 (en) | 2012-08-30 |
US9479800B2 (en) | 2016-10-25 |
KR20130018964A (ko) | 2013-02-25 |
US20090252227A1 (en) | 2009-10-08 |
JP2013138447A (ja) | 2013-07-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5917638B2 (ja) | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム | |
JP5072572B2 (ja) | サーバ | |
US8804821B2 (en) | Adaptive video processing of an interactive environment | |
EP3122043B1 (en) | Method and system for determining a quality value of a video stream | |
WO2010009637A1 (zh) | 一种视频质量评估方法、系统及装置 | |
EP2908532B1 (en) | Concealment of data loss for video decoding | |
US11889122B2 (en) | Quality aware error concealment technique for streaming media | |
US10142644B2 (en) | Decoding frames | |
US10080032B2 (en) | Lossy channel video blur avoidance | |
WO2014198062A1 (en) | Method and apparatus for video quality measurement | |
JP2006196960A (ja) | 動画データ受信装置 | |
KR20060078222A (ko) | 비디오 부호화기 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151022 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151110 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160201 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160308 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160406 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5917638 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |