JP2009510966A - スケーラブルビデオコーディング技術が適用されたビットストリーム適応変換装置及び方法 - Google Patents

スケーラブルビデオコーディング技術が適用されたビットストリーム適応変換装置及び方法 Download PDF

Info

Publication number
JP2009510966A
JP2009510966A JP2008534439A JP2008534439A JP2009510966A JP 2009510966 A JP2009510966 A JP 2009510966A JP 2008534439 A JP2008534439 A JP 2008534439A JP 2008534439 A JP2008534439 A JP 2008534439A JP 2009510966 A JP2009510966 A JP 2009510966A
Authority
JP
Japan
Prior art keywords
quality
svc
bitstream
adaptive conversion
descriptor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008534439A
Other languages
English (en)
Inventor
ジョン−ウォン カン
ジェ−ゴン キム
ジン−ウ ホン
ヨン−マン ロ
ヨン−スク キム
チュオン コン−サン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Priority claimed from PCT/KR2006/003989 external-priority patent/WO2007043770A1/en
Publication of JP2009510966A publication Critical patent/JP2009510966A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162User input
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

スケーラブルビデオコーディング(SVC)技術が適用されたビットストリーム適応変換装置及び方法に係り、SVC技術が適用されたビットストリームについての品質情報から、SVC適応変換演算子及びSVC適応変換演算子と端末の使用環境情報との相関関係を抽出する品質情報抽出部、SVC適応変換演算子のうち、ビットストリームを伝送される端末の使用環境情報に対応するSVC適応変換演算子を決定する品質決定部、及び決定されたSVC適応変換演算子に基づいてビットストリームを抽出して適応変換するビットストリーム抽出部で構成されて、Classification Scheme(AQoS_CS)に提案された適応変換演算子を利用したスケーラブルビデオの適応変換を通じて、変化するネットワーク環境及びマルチメディアの使用環境に合わせてスケーラブルビデオを効率的に提供できる。

Description

本発明は、スケーラブルビデオコーディング(以下、SVC)技術が適用されたビットストリーム適応変換装置及び方法に係り、より詳細には、SVC適応変換演算子を通じてビットストリームの適応変換を行い、適応変換されたビットストリームに対するSVC適応変換演算子を付記して今後新たな適応変換を行わせる装置及び方法に関する。
通信機術の発達につれて、ネットワーク環境はさらに複雑になっており、異なる種類のネットワークと端末を通じて多様なマルチメディアコンテンツが使用される時代が至来した。このような環境と合わせて、家の中では高画質(HD)のビデオを使用でき、家の外ではDMB(Digital Multimedia Broadcasting)あるいは移動通信の無線ネットワークを通じて動きながら、あるいは車両でビデオを楽しめるようになった。移動通信ネットワークでは、PDA(Personal Digital Assistant)、携帯電話、ノート型パソコンなどの多様な端末にサービスが支援されており、ASDLのような有線ネットワークではパソコンなどがサービスされ、近いうちにIP TV(Internet Protocol TV)のようなさらに多様な形態の端末が統合されるネットワークからサービスを支援されるようになる。マルチメディアコンテンツを多様かつ効率的にサービスするためのMPEG−21フレームワークでは、著作権保護と関連したDRM(Digital Right Management)、適応変換DIA(Digital Item Adaptation)、デジタルアイテム記述子DID(Digital Item Declaration)などの多くの機能を統合させて多様な機能を支援可能にした。
このような相異なるネットワーク環境で多様な端末にビデオストリーミングサービスを提供するためには、使用環境に合う品質の考慮が必須であり、ネットワーク帯域幅、端末の種類及び利用者の選好度に合う品質のコンテンツを提供せねばならない。より効率的に多様な使用環境にマルチメディアコンテンツを適応させるために、SVC技術の標準化が現在進行中であり、ビデオを使用環境に適応させるために復元を行う必要なくビットストリームで直接適応変換を行えるように支援する。既存の使用環境に合わせて復元する方法に比べてさらに効率的かつ速く、ネットワーク及びコンテンツ使用環境に合わせて適応変換を行える。
MPEG−21フレームワークでスケーラブルビデオの適応変換を支援するためには、スケーラブルビデオの適応変換演算子を記述する必要があり、現在は、スケーラブルビデオに対する適応変換演算記述子が存在しない。したがって、MPEG−21フレームワークでスケーラブルビデオに対するビットストリームレベルでの適応変換が効率的に記述され難い。
本発明が解決しようとする技術的課題として、本発明は、スケーラブルビデオコーディング(SVC)技術が適用されたマルチメディアコンテンツの適応変換を支援する装置及びその方法を提供するところにある。
本発明が解決しようとする技術的課題として、スケーラブルビデオの適応変換をビットストリームレベルで適当に行うための適応変換記述子を定義し、当該記述子を叙述するための効果的な意味及び記述例題を提示することによって、記述された品質適応変換情報を利用して多様なネットワーク及びユーザ環境に合う効果的な適応変換を行う装置及び方法を提供するところにある。
上記の技術的課題を解決するために、本発明で提示するSVC技術が適用されたビットストリーム適応変換装置は、SVC技術が適用されたビットストリームについての品質情報から、SVC適応変換演算子及びSVC適応変換演算子と端末の使用環境情報との相関関係を抽出する品質情報抽出部と、SVC適応変換演算子のうち、ビットストリームを伝送される端末の使用環境情報に対応するSVC適応変換演算子を決定する品質決定部と、決定されたSVC適応変換演算子に基づいてビットストリームを抽出して適応変換するビットストリーム抽出部と、を備えることを特徴とする。
また、品質情報は、SVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子及びSNR(Signal to Noise Ratio)品質記述子で構成されたSVC適応変換演算子を含むことを特徴とする。
また、品質情報は、端末の使用環境情報と空間品質記述子、時間品質記述子、SNR品質記述子及びPSNRまたはユーティリティー・ランク(utility rank)を含むビットストリームの全体的な品質を表す尺度との相関関係が記述されることを特徴とする。
また、品質情報は、任意の次数で構成された端末の帯域幅、空間品質記述子、時間品質記述子、SNR品質記述子及びPSNRベクトルで同じ次数同士で一つの対にまとめられたSVC適応変換演算子を含むことを特徴とする。
また、品質情報は、任意の次数で構成された端末の帯域幅、空間品質記述子、時間品質記述子ベクトルで同じ次数同士で一つの対にまとめられ、SNR品質記述子は、行列形式で表現したSVC適応変換演算子を含むことを特徴とする。
また、使用環境情報は、ネットワーク環境情報及びユーザ環境情報からなり、ネットワーク環境情報は帯域幅を含み、ユーザ環境情報は端末の性能またはユーザの品質選好度を含むことを特徴とする。
また、品質決定部で決定されたSVC適応変換演算子は、SVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子それぞれの情報を含むことを特徴とする。
また、ビットストリーム抽出部から抽出されたビットストリームは、SVC適応変換演算子に含まれたSVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子を満足することを特徴とする。
また、品質情報抽出部は、品質情報を通じてSVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子が含まれたSVC適応変換演算子を抽出することを特徴とする。
また、品質決定部は、SVC標準化された品質記述子のうち、使用環境情報を満足する最適のSVC適応変換演算子に含まれた空間品質記述子、時間品質記述子、SNR品質記述子それぞれを決定することを特徴とする。
また、品質決定部は、元来のビデオ品質を表現した品質最高点と、SVC適応変換演算子に含まれた同じ空間品質記述子及び時間品質記述子を持つ区間でのSNR品質記述子の最低点とを表現した品質基底点とに基づいて、端末の可用帯域幅によって増減させてSNR品質記述子を決定することを特徴とする。
また、ビットストリーム抽出部は、SVC標準化された品質記述子のうち、適応変換演算子に含まれた空間品質記述子、時間品質記述子、SNR品質記述子を満足するようにビットストリームを抽出して適応変換することを特徴とする。
また、SVC標準化された品質記述子のうち、空間品質記述子を満足するようにビットストリームの適応変換を行う場合、ビットストリーム抽出部は、ビットストリームの切り捨てられる空間的品質レイヤーの数ほど空間品質記述子を数値化し、数値によって空間品質記述子の適応変換を行わないか、ビットストリームの空間的品質レイヤーのうち、最上位レイヤーから切り捨てて、数値による数ほどのレイヤーを切り捨てて適応変換を行うことを特徴とする。
また、SVC標準化された品質記述子のうち、時間品質記述子を満足するようにビットストリームの適応変換を行う場合、ビットストリーム抽出部は、ビットストリームのコーディング値に基づいて切り捨てられる時間的品質レベルを数値化し、数値によって時間品質記述子の適応変換を行わないか、時間的品質レベルのうち、最上位レベルから切り捨てて数値による数ほどのレベルを切り捨てて適応変換を行うことを特徴とする。
また、SVC標準化された品質記述子のうち、SNR品質記述子の微粒子品質記述子(Fine Grain Scalability:FGS)を満足するようにビットストリームの適応変換を行う場合、ビットストリーム抽出部は、ビットストリームの切り捨てられるFGSレイヤーとFGS破片との和で形成されたSNRビット率と、ビットストリームのFGSレイヤーのビット率との総和との比率によって、SNR品質記述子の適応変換を行わないか、ビットストリームの比率による数ほどの最上位FGSレイヤーを切り捨てて適応変換を行うことを特徴とする。
また、SVC標準化された品質記述子のうち、SNR品質記述子の粗粒子品質記述子(Coarse Grain Scalability:CGS)を満足するようにビットストリームの適応変換を行う場合、ビットストリーム抽出部は、ビットストリームの切り捨てられる最上位CGSレイヤーのビット率の総和とビットストリームのCGSレイヤーのビット率の総和との比率によって、CGS品質レイヤーを切り捨てて適応変換を行うことを特徴とする。
また、SVC標準化された品質記述子のうち、SNR品質記述子のFGS及びCGSをいずれも満足するようにビットストリームの適応変換を行う場合、ビットストリーム抽出部は、ビットストリームの切り捨てられるCGSレイヤーのビット率とCGSレイヤーに含まれたFGSレイヤーのビット率及び抽出されるべきFGS破片のビット率の和と、全体CGSレイヤー及び全体FGSレイヤーのビット率の和との比率を満足するように、適切な数ほどの最上位CGSレイヤーまたは最上位FGSレイヤーを切り捨てて適応変換を行うことを特徴とする。
また、SVC技術が適用されたビットストリームについての品質情報は、XML形式を通じて記録されたことを特徴とする。
また、ビットストリーム抽出部を通じて適応変換されたSVC技術が適用されたビットストリームについての品質情報をSVC適応変換演算子で記述する品質情報記述部をさらに備えることを特徴とする。
上記技術的課題を解決するために、本発明で提示するSVC技術が適用されたビットストリーム適応変換装置は、SVC技術が適用されたビットストリームと、ビットストリームに対するSVC適応変換演算子が含まれた品質情報とを入力されるデジタルアイテム入力部と、ビットストリームを伝送される端末のネットワーク環境情報とユーザ環境情報とを入力される使用環境情報入力部と、ネットワーク環境情報及びユーザ環境情報に基づいてビットストリームのSVC適応変換演算子を決定し、決定されたSVC適応変換演算子を満足するようにビットストリームを抽出して適応変換する適応変換処理部と、適応変換処理部から抽出されたビットストリームを端末に伝送し、適応変換処理部から抽出されたビットストリームに対するSVC適応変換演算子が含まれた品質情報を生成するデジタルアイテム出力部と、を備えることを特徴とする。
また、デジタルアイテム入力部は、XML形式を通じて記述されたSVC技術が適用されたビットストリームの品質情報を入力される品質情報入力部と、SVC技術が適用されたビットストリームを入力されるSVCビデオ入力部と、で形成されたことを特徴とする。
また、使用環境情報入力部は、帯域幅が含まれたネットワーク環境情報を獲得するネットワーク環境情報入力部と、端末の性能またはユーザの品質選好度が含まれたユーザ環境情報を獲得するユーザ環境情報入力部と、で形成されたことを特徴とする。
また、適応変換処理部は、品質情報からXMLをパージングしてSVC技術が適用されたビットストリームの適応変換のためのSVC適応変換演算子を抽出する品質情報抽出部と、抽出されたSVC適応変換演算子とネットワーク環境情報及びユーザ環境情報に基づいて、ユーザの端末に適当にディスプレイできるSVC適応変換演算子を決定するSVC適応変換品質決定部(Adaptation Decision Taking Engine unit:ADTE)と、決定されたSVC適応変換演算子を満足するようにビットストリームを抽出して適応変換するSVCビットストリーム抽出部と、で形成されたことを特徴とする。
また、デジタルアイテム出力部は、抽出されたSVC技術が適用されたビットストリームをユーザ端末に伝送する適応変換SVCビットストリーム出力部と、SVC技術が適用されたビットストリームの今後の適応変換に利用されるSVC技術が適用されたビットストリームの品質情報を、SVC適応変換演算子が含まれたXML形式で記述する品質情報記述部と、で形成されたことを特徴とする。
上記技術的課題を解決するために、本発明で提示するSVC技術が適用されたビットストリーム適応変換方法は、SVC技術が適用されたビットストリームについての品質情報から、SVC適応変換演算子及びSVC適応変換演算子と端末の使用環境情報との相関関係を抽出する品質情報抽出ステップと、SVC適応変換演算子のうち、ビットストリームを伝送される端末の使用環境情報に対応するSVC適応変換演算子を決定する品質決定ステップと、決定されたSVC適応変換演算子に基づいてビットストリームを適応変換するビットストリーム抽出ステップと、を含むことを特徴とする。
上記技術的課題を解決するために、本発明で提示するSVC技術が適用されたビットストリーム適応変換方法は、SVC技術が適用されたビットストリームと、ビットストリームに対するSVC適応変換演算子が含まれた品質情報とを入力されるデジタルアイテム入力ステップと、ビットストリームを伝送される端末のネットワーク環境情報及びユーザ環境情報を入力される使用環境情報入力ステップと、ネットワーク環境情報及びユーザ環境情報に基づいて、ビットストリームのSVC適応変換演算子を決定し、決定されたSVC適応変換演算子を満足するようにビットストリームを抽出して適応変換する適応変換処理ステップと、適応変換処理ステップで抽出されたビットストリームを端末に伝送し、適応変換処理部から抽出されたビットストリームに対するSVC適応変換演算子が含まれた品質情報を生成するデジタルアイテム出力ステップと、を含むことを特徴とする。
以下、添付された図面を参照して本発明の望ましい実施形態について詳細に説明する。
図1は、本発明の望ましい一実施形態によるビットストリーム適応変換装置の構成図である。図1を参照すれば、ビットストリーム適応変換装置は、デジタルアイテム入力部100、使用環境情報入力部110、適応変換処理部120及びデジタルアイテム出力部130で構成される。
デジタルアイテム入力部100は、品質情報(Adaptation QoS:AQoS)入力部101及びSVCビデオ入力部102で構成される。品質情報入力部は、SVCビデオストリームの品質情報をXMLの形式を通じて記述した情報が入力され、SVCビデオ入力部には、SVC技術が適用されたビデオビットストリームが入力される。デジタルアイテム入力部では個別デジタルアイテムを受信するあらゆる機能を含む。
品質情報(AQoS)入力部101から入力された品質情報(AQoS)は、品質情報抽出部121でXMLをパージングして獲得されたSVCビデオの適応変換のための品質情報を抽出する。
使用環境情報入力部110は、デジタルアイテム入力部100から入力された個別デジタルアイテムの使用環境を獲得する機能を含む。使用環境情報入力部110は、ネットワーク環境情報入力部111及びユーザ環境情報入力部112で構成される。
ネットワーク環境情報入力部111では、SVCビデオの伝送のためのネットワーク環境情報が獲得される機能を含み、ユーザ環境情報入力部112では、SVCビデオを使用するためのユーザの環境情報(ディスプレイサイズのような端末の性能あるいはユーザの品質選好度)を獲得する機能を含む。
SVC適応変換を行うために、デジタルアイテム入力部100では適応変換されるメディアリソース(品質情報を含む)を獲得し、使用環境情報入力部110では伝送及び端末での使用のための環境情報を獲得する。個別デジタルアイテム入力部100及び使用環境情報入力部110で獲得された情報及びデータは、適応変換処理部でSVCビデオ適応変換過程を処理する。
ネットワーク環境情報入力部111で獲得されたネットワーク情報及びユーザ環境情報入力部112で獲得されたユーザ環境情報、そして、品質情報抽出部121で抽出されたSVCビットストリームの適応変換品質情報は、SVC ADTE(Adaptation Decision Taking Engine unit:ADTE)123に入力される。
SVC ADTE 123では、獲得された環境情報(ネットワーク及びユーザ使用環境)に合う適応変換品質を、品質情報抽出部120で抽出された適応変換品質情報によって決定する。
SVC ADTE 123で決定された品質情報は、SVC適応変換パラメータの形態で決定され、SVCビットストリーム抽出部122に入力される。SVCビットストリーム抽出部122では実際的なSVCビットストリーム抽出過程が行われ、SVC ADTE 123で決定されたSVC適応変換パラメータに合わせてSVCビットストリームを抽出する。
適応変換処理部120でSVC適応変換パラメータに合わせて適応変換された(ビットストリーム抽出)SVCビットストリームは、伝送のためにSVCビットストリーム出力部132に伝送される。再適応変換のための品質情報(AQoS)を記述する品質情報記述部131を通じて、適応変換されたSVCビットストリームの品質情報を再び記述してデジタルアイテム出力部に伝送する。デジタルアイテム出力部を通じてSVCビットストリームは端末に伝送される。
図2は、本発明の望ましい一実施形態によるSVC適応変換演算子を説明した構造図である。図2を参照すれば、SVC適応変換パラメータ200を表現してSVC適応変換を支援する適応変換品質記述子として、空間品質記述子(Spatial Layers)210、時間品質記述子(Temporal Levels)220、SNR品質記述子(Quality Reduction)230を含む。
SVCでは、空間−時間−SNR品質の3種の構成要素でビデオ品質を構成でき、これに基づいて適応変換を行える。SVC適応変換パラメータ200は、上記の3種の品質構成要素に相応して適応変換品質を指示する。
多様な品質に適応変換できるように、SVCビットストリームは基本階層及び向上階層からなる。向上階層は、基本階層にあるビットストリームの解像度(空間的)、フレーム率(時間的)、SNR品質を改善するために使われるビットストリームである。
空間品質記述子(Spatial Layers)210は、解像度が低いか、または高い映像の解像度を高めるか、または低めるために使われる。
時間品質記述子(Temporal Levels)220は、時間的解像度を高めるか、または低めるための方法であって、向上階層を追加して時間解像度を高めるか、または低めることで秒当たり30フレーム映像を秒当たり60フレームの映像にする。
SNR品質記述子(Quality Reduction)230は、SNR品質(画質)を高めるか、または低めるための方法であって、向上階層を追加または除去することにより、復号化された映像のSNR品質を向上または劣化させるところに使われる。
図3は、本発明の望ましい一実施形態による複合適応変換(再適応変換)の一実施形態を説明したネットワーク構成図である。図3を参照すれば、SVCストリーミングサーバー300、第1のSVC適応変換サーバー310、第2のSVC適応変換サーバー320で構成されている。
相異なるネットワーク特徴を持つネットワークが混合された環境で、適応変換されたSVCビットストリームの再適応変換のための品質情報(AQoS)の記述が必要な理由を説明する。SVCストリーミングサーバー300から提供されたSVCビットストリームと、適応変換品質情報(AQoS)に合わせて第1適応変換サーバー310で適応変換されたSVCビットストリームとは、モバイルクライアントのために第2適応変換サーバー320で適応変換を行い、この時に第1適応変換サーバー310で生成された適応変換品質情報(AQoS)を利用して過程を行う。
図4は、本発明の望ましい一実施形態によるSVCビットストリームの適応変換のための品質最高点及び品質基底点を利用して品質情報(AQoS)を記述する方法を示す図面であり、各時間−空間品質区間のSNR品質最高点Oと各時間−空間品質区間のSNR品質基底点P1、P2、P3、P4、P5とを利用して、全体品質情報を代表して記述することを説明する。品質最高点は、当該品質情報で適応変換が行われていない元来のビデオ品質を表現し、各品質基底点は、同じ時間−空間的品質を持つ品質区間でのSNR品質の最低点を表現する。
このような品質情報記述方法の特徴は、利用可能なネットワーク帯域幅が狭まることによる適応変換品質情報で最小数の代表値で品質を表示示することによって、効率的な品質情報計算を行う。代表値を利用した任意の区間での品質情報決定は、次の例を通じて説明されうる。
例えば、最初の品質基底点P1と2番目の品質基底点P2の区間で、品質情報のうち、時間−空間的品質情報は2番目の品質基底点P2の時間−空間的品質情報と同一に適用され、SNR品質情報(Quality Reduction)は、2番目の品質基底点P2のSNR品質情報で現在可用帯域幅まで増大した量ほど減少させて決定する。品質決定の詳細な内容は数式6を参照して品質決定作業を行う。
図5は、SVCビットストリームの適応変換のためのSVC適応変換パラメータをAQoSClassficationの形態で定義した図面である。SVC適応変換パラメータの効率的かつ汎用的な使用のために、AQoSClassificationでSVC適応変換パラメータを定義する必要が存在する。
図5で、Spatial Layersは、空間的品質(spatial resolution)の適応変換のために切り捨て(truncation)られる空間的品質レイヤー(spatial enhancement layer)の数を表し、当該適応変換のためのビットストリームで最上位空間的品質レイヤー(spatial enhancement layer)を先ず切り捨てる。例えば、2レイヤーでコーディングされたビットストリームは、Spatial Layersの値として整数値0、1を持ち、”0”は空間的品質の適応変換を行わず、”1”は、基本レイヤー(base layer)と品質向上レイヤー(enhancement layer)のうち、最上位レイヤーである品質向上レイヤー(enhancement layer)を切り捨て、基本レイヤーのみ抽出して適応変換を行う。
Temporal Levelsは、時間的品質(temporal resolution)の適応変換のために切り捨てられる時間的品質レベル(Temporal Level)の数を表し、当該適応変換のためのビットストリームで最上位品質レベルを先ず切り捨てる。例えば、30frame/secでコーディングされたビットストリームは、Temporal Levels値として整数値0、1、2、3、4を持ち、”0”は、時間的品質の適応変換を行わず(30frame/sec保持)、”1”は、時間的品質レベルのうち、最上位レベルを切り捨てて30frame/secから15frame/secに時間的品質の適応変換を行い、”2”は、時間的品質レベルのうち、最上位の二つのレベルを切り捨てて、7.5frame/secに適応変換を行う。”3”は、時間的品質レベルのうち、最上位の3つのレベルを切り捨てて、3.75frame/secに適応変換を行い、”4”は、時間的品質レベルのうち、最上位の4つのレベルを切り捨てて、1.875frame/secに適応変換を行う。
Quality Reductionは、SNR品質(SNR resolution)の適応変換のために切り捨てされるべきSNR品質の量を表す。例えば、微粒子品質記述子(FGS)が使われた場合にコーディングされたビットストリームは、Quality Reductionの値として浮動少数点値を0〜1範囲で持ち、”0.00”はSNR品質の適応変換を行わず、”1.00”は、あらゆるFGS品質向上レイヤー(enhancement layer)を切り捨て、基本レイヤーのみ抽出してSNR適応変換を行う。その値が”0.50”である場合には、全体FGS品質向上レイヤーのうち、50%の最上位品質向上レイヤーを切り捨ててSNR品質を適応変換する。
粗粒子品質記述子(CGS)が使われた場合にコーディングされたビットストリームは、FGSが使われた場合と同一にQuality Fraction値として浮動少数点値を0〜1範囲で持ち、”0.00”は、SNR品質の適応変換を行わず、”1.00”は、あらゆるCGS品質レイヤーを切り捨ててSNR適応変換を行う。例えば、2レイヤーCGSレイヤーが存在する場合、最初のCGSレイヤーが全体SNR品質レイヤーの60%、2番目のCGSレイヤーが全体SNR品質レイヤーの40%をそれぞれ含んでいる時、品質情報(AQoS)には”1.00”、”0.40”、”0、00”の3種のSNR適応変換品質を記述でき、”1.00”はあらゆるCGS品質レイヤーをいずれも切り捨て、”0.40”は全体SNR品質レイヤーの40%に相当する2番目のCGSレイヤーを切り捨て、”0.00”はSNR品質の適応変換を行わないSNR品質の適応変換をそれぞれ行う。
FGSとCGSとが同時に使われた場合、例えば、2レイヤーCGSが存在してFGSが適用されれば、CGSのみ使われた場合より精密なSNR品質の適用変換が可能になる。最初のCGSレイヤーが全体SNR品質の40%を、最初のCGSレイヤーのFGSレイヤーが全体SNR品質の20%を、2番目のCGSレイヤーが全体SNR品質の30%を、2番目のCGSレイヤーのFGSレイヤーが全体SNR品質の10%をそれぞれ含んでいる時、CGSのみ使われた場合には”1.00”、”0.40”、”0.00”の3種のSNR品質の適応変換を提供できるの対し、”0.45”のようなさらに精密なSNR品質制御ができ、Quality Reduction”0.45”を適用するために、2番目のCGSレイヤーをいずれも(FGSレイヤー含み)切り捨て、最初のCGSレイヤーのFGSレイヤーの5%を切り捨てることによってSNR品質の適応変換を行う。
SVCビデオの適応変換品質情報(AQoS)を図6のようなUtilityFunctionを利用して記述するに当って、SVC適応変換パラメータ(Spatial Layers,Temporal Levels、Quality Reduction)を利用して記述できる。
また、SVCビデオの適応変換品質情報(AQoS)を図7のようなLookupTableを利用して記述するに当って、SVC適応変換パラメータ(Spatial Layers,Temporal Levels,Quality Reduction)を利用して記述できる。
Figure 2009510966
空間的品質の適応変換のための適応変換品質記述子(Qfs)であるSpatial Layersは、上記のような数式1のように表現され、”0”は、空間的品質の適応変換を行わず、”1”は、最上位空間的品質向上レイヤーを切り捨てて空間的品質の適応変換を行い、”2”は、最上位二つの空間的品質向上レイヤーを切り捨てて空間的品質の適応変換を行う。
Figure 2009510966
時間的品質の適応変換のための適応変換品質記述子(QFT)であるTemporal Levelsは上記の数式2のように表現され、”0”は、時間的品質の適応変換を行わず、”1”は、最上位時間的品質レベルを切り捨てて空間的品質の適応変換を行い、”2”は、最上位の2つの時間的品質レベルを切り捨てて時間的品質の適応変換を行う。
Figure 2009510966
ここで、
Figure 2009510966
は、当該制約条件(constraints)に合うSNR品質の適応変換のために切り捨てられるビデオ品質のSNRビット率を、
Figure 2009510966
は、入力された原本ビデオのSNRビット率とを、
Figure 2009510966
は、i番目の最上位FGSレイヤーのビット率を、n*は、切り捨てられるFGSレイヤー数を、
Figure 2009510966
は、切り捨てられるFGS破片(fraction)を、nは、元来ビデオのFGSレイヤー数をそれぞれ表現する。SNR品質の適応変換のための適応変換品質記述子(QfSNR)であるQuality Reductionは、上記のような数式のように表現され、”0.00”は、SNR品質の適応変換を行わず、”1.00”は、最上位SNR品質向上レイヤーを切り捨ててSNR品質の適応変換を行う。
FGSである場合に、”0.30”は全体FGS品質向上レイヤーの30%を切り捨て、全体FGS品質向上レイヤーの70%のみ抽出してSNR品質適応変換を行うことを表す。
Figure 2009510966
ここで、
Figure 2009510966
は、元来の入力されたビデオのSNR品質のビット率を、
Figure 2009510966
は、切り捨てられる品質のSNRビット率をそれぞれ表し、
Figure 2009510966
は、k番目の最上位CGSレイヤーのビット率を、mは、入力されたビデオのCGSレイヤーの数を、m*は、切り捨てられる最上位CGSレイヤー数をそれぞれ表す。CGSである場合には、各CGSレイヤーが含むビット率に合う単位でSNR適応変換品質を提供できる。例えば、2レイヤーCGSレイヤーが存在する場合、最初のCGSレイヤーが全体SNR品質レイヤーの70%、2番目のCGSレイヤーが全体SNR品質レイヤーの30%をそれぞれ含んでいる時、品質情報(AQoS)には”1.00”、”0.30”、”0、00”の3種のSNR適応変換品質を記述でき、”1.00”は、あらゆるCGS品質レイヤーをいずれも切り捨て、”0.30”は、全体SNR品質レイヤーの30%に相当する2番目のCGSレイヤーを切り捨て、”0.00”は、あらゆるCGSレイヤーをいずれも抽出してSNR品質の適応変換を行う。
Figure 2009510966
ここで、
Figure 2009510966
は、切り捨てられるSNRビット率を、
Figure 2009510966
は、元来の入力されたビデオのSNR品質のビット率を表し、
Figure 2009510966
は、i番目の最上位CGSレイヤーのビット率を、
Figure 2009510966
は、i番目の最上位CGSレイヤーのj番目の最上位FGSレイヤーのビット率を表し、
Figure 2009510966
は、切り捨てられるm*番目の最上位CGSレイヤーのn*番目の最上位FGSレイヤーのFGSfractionのビット率を、niは、i番目の最上位CGSレイヤーのFGSレイヤーの数を、そしてmは、原本ビデオのCGSレイヤーの数を、m*は、切り捨てられる最上位CGSレイヤー数をそれぞれ表す。FGSとCGSとが同時に使われた場合、例えば、2レイヤーCGSが存在してFGSが適用されれば、CGSのみ使われた場合より精密なSNR品質の適用変換が可能になる。最初のCGSレイヤーとFGSレイヤーとが、それぞれ全体SNR品質レイヤーの40%と20%、2番目のCGSレイヤーとFGSレイヤーとが、それぞれ全体SNR品質レイヤーの30%と10%とを含んでいる時、Quality Reduction”0.45”を適用するために、2番目のCGSレイヤーと2番目のCGSレイヤーのFGSレイヤーとをいずれも切り捨て、最初のCGSレイヤーのFGSレイヤーの5%を部分切り捨てることで、CGSのみ使われた場合より精密なSNR品質の適応変換を行う。
Figure 2009510966
ここで、
Figure 2009510966
Figure 2009510966
そして
Figure 2009510966
は、品質区間{O,P}間に存在する任意の点MxでのQuality Reduction、Spatial Layers、そしてTemporal Levels値を表し、
Figure 2009510966
Figure 2009510966
そして
Figure 2009510966
は、品質区間{O,P}のうち、品質基底点PでQuality Reduction、Spatial LayersそしてTemporal Levels値をそれぞれ表現する。
BX、BPは、任意の点xでの可用伝送ビット率と品質基底点Pでの可用伝送ビット率とをそれぞれ表し、
Figure 2009510966
は、元来の入力されたビデオのSNR品質のビット率を表現する。
例えば、元来の入力されたビデオのSNR品質のビット率が1Mbpsであり、現在可用伝送ビット率が500kbps、品質基底点での可用伝送ビット率が400kbpsであり、Quality Ruductionが”0.7”、Spatial Layers”1”、Temporal Levels”1”と記述されている時、現在可用伝送ビット率でのQuality Reduntionは”0.6”(0.7−(500−400)/1000)、Spatial Layersは”1”、Temporal Levelsは”1”に決定する。
図8は、本発明の望ましい一実施形態によるビットストリーム適応変換方法のフローチャートである。
SVC技術が適用されたビットストリームと、ビットストリームに対するSVC適応変換演算子が含まれた品質情報とを入力されるデジタルアイテム入力ステップ(S800)と、ビットストリームを伝送される端末のネットワーク環境情報とユーザ環境情報とを入力される使用環境情報入力ステップとを経る(S810)。
ネットワーク環境情報及びユーザ環境情報に基づいてビットストリームのSVC適応変換演算子を決定し、決定されたSVC適応変換演算子を満足するようにビットストリームを抽出して適応変換する適応変換処理ステップ(S820)を経て、受信されたビットストリームを端末に伝送し、適応変換処理部を通じて受信されたビットストリームに対するSVC適応変換演算子が含まれた品質情報を生成するデジタルアイテム出力ステップ(S830)を通じて、ビットストリームをユーザに伝送する。
図9は、本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、デジタルアイテム入力ステップの詳細フローチャートである。
デジタルアイテム入力ステップは、XML形式を通じて記述されたSVC技術が適用されたビットストリームの品質情報を入力され(S901)、SVC技術が適用されたビットストリームを入力されるステップ(S902)を経て品質情報とビットストリームのデジタルアイテムとを入力される。
図10は、本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、使用環境情報入力ステップの詳細フローチャートである。
帯域幅が含まれたネットワーク環境情報を獲得するネットワーク環境情報を入力され(S1001)、端末のディスプレイサイズが含まれた端末の性能またはユーザの品質選好度が含まれたユーザ環境情報を獲得して(S1002)、SVC適応変換演算子を決定する基礎情報として利用する。
図11は、本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、適応変換処理ステップの詳細フローチャートである。
適応変換処理ステップは、品質情報からXMLをパージングして、SVC技術が適用されたビットストリームの適応変換のためのSVC適応変換演算子を抽出する(S1101)。
抽出されたSVC適応変換演算子とネットワーク環境情報及びユーザ環境情報に基づいて、ユーザの端末に適当にディスプレイできるSVC適応変換演算子を決定し(S1102)、決定されたSVC適応変換演算子を満足するように、ビットストリームを適応変換して新たなビットストリームを抽出する(S1103)。
図12は、本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、デジタルアイテム出力ステップの詳細フローチャートである。
抽出されたSVC技術が適用されたビットストリームをユーザ端末に伝送し(S1201)、SVC技術が適用されたビットストリームの今後の適応変換に利用されるSVC技術が適用されたビットストリームの品質情報を、SVC適応変換演算子が含まれたXML形式で記述する(S1202)。
本発明によって、SVCビデオの適応変換のための品質情報(AQoS)を汎用的に記述でき、記述された適応変換品質情報(AQoS Description)を利用してSVC適応変換を行える。SVC適応変換を支援できる適応変換記述子がまだ支援されていないので、本発明に起因してSVCビデオの適応変換のための適応変換品質情報を汎用的に記述し、これに基づいて適応変換を行える方法及びシステムを提案することで効果的なSVC適応変換を支援する。
本発明はまた、コンピュータで読み取り可能な記録媒体にコンピュータで読み取り可能なコードとして具現することができる。コンピュータで読み取り可能な記録媒体は、コンピュータシステムによって読み取られるデータが保存されるあらゆる種類の記録装置を含む。コンピュータで読み取り可能な記録媒体の例には、ROM(Read−Only Memory)、RAM(Random−Access Memory)、CD−ROM、磁気テープ、フローピー(登録商標)ディスク及び光データ保存装置などがあり、また、キャリアウェーブ(例えば、インターネットを通じた伝送)の形態で具現されるものも含む。また、コンピュータで読み取り可能な記録媒体は、ネットワークに連結されたコンピュータシステムに分散されて、分散方式でコンピュータで読み取り可能なコードで保存されて実行されうる。
以上のように図面及び明細書で最適の実施形態が開示された。ここで特定の用語が使われたが、それらは単に本発明を説明するための目的で使われたものであり、意味限定や特許請求の範囲に記載された本発明の範囲を制限するために使われたものではない。したがって、当業者ならば、これより多様な変形及び均等な他の実施形態が可能であるという点を理解できるであろう。したがって、本発明の真の技術的保護範囲は、特許請求の範囲の技術的思想により定められねばならない。
本発明の望ましい一実施形態によるビットストリーム適応変換装置の構成図である。 本発明の望ましい一実施形態によるSVC適応変換演算子を説明した構造図である。 本発明の望ましい一実施形態による複合適応変換(再適応変換)の一実施形態を説明したネットワーク構成図である。 本発明の望ましい一実施形態によるSVCビットストリームの適応変換のための品質最高点と品質基底点とを利用して品質情報(AQoS)を記述する方法を示す図面である。 SVCビットストリームの適応変換のためのSVC適応変換パラメータをAQoSClassficationの形態で定義した図面である。 SVCビットストリームの適応変換のためのSVC適応変換パラメータをUtilityficationの形態で定義した図面である。 SVCビットストリームの適応変換のためのSVC適応変換パラメータをLookupTableの形態で定義した図面である。 本発明の望ましい一実施形態によるビットストリーム適応変換方法のフローチャートである。 本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、デジタルアイテム入力ステップの詳細フローチャートである。 本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、使用環境情報入力ステップの詳細フローチャートである。 本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、適応変換処理ステップの詳細フローチャートである。 本発明の望ましい一実施形態によるビットストリーム適応変換方法のうち、デジタルアイテム出力ステップの詳細フローチャートである。

Claims (49)

  1. スケーラブルビデオコーディング(SVC)技術が適用されたビットストリームについての品質情報から、SVC適応変換演算子、及び前記SVC適応変換演算子と端末の使用環境情報との相関関係を抽出する品質情報抽出部と、
    前記SVC適応変換演算子のうち、前記ビットストリームを伝送される端末の使用環境情報に対応するSVC適応変換演算子を決定する品質決定部と、
    前記決定されたSVC適応変換演算子に基づいて前記ビットストリームを抽出して適応変換するビットストリーム抽出部と
    を備えることを特徴とするSVC技術が適用されたビットストリーム適応変換装置。
  2. 前記品質情報は、SVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子及びSNR品質記述子で構成されたSVC適応変換演算子を含むことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  3. 前記品質情報は、前記端末の使用環境情報、空間品質記述子、時間品質記述子、SNR品質記述子及びPSNRまたはユーティリティー・ランクを含む前記ビットストリームの全体的な品質を表す尺度との相関関係が記述されることを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  4. 前記品質情報は、任意の次数で構成された前記端末の帯域幅、空間品質記述子、時間品質記述子、SNR品質記述子及びPSNRベクトルで同じ次数同士で一つの対にまとめられたSVC適応変換演算子を含むことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  5. 前記品質情報は、任意の次数で構成された前記端末の帯域幅、空間品質記述子、時間品質記述子ベクトルで同じ次数同士で一つの対にまとめられ、SNR品質記述子は、行列形式で表現したSVC適応変換演算子を含むことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  6. 前記使用環境情報は、ネットワーク環境情報及びユーザ環境情報からなり、ネットワーク環境情報は帯域幅を含み、ユーザ環境情報は前記端末の性能またはユーザの品質選好度を含むことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  7. 前記品質決定部で決定されたSVC適応変換演算子は、SVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子それぞれの情報を含むことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  8. 前記ビットストリーム抽出部から抽出されたビットストリームは、前記SVC適応変換演算子に含まれたSVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子を満足することを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  9. 前記品質情報抽出部は、前記品質情報を通じてSVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子が含まれたSVC適応変換演算子を抽出することを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  10. 前記品質決定部は、SVC標準化された品質記述子のうち、前記使用環境情報を満足する最適の前記SVC適応変換演算子に含まれた空間品質記述子、時間品質記述子、SNR品質記述子それぞれを決定することを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  11. 前記品質決定部は、元来のビデオ品質を表現した品質最高点と、前記SVC適応変換演算子に含まれた同じ空間品質記述子及び時間品質記述子を持つ区間でのSNR品質記述子の最低点を表現した品質基底点とに基づいて、前記端末の可用帯域幅によって増減させてSNR品質記述子を決定することを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  12. 前記ビットストリーム抽出部は、SVC標準化された品質記述子のうち、前記適応変換演算子に含まれた空間品質記述子、時間品質記述子、SNR品質記述子を満足するように前記ビットストリームを抽出して適応変換することを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  13. SVC標準化された品質記述子のうち、空間品質記述子を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出部は、前記ビットストリームの切り捨てられる空間的品質レイヤーの数ほど前記空間品質記述子を数値化し、前記数値によって前記空間品質記述子の適応変換を行わないか、前記ビットストリームの空間的品質レイヤーのうち、最上位レイヤーから切り捨てて、前記数値による数ほどのレイヤーを切り捨てて適応変換を行うことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  14. SVC標準化された品質記述子のうち、時間品質記述子を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出部は、前記ビットストリームのコーディング値に基づいて切り捨てられる時間的品質レベルを数値化し、前記数値によって前記時間品質記述子の適応変換を行わないか、前記時間的品質レベルのうち、最上位レベルから切り捨てて前記数値による数ほどのレベルを切り捨てて適応変換を行うことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  15. SVC標準化された品質記述子のうち、SNR品質記述子の微粒子品質記述子(FGS)を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出部は、前記ビットストリームの切り捨てられるFGSレイヤーとFGS破片との和で形成されたSNRビット率と、前記ビットストリームのFGSレイヤーのビット率との総和との比率によって、前記SNR品質記述子の適応変換を行わないか、前記ビットストリームの前記比率による数ほどの最上位FGSレイヤーを切り捨てて適応変換を行うことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  16. SVC標準化された品質記述子のうち、SNR品質記述子の粗粒子品質記述子(CGS)を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出部は、前記ビットストリームの切り捨てられる最上位CGSレイヤーのビット率の総和と前記ビットストリームのCGSレイヤーのビット率の総和との比率によって、CGS品質レイヤーを切り捨てて適応変換を行うことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  17. SVC標準化された品質記述子のうち、SNR品質記述子のFGS及びCGSをいずれも満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出部は、前記ビットストリームの切り捨てられるCGSレイヤーのビット率と前記CGSレイヤーに含まれたFGSレイヤーのビット率及び抽出されるべきFGS破片のビット率の和と、全体CGSレイヤー及び全体FGSレイヤーのビット率の和との比率を満足するように、適切な数ほどの前記最上位CGSレイヤーまたは前記最上位FGSレイヤーを切り捨てて適応変換を行うことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  18. 前記SVC技術が適用されたビットストリームについての品質情報は、XML形式を通じて記録されたことを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  19. 前記ビットストリーム抽出部を通じて適応変換されたSVC技術が適用されたビットストリームについての品質情報をSVC適応変換演算子で記述する品質情報記述部をさらに備えることを特徴とする請求項1に記載のSVC技術が適用されたビットストリーム適応変換装置。
  20. SVC技術が適用されたビットストリームと、前記ビットストリームに対するSVC適応変換演算子が含まれた品質情報とを入力されるデジタルアイテム入力部と、
    前記ビットストリームを伝送される端末のネットワーク環境情報とユーザ環境情報とを入力される使用環境情報入力部と、
    前記ネットワーク環境情報及びユーザ環境情報に基づいて前記ビットストリームのSVC適応変換演算子を決定し、前記決定されたSVC適応変換演算子を満足するように前記ビットストリームを抽出して適応変換する適応変換処理部と、
    前記適応変換処理部から抽出されたビットストリームを前記端末に伝送し、前記適応変換処理部から抽出されたビットストリームに対するSVC適応変換演算子が含まれた品質情報を生成するデジタルアイテム出力部と
    を備えることを特徴とするSVC技術が適用されたビットストリーム適応変換装置。
  21. 前記デジタルアイテム入力部は、
    XML形式を通じて記述された前記SVC技術が適用されたビットストリームの品質情報を入力される品質情報入力部と、
    前記SVC技術が適用されたビットストリームを入力されるSVCビデオ入力部と
    を備えることを特徴とする請求項20に記載のSVC技術が適用されたビットストリーム適応変換装置。
  22. 前記使用環境情報入力部は、
    帯域幅が含まれたネットワーク環境情報を獲得するネットワーク環境情報入力部と、
    前記端末の性能またはユーザの品質選好度が含まれたユーザ環境情報を獲得するユーザ環境情報入力部と
    を備えることを特徴とする請求項20に記載のSVC技術が適用されたビットストリーム適応変換装置。
  23. 前記適応変換処理部は、
    前記品質情報からXMLをパージングしてSVC技術が適用されたビットストリームの適応変換のためのSVC適応変換演算子を抽出する品質情報抽出部と、
    前記抽出されたSVC適応変換演算子と前記ネットワーク環境情報及びユーザ環境情報とに基づいて、ユーザの端末に適当にディスプレイできるSVC適応変換演算子を決定するSVC ADTEと、
    前記決定されたSVC適応変換演算子を満足するように、前記ビットストリームを抽出して適応変換するSVCビットストリーム抽出部と
    を備えることを特徴とする請求項20に記載のSVC技術が適用されたビットストリーム適応変換装置。
  24. 前記デジタルアイテム出力部は、
    前記抽出されたSVC技術が適用されたビットストリームをユーザ端末に伝送する適応変換SVCビットストリーム出力部と、
    前記SVC技術が適用されたビットストリームの今後の適応変換に利用される前記SVC技術が適用されたビットストリームの品質情報を、SVC適応変換演算子が含まれたXML形式で記述する品質情報記述部と
    を備えることを特徴とする請求項20に記載のSVC技術が適用されたビットストリーム適応変換装置。
  25. SVC技術が適用されたビットストリームについての品質情報から、SVC適応変換演算子、及び前記SVC適応変換演算子と端末の使用環境情報との相関関係を抽出する品質情報抽出ステップと、
    前記SVC適応変換演算子のうち、前記ビットストリームを伝送される端末の使用環境情報に対応するSVC適応変換演算子を決定する品質決定ステップと、
    前記決定されたSVC適応変換演算子に基づいて前記ビットストリームを適応変換するビットストリーム抽出ステップと
    を含むことを特徴とするSVC技術が適用されたビットストリーム適応変換方法。
  26. 前記品質情報は、SVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子及びSNR品質記述子で構成されたSVC適応変換演算子を含むことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  27. 前記品質情報は、前記端末の使用環境情報、空間品質記述子、時間品質記述子、SNR品質記述子及びPSNRまたはユーティリティー・ランクを含む前記ビットストリームの全体的な品質を表す尺度との相関関係が記述されることを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  28. 前記品質情報は、任意の次数で構成された前記端末の帯域幅、空間品質記述子、時間品質記述子、SNR品質記述子及びPSNRベクトルで同じ次数同士で一つの対にまとめられたSVC適応変換演算子を含むことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  29. 前記品質情報は、任意の次数で構成された前記端末の帯域幅、空間品質記述子、時間品質記述子ベクトルで同じ次数同士で一つの対にまとめられ、SNR品質記述子は、行列形式で表現したSVC適応変換演算子を含むことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  30. 前記使用環境情報は、ネットワーク環境情報及びユーザ環境情報からなり、ネットワーク環境情報は帯域幅を含み、ユーザ環境情報は端末の性能またはユーザの品質選好度を含むことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  31. 前記品質決定ステップで決定されたSVC適応変換演算子は、SVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子それぞれの情報を含むことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  32. 前記ビットストリーム抽出ステップで抽出されたビットストリームは、前記SVC適応変換演算子に含まれたSVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子を満足することを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  33. 前記品質情報抽出ステップは、前記品質情報を通じてSVC標準化された品質記述子のうち、空間品質記述子、時間品質記述子、SNR品質記述子が含まれたSVC適応変換演算子を抽出することを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  34. 前記品質決定ステップは、SVC標準化された品質記述子のうち、前記使用環境情報を満足する最適の前記SVC適応変換演算子に含まれた空間品質記述子、時間品質記述子、SNR品質記述子それぞれを決定することを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  35. 前記品質決定ステップは、元来のビデオ品質を表現した品質最高点と、前記SVC適応変換演算子に含まれた同じ空間品質記述子及び時間品質記述子を持つ区間でのSNR品質記述子の最低点を表現した品質基底点とに基づいて、前記端末の可用帯域幅によって増減させてSNR品質記述子を決定することを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  36. 前記ビットストリーム抽出ステップは、SVC標準化された品質記述子のうち、前記適応変換演算子に含まれた空間品質記述子、時間品質記述子、SNR品質記述子を満足するように前記ビットストリームを抽出して適応変換することを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  37. SVC標準化された品質記述子のうち、空間品質記述子を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出ステップは、前記ビットストリームの切り捨てられる空間的品質レイヤーの数ほど前記空間品質記述子を数値化し、前記数値によって前記空間品質記述子の適応変換を行わないか、前記ビットストリームの空間的品質レイヤーのうち、最上位レイヤーから切り捨てて前記数値による数ほどのレイヤーを切り捨てて適応変換を行うことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  38. SVC標準化された品質記述子のうち、時間品質記述子を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出ステップは、前記ビットストリームのコーディング値に基づいて切り捨てられる時間的品質レベルを数値化し、前記数値によって前記時間品質記述子の適応変換を行わないか、前記時間的品質レベルのうち、最上位レベルから切り捨てて前記数値による数ほどのレベルを切り捨てて適応変換を行うことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  39. SVC標準化された品質記述子のうち、SNR品質記述子の微粒子品質記述子(FGS)を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出ステップは、前記ビットストリームの切り捨てられるFGSレイヤーとFGS破片との和からなるSNRビット率と前記ビットストリームのFGSレイヤーのビット率との総和との比率によって、前記SNR品質記述子の適応変換を行わないか、前記ビットストリームの前記比率による数ほどの最上位FGSレイヤーを切り捨てて適応変換を行うことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  40. SVC標準化された品質記述子のうち、SNR品質記述子の粗粒子品質記述子(CGS)を満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出ステップは、前記ビットストリームの切り捨てられる最上位CGSレイヤーのビット率の総和と前記ビットストリームのCGSレイヤーのビット率の総和との比率によって、CGS品質レイヤーを切り捨てて適応変換を行うことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  41. SVC標準化された品質記述子のうち、SNR品質記述子のFGS及びCGSをいずれも満足するようにビットストリームの適応変換を行う場合、前記ビットストリーム抽出ステップは、前記ビットストリームの切り捨てられるCGSレイヤーのビット率と前記CGSレイヤーに含まれたFGSレイヤーのビット率及び抽出されるべきFGS破片のビット率の和と、全体CGSレイヤー及び全体FGSレイヤーのビット率の和との比率を満足するように、適切な数ほどの前記最上位CGSレイヤーまたは前記最上位FGSレイヤーを切り捨てて適応変換を行うことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  42. 前記SVC技術が適用されたビットストリームについての品質情報は、XML形式を通じて記録されたことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  43. 前記ビットストリーム抽出ステップを通じて適応変換されたSVC技術が適用されたビットストリームについての品質情報をSVC適応変換演算子で記述する品質情報記述ステップをさらに含むことを特徴とする請求項25に記載のSVC技術が適用されたビットストリーム適応変換方法。
  44. SVC技術が適用されたビットストリームと、前記ビットストリームに対するSVC適応変換演算子が含まれた品質情報とを入力されるデジタルアイテム入力ステップと、
    前記ビットストリームを伝送される端末のネットワーク環境情報及びユーザ環境情報を入力される使用環境情報入力ステップと、
    前記ネットワーク環境情報及びユーザ環境情報に基づいて、前記ビットストリームのSVC適応変換演算子を決定し、前記決定されたSVC適応変換演算子を満足するようにね前記ビットストリームを抽出して適応変換する適応変換処理ステップと、
    前記適応変換処理ステップで抽出されたビットストリームを前記端末に伝送し、前記適応変換処理部から抽出されたビットストリームに対するSVC適応変換演算子が含まれた品質情報を生成するデジタルアイテム出力ステップと
    を含むことを特徴とするSVC技術が適用されたビットストリーム適応変換方法。
  45. 前記デジタルアイテム入力ステップは、
    XML形式を通じて記述された前記SVC技術が適用されたビットストリームの品質情報を入力される品質情報入力ステップと、
    前記SVC技術が適用されたビットストリームを入力されるSVCビデオ入力ステップと
    を含むことを特徴とする請求項44に記載のSVC技術が適用されたビットストリーム適応変換方法。
  46. 前記使用環境情報入力ステップは、
    帯域幅が含まれたネットワーク環境情報を獲得するネットワーク環境情報入力ステップと、
    前記端末の性能またはユーザの品質選好度が含まれたユーザ環境情報を獲得するユーザ環境情報入力ステップと
    を含むことを特徴とする請求項44に記載のSVC技術が適用されたビットストリーム適応変換方法。
  47. 前記適応変換処理ステップは、
    前記品質情報からXMLをパージングしてSVC技術が適用されたビットストリームの適応変換のためのSVC適応変換演算子を抽出する品質情報抽出ステップと、
    前記抽出されたSVC適応変換演算子と、前記ネットワーク環境情報及びユーザ環境情報に基づいてユーザの端末に適当にディスプレイできるSVC適応変換演算子とを決定するSVC適応変換品質決定ステップと、
    前記決定されたSVC適応変換演算子を満足するように、前記ビットストリームを抽出して適応変換するSVCビットストリーム抽出ステップと
    を含むことを特徴とする請求項44に記載のSVC技術が適用されたビットストリーム適応変換方法。
  48. 前記デジタルアイテム出力ステップは、前記抽出されたSVC技術が適用されたビットストリームをユーザ端末に伝送する適応変換SVCビットストリーム出力ステップと、
    前記SVC技術が適用されたビットストリームの今後の適応変換に利用される前記SVC技術が適用されたビットストリームの品質情報を、SVC適応変換演算子が含まれたXML形式で記述する品質情報記述ステップと
    を含むことを特徴とする請求項44に記載のSVC技術が適用されたビットストリーム適応変換方法。
  49. 請求項25ないし請求項48のうちいずれか1項に記載の方法を行えるプログラムを記録したコンピュータで読み取り可能な記録媒体。
JP2008534439A 2005-10-07 2006-10-02 スケーラブルビデオコーディング技術が適用されたビットストリーム適応変換装置及び方法 Pending JP2009510966A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20050094386 2005-10-07
KR20050127710 2005-12-22
PCT/KR2006/003989 WO2007043770A1 (en) 2005-10-07 2006-10-02 Method and apparatus for scalable video adaptation using adaptation operators for scalable video
KR1020060097262A KR100848310B1 (ko) 2005-10-07 2006-10-02 스케일러블 비디오 코딩 기술이 적용된 비트스트림적응변환 장치 및 방법

Publications (1)

Publication Number Publication Date
JP2009510966A true JP2009510966A (ja) 2009-03-12

Family

ID=38160304

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008534439A Pending JP2009510966A (ja) 2005-10-07 2006-10-02 スケーラブルビデオコーディング技術が適用されたビットストリーム適応変換装置及び方法

Country Status (4)

Country Link
US (1) US20080247460A1 (ja)
JP (1) JP2009510966A (ja)
KR (1) KR100848310B1 (ja)
CN (1) CN101283596B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011035889A (ja) * 2009-07-31 2011-02-17 Postech Academy-Industry Foundation モバイルiptvサービスを提供する方法及びこれのためのシステム

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100628655B1 (ko) * 2004-10-20 2006-09-26 한국전자통신연구원 상이한 디지털 저작권 관리 도메인간의 콘텐츠 교환을 위한방법 및 시스템
KR100923855B1 (ko) * 2007-11-30 2009-10-27 한국전자통신연구원 Avc 싱글레이어를 이용한 svc 멀티레이어 비트스트림변환 방법 및 장치
KR100939915B1 (ko) * 2007-12-18 2010-02-03 한국전자통신연구원 사용자 선호도를 이용한 svc 비디오의 일반화된 fgs데이터 추출 장치 및 방법
WO2009078560A1 (en) * 2007-12-18 2009-06-25 Electronics And Telecommunications Research Institute Apparatus and method for generalized fgs truncation of svc video with user preference
KR101144539B1 (ko) * 2008-06-05 2012-05-14 한국전자통신연구원 스케일러블 비디오 코딩 비트스트림의 적응 변환 장치 및 그 방법
KR100970388B1 (ko) * 2008-10-31 2010-07-15 한국전자통신연구원 네트워크 흐름기반 스케일러블 비디오 코딩 적응 장치 및 그 방법
KR100978355B1 (ko) * 2008-11-06 2010-08-30 연세대학교 산학협력단 계층화된 데이터를 전송하는 데이터 전송 장치 및 데이터 전송 방법
US9197677B2 (en) * 2009-03-09 2015-11-24 Arris Canada, Inc. Multi-tiered scalable media streaming systems and methods
US9485299B2 (en) * 2009-03-09 2016-11-01 Arris Canada, Inc. Progressive download gateway
KR101557504B1 (ko) * 2009-04-13 2015-10-07 삼성전자주식회사 채널 적응형 비디오 전송 방법, 이를 이용한 장치 및 이를 제공하는 시스템
CA2711311C (en) 2009-08-10 2016-08-23 Seawell Networks Inc. Methods and systems for scalable video chunking
DE102009050312B4 (de) * 2009-10-22 2015-01-22 Airbus Operations Gmbh Digitales Rundsendeverfahren
KR101105445B1 (ko) * 2009-11-16 2012-01-17 한국항공대학교산학협력단 스케일러블 비디오의 패킷 손실 오류를 축소하기 위한 적응 장치 및 그 방법
US20110141893A1 (en) * 2009-12-10 2011-06-16 Electronics And Telecommunications Research Institute Apparatus for managing network on per-subflow basis
US8341284B2 (en) * 2009-12-18 2012-12-25 At&T Intellectual Property I, L.P. Method and system for selecting a delivery method for media on demand
US8908774B2 (en) * 2010-02-11 2014-12-09 Mediatek Inc. Method and video receiving system for adaptively decoding embedded video bitstream
KR101683291B1 (ko) * 2010-05-14 2016-12-06 엘지전자 주식회사 디스플레이 장치 및 그의 제어 방법
US8190677B2 (en) 2010-07-23 2012-05-29 Seawell Networks Inc. Methods and systems for scalable video delivery
EP3122055A1 (en) * 2010-09-01 2017-01-25 Electronics and Telecommunications Research Institute Method and device for providing content via http adaptive streaming using a general media presentation description and specific media presentation descriptions
US9591318B2 (en) 2011-09-16 2017-03-07 Microsoft Technology Licensing, Llc Multi-layer encoding and decoding
US11089343B2 (en) * 2012-01-11 2021-08-10 Microsoft Technology Licensing, Llc Capability advertisement, configuration and control for video coding and decoding
US9712887B2 (en) 2012-04-12 2017-07-18 Arris Canada, Inc. Methods and systems for real-time transmuxing of streaming media content
CN106604078B (zh) * 2015-10-14 2019-07-19 北京国双科技有限公司 一种网络视频推荐方法及装置
US10021402B2 (en) * 2015-12-16 2018-07-10 Dialogic Corporation Estimation of video quality of experience on media servers

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5768537A (en) * 1996-02-22 1998-06-16 International Business Machines Corporation Scalable MPEG2 compliant video encoder
US6650783B2 (en) * 1998-01-14 2003-11-18 Canon Kabushiki Kaisha Image processing apparatus and method for processing images with different scalabilites
US6263022B1 (en) 1999-07-06 2001-07-17 Philips Electronics North America Corp. System and method for fine granular scalable video with selective quality enhancement
CN1636394A (zh) * 2000-10-11 2005-07-06 皇家菲利浦电子有限公司 细粒视频编码的空间可缩放性
WO2002037826A2 (en) * 2000-11-01 2002-05-10 Webcast Technologies Inc Encoding and decoding of video signals
US6580759B1 (en) * 2000-11-16 2003-06-17 Koninklijke Philips Electronics N.V. Scalable MPEG-2 video system
JP4150951B2 (ja) 2002-02-19 2008-09-17 ソニー株式会社 動画配信システム、動画配信装置および方法、並びにプログラム
JP2004000917A (ja) * 2002-03-25 2004-01-08 Jfe Engineering Kk ガス化溶融炉での循環水の清浄化方法及び清浄化装置
US8244895B2 (en) * 2002-07-15 2012-08-14 Hewlett-Packard Development Company, L.P. Method and apparatus for applying receiving attributes using constraints
US7483631B2 (en) * 2002-12-24 2009-01-27 Intel Corporation Method and apparatus of data and control scheduling in wavelength-division-multiplexed photonic burst-switched networks
US20050094732A1 (en) * 2003-10-30 2005-05-05 Debargha Mukherjee Data communications methods, compressed media data decoding methods, compressed media data decoders, articles of manufacture, and data communications systems
KR20050077874A (ko) * 2004-01-28 2005-08-04 삼성전자주식회사 스케일러블 비디오 스트림 송신 방법 및 이를 이용한 장치
US7617436B2 (en) * 2005-08-02 2009-11-10 Nokia Corporation Method, device, and system for forward channel error recovery in video sequence transmission over packet-based network

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JPN6010061160, Jan Bormans et al., "MPEG−21: The 21st century multimedia framework", Signal Processing Magazine, IEEE, 200303, vol.20 No.2, pp.53−62, IEEE *
JPN6010061161, Debargha Mukherjee et al., "Format−independent scalable bit−stream adaptation using MPEG−21 DIA", Image Processing, 2004. ICIP ’04. 2004 International Conference on, 20041024, Vol. 4, pp.2793−2796, US, IEEE *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011035889A (ja) * 2009-07-31 2011-02-17 Postech Academy-Industry Foundation モバイルiptvサービスを提供する方法及びこれのためのシステム

Also Published As

Publication number Publication date
CN101283596B (zh) 2011-07-13
KR100848310B1 (ko) 2008-07-24
US20080247460A1 (en) 2008-10-09
KR20070039459A (ko) 2007-04-12
CN101283596A (zh) 2008-10-08

Similar Documents

Publication Publication Date Title
JP2009510966A (ja) スケーラブルビデオコーディング技術が適用されたビットストリーム適応変換装置及び方法
TWI656786B (zh) 取樣自適應偏移裝置
JP5869688B2 (ja) インター予測方法及びその装置、動き補償方法及びその装置
CN102450014B (zh) 用于质量感知视频优化的方法和视频优化器
MX2013008757A (es) Control de velocidad de bits adaptativa basado en escenas.
JP5122644B2 (ja) レーザコンテンツを使用して場面を構成するための方法及び装置
CN113115067A (zh) 直播系统、视频处理方法及相关装置
CN104541510A (zh) 参考画面列表能够被改变的帧间预测方法及其设备
CN110072119A (zh) 一种基于深度学习网络的内容感知视频自适应传输方法
CN112954398A (zh) 编码方法、解码方法、装置、存储介质及电子设备
CN113192147A (zh) 显著性压缩的方法、系统、存储介质、计算机设备及应用
CN1622593B (zh) 用于实现信噪比可伸缩性的视频处理的装置和方法
CN102263942A (zh) 一种分级视频转码装置和方法
KR20230137459A (ko) 포인트 클라우드 인코딩 방법 및 장치, 포인트 클라우드 디코딩 방법 및 장치, 및 컴퓨터-판독가능 매체, 및 전자 디바이스
US20190007685A1 (en) Devices and method for video encoding and reconstruction
EP3056002A2 (en) Method for encoding and decoding a media signal and apparatus using the same
KR100898769B1 (ko) 실시간 스트리밍 서비스를 위한 svc 비디오 데이터추출기 및 방법
CN114641793A (zh) 图像提供设备及其图像提供方法和显示设备及其显示方法
JP4549717B2 (ja) マルチメディアデータ統合装置、マルチメディアデータ統合方法およびマルチメディアデータ統合プログラム
KR100939915B1 (ko) 사용자 선호도를 이용한 svc 비디오의 일반화된 fgs데이터 추출 장치 및 방법
JP4469976B2 (ja) 情報送信装置、情報提供システム、情報提供方法、情報提供プログラムおよび該情報提供プログラムを記録した記録媒体
WO2007043770A1 (en) Method and apparatus for scalable video adaptation using adaptation operators for scalable video
WO2023130893A1 (zh) 流媒体传输方法、装置、电子设备及计算机可读存储介质
EP4333432A1 (en) Encoding method and apparatus, decoding method and apparatus, device, storage medium and computer program
US20240129047A1 (en) Method for creating sparse isobmff haptics tracks

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20100118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101022

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110120

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110215