JP2004140807A - 多重オブジェクト環境で優先順位情報を用いた優雅的計算量低減方法 - Google Patents

多重オブジェクト環境で優先順位情報を用いた優雅的計算量低減方法 Download PDF

Info

Publication number
JP2004140807A
JP2004140807A JP2003312597A JP2003312597A JP2004140807A JP 2004140807 A JP2004140807 A JP 2004140807A JP 2003312597 A JP2003312597 A JP 2003312597A JP 2003312597 A JP2003312597 A JP 2003312597A JP 2004140807 A JP2004140807 A JP 2004140807A
Authority
JP
Japan
Prior art keywords
multimedia
decoding
calculation
bitstream
decoder
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003312597A
Other languages
English (en)
Inventor
Young Kwon Lim
リム、ヤン、クウォン
Sang Kyu Park
パク、サン、キュ
Chie Teuk Ahn
アウン、チエ、テウク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of JP2004140807A publication Critical patent/JP2004140807A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M1/00—Analogue/digital conversion; Digital/analogue conversion
    • H03M1/12—Analogue/digital converters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H04N21/4545—Input to filtering algorithms, e.g. filtering a region of the image
    • H04N21/45452—Input to filtering algorithms, e.g. filtering a region of the image applied to an object-based stream, e.g. MPEG-4 streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4516—Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Computer Graphics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Selective Calling Equipment (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

【課題】オブジェクトの優先順位情報を相互に異なる比率で復号化に必要な計算量を低減させることができる方法を提供する。
【解決手段】多重オブジェクト環境で優先順位情報を用いた優雅な計算量低減方法が提供される。この方法は、多数のオブジェクト単位(object)で符号化されたマルチメディアデータを復号化する際、符号化されたデータを処理するために要求される計算量に復号化器の計算パワーが及ばない場合、各オブジェクト別に復号化に必要とされる計算量を低減させる。優先順位情報は、オブジェクト間の相対的な視覚的重要度の観点から符号化器により決定される。
【選択図】図１Ｂ

Description

　本発明は、多重オブジェクト環境で優先順位情報を用いた優雅的（純化的）
計算量低減方法に関する。特に幾つかのオブジェクト(object)単位で符号化されたマルチメディア(multimedia)データを復号化する際、符号化されたデータを処理するのに要求される計算パワーに復号化器の計算パワーが及ばない場合、符号化器が各オブジェクトの相対的な視覚的重要度に応じて、優雅的計算量低減方法が適用されることを考慮して決定した優先順位情報を用いて、復号化に必要とされる計算量を各オブジェクト毎に相互に異なる比率で低減させる方法に関する。
　（背景技術）
　近年、ＭＥＰＧ（Moving Picture Experts Group）スタンダード、すなわち、多くの情報を圧縮することができるマルチメディア統合型の動画圧縮技術の国際標準、がオーディオ、データ、ビデオを統合するマルチメディア技術の発達に伴って広く普及してきた。
　多くの情報を圧縮することができるＭＰＥＧ技術は、通信、放送、家電製品、コンピュータ、ＣＤ−ＲＯＭ等に適用され、オーディオおよびビデオを同期化して両者を多重化する。
　一般に、オーディオ信号とビデオ信号の混在したシステムストリームであるＭＰＥＧビットストリームデータは、チャネルおよびメモリまたは表示の種類によって決定される。このようなビットストリームデータはＭＰＥＧ複合化器に受信され、まず、そのシステムストリームを復号化して、その中に混在しているオーディオビットストリーム情報、ビデオビットストリーム情報、および付加的な情報を得る。
　従来のＭＰＥＧ複合化器は、ＭＰＥＧビットストリームデータを復号化して、その復号化結果を外部メモリに書き込む。その後、複合化器は、この復号化された結果をアナログ信号に変換し、ユーザがオーディオおよびビデオを視聴できるようにする。
　一般に、各プラットフォームの計算能力（パワー）は同じではないので、各プラットフォームの能力で実現しうるサービスの最大品質を提示する必要がある。また、すべての複合化器が、異なる品質レベルであっても、すべてのＭＰＥＧ−４サービスを復号化できる必要もある。このことは、計算パワーに応じた変倍性(scalability)が必要であることを意味する。この変倍性は、復号化側で理論的
に必要な計算パワーが得られない場合には、品質を優雅に劣化（graceful degradation）することを可能とすべきである。
　M.Mttavelli等によるMPEG96/0925で提案されている従来の優雅な計算低減方法( computational graceful degradation method)は、符号化されたマルチメディアデータを復号化する際、計算量を低減するものである。この方法は、符号化されたマルチメディアデータを処理するために必要な計算パワーに対して複合化器の計算パワーが及ばない場合に、それぞれのビデオオブジェクト間の相対的な重要度を考慮することなく、一括的に復号化に必要な計算量を低減させて処理した。しかしながら、こうした従来の方法は各オブジェクトが有している相対的な重要度を十分に活用し得ない問題点がある。
　この従来の方法は、単一のビデオオブジェクト（ＶＯ）の場合のみを考慮していた。しかし、ビデオシーンは、多数のビデオオブジェクトからなり、これらのビデオオブジェクトは、変倍性を可能とするために、さらに幾つかのビデオオブジェクト層（ＶＯＬ）に分解できる。優雅な計算低減の観点から簡略化された復号化を目的として、これらのＶＯやＶＯＬの視覚的重要性における種々の程度が活かされるべきである。
　（発明の開示）
　本発明の目的は、上述のような問題点を解決するため、符号化されたデータを処理するのに要求される計算パワーに復号化器の計算パワーが及ばない場合に、それぞれのビデオオブジェクト間の相対的な視覚的重要性の観点から最適な優雅な劣化のために符号化器が決定した各オブジェクトの優先順位情報を復号化器が用いてオブジェクト毎に相互に異なる比率で復号化に必要な計算量を低減させることができる方法を提供することにある。
　前記目的を達成するための本発明は、ＭＰＥＧ符号化および復号化システムにおける優雅的計算低減方法であって、入力マルチメディアをその内容及び特性に応じて複数のオブジェクトに分割するマルチメディアオブジェクト分割部、このマルチメディアオブジェクト分割部からの対応する入力マルチメディアオブジェクトを符号化する複数のオブジェクト符号化部、および複数の符号化されたマルチメディアオブジェクト・ビットストリームを多重化する多重化器（マルチプレクサ）を有する符号化器（デコーダ）と、前記多重化器から受け取った多重化されたマルチメディアオブジェクト・ビットストリームを逆多重化して、複数の逆多重化されたマルチメディアオブジェクトビットストリームを出力する逆多重化器（デマルチプレクサ）、この逆多重化器から得られた対応するマルチメディアオブジェクト・ビットストリームを復号する複数のオブジェクト復号化部（デコーダ）、およびこれらの復号化されたマルチメディアオブジェクトを再構築して、ユーザに対するマルチメディアを生成するマルチメディア構築部を有する復号化器とからなるＭＰＥＧ符号化および復号化システムにおける優雅的計算低減方法を提供する。
　この方法は、多重化器において、復号化器で優雅的計算低減が適用されることを考慮して、符号化されたオブジェクト・ビットストリームを送信用に多重化する前に符号化オブジェクト間の相対的な重要性に応じてそれぞれのオブジェクトの優先順位を決定するステップと、逆多重化器において、それぞれのオブジェクトに応じて決定された前記優先順位を用いて各ビデオオブジェクトごとに異なる比率で低減すべき計算量を決定するステップとを有する。
　前記低減計算量を決定するステップでは、入力ビットストリームを逆多重化した後、それぞれの逆多重化されたオブジェクト・ビットストリームを分析してそれぞれのオブジェクト・ビットストリームを復号化するのに必要な計算パワーを予測するステップと、オブジェクト復号化部の計算パワーを分析するステップと、前記オブジェクト復号化部の計算パワーがそれぞれのオブジェクト・ビットストリームの復号化に必要な計算パワーを越えているか否かを判定するステップと、前記オブジェクト復号化部の計算パワーが必要パワーに及ばない場合に、各ビデオオブジェクト毎に前記優先順位を用いて低減すべき計算量を決定するステップとを有する。
　上基本発明によれば、互いに異なる特性を有するマルチメディアオブジェクト間の相対的な視覚的重要性の観点による優雅な計算低減により、それぞれのオブジェクトの特性により適したマルチメディア復号化が同環境で実現しうる。
　（発明を実施するための最良の形態）
　以下、本発明の望ましい一実施例に関して添付図面を参照して詳細に説明する。
　第1Ａ図及び第1Ｂ図は本発明が適用され得るＭＰＥＧ符号化及び復号化システムの構成図である。第1Ａ図及び第1Ｂ図に図示された図面符号11はマルチメディアオブジェクト分割部、12ａから12ｎは複数のオブジェクト符号化部、13は多重化部、14逆多重化部、15はオブジェクト復号化部、及び16はマルチメディア構築部を各々示す。
　このように構成されたマルチメディア符号化及び復号化システムは一般的に次のように動作する。
　マルチメディアオブジェクト分割部11は、入力されるマルチメディアを内容及び特性別に多数のオブジェクトに分割して複数のオブジェクト符号化部12ａ〜12ｎに出力する。
　ついで、これらのオブジェクト符号化部12ａ〜12ｎのおのおのは、マルチメディアオブジェクト分割部11から入力された対応するオブジェクトを符号化する。
　その後、多重化器13は、各オブジェクト符号化部12ａ〜12ｎにより符号化された複数のマルチメディアオブジェクト・ビットストリームを多重化して復号化器へ、多重化マルチメディアオブジェクト・ビットストリームを送る。
　復号化器では、逆多重化部14が、多重化器13から入力された多重化マルチメディアビット・ストリームを逆多重化して、複数のマルチメディアオブジェクト・ビットストリームをオブジェクト復号化部15a~15nに出力する。
　次に、オブジェクト復号化部15a~15nは、逆多重化部14から入力される対応す
るマルチメディアオブジェクト・ビットストリームを復号化し、続いて、マルチメディア構築部16が、各オブジェクト復号化部15から復号化されたマルチメディアオブジェクトを再構築してユーザに出力する。
　上述したようなマルチメディア符号化及び復号化システムに本発明が適用されると、多重化器13及び逆多重化部14は次のように動作する。
　まず、多重化器13は、符号化されたオブジェクトビット・ストリームを多重化して送る前に、復号化装置で優雅的計算量低減方法が適用されることを考慮して、各オブジェクトの相対的な視覚的重要度に応じてそれぞれのビデオオブジェクト（ＶＯ）の優先順位を決定する。
　逆多重化部14は、図2の優雅的な計算低減処理のフローチャートに図示された
ステップを行う。
　逆多重化部14は、入力されるビット・ストリームを逆多重化した後、各オブジェクト・ビットストリームを復号化装置に送る前に、各オブジェクト・ビットストリームを分析する(Ｓ101)。
　この分析によって各オブジェクト・ビットストリームを復号化するために要求される計算パワーを予測し(Ｓ102)、オブジェクト復号化部15a~15nの計算パワーを分析する(Ｓ103)。この分析によって、逆多重化器１４は、それぞれのオブジ
ェクト・ビットストリームを復号化するのに必要な計算パワーにオブジェクト復号化部15a~15bの計算パワーが及ぶか否かを判定する（Ｓ104）。
　この判定の結果、オブジェクト復号化部15a~15n の計算パワーが復号化に必要な計算パワーに及ばない場合、多重化器１４は、多重化器13で決定した優先順位に応じて、復号化部につき低減すべき計算量を決定する(Ｓ105)。
　もし、オブジェクトの計算パワーが必要分を越えるならば、逆多重化部１４は、計算量を低減することなく、復号化部15a~15nに対して、逆多重化されたオブ
ジェクト・ビットストリームを与える。
　例えば、テニス競技場でテニス競技をするテニスプレーヤの動映像を符号化する場合を考える。この競技場とテニスプレーヤの各々をビデオオブジェクトとして符号化する場合、大抵の人は競技場よりもテニスプレーヤにより関心があるので、競技場の品質よりテニスプレーヤの品質を高くするのが望ましい。すなわち、テニスプレーヤのオブジェクトの方が、競技場のオブジェクトより相対的に重要であるということである。
　したがって、復号化器において優雅的計算低減方法を適用する際、多重化器１３は、競技場オブジェクトがテニスプレーヤオブジェクトより相対的に3倍ぐら
い計算量が低減されて復号化されるように、テニスプレーヤオブジェクトの優先順位を１とするとともに、競技場オブジェクトの優先順位を３と決定することができる。
　さらに、逆多重化部14で予測した競技場の符号化に要する計算パワーが秒当り30000命令語であり、テニスプレーヤオブジェクトの場合、秒当り20000命令語であり、さらに、復号化部15a~15nの計算パワーが秒当り40000命令語であれば、全体的に秒当り10000命令語分の計算パワーが足りないことになる。
　したがって、多重化器13で決定された優先順位に従い、競技場オブジェクトの計算低減量をテニスプレーヤオブジェクトのそれより相対的に3倍ぐらいに大き
くするために、競技場オブジェクトは秒当り7500命令語を低減させて復号化し、テニスプレーヤオブジェクトは秒当り2500命令語を低減させて復号化するように決定することができる。
　以上、具体的な実施例により本発明を説明したが、上記説明に照らして当業者が種々の置換、変形および変更を行うことができることは自明であろう。したがって、請求の範囲に記載の精神および広い範囲内においてそのようなすべての置換、変改、及び変更が包含されることが意図されている。
　（産業上の利用可能性）
　以上のような本発明は、各々相互に異なる特性を有するマルチメディアオブジェクトの相対的な視覚的重要度を考慮して優雅的な計算量を行うことによって、同一の環境で各オブジェクトの特性により適したマルチメディア復号化が可能であるようにする、優れた効果がある。
本発明が適用される符号化及び復号化システムの構成図。 本発明が適用される符号化及び復号化システムの構成図。 本発明による優雅的な計算低減処理のフローチャート。

Claims (2)

  1. 　入力マルチメディアをその内容及び特性に応じて複数のオブジェクトに分割するマルチメディアオブジェクト分割部、このマルチメディアオブジェクト分割部からの対応する入力マルチメディアオブジェクトを符号化する複数のオブジェクト符号化部、および複数の符号化されたマルチメディアオブジェクト・ビットストリームを多重化する多重化器を有する符号化器と、前記多重化器から受け取った多重化されたマルチメディアオブジェクト・ビットストリームを逆多重化して、複数の逆多重化されたマルチメディアオブジェクトビットストリームを出力する逆多重化器、この逆多重化器から得られた対応するマルチメディアオブジェクト・ビットストリームを復号する複数のオブジェクト復号化部、およびこれらの復号化されたマルチメディアオブジェクトを再構築して、ユーザに対するマルチメディアを生成するマルチメディア構築部を有する復号化器とからなるＭＰＥＧ符号化および復号化システムにおける優雅的計算低減方法であって、
    　多重化器において、復号化器で優雅的計算低減が適用されることを考慮して、符号化されたオブジェクト・ビットストリームを送信用に多重化する前に符号化オブジェクト間の相対的な重要性に応じてそれぞれのオブジェクトの優先順位を決定するステップと、
    　逆多重化器において、それぞれのオブジェクトに応じて決定された前記優先順位を用いて各ビデオオブジェクトごとに異なる比率で低減すべき計算量を決定するステップとを有する方法。
  2. 　請求項１に記載の方法であって、前記低減計算量を決定するステップは、
    　入力ビットストリームを逆多重化した後、それぞれの逆多重化されたオブジェクト・ビットストリームを分析してそれぞれのオブジェクト・ビットストリームを復号化するのに必要な計算パワーを予測するステップと、
    　オブジェクト復号化部の計算パワーを分析するステップと、
    　前記オブジェクト復号化部の計算パワーがそれぞれのオブジェクト・ビットストリームの復号化に必要な計算パワーを越えているか否かを判定するステップと、
    　前記オブジェクト復号化部の計算パワーが必要パワーに及ばない場合に、各ビデオオブジェクト毎に前記優先順位を用いて低減すべき計算量を決定するステップとを有することを特徴とする方法。

JP2003312597A 1997-09-04 2003-09-04 多重オブジェクト環境で優先順位情報を用いた優雅的計算量低減方法 Pending JP2004140807A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019970045740A KR100248404B1 (ko) 1997-09-04 1997-09-04 다중 객체 환경에서 우선 순위 정보를 이용한 순화적 계산량 감소 방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2000509058A Division JP3808703B2 (ja) 1997-09-04 1998-04-14 多重オブジェクト環境で優先順位情報を用いた優雅的計算量低減方法

Publications (1)

Publication Number Publication Date
JP2004140807A true JP2004140807A (ja) 2004-05-13

Family

ID=19520834

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2000509058A Expired - Fee Related JP3808703B2 (ja) 1997-09-04 1998-04-14 多重オブジェクト環境で優先順位情報を用いた優雅的計算量低減方法
JP2003312597A Pending JP2004140807A (ja) 1997-09-04 2003-09-04 多重オブジェクト環境で優先順位情報を用いた優雅的計算量低減方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2000509058A Expired - Fee Related JP3808703B2 (ja) 1997-09-04 1998-04-14 多重オブジェクト環境で優先順位情報を用いた優雅的計算量低減方法

Country Status (10)

Country Link
US (3) US6707944B1 (ja)
EP (1) EP1027680B1 (ja)
JP (2) JP3808703B2 (ja)
KR (1) KR100248404B1 (ja)
AT (1) ATE278225T1 (ja)
DE (1) DE69826703T2 (ja)
DK (1) DK1027680T3 (ja)
ES (1) ES2229487T3 (ja)
PT (1) PT1027680E (ja)
WO (1) WO1999012126A1 (ja)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SG116400A1 (en) * 1997-10-24 2005-11-28 Matsushita Electric Ind Co Ltd A method for computational graceful degradation inan audiovisual compression system.
JP2002516528A (ja) * 1998-05-20 2002-06-04 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ブロック編成されたデータの符号化
JP2001160066A (ja) * 1998-12-25 2001-06-12 Matsushita Electric Ind Co Ltd データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム
JP2001189713A (ja) 1999-12-28 2001-07-10 Toshiba Corp データ伝送装置およびデータ伝送方法
US7016412B1 (en) * 2000-08-29 2006-03-21 Koninklijke Philips Electronics N.V. System and method for dynamic adaptive decoding of scalable video to balance CPU load
CN1265645C (zh) * 2000-08-29 2006-07-19 皇家菲利浦电子有限公司 运行一种算法的方法以及一种可伸缩编程的处理设备
JP3639517B2 (ja) 2000-10-04 2005-04-20 三洋電機株式会社 動画像復号化装置および動画像復号化方法
US6631163B1 (en) * 2000-11-14 2003-10-07 Koninklijke Philips Electronics N.V. Dynamic adaptation of complexity in an MPEG-2 scalable decoder
US6925126B2 (en) * 2001-04-18 2005-08-02 Koninklijke Philips Electronics N.V. Dynamic complexity prediction and regulation of MPEG2 decoding in a media processor
US6496217B1 (en) * 2001-06-12 2002-12-17 Koninklijke Philips Electronics N.V. Video communication system using model-based coding and prioritzation techniques
WO2003007134A1 (en) * 2001-07-13 2003-01-23 Koninklijke Philips Electronics N.V. Method of running a media application and a media system with job control
FR2832581A1 (fr) * 2001-11-21 2003-05-23 Canon Kk Procede et dispositif de determination d'au moins un parametre de codage de donnees multimedia
KR100459376B1 (ko) * 2001-12-14 2004-12-03 박유상 영상 객체 합성기
CN1640139A (zh) * 2002-03-08 2005-07-13 皇家飞利浦电子股份有限公司 视频质量
CN100484242C (zh) 2002-12-20 2009-04-29 皇家飞利浦电子股份有限公司 用于安全多媒体分发的分层模式
US20060059263A1 (en) * 2003-02-06 2006-03-16 Koninklijke Philips Electronics N.V. Optimizing scaleable video algorithm asset distribution utilizing quality indicators
WO2006092671A1 (en) * 2005-03-03 2006-09-08 Koninklijke Philips Electronics N.V. Adaptive fallback system for mpeg decoders
FR2897741B1 (fr) * 2006-02-17 2008-11-07 Canon Kk Procede et dispositif de generation de donnees representatives d'un degre d'importance de blocs de donnees et procede et dispositif de transmission d'une sequence video encodee
JP5030495B2 (ja) * 2006-07-14 2012-09-19 ソニー株式会社 再生装置、再生方法、プログラム、および記録媒体
KR101487335B1 (ko) * 2007-08-09 2015-01-28 삼성전자주식회사 객체 미디어 교체가 가능한 멀티미디어 데이터 생성 방법및 장치 그리고 재구성 방법 및 장치
US7870299B1 (en) * 2008-02-06 2011-01-11 Westinghouse Electric Co Llc Advanced logic system
US8689040B2 (en) * 2010-10-01 2014-04-01 Lsi Corporation Method and system for data reconstruction after drive failures

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5611038A (en) * 1991-04-17 1997-03-11 Shaw; Venson M. Audio/video transceiver provided with a device for reconfiguration of incompatibly received or transmitted video and audio information
JPH05236286A (ja) 1992-02-18 1993-09-10 Nec Off Syst Ltd 画像復号回路
JP2810585B2 (ja) 1992-02-20 1998-10-15 大日本スクリーン製造株式会社 画像符号化処理方法および画像復号化処理方法
JPH06291777A (ja) 1993-03-30 1994-10-18 Sumitomo Electric Ind Ltd 映像信号伝送装置
JP3615252B2 (ja) * 1994-10-31 2005-02-02 三洋電機株式会社 動画像処理方法及び装置
US5818967A (en) * 1995-06-12 1998-10-06 S3, Incorporated Video decoder engine
JPH09182071A (ja) 1995-12-26 1997-07-11 Nissin Electric Co Ltd ウェーブレット変換を用いた画像処理装置
KR100463004B1 (ko) * 1997-03-20 2005-06-02 주식회사 팬택앤큐리텔 Mpeg-4vop부호화방법
US5978510A (en) * 1997-03-20 1999-11-02 Hyundai Electronics Industries Co., Ltd. Method and apparatus for predictively coding contour of video signal
US5815689A (en) * 1997-04-04 1998-09-29 Microsoft Corporation Method and computer program product for synchronizing the processing of multiple data streams and matching disparate processing rates using a standardized clock mechanism
US6233356B1 (en) * 1997-07-08 2001-05-15 At&T Corp. Generalized scalability for video coder based on video objects

Also Published As

Publication number Publication date
JP3808703B2 (ja) 2006-08-16
EP1027680B1 (en) 2004-09-29
US6707944B1 (en) 2004-03-16
DE69826703D1 (de) 2004-11-04
ATE278225T1 (de) 2004-10-15
DE69826703T2 (de) 2006-02-23
EP1027680A1 (en) 2000-08-16
ES2229487T3 (es) 2005-04-16
US20060222248A1 (en) 2006-10-05
WO1999012126A1 (en) 1999-03-11
KR100248404B1 (ko) 2000-03-15
PT1027680E (pt) 2005-02-28
KR19990024565A (ko) 1999-04-06
US20040114811A1 (en) 2004-06-17
JP2001515286A (ja) 2001-09-18
DK1027680T3 (da) 2004-11-29
US7062097B2 (en) 2006-06-13
US7362906B2 (en) 2008-04-22

Similar Documents

Publication Publication Date Title
US7362906B2 (en) Computational graceful degradation method using priority information in multiple objects case
EP1173028B1 (en) Scalable encoding of media streams
CN102037731B (zh) 压缩视频中属于互相关性层的图片的通知和抽取
KR100658222B1 (ko) 3차원 디지털 멀티미디어 방송 시스템
US20050094729A1 (en) Software and hardware partitioning for multi-standard video compression and decompression
JP4708263B2 (ja) 画像復号化装置および画像復号化方法
JP4849479B2 (ja) スケーラブルにデータを符号化及び復号化するシステム及び方法
JP2000209580A (ja) 画像処理装置およびその方法
WO2004086631A3 (en) Method, apparatus and system for encoding and decoding side information for multimedia transmission
KR20070078783A (ko) 인코드 장치, 디코드 장치, 인코드 방법, 디코드 방법,인코드 방법의 프로그램, 디코드 방법의 프로그램, 인코드방법의 프로그램을 기록한 기록 매체 및 디코드 방법의프로그램을 기록한 기록 매체
KR100736503B1 (ko) 화상 복호화 방법 및 그 장치
WO2003092208A1 (en) Encoded packet transmission/reception method, device thereof, and program
JP4410414B2 (ja) ビデオ信号圧縮処理方法
JP2004537931A (ja) シーンを符号化する方法及び装置
KR102312668B1 (ko) 비디오 트랜스코딩 시스템
JP2000175118A (ja) 放送受信装置およびその方法
KR20050024104A (ko) 객체기반 다시점 비디오 서비스 시스템 및 그 방법
KR100802180B1 (ko) 엠펙-4 비디오 신호의 비트율을 동적인 통신 용량 변화에따라 제어하는 방법
KR100371868B1 (ko) 영상 압축/복원 시스템에서 객체 기반 액세스를 위한 객체마스크 추적 장치
JPH0993586A (ja) 画像信号多重化符号化復号化装置
Pires et al. The Influence of Channel Errors on a Video Decoder Syntax and Hardware Architecture for Broadcasting of TV/HDTV Applications
JP2003134516A (ja) 画像データまたは音声データ符号化ミドルウェア
KR20070042759A (ko) 오디오 신호의 디코딩 방법 및 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050412

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050412

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A132

Effective date: 20090317

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090811