JP2004537930A - モザイクを符号化する方法及び装置 - Google Patents
モザイクを符号化する方法及び装置 Download PDFInfo
- Publication number
- JP2004537930A JP2004537930A JP2003518187A JP2003518187A JP2004537930A JP 2004537930 A JP2004537930 A JP 2004537930A JP 2003518187 A JP2003518187 A JP 2003518187A JP 2003518187 A JP2003518187 A JP 2003518187A JP 2004537930 A JP2004537930 A JP 2004537930A
- Authority
- JP
- Japan
- Prior art keywords
- image
- sub
- mosaic
- data
- stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/55—Motion estimation with spatial constraints, e.g. at image or region borders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4347—Demultiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4348—Demultiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
符号化されたデータのストリームを与えるモザイク画像を符号化する方法である。このモザイクは、イメージエレメントから構成されるサブイメージから構成されている。該ストリームにおける再同期マーカは、受信レベルでのデータの再同期を可能にする。本方法では、サブイメージ（１１，…，１Ｎ）が、あるモザイクを与えるように符号化される画像において１つずつ下に配置される。モザイクは、該ストリームのデータを供給するようにＴＶタイプの走査に従って１エレメント毎に符号化され、それぞれのサブイメージの最初のエレメントが識別される。再同期マーカは、あるサブイメージに関連するデータを識別するように、該サブイメージのそれぞれ最初のエレメントの前で、該ストリームに配置される。
Description
【０００１】
［技術分野］
本発明は、画像のモザイクを符号化及び復号化するための方法及び装置に関する。
【０００２】
当該技術分野は、ＭＰＥＧタイプ等のビデオ圧縮の分野であり、このケースでは、当該技術により、再同期手段を実現することができる。たとえば、Ｈ２６３又はＭＰＥＧ４規格、或いは圧縮の間に生成されるバイナリ系列における様々な位置に再同期マーカを配置する可能性を提供する任意の圧縮方法を伴う。
［背景技術］
現代のＭＰＥＧ−２デコーダを実現するデジタルデコーダでは、モザイクは、幾つかのページ（スクリーン）から一般に構成されている。それぞれのページは、チャネル（ＭＰＥＧ−２エレメンタリストリーム）に対応している。任意の瞬間で、完全な画像が復号化されて表示される。モザイクの一部のみが表示向けに有用な場合であっても、モザイクは完全に復号化されなければならず、したがって、かなりの処理時間が発生する。
［発明の開示］
本発明の目的は、上述した問題点を回避することにある。
【０００３】
本発明は、符号化されたデータのストリームを与えるモザイク画像（ｍｏｓａｉｃ ｏｆ ｉｍａｇｅｓ）を符号化する方法である。このモザイクは、サブイメージ（ｓｕｂｉｍａｇｅ）から構成されている。このサブイメージは、イメージエレメント（ｉｍａｇｅ ｅｌｅｍｅｎｔ）から構成されている。該ストリームにおける再同期マーカは、受信レベルでデータの再同期を可能にする。本方法は、以下の点を特徴としている。サブイメージは、モザイクを与えるように符号化された画像において１つずつ下に配置される。モザイクは、該ストリームのデータを供給するように、ＴＶタイプの走査に従って１エレメント毎に符号化され、それぞれのサブイメージの最初のエレメントが識別される。再同期マーカは、あるサブイメージに関連するデータを識別するように、該サブイメージのそれぞれ最初のエレメントの前で、該ストリームに配置される。
【０００４】
本方法の特定の実施の形態によれば、イメージエレメントは、マクロブロックであり、本符号化方法は、ＭＰＥＧ２規格を利用し、再同期マーカは、（該規格における用語に従えば）スライスのヘッダである。
【０００５】
本方法の特定の実施の形態によれば、イメージエレメントは、マクロブロックであり、本符号化方法は、ＭＰＥＧ４規格を利用し、再同期マーカは、グループ・オブ・マクロブロック（ｇｒｏｕｐｓ ｏｆ ｍａｃｒｏｂｌｏｃｋｓ）のヘッダである。
【０００６】
本方法の特定の実施の形態によれば、サブイメージの符号化が動き予測に関するフレーム間予測モードにあるとき、この動き予測は、画像におけるサブイメージの位置に対応する動きベクトルをサーチするためのウィンドウを利用する。
【０００７】
本方法の特定の実施の形態によれば、特定の数の前のモザイク画像について、サブイメージがフレーム内予測モードで符号化されていない場合、該サブイメージは、フレーム内予測モードで強制的に符号化される。
【０００８】
本方法の特定の実施の形態によれば、サブイメージが異なるサイズを有し、これら画像のサーフェイス（ｓｕｒｆａｃｅ）は、モザイクのサポート（ｍｏｓａｉｃ ｓｕｐｐｏｒｔ）を構成している。このモザイクサポートも符号化され、該サポートの符号化データは、ビデオセッションの開始に該ストリームで伝送される。このサポートが時間を通して変化する場合、該サポートの符号化データは、それぞれの変化に該ストリームで伝送される。
【０００９】
また、本発明は、再同期マーカと、サブイメージからなるモザイク画像を符号化するためのデータとを有するデータのストリームに基づいて、モザイク画像を復号化する方法に関する。本方法は、以下の点を特徴としている。再同期マーカに基づくこれらのデータのフィルタリングと、復号化処理とが実行され、モザイクに関連するデータの中から、選択されたサブイメージに関連するデータのみが該ストリームから抽出されて復号化される。
【００１０】
本方法の特定の実施の形態によれば、復号化されたサブイメージは記憶され、サブイメージがフレーム間予測で符号化されている場合、前のモザイクの対応する記憶されているサブイメージは、復号化のために利用される。
【００１１】
本方法の特定の実施の形態によれば、サブイメージが復号化されない場合、前のモザイクの対応するサブイメージが考慮される。
【００１２】
また、本発明は、再同期マーカと、サブイメージからなるモザイク画像を符号化するためのデータとを有するデータのストリームに基づいて、モザイク画像を復号化するデコーダに関する。本デコーダは、同期マーカに基づいてフィルタリングする回路と、モザイクに関連するデータの中から、選択されたサブイメージに関連するデータのみを該ストリームから抽出して復号化する復号化回路とを備えることを特徴としている。
【００１３】
また、本発明は、最終画像を表示するために、サブイメージと再同期マーカとからなるモザイク画像を符号化するためのデータを伝送するビデオデータストリームの読取り装置に関する。本読取り装置は、該ストリームを復号化するデコーダと、該デコーダを管理するための処理回路とを備えており、以下の点を特徴としている。処理回路は、最終画像を表示するために有用な選択されたサブイメージに関する情報をデコーダに送出する。デコーダは、同期マーカに基づいてフィルタリングする回路と、モザイクに関連するデータの中から、該選択されたサブイメージに関連するデータのみを該ストリームから抽出して復号化する復号化回路とを備えている。
【００１４】
本発明の概念は、該ストリームにおいて、モザイクイメージを構成する画像の様々な部分すなわちサブイメージに属するデータを定義するように、伝送エラー又は伝送ロスに応じて受信されたデータストリームとの再同期を可能にするために、規格において一般に設けられている再同期マーカを利用することである。再同期マーカの技術が利用され、モザイクのそれぞれのサブイメージの開始がタグ付けされ、任意の瞬間で、表示すべきモザイクの一部のみが復号化される。
【００１５】
本復号化方法は、計算速度の観点で改善され、モザイク画像のビデオ復号化が加速される。狙いは、読取り装置の中央処理装置（ＣＰＵ）のリソースを最大限に保持することであり、該読取り装置は、モザイクのビデオ復号化のタスク以外のタスクを実行することができる。本明細書で使用される用語「読取り装置」は、オーディオデコーダ、グラフィックス処理回路、表示回路のような他のハードウェアを含めて、ビデオデコーダ及び該デコーダを制御するシステムレイヤの全体をも備えているシステム全体を示している。
【００１６】
ＭＰＥＧ４対応の読取り装置のケースでは、グラフィックスアプリケーションの管理及びシステムレイヤ専用の占有領域は絶対必要である。ＭＰＥＧ４データを復号化するための手段がプラットフォームに益々装備され、電子番組ガイドすなわちＥＰＧタイプの対話型アプリケーション向けに益々論理的になると、対話性のレベルでの情報の豊かさを益々増加することができる。したがって、ビデオ復号化をできるだけ高速にすること、及びこのタイプの応用におけるデータ処理をシンプルにすることは有益である。
【００１７】
この選択的な復号化は、デコーダレベルでの独占的な方法に基づいて、及びビデオデコーダを制御する「システム」レイヤから生じる情報に基づいて実現される。この改善された点を有しない「標準的な」デコーダは、それにもかかわらず、提案される方法の効果による利益を受けないが、実現された技術となお互換性を有する。
【００１８】
本発明の他の機能及び効果は、添付図面を参照しつつ、限定するものではない例を介して、以下に与えられる発明の実施の形態を通して明らかになるであろう。
［発明の実施の形態］
提案される方法は、ビデオ符号化／復号化の回路の３つのハードウェアである、ビデオエンコーダ、ビデオデコーダを含む読取り装置のシステムレイヤ、ビデオデコーダにおいて介入する。本方法は、符号化の間に、たとえばビデオＭＰＥＧ４規格（ＩＳＯ／ＩＥＣ ＪＴＣ １／ＳＣ ２９／ＷＧ １１ Ｎ ２５０２ ａｎｎｅｘ Ｅ， パラグラフＥ．１．１， 頁３０７−３０８を参照されたい）に記載されるビデオパケットの技術を利用する。本方法は、それぞれの画像において、それぞれのビデオパケットの境界を定める再同期マーカを配置することにある。これらのパケットは、「再同期」と題された上記文献のパラグラフＥ．１．１に記載されているように、１つずつ独立して符号化される。
【００１９】
図１では、参照符号１，２，３が付され、瞬間ｔ，ｔ＋１，ｔ＋２で符号化される３つの「モザイク」画像の連続が表わされている。この例では、モザイク画像は、サブイメージすなわち同じサイズの“ｉｍａｇｅｔｔｅｓ”から構成され、したがって、対応するビデオは、同じサイズのサブイメージの重ね合わせから構成されている。このように、モザイク画像１は、Ｎ個のサブイメージ、すなわち参照符号１１〜１Ｎが付される“ｉｍａｇｅｔｔｅｓ”から構成されている。
【００２０】
図２には、これらの画像のバイナリ符号のストリームが示されている。このバイナリ符号のストリームは、全体のモザイクに対応する、（ＭＰＥＧ規格における用語を使用して）エレメンタリストリームの２進系列である。このモザイク画像の関連するビデオデータは、イメージヘッダにより先行される。このビデオデータは、それぞれのサブイメージに関連する符号化データから構成されている。本発明によれば、これらのデータは、再同期マーカにより、それぞれのサブイメージについて分離されている。符号化の間、エンコーダは、ビデオパケットの境界を定める再同期マーカを２進系列に配置する。これらのビデオパケットは、１つずつ個別に符号化されており、したがって、ビデオパケットは、２つのマーカの間のデータに対応している。次いで、それぞれのサブイメージは、ビデオパケットとして処理され、したがって、再同期マーカは、それぞれのサブイメージの開始に設けられている。すなわち、再同期マーカは、データストリームにおいて、サブイメージに対応するビデオデータに先行する。マクロブロックの符号化のケースでは、このマーカは、データストリームにおいて、それぞれのサブイメージの最初のマクロブロックの前に配置される。
【００２１】
ビデオエンコーダは、全てのビデオサブイメージを符号化する。モザイクの符号化のために、次々とサブイメージを配置することで、それらの符号化は、ビデオ符号化レイヤにより、従来のテレビジョンのタイプの走査モードを考慮したとき、連続的なやり方で次々と作用される。したがって、あるサブイメージから次のサブイメージに同期マーカをインクリメントすることで、復号化のとき、所望のサブイメージをタグ付けして、関連するマーカのインデックス番号に基づいて直接的にアクセスすることができる。所望のサブイメージを示すシステムレイヤから生じる情報に基づいて、すなわち、表示すべき最終画像の生成にとって必要な情報に基づいて、デコーダは、この最終画像に有用なこれらサブイメージだけの符号化を開始することができる。
【００２２】
サブイメージの符号化は、フレーム間予測（ｉｎｔｅｒ）、片方向フレーム間予測（ｐｒｅｄｉｃｔｉｖｅ）又は両方向間フレーム間予測（ｂｉｄｉｒｅｃｔｉｏｎａｌ）タイプの符号化のための動き予測を利用することができる。サブイメージが互いに独立に復号化可能であるために、フレーム間予測タイプのサブイメージを符号化するとき、動き予測ゾーンにとって、関心のあるサブイメージの位置及びサイズに対応する予測ゾーンに制限されることが必要である。したがって、動き予測器の動きベクトルは、関連するブロックに対応するサブイメージ以外のサブイメージを示すことは許されない。この制限は、垂直軸に関してのみ適用することができ、規格によって、動きベクトルは水平軸について画像以外を示すことが許される。
【００２３】
デコーダがランダムなやり方でモザイクのサブイメージにアクセスすることを可能にするために、たとえば、ユーザの操作に続いて、サブイメージはフレーム内予測（ｉｎｔｒａ）モードで規則的に符号化されなければならない。
【００２４】
幾つかの解決策が可能である。
【００２５】
エンコーダは、比較的に高い周波数、従来通りでは０．５秒毎で、フレーム内予測モードで完全なモザイクを符号化する。
【００２６】
符号化のシンタックスがそのように許可する場合、フレーム内予測モードでの符号化は画像全体に実行されず、該画像の一部についてのみ実行される。したがって、エンコーダは、循環するやり方で、このフレーム内予測モードを１サブイメージ毎に使用する。所与の瞬間で、最初のサブイメージのみが強制的にフレーム内予測モードとなる。他のサブイメージは、片方向フレーム間予測モード、したがって時間の予測に関して符号化される。
【００２７】
次の瞬間で、後続するサブイメージは、モザイクの最後のサブイメージに到達するまで、フレーム内予測モードで符号化されたサブイメージ等である。次いで、本方法は、最初のサブイメージについて再び始動される。これにより、ビットレートの観点で、フレーム内予測符号化されたサブイメージの時刻費用の低下が可能となり、完全な画像の符号化がフレーム内予測モードで実行された場合に生じる場合があるビットレートのスパイクを回避することができる。
【００２８】
この第二の解決策と非常に似た実現は、たとえば、リフレッシュ期間Ｒｆに等しい値にそれぞれのフレーム内予測符号化で再初期化されるイントラ・リフレッシュ・カウンタをサブイメージのそれぞれに与えることにある。このカウンタは、問題とするサブイメージのフレーム間予測符号化のそれぞれでデクリメントされる。モザイクシーケンスの符号化の開始で、最初のモザイク画像がフレーム内予測モードで一旦符号化されると、該サブイメージに関連するカウンタは、０とＲｆとの間にランダムに初期化される。該サブイメージのフレーム内予測符号化は、カウンタがＲｆに戻るたびにトリガされる。さらに、サブイメージに関連するシーン変化の間、このサブイメージに関連するリフレッシュカウンタは、このサブイメージのフレーム内予測モードでの符号化が可能となるように、Ｒｆに再び初期化される。
【００２９】
読取り装置のシステムレイヤは、独占的な解法を実現する。これにより、適切なインタフェースから、モザイクのどのサブイメージを復号化すべきかをビデオデコーダに示すことが可能となる。システムレイヤは、たとえば、復号化すべきサブイメージのインデックス番号の順番付きリストを送出する。これらのサブイメージは、復号化後に表示されなければならない正確なサブイメージである。「標準的な」デコーダが利用されるとき、この情報は利用されず、そのとき、モザイク全体が復号化される。
【００３０】
ビデオデコーダは、復号化すべきサブイメージのインデックス番号のリストと共に、符号化されたモザイクに対応する２進ストリームを受信する。ビデオデコーダは、以下の情報を管理する。現在の画像の符号化のモード（フレーム内予測又は片方向フレーム間予測）、ｉｍａｇｅｔｔｅが前の瞬間で復号化されているかを合図するそれぞれのｉｍａｇｅｔｔｅに割当てられた指標（ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ））。
【００３１】
この指標“ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ）”は、ｋが１からＮまで変化し、サブイメージ（ｋ）に関連する指標であり、Ｎはモザイクを構成するサブイメージの数であり、このサブイメージｋが前の瞬間で完全に復号化され、したがって再構成されたかを確認することができる。かかる場合は、このサブイメージｋがフレーム内予測モードで符号化されている場合、又は片方向フレーム間予測モード（フレーム間予測モード）で符号化されている場合であり、したがって、動きベクトルが属する対応する前のサブイメージが復号化された場合であって、この現在のサブイメージｋの復号化が可能となる。
【００３２】
図３には、読取り装置の処理アルゴリズムが示されている。この処理アルゴリズムにより、システムレイヤで計算される、復号化すべきサブイメージに関するリストが利用される。
【００３３】
第一のステップ４では、リストの全てのサブイメージが処理されているかがチェックされる。
【００３４】
処理されている場合、すなわち、リストの終了にある場合、次の処理はステップ５である。最終画像の表示のために必要な全てのサブイメージが処理されており、復号化処理が終了されており、復号化されたモザイクは、システムレイヤに戻される。このシステムレイヤは、最終画像の表示を実行するように、該復号化されたモザイクを処理する。
【００３５】
処理されていない場合、次のステップ６では、処理すべきインデックス番号ｋである次のサブイメージを回復する。これは、反復処理の開始にある場合には、最初のサブイメージとなる。次のステップ７では、データストリームにおいて再同期マーカｋがサーチされる。ステップ８では、再同期マーカが発見されたかがチェックされる。
【００３６】
発見されなかった場合、たとえば、データ伝送においてエラーがあった場合、ステップ４に戻り、次のサブイメージが処理される。現在のサブイメージｋに関連する指標は、該サブイメージを復号化できないことを合図するやり方で位置される。
【００３７】
発見された場合、次の処理はステップ９であり、モザイクがフレーム内予測モードで完全に符号化されているか、又は、前のモザイク画像のサブイメージｋが実際に復号化されているかがチェックされる。このチェックは、サブイメージに割当てられた指標“ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ）”のポジショニングに基づいて行うことができる。
【００３８】
該チェックで肯定の場合、サブイメージの復号化が可能であり、次いで、ステップ１０では、このサブイメージｋに関連するデータが復号化される。
【００３９】
該チェックで否定の場合、アルゴリズムは、サブイメージｋのマクロブロックの符号化がフレーム内予測モードで実行されているかをチェックする。しかし、全体の画像の符号化モードはフレーム間予測モードである。
【００４０】
このように、ステップ１２では、サブイメージの全てのマクロブロックが調査されているかがチェックされる。
【００４１】
全てのマクロブロックがチェックされていない場合、ステップ１４では、次のマクロブロックについて、フレーム内予測モードで符号化されているかがチェックされる。
【００４２】
フレーム内予測モードで符号化されていない場合、サブイメージｋは、フレーム内予測モードで復号化されておらず、ステップ１５では、対応するｉｍａｇｅｔｔｅが復号化されていないことを合図するように指標を位置付ける。次の処理はステップ４であり、次のサブイメージを処理する。
【００４３】
フレーム内予測モードで符号化されている場合、次のステップ１３では、このマクロブロックに関連するデータの復号化が実行され、次いで、ステップ１２では、このマクロブロックがこのサブイメージｋの符号化すべき最後のマクロブロックであるかがチェックされる。
【００４４】
最後のマクロブロックである場合、すなわち、サブイメージｋのマクロブロックに関連する全てのデータを復号化することができた場合、ステップ１１が実現される。
【００４５】
サブイメージの全てのマクロブロックに関連するデータが復号化されているとき、これがステップ１３及びステップ１２の完了に関するものであろうと、或いはステップ１０の完了に関するものであろうと、サブイメージは、指標“ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ）”が更新される次のステップ１１の間に再構成される。これは、データの符号化がフレーム内予測モードである場合に、瞬間ｔでこのサブイメージに関連するストリームのデータに基づいているか、或いは、データの符号化がフレーム間予測モードである場合に、前のモザイクの対応する復号化されたサブイメージの記憶されたデータに基づいた、いずれかの再構成を含んでいる。従来のやり方で、逆コサイン変換、動き補償、フレーム間予測モードにおける誤差の追加等の演算を実行することにより、復号化されたデータに基づいてｉｍａｇｅｔｔｅが構成される。
【００４６】
新たな反復処理の間に、ステップ４で新たなサブイメージに進む。
【００４７】
したがって、このアルゴリズムにより、フレーム内予測モードで符号化されているか、片方向フレーム間予測モードで符号化されているかの条件に基づいて、そのインデックス番号が復号化すべきｉｍａｇｅｔｔｅのリストに示されるｉｍａｇｅｔｔｅのみを構成することができ、対応する前のｉｍａｇｅｔｔｅは、それ自身構築されている。この片方向フレーム間予測モードにおいて、前のモザイクの対応するｉｍａｇｅｔｔｅが再構成されていない場合、該ｉｍａｇｅｔｔｅを構成できるために、フレーム内予測モードで符号化される後続するｉｍａｇｅｔｔｅを待つことが必要である。したがって、符号化の間、フレーム内予測モードでｉｍａｇｅｔｔｅを規則的に符号化することが極めて重要である。ステップ１２，１４，１３により、全体の画像が片方向フレーム間予測モードで符号化されるとき、フレーム内予測モードでのサブイメージの符号化をチェックすることが可能である。この復号化方法から外れて、必要なｉｍａｇｅｔｔｅの関数として部分的に満たされているモザイクを取得する。
【００４８】
あるサブイメージを構築することができないとき（ステップ１５）、１つの解決法は、前のモザイクの対応するサブイメージを利用することにある。
【００４９】
本発明の改良点は、異なるサイズのｉｍａｇｅｔｔｅを伝送することにある。次いで、本方法は、エンコーダのレベルで、モザイク画像に加えて、モザイクのサポートの形状を符号化することにある。
【００５０】
図４は、参照符号１６が付されるモザイクの形状を表しており、全てのｉｍａｇｅｔｔｅが同じ形状を有していない。このケースでは、図において参照符号１７が付されるモザイクのサポートの符号化が実行される。この符号化は、ビデオセッションのまさに開始でのみ必要である。しかし、様々なｉｍａｇｅｔｔｅの配置に関する時間を通した変更が可能である。次いで、このサポートを更新することが必要である。新たなサポートは、サポートの変化を生じるｉｍａｇｅｔｔｅの配置のそれぞれの変化で、フレーム内予測モード又はフレーム間予測モードで伝送される。
【００５１】
処理の実現は、サブイメージのマクロブロックの符号化を利用する。これは、典型的な実施の形態であり、マクロブロックは、本発明の分野から逸脱することなしに、イメージエレメントで置き換えることができる。
【００５２】
説明された方法は、任意の形状のビデオオブジェクトに拡張することができ、そのとき、サポートは、それぞれの瞬間で符号化されなければならない。１つの応用は、ｉｍａｇｅｔｔｅが各種漫画のようなキャラクターに対応しているビデオゲームである。
【００５３】
なお、符号化のレベルで、それぞれのサブイメージの開始で再同期マーカを追加することは、僅かに２進ストリームの妨げとなる。この増大は制限され、伝送エラーのマスキングを容易にする再同期ツールを更に作り出す。
【００５４】
同期マーカに基づいたサブイメージの選択は、マーカ及びサブイメージにインデックス番号を割当てることにより行うことができる。このとき、あるマーカのインデックス番号は、特定のサブイメージに対応する。また、同期マーカに基づいたサブイメージの選択は、サブイメージの連続的な符号化を考慮することで行うことができる。このとき、あるモザイク画像に関連するデータのｎ番目の同期マーカは、該モザイクのｎ番目に符号化されたサブイメージに対応する。
【００５５】
応用は、特に、ビデオモザイクシステムを利用した対話型サービスに関する。この応用は、たとえば、ユーザが番組のモザイクの様々なページを調べる可能性を有する電子番組ガイドの参照を伴う。
【図面の簡単な説明】
【００５６】
【図１】符号化されるモザイクのフォーマットを例示する図である。
【図２】エンコーダにより生成されるバイナリ系列を例示する図である。
【図３】デコーダの処理アルゴリズムを例示する図である。
【図４】可変長サイズのモザイクのフォーマットを例示する図である。
［技術分野］
本発明は、画像のモザイクを符号化及び復号化するための方法及び装置に関する。
【０００２】
当該技術分野は、ＭＰＥＧタイプ等のビデオ圧縮の分野であり、このケースでは、当該技術により、再同期手段を実現することができる。たとえば、Ｈ２６３又はＭＰＥＧ４規格、或いは圧縮の間に生成されるバイナリ系列における様々な位置に再同期マーカを配置する可能性を提供する任意の圧縮方法を伴う。
［背景技術］
現代のＭＰＥＧ−２デコーダを実現するデジタルデコーダでは、モザイクは、幾つかのページ（スクリーン）から一般に構成されている。それぞれのページは、チャネル（ＭＰＥＧ−２エレメンタリストリーム）に対応している。任意の瞬間で、完全な画像が復号化されて表示される。モザイクの一部のみが表示向けに有用な場合であっても、モザイクは完全に復号化されなければならず、したがって、かなりの処理時間が発生する。
［発明の開示］
本発明の目的は、上述した問題点を回避することにある。
【０００３】
本発明は、符号化されたデータのストリームを与えるモザイク画像（ｍｏｓａｉｃ ｏｆ ｉｍａｇｅｓ）を符号化する方法である。このモザイクは、サブイメージ（ｓｕｂｉｍａｇｅ）から構成されている。このサブイメージは、イメージエレメント（ｉｍａｇｅ ｅｌｅｍｅｎｔ）から構成されている。該ストリームにおける再同期マーカは、受信レベルでデータの再同期を可能にする。本方法は、以下の点を特徴としている。サブイメージは、モザイクを与えるように符号化された画像において１つずつ下に配置される。モザイクは、該ストリームのデータを供給するように、ＴＶタイプの走査に従って１エレメント毎に符号化され、それぞれのサブイメージの最初のエレメントが識別される。再同期マーカは、あるサブイメージに関連するデータを識別するように、該サブイメージのそれぞれ最初のエレメントの前で、該ストリームに配置される。
【０００４】
本方法の特定の実施の形態によれば、イメージエレメントは、マクロブロックであり、本符号化方法は、ＭＰＥＧ２規格を利用し、再同期マーカは、（該規格における用語に従えば）スライスのヘッダである。
【０００５】
本方法の特定の実施の形態によれば、イメージエレメントは、マクロブロックであり、本符号化方法は、ＭＰＥＧ４規格を利用し、再同期マーカは、グループ・オブ・マクロブロック（ｇｒｏｕｐｓ ｏｆ ｍａｃｒｏｂｌｏｃｋｓ）のヘッダである。
【０００６】
本方法の特定の実施の形態によれば、サブイメージの符号化が動き予測に関するフレーム間予測モードにあるとき、この動き予測は、画像におけるサブイメージの位置に対応する動きベクトルをサーチするためのウィンドウを利用する。
【０００７】
本方法の特定の実施の形態によれば、特定の数の前のモザイク画像について、サブイメージがフレーム内予測モードで符号化されていない場合、該サブイメージは、フレーム内予測モードで強制的に符号化される。
【０００８】
本方法の特定の実施の形態によれば、サブイメージが異なるサイズを有し、これら画像のサーフェイス（ｓｕｒｆａｃｅ）は、モザイクのサポート（ｍｏｓａｉｃ ｓｕｐｐｏｒｔ）を構成している。このモザイクサポートも符号化され、該サポートの符号化データは、ビデオセッションの開始に該ストリームで伝送される。このサポートが時間を通して変化する場合、該サポートの符号化データは、それぞれの変化に該ストリームで伝送される。
【０００９】
また、本発明は、再同期マーカと、サブイメージからなるモザイク画像を符号化するためのデータとを有するデータのストリームに基づいて、モザイク画像を復号化する方法に関する。本方法は、以下の点を特徴としている。再同期マーカに基づくこれらのデータのフィルタリングと、復号化処理とが実行され、モザイクに関連するデータの中から、選択されたサブイメージに関連するデータのみが該ストリームから抽出されて復号化される。
【００１０】
本方法の特定の実施の形態によれば、復号化されたサブイメージは記憶され、サブイメージがフレーム間予測で符号化されている場合、前のモザイクの対応する記憶されているサブイメージは、復号化のために利用される。
【００１１】
本方法の特定の実施の形態によれば、サブイメージが復号化されない場合、前のモザイクの対応するサブイメージが考慮される。
【００１２】
また、本発明は、再同期マーカと、サブイメージからなるモザイク画像を符号化するためのデータとを有するデータのストリームに基づいて、モザイク画像を復号化するデコーダに関する。本デコーダは、同期マーカに基づいてフィルタリングする回路と、モザイクに関連するデータの中から、選択されたサブイメージに関連するデータのみを該ストリームから抽出して復号化する復号化回路とを備えることを特徴としている。
【００１３】
また、本発明は、最終画像を表示するために、サブイメージと再同期マーカとからなるモザイク画像を符号化するためのデータを伝送するビデオデータストリームの読取り装置に関する。本読取り装置は、該ストリームを復号化するデコーダと、該デコーダを管理するための処理回路とを備えており、以下の点を特徴としている。処理回路は、最終画像を表示するために有用な選択されたサブイメージに関する情報をデコーダに送出する。デコーダは、同期マーカに基づいてフィルタリングする回路と、モザイクに関連するデータの中から、該選択されたサブイメージに関連するデータのみを該ストリームから抽出して復号化する復号化回路とを備えている。
【００１４】
本発明の概念は、該ストリームにおいて、モザイクイメージを構成する画像の様々な部分すなわちサブイメージに属するデータを定義するように、伝送エラー又は伝送ロスに応じて受信されたデータストリームとの再同期を可能にするために、規格において一般に設けられている再同期マーカを利用することである。再同期マーカの技術が利用され、モザイクのそれぞれのサブイメージの開始がタグ付けされ、任意の瞬間で、表示すべきモザイクの一部のみが復号化される。
【００１５】
本復号化方法は、計算速度の観点で改善され、モザイク画像のビデオ復号化が加速される。狙いは、読取り装置の中央処理装置（ＣＰＵ）のリソースを最大限に保持することであり、該読取り装置は、モザイクのビデオ復号化のタスク以外のタスクを実行することができる。本明細書で使用される用語「読取り装置」は、オーディオデコーダ、グラフィックス処理回路、表示回路のような他のハードウェアを含めて、ビデオデコーダ及び該デコーダを制御するシステムレイヤの全体をも備えているシステム全体を示している。
【００１６】
ＭＰＥＧ４対応の読取り装置のケースでは、グラフィックスアプリケーションの管理及びシステムレイヤ専用の占有領域は絶対必要である。ＭＰＥＧ４データを復号化するための手段がプラットフォームに益々装備され、電子番組ガイドすなわちＥＰＧタイプの対話型アプリケーション向けに益々論理的になると、対話性のレベルでの情報の豊かさを益々増加することができる。したがって、ビデオ復号化をできるだけ高速にすること、及びこのタイプの応用におけるデータ処理をシンプルにすることは有益である。
【００１７】
この選択的な復号化は、デコーダレベルでの独占的な方法に基づいて、及びビデオデコーダを制御する「システム」レイヤから生じる情報に基づいて実現される。この改善された点を有しない「標準的な」デコーダは、それにもかかわらず、提案される方法の効果による利益を受けないが、実現された技術となお互換性を有する。
【００１８】
本発明の他の機能及び効果は、添付図面を参照しつつ、限定するものではない例を介して、以下に与えられる発明の実施の形態を通して明らかになるであろう。
［発明の実施の形態］
提案される方法は、ビデオ符号化／復号化の回路の３つのハードウェアである、ビデオエンコーダ、ビデオデコーダを含む読取り装置のシステムレイヤ、ビデオデコーダにおいて介入する。本方法は、符号化の間に、たとえばビデオＭＰＥＧ４規格（ＩＳＯ／ＩＥＣ ＪＴＣ １／ＳＣ ２９／ＷＧ １１ Ｎ ２５０２ ａｎｎｅｘ Ｅ， パラグラフＥ．１．１， 頁３０７−３０８を参照されたい）に記載されるビデオパケットの技術を利用する。本方法は、それぞれの画像において、それぞれのビデオパケットの境界を定める再同期マーカを配置することにある。これらのパケットは、「再同期」と題された上記文献のパラグラフＥ．１．１に記載されているように、１つずつ独立して符号化される。
【００１９】
図１では、参照符号１，２，３が付され、瞬間ｔ，ｔ＋１，ｔ＋２で符号化される３つの「モザイク」画像の連続が表わされている。この例では、モザイク画像は、サブイメージすなわち同じサイズの“ｉｍａｇｅｔｔｅｓ”から構成され、したがって、対応するビデオは、同じサイズのサブイメージの重ね合わせから構成されている。このように、モザイク画像１は、Ｎ個のサブイメージ、すなわち参照符号１１〜１Ｎが付される“ｉｍａｇｅｔｔｅｓ”から構成されている。
【００２０】
図２には、これらの画像のバイナリ符号のストリームが示されている。このバイナリ符号のストリームは、全体のモザイクに対応する、（ＭＰＥＧ規格における用語を使用して）エレメンタリストリームの２進系列である。このモザイク画像の関連するビデオデータは、イメージヘッダにより先行される。このビデオデータは、それぞれのサブイメージに関連する符号化データから構成されている。本発明によれば、これらのデータは、再同期マーカにより、それぞれのサブイメージについて分離されている。符号化の間、エンコーダは、ビデオパケットの境界を定める再同期マーカを２進系列に配置する。これらのビデオパケットは、１つずつ個別に符号化されており、したがって、ビデオパケットは、２つのマーカの間のデータに対応している。次いで、それぞれのサブイメージは、ビデオパケットとして処理され、したがって、再同期マーカは、それぞれのサブイメージの開始に設けられている。すなわち、再同期マーカは、データストリームにおいて、サブイメージに対応するビデオデータに先行する。マクロブロックの符号化のケースでは、このマーカは、データストリームにおいて、それぞれのサブイメージの最初のマクロブロックの前に配置される。
【００２１】
ビデオエンコーダは、全てのビデオサブイメージを符号化する。モザイクの符号化のために、次々とサブイメージを配置することで、それらの符号化は、ビデオ符号化レイヤにより、従来のテレビジョンのタイプの走査モードを考慮したとき、連続的なやり方で次々と作用される。したがって、あるサブイメージから次のサブイメージに同期マーカをインクリメントすることで、復号化のとき、所望のサブイメージをタグ付けして、関連するマーカのインデックス番号に基づいて直接的にアクセスすることができる。所望のサブイメージを示すシステムレイヤから生じる情報に基づいて、すなわち、表示すべき最終画像の生成にとって必要な情報に基づいて、デコーダは、この最終画像に有用なこれらサブイメージだけの符号化を開始することができる。
【００２２】
サブイメージの符号化は、フレーム間予測（ｉｎｔｅｒ）、片方向フレーム間予測（ｐｒｅｄｉｃｔｉｖｅ）又は両方向間フレーム間予測（ｂｉｄｉｒｅｃｔｉｏｎａｌ）タイプの符号化のための動き予測を利用することができる。サブイメージが互いに独立に復号化可能であるために、フレーム間予測タイプのサブイメージを符号化するとき、動き予測ゾーンにとって、関心のあるサブイメージの位置及びサイズに対応する予測ゾーンに制限されることが必要である。したがって、動き予測器の動きベクトルは、関連するブロックに対応するサブイメージ以外のサブイメージを示すことは許されない。この制限は、垂直軸に関してのみ適用することができ、規格によって、動きベクトルは水平軸について画像以外を示すことが許される。
【００２３】
デコーダがランダムなやり方でモザイクのサブイメージにアクセスすることを可能にするために、たとえば、ユーザの操作に続いて、サブイメージはフレーム内予測（ｉｎｔｒａ）モードで規則的に符号化されなければならない。
【００２４】
幾つかの解決策が可能である。
【００２５】
エンコーダは、比較的に高い周波数、従来通りでは０．５秒毎で、フレーム内予測モードで完全なモザイクを符号化する。
【００２６】
符号化のシンタックスがそのように許可する場合、フレーム内予測モードでの符号化は画像全体に実行されず、該画像の一部についてのみ実行される。したがって、エンコーダは、循環するやり方で、このフレーム内予測モードを１サブイメージ毎に使用する。所与の瞬間で、最初のサブイメージのみが強制的にフレーム内予測モードとなる。他のサブイメージは、片方向フレーム間予測モード、したがって時間の予測に関して符号化される。
【００２７】
次の瞬間で、後続するサブイメージは、モザイクの最後のサブイメージに到達するまで、フレーム内予測モードで符号化されたサブイメージ等である。次いで、本方法は、最初のサブイメージについて再び始動される。これにより、ビットレートの観点で、フレーム内予測符号化されたサブイメージの時刻費用の低下が可能となり、完全な画像の符号化がフレーム内予測モードで実行された場合に生じる場合があるビットレートのスパイクを回避することができる。
【００２８】
この第二の解決策と非常に似た実現は、たとえば、リフレッシュ期間Ｒｆに等しい値にそれぞれのフレーム内予測符号化で再初期化されるイントラ・リフレッシュ・カウンタをサブイメージのそれぞれに与えることにある。このカウンタは、問題とするサブイメージのフレーム間予測符号化のそれぞれでデクリメントされる。モザイクシーケンスの符号化の開始で、最初のモザイク画像がフレーム内予測モードで一旦符号化されると、該サブイメージに関連するカウンタは、０とＲｆとの間にランダムに初期化される。該サブイメージのフレーム内予測符号化は、カウンタがＲｆに戻るたびにトリガされる。さらに、サブイメージに関連するシーン変化の間、このサブイメージに関連するリフレッシュカウンタは、このサブイメージのフレーム内予測モードでの符号化が可能となるように、Ｒｆに再び初期化される。
【００２９】
読取り装置のシステムレイヤは、独占的な解法を実現する。これにより、適切なインタフェースから、モザイクのどのサブイメージを復号化すべきかをビデオデコーダに示すことが可能となる。システムレイヤは、たとえば、復号化すべきサブイメージのインデックス番号の順番付きリストを送出する。これらのサブイメージは、復号化後に表示されなければならない正確なサブイメージである。「標準的な」デコーダが利用されるとき、この情報は利用されず、そのとき、モザイク全体が復号化される。
【００３０】
ビデオデコーダは、復号化すべきサブイメージのインデックス番号のリストと共に、符号化されたモザイクに対応する２進ストリームを受信する。ビデオデコーダは、以下の情報を管理する。現在の画像の符号化のモード（フレーム内予測又は片方向フレーム間予測）、ｉｍａｇｅｔｔｅが前の瞬間で復号化されているかを合図するそれぞれのｉｍａｇｅｔｔｅに割当てられた指標（ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ））。
【００３１】
この指標“ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ）”は、ｋが１からＮまで変化し、サブイメージ（ｋ）に関連する指標であり、Ｎはモザイクを構成するサブイメージの数であり、このサブイメージｋが前の瞬間で完全に復号化され、したがって再構成されたかを確認することができる。かかる場合は、このサブイメージｋがフレーム内予測モードで符号化されている場合、又は片方向フレーム間予測モード（フレーム間予測モード）で符号化されている場合であり、したがって、動きベクトルが属する対応する前のサブイメージが復号化された場合であって、この現在のサブイメージｋの復号化が可能となる。
【００３２】
図３には、読取り装置の処理アルゴリズムが示されている。この処理アルゴリズムにより、システムレイヤで計算される、復号化すべきサブイメージに関するリストが利用される。
【００３３】
第一のステップ４では、リストの全てのサブイメージが処理されているかがチェックされる。
【００３４】
処理されている場合、すなわち、リストの終了にある場合、次の処理はステップ５である。最終画像の表示のために必要な全てのサブイメージが処理されており、復号化処理が終了されており、復号化されたモザイクは、システムレイヤに戻される。このシステムレイヤは、最終画像の表示を実行するように、該復号化されたモザイクを処理する。
【００３５】
処理されていない場合、次のステップ６では、処理すべきインデックス番号ｋである次のサブイメージを回復する。これは、反復処理の開始にある場合には、最初のサブイメージとなる。次のステップ７では、データストリームにおいて再同期マーカｋがサーチされる。ステップ８では、再同期マーカが発見されたかがチェックされる。
【００３６】
発見されなかった場合、たとえば、データ伝送においてエラーがあった場合、ステップ４に戻り、次のサブイメージが処理される。現在のサブイメージｋに関連する指標は、該サブイメージを復号化できないことを合図するやり方で位置される。
【００３７】
発見された場合、次の処理はステップ９であり、モザイクがフレーム内予測モードで完全に符号化されているか、又は、前のモザイク画像のサブイメージｋが実際に復号化されているかがチェックされる。このチェックは、サブイメージに割当てられた指標“ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ）”のポジショニングに基づいて行うことができる。
【００３８】
該チェックで肯定の場合、サブイメージの復号化が可能であり、次いで、ステップ１０では、このサブイメージｋに関連するデータが復号化される。
【００３９】
該チェックで否定の場合、アルゴリズムは、サブイメージｋのマクロブロックの符号化がフレーム内予測モードで実行されているかをチェックする。しかし、全体の画像の符号化モードはフレーム間予測モードである。
【００４０】
このように、ステップ１２では、サブイメージの全てのマクロブロックが調査されているかがチェックされる。
【００４１】
全てのマクロブロックがチェックされていない場合、ステップ１４では、次のマクロブロックについて、フレーム内予測モードで符号化されているかがチェックされる。
【００４２】
フレーム内予測モードで符号化されていない場合、サブイメージｋは、フレーム内予測モードで復号化されておらず、ステップ１５では、対応するｉｍａｇｅｔｔｅが復号化されていないことを合図するように指標を位置付ける。次の処理はステップ４であり、次のサブイメージを処理する。
【００４３】
フレーム内予測モードで符号化されている場合、次のステップ１３では、このマクロブロックに関連するデータの復号化が実行され、次いで、ステップ１２では、このマクロブロックがこのサブイメージｋの符号化すべき最後のマクロブロックであるかがチェックされる。
【００４４】
最後のマクロブロックである場合、すなわち、サブイメージｋのマクロブロックに関連する全てのデータを復号化することができた場合、ステップ１１が実現される。
【００４５】
サブイメージの全てのマクロブロックに関連するデータが復号化されているとき、これがステップ１３及びステップ１２の完了に関するものであろうと、或いはステップ１０の完了に関するものであろうと、サブイメージは、指標“ｓｕｂｉｍａｇｅ＿ｄｅｃｏｄｅｄ（ｋ）”が更新される次のステップ１１の間に再構成される。これは、データの符号化がフレーム内予測モードである場合に、瞬間ｔでこのサブイメージに関連するストリームのデータに基づいているか、或いは、データの符号化がフレーム間予測モードである場合に、前のモザイクの対応する復号化されたサブイメージの記憶されたデータに基づいた、いずれかの再構成を含んでいる。従来のやり方で、逆コサイン変換、動き補償、フレーム間予測モードにおける誤差の追加等の演算を実行することにより、復号化されたデータに基づいてｉｍａｇｅｔｔｅが構成される。
【００４６】
新たな反復処理の間に、ステップ４で新たなサブイメージに進む。
【００４７】
したがって、このアルゴリズムにより、フレーム内予測モードで符号化されているか、片方向フレーム間予測モードで符号化されているかの条件に基づいて、そのインデックス番号が復号化すべきｉｍａｇｅｔｔｅのリストに示されるｉｍａｇｅｔｔｅのみを構成することができ、対応する前のｉｍａｇｅｔｔｅは、それ自身構築されている。この片方向フレーム間予測モードにおいて、前のモザイクの対応するｉｍａｇｅｔｔｅが再構成されていない場合、該ｉｍａｇｅｔｔｅを構成できるために、フレーム内予測モードで符号化される後続するｉｍａｇｅｔｔｅを待つことが必要である。したがって、符号化の間、フレーム内予測モードでｉｍａｇｅｔｔｅを規則的に符号化することが極めて重要である。ステップ１２，１４，１３により、全体の画像が片方向フレーム間予測モードで符号化されるとき、フレーム内予測モードでのサブイメージの符号化をチェックすることが可能である。この復号化方法から外れて、必要なｉｍａｇｅｔｔｅの関数として部分的に満たされているモザイクを取得する。
【００４８】
あるサブイメージを構築することができないとき（ステップ１５）、１つの解決法は、前のモザイクの対応するサブイメージを利用することにある。
【００４９】
本発明の改良点は、異なるサイズのｉｍａｇｅｔｔｅを伝送することにある。次いで、本方法は、エンコーダのレベルで、モザイク画像に加えて、モザイクのサポートの形状を符号化することにある。
【００５０】
図４は、参照符号１６が付されるモザイクの形状を表しており、全てのｉｍａｇｅｔｔｅが同じ形状を有していない。このケースでは、図において参照符号１７が付されるモザイクのサポートの符号化が実行される。この符号化は、ビデオセッションのまさに開始でのみ必要である。しかし、様々なｉｍａｇｅｔｔｅの配置に関する時間を通した変更が可能である。次いで、このサポートを更新することが必要である。新たなサポートは、サポートの変化を生じるｉｍａｇｅｔｔｅの配置のそれぞれの変化で、フレーム内予測モード又はフレーム間予測モードで伝送される。
【００５１】
処理の実現は、サブイメージのマクロブロックの符号化を利用する。これは、典型的な実施の形態であり、マクロブロックは、本発明の分野から逸脱することなしに、イメージエレメントで置き換えることができる。
【００５２】
説明された方法は、任意の形状のビデオオブジェクトに拡張することができ、そのとき、サポートは、それぞれの瞬間で符号化されなければならない。１つの応用は、ｉｍａｇｅｔｔｅが各種漫画のようなキャラクターに対応しているビデオゲームである。
【００５３】
なお、符号化のレベルで、それぞれのサブイメージの開始で再同期マーカを追加することは、僅かに２進ストリームの妨げとなる。この増大は制限され、伝送エラーのマスキングを容易にする再同期ツールを更に作り出す。
【００５４】
同期マーカに基づいたサブイメージの選択は、マーカ及びサブイメージにインデックス番号を割当てることにより行うことができる。このとき、あるマーカのインデックス番号は、特定のサブイメージに対応する。また、同期マーカに基づいたサブイメージの選択は、サブイメージの連続的な符号化を考慮することで行うことができる。このとき、あるモザイク画像に関連するデータのｎ番目の同期マーカは、該モザイクのｎ番目に符号化されたサブイメージに対応する。
【００５５】
応用は、特に、ビデオモザイクシステムを利用した対話型サービスに関する。この応用は、たとえば、ユーザが番組のモザイクの様々なページを調べる可能性を有する電子番組ガイドの参照を伴う。
【図面の簡単な説明】
【００５６】
【図１】符号化されるモザイクのフォーマットを例示する図である。
【図２】エンコーダにより生成されるバイナリ系列を例示する図である。
【図３】デコーダの処理アルゴリズムを例示する図である。
【図４】可変長サイズのモザイクのフォーマットを例示する図である。
Claims (14)
- 受信に応じてストリームを同期させる再同期のために、マーカの配置を許容するシンタックスに従って符号化されたデータの前記ストリームを与える一連の画像のモザイク画像を符号化する方法であって、前記モザイクは、任意の数の走査線を構成するイメージエレメントからなるサブイメージから構成され、
前記サブイメージ（１１．．．１Ｎ）は、モザイクを与えるように符号化された画像において１つずつ下に配置され、
前記モザイクは、前記ストリームのデータを提供するようにＴＶタイプの走査に従い１マクロブロックずつ符号化され、それぞれのサブイメージの最初のマクロブロックが識別され、
再同期マーカは、前記サブイメージに関連するデータが識別されるように、サブイメージのそれぞれの最初のエレメントの前で前記ストリームに配置される、
ことを特徴とする符号化方法。 - 前記同期マーカは、あるサブイメージから次のサブイメージにインクリメントされる、
ことを特徴とする請求項１記載の符号化方法。 - 前記イメージエレメントはマクロブロックであり、前記符号化はＭＰＥＧ２規格を利用し、前記再同期マーカは、スライスのヘッダである、
ことを特徴とする請求項１記載の符号化方法。 - 前記イメージエレメントはマクロブロックであり、前記符号化はＭＰＥＧ４規格を利用し、前記再同期マーカは、グループ・オブ・マクロブロックのヘッダである、
ことを特徴とする請求項１記載の符号化方法。 - 前記サブイメージの符号化が動き予測に関するフレーム間予測モードにあるとき、前記動き予測は、画像におけるサブイメージの位置に対応する動きベクトルをサーチするためのウィンドウを利用する、
ことを特徴とする請求項１記載の符号化方法。 - 特定数の前のモザイク画像についてサブイメージがフレーム内予測モードで符号化されていない場合、前記サブイメージはフレーム内予測モードで強制的に符号化される、
ことを特徴とする請求項１記載の符号化方法。 - 前記サブイメージは異なるサイズ（１６）を有し、これらサブイメージのサーフェスはモザイクのサポート（１７）を構成し、
前記モザイクサポートも符号化され、前記モザイクサポートの符号化データは、ビデオセッションの開始に前記ストリームで伝送される、
ことを特徴とする請求項１記載の符号化方法。 - 該モザイクサポートは時間を通して変化し、前記モザイクサポートの符号化データは、それぞれの変化に前記ストリームで伝送される、
ことを特徴とする請求項７記載の符号化方法。 - 再同期マーカと、サブイメージからなるモザイク画像を符号化するためのデータとを有するデータのストリームに基づいてモザイク画像を復号化する方法であって、
同期マーカに基づくこれらのデータのフィルタリング（６，７，８）と復号化処理が実行され、前記モザイクに関連するデータの中から、選択されたサブイメージに関連するデータのみが前記ストリームから抽出されて復号化される、
ことを特徴とする復号化方法。 - 前記フィルタリングは前記同期マーカの数に依存する、
請求項９記載の復号化方法。 - 前記復号化されたサブイメージは記憶され、サブイメージがフレーム間予測モードで符号化されている場合、前のモザイクの対応する記憶されているサブイメージが復号化のために利用される、
請求項９記載の復号化方法。 - サブイメージが復号化されない場合、前のモザイクの対応するサブイメージが考慮される、
請求項９記載の復号化方法。 - 再同期マーカと、サブイメージからなるモザイク画像を符号化するためのデータとを有するデータのストリームに基づいて、モザイク画像を復号化するデコーダであって、
同期マーカに基づいてフィルタリングする回路（６，７，８）と、前記モザイクに関連するデータの中から、選択されたサブイメージに関連するデータのみを前記ストリームから抽出して復号化する復号化回路（１０）とを備える、
ことを特徴とするデコーダ。 - 最終画像を表示するために、サブイメージ及び再同期マーカからなるモザイク画像を符号化するデータを伝送するビデオデータストリームの読取り装置であって、
前記ストリームを復号化するデコーダと、前記デコーダを管理する処理回路とを備え、
前記処理回路は、前記最終画像を表示するために有用な選択されたサブイメージに関する情報を前記デコーダに送出し、
前記デコーダは、同期マーカに基づいてフィルタリングする回路（６，７，８）と、前記モザイクに関連するデータの中から、前記選択されたサブイメージに関連するデータのみを前記ストリームから抽出して復号化する復号化回路（１０）を備える、
ことを特徴とする読取り装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR0110087A FR2828055B1 (fr) | 2001-07-27 | 2001-07-27 | Procede et dispositif de codage d'une mosaique d'images |
| PCT/FR2002/002639 WO2003013145A1 (fr) | 2001-07-27 | 2002-07-24 | Procede et dispositif de codage d'une mosaïque d'images |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004537930A true JP2004537930A (ja) | 2004-12-16 |
| JP4547149B2 JP4547149B2 (ja) | 2010-09-22 |
Family
ID=8866007
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003518187A Expired - Fee Related JP4547149B2 (ja) | 2001-07-27 | 2002-07-24 | モザイクを符号化する方法及び装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US8160159B2 (ja) |
| EP (1) | EP1413145A1 (ja) |
| JP (1) | JP4547149B2 (ja) |
| FR (1) | FR2828055B1 (ja) |
| WO (1) | WO2003013145A1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014057228A (ja) * | 2012-09-13 | 2014-03-27 | Hitachi Ltd | 画像伝送システムおよび画像伝送方法 |
| JP2014516432A (ja) * | 2011-03-31 | 2014-07-10 | トムソン ライセンシング | 立体的なグラフィックオブジェクトを定義するためのシーングラフ |
Families Citing this family (33)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8437405B1 (en) * | 2004-12-08 | 2013-05-07 | Nvidia Corporation | System and method for intra refresh implementation |
| TW200704183A (en) * | 2005-01-27 | 2007-01-16 | Matrix Tv | Dynamic mosaic extended electronic programming guide for television program selection and display |
| US7692682B2 (en) * | 2005-04-28 | 2010-04-06 | Apple Inc. | Video encoding in a video conference |
| EP1878229A4 (en) * | 2005-04-28 | 2011-07-27 | Apple Inc | VIDEO PROCESSING IN MULTIPLE PARTICIPANT VIDEO CONFERENCE |
| US8875196B2 (en) | 2005-08-13 | 2014-10-28 | Webtuner Corp. | System for network and local content access |
| US20070150138A1 (en) | 2005-12-08 | 2007-06-28 | James Plante | Memory management in event recording systems |
| US10878646B2 (en) | 2005-12-08 | 2020-12-29 | Smartdrive Systems, Inc. | Vehicle event recorder systems |
| US9201842B2 (en) | 2006-03-16 | 2015-12-01 | Smartdrive Systems, Inc. | Vehicle event recorder systems and networks having integrated cellular wireless communications systems |
| US8996240B2 (en) | 2006-03-16 | 2015-03-31 | Smartdrive Systems, Inc. | Vehicle event recorders with integrated web server |
| US20080049830A1 (en) * | 2006-08-25 | 2008-02-28 | Drivecam, Inc. | Multiple Image Source Processing Apparatus and Method |
| US8649933B2 (en) | 2006-11-07 | 2014-02-11 | Smartdrive Systems Inc. | Power management systems for automotive video event recorders |
| US8989959B2 (en) | 2006-11-07 | 2015-03-24 | Smartdrive Systems, Inc. | Vehicle operator performance history recording, scoring and reporting systems |
| US8868288B2 (en) | 2006-11-09 | 2014-10-21 | Smartdrive Systems, Inc. | Vehicle exception event management systems |
| US8239092B2 (en) | 2007-05-08 | 2012-08-07 | Smartdrive Systems Inc. | Distributed vehicle event recorder systems having a portable memory data transfer system |
| JP2008288629A (ja) * | 2007-05-15 | 2008-11-27 | Sony Corp | 画像信号処理装置、撮像素子、および画像信号処理方法、並びにコンピュータ・プログラム |
| US8761253B2 (en) * | 2008-05-28 | 2014-06-24 | Nvidia Corporation | Intra prediction mode search scheme |
| US8831099B2 (en) * | 2008-12-17 | 2014-09-09 | Nvidia Corporation | Selecting a macroblock encoding mode by using raw data to compute intra cost |
| US9432674B2 (en) * | 2009-02-02 | 2016-08-30 | Nvidia Corporation | Dual stage intra-prediction video encoding system and method |
| US8698959B2 (en) * | 2009-06-03 | 2014-04-15 | Thomson Licensing | Method and apparatus for constructing composite video images |
| EP2710752A4 (en) | 2011-05-17 | 2014-10-22 | Webtuner Corp | SYSTEM AND METHOD FOR A HIGH PRECISION SCALABLE SENSOR AND ID-BASED PUBLIC MEASUREMENT SYSTEM |
| CN103649906A (zh) | 2011-05-24 | 2014-03-19 | 韦伯图纳公司 | 提高观众测量系统中的分析报告产生的效率和速度的系统和方法 |
| US9021543B2 (en) | 2011-05-26 | 2015-04-28 | Webtuner Corporation | Highly scalable audience measurement system with client event pre-processing |
| US9728228B2 (en) | 2012-08-10 | 2017-08-08 | Smartdrive Systems, Inc. | Vehicle event playback apparatus and methods |
| US9501878B2 (en) | 2013-10-16 | 2016-11-22 | Smartdrive Systems, Inc. | Vehicle event playback apparatus and methods |
| US9610955B2 (en) | 2013-11-11 | 2017-04-04 | Smartdrive Systems, Inc. | Vehicle fuel consumption monitor and feedback systems |
| US9383851B2 (en) | 2014-01-06 | 2016-07-05 | Nvidia Corporation | Method and apparatus for buffering sensor input in a low power system state |
| US9293119B2 (en) | 2014-01-06 | 2016-03-22 | Nvidia Corporation | Method and apparatus for optimizing display updates on an interactive display device |
| US8892310B1 (en) | 2014-02-21 | 2014-11-18 | Smartdrive Systems, Inc. | System and method to detect execution of driving maneuvers |
| US9247283B1 (en) * | 2014-10-27 | 2016-01-26 | Cisco Technology, Inc. | Mosaic presentation screen production |
| US9663127B2 (en) | 2014-10-28 | 2017-05-30 | Smartdrive Systems, Inc. | Rail vehicle event detection and recording system |
| US11069257B2 (en) | 2014-11-13 | 2021-07-20 | Smartdrive Systems, Inc. | System and method for detecting a vehicle event and generating review criteria |
| US9804826B2 (en) | 2014-12-05 | 2017-10-31 | Nvidia Corporation | Parallelization of random number generators |
| US9679420B2 (en) | 2015-04-01 | 2017-06-13 | Smartdrive Systems, Inc. | Vehicle event recording system and method |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH02163881A (ja) * | 1988-12-16 | 1990-06-25 | Canon Inc | 画像処理装置 |
| JPH0759085A (ja) * | 1993-06-30 | 1995-03-03 | Samsung Electron Co Ltd | 強制イントラフレーム符号化方法 |
| JPH08316844A (ja) * | 1995-05-17 | 1996-11-29 | Hitachi Ltd | 符号データ復号方法および符号データ復号装置 |
| JPH09214970A (ja) * | 1996-02-08 | 1997-08-15 | Nec Corp | 画像符号変換方式 |
| JPH10210465A (ja) * | 1997-01-23 | 1998-08-07 | Hitachi Ltd | 符号列編集装置、画像符号化信号復号化装置、および、動画符号化信号復号化装置 |
| JPH11313210A (ja) * | 1998-04-27 | 1999-11-09 | Matsushita Graphic Communication Systems Inc | 通信装置及び通信方法 |
| JPH11317930A (ja) * | 1997-12-24 | 1999-11-16 | Ricoh Co Ltd | デジタルカメラおよびその表示方法 |
| JP2000507418A (ja) * | 1996-03-28 | 2000-06-13 | ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー | ビデオ処理 |
| JP2000236496A (ja) * | 1999-02-15 | 2000-08-29 | Nec Corp | ディスク記憶媒体およびその録画編集再生方法およびその録画編集再生装置 |
| JP2001084705A (ja) * | 1999-09-17 | 2001-03-30 | Sony Corp | 記録装置および記録方法、並びにディスク状記録媒体 |
| JP2001111955A (ja) * | 1999-10-12 | 2001-04-20 | Canon Inc | 撮像装置及びその制御方法 |
| JP2001157147A (ja) * | 1999-11-29 | 2001-06-08 | Sanyo Electric Co Ltd | 動画サムネイル表示機能を有するデジタル記録再生装置および動画サムネイル表示方法 |
| JP2001177804A (ja) * | 1999-12-20 | 2001-06-29 | Toshiba Corp | 画像記録再生装置 |
| JP2001197490A (ja) * | 1999-12-27 | 2001-07-19 | Hyundai Electronics Ind Co Ltd | グレー形状情報を含むデジタル動映像の符号化方法 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3070110B2 (ja) * | 1991-02-27 | 2000-07-24 | 日本電気株式会社 | 動画像信号の伝送システム |
| US5473379A (en) * | 1993-11-04 | 1995-12-05 | At&T Corp. | Method and apparatus for improving motion compensation in digital video coding |
| US5649032A (en) * | 1994-11-14 | 1997-07-15 | David Sarnoff Research Center, Inc. | System for automatically aligning images to form a mosaic image |
| JPH1040357A (ja) * | 1996-07-24 | 1998-02-13 | Nippon Telegr & Teleph Corp <Ntt> | 映像作成方法 |
| JPH1174868A (ja) * | 1996-09-02 | 1999-03-16 | Toshiba Corp | 情報伝送方法およびその方法が適用される情報伝送システムにおける符号化装置／復号化装置、並びに符号化・多重化装置／復号化・逆多重化装置 |
| WO1998029834A1 (en) * | 1996-12-30 | 1998-07-09 | Sharp Kabushiki Kaisha | Sprite-based video coding system |
| US6404817B1 (en) * | 1997-11-20 | 2002-06-11 | Lsi Logic Corporation | MPEG video decoder having robust error detection and concealment |
| FR2786353B1 (fr) * | 1998-11-25 | 2001-02-09 | Thomson Multimedia Sa | Procede et dispositif de codage d'images selon la norme mpeg pour l'incrustation d'imagettes |
| WO2000040022A2 (en) * | 1998-12-24 | 2000-07-06 | Barend Hendrik Coetzer | Method of and device for video image capturing, storage and processing |
-
2001
- 2001-07-27 FR FR0110087A patent/FR2828055B1/fr not_active Expired - Fee Related
-
2002
- 2002-07-24 WO PCT/FR2002/002639 patent/WO2003013145A1/fr active Application Filing
- 2002-07-24 US US10/485,027 patent/US8160159B2/en not_active Expired - Fee Related
- 2002-07-24 EP EP02791509A patent/EP1413145A1/fr not_active Withdrawn
- 2002-07-24 JP JP2003518187A patent/JP4547149B2/ja not_active Expired - Fee Related
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH02163881A (ja) * | 1988-12-16 | 1990-06-25 | Canon Inc | 画像処理装置 |
| JPH0759085A (ja) * | 1993-06-30 | 1995-03-03 | Samsung Electron Co Ltd | 強制イントラフレーム符号化方法 |
| JPH08316844A (ja) * | 1995-05-17 | 1996-11-29 | Hitachi Ltd | 符号データ復号方法および符号データ復号装置 |
| JPH09214970A (ja) * | 1996-02-08 | 1997-08-15 | Nec Corp | 画像符号変換方式 |
| JP2000507418A (ja) * | 1996-03-28 | 2000-06-13 | ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー | ビデオ処理 |
| JPH10210465A (ja) * | 1997-01-23 | 1998-08-07 | Hitachi Ltd | 符号列編集装置、画像符号化信号復号化装置、および、動画符号化信号復号化装置 |
| JPH11317930A (ja) * | 1997-12-24 | 1999-11-16 | Ricoh Co Ltd | デジタルカメラおよびその表示方法 |
| JPH11313210A (ja) * | 1998-04-27 | 1999-11-09 | Matsushita Graphic Communication Systems Inc | 通信装置及び通信方法 |
| JP2000236496A (ja) * | 1999-02-15 | 2000-08-29 | Nec Corp | ディスク記憶媒体およびその録画編集再生方法およびその録画編集再生装置 |
| JP2001084705A (ja) * | 1999-09-17 | 2001-03-30 | Sony Corp | 記録装置および記録方法、並びにディスク状記録媒体 |
| JP2001111955A (ja) * | 1999-10-12 | 2001-04-20 | Canon Inc | 撮像装置及びその制御方法 |
| JP2001157147A (ja) * | 1999-11-29 | 2001-06-08 | Sanyo Electric Co Ltd | 動画サムネイル表示機能を有するデジタル記録再生装置および動画サムネイル表示方法 |
| JP2001177804A (ja) * | 1999-12-20 | 2001-06-29 | Toshiba Corp | 画像記録再生装置 |
| JP2001197490A (ja) * | 1999-12-27 | 2001-07-19 | Hyundai Electronics Ind Co Ltd | グレー形状情報を含むデジタル動映像の符号化方法 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014516432A (ja) * | 2011-03-31 | 2014-07-10 | トムソン ライセンシング | 立体的なグラフィックオブジェクトを定義するためのシーングラフ |
| US10332299B2 (en) | 2011-03-31 | 2019-06-25 | Thomson Licensing | Scene graph for defining a stereoscopic graphical object |
| JP2014057228A (ja) * | 2012-09-13 | 2014-03-27 | Hitachi Ltd | 画像伝送システムおよび画像伝送方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4547149B2 (ja) | 2010-09-22 |
| US20040184548A1 (en) | 2004-09-23 |
| US8160159B2 (en) | 2012-04-17 |
| FR2828055B1 (fr) | 2003-11-28 |
| FR2828055A1 (fr) | 2003-01-31 |
| WO2003013145A1 (fr) | 2003-02-13 |
| EP1413145A1 (fr) | 2004-04-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4547149B2 (ja) | モザイクを符号化する方法及び装置 | |
| US6445738B1 (en) | System and method for creating trick play video streams from a compressed normal play video bitstream | |
| US6400768B1 (en) | Picture encoding apparatus, picture encoding method, picture decoding apparatus, picture decoding method and presentation medium | |
| KR0167798B1 (ko) | 주화상에 부화상을 중첩하기 위한 다중화/디멀티플렉싱하는 방법 | |
| US6081551A (en) | Image coding and decoding apparatus and methods thereof | |
| US6304295B1 (en) | Region-based refresh strategy for video compression | |
| CN101341757A (zh) | 本地宏块信息缓冲器 | |
| JP2001285871A (ja) | ビデオ画像を符号化する処理方法及びその装置 | |
| JP2007525906A (ja) | 立体３ｄビデオイメージディジタルコーディングのシステムおよび方法 | |
| US20160337664A1 (en) | Manipulating sub-pictures of a compressed video signal | |
| JP2006512838A (ja) | ダイナミック・グラフィック・コンテンツ・ビューの符号化 | |
| US20030016745A1 (en) | Multi-channel image encoding apparatus and encoding method thereof | |
| JPH09200695A (ja) | 高速再生のためのビデオデータの復号化方法及びその装置 | |
| JP2006527518A (ja) | ビデオ圧縮 | |
| US7403563B2 (en) | Image decoding method and apparatus, and television receiver utilizing the same | |
| US6829303B1 (en) | Methods and apparatus for decoding images using dedicated hardware circuitry and a programmable processor | |
| JP2820630B2 (ja) | 画像復号装置 | |
| JP4043406B2 (ja) | 画像復号方法と装置、およびそれらを利用可能なテレビジョン受信装置 | |
| JP2820631B2 (ja) | 画像復号方法および装置 | |
| Puri et al. | Performance evaluation of the MPEG-4 visual coding standard | |
| KR100535630B1 (ko) | 디지털 그레이 모양정보/색상정보의 부호화/복호화 방법 | |
| JP2004500772A (ja) | ビデオ信号を符号化する方法 | |
| KR100620715B1 (ko) | 디지털 그레이 모양정보/색상정보의 부호화/복호화 방법 | |
| JPH11196415A (ja) | 適応的にボーダーリングする形状情報符号化／復号化装置および方法 | |
| Yu et al. | A compressed-domain visual information embedding algorithm for MPEG-2 HDTV streams |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050721 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080520 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20080815 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20080822 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081117 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091006 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20100105 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20100113 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100401 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100608 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100705 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130709 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4547149 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |