JP2005513879A - ディジタル・テレビジョン用ユーザ・インタフェースを生成する方法およびシステム - Google Patents

ディジタル・テレビジョン用ユーザ・インタフェースを生成する方法およびシステム Download PDF

Info

Publication number
JP2005513879A
JP2005513879A JP2003553824A JP2003553824A JP2005513879A JP 2005513879 A JP2005513879 A JP 2005513879A JP 2003553824 A JP2003553824 A JP 2003553824A JP 2003553824 A JP2003553824 A JP 2003553824A JP 2005513879 A JP2005513879 A JP 2005513879A
Authority
JP
Japan
Prior art keywords
image
indicia
macroblocks
digitally encoded
macroblock
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003553824A
Other languages
English (en)
Other versions
JP2005513879A5 (ja
JP4880197B2 (ja
Inventor
リン,シユー
アラン シユルツ,マーク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2005513879A publication Critical patent/JP2005513879A/ja
Publication of JP2005513879A5 publication Critical patent/JP2005513879A5/ja
Application granted granted Critical
Publication of JP4880197B2 publication Critical patent/JP4880197B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4135Peripherals receiving signals from specially adapted client devices external recorder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

複数の画像を含むディジタル符号化ビデオ信号内のユーザ・コマンドまたは状態情報を遠隔表示装置に送り表示する方法(200)と装置(100)。この方法は、ユーザ・コマンドまたは状態情報を表す少なくとも1つのディジタル符号化インディシアを生成するステップ(216または220)と、表示装置に送られて復号され表示される複数の画像のうちの少なくとも1つの画像を、ユーザ・コマンドに応答して、変更するステップであって、この少なくとも1つの画像が表示装置によって復号され表示される時にディジタル符号化インディシアも復号され表示される(222)ように、上記少なくとも1つの画像の少なくとも一部をディジタル符号化インディシアで置き換えることによって、上記変更を行うステップ(218)と、含んでいる。この方法は、更に、ディジタル符号化ビデオ信号を記憶媒体から読み出すステップを含み、且つ、上記生成するステップと上記変更するステップとがこの読み出すステップの期間中に実行される。別の構成では、上記生成するステップが上記読み出すステップの前に実行される。

Description

本発明は、一般に、ビデオ再生記録システムに関し、詳しくは、表示装置に表示するためのビデオ信号を生成するビデオ再生記録システムに関する。
最近の一般消費者向け電子機器製品市場では、ディジタル・テレビジョン(DTV)と高品位テレビジョン(HDTV)の人気が高まって来ている。この種のテレビジョンの購入者は、過去に記録した番組を見る為に、或いは、自分の好きな番組を記録する為に、ディジタル・ビデオ・ディスク(DVD)プレーヤやDVDレコーダのようなディジタル・ビデオ再生システムやディジタル・ビデオ記録システムも購入している場合が多い。特に、DTV(或いはHDTV)と再生システム(或いは記録システム)の組み合わせは、ホーム・シアター・エンターテイメント・システムに不可欠であると言える。
ディジタル・ビデオ再生システムやディジタル・ビデオ記録システムには、一般的に、再生しようとするディスクに記憶されたディジタル符号化マルティメディア・データを復号するMPEGデコーダが含まれている。仮に、ディジタル・ビデオ再生システムまたはディジタル・ビデオ記録システムが従来型テレビジョン(非ディジタル・テレビジョン或いは非HDTV)に接続されている場合、ディジタル符号化信号は、その従来型テレビジョンに表示される前に、ディジタル・ビデオ再生システムまたはディジタル・ビデオ記録システムのMPEGデコーダによって復号される。しかし、重要なことは、殆どのディジタル・テレビジョンには、それ自身のMPEGデコーダが備えられていることである。従って、再生システムまたは記録システムがディジタル・テレビジョンに接続されている場合、そのシステムの記憶ディスクから読み出された符号化ディジタル・ビデオ信号は、ディジタル・テレビジョンのデコーダに送信されて、遠隔的に(リモートで)復号される。
しかし、遠隔のディジタル・テレビジョンのデコーダでディジタル符号化信号を復号することには、重大な欠点がある。即ち、この種の構成では、オンスクリーン・ディスプレイ(OSD)を行うことが非常に難しい。一般的に、DVDレコーダと従来型テレビジョンには、オンスクリーン・ディスプレイ信号を生成するための補足的な回路が含まれている。オンスクリーン・ディスプレイは、番組の映像上にオーバレイされて、ユーザに対して、或る種のディジタル再生またはレコーダ・システムの諸機能を知らせるユーザ・インタフェースである。例えば、DVDレコーダが通常再生速度の3倍(3×)の早送りトリック・モードで動作している場合、このモードが実行された時に、オンスクリーン・ディスプレイは、従来型テレビジョンのスクリーン上にこの情報を表示できる。
オンスクリーン・ディスプレイ信号の生成が上述の再生システムまたはレコーダ・システムとディジタル・テレビジョンとの組み合わせ構成によって妨げられる理由は、幾つかある。ディジタル・テレビジョンに於いて、オンスクリーン・ディスプレイ信号の生成が困難である理由の一つは、ディジタル・テレビジョンのデコーダが再生システムまたはレコーダ・システムから遠隔的に配置されており、従って、ディジタル・テレビジョンが、一般的に、再生システムまたはレコーダ・システムによって実行されている諸機能を認識しない為である。また、再生装置または記録装置に於いてオンスクリーン・ディスプレイ信号を生成して、ディジタル・テレビジョンに転送しようとするビット・ストリームにそのオンスクリーン・ディスプレイ信号を組み込むと、このビット・ストリームが、再生装置または記録装置とディジタル・テレビジョンとの間の帯域幅制限を超えてしまうことがある。従って、システムのコストが増大することなく、また、システムが複雑化することなく、表示装置から遠隔的に配置される装置によって実行されている諸機能を示すオンスクリーン・ディスプレイの生成と表示を行うための方法およびシステムが必要である。
(発明の概要)
本発明は、1つ或いは複数の変更画像が含まれる複数の画像を有するディジタル符号化ビデオ信号内にユーザ・コマンドまたは状態情報を生成して、デコーダを有する遠隔表示装置に送る方法を提供する。この方法は、ユーザ・コマンドまたは状態情報を表す少なくとも1つのディジタル符号化インディシア(indicia:しるし、特徴、徴候)を生成するステップと、表示装置に送られる複数の画像のうちの少なくとも1つの画像を変更するステップであって、該画像が遠隔表示装置によって復号され表示される時にディジタル符号化インディシアも復号され表示されるように、該画像の少なくとも一部をディジタル符号化インディシアで置き換えることによって、上記変更を行うステップと、を含んでいる。
一構成に於いて、この方法は、更に、ディジタル符号化ビデオ信号を記憶媒体から読み出すステップを含み、且つ、上記生成するステップと上記変更するステップとが、この読み出すステップの期間中に実行される。別の一構成に於いては、上記生成するステップが上記読み出すステップの前に実行され、上記変更するステップが上記読み出すステップの期間中に実行される。この場合、上記生成するステップの後に、ディジタル符号化インディシアを記憶装置に記憶し、ユーザ・コマンドに応答して、或いは、状態情報の表示が必要なイベントに応答して、この記憶したインディシア(indicia:しるし、特徴、徴候)にアクセスして、画像を変更するステップが実行される。どちらの構成に於いても、インディシアの少なくとも一部は、イントラ・マクロブロックで構成される。上記生成するステップが上記読み出すステップの前に実行される構成では、インディシアは、上記変更するステップの期間中にアクセスされるテーブルに記憶される。
また、どちらの構成に於いても、画像は双方向予測画像である。この双方向予測画像は複数のスライスを含み、更に、このスライスの各々は複数の画像マクロブロックを含んでいる。また、インディシアを構成するイントラ・マクロブロックによって置き換えられる双方向予測画像の少なくとも一部は、複数のスライスの少なくとも1つのスライス内の複数の画像マクロブロックのうちの所定数の画像マクロブロックである。更に、インディシアを構成するイントラ・マクロブロックの1つによって置き換えられる、複数のスライスの少なくとも1つのスライス内の複数の画像マクロブロックのうちの少なくとも1つが、その画像マクロブロックの対応するスライスの終端に配置されている。
また、本発明は、ユーザ・コマンドのディジタル符号化インディシア、或いは、状態情報のディジタル符号化インディシアを含むように変更された画像を含む複数の画像を有するディジタル符号化ビデオ信号を生成して、この生成したディジタル符号化ビデオ信号を、これを復号して表示する遠隔表示装置に、送信する装置を提供する。本装置は、複数の画像を表すディジタル符号化ビデオ信号を受信するための信号入力と、ユーザ・コマンドを表すディジタル符号化インディシア、或いは、本装置に対応する状態情報を表すディジタル符号化インディシアを生成する生成器と、生成器に結合されており、ユーザ・コマンドに応答して、或いは、状態情報の表示を必要とするイベントに応答して、ディジタル符号化ビデオ信号内の複数の画像のうちの少なくとも1つの画像を変更するプロセッサであって、この少なくとも1つの画像が表示装置で復号され表示される際にディジタル符号化インディシアも復号され表示されるように、上記少なくとも1つの画像の少なくとも一部をディジタル符号化インディシアで置き換えることによって上記変更を行うプロセッサと、この変更画像を有するディジタル符号化ビデオ信号を含む出力信号を遠隔表示装置に送信するための信号出力と、を含んでいる。
以下、図面を参照して、本発明の実施形態を説明する。この説明によって、本発明をより良く理解でき、且つ、本発明の上述の特徴およびその他の特徴と利点がより明確になる。
尚、ここに述べる実例は、本発明の推奨実施形態であるが、如何なる点に於いても、本発明の範囲を制限するものではない。
図1には、本発明の構成を実施するシステム100がブロック図の形式で示されている。尚、本発明は、図1に例示された特定のシステムに限定されるものではなく、ディジタル符号化信号を受信して表示装置に転送できるその他の任意のシステムにも適用できる。これらのシステムには、任意のディジタル・ビデオ再生システムやディジタル・ビデオ記録システムが含まれている。また、システム100は、特定の種類の記憶媒体に対してデータの読み出し/書き込みを行うことに限定されるものではなく、例えば光学媒体やハード・ディスク・ドライブのような、ディジタル符号化データを記憶できる任意の記憶媒体について、使用できる。
システム100には、記憶媒体112に対してデータの読み出し/書き込みを行うコントローラ110が含まれている。更に、システム100には、マイクロプロセッサ114、検索エンジン116、コーダ/デコーダ(コーデック)118、表示装置120、および、テーブル/メモリ124が含まれている。コーデック118には、記憶媒体112から読み出された信号、或いは、後述の生成器122で生成された信号を含むビデオ信号を符号化し、或いは、復号するための適切なソフトウェアと回路とが含まれている。更に、マイクロプロセッサ114がコントローラ110、検索エンジン116およびコーデック118の動作を制御できるように、また、テーブル/メモリ124にアクセスできるように、制御用インタフェースとデータ用インタフェースとが設けられている。また、マイクロプロセッサ114が行う従来動作のための適切なソフトウェア、或いは、ファームフェアがメモリに設けられている。更に、本発明の構成に従うマイクロプロセッサ114用のプログラム・ルーチンが設定されている。尚、本発明の技術的思想の範囲内で、マイクロプロセッサ114、コーデック118、および、テーブル/メモリ124の全て、或いは、その一部が、上記生成器122を形成していると見なすことが出来る。
動作について説明すると、コントローラ110が、記憶媒体112から、複数の画像を含むディジタル符号化ビデオ信号を読み出す。マイクロプロセッサ114がユーザ・コマンドを受信し、上記ビデオ信号が検索エンジン116に送られる。次に、検索エンジン116は、オンスクリーン・ディスプレイ信号を挿入するために変更できる適切な画像を求めてビデオ信号を検索する。検索エンジン116は、その適切な画像を特定すると、それをマイクロプロセッサ114に伝える。マイクロプロセッサ114とコーデック118は、その画像の少なくとも一部に取って代わる、即ち、少なくともその一部と置き換わる、ユーザ・コマンドを表す、或いは、状態情報を表すディジタル符号化インディシア(indicia)を生成する。従って、ユーザ・コマンドを表すディジタル符号化インディシアは、符号化ビデオ信号が記憶媒体112から読み出される際に、生成される。
別の構成では、マイクロプロセッサ114の指示によって、コーデック118が、1つ或いは複数のユーザ・コマンドまたは状態情報を表す1つ或いは複数のディジタル符号化インディシアを生成する。次に、この生成されたインディシアはテーブル/メモリ124に記憶されて、必要な時に、マイクロプロセッサ114がテーブル/メモリ124にアクセスする。マイクロプロセッサ114は、ユーザ・コマンドを受信すると、或いは、状態情報の表示を必要とするイベントを受けると、そのコマンドまたは状態情報を表すディジタル符号化インディシアをテーブル/メモリ124から取り出し、コーデック118に指示を出して、選択された画像の少なくとも一部を、前もって生成された、即ち、既成のインディシアに置き換える。
どちらの構成にしても、変更画像を含むビデオ信号が、表示装置120に転送され、表示装置120内に含まれるデコーダによって復号されて、オンスクリーン・ディスプレイを含む映像を表す信号が生成される。変更画像が表示装置120に表示される際、変更画像内のインディシアも表示される。以下、本発明の全体の動作を更に詳しく説明する。
図2に例示するフローチャート200は、ディジタル・テレビジョン用ユーザ・インタフェースを生成する1つの方法を示している。ステップ210に於いて、複数の画像を含むビデオ信号がビデオ信号供給源から表示装置に送信される。一構成に於いて、このビデオ信号は、ビデオ信号供給源内に含まれる記憶媒体から読み出されるディジタル符号化ビデオ信号である。また、表示装置は、ビデオ信号供給源から遠隔的に(リモートに)配置されている。即ち、表示装置は、ビデオ信号供給源に対して独立しているものである。更にまた、表示装置はそれ自身のデコーダを有しており、従って、ディジタル符号化信号の少なくとも一部が、表示装置内で復号される。
ステップ212に於いて、ユーザ・コマンドが受信される。決定ブロック214に於いて、ユーザ・コマンドを表す既成のインディシアが表示用に使用されない場合、フローチャート200は、ステップ220に進む。ステップ220に示すように、ユーザ・コマンドまたは状態情報を表すディジタル符号化インディシアが生成される。このタイプの生成は、「オン・ザ・フライ(on the fly)(進行中)」でのインディシアの生成と呼ばれる。他方、前に生成された、即ち、既成のインディシアを使用しようとする場合、ユーザ・コマンドを表す既成インディシアが、ステップ216に示すように、例えばテーブル/メモリから取り出される。ステップ218に於いて、ビデオ信号内の複数の画像から選択された少なくとも1つの画像の少なくとも一部を、既成のインディシアか、或いは、「オン・ザ・フライ」で生成されたインディシアかに置き換えることによって、その画像を変更する。従って、インディシアが「オン・ザ・フライ」で生成される場合、生成ステップ(ステップ220)と変更ステップ(ステップ218)は、ディジタル符号化ビデオ信号が記憶媒体から読み出される際に、実行される。他方、インディシアが前に生成されたものである場合、変更ステップ(ステップ218)は、ディジタル符号化ビデオ信号が読み出される際に実行されるが、生成ステップ(ステップ216)は、ディジタル符号化ビデオ信号が記憶媒体から読み出される前に、実行される。
ステップ222に於いて、変更画像(ユーザ・コマンドを表すインディシアを含んでいる画像)は、表示装置内のデコーダによって復号され、ユーザ・コマンドまたは状態情報を示すオンスクリーン・ディスプレイが、変更画像が表示される際に、表示される。決定ブロック224に於いてインディシアの表示を継続しようとする場合、ユーザ・インタフェースを生成するプロセスは、引き続きステップ212に戻る。そうでない場合、フローチャート200は、ステップ226で終了する。このように、フローチャート200で説明した本発明の構成に従えば、読み出し装置/再生装置が自動的に起動されるか、或いは、ユーザによって起動されるかに拘わらず、ユーザは、読み出し装置/再生装置が生成したユーザ・コマンドまたは状態情報の表示を見ることが出来る。
生成ステップ(ステップ220および216)と変更ステップ(ステップ218)に戻ると、一構成に於いて、当該インディシアの少なくとも一部は、そのインディシアが既成のインディシアか、或いは、「オン・ザ・フライ」で生成されたインディシアかに拘わらず、マクロブロックで構成される。例えば、このマクロブロックは、イントラ(intra:内部)(I)マクロブロックである。このIマクロブロックは、置き換えようとする画像部分に取って代わる。尚、本発明は、この点に限定されるものではなく、インディシアは、ユーザ・コマンドを表す為に画像に挿入されるその他の任意の適切な形態のデータであればよい。別の一構成では、ステップ218に於いて変更しようとする画像は、双方向予測(B)画像である。ステップ218に従ってB画像(Bピクチャー)を変更することによって、変更画像の表示に現れる如何なるアーティファクト効果をも低減できる。これは、ビデオ信号内の各画像の何れも、一般的に、B画像から予測されない為である。尚、本発明は、この点に限定されるものではなく、I画像(Iピクチャー)や予測(P)画像(Pピクチャー)のようなその他の画像を、本発明の構成に従って、変更してもよい。
次に述べる例では、どのように画像を変更して、インディシアを画像内に挿入し表示するかを説明する。以下の説明事項は、後述するようにI画像、P画像およびB画像に適用できるが、以下の例では、主に、どのようにB画像が変更されるかに焦点を合わせて説明する。ビデオ信号内のB画像は、MPEGベース画像であり、従って、複数のスライスを有する。更に、それらのスライスの各々には、複数のマクロブロックが含まれている。本発明の目的に合わせて、且つ、混乱を最小限にするため、このマクロブロックを画像マクロブロックと呼ぶことにする。特に、インディシアを構成するマクロブロックによって置き換えられるB画像の部分は、複数のスライスのうちの少なくとも1つのスライス内の複数の画像マクロブロックのうちの所定数の画像マクロブロックである。尚、インディシアを構成するマクロブロックによって置き換えられるB画像内の画像マクロブロックは、任意の種類のマクロブロックである。
図3Aと図3Bを参照して、どのようにB画像が変更されるかを説明する。図3Aは、120個の画像マクロブロックを含むB画像内の1つのスライスの例を示しており、ディジタル・テレビジョンで表示される多くの画像に於いて広く採用されている標準規格である。尚、本発明は、この形式に限定されるものではなく、その他の適切な画像標準規格によって本発明を実施できる。これらの画像マクロブロックをオリジナル画像マクロブロックと呼ぶことにする。一構成に於いて、インディシアを構成するマクロブロックによって置き換えられる所定数のオリジナル画像マクロブロックは、1セグメントの画像マクロブロックであり、この1セグメントの画像マクロブロックに於いて、置き換えようとする最後の1つのオリジナル画像マクロブロックが、当該スライスに含まれる最後の1つの画像マクロブロックになっている。例えば、インディシアを構成するマクロブロックの少なくとも一部が、図3Aに示すスライスの最後の20個のオリジナル画像マクロブロックに取って代わる。即ち、当該スライスのオリジナル画像マクロブロック101乃至120が、インディシアを構成するマクロブロックの少なくとも一部によって置き換えられる。上述の例は、インディシアが「オン・ザ・フライ」で生成されたインディシアと既成のインディシアの何れであっても、当て嵌る。
更に、B画像内のオリジナル画像マクロブロックの置き換えを容易にするため、スライス内のオリジナル画像マクロブロックの各々の少なくとも一部を、少なくとも置き換えられない最後のオリジナル画像マクロブロックまで、復号し、これによって、インディシアのマクロブロックを配置しようとするスライス内の位置を特定できる。例えば、この例では、オリジナル画像マクロブロック1乃至100の少なくとも一部が復号される。この復号ステップによって、インディシアのマクロブロックを配置しようとするスライス内の位置の特定が容易になる。一構成に於いて、この位置は、所定のデフォルトの位置である。別の一構成に於いて、この位置は、ユーザが選択しようとする位置である。オリジナル画像マクロブロックを、上述の如くインディシアのマクロブロックがスライスの終端に位置するように、置き換えることが望ましい。この理由は、その他の画像マクロブロックが、スライスの終端に位置するインディシアのマクロブロックから、予測されない為である。
尚、本発明は、この特定の態様に限定されるものではなく、インディシアのマクロブロックは、スライス内の任意の位置に挿入してもよい。図3Bに示す例は、どのようにして、ある数のインディシアのマクロブロックがスライス内に配置されて、スライス内の最後の1つのマクロブロックがオリジナル画像マクロブロックになるかを示すものである。基本的な置き換えステップは同じであるが、図3Aの変更ステップと図3Bの変更ステップとの間には、幾つかの軽微な相違点がある。この例では、オリジナル画像マクロブロック50乃至70が、インディシアを構成するマクロブロックの少なくとも一部によって置き換えられる。スライス内の最後の1つのマクロブロックがインディシアのマクロブロックでないため、インディシアの最後のマクロブロック(マクロブロック70)に隣接するオリジナル画像マクロブロック(マクロブロック71)が、必要な場合に、変更されて、それ以降の画像マクロブロック予測について問題が生じる可能性が低減される。この変更プロセスは、特定のオリジナル画像マクロブロックがIマクロブロックであるか否かによって決まる。
この例では、図3Bに示すスライスのオリジナル画像マクロブロック1乃至71の少なくとも一部が復号される。一構成に於いて、復号しようとするオリジナル画像マクロブロックの部分は、画像マクロブロックの各々に存在する動きベクトルである。図3Aで説明したプロセスと同様に、この復号ステップは、インディシアのマクロブロックが配置されるスライス内の所望の位置を特定するのに役立つ。更に、この復号ステップによって、オリジナル画像マクロブロックのうちどれがIマクロブロックであるかを特定できる。これ例では、オリジナル画像マクロブロック70、或いは、オリジナル画像マクロブロック71がIマクロブロックであると特定された場合、オリジナル画像マクロブロック50乃至70が、インディシアのマクロブロックの少なくとも一部によって置き換えられ、残りのオリジナル画像マクロブロックを変更する必要なく、適切なそれ以降の予測が保証される。
この例では、オリジナル画像マクロブロック70および71が非Iマクロブロックである場合、インディシアの最後のマクロブロックに隣接するオリジナル画像マクロブロック(マクロブロック71)が変更される。一構成に於いて、オリジナル画像マクロブロック71が再符号化されるが、この再符号化は、オリジナル画像マクロブロック71の動きベクトルが、最初の予測に用いた値ではなく、その実際の値にリセットされるように、行われる。その結果、オリジナル画像マクロブロック71以降の各予測が、オリジナル画像マクロブロックをインディシアのマクロブロックで置き換えた為に変更されてしまうことはない。尚、本発明は、図3Aと図3Bに関連して説明したこれらの例に限定されるものではない。実際、その他の適切な任意の態様で、画像の少なくとも一部がユーザ・コマンドを表すインディシアで置き換えられ、そのインディシアが画像表示の際に表示されるように、B画像を変更できる。更に、画像内のスライス内のオリジナル画像マクロブロックが、所望のインディシアのマクロブロックによって置き換えられる際、その画像、スライス、および、オリジナル画像マクロブロックのそれぞれの数は、全て、適切な任意の数である。
また、本発明が適用できる画像は、B画像のみではない。具体的には、図3Aと図3Bについて説明した各プロセスは、P画像にも適用できる。また、本発明はI画像にも実施できるが、その場合、図3Bに関連して述べたオリジナル画像マクロブロックの変更ステップは、一般的に、不要である。これは、I画像内のオリジナル画像マクロブロック全てが、一般的に、Iマクロブロックである為である。本発明は、また、ダミーB画像(ダミーBピクチャー)とダミーP画像(ダミーPピクチャー)にも適用できる。これらの画像は、ビデオ信号内に存在することがあり、特にトリック・モードのようなユーザ・コマンドの期間中に存在することがある。
以上、本発明を、上述の実施形態に関連して説明したが、以上の説明は、特許請求の範囲に規定する発明の範囲を例示するものであり、それを制限するものではない。
本発明の構成に従って、ディジタル・テレビジョン用ユーザ・インタフェースを生成するシステムのブロック図である。 本発明の構成に従って、ディジタル・テレビジョン用ユーザ・インタフェースを生成する動作を例示するフローチャートである。 本発明の構成に従って、複数のマクロブロックを含む、双方向予測画像内のスライスを示す図である。 本発明の構成に従って、複数のマクロブロックを含む、双方向予測画像内の別のスライスを示す図である。

Claims (17)

  1. 再生装置または記録装置に対応するユーザ・コマンドまたは状態情報を表すインディシアを生成し、遠隔表示装置に於いて、該インディシアを、前記表示装置によって復号される複数のディジタル符号化画像と共に、表示する方法であって、
    複数の画像を有するディジタル符号化ビデオ信号を受信するステップと、
    前記ユーザ・コマンドまたは前記状態情報を表すディジタル符号化インディシアを生成するステップと、
    前記複数の画像のうちの少なくとも1つの画像を変更するステップであって、該画像が前記遠隔表示装置によって復号され表示される時に前記ディジタル符号化インディシアが復号され表示されるように、該画像の少なくとも一部を前記ディジタル符号化インディシアで置き換えることによって、該画像を変更するステップと、
    前記変更された画像を含む前記ディジタル符号化ビデオ信号を前記表示装置に送信するステップと、を含む方法。
  2. 前記受信するステップが前記ディジタル符号化ビデオ信号を記憶媒体から読み出すステップを含み、且つ、前記生成するステップと前記変更するステップとが前記読み出すステップの期間中に実行される、請求項1記載の方法。
  3. 前記ディジタル符号化インディシアの少なくとも一部が、MPEG符号化イントラ・マクロブロックで構成されており、該イントラ・マクロブロックが、前記変更される画像の前記少なくとも一部と置き換わる、請求項2記載の方法。
  4. 前記画像が、複数のスライスを含む双方向予測画像であり、且つ、該スライスの各々には複数の画像マクロブロックが含まれている、請求項3記載の方法。
  5. 前記インディシアを構成する前記イントラ・マクロブロックによって置き換えられる前記双方向予測画像の前記少なくとも一部が、前記複数のスライスのうちの少なくとも1つのスライス内の前記複数の画像マクロブロックのうちの所定数の画像マクロブロックである、請求項4記載の方法。
  6. 前記インディシアを構成する前記イントラ・マクロブロックの1つによって置き換えられる、前記複数のスライスの少なくとも1つのスライス内の前記複数の画像マクロブロックの少なくとも1つが、その画像マクロブロックの対応するスライスの終端に配置されている、請求項5記載の方法。
  7. 前記受信するステップが前記ディジタル符号化ビデオ信号を記憶媒体から読み出すステップを含み、且つ、前記生成するステップが前記読み出すステップの前に実行され、また、前記変更するステップが前記読み出すステップの期間中に実行される、請求項1記載の方法。
  8. 前記ディジタル符号化インディシアの少なくとも一部が、MPEG符号化イントラ・マクロブロックで構成されており、該イントラ・マクロブロックが、前記画像の前記少なくとも一部と置き換わり、且つ、前記ディジタル符号化インディシアが、前記変更するステップの期間中にアクセスされるテーブルに記憶されている、請求項7記載の方法。
  9. 前記画像が、複数のスライスを含む双方向予測画像であり、且つ、該スライスの各々が複数の画像マクロブロックを含む、請求項8記載の方法。
  10. 前記インディシアを構成する前記イントラ・マクロブロックによって置き換えられる前記双方向予測画像の前記少なくとも一部が、前記複数のスライスのうちの少なくとも1つのスライス内の前記複数の画像マクロブロックのうちの所定数の画像マクロブロックである、請求項9記載の方法。
  11. 前記インディシアを構成する前記イントラ・マクロブロックの1つによって置き換えられる、前記複数のスライスの少なくとも1つのスライス内の前記複数の画像マクロブロックの少なくとも1つが、その画像マクロブロックの対応するスライスの終端に配置されている、請求項9記載の方法。
  12. 複数の画像を表すディジタル符号化ビデオ信号を生成して該ディジタル符号化ビデオ信号を、これを復号するためのデコーダを有し復号されたビデオ信号を表示する遠隔表示装置に、送る装置であって、
    複数の画像を表すディジタル符号化ビデオ信号を受信する信号入力と、
    ユーザ・コマンドを表すディジタル符号化インディシア、或いは、前記生成して送る装置に対応する状態情報を表すディジタル符号化インディシアを生成する生成器と、
    前記生成器に結合されており、前記ユーザ・コマンドに応答して、或いは、前記状態情報の表示を必要とするイベントに応答して、前記ディジタル符号化ビデオ信号内の前記複数の画像のうちの少なくとも1つの画像を変更するプロセッサであって、前記少なくとも1つの画像が前記表示装置で復号され表示される際に前記ディジタル符号化インディシアも復号され表示されるように、前記少なくとも1つの画像の少なくとも一部を前記ディジタル符号化インディシアで置き換えることによって前記変更を行うプロセッサと、
    前記変更画像を有する前記ディジタル符号化ビデオ信号を含む出力信号を、前記遠隔表示装置に、送信するための信号出力と、
    を含む装置。
  13. 前記ディジタル符号化インディシアの少なくとも一部が、MPEG符号化イントラ・マクロブロックで構成されており、該イントラ・マクロブロックが、前記変更される画像の前記少なくとも一部と置き換わる、請求項12記載の装置。
  14. 前記画像が、複数のスライスを含む双方向予測画像であり、且つ、該スライスの各々には複数の画像マクロブロックが含まれている、請求項13記載の装置。
  15. 前記ディジタル符号化インディシアを構成する前記イントラ・マクロブロックによって置き換えられる前記双方向予測画像の前記少なくとも一部が、前記複数のスライスのうちの少なくとも1つのスライス内の前記複数の画像マクロブロックのうちの所定数の画像マクロブロックである、請求項14記載の装置。
  16. 前記ディジタル符号化インディシアを構成する前記イントラ・マクロブロックの1つによって置き換えられる、前記複数のスライスの少なくとも1つのスライス内の前記複数の画像マクロブロックの少なくとも1つが、その画像マクロブロックの対応するスライスの終端に配置されている、請求項15記載の装置。
  17. 更に、テーブルを含み、前記ディジタル符号化インディシアの少なくとも一部がMPEG符号化イントラ・マクロブロックで構成されており、該イントラ・マクロブロックが前記変更される画像の前記少なくとも一部と置き換わり、前記インディシアが前記テーブルに記憶されており、前記プロセッサが、更に、変更動作期間中に前記テーブルにアクセスするようにプログラムされている、請求項15記載の装置。
JP2003553824A 2001-12-14 2002-12-09 インディシアを含む信号を生成して表示装置に送信する方法および復号されたビデオ信号を表示する表示装置に送る装置 Expired - Lifetime JP4880197B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US10/020,790 2001-12-14
US10/020,790 US7260307B2 (en) 2001-12-14 2001-12-14 Method and system for generating a user interface for digital televisions
PCT/US2002/039469 WO2003053051A1 (en) 2001-12-14 2002-12-09 Method and apparatus for transmitting osd information to a remote display device

Publications (3)

Publication Number Publication Date
JP2005513879A true JP2005513879A (ja) 2005-05-12
JP2005513879A5 JP2005513879A5 (ja) 2006-01-26
JP4880197B2 JP4880197B2 (ja) 2012-02-22

Family

ID=21800592

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003553824A Expired - Lifetime JP4880197B2 (ja) 2001-12-14 2002-12-09 インディシアを含む信号を生成して表示装置に送信する方法および復号されたビデオ信号を表示する表示装置に送る装置

Country Status (10)

Country Link
US (1) US7260307B2 (ja)
EP (1) EP1454485B1 (ja)
JP (1) JP4880197B2 (ja)
KR (1) KR100954070B1 (ja)
CN (1) CN1314264C (ja)
AU (1) AU2002359661A1 (ja)
ES (1) ES2385325T3 (ja)
MX (1) MXPA04005739A (ja)
MY (1) MY138119A (ja)
WO (1) WO2003053051A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9237347B2 (en) * 2005-03-21 2016-01-12 The Regents Of The University Of California Systems and methods for video compression for low bit rate and low latency video communications
JP4604080B2 (ja) * 2007-12-03 2010-12-22 シャープ株式会社 画像処理装置および画像処理方法
US8472779B2 (en) * 2008-06-17 2013-06-25 Microsoft Corporation Concurrently displaying multiple trick streams for video
FR2940688B1 (fr) * 2008-12-30 2011-02-25 Sagem Comm Systeme comprenant un serveur et un terminal munis d'interfaces graphiques communiquant via un protocole de partage d'images
US8490114B1 (en) * 2010-06-15 2013-07-16 Adobe Systems Incorporated Method and apparatus for accessing rich internet content
CN106250009B (zh) * 2015-08-31 2019-11-29 北京智谷睿拓技术服务有限公司 交互方法、交互装置、显示设备及图像获取设备

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3698273B2 (ja) * 1995-07-20 2005-09-21 ソニー株式会社 電子番組ガイド伝送装置および方法、電子番組ガイド受信装置および方法、並びに電子番組ガイド送受信システムおよび方法
JP4073037B2 (ja) 1995-09-15 2008-04-09 トムソン コンシユーマ エレクトロニクス インコーポレイテツド ディジタル記録・再生装置およびディジタル・テレビ受像機
US6034738A (en) * 1996-02-14 2000-03-07 Thomson Consumer Electronics, Inc. On-screen display timing
US5936667A (en) * 1997-05-13 1999-08-10 Sony Corporation System and method for testing and updating stored content of a remote transmitter for an entertainment system
US6788710B1 (en) * 1998-03-19 2004-09-07 Thomson Licensing S.A. Auxiliary data insertion in a transport datastream
EP0980185B8 (en) 1998-08-12 2015-12-16 Thomson Licensing Auxiliary data insertion in a transport datastream
US7336712B1 (en) * 1998-09-02 2008-02-26 Koninklijke Philips Electronics N.V. Video signal transmission
EP1014712A1 (en) * 1998-12-21 2000-06-28 Deutsche Thomson-Brandt Gmbh Method and apparatus for providing OSD data for OSD display in a video signal having an encoded format
JP3376314B2 (ja) * 1999-05-12 2003-02-10 株式会社東芝 デジタル映像情報媒体、デジタル映像情報記録再生装置およびデジタル映像情報処理方法
US6609253B1 (en) * 1999-12-30 2003-08-19 Bellsouth Intellectual Property Corporation Method and system for providing interactive media VCR control
JP2001326906A (ja) * 2000-05-17 2001-11-22 Nec Corp 画像圧縮管理装置及びそれに用いる画像圧縮管理方法

Also Published As

Publication number Publication date
AU2002359661A1 (en) 2003-06-30
JP4880197B2 (ja) 2012-02-22
EP1454485B1 (en) 2012-04-25
US7260307B2 (en) 2007-08-21
CN1314264C (zh) 2007-05-02
ES2385325T3 (es) 2012-07-23
MY138119A (en) 2009-04-30
WO2003053051A1 (en) 2003-06-26
US20030113093A1 (en) 2003-06-19
EP1454485A1 (en) 2004-09-08
CN1620807A (zh) 2005-05-25
KR100954070B1 (ko) 2010-04-23
MXPA04005739A (es) 2004-12-06
KR20040066899A (ko) 2004-07-27

Similar Documents

Publication Publication Date Title
EP1438845B1 (en) Fast motion trick mode using non-progressive dummy predictive pictures
WO2003036971A1 (en) Trick modes using non-progressive dummy bidirectional predictive pictures
US7787746B2 (en) Fast motion trick mode using non-progressive dummy bidirectional predictive pictures
JP4880197B2 (ja) インディシアを含む信号を生成して表示装置に送信する方法および復号されたビデオ信号を表示する表示装置に送る装置
JP4388812B2 (ja) トリックモードを実行する方法及びシステム
JP4294481B2 (ja) ダミーの予測ピクチャを使用したコマ落としトリックモード
US7643724B2 (en) Fast motion trick mode using non-progressive dummy predictive pictures
JP4370166B2 (ja) トリックモードを実行する方法及びシステム
JP5099958B2 (ja) 双方向予測フレームに関するトリックモード
EP1540950B1 (en) Trick mode using dummy bidirectional predictive pictures
US7596301B2 (en) Reverse trick mode using intra pictures

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051201

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051201

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20060929

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20061120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070731

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070814

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20071107

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20071114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080221

RD05 Notification of revocation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7425

Effective date: 20080318

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080415

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090414

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111028

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111201

R150 Certificate of patent or registration of utility model

Ref document number: 4880197

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141209

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term