JP4388797B2 - 映像表示方法 - Google Patents

Description

本発明は、複数の映像信号を切り替えながら表示する映像表示方法に関する。

テレビジョン受信機などの映像表示装置において、画面を複数のブロックに分割して複数の映像信号を表示するマルチ画面表示機能や、１つの画面内に一定周期で映像信号を切り替え表示するザッピング機能などが知られている。たとえば、特許文献１では、チューナとデコーダを２セット設ける構成により、親画面の映像を動画表示したまま、子画面に他のチャンネルの内容を表示するマルチ画面テレビジョン受信機が提案されている。

複数の映像信号を切り替え表示する処理は、一般に次のように行われる。

入力ソースがアナログ放送の場合、各チャンネルが順次選局されるように受信周波数が一定周期で切り替えられる。受信信号は、チューナ部でベースバンド信号に変換された後、ＮＴＳＣ復号器等で色信号、水平同期信号、垂直同期信号及びクロックに復号される。得られた画像データは、Ａ／Ｄ変換されてメモリの異なる領域にそれぞれ蓄積される。

入力ソースがデジタル放送の場合、各チャンネル（サービスＩＤ）が順次選局されるように、受信周波数、トランスポートストリーム識別（ＴＳＩＤ）が一定周期で切り替えられる。受信信号は、チューナ部でトランスポートストリーム（ＴＳ）信号に変換され、画像、音声、その他のデータに復号される。得られた画像データは、メモリの異なる領域にそれぞれ蓄積される。

そして、マルチ画面表示の際は、蓄積された各チャンネル対応の画像データを並べて１画面を構成し、Ｄ／Ａ変換して出力する。あるいは、ザッピング表示の際は、各チャンネル対応の画像データを順次Ｄ／Ａ変換して１画面に出力する。
特開平６−１７８２２７号公報

上記従来技術では、映像（番組やチャンネル）の内容に関係なく、一定周期で映像信号の切り替え及び画像の描画が実行される。したがって、映像の動きが大きいか否か、あるいは、ユーザが好むと好まざるとに拘らず、一定周期でしか映像が更新されない。

そうすると、ユーザは多数の映像の中から自分の視聴したいものを見つけ出そうと思っても、マルチ画面表示等において映像の内容を的確に把握することが困難となり、結局、マルチ画面表示等でとりあえず映像選択をし、単画面表示で内容を確認するといった煩雑な操作を繰り返さざるを得なかった。

本発明は上記実情に鑑みてなされたものであって、その目的とするところは、ユーザが所望の映像を容易に発見できるように複数の映像信号を切り替え表示する技術を提供することにある。

上記目的を達成するために本発明では、以下の手段または処理によって複数のチャンネルにそれぞれ対応する複数の画像をマルチ画面で表示する。

本発明に係る映像表示方法は、
複数のチャンネルにそれぞれ対応する複数の画像をマルチ画面で表示する映像表示方法であって、
デジタル放送信号を受信する受信工程と、
前記受信工程で受信されたデジタル放送信号から、前記複数のチャンネルのそれぞれの番組について、その番組のジャンルの情報を取得し、ジャンル毎の動き量が予め格納されたテーブルを参照して、動き量の大きいジャンルの番組に対応するチャンネルほど重要度レベルが高くなるように、各チャンネルの重要度レベルを決定する決定工程と、
前記複数のチャンネルを１つずつ順次選択するとともに、選択したチャンネルの映像信号をデコードして出力する選択工程と、
前記選択工程で順次デコードされて出力される各チャンネルの映像信号に基づく画像をメモリに蓄積するとともに、該メモリに蓄積される画像をチャンネル毎に順次読み出し、前記複数のチャンネルにそれぞれ対応する複数の画像を合成してマルチ画面で表示する処理を行う表示処理工程と、
を含み、
前記表示処理工程では、前記決定工程で決定された重要度レベルの高いチャンネルほど多くのフレームの画像を前記メモリに蓄積し、前記マルチ画面において、前記重要度レベルの高いチャンネルに対応する画像ほど頻繁に切り替えて表示する処理を行う。

本発明によれば、映像信号ごとに設定された表示属性に基づいて選択順序（表示順序）や表示フレーム数が適宜決定されるので、複数の映像信号の切り替え表示において、ユーザは所望の映像を容易に発見できるようになる。

特に、映像の動き量やユーザの嗜好（好み）など各映像の内容に応じてフレームレートを変えたり、優先度によって選択回数（表示頻度）を変えたりすることで、映像選択のために必要な情報をユーザに対し適切に伝えることが可能となる。

以下、図面を用いて、本発明の好適な実施の形態を例示的に詳しく説明する。

（第１の実施形態）
＜映像表示システムの構成＞
図５に、本発明の第１の実施形態に係る映像表示システムの構成例を示す。この映像表示システムは、デジタル放送を受信して表示するテレビジョン受信機などに利用される。

映像表示システムは、ＩＲＤ（Integrated Receiver/Decoder）５０１、モニタ５０２
、ケーブル５０３、リモートコントローラ（以下、リモコンという。）５０４、アンテナ５０５などを備える。アンテナ５０５で受信された衛星や地上波等のデジタル放送信号は
、ＩＲＤ５０１に入力される。ＩＲＤ５０１は、デジタル放送信号から視聴対象となる信号を選局し、画像、音声、その他のデータに復号する。ＩＲＤ５０１で生成された画像、音声信号は、ケーブル５０３を介してモニタ５０２に伝送され、出力される。リモコン５０４はＩＲＤ５０１に命令を送るためのものである。

＜ＩＲＤの構成＞
図２にデジタル放送を受信しマルチ画面表示を行うためのＩＲＤ５０１の構成例を示す。

ＩＲＤ５０１は、放送受信手段２０１、デマルチプレクサ２０２、ＭＰＥＧ２（Moving
Picture Expert Group 2）ビデオデコーダ２０３、表示データ生成手段２０４、ＭＰＥ
Ｇ２オーディオデコーダ２０５、Ｄ／Ａ変換手段２０６、ＣＰＵ（中央処理装置）２０７、コンディショナル・アクセス・モジュール（ＣＡＭ）２０８、番組情報記憶手段２０９、操作手段２１０、フレームメモリ２１１を備える。

放送受信手段２０１は、アンテナ５０５からのデジタル放送信号を受信、選局してＴＳ信号を出力する。

デマルチプレクサ２０２は、放送受信手段２０１から出力されるＴＳ信号をパケット識別子（ＰＩＤ）でフィルタリングし、各種データに分別する。

ＭＰＥＧ２ビデオデコーダ２０３は、デマルチプレクサ２０２によって分別されたＭＰＥＧ２画像データを復号する。

表示データ生成手段２０４は、ＭＰＥＧ２ビデオデコーダ２０３により復号された画像信号とＣＰＵ２０７により作られた表示データを元に描画した画像とをフレームメモリ２１１を用いて合成し、ＮＴＳＣ等のモニタ５０２の仕様に合った信号フォーマットに変換する。

ＭＰＥＧ２オーディオデコーダ２０５は、デマルチプレクサ２０２によって分別されたＭＰＥＧ２音声データを復号する。

Ｄ／Ａ変換手段２０６は、ＭＰＥＧ２オーディオデコーダ２０５の復号結果をステレオ音声等の音声信号として外部に出力する。

ＣＰＵ２０７は、ＩＲＤ５０１の各部の制御を行う制御手段である。たとえば、ＣＰＵ２０７は、デマルチプレクサ２０２により分別された各種テーブルデータ（ＰＡＴ、ＮＩＴ、ＰＭＴ、ＢＡＴ、ＳＤＴ、ＥＩＴ、ＴＯＴ、ＣＡＴなど）やデータ放送データを解読し、それらのうち表示する情報は表示データ生成手段２０４に出力し、番組情報として記憶しておくものは番組情報記憶手段２０９に記憶させる。

ＣＡＭ２０８は、図示しないＣＰＵ、ＲＯＭ、ＲＡＭ等から構成されるＩＣカードの読取装置を含み、ＩＣカードに含まれている暗号解読キーと解読プログラムを用いてデマルチプレクサ２０２により暗号化ＴＳを分別させる。

番組情報記憶手段２０９は、ＣＰＵ２０７により処理された各種テーブルデータを番組選択のための番組情報として記憶する。番組情報記憶手段２０９の記憶内容は、ＩＲＤ５０１の電源を切っても失われない。

操作手段２１０は、リモコン５０４等の操作によりチャンネル選択等を行う。

フレームメモリ２１１は、表示データ生成手段２０４が画像を合成する際に一次蓄積用として使われる。

衛星やＣＡＴＶや地上波等のデジタル放送を視聴するには、ユーザはリモコン５０４等を用いてチャンネル（サービスＩＤ）を指示する。ユーザの指示は操作手段２１０を経てＣＰＵ２０７に通知される。ＣＰＵ２０７は指示されたチャンネルに対応する周波数、ＴＳＩＤ等を放送受信手段２０１に設定する。放送受信手段２０１は、その設定に従い、アンテナ５０５で受信した信号をＴＳ信号に変換する。ＴＳ信号はデマルチプレクサ２０２によって画像データ、音声データ、その他データに分別される。画像データはＭＰＥＧ２ビデオデコーダ２０３、音声データはＭＰＥＧ２オーディオデコーダ２０５、その他データはＣＰＵ２０７に受け渡される。ＴＳ信号が暗号化されている場合には、ＣＡＭ２０８が暗号解読キーと解読プログラムを用いてＴＳ信号を復号する。

ＭＰＥＧ２ビデオデコーダ２０３はＭＰＥＧ方式で圧縮されているビデオ信号をデコードし、表示データ生成手段２０４に画像データを送る。表示データ生成手段２０４は、画像データを表示用の信号に変換する。ＭＰＥＧ２オーディオデコーダ２０５はＭＰＥＧ方式で圧縮されているオーディオ信号をデコードし、Ｄ／Ａ変換手段２０６に送る。Ｄ／Ａ変換手段２０６はオーディオ信号をＤ／Ａ変換し、左チャンネルと右チャンネルの信号として出力する。

ＩＲＤ５０１から出力された画像信号と音声信号は、ケーブル５０３で接続されたモニタ５０２の画面やスピーカから出力される。これによりユーザはリモコン５０４等で指示したチャンネルを視聴することができる。

マルチ画面表示を行う際は、ＣＰＵ２０７は放送受信手段２０１、デマルチプレクサ２０２にチャンネル切替え命令を出し、表示データ生成手段２０４にチャンネル切替えに対応して送られてくる画像データをフレームメモリ２１１の個別の領域に一時蓄積するよう命令を出す。この動作をマルチ画面表示する画面数繰り返すことでマルチ画面を構成する。

＜リモコンの構成＞
図８はリモコン５０４の構成例を示す。リモコン５０４は、ＩＲＤ５０１をコントロールするための命令を決めるための操作ボタン８０１、操作ボタン８０１の命令を赤外線等の無線信号として送信する送信部８０２を備える。

操作ボタン８０１は、ＩＲＤ５０１の電源の入切を決める電源ボタン、希望の数字を入力するための０〜９の数字ボタン、数字ボタンの入力を取り消すための取消ボタン、数字ボタンの入力を決定するための決定ボタン、電子番組情報を表示するための番組情報ボタン、マルチ画面表示選択または電子番組情報選択で番組選択を行うための番組選択ボタン、出力音声の音量の増減を行うための音量＋−ボタン、出力音声を切るための消音ボタン、チャンネルの増減を行うためのチャンネル＋−ボタン等がある。

番組選択ボタンを押し番組選択モードに遷移した場合、２の数字ボタンは上への移動ボタン、４の数字ボタンは左への移動ボタン、６の数字ボタンは右への移動ボタン、８の数字ボタンは下への移動ボタンとなる。番組選択ボタンは一度押すとマルチ画面表示選択に、もう一度押すと電子番組情報選択にと選択方法が切り替わる。元の表示モードに戻す場合は、取消ボタンを押すか、移動ボタンを押して番組を選択し決定ボタンを押す。

＜マルチ画面表示＞
ユーザが目的の番組を探す場合、複数の番組を図４のようにマルチ画面表示してその中から選択する方法がある。

マルチ画面表示を行う際のユーザ操作は次のように行う。まず第一に、操作ボタン８０１の番組選択ボタンを押すことでマルチ画面表示選択モードに切替える。すると、図４のような９画面分割したマルチ画面が表示される。次に、操作ボタン８０１の移動ボタンで番組選択マーカ４０１を移動させて番組１〜９を選択する。そして、操作ボタン８０１の決定ボタンを押すことで視聴する番組を決定する。これにより、通常表示モードの単画面表示で選択した番組を視聴することができる。

次に、マルチ画面表示を行うための画像処理に付いて説明する。

図３に表示データ生成手段２０４の構成例を示す。表示データ生成手段２０４は、解像度変換手段３０１、画像合成手段３０２、Ｄ／Ａ変換手段３０３、メモリコントローラ３０４を備える。

解像度変換手段３０１は、ＭＰＥＧ２ビデオデコーダ２０３又はＣＰＵ２０７から入力された画像データをそれぞれ所望の大きさに変換する。画像合成手段３０２は、解像度変換された複数の画像データを合成して画面に表示する構成にする。詳しくは、画像合成手段３０２は、まず、解像度変換手段３０１から受け取った画像データを、メモリコントローラ３０４を介してフレームメモリ２１１の表示領域に対応するアドレスに書き込む。その後、画像合成手段３０２は、フレームメモリ２１１から画像データを読み出してＤ／Ａ変換手段３０３に出力する。このとき、メモリコントローラ３０４は、画像合成手段３０２とフレームメモリ２１１の間の入出力タイミングを調整する。Ｄ／Ａ変換手段３０３は、画像合成手段３０２から出力される画像データをＤ／Ａ変換して表示用の信号に変換する。

例えば、図４のように画面を９個の子画面に分割し、９つの番組をマルチ表示する際には、解像度変換手段３０１はＭＰＥＧ２ビデオデコーダ２０３から入力される画像データを１／９に縮小する。画像合成手段３０２はその画像データをフレームメモリ２１１に一時蓄積する。その際、画像データは表示箇所となる子画面に対応したアドレスに蓄積される。フレームメモリ２１１の蓄積内容の更新は子画面ごとの領域単位で行われる。

画像合成手段３０２はメモリコントローラ３０４を経由してモニタ５０２の仕様に合った信号フォーマットの同期タイミングでフレームメモリ２１１から９つの番組の画像データを読み出す。この画像データはＤ／Ａ変換手段３０３で表示用の信号に変換され、モニタ５０２にマルチ画面表示される。

メモリコントローラ３０４は２重のバッファを備えており、更新する番組（新たに書き込みを行う画像データ）の領域については、読み出しを行っている領域を保護しつつ書き込みを行う。これにより、更新中の番組の領域を読み出しても画像の乱れが起こらないように処理される。

次に、マルチ画面表示における各映像の更新手順について説明する。

本実施形態では、映像信号（チャンネル、番組など）ごとに表示属性（重要度レベル）を設定し、その重要度レベルに基づいて映像信号の選択順序を決定する。そして、その選択順序に従って映像信号を選択し、重要度レベルごとに定められているフレーム数の映像を表示する処理を繰り返すことによって、各映像の更新を行う。

図６は映像更新処理で参照されるテーブルの一例を示している。これらのテーブルは番組情報記憶手段２０９に格納される。

（Ａ−１）は、チャンネルＣＨ１〜９のそれぞれに設定されている重要度レベル（表示属性）のテーブルである。

この重要度レベルは、マルチ画面表示を実行する前に予め設定されている情報である。重要度レベルの設定に関しては、ユーザがリモコン５０４等を操作して入力できるようにしてもよいし、ＩＲＤ５０１が自動的に設定してもよい。

たとえば、重要度レベルは、図７の（Ｂ−１）のように各チャンネルに対応したユーザの好みレベルF_LEVEL（チャンネル嗜好情報）に基づいて決めたり、（Ｂ−２）のように
各チャンネルに対応した動きレベルM_LEVEL（動き量情報）に基づいて決めることができ
る。

また、（Ｃ−１）のように各チャンネルのジャンルを番組情報であるＥＩＴのコンテント識別子から割り出し、（Ｃ−２）のように各ジャンルに対応したユーザの好みレベルF_LEVEL（ジャンル嗜好情報）から決めたり、（Ｃ−３）のように各ジャンルに対応した動
きレベルM_LEVEL（動き量情報）から決めてもよい。

嗜好情報に基づいて設定する場合はユーザの嗜好に合うチャンネルほど重要度レベルが大きくなるように、動き量情報に基づいて設定する場合は動き量の大きいチャンネルほど重要度のレベルが大きくなるように、各チャンネルの重要度レベルを決定する。

ユーザの好みレベルに関しては、ユーザ自身に予め登録してもらってもよいし、ユーザの操作履歴等に基づいてＩＲＤ５０１が自動的にユーザの好みを判断してもよい。また、動きレベルに関しては、デコード中にモーションベクターから判定したり、Ｉピクチャがデコードされるまでに不要となる他のピクチャーデータのモーションベクターで判断したり、ジャンルに対応した動きの特性から判断してもよい。

図６の（Ａ−２）は、重要度レベルごとの表示フレーム数（continuity）と優先度（priority）と最大割り当て可能数（maximum）が定められているテーブルである。この例で
は、
レベル１は表示フレーム数１、優先度ＬＯ、最大割り当て可能数９、
レベル２は表示フレーム数１、優先度ＨＩ、最大割り当て可能数９、
レベル３は表示フレーム数６０、優先度ＬＯ、最大割り当て可能数４、
レベル４は表示フレーム数１２０、優先度ＬＯ、最大割り当て可能数２、
レベル５は表示フレーム数６００、優先度ＬＯ、最大割り当て可能数１
となっている。

ここで表示フレーム数は、１回の更新で表示されるフレーム数である。表示フレーム数が多いほど、フレームレートの高い（滑らかな）動画として表示されることになる。優先度は、映像信号の選択回数（頻度）を左右する情報である。優先度がＬＯの映像には、全部の映像が更新される間に１回だけ更新機会が与えられる。優先度がＨＩの映像には、優先度がＬＯのいずれかの映像が更新される度に更新機会が与えられる。最大割り当て可能数は、当該重要度レベルを最大でいくつの子画面に割り当て可能かどうかを表す情報である。つまり、表示フレーム数が多いほど最大割り当て可能数は小さくなる。

（Ａ−１）のテーブルに設定された重要度レベルに基づいて各チャンネルの選択順序を決定し、フレームメモリ２１１の更新手順をテーブル化したものが（Ａ−３）と（Ａ−４
）のテーブルである。（Ａ―３）は初期画像の更新手順を表す初回更新手順テーブルである。初期画面では、優先度がＬＯの映像だけが、重要度レベルの高い（大きい）順に更新される。（Ａ−４）は（Ａ―３）の更新手順の後でマルチ画面表示が終わるまで繰り返される更新手順を表す更新手順テーブルである。優先度がＨＩのチャンネルＣＨ２，７は、頻繁に更新されることがわかる。

（Ａ−４）の更新手順テーブルに従って更新処理を行えば、更新が一巡する間に（更新手順６０８〜６２８が一通り実行される間に）、
レベル１のチャンネルＣＨ１，６は１フレーム、
レベル２のチャンネルＣＨ２，７は７フレーム、
レベル３のチャンネルＣＨ３，８は６０フレーム、
レベル４のチャンネルＣＨ４，９は１２０フレーム、
レベル５のチャンネルＣＨ５は６００フレーム
ずつ表示される。つまり、重要度レベルが大きいほど、また優先度が高いほどフレームレートが高くなる。そして、図７のように動き量や嗜好情報に基づき重要度レベルを設定した場合には、動き量の大きいチャンネルほど、またユーザの嗜好に合うチャンネルほどフレームレートが高くなり、滑らかな動画として表示されることになる。

次に、図１を参照して、上記更新手順テーブルに基づく具体的な更新処理について詳しく説明する。図１はＣＰＵ２０７の動作フローを示している。

ステップＳ１０１において、ＣＰＵ２０７は、リモコン５０４からの命令の解析を行う。その指示がマルチ画面表示を行う命令であると判断すると、ステップＳ１０２に処理を進める。

ステップＳ１０２において、ＣＰＵ２０７は、表示繰り返しの初回であるかどうかを判断し、初回であったなら、ステップＳ１０３に処理を進める。

ステップＳ１０３において、ＣＰＵ２０７は、図６（Ａ−３）の初回更新手順テーブルを参照する。

ステップＳ１０４において、ＣＰＵ２０７は、更新手順６０１から順番に指定のチャンネルに相当する周波数とＴＳＩＤを放送受信手段２０１に設定する。設定内容に応じて放送受信手段２０１は所望のチャンネルの番組のＴＳを出力する。

ステップＳ１０５において、ＣＰＵ２０７は、指定のチャンネルに相当するＰＩＤと指定のフレーム数をデマルチプレクサ２０２に設定する。指定のフレーム数はデマルチプレクサ２０２内部で計数するか、またはＣＰＵ２０７で計数を行う。設定内容に応じて、デマルチプレクサ２０２は画像データ、音声データ、その他データに分別し、画像データをＭＰＥＧ２ビデオデコーダ２０３に、音声データをＭＰＥＧ２オーディオデコーダ２０５に、その他データをＣＰＵ２０７に受け渡す。

ステップＳ１０６において、ＣＰＵ２０７は、指定のフレーム数を表示データ生成手段２０４に設定する。指定のフレーム数は表示データ生成手段２０４内部で計数するか、またはＣＰＵ２０７で計数を行う。表示データ生成手段２０４は指定のフレーム数分の画像をＭＰＥＧ２ビデオデコーダ２０３から受け取ると、解像度変換手段３０１で１／９の大きさに画像を縮小する。そして、画像合成手段３０２は各フレームの画像をフレームメモリ２１１に書き込むとともに、モニタ５０２の仕様に合った信号フォーマットの同期タイミングで表示用のデータをフレームメモリ２１１から読出し、Ｄ／Ａ変換手段３０３を経由してモニタ５０２に出力する。

そして、再びステップＳ１０１に戻る。マルチ画面表示のままである限り、ＣＰＵ２０７はステップＳ１０１〜Ｓ１０６を繰り返し、初回更新手順テーブルの更新手順６０２〜６０７を実行する。

更新手順６０７が終わった後は、ステップＳ１０２の判断処理にてステップＳ１０７に分岐し、ＣＰＵ２０７は図６（Ａ−４）の更新手順テーブルを参照するようになる。更新手順テーブルの更新手順６０８〜６２８に関する処理も、上述したものと同様である。なお、更新手順６２８を実行した後は、再度更新手順６０８へ戻り、更新手順テーブルの内容を繰り返す。

上記処理によって、９個の子画面の各映像の表示が指定フレーム数だけ順に更新されていく。このとき、重要度レベルの大きい映像ほど高いフレームレートの動画が表示される。ユーザはマルチ画面表示を見ながら、視聴を希望する映像を選び出し、リモコン５０４を操作して決定することができる。

ステップＳ１０１において、リモコン５０４からの命令の解析を行い、その指示がマルチ画面表示を解除する命令であると判断すると、ステップＳ１０８において、リモコン５０４からの命令の解析を行い指示された内容を受信設定として参照する。

そして、ステップＳ１０４〜Ｓ１０６において指定の内容を設定し、ステップＳ１０１以降の動作を繰り返す。但し、ステップＳ１０４〜Ｓ１０６において設定内容に変更が無ければＣＰＵ２０７は設定を行わない。

以上述べたように本実施形態によれば、マルチ画面表示において、映像信号ごとに設定された重要度レベルに基づいて選択順序（更新順序）や表示フレーム数が適宜決定される。特に、映像の動き量やユーザの嗜好（好み）など各映像の内容に応じてフレームレートを変えたり、優先度によって更新頻度を変えたりすることで、映像選択のために必要な情報をユーザに対し適切に伝えることができる。従って、ユーザは視聴を希望する映像を容易に発見できるようになる。

なお、本実施形態では図４に示すように９個の子画面でマルチ画面表示を行ったが、画面の分割数は何個でも構わない。また、図９に示すように、番組情報記憶手段２０９に記憶されているＥＩＴ等の番組情報をもとにＣＰＵ２０７が作成した表示データを各画面上に画像データと共に表示することも好ましい。この場合は番組が何であるかを画面の更新時以外でも知ることができる。

マルチ画面表示における映像の配列順序は、チャンネル順、ユーザの好み順、ジャンル順など、種々のものが考えられる。

また、本実施形態ではマルチ画面表示を例示したが、本発明はザッピング表示における更新フレーム数（時間）の調整にも適用可能である。たとえば、リモコン５０４のチャンネル＋ボタンまたは−ボタンを押すことでチャンネルザッピング表示を指示できるようにし、ザッピングによる各チャンネルの更新フレーム数や選択順序を図６の各種テーブルに基づいて制御すればよい。

（第２の実施形態）
次に、本発明の第２の実施形態を説明する。上記第１の実施形態では９個の子画面全てでマルチ画面表示を行ったが、本実施形態では通常の視聴を行う親画面とマルチ画面表示を行う子画面とを表示する。

本実施形態の映像表示システムの全体構成は第１の実施形態のもの（図５）と同様である。

図１０に本実施形態のＩＲＤ１０００の構成例を示す。なお、図中、第１の実施形態のＩＲＤ５０１（図２）と同等の機能を有する部分には同一の符号を付している。以下、第１の実施形態と異なる部分を中心に説明する。

＜ＩＲＤの構成＞
本実施形態のＩＲＤ１０００は、放送受信手段Ｂ１００１、デマルチプレクサＢ１００２、ＭＰＥＧビデオデコーダＢ１００３、表示データ生成手段Ｂ１００４、ＭＰＥＧオーディオデコーダＢ１００５、Ｄ／Ａ変換手段Ｂ１００６を備える。

放送受信手段Ｂ１００１は、放送受信手段２０１と同様、アンテナ５０５からのデジタル放送信号を受信、選局してＴＳ信号を出力する。

デマルチプレクサＢ１００２は、放送受信手段Ｂ１００１から出力されるＴＳ信号をパケット識別子（ＰＩＤ）でフィルタリングし、各種データに分別する。

ＭＰＥＧビデオデコーダＢ１００３は、デマルチプレクサＢ１００２によって分別されたＭＰＥＧ２画像データを復号する。

表示データ生成手段Ｂ１００４は、ＭＰＥＧ２ビデオデコーダ２０３およびＭＰＥＧ２ビデオデコーダＢ１００３により復号された画像信号とＣＰＵ２０７により作られた表示データを元に描画した画像とをフレームメモリ２１１を用いて合成し、ＮＴＳＣ等のモニタ５０２の仕様に合った信号フォーマットに変換する。

ＭＰＥＧオーディオデコーダＢ１００５は、デマルチプレクサＢ１００２によって分別されたＭＰＥＧ２音声データを復号する。

Ｄ／Ａ変換手段Ｂ１００６は、ＭＰＥＧ２オーディオデコーダ２０５およびＭＰＥＧ２オーディオデコーダＢ１００５の復号結果をステレオ音声等の音声信号として外部に出力する。

以上のように、本実施形態のＩＲＤ１０００は、放送受信手段〜デマルチプレクサ〜ＭＰＥＧデコーダからなる処理系を２系統備えている。

衛星やＣＡＴＶや地上波等のデジタル放送を視聴するための処理は、第１の実施形態と同様である。すなわち、ユーザがリモコン５０４等を用いてチャンネル（サービスＩＤ）を指示すると、そのチャンネルの信号が放送受信手段２０１および放送受信手段Ｂ１００１で受信される。受信信号は、それぞれデマルチプレクサ２０２およびデマルチプレクサＢ１００２で分別され、それぞれ対応するブロックに渡され処理される。

ビデオ信号については、ＭＰＥＧ２ビデオデコーダ２０３、ＭＰＥＧ２ビデオデコーダＢ１００３でデコードされ、表示データ生成手段Ｂ１００４にて表示用の信号に変換される。オーディオ信号については、ＭＰＥＧ２オーディオデコーダ２０５、ＭＰＥＧ２オーディオデコーダＢ１００５でデコードされ、Ｄ／Ａ変換手段Ｂ１００６に送られる。Ｄ／Ａ変換手段Ｂ１００６は、２系統のオーディオ信号のどちらかをＤ／Ａ変換して左チャンネルと右チャンネルの信号として出力する。

ＩＲＤ１０００から出力された２系統の画像信号は、ケーブル５０３で接続されたモニタ５０２の画面に並べて表示される。そして一方の画像信号に対応した音声信号がモニタ５０２のスピーカから出力される。これによりユーザはリモコン５０４等で指示したチャンネルを視聴することができる。

＜マルチ画面表示＞
図１２は本実施形態のマルチ画面表示の構成例を示す。通常の視聴を行う親画面１２０１が１つと、マルチ画面表示を行う子画面１２０２〜１２０４が３つの計４画面に分割されている。

このようなマルチ画面表示を行う際、ＣＰＵ２０７は放送受信手段２０１、デマルチプレクサ２０２に対して、ユーザが選択したチャンネルを受信する旨の命令を出すとともに、放送受信手段Ｂ１００１、デマルチプレクサＢ１００２に対してはチャンネル切替え命令を出す。またＣＰＵ２０７は、表示データ生成手段Ｂ１００４にそれぞれの系統から送られてくる画像データをフレームメモリ２１１の個別の領域に一時蓄積するよう命令を出す。放送受信手段Ｂ１００１、デマルチプレクサＢ１００２に対しては、マルチ画面表示の対象となるチャンネル数（以下、受信可能番組数という。）だけ上記動作を繰り返す。これにより、親画面１２０１には番組メインが通常表示され、子画面１２０２〜１２０４には番組サブ１〜３がマルチ画面表示される。なお、受信可能番組数が子画面の数（３画面）より多い場合には、最初に子画面１２０２〜１２０４にそれぞれ番組サブ１〜３を表示し、次に番組サブ２〜４を表示するというように、表示するチャンネルを入れ替えていけばよい。

ユーザがある番組を視聴中に裏番組の確認をする場合、図１２のようなマルチ画面表示を行い、その番組は親画面１２０１にて引き続き視聴し、子画面１２０２〜１２０４に裏番組を表示させる方法がある。

マルチ画面表示を行う際のユーザ操作は、第１の実施形態と同様、リモコン５０４を用いて行う。まず、操作ボタン８０１の番組選択ボタンを押すことでマルチ画面表示選択モードに切替える。すると、図１２のような４画面分割したマルチ画面が表示される。

マルチ画面表示をやめて通常表示に戻す場合は、操作ボタン８０１の取消ボタンを押せばよい。これにより親画面１２０１に表示されている番組メインが単画面表示となる。

また、番組サブを単画面表示にする場合は、操作ボタン８０１の移動ボタンで番組選択マーカ１２０５を移動させて子画面１２０２〜１２０４のいずれかを選択し、操作ボタン８０１の決定ボタンを押せばよい。これにより通常表示モードとなり、選択された番組サブが単画面表示となる。

次に、マルチ画面表示を行うための画像処理に付いて説明する。

図１１に表示データ生成手段Ｂ１００４の構成例を示す。第１の実施形態の表示データ生成手段２０４と同等の機能を有する部分には同一の符号を付してある。

表示データ生成手段Ｂ１００４は、解像度変換手段Ｂ１１０１を備える。この解像度変換手段Ｂ１１０１は、ＭＰＥＧ２ビデオデコーダＢ１００３又はＣＰＵ２０７から入力された画像データをそれぞれ所望の大きさに変換する。その他の構成は表示データ生成手段２０４（図３）と同様である。

例えば、図１２のように４画面に分割して表示する際には、解像度変換手段３０１はＭ
ＰＥＧ２ビデオデコーダ２０３から入力される画像データを水平２／３に縮小するか、水平の両端を１／６ずつ切り落とす。画像合成手段３０２はその画像データをメモリコントローラ３０４経由でフレームメモリ２１１に一時蓄積する。他方、解像度変換手段Ｂ１１０１はＭＰＥＧ２ビデオデコーダＢ１００３から入力される画像データを１／９に縮小する。画像合成手段３０２はその画像データをメモリコントローラ３０４経由でフレームメモリ２１１に一時蓄積する。その際、画像データは表示箇所となる子画面に対応したアドレスに蓄積される。フレームメモリ２１１の蓄積内容の更新は画面毎の領域単位で行われる。

画像合成手段３０２はメモリコントローラ３０４を経由してモニタ５０２の仕様に合った信号フォーマットの同期タイミングでフレームメモリ２１１から４つの番組の画像データを読み出す。この画像データはＤ／Ａ変換手段３０３で表示用の信号に変換され、モニタ５０２にマルチ画面表示される。

メモリコントローラ３０４は２重のバッファを備えており、更新する番組（新たに書き込みを行う画像データ）の領域については、読み出しを行っている領域を保護しつつ書き込みを行う。これにより、更新中の番組の領域を読み出しても画像の乱れが起こらないように処理される。

マルチ画面表示における子画面１２０２〜１２０４の各映像の更新手順は第１の実施形態と同様の方法で行われる。

各チャンネルの重要度レベルは第１の実施形態と同様の内容を適用するが、最大割り当て可能数は受信可能番組数に応じて変更する。ただし、レベル４、レベル５と高いレベルにおいては同様の値を用いることが望ましい。

重要度レベルの決定方法に付いては、第１の実施形態と同様、ユーザの好みレベルF_LEVEL（嗜好情報）から決めたり、動きレベルM_LEVEL（動き量情報）から決めることが好ましい。

次に、図１３を参照して、子画面１２０２〜１２０４の具体的な更新処理について詳しく説明する。図１３はＣＰＵ２０７の動作フローを示している。ここでは、受信可能番組数が９である場合について説明する。よって、各種テーブルは全て第１の実施形態と同じもの（図６）を用いる。

ステップＳ１３０１において、ＣＰＵ２０７は、リモコン５０４からの命令の解析を行う。その指示がマルチ画面表示を行う命令であると判断すると、ステップＳ１３０２に処理を進める。

ステップＳ１３０２において、ＣＰＵ２０７は、表示繰り返しの初回であるかどうかを判断し、初回であったなら、ステップＳ１３０３に処理を進める。

ステップＳＳ１３０３において、ＣＰＵ２０７は、図６（Ａ−３）の初回更新手順テーブルを参照する。

ステップＳ１３０４において、ＣＰＵ２０７は、更新手順６０１から順番に指定のチャンネルに相当する周波数とＴＳＩＤを放送受信手段Ｂ１００１に設定する。設定内容に応じて放送受信手段Ｂ１００１は所望のチャンネルの番組のＴＳを出力する。

ステップＳ１３０５において、ＣＰＵ２０７は、指定のチャンネルに相当するＰＩＤと
指定のフレーム数をデマルチプレクサＢ１００２に設定する。指定のフレーム数はデマルチプレクサＢ１００２内部で計数するか、またはＣＰＵ２０７で計数を行う。設定内容に応じて、デマルチプレクサＢ１００２は画像データ、音声データ、その他データに分別し、画像データをＭＰＥＧ２ビデオデコーダＢ１００３に、音声データをＭＰＥＧ２オーディオデコーダＢ１００５に、その他データをＣＰＵ２０７に受け渡す。

ステップＳ１３０６において、ＣＰＵ２０７は、指定のフレーム数を表示データ生成手段Ｂ１００４に設定する。指定のフレーム数は表示データ生成手段Ｂ１００４内部で計数するか、またはＣＰＵ２０７で計数を行う。表示データ生成手段Ｂ１００４は指定のフレーム数分の画像をＭＰＥＧ２ビデオデコーダＢ１００３から受け取ると、解像度変換手段Ｂ１１０１で１／９の大きさに画像を縮小する。そして、画像合成手段３０２は各フレームの画像をフレームメモリ２１１に書き込むとともに、モニタ５０２の仕様に合った信号フォーマットの同期タイミングで表示用のデータをフレームメモリ２１１から読出し、Ｄ／Ａ変換手段３０３を経由してモニタ５０２に出力する。

そして、再びステップＳ１３０１に戻る。マルチ画面表示のままである限り、ＣＰＵ２０７はステップＳ１３０１〜Ｓ１３０６を繰り返し、初回更新手順テーブルの更新手順６０２〜６０７を実行する。

更新手順６０７が終わった後は、ステップＳ１３０２の判断処理にてステップＳ１３０７に分岐し、ＣＰＵ２０７は図６（Ａ−４）の更新手順テーブルを参照するようになる。更新手順テーブルの更新手順６０８〜６２８に関する処理も、上述したものと同様である。なお、更新手順６２８を実行した後は、再度更新手順６０８へ戻り、更新手順テーブルの内容を繰り返す。

上記処理によって、３個の子画面に表示されるチャンネルが入れ替わるとともに、各チャンネルの映像が指定フレーム数だけ順に更新されていく。このとき、重要度レベルの大きい映像ほど高いフレームレートの動画が表示される。ユーザはマルチ画面表示を見ながら、番組メインと番組サブのなかから視聴を希望する映像を選び出し、リモコン５０４を操作して決定することができる。

ステップＳ１３０１において、リモコン５０４からの命令の解析を行い、その指示がマルチ画面表示を解除する命令であると判断すると、ステップＳ１３０８において、リモコン５０４からの命令の解析を行い指示された内容を受信設定として参照する。

ステップＳ１３０９において、番組サブが選択されたのであれば放送受信手段２０１の設定をその番組の内容に変更し、マルチ画面表示の解除または番組メインが選択されたのであれば元の設定を維持する。放送受信手段２０１はその設定内容に応じて所望のチャンネルの番組のＴＳを出力する。

ステップＳ１３１０において、ＣＰＵ２０７指定のチャンネルに相当するＰＩＤをデマルチプレクサ２０２に設定する。設定内容に応じて、デマルチプレクサ２０２は画像データ、音声データ、その他データに分別し、画像データをＭＰＥＧ２ビデオデコーダ２０３に、音声データをＭＰＥＧ２オーディオデコーダ２０５に、その他データをＣＰＵ２０７に受け渡す。これにより選択された番組が単画面表示となる。

そして、ステップＳ１３０６において指定の内容を設定し、ステップＳ１３０１以降の動作を繰り返す。但し、ステップＳ１３０４〜Ｓ１３０６、Ｓ１３０９、Ｓ１３１０において設定内容に変更が無ければＣＰＵ２０７は設定を行わない。

以上述べたように本実施形態によれば、メインの番組を視聴しつつ複数の裏番組を同時に表示するというマルチ画面表示においても、上記第１の実施形態と同様の作用効果を奏することができる。

本発明の第１の実施形態に係る映像更新処理のフローチャートである。 本発明の第１の実施形態に係るＩＲＤの構成例を示す図である。 本発明の第１の実施形態に係る表示データ生成手段の構成例を示す図である。 本発明の第１の実施形態に係るマルチ画面表示の画面構成例を示す図である。 本発明の実施形態に係る映像表示システムの構成例を示す図である。 映像更新処理で参照されるテーブルの一例を示す図である。 映像更新処理で参照されるテーブルの一例を示す図である。 リモコンの構成例を示す図である。 マルチ画面表示の他の構成例を示す図である。 本発明の第２の実施形態に係るＩＲＤの構成例を示す図である。 本発明の第２の実施形態に係る表示データ生成手段の構成例を示す図である。 本発明の第２の実施形態に係るマルチ画面表示の画面構成例を示す図である。 本発明の第２の実施形態に係る映像更新処理のフローチャートである。

符号の説明

２０１ 放送受信手段
２０２ デマルチプレクサ
２０３ ＭＰＥＧ２ビデオデコーダ
２０４ 表示データ生成手段
２０５ ＭＰＥＧ２オーディオデコーダ
２０６ Ｄ／Ａ変換手段
２０７ ＣＰＵ
２０８ ＣＡＭ
２０９ 番組情報記憶手段
２１０ 操作手段
２１１ フレームメモリ
３０１ 解像度変換手段
３０２ 画像合成手段
３０３ Ｄ／Ａ変換手段
３０４ メモリコントローラ
４０１ 番組選択マーカ
５０１ ＩＲＤ
５０２ モニタ
５０３ ケーブル
５０４ リモコン
５０５ アンテナ
６０１〜６２８ 更新手順
８０１ 操作ボタン
８０２ 送信部
１０００ ＩＲＤ
１００１ 放送受信手段Ｂ
１００２ デマルチプレクサＢ
１００３ ＭＰＥＧ２ビデオデコーダＢ
１００４ 表示データ生成手段Ｂ
１００５ ＭＰＥＧ２オーディオデコーダＢ
１００６ Ｄ／Ａ変換手段Ｂ
１１０１ 解像度変換手段Ｂ
１２０１ 親画面
１２０２〜１２０４ 子画面
１２０５ 番組選択マーカ

Claims (4)

1. 複数のチャンネルにそれぞれ対応する複数の画像をマルチ画面で表示する映像表示方法であって、
   デジタル放送信号を受信する受信工程と、
   前記受信工程で受信されたデジタル放送信号から、前記複数のチャンネルのそれぞれの番組について、その番組のジャンルの情報を取得し、ジャンル毎の動き量が予め格納されたテーブルを参照して、動き量の大きいジャンルの番組に対応するチャンネルほど重要度レベルが高くなるように、各チャンネルの重要度レベルを決定する決定工程と、
   前記複数のチャンネルを１つずつ順次選択するとともに、選択したチャンネルの映像信号をデコードして出力する選択工程と、
   前記選択工程で順次デコードされて出力される各チャンネルの映像信号に基づく画像をメモリに蓄積するとともに、該メモリに蓄積される画像をチャンネル毎に順次読み出し、前記複数のチャンネルにそれぞれ対応する複数の画像を合成してマルチ画面で表示する処理を行う表示処理工程と、
   を含み、
   前記表示処理工程では、前記決定工程で決定された重要度レベルの高いチャンネルほど多くのフレームの画像を前記メモリに蓄積し、前記マルチ画面において、前記重要度レベルの高いチャンネルに対応する画像ほど頻繁に切り替えて表示する処理を行う
   ことを特徴とする映像表示方法。
2. 前記選択工程では、前記決定工程で決定された重要度レベルの高いチャンネルから順番に選択することを特徴とする請求項１記載の映像表示方法。
3. 複数のチャンネルにそれぞれ対応する複数の画像をマルチ画面で表示部に表示する映像表示制御装置であって、
   デジタル放送信号を受信して、前記複数のチャンネルのうち選択されたチャンネルの映像信号をデコードして出力する受信手段と、
   前記受信手段によって受信されたデジタル放送信号から、前記複数のチャンネルのそれぞれの番組について、その番組のジャンルの情報を取得し、ジャンル毎の動き量が予め格納されたテーブルを参照して、動き量の大きいジャンルの番組に対応するチャンネルほど
   重要度レベルが高くなるように、各チャンネルの重要度レベルを決定する決定手段と、
   前記複数のチャンネルを１つずつ順次選択するとともに、選択したチャンネルの映像信号をデコードして出力するように、前記受信手段を制御する選択制御手段と、
   前記受信手段により順次デコードされて出力される各チャンネルの映像信号に基づく画像をメモリに蓄積するとともに、該メモリに蓄積される画像をチャンネル毎に順次読み出し、前記複数のチャンネルにそれぞれ対応する複数の画像を合成してマルチ画面で前記表示部に表示する処理を行う表示処理手段と、
   を備え、
   前記表示処理手段は、前記決定手段で決定された重要度レベルの高いチャンネルほど多くのフレームの画像を前記メモリに蓄積し、前記マルチ画面において、前記重要度レベルの高いチャンネルに対応する画像ほど頻繁に切り替えて表示する処理を行う
   ことを特徴とする映像表示制御装置。
4. 前記選択制御手段は、前記決定手段で決定された重要度レベルの高いチャンネルから順番に選択することを特徴とする請求項３記載の映像表示制御装置。

Images