JP2005217609A - 映像情報再生装置 - Google Patents

Abstract

【課題】 画面に表示された後で、ユーザが２つのプログラムがＰｉｎＰで同時に見るべきものかどうか、ＰｉｎＰの主画面はどちらであるべきかを判断して制御する必要がある。
【解決手段】 ユーザＩ／Ｆ２０によりグループが選択されると、ビデオカメラにより撮影して得られた画像データからなる映像ファイルと、その映像ファイルの録画時間帯情報、その映像ファイルのグループＩＤ情報及びそのグループ内での映像ファイルの優先度を示すプライオリティ情報を含むシーケンスファイルとの組が、複数予め用意された映像情報源に対してバス３２を介してアクセスされ、選択されたグループに属するファイルの録画時間帯情報を取得して、録画時間帯テーブル２３が作成される。同時刻に再生されるべき映像ファイルが複数あるときには、優先度の最も高い映像ファイルの画像データを主画面で表示し、それ以外の優先度の低い映像ファイルの画像データを子画面で表示する。
【選択図】 図１

Description

本発明は映像情報再生装置に係り、特に複数のカメラにより撮影した動画像を撮影した時刻に従って同時に表示する映像情報再生装置に関する。

一般的には、ディジタルビデオカメラで取り込んだＡＶ信号は、記録時には、ＤＶフォーマットか、ＭＰＥＧ（Moving Picture Experts Group）４、ＭＰＥＧ２などで記録媒体に記録されることが多い。ここでは、ＭＰＥＧ２−ＴＳ（トランスポートストリーム）で記録されていることを前提に説明する。このようなＡＶ信号をＭＰＥＧ２−ＴＳに符号化して記録するに際し、複数番組（例えば複数カメラで撮影した映像）を一まとめにして多重して記録媒体に記録し、その記録媒体からＭＰＥＧ２−ＴＳを再生し復号化するときに、特定関係にあるものの自由な切り換え操作を可能にする映像情報再生装置が、従来より知られている（例えば、特許文献１参照）。

図６は従来の映像情報再生装置の一例のブロック図を示す。同図において、磁気テープやディスクに記録されたＭＰＥＧ−ＴＳディジタルデータは、公知のディジタルデータ読み出し装置１により再生されてデマルチプレクサ２に供給され、ここでＰＳＩパケット（システム情報）とオーディオ／ビデオパケット（ＡＶデータ）とに分けられる。ＰＳＩパケットはシステムデータ検出部３に供給され、ここでＴＳに含まれているプログラム数などが識別される。ここでは、一例として送られてきた信号がマルチプログラムで、映像信号が２種類（それぞれをａ０、ａ１と呼ぶものとする）送られてきたと仮定する。

データ転送制御部４は、デマルチプレクサ２により分離されて入力されたａ０、ａ１のオーディオ／ビデオパケット（ＡＶデータ）を、それぞれ別々の領域に分けて一時記憶バッファ５に書き込む。この再生装置は、いわゆるピクチャ・イン・ピクチャ（ＰｉｎＰ）の表示機能を持っており、データ転送制御部４は、この例では、主画面にａ０を、子画面にａ１を無条件で選択する。

データ転送制御部４は、一時記憶バッファ５のオーバーフロー／アンダーフローを防ぐためのコントロールと、各プログラムのデコーダへの振り分けを行っており、一次記憶バッファ５から読み出したプログラムａ０のＡＶデータは主画面用のデコーダ６に供給し、プログラムａ１のＡＶデータは子画面用のデコーダ７に供給する。

デコーダ６により復号された主画面用の画像データは、Ｄ／Ａ変換器８に供給されてアナログ映像信号に変換され、一方、デコーダ７により復号された子画面用の画像データは、Ｄ／Ａ変換器９に供給されてアナログ映像信号に変換されて、それぞれ映像ミキサ１０により主画面用の映像信号内に子画面用の映像信号が嵌め込まれるように合成された後、映像表示部１１で主画面の画像内に子画面の画像が嵌め込まれた状態で表示される。

次に、１つの場面を複数のビデオカメラで撮影して記録する場合について説明する。３つのビデオカメラａ、ｂ、ｃでそれぞれ独立して撮影されて得られた映像データは、３台の記録装置に別々に映像データファイルとして記録される。記録の際、映像データと一緒に、音声データや、記録の場所、記録した機器の情報などを含むデータも一緒のファイルになっている場合もあり得る。

これら３台の記録装置に別々に記録されている３つのデータファイルのそれぞれを、１つの再生装置で再生しながら、画面に表示する場合、例えば、ＰｉｎＰ表示機能として、親子画面（親１、子１）の表示機能があったとした場合、少なくとも最初のうちは、機器のデフォルト値によって、主画面、子画面のデータが決定されるため、最適な画面再生とはならず、それを解決するためには、ユーザが主画面用データ、子画面用データを選択しなければならない。

特開２００３−１９９０４７号公報

上記のような記録時に、複数プログラムに対して優先順位をつけるための仕組みをもたない従来の方法では、主画面、子画面の表示方法は一通りしかない。また、マルチプログラムであるａ０、ａ１がそもそも番組として関連付けがあるのかどうかも分からずに、ＰｉｎＰをしてしまっている。従って、実際の運用では、画面に表示された後で、ユーザが２つのプログラムがＰｉｎＰで同時に見るべきものかどうか、ＰｉｎＰの主画面はどちらであるべきかを判断して制御する必要がある。

本発明は、上記の点に鑑みなされたもので、ユーザが録画時に意識した優先順位付けに従い、最適なＰｉｎＰ画面構成で映像情報を再生し得る映像情報再生装置を提供することを目的とする。

上記の目的を達成するため、第１の発明は、ビデオカメラにより撮影して得られた画像データからなる映像ファイルと、その映像ファイルがいつ録画されたかを示す録画時間帯情報、その映像ファイルがどのグループに属するかを表すグループＩＤ情報及びそのグループ内での映像ファイルの優先度を示すプライオリティ情報を含むシーケンスファイルとの組が、複数予め用意された映像情報源に対してアクセスして、同時刻に再生されるべき映像ファイルが複数あるときには、優先度の最も高い映像ファイルの画像データを主画面で表示し、それ以外の優先度の低い映像ファイルの画像データを子画面で表示する映像情報再生装置であって、映像情報源の複数の映像ファイルのグループのうち、任意のグループを選択して映像情報源にアクセスするアクセス手段と、アクセス手段によりアクセスされた映像情報源から、選択されたグループの複数の映像ファイルにそれぞれ付随するシーケンスファイルが入力され、そのシーケンスファイル中の録画時間帯情報に基づき、複数の録画時間帯情報を格納した録画時間帯テーブルを作成するテーブル作成手段と、アクセス手段によりアクセスされた映像情報源から、選択されたグループの複数の映像ファイルを一時記憶する記憶手段と、録画時間帯テーブルに格納されている複数の録画時間帯情報に基づき、記憶手段から撮影時刻順に読み出された記憶映像ファイルのうち、同時刻で撮影された映像ファイルが複数あるときには、プライオリティ情報に基づき判定した最も優先順位の高い映像ファイルの画像データを主画面用画像データとしてデコードし、かつ、次に優先順位の高い映像ファイルから優先順位の順で、予め定めた子画面数分までの数だけ選択した映像ファイルの画像データを子画面用画像データとしてデコードし、同時刻で撮影された映像ファイルが一つのみの時には、その映像ファイルの画像データを主画面用画像データとしてデコードするデコード手段と、デコード手段によりデコードされた主画面用画像データを主画面で、子画面用画像データを子画面で表示する表示手段とを有する構成としたものである。

この発明では、映像情報源に対してアクセスして、同時刻に再生されるべき映像ファイルが複数あるときには、優先度の最も高い映像ファイルの画像データを主画面で表示し、それ以外の優先度の低い映像ファイルの画像データを子画面で表示するために、複数のビデオカメラにより別々に撮影して得られた画像データからなる映像ファイルのそれぞれに、その映像ファイルがいつ録画されたかを示す録画時間帯情報、その映像ファイルがどのグループに属するかを表すグループＩＤ情報及びそのグループ内での映像ファイルの優先度を示すプライオリティ情報を含むシーケンスファイルを付加し、その映像ファイルとシーケンスファイルの組を撮影時刻順に記憶手段から読み出し、同時刻で撮影された映像ファイルが複数あるときには、最も優先順位の高い映像ファイルの画像データを主画面用画像データとしてデコードし、かつ、次に優先順位の高い映像ファイルから優先順位の順で、予め定めた子画面数分までの数だけ選択した映像ファイルの画像データを子画面用画像データとしてデコードする。

また、上記の目的を達成するため、第２の発明は、複数のビデオカメラにより別々に撮影して得られた複数の画像データのそれぞれに、その画像データがいつ録画されたかを示す録画時間帯情報、その画像データがどのグループに属するかを表すグループＩＤ情報及びそのグループ内での画像データの優先度を示すプライオリティ情報を含むシステム情報が付加された、複数のプログラムのディジタルデータが予め記録された記録媒体から、ディジタルデータが順次に入力され、同時刻に再生されるべき画像データが複数入力されたときには、優先度の最も高い画像データを主画面で表示し、それ以外の優先度の低い画像データを子画面で表示する映像情報再生装置であって、入力されたディジタルデータから、画像データとシステム情報とを分離する分離手段と、分離手段により分離されたシステム情報中の録画時間帯情報に基づき、複数の録画時間帯情報を格納した録画時間帯テーブルを作成するテーブル作成手段と、分離手段により分離された画像データを一時記憶する記憶手段と、分離手段により分離されたシステム情報中のグループＩＤ情報及びプライオリティ情報と、録画時間帯テーブルからの録画時間帯情報とに基づき、任意に選択したグループに同時刻で撮影されたプログラムが複数あるときには、記憶手段から最も優先順位の高いプログラムの画像データを主画面用画像データとして読み出し、かつ、次に優先順位の高いプログラムから優先順位の順で、予め定めた子画面数分までの数だけ選択したプログラムの画像データを子画面用画像データとして読み出す転送制御手段と、読み出された主画面用画像データ及び子画面用データをそれぞれ別々にデコードするデコード手段と、デコード手段によりデコードされた主画面用画像データを主画面で、子画面用画像データを子画面で表示する表示手段とを有する構成としたものである。

この発明では、複数のプログラムのディジタルデータが予め記録された記録媒体から、ディジタルデータが順次に入力される映像情報再生装置において、同時刻に再生されるべき画像データが複数入力されたときには、優先度の最も高い画像データを主画面で表示し、それ以外の優先度の低い画像データを子画面で表示するために、ディジタルデータから分離されたシステム情報中のグループＩＤ情報及びプライオリティ情報と、録画時間帯テーブルからの録画時間帯情報とに基づき、任意に選択したグループに同時刻で撮影されたプログラムが複数あるときには、最も優先順位の高いプログラムの画像データを主画面用画像データとして読み出してデコードし、かつ、次に優先順位の高いプログラムから優先順位の順で、予め定めた子画面数分までの数だけ選択したプログラムの画像データを子画面用画像データとしてデコードする。

本発明によれば、ビデオカメラの撮影時に意識した任意の優先順位付けに従い、同時刻に再生されるべき複数の画像データについては、優先度の最も高い画像データを主画面で表示し、それ以外の優先度の低い画像データを子画面で表示するようにしたため、画面に表示された画像がピクチャ・イン・ピクチャの画面構成で見るべきかという判断を必要とすることなく、録画のタイミングに従って自動的にユーザーの意図した最適なピクチャ・イン・ピクチャの画面構成で画像を見ることができる。

次に、本発明を実施するための最良の形態について図面と共に説明する。いま、複数のビデオカメラにより撮影して得られた画像データ（映像情報）を再生することを考える。ここでは、複数のビデオカメラは、それぞれの機器の持つ時計が互いに合わせてあり、また、いつ記録されているかをデータとしてファイルの一部、または、別のファイルとして記録されるとする。ここでは、別ファイルに記録されているものとし、それをシーケンスファイルと呼ぶものとする。すなわち、シーケンスファイルには、録画時間帯、又は録画開始時刻＋録画時間、又は録画終了時刻＋録画時間からなる録画時間帯情報が含まれている。

シーケンスファイルは、ビデオカメラにより撮影して得られた映像情報からなる映像ファイルにそれぞれ１つずつ付随するものとし、どのグループに属するかを表す情報（グループＩＤ情報）や、そのグループ内でのファイルの優先度を示す情報（プライオリティ情報）が録画時間帯情報と共に含まれているとする。更に、本発明の映像情報再生装置は、各記録装置上にあるデータをインターネットや、無線又は直接カードメディア等の記録媒体を介しての移動によって、全て再生する事ができるものとする。

図１は本発明になる映像情報再生装置の第１の実施の形態のブロック図を示す。同図において、各ブロックは図示せぬマイクロプロセッサにより制御されており、以下で述べる処理はこのマイクロプロセッサにより行われるものである。レコーダＩ／Ｆ（インターフェイス）１５は、バス３２を介して再生機構に接続されている。なお、バス３２の替わりに、イーサネット（登録商標）や無線ＬＡＮ（ローカル・エリア・ネットワーク）、ＡＴＡ（ＡＴアタッチメント）、ＰＣカードなどに接続されていてもよい。

レコーダＩ／Ｆ１５は、バス３２に接続されたフィジカルＩ／Ｆ１６を介して、コマンドＩ／Ｆ１７、シーケンスファイルＩ／Ｆ１８及びデータファイルＩ／Ｆ１９に接続されている。コマンドファイルＩ／Ｆ１７は、レコーダＩＦ制御部２２からデータファイルの読み出しリクエストが入力される。シーケンスファイルＩ／Ｆ１８は、録画時間帯テーブル２３を作成したり、グループセレクタ２１に入力された再生映像ファイルの中から、ユーザＩ／Ｆ２０によりユーザが選択したグループに属するファイルを選択する。データファイルＩ／Ｆ１９は、一時記憶バッファ２４に再生データを供給する。

この映像情報再生装置は、図示しないマイクロプロセッサが再生可能な映像ファイルのシーケンスファイルから、グループＩＤを取得し、ＯＳＤ（オンスクリーンディスプレイ）部３０及び映像ミキサ２９を介してグループ名のリストなどを映像表示部３１の画面に表示して、ユーザに選ばせる事が可能である。なお、ＯＳＤ部３０にはシーケンシャルファイルＩ／Ｆ１８から直接にグループ名などのリストの情報を取得するようにしてもよい。

この本実施の形態の映像情報再生装置は、ユーザによりグループが選択されると、その選択されたグループに属するファイルを再生しようとする。この時の手順は、以下の通りである。

まず、選択されたグループに属するファイルの録画時間帯情報を取得し、図１のシーケンスファイルＩ／Ｆ１８が録画時間帯テーブル２３を作成する。この録画時間帯テーブル２３は、ランダム・アクセス・メモリ（ＲＡＭ）により構成されており、シーケンシャルファイルＩ／Ｆ１８が、テーブルに書き込むべきデータを検出したら、ＲＡＭの制御信号とデータを出力し、ＲＡＭ（録画時間帯テーブル２３）に書き込み動作を行う。

この録画時間帯テーブル２３には、例えば、図２に示すように、ファイルに含まれた映像データを記録の不連続点で区切り、それぞれについて、いつから記録したかを示す記録開始時刻（st_time i；ｉは番組に対応した整数）と、いつまで記録したかを示す記録終了時刻（end_time i；ｉは番組に対応した整数）とを対応付けて格納することにする。

いま、ユーザがユーザインターフェイス（Ｉ／Ｆ）２０を介して操作を行って、選択画面から再生するグループを選択すると、図１の映像情報再生装置のグループセレクタ２１は、選択されたグループに含まれるファイルのうち、シーケンスファイルＩ／Ｆ１８から入力される再生可能なファイルを選択する。例えば、ＰｉｎＰ（ピクチャ・イン・ピクチャ）で主画面の中に一つの子画面を挿入して２画面とする場合には、２画面分を選択する。

すなわち、グループセレクタ２１は、まず、プライオリティ情報を参照し、優先順位の最も高いものを主画面用とする。次に、子画面用としては、録画時間帯テーブル２３を参照し、主画面として選択したファイルについて今表示しようとしている部分の記録が行われたのと同時刻に記録が行われていたファイルの中から選択する。更に、選択可能なファイルが２つ以上あった場合には、プライオリティ情報を参照し、主画面用の次に優先順位の最も高いものから順に、子画面用として採用する。子画面を複数表示することを認める場合には、主画面に加えて挿入する子画面の限度の数までの数のファイルを優先順位の順に選択する。

次に、このファイルの選択処理の動作について図３のフローチャートと共に説明する。図３において、図１では図示を省略した図１の各ブロックを制御するマイクロプロセッサ又はグループセレクタ２１は、まず選択されたグループが単一の番組から成るか否かを判定する（ステップＳ１）。ここで、ファイルとして記録されていたり、ストリーム内で送られたりする一続きの動画像を「番組」と呼ぶことにする。単独のビデオカメラで撮影した場合や、既に編集されて単一の番組として保存されている場合は、グループの中に単一の番組しか無く、この場合にはデータファイルＩ／Ｆ１９を通して一時記憶バッファ２４に記憶されている、その番組ａ０の画像データをデコーダ２５へ送ってデコードし、更にＤ／Ａ変換器２７、映像ミキサ２９を経由して映像表示部３１で単一番組の表示を行う（ステップＳ２）。

単一の番組でないとステップＳ１で判定された場合には、次にグループの中の複数の番組の中での優先順位の情報があるか否かを判定する（ステップＳ３）。優先順位の情報が無い場合には、どの画像を主画面にすればよいか分からないので、ここでは或る一つの番組ａ０の画像データをデコーダ２５へ送ってデコードし、更にＤ／Ａ変換器２７及び映像ミキサ２９を経由して映像表示部３１で単一番組と同様の表示を行う（ステップＳ２）。

他方、優先順位の情報が有るとステップＳ３で判定された場合には、
（グループに属する番組の数）≦（利用できる子画面数＋１） （１）
なる不等式を満足するか否かを判定する（ステップＳ４）。上記の不等式を満足しないときには、同時に表示できる画面数よりも番組の数が多いため、画面に表示されない番組がある旨の表示を行って（ステップＳ５）、一時記憶バッファ２４に記憶されている画像データの中から主画面データ、子画面データとして優先順位の高いものから順にセレクトしてデコーダ２５、２６へ送る（ステップＳ６）。

上記（１）式の不等式を満足する場合は、グループに属する番組の数が同時に表示可能な画面数の範囲内に納まっているので、優先順位情報によりそれらの番組のうちの一つの画像データを主画面のデータとしてデコーダ２５へ送ると共に、他を子画面のデータとしてデコーダ２６へ送る（ステップＳ６）。

上記のステップＳ６の処理に続いて、現在時刻が再生対象のファイルのうちのいずれかのファイルの開始時刻か終了時刻であるか否かを判定する（ステップＳ７）。ここで、本発明においては、再生対象のファイルは、録画された時点から各ファイルで共通の一定の時間だけタイムシフトを行って撮影時に同時に撮影された部分は同時に表示しようとしているのであり、ここでいう「開始時刻」及び「終了時刻」とは、このタイムシフト分を見込んで再生を開始すべき時刻、及び再生を終了すべき時刻という意味である。

このステップＳ７の判定において、Ｎｏと判定されたときには、そのままの再生を続ける。Ｙｅｓと判定されたときには、主画面及び副画面として表示する画像データの選択を改めて行う。例えば、再生対象のファイルとして、ａ０、ａ１、ａ２の３つのファイルがあるとする。そして、ａ０、ａ１は現在、記録データがあって、主画面、子画面で再生中であり、ａ２についてはまだ開始時刻になっておらず、表示はされていないとする。このとき、次の２条件
・ａ０またはａ１の記録が途絶える時刻が来たとき（ｅｎｄ＿ｔｉｍｅ）
・ａ２の記録開始時刻が来たとき（ｓｔ＿ｔｉｍｅ）
の少なくともどちらか一方の条件を満足するときは、改めて主画面、子画面の選択をする必要があるので、前記ステップＳ７の判定においてＹｅｓと判定して、ステップＳ４に戻り主画面及び副画面として表示する画像データの選択を改めて行う。

次に、本実施の形態により、主画面と副画面が実際に自動的に切り換えられる様子の一例について図４と共に説明する。図４（Ａ）は、例えば運動会などのイベントにおいて、家族などの３人のメンバーのうち、一人がビデオカメラＡとしてカメラ一体型ＶＴＲなどの動画像撮影を主目的とした記録装置で、太線で示す期間のシーンＡ１、Ａ２を撮影し、他の２人はそれぞれが持つ携帯電話の動画記録機能をサブカメラＢ、Ｃとして用いて、それぞれ太線Ｂ１、Ｂ２で示す期間のシーン、及び太線Ｃ１、Ｃ２で示す期間のシーンを、互いに独立して撮影したことを模式的に示す。

ここでは、ビデオカメラの優先順位は、Ａ、Ｂ、Ｃの順であるとする。図４（Ａ）に示すように、ビデオカメラＡ、Ｂ、Ｃを待った各メンバーがそれぞれに独立して撮影しているので、３台すべてのビデオカメラＡ〜Ｃで撮影されている期間や、一部のビデオカメラでのみ撮影されている期間や、３台すべてのビデオカメラＡ〜Ｃで撮影されていない期間がある。

本実施の形態ではこの様な撮影画像を記録したファイルを集めて、再生時において、記録時の時間の流れに沿って自動的に切り換えるものである。なお、図１では子画面用デコーダとその出力側のＤ／Ａ変換器はそれぞれ一つであるが、この例では、２つの子画面を表示するため、子画面用デコーダとその出力側のＤ／Ａ変換器は通常はそれぞれ二つ並列に設けられる。

また、上記のビデオカメラＡ〜Ｃで撮影された３つの独立した映像ファイルは、レコーダＩＦ制御部２２により発行されたコマンドに従い、レコーダＩ／Ｆ１５経由でバス３２からアクセスされて、シーケンスファイルと共にレコーダＩ／Ｆ１５に取得される。この場合、例えば、外部に３つの映像ファイル及びシーケンスファイルを別々に格納しているフラッシュＲＡＭが３つあって、それらのチップセレクトを制御してデータを取得するようにしてもよいし、１つの記録媒体がアドレス分割されており、予め何らかの手段で記録媒体上の映像ファイル及びシーケンスファイルが格納されているアドレスが予め分かっている場合、又は予め決められている場合、アドレス制御により１つの記録媒体から３つの映像ファイル及びシーケンスファイルを再生してもよい。

このときの再生例を、図４（Ｂ）に示す。ここで、図４（Ａ）と（Ｂ）はタイムシフト分の差を除いた時間が横軸上で合致するように揃えて描かれている。図４（Ｂ）において、まず、ビデオカメラＡのみが撮影シーンＡ１を撮影していた期間Ｔ１について、ビデオカメラＡのシーンＡ１の画像を主画面として画面一杯に表示する。

次に、ビデオカメラＢによるシーンＢ１の撮影期間が始まると、ビデオカメラＡによるシーンＡ１の撮影期間との重畳期間Ｔ２では、シーンＡ１の画像に重畳して、シーンＢ１の画像を子画面として挿入してＰｉｎＰで表示する。そしてシーンＡ１が終わると、シーンＢ１が撮影されている期間Ｔ３では、シーンＢ１の画像を主画面として表示する。ここで、いきなり主画面がＡ１からＢ１に切り替わるのではなく、シーンＡ１が終わる少し前からシーンＢ１をズームアップしてＡ１をスムーズに置き換える様にしてもよい。なお、図４（Ｂ）では、同図（Ｃ）の説明図に示すように、主画面として表示する期間を、子画面として表示する期間よりも上側位置に図示し、また、ズームアウトは右下がりの斜線で、ズームインは右上がりの斜線で示すものとする。

シーンＢ１の撮影期間Ｔ３の中で、図４（Ｂ）に示すように、ビデオカメラＣによりシーンＣ１が撮影された期間Ｔ４があるが、この期間Ｔ４を再生する時間が来ると、主画面でＢ１の画像を表示すると共に子画面でＣ１の画像を挿入して期間Ｔ４の間表示し、シーンＣ１の終了と共に再びシーンＢ１の画像のみの表示となる。

シーンＢ１が終わると、そこからしばらくはどのビデオカメラでも撮影されていないので、次に撮影されたシーンＣ２の画像に間隔を空けずに直ちにつないで再生する。それからしばらくすると、シーンＢ２の方が僅かに早いものの、シーンＡ２とシーンＢ２がほぼ同時に始まる。この様な場合、一旦シーンＢ２の画像を主画面としてすぐに主画面がＡ２の画像に切り替わると見苦しくなるので、ある程度近接した時点から記録された場合は同時に記録が開始されたとみなして、優先順位の高いビデオカメラＡの画像を主画面とした後に、優先順位の低いビデオカメラＢ、Ｃの画像を子画面で表示する様にしている。

ここでは図４（Ｂ）に示す期間Ｔ５で主画面で表示していたシーンＣ２の画像は、期間Ｔ６の最初でシーンＡ２の画像を主画面として選択されると同時に、ズームアウトされて主画面がシーンＡ２の画像に移行するようにされている。また、シーンＡ２の画像より優先順位が低いシーンＢ２の画像は、こうしてシーンＡ２の画像を主画面とすることが完了した後に子画面として期間Ｔ６で表示する。以下同様に、同時に撮影されていたカメラ画像の優先順位に従って主画面と子画面が切り換えられて表示される。このように、本実施の形態では、主画面と子画面との表示方法は一通りではなく、多様な表示ができる。

なお、上記の例で述べた様な、複数のビデオカメラで僅かな時間差で記録が始まることは、多くの人が撮影したいと欲する事象が或る時点に起こった場合等において起きる可能性が高いものである。

次に、本発明の第２の実施の形態について説明する。図５は本発明になる映像情報再生装置の第２の実施の形態のブロック図を示す。同図中、図６と同一構成部分には同一符号を付し、その説明を省略する。図１に示した第１の実施の形態では、レコーダＩＦ制御部１５がバス３２を介してシーケンスファイルを読みに行くようにしているが、図５に示す第２の実施の形態は、複数のビデオカメラで撮影された映像情報が１本のディジタルストリームとして伝送されてきて、それを受信して画像として再生する装置である。

図５において、デマルチプレクサ２により分離されたＡＶデータとシステム情報のうち、ＡＶデータはデータ転送制御部４に供給され、システム情報は録画情報抽出部３５に供給される。ここで、録画情報抽出部３５に供給されるシステム情報には、ＰＳＩだけでなく録画情報も含まれ、録画情報抽出部３５で、その録画情報の内容が確認される。

録画情報としては、少なくとも以下のものがある。

・録画時間帯、又は録画開始時刻＋録画時間、又は録画終了時刻＋録画時間
・プログラム（番組）のグループ（同じグループ番号を持つプログラムは関連があり、同時に再生されることが望ましい、とする）
・プログラム間の優先順位情報
このうち、録画時間帯、又は録画開始時刻＋録画時間、又は録画終了時刻＋録画時間に相当する情報は、ランダム・アクセス・メモリ（ＲＡＭ）により構成されている録画時間帯テーブル３６に格納される。この録画時間帯テーブル３６は、予めプログラム毎に一定の領域が確保されており、録画時間帯は録画開始時刻、録画終了時刻に変換されてから格納されるものとする。

番組選択制御部３７は、プログラムグループ情報と、優先順位情報と、録画時間帯テーブル３６からの情報とから、ＰｉｎＰ画面で表示可能な画面数までのプログラムを選択し、データ転送制御部４に切替信号を送り、最優先プログラムの画像データは主画面用デコーダ６に、それ以外は子画面用デコーダ７に送られるよう制御する。以下、図６の再生装置と同様の動作が行われる。

これにより、本実施の形態によれば、第１の実施の形態と同様に、録画時に意識した優先順位に従い、録画のタイミングに従って、自動的に最適なＰｉｎＰ画面構成で撮影画像を見ることができる。

なお、本発明は以上の実施の形態に限定されるものではなく、例えば、図１、図５では、主画面用デコーダ２６、６とＤ／Ａ変換器２７、８とが接続されており、また、子画面用デコーダ２６、７とＤ／Ａ変換器２８、９とが接続され、更にこれらに映像ミキサ２９、１０、映像表示部３１、１１が接続される構成としたが、デコーダは、主画面用と子画面用を兼用するような構成も可能である。この場合は、主画面用のデコードと子画面用のデコードとを時分割に行い、それぞれのデコード結果をメモリに一時的に記憶させ、あらためてメモリから読み出しながら主画面と子画面の各画像データの合成を行ってから、画像表示部に出力する。

また、一つの子画面用デコーダにより例えば二つの子画面の画像を復号することも可能である。この場合、デコーダの性能が優れていて、ビデオの１／２フレーム期間に１フレーム分のデコードが可能であるものとすると、二つの子画面用の画像データを交互にデコードしてバッファに蓄積し、それぞれのフレームの出力タイミングに従って、Ｄ／Ａ変換器にデータを出力する。

本発明の第１の実施の形態のブロック図である。 図１中の録画時間帯テーブルの一例の説明図である。 図１の実施の形態のファイルの選択処理の動作説明用フローチャートである。 本発明により主画面と副画面が切り換えられる様子の一例を示す図である。 本発明の第２の実施の形態のブロック図である。 従来の映像情報再生装置の一例のブロック図である。

符号の説明

１ ディジタルデータ読み出し装置
２ デマルチプレクサ
４ データ転送制御部
５、２４ 一次記憶バッファ
６、２５ 主画面用デコーダ
７、２６ 子画面用デコーダ
１０、２９ 映像ミキサ
１１、３１ 映像表示部
１５ レコーダインターフェイス（Ｉ／Ｆ）
２０ ユーザインターフェイス（Ｉ／Ｆ）
２１ グループセレクタ
２２ レコーダＩＦ制御部
２３、３６ 録画時間帯テーブル

Claims (2)

1. ビデオカメラにより撮影して得られた画像データからなる映像ファイルと、その映像ファイルがいつ録画されたかを示す録画時間帯情報、その映像ファイルがどのグループに属するかを表すグループＩＤ情報及びそのグループ内での映像ファイルの優先度を示すプライオリティ情報を含むシーケンスファイルとの組が、複数予め用意された映像情報源に対してアクセスして、同時刻に再生されるべき前記映像ファイルが複数あるときには、優先度の最も高い映像ファイルの画像データを主画面で表示し、それ以外の優先度の低い映像ファイルの画像データを子画面で表示する映像情報再生装置であって、
   前記映像情報源の複数の映像ファイルのグループのうち、任意のグループを選択して前記映像情報源にアクセスするアクセス手段と、
   前記アクセス手段によりアクセスされた前記映像情報源から、選択されたグループの前記複数の映像ファイルにそれぞれ付随する前記シーケンスファイルが入力され、そのシーケンスファイル中の前記録画時間帯情報に基づき、複数の録画時間帯情報を格納した録画時間帯テーブルを作成するテーブル作成手段と、
   前記アクセス手段によりアクセスされた前記映像情報源から、選択されたグループの前記複数の映像ファイルを一時記憶する記憶手段と、
   前記録画時間帯テーブルに格納されている前記複数の録画時間帯情報に基づき、前記記憶手段から撮影時刻順に読み出された記憶映像ファイルのうち、同時刻で撮影された映像ファイルが複数あるときには、前記プライオリティ情報に基づき判定した最も優先順位の高い映像ファイルの画像データを主画面用画像データとしてデコードし、かつ、次に優先順位の高い映像ファイルから優先順位の順で、予め定めた子画面数分までの数だけ選択した映像ファイルの画像データを子画面用画像データとしてデコードし、同時刻で撮影された映像ファイルが一つのみの時には、その映像ファイルの画像データを主画面用画像データとしてデコードするデコード手段と、
   前記デコード手段によりデコードされた前記主画面用画像データを主画面で、前記子画面用画像データを子画面で表示する表示手段と
   を有することを特徴とする映像情報再生装置。
2. 複数のビデオカメラにより別々に撮影して得られた複数の画像データのそれぞれに、その画像データがいつ録画されたかを示す録画時間帯情報、その画像データがどのグループに属するかを表すグループＩＤ情報及びそのグループ内での画像データの優先度を示すプライオリティ情報を含むシステム情報が付加された、複数のプログラムのディジタルデータが予め記録された記録媒体から、前記ディジタルデータが順次に入力され、同時刻に再生されるべき前記画像データが複数入力されたときには、優先度の最も高い画像データを主画面で表示し、それ以外の優先度の低い画像データを子画面で表示する映像情報再生装置であって、
   入力された前記ディジタルデータから、前記画像データと前記システム情報とを分離する分離手段と、
   前記分離手段により分離された前記システム情報中の前記録画時間帯情報に基づき、複数の録画時間帯情報を格納した録画時間帯テーブルを作成するテーブル作成手段と、
   前記分離手段により分離された前記画像データを一時記憶する記憶手段と、
   前記分離手段により分離された前記システム情報中の前記グループＩＤ情報及びプライオリティ情報と、前記録画時間帯テーブルからの録画時間帯情報とに基づき、任意に選択したグループに同時刻で撮影されたプログラムが複数あるときには、前記記憶手段から最も優先順位の高いプログラムの画像データを主画面用画像データとして読み出し、かつ、次に優先順位の高いプログラムから優先順位の順で、予め定めた子画面数分までの数だけ選択したプログラムの画像データを子画面用画像データとして読み出す転送制御手段と、
   読み出された前記主画面用画像データ及び前記子画面用データをそれぞれ別々にデコードするデコード手段と、
   前記デコード手段によりデコードされた前記主画面用画像データを主画面で、前記子画面用画像データを子画面で表示する表示手段と
   を有することを特徴とする映像情報再生装置。
   
   

Images