JPH08307809A

JPH08307809A - 映像信号検索システム

Info

Publication number: JPH08307809A
Application number: JP10966895A
Authority: JP
Inventors: Takeshi Tono; 豪東野; Tetsuo Tajiri; 哲男田尻
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1995-05-08
Filing date: 1995-05-08
Publication date: 1996-11-22

Abstract

(57)【要約】【目的】複数の映像を含んだ一連の映像符号化におい
て、映像データ管理の容易化、任意の映像の継続的な再
生高速化、映像製作者の意志を反映した映像符号化を実
現する。【構成】映像Ａが符号データ制御部２でフレ−ム数と
符号化処理の単位が揃うように余分なフレームの削除あ
るいはダミーフレームのバディングが行われる。符号デ
ータ制御部２でフレームを調整された映像データはビデ
オ信号、オーディオ信号に分離されてそれぞれビデオ符
号化部３とオーディオ符号化部４に入力され、符号化さ
れる。符号化部３，４の出力は多重化部５に入力されて
多重化符号データとなり、一時蓄積部６に蓄積される。
全ての映像が符号化され蓄積された後、検索・映像制御
情報付加部７において、各映像を検索するために必要な
情報と、フェードイン、フェードアウト、繰り返し再生
等の映像制御情報を作成し、各情報を前記符号データ中
に付加した後に一連の符号データ８が作成される。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、複数の映像信号を蓄積
し、要求に応じてインタラクティブに映像信号を再生す
る映像信号検索システムに関する。

【０００２】

【従来の技術】複数の映像を符号化する場合には、それ
ぞれ別の符号データファイルとし、各映像を表示した場
合には、それぞれの映像に対応する符号データファイル
をアクセスするシステムがある。

【０００３】また、予め複数の映像を一連の映像に編集
した後に符号化し、各映像を表示したい場合には、タイ
ムコード、フレーム番号等を参照してその映像にアクセ
スするシステムがある。

【０００４】

【発明が解決しようとする課題】しかし、映像毎に符号
データファイルを用いるシステムでは、映像の数が増え
た場合にはファイル管理が煩雑になり、また、アクセス
が発生する度にファイルオープン等のオーバーヘッドが
加わり、映像表示に要する処理時間が増加するという問
題があった。

【０００５】また、ＭＰＥＧに代表される映像の符号化
では、映像を構成するフレームあるいはフィールドを連
続した数個から十数個のグループを単位として符号化処
理を行い、該グループがアクセスの管理単位にもなって
いる。したがって、予め複数の映像を一連の映像に編集
した後に符号化する手法では、映像の区切れと該符号化
のグループが一致するとは限らず、一致していない場合
には任意の映像の最初からの表示には時間がかかり、更
に映像の更新が発生した場合にはその変更が困難であ
り、またある映像の検索情報が一連の符号データの最初
にのみ記録されている場合には、該映像をアクセスする
場合には常に最初の検索情報を読み込む必要があり、任
意の映像アクセスに時間がかかるという問題があった。

【０００６】また、映像制作者がスロー再生、繰り返し
再生等の制御方法も含めて映像表現を行いたい場合に
は、該映像を制御する専用アプリケーションを含めて作
成する以外方法がなく、その場合、映像データの汎用性
が失われるという問題があった。

【０００７】本発明の目的は、複数の映像を含んだ一連
の映像符号化において、映像データ更新等映像データ管
理の容易化、任意の映像の継続的な再生高速化、および
映像制作者の意志を反映した映像符号化を実現する映像
信号検索システムを提供することにある。

【０００８】

【課題を解決するための手段】請求項１の映像信号検索
システムは、複数の映像の符号化処理単位を合わせて複
数の映像を一連の符号データとして符号化する符号化手
段と、映像の検索と再生の制御に関わる情報を前記一連
の符号データ中に分散して挿入する検索・再生制御情報
付加手段とを有する。

【０００９】請求項２の映像信号検索システムは、符号
データ上で現在アクセス中の位置から最短位置にある映
像の検索に関わる情報にアクセスし、該情報を読み出す
検索情報アクセス手段と、読み出された該映像の検索に
関わる情報を元に再生要求された映像に高速にアクセス
し、これを検出する映像情報アクセス手段をさらに有す
る。

【００１０】請求項３の映像信号検索システムは、映像
再生中の符号データ中から再生制御に関わる映像制御情
報を検出すると、該情報に対応した映像制御を行う制御
手段をさらに有する。

【００１１】請求項４の映像信号検索システムは、映像
データの更新によって生じる、映像の検索に関わる情報
を自動的に更新する検索情報更新手段をさらに有する。

【００１２】請求項５の映像信号検索システムは、一連
の符号データ中に分散して挿入されている映像の検索と
再生の制御に関わる情報を再生前にサーチする検索・再
生制御情報サーチ手段と、該情報から、該映像の検索と
再生の制御に関わる情報テーブルを作成する情報テーブ
ル作成手段と、該情報テーブルから検索に関わる情報を
読み出し、該情報を元に、再生要求された映像信号に高
速にアクセスする映像信号アクセス手段をさらに有す
る。

【００１３】

【作用】請求項１，２，および５の発明は、一連の符号
データの中に複数の映像符号データと該映像の制御情報
を随所に記録することができるので、映像データの管理
が容易になり、かつ映像符号データ中の任意の場所から
任意の映像へのアクセスが高速化される。

【００１４】請求項３の発明は、映像データ中にその映
像制御情報を含めることで映像制作者の意志をデータに
反映することが可能となり、更に映像制御情報を変更す
るだけで映像データには影響を及ぼさずに再生方法を変
更できる。

【００１５】請求項４の発明は、請求項１によって作成
された符号データにおいて、そのデータの変更に伴い映
像制御情報が自動的に更新されるので、映像データの管
理が容易になる。

【００１６】

【実施例】次に、本発明に実施例について図面を参照し
て説明する。なお、図中同一機能を有するものは、同一
の番号を付け、重複を避ける。

【００１７】図１は請求項１をＭＰＥＧによる映像符号
データ作成に適用した映像信号検索システムの一例を示
すブロック図である。複数の映像データ１のうち、まず
映像Ａが符号データ制御部２でフレ−ム数と符号化処理
の単位が揃うように余分なフレームの削除あるいはダミ
ーフレームのバディング行われる。ただし、フレームバ
ディングの代りに多重化部５においてダミーデータによ
るバディングを行ってもよい。符号データ制御部２でフ
レームを調整された映像データはビデオ信号、オーディ
オ信号に分離されてそれぞれビデオ符号化部３とオーデ
ィオ符号化部４に入力され、符号化される。各符号化部
３，４の出力は多重化部５に入力されて多重化符号デー
タとなり、一時蓄積部６に蓄積される。続いて、次の映
像データ映像Ｂが同様に符号化され、一時蓄積部６に保
存される。全ての映像が符号化され蓄積された後、検索
・映像制御情報付加部７において、符号データ中で映像
データが記録されているアドレス等、各映像を検索する
ために必要な情報と、フェードイン、フェードアウト、
繰り返し再生等の映像制御情報を作成し、各情報を前記
符号データ中に付加した後に一連の符号データ８が作成
される。なお、符号データ制御部２、ビデオ符号化部
３、オーディオ符号化部４、多重化部５は請求項１の符
号化手段を構成し、検索・再生制御情報付加部７は請求
項１の検索・再生制御情報付加手段を構成している。

【００１８】図２は、図１中の符号データ制御部２で実
施される処理の内容を示したものである。図２（ａ）で
は映像データはその最後の区切りが符号化処理単位と一
致していない。ここでは、符号化処理単位を４フレーム
としている。したがって、符号データ制御部３では、最
後のフレームを削除することによって、符号化処理単位
と映像の区切りを揃えている。一方、図２（ｂ）では、
同様に符号化処理単位と映像の最後の区切りをバディン
グするダミーフレームを付加することによって、符号化
処理単位と映像の区切りを揃えている。

【００１９】図３は、図１のシステムで作成される符号
データの一例を示したものである。この図では、一連の
符号データ中に映像Ａ、映像Ｂ、映像Ｃの３個の映像デ
ータが含まれている。９，１０，１１は検索情報で、後
述するようにそれぞれ符号データ中での位置によってそ
の内容が異なる。検索情報の一例として映像名と該映像
の符号長、該検索情報からの各映像の先頭までの相対位
置が正負号付きで示されている。例えば、映像Ｃは符号
長がｗｗｗ（バイト）で、検索情報１０の然るべき位置
から映像Ｃの先頭までは後方にｖｖｖ（バイト）である
ことが示されている。したがって、映像Ａの途中をアク
セスしているときに映像Ｃの提示要求が発生した場合に
は、速やかに次の検索情報１０をアクセスし、検索情報
から映像Ｃまでの位置がｖｖｖ（バイト）先であること
を知って、高速かつ継続的に映像Ｃにアクセスが可能と
なる。

【００２０】また、映像を更新する際には、該更新に伴
って変化する検索情報が自動的に計算され、全ての検索
情報に反映される。

【００２１】なお、該検索情報は、必ずしも各映像の間
に挿入する必要はなく、図４に示すように、符号データ
中の任意の場所に存在できる。ただし、この場合、該検
索情報の挿入によって映像データの復号化に遅延発生等
の影響がないようにしなければならない。

【００２２】また、該検索情報は、該映像を使用するサ
ービスアプリケーションとの関係を示す情報を含める
等、様々な情報を用いることができる。

【００２３】図５は、請求項２の映像検索システムの一
例を示すブロック図である。ユーザはユーザ指示部２１
に対して指示を行う。ユーザからの指示がサーチ、ジャ
ンプ等映像検索に関するものである場合は、検索情報検
出部２２が符号データ中での現在のアクセス位置から最
短位置にある検索情報を検出し、検索情報読取部２３に
おいて該検索情報の内容が読み取られ、該検索情報を元
に映像情報検出部２４において、符号データ中のユーザ
が指示する映像を検出する。ユーザが指示した映像に対
する映像制御情報が存在すれば、映像制御情報読取部２
５において映像制御情報が読み取られ、該情報を元に復
号部２６を制御し、再生・表示部２８においてユーザが
指示した映像を表示する。一方、ユーザからの指示が、
現在再生中の一つの映像中での停止、高速再生等である
場合は、ユーザ指示受付部２１から直接、復号部２６を
制御し、再生・表示部２７においてユーザの指示にした
がって再生を行う。なお、検索情報検出部２２と検索情
報読取部２３は請求項２の検索情報アクセス手段を構成
し、映像情報検出部２４は請求項２の映像情報アクセス
手段を構成している。

【００２４】図６は、請求項３の映像信号検出システム
の一実施例で、図１中の検索・再生映像制御情報付加部
７で付加される映像制御情報の一例を示したものであ
る。図中、映像Ｇの後には映像Ｇを繰り返し再生するこ
とを指示する映像制御情報が付加されているので、映像
再生装置は、該映像情報にしたがって、映像Ｇの指定す
る場所に戻って再び再生することになる。図中、映像Ｈ
の最初に付加されている映像制御情報には映像Ｈの再生
開始時にフェードインすること、また映像Ｈの途中に付
加されている映像制御情報には、それ以降フェードアウ
トすることが示されている。図中、映像Ｉの最初には該
映像の逆方向再生禁止を指示する情報が付加されている
ので、ユーザは映像Ｉに対して逆方向に再生することは
不可能になる。このように、映像再生に対する情報を符
号データ中に付加することによって、映像制作者の意志
を反映することが可能となる。また、映像制御情報を変
更するだけで、映像データに影響を及ぼすことなく再生
方法を変更することが可能となる。

【００２５】このような制御を行うために、本実施例で
は、図示していないが、映像再生中に符号データ中から
再生制御に関わる映像制御情報を検出すると、該情報に
対応した映像制御を行う制御手段を有する。

【００２６】なお、前記検索情報と該映像制御情報を付
加する位置関係は、特に制限はない。

【００２７】図７は、請求項４の映像信号検索システム
の一例を示すブロック図である。まず、現在の符号デー
タおよび更新あるいは追加する映像データを符号データ
読込部３１で蓄積媒体から読み込む。ただし、更新の内
容が削除の場合は更新映像データの読み込みはない。続
いて映像データ更新部３２において映像データが更新さ
れ、該更新に伴って変化する符号データの容量あるいは
映像符号データにおける各映像の記録位置の変化等を容
量・変化量再計算部３３で計算し、該計算結果を元に検
索情報更新部３４において符号データ中に記録されてい
る各検索情報の更新を行う。以上、映像データの更新に
伴う全ての情報が更新された符号データを、符号データ
書込部３５において蓄積媒体に書き込んで更新作業が完
了する。なお、検索情報更新部３４は請求項４の検索情
報更新手段を構成している。

【００２８】図８は、請求項５の映像検索システムの一
例を示すブロック図である。検索に先立ち、予め検索・
映像制御情報読込部４２で複数の映像が含まれている一
連の符号データ中の各映像固有の検索および映像制御情
報を読み込み、該情報を元に検索・映像制御情報テーブ
ル作成部４３において各映像へのアクセスおよび映像制
御情報を記述した検索・映像制御情報テーブル４４が作
成される。ユーザはユーザ指示受付部４１に対して指示
する。ユーザからの指示がサーチ、ジャンプ等映像検索
に関するものである場合は、検索・映像制御情報テーブ
ル４４を参照し、該情報を元に映像情報検出部４５にお
いて符号データ中のユーザが指示する映像を検出し、読
み込む。さらに、テーブル４４中の映像制御情報を元に
復号部４６を制御しつつ符号データを復号し、再生・表
示部４７においてユーザが指示した映像を表示する。一
方、ユーザからの指示が、現在再生中の一つの映像中で
の停止、高速再生等である場合は、ユーザ指示受付部４
１から直接、復号部４６を制御し、再生・表示部４７に
おいてユーザの指示にしたがった再生を行う。なお、検
索・映像制御情報読込部４２、検索・映像制御情報テー
ブル作成部４３、検索・映像制御情報テーブル４４、映
像情報検出部４５はそれぞれ請求項５の検索・再生制御
情報サーチ手段、情報テーブル作成手段、情報テーブ
ル、映像信号アクセス手段を構成している。

【００２９】図９は、請求項５を適用したシステムで作
成される符号データの一例を示したものである。この図
では、一連の符号データ中に映像Ａ、映像Ｂ、映像Ｃの
３個の映像データが含まれている。５１，５２，５３は
それぞれ映像Ａ，Ｂ，Ｃ固有の検索・映像制御情報で、
各映像の名前、符号長、映像制御情報等不変情報で構成
される。該各映像固有の検索・映像制御情報を元に検索
・映像制御情報テーブル４４を作成する。テーブル４４
は符号データ中に存在するのではなく、本発明による映
像検索システムのメモリ等の上に存在する。テーブル４
４中では、前記各映像固有の情報を加えて、各映像にア
クセスするために必要な、一連の符号データ中での各映
像データが記録されている絶対位置が示されている。

【００３０】

【発明の効果】以上説明したように、本発明は、下記の
ような効果がある。（１）請求項１，２および５の発明は、一連の符号デー
タの中に複数の映像符号データと該映像の制御情報を随
所に記録することができるので、映像データの管理が容
易になり、かつ映像符号データ中の任意の場所から任意
の映像へのアクセスが高速化される。（２）請求項３の発明は、映像データ中にその映像制御
情報を含めることで映像制作者の意志をデータに反映す
ることが可能となり、更に映像制御情報を変更するだけ
で映像データには影響を及ぼさずに再生方法を変更でき
る。（３）請求項４の発明は、請求項１によって作成された
符号データにおいて、そのデータの変更に伴い映像制御
情報が自動的に更新されるので、映像データの管理が容
易になる。

【図面の簡単な説明】

【図１】請求項１をＭＰＥＧによる映像符号データ作成
に適用した映像信号検索システムの一例を示すブロック
図である。

【図２】図１の符号データ制御部２の処理の内容の一例
を示す図である。

【図３】図１のシステムで作成される符号データの一例
を示す図である。

【図４】検索情報を映像データの区切れによらず挿入し
た場合を示す図である。

【図５】請求項２の映像信号検索システムの一例を示す
ブロック図である。

【図６】請求項３の映像信号検索システムの一例で、符
号データ中に映像制御情報を付加した一例を示す図であ
る。

【図７】請求項４の映像信号検索システムの一例を示す
ブロック図である。

【図８】請求項５の映像信号検索システムの一例を示す
ブロック図である。

【図９】請求項５の映像信号検索システムによって作成
される符号データおよび検索・映像制御情報テーブル４
４の内容を示す図である。

【符号の説明】

１入力映像２符号データ制御部３ビデオ符号化部４オーディオ符号化部５多重化部６一時蓄積部７検索・再生制御情報付加部８符号データ９〜１１検索情報２１ユーザ指示受付部２２検索情報検出部２３検索情報読取部２４映像情報検出部２５映像制御情報読取部２６復号部２７再生・表示部３１符号データ読込部３２映像データ更新部３３容量・変化量再計算部３４検索情報更新部３５符号データ書込部４１ユーザ指示受付部４２検索・映像制御情報読込部４３検索・映像制御情報テーブル作成部４４検索・映像制御情報テーブル４５映像情報検出部４６復号部４７再生・表示部

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁶ 識別記号庁内整理番号ＦＩ技術表示箇所Ｈ０４Ｎ 7/173

Claims

【特許請求の範囲】

【請求項１】複数の映像信号を蓄積し、要求に応じて
インタラクティブに該映像信号の再生を行う映像信号検
索システムにおいて、複数の映像の符号化処理単位を合わせて複数の映像を一
連の符号データとして符号化する符号化手段と、映像の
検索と再生の制御に関わる情報を前記一連の符号データ
中に分散して挿入する検索・再生制御情報付加手段とを
有することを特徴とする映像信号検索システム。
【請求項２】符号データ上で現在アクセス中の位置か
ら最短位置にある映像の検索に関わる情報にアクセス
し、該情報を読み出す検索情報アクセス手段と、読み出
された該映像の検索に関わる情報を元に、再生要求され
た映像に高速にアクセスし、これを検出する映像情報ア
クセス手段をさらに有する請求項１記載の映像信号検索
システム。
【請求項３】映像再生中に符号データ中から再生制御
に関わる映像制御情報を検出すると、該情報に対応した
映像制御を行う制御手段をさらに有する請求項１記載の
映像信号検索システム。
【請求項４】映像データの更新によって生じる、映像
の検索に関わる情報を自動的に更新する検索情報更新手
段をさらに有する請求項１記載の映像信号検索システ
ム。
【請求項５】一連の符号データ中に分散して挿入され
ている映像の検索と再生の制御に関わる情報を再生前に
サーチする検索・再生制御情報サーチ手段と、該情報か
ら、該映像の検索と再生の制御に関わる情報テーブルを
作成する情報テーブル作成手段と、該情報テーブルから
検索に関わる情報を読み出し、該情報を元に、再生要求
された映像信号に高速にアクセスする映像信号アクセス
手段をさらに有する請求項１記載の映像信号検索システ
ム。