JPH04345284A - 動画像検索装置 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ビデオテープやビデオ
ディスクまたは大容量記憶装置などから、コンピュータ
等のディスプレイに表示される動画の検索を行う動画像
検索装置に関する。

【０００２】

【従来の技術】従来、動画像を検索及び編集するような
場合で、検索及び編集の対象となる範囲が対象動画像（
映像）全域に渡ると考えられる時には、検索対象の動画
像（映像）を全域に渡って再生することにより編集点の
決定を行っている。

【０００３】また、他の従来技術としては特公昭６１−
４４４３７号公報に記載されているように再生中の画像
（駒）だけでなく、相前後する複数画像（駒）を実質的
に同時に同一画面上に並列的に表示することにより、編
集点の決定の容易化を行ったものがある。

【０００４】

【発明が解決しようとする課題】しかし、このような従
来の技術は、検索対象の動画像（映像）の量（再生時間
等）が多い場合や、編集点と編集点の間隔が広い場合に
は、効率的に編集作業を行うのに適していなかった。

【０００５】すなわち、動画像（映像）を全域に渡って
再生して検索を行う場合には、早送りで再生を行ったと
しても、目視により画像の内容を確認する必要があるの
で、再生速度を極端に速くすることはできず、検索対象
の動画像の量が多い場合には、検索に時間と手間が掛か
っていた。

【０００６】また、特公昭６１−４４４３７号公報に開
示されている方法においては、画像表示装置に表示され
るのは、時間的に連続する複数駒だけであるので、編集
点と編集点の間隔が広い場合には、目的の画像を検索す
るためにはやはり手間と時間がかる。

【０００７】本発明は、前記問題点を解決するために案
出されたものであって、検索対象の動画像の検索を迅速
かつ容易に行えるようにすることを目的とする。

【０００８】

【課題を解決するための手段】本発明の動画像検索装置
は、動画像信号を再生する画像信号再生装置と、該画像
信号再生装置により再生された複数フレーム分の動画像
データを時系列順に記憶する記憶手段と、該記憶手段に
記憶された動画像データのうち時間軸で見て編集対象の
フレームの近傍のフレームは短い時間間隔で時系列順に
読み出すとともに、編集対象のフレームから遠いフレー
ムは長い時間間隔で時系列順に読み出して表示装置に表
示する表示制御手段とを有する。

【０００９】

【作用】本発明の作用を具体的に例を挙げて図１を参照
して説明する。

【００１０】図１は本発明の動画像検索装置の原理的な
構成を示す説明図である。この動画像検索装置は、コン
ピュータ１と、このコンピュータ１に接続された画像信
号再生装置２とから構成されている。コンピュータ１に
は、このコンピュータ１に接続された機器、すなわち画
像信号再生装置２を操作するための機器操作入力手段３
と、この機器操作入力手段３による操作入力を画像信号
再生装置２に伝送する通信手段４と、画像信号再生装置
２からの映像信号を前記コンピュータ１が取り扱える情
報に変換する信号変換手段５と、変換された情報を保存
する大容量記憶装置６と、この大容量記憶装置６中の読
み出し位置を設定する手段７と、大容量記憶装置６の読
み出し位置設定手段７により設定された位置から画像情
報を読み出す手段８と、大容量記憶装置６中から読み出
された情報若しくは前記信号変換手段５により変換され
た情報を画像情報に変換する手段９と、画像情報に変換
されたものを表示する表示装置１０と、表示されたもの
を選択する手段１１とを設けている。

【００１１】次に、作用について説明する。

【００１２】機器操作入力手段３からの操作指示は、通
信手段４を介して画像信号再生装置２に供給され、画像
信号再生装置２の再生動作が開始される。画像信号再生
装置２からの映像信号は、コンピュータ１で取り扱える
ように信号変換手段５でＡ／Ｄ変換等の処理が行われた
後、ランダムアクセス可能な大容量メモリ等の大容量記
憶装置６に保存される。

【００１３】次に、読み出し位置設定手段７により主再
生画面と副再生画面が設定される。主再生画面とは、検
索の中心となる一つの画像を表示する画面を意味し、表
示装置１０において比較的大きく表示されるように設定
される。また、副再生画面とは、主再生画面の画像とは
時間的に前後し且つ主再生画面の画像と異なった時間間
隔で表示される複数の画像を表示する画面を意味し、主
再生画面が表示される画面と同一画面上に縮小して並べ
て表示されるように設定される。このような設定された
形式に従って読み出し手段８により読み出された情報は
、変換手段９により画像情報に変換された後、表示装置
１０に供給され、表示装置１０の表示画面上には、前記
設定された形式に従って主再生画面と副再生画面とが表
示される。

【００１４】そして、表示装置１０により表示された副
再生画面の中から目的とする画面を選択手段１１により
選択することにより、選択された画面が主再生画面とし
て設定し直される。

【００１５】なお、画像信号再生装置２からの映像信号
は、信号変換手段５から直接変換手段９を介して表示装
置１０に供給することもでき、この場合は、画像信号再
生装置２からの映像信号が、表示装置１０の表示画面に
そのまま表示される。

【００１６】

【実施例】以下、図面を参照しながら、実施例により本
発明の特徴を具体的に説明する。図２は、本発明が適用
される動画像検索装置の全体構成を模式的に示すブロッ
ク図である。この動画像検索装置は、コンピュータ１と
、このコンピュータ１に接続された被制御機器としての
ＶＴＲ（Ｖｉｄｅｏ　　Ｔａｐｅ　　Ｒｅｃｏｒｄｅｒ
）、レーザーディスク（登録商標）等の画像信号再生装
置２とから構成されている。コンピュータ１においては
、バス１２に対してＣＰＵ（中央処理装置）１３及びメ
モリ１４が接続されており、更に、バス１２には、キー
ボード，マウス等の入力装置１５、ＣＲＴ（陰極線管）
ディスプレイ等の出力装置１６、ランダムアクセス可能
な大容量記憶装置１７が、それぞれインタフェース１８
〜２０を介して接続されている。

【００１７】また、バス１２と画像信号再生装置２との
間には、画像信号再生装置２を操作する機器操作入力手
段として機能する入力装置１５からの操作入力を、接続
された機器、すなわち画像信号再生装置２に伝送するＲ
Ｓ−２３２Ｃ等の通信インタフェース２１と、画像信号
再生装置２からの画像信号をコンピュータ１が取り扱え
るディジタル信号に変換するための、Ａ／Ｄ変換器等の
信号変換インタフェース２２とが接続されている。なお
、コンピュータ１に接続される機器（この場合、画像信
号再生装置２）は、一般に使用される映像機器であり、
単独で使用することができるものである。また、コンピ
ュータ１はワークステーションを構成している。

【００１８】次に、上述の動画像検索装置における検索
動作について、図３，図４のフローチャートを参照して
説明する。

【００１９】まず、素材となる映像信号の記録されたビ
デオテープ等の素材テープの内容を、画像信号再生装置
２により再生する（ステップ１０１）。この再生操作は
、例えば、入力装置１５からの指示により行われる。 すなわち、入力装置１５から入力された指示がＣＰＵ１
３により解釈され、この指示が画像信号再生装置２の再
生開始の指示であるときは、ＣＰＵ１３から画像信号再
生装置２へ再生開始を指示する制御信号が通信インタフ
ェース２１を介して送信され、画像信号再生装置２が再
生動作を開始する。或いは、画像信号再生装置２に本来
備わっている機器操作入力手段を操作して画像信号を再
生する。

【００２０】次に、再生された映像信号をＡ／Ｄ変換器
等の信号変換インタフェース２２によりコンピュータ１
が取り扱える信号に変換し（ステップ１０２）、ヘッダ
付加等のフォーマットを行い（ステップ１０３）、変換
された信号の情報を、映像信号の１フレーム分を一つの
記録単位として大容量記憶装置１７に記録する（ステッ
プ１０４）。以下記録された情報の集まりを「映像信号
ファイル」と呼ぶ。なお、ＮＴＳＣ（Ｎａｔｉｏｎａｌ
　　Ｔｅｌｅｖｉｓｉｏｎ　　Ｓｙｓｔｅｍ　　Ｃｏｍ
ｍｉｔｔｅｅ）方式の映像信号の場合、１フレームが１
／３０秒に相当する。

【００２１】次に、入力装置１５からの指示に基づき、
読み出し位置の設定を行う（ステップ１０５）。読み出
し位置の設定とは、検索の中心となる画像が表示される
主再生画面と副再生画面の各画面間の時間的関係をどの
ように設定するかを意味する。

【００２２】この読み出し位置の設定の具体例を図５を
参照して説明する。なお、図中の四角形は素材となる画
像の映像記録単位３１を表し、各映像記録単位３１内に
示されている番号は、主再生画面３２をフレーム０番と
した場合の、主再生画面３２からの相対記録単位（フレ
ーム、駒）数である。また、３３ａ〜３３ｅは副再生画
面を示す。

【００２３】例えば、副再生画面として、主再生画面近
傍は１／３０（秒／フレーム）で５フレーム表示（副再
生画面３３ａ）、主再生画面から前後１０秒目近傍は１
／１０（秒／フレーム）で３フレーム表示（副再生画面
３３ｂ，３３ｃ）、主再生画面から前後１分目近傍は１
／２（秒／フレーム）で２フレーム表示（副再生画面３
３ｄ，３３ｅ）というように、主再生画面近傍は時間間
隔が細かく、遠方はまばらに表示するように設定する。 また、主再生画面から±１０分、±１５分、±２０分、
・・・離れた時点近傍の３００フレームおきの１フレー
ム分だけが表示される（図６の副再生画面３３ｆ参照）
。なお、例えば、１／１０（秒／フレーム）とは、３フ
レームおきに表示することを意味する。

【００２４】次に上記した設定に従って、大容量記憶装
置１７から該当箇所の画像データを順次読み出して出力
装置１６に供給する。画像データを出力装置１６に供給
する際には、出力装置１６の表示画面上で表示される画
面の大きさに応じて縮小され、表示される画面の位置に
応じて出力装置１６のフレームメモリの所定アドレス位
置に書き込まれる。なお、大容量記憶装置１７からの画
像データの読み出し及び出力装置１６への出力は、通常
の動画再生が可能な程度の高速で、すなわち１／３０秒
以下で行われる。大容量記憶装置１７としては半導体メ
モリを使用することが考えられるが、これに限らず高速
動作可能なものであれば、どのようなものでも使用する
ことができるこれにより、図６に示すように、出力装置
１６の再生映像表示画面３４上には、比較的大きな表示
面積を有する一つの主再生画面３２と、縮小された複数
の副再生画面３３ａ〜３３ｆとが同時に表示される（ス
テップ１０６）。

【００２５】すなわち、副再生画面３３ａには主再生画
面３２に表示されている画像を中心として連続した５フ
レーム分だけ表示され、副再生画面３３ｂ，３３ｃには
検索中心から±１０秒離れた時点近傍の３フレームおき
の３フレーム分だけ表示され、副再生画面３３ｄ，３３
ｅには検索中心から±１分離れた時点近傍の１５フレー
ムおきの２フレーム分だけ表示され、副再生画面３３ｆ
には検索中心から±１０分、±１５分、±２０分、・・
・離れた時点近傍の３００フレームおきの１フレーム分
だけが表示される。

【００２６】したがって、主再生画面３２に表示された
フレームに時間的に近い位置にあるフレームの画像は短
いフレーム間隔で表示され、主再生画面３２に表示され
たフレームから時間的に遠い位置にあるフレームの画像
は長いフレーム間隔で表示される。したがって、注目し
ている画面に対して時間軸上で近傍にある副再生画面は
、比較的連続的に表示されるので画像の内容を詳しく見
ることができる。更に、注目している画面に対して時間
軸上で遠くにあるフレームの画像も不連続的にではある
が同時に表示されるので、編集点と編集点との間隔が広
いような場合でも素材画像の内容の概略を知る事ができ
、検索作業を容易に行うことができる。

【００２７】ここで副再生画面３３ａ〜３３ｆの中のい
ずれか一つの画面が選択された場合には（ステップ１０
７）、選択された副再生画面を主再生画面に表示する。 副再生画面の選択は、入力装置１５に設けられたマウス
、ジョイスティック、カーソルキー、キーボード等から
の入力で選択することができる。例えば、再生映像表示
画面３４上にマウスカーソル３５を表示しておき、入力
装置１５に設けられたマウス（図示せず）を操作してマ
ウスカーソル３５を目的とする副再生画面上に重ねてマ
ウスボタンを押すことにより所望の副再生画面を選択で
きる。

【００２８】編集の対象となる画像の各フレームには、
個別のフレーム番号が付されており、選択された副再生
画面のフレーム番号の画像データが大容量記憶装置１７
から読み出されて再生映像表示画面３４上の主再生画面
３２位置に表示される（ステップ１０８）。また、この
新たに選択された画像のフレーム番号を中心とした前後
の複数フレームの画像データが大容量記憶装置１７から
読み出されて再生映像表示画面３４上の副再生画面３３
ａ〜３３ｆ位置に表示される（ステップ１０９）。

【００２９】次に、操作者は、再生映像表示画面３４に
表示されている画面を見ながら編集点（始点及び終点）
を決定し、入力装置１５を使用して編集点を前記コンピ
ュータ１に入力する（ステップ１１０）。

【００３０】次に、選択された編集点の情報を大容量記
憶装置１７に保存する（ステップ１１１）。

【００３１】前記ステップ１０１〜１１１の操作を編集
するファイルが終わるまで繰り返して（ステップ１１２
）各編集点の情報が格納された「編集情報ファイル」を
作成する。

【００３２】次に、上記「編集情報ファイル」を参照し
つつ大容量記憶装置１７から「映像信号ファイル」中の
記録単位を、順次に読み出すことにより、操作者が編集
した動画像ファイルの内容を画面に表示することができ
る（ステップ１１３）。

【００３３】

【発明の効果】以上述べたように、本発明によれば、検
索の中心となる画像の他に、中心画像とは時間的に前後
し、しかも時間軸上の間隔が異なる画像を表示するよう
にしたので、検索の対象となる画像の量が多かったり編
集点と編集点との間隔が広いような場合でも、迅速かつ
容易に画像の編集点の決定を行うことができる。

【図面の簡単な説明】

【図１】　　本発明の動画像検索装置の原理的な構成を
示す説明図である。

【図２】　　本発明が適用される動画像検索装置の全体
構成を示すブロック図である。

【図３】　　図２に示す動画像検索装置における動作を
説明するためのフローチャートの第１の部分である。

【図４】　　図２に示す動画像検索装置における動作を
説明するためのフローチャートの第２の部分である。

【図５】　　検索の対象となる画像と、主再生画面及び
副再生画面との関係を説明するための模式図である。

【図６】　　図２に示す動画像検索装置における主再生
画面及び副再生画面の表示例を示す説明図である。

【符号の説明】

１　　コンピュータ、２　　画像信号再生装置、３　　
機器操作入力手段、４　　通信手段、５　　信号変換手
段、６　　大容量記憶装置、７　　読み出し位置設定手
段、８読み出し手段、９　　変換手段、　　１０　　表
示装置、１１　　選択手段、　　１２バス、１３　　Ｃ
ＰＵ、　　１４　　メモリ、　　１５　　入力装置、　
　１６　　出力装置、　　１７大容量記憶装置、　　１
８〜２０　　インタフェース、　　２１　　通信インタ
フェース、　　２２　　信号変換インタフェース、　　
３１　　映像記録単位、　　３２主再生画面、３３ａ〜
３３ｆ　　副再生画面、　　３４　　再生映像表示画面
、　　３５　　マウスカーソル

Claims (1)

【特許請求の範囲】
1. 【請求項１】　　動画像信号を再生する画像信号再生装
   置と、該画像信号再生装置により再生された複数フレー
   ム分の動画像データを時系列順に記憶する記憶手段と、
   該記憶手段に記憶された動画像データのうち時間軸で見
   て編集対象のフレームの近傍のフレームは短い時間間隔
   で時系列順に読み出すとともに、編集対象のフレームか
   ら遠いフレームは長い時間間隔で時系列順に読み出して
   表示装置に表示する表示制御手段とを有する動画像検索
   装置。