JPH0581347A - 画像検索方法 - Google Patents

Abstract

(57)【要約】 （修正有） 【目的】 静止画像データ及び動画像データを一緒に検
索できるようにすると共に、迅速な、且つ、精度の良い
検索を可能とする。 【構成】 縮小画像作成部３２で静止画像データ、及び
動画像データの代表画像を作成する。作成代表画像を、
静止画的表示器１８Ｂでビットマップディスプレイ１８
Ｅ上に並べて表示する。選択器１８Ｆで動画像の代表画
像が選択された場合、動画的表示器１８Ｃで一定間隔で
こま落しした縮小画像を表示し、動画的表示を行う。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像検索方法に係り、
特に、限定された視聴者を対象とする映像作品、例えば
ビジネスニュース等のニュース番組やそのニュース番組
のパッケージソフトを製作する際に用いるのに好適な、
複数の静止画像データ及び動画像データのうち所望の画
像データを検索する画像検索方法に関する。

【０００２】

【従来の技術】従来、ニュース番組等の映像の製作は、
放送業界等のマスメディアにおいて不特定多数の視聴者
を対象として配信することを目的に行われていた。

【０００３】放送業界では、通常、地上局又は放送衛星
を用いて前記映像番組を配信している。

【０００４】しかしながら、今日、限定された対象に対
する映像の配信の要請が高まり、通信衛星を利用してビ
ジネスニュース番組等のビジネス映像を配信する要請が
生じた。

【０００５】このビジネス映像は次のような特徴を有し
ている。

【０００６】即ち、このビジネス映像は、不特定多数の
視聴者を対象としたマスメディアではなく、通信衛星を
利用して特定の契約者のみに配信するものである。従っ
て、製作費の削減が必要となる。

【０００７】又、通信衛星による即時的な映像収集及び
配信が特徴であり、関連する資料映像の収集と送出ファ
イルの編集を即座に行う必要がある。従って、製作時間
の短縮化が重要となる。

【０００８】更に又、視聴者は限定されたビジネスマン
であり、問題解決のためのより専門的な情報の提供が要
請される。従って、新規な情報に関連した参考となるい
わゆる横の情報を集め、幅を持たせた情報提供が必要と
なる。

【０００９】前記のビシネス映像等の映像番組を製作す
るには、静止画像データ、動画像データ、音声データ
等、多量且つ多種の映像資料が必要となる。

【００１０】なお、静止画像は静止した各一枚の映像を
いい、その記録媒体には写真原稿がある。又、動画像
は、連続したこま（フレーム）を順次表示して画像に動
きを出したもので、その記録媒体にはビデオテープ、映
画フィルムがある。又、音声は、主に動画像の背景の音
があり、その記録媒体には動画像と同様のビデオテープ
又はオーディオ用テープがある。

【００１１】従来、映像番組の製作においては、製作の
都度、静止画像データ、動画像データ、音声データを記
録収集する。又、データを蓄積するとしても各データを
相互に関連なく蓄積しそれらを別々に検索していた。

【００１２】例えば、動画像データは、ビデオテープラ
イブラリに蓄積し、その動画像データをタイトルインデ
ックスで検索する場合があった。

【００１３】前記のような映像資料を利用するため、静
止画像データ又は動画像データを選択する必要が生じ
る。

【００１４】この場合、従来は、使用者がこれら画像デ
ータ自体を例えばビデオライブラリーから取寄せて画像
そのものを再生し実際に見て検索するときがあった。

【００１５】又、画像データについて、当該動画像の内
容を説明した文章、又は、その画像に関係が深い単語を
集めたものを検索対象とし、それら検索対象を読んだ
り、それら対象中に指定した単語（キーワード）がある
か否かにより、目的の動画像データを検索していた。

【００１６】又、動画像データはその中の１こま（フレ
ーム）の画像を静止画像として使用できるため、静止画
像を検索するときに併せて、動画像の１こま１こまの検
索も望まれる場合がある。

【００１７】

【発明が解決しようとする課題】しかしながら、前記従
来技術のように、静止画像データ及び動画像データを検
索したのでは、次のような問題点が生じる。

【００１８】前記のように画像そのものを再生し、検索
したのでは、再生に手間及び時間がかかる。特に、動画
像データではその傾向が強く、短時間に多くのデータの
確認ができない。又、動画像データにおいて、ビデオテ
ープライブラリー中にビデオテープが保管されている場
合にビデオテープが既に使用されていた場合、やはり、
内容の確認ができない。

【００１９】又、画像データを説明した文章や単語を用
いて検索する場合、何の画像かという意味的なものを表
現できるが、画像、特に動画像の内容を漏れなく文章や
単語で表現することは困難である。又、文章や単語の入
力作業は自動化できず、入力者による偏りが発生する。
従って、検索が不完全となる。

【００２０】又、従来は、動画像データ及び静止像デー
タはそれぞれ個別に蓄積されており、各データを併せて
検索する際には、検索を静止画像毎、動画像毎に行う必
要があり、同様の検索を複数回行わなければならなかっ
た。従って、検索が繁雑であり、時間がかかるという問
題がある。

【００２１】前記の問題点は、前記のような特定の視聴
者を対象とした映像番組を製作する際の、製作者の削
減、製作時間の短縮化、及び幅広い情報の提供という要
請を実現する障害となっていた。

【００２２】本発明は、前記従来の問題点を解消すべく
なされたものであって、静止画像データ及び動画像デー
タを一緒に検索できるようにし、又、検索時間の短縮化
を図り、検索の精度の向上を図り得る画像検索方法を提
供することを目的とする。

【００２３】

【課題を達成するための手段】本発明は、図１にその要
旨を示すように、静止画像データ及び動画像データのう
ち所望の画像データを検索する方法であって、静止画像
データ及び動画像データから、当該画像データを代表す
る代表画像を作成する工程と、作成代表画像を並べて画
面に表示する工程と、動画像データの代表画像中の所望
のものを選択する工程と、動画像データの代表画像が選
択された場合に、選択代表画像で代表された動画像デー
タの全てのこま、又は、一部のこまの画像を連続的に画
面に表示する工程とを含むことにより、前記課題を解決
するものである。

【００２４】又、本発明において、前記代表画像を並べ
て画面に表示する工程では、更に、表示する代表画像
が、静止画像データの代表画像か、又は、動画像の代表
画像かの区別を画面に表示することができる。

【００２５】又、本発明において、前記動画像データの
全てのこま又は一部のこまの画像を連続的に画面に表示
する工程では、選択された代表画像が表示されていた位
置に、当該代表画像と大きさで当該代表画像で代表され
た動画像データの全てのこま又は一部のこまの画像を連
続的に表示することができる。

【００２６】

【作用】本発明においては、静止画像データ及び動画像
データの代表画像を並べて画面に表示する。

【００２７】従って、静止画像データ及び動画像データ
を同一画面上で見ながら一緒に検索できる。よって、静
止画像データと動画像データを別々に検索する際の煩雑
さを解消でき、迅速な検索を可能とする。

【００２８】又、入力作業が文章や単語の入力によらず
に画像の処理により行えるため、自動化できる。従っ
て、入力者による偏りが発生しない。よって、検索の精
度が向上する。

【００２９】又、動画像データについては、全てのこ
ま、又は、一部のこまの連続的なの表示により動画的表
示をさせる。

【００３０】従って、動画像の被写体がどのような動き
をするか一目で把握できる。又、例えば、一部のこまの
動画的表示により再生に手間がかからず、短時間で確認
できる。又、所望する動画像データの記録されている記
録媒体が使用中でも被写体の動きを確認できる。

【００３１】なお、代表画像に静止画像データの代表画
像か、又は動画像データかの区別を表示すれば（例えば
静止画像を赤色のわくで、動画像を緑色のわくで囲む）
いずれのデータかを一目で判断することができ、迅速な
画像選択、検索が可能となる。

【００３２】又、前記動画像データの全てのこま又は一
部のこま（以下動画的表示用画像データという）を、代
表画像と同じ大きさ及び位置で画面上に表示すれば、当
該選択された画像データの確認をしながら、他の動画像
データや静止画像データを参照し比較することができ
る。これにより、動画的表示画像データのデータ数を少
なくして、データの高速な処理を可能とする。更に動画
像の撮影内容を他の動画像データと比較した関係で知る
ことができる。

【００３３】但し、本発明においては、動画的表示用画
像データと代表画像データを同じ大きさ及び位置で表示
することに限定されるものではなく、必要に応じて、画
面上の適宜の位置及び大きさで前記動画的表示用画像デ
ータを表示することがきる。例えば、選択された代表画
像の動画的表示用画像データを、画面全体又は代表画像
の表示されている位置以外の位置に表示することができ
る。

【００３４】

【実施例】以下、図面を参照して本発明の実施例を詳細
に説明する。

【００３５】この実施例は、図２に示すような画像検索
システムであり、図３に示すような構成の資料映像デー
タベースシステム中に構成される。

【００３６】図３に示すように、この資料映像データベ
ースシステムは、主にデータベース管理装置１０と、デ
ータベース入力・検索・利用端末装置１２とからなり、
静止画像データ、動画像データ、音声（自然音声）及び
音声（ナレーション音声）データ等を一体的に蓄積して
データベースとし、それら蓄積データの検索・利用がで
きるようにされたものである。

【００３７】なお、前記音声データにおいて自然音声デ
ータは動画像のデータの背景音等であり、ナレーション
音声データは、主に静止画像データを言葉により説明す
るナレーションのデータである。これら各音声データの
内容、及び、データベース内への蓄積の詳細は後述す
る。

【００３８】前記データベース管理装置１０は、データ
の蓄積・削除・修正とデータの検索・利用サーバの機能
を持つデータセンターである。なお、前記データベース
管理装置１０の行うデータの蓄積等の内容の詳細は後述
する。

【００３９】前記データベース入力・検索・利用端末装
置１２は、機能から見て４つの部分に分かれている。即
ち、動画像入力部１４、静止画像入力部１６、データベ
ース検索部１８、及び、データベース利用部２０であ
る。

【００４０】前記動画像入力部１４は、ビデオテープレ
コーダ（ＶＴＲ）テープやレーザーディスク（ＬＤ）等
の記憶媒体から後記ビデオ機器１４Ａを介して出力され
る動画像データを、所定の処理を施して前記データベー
ス管理装置１０に入力するためのものである。記録媒体
に動画像データと共に記録される自然音声データは、Ａ
ＤＰＣＭ（適応差分パルス符号）化して前記管理装置１
０に入力する。なお、前記動画像入力部１４における動
画像データの入力の詳細は後述する。

【００４１】前記静止画像入力部１６は、静止画像デー
タを取込むと共に、検索用キー（キーワード）をデータ
ベース管理装置１０に入力するためのものである。又、
画像データに併せて入力するナレーション等の音声デー
タを、表音コード（例えばローマ字表記によるコード）
化して入力する。なお、静止画像入力部１６の静止画像
データの入力の詳細は後述する。

【００４２】前記データベース検索部１８は、データベ
ース内の各データについて後述する検索画面による検索
やキーワードによる検索を行うためのものである。な
お、検索の詳細は後述する。

【００４３】前記データベース利用部２０は、検索した
画像データを、例えば映像番組製作用の素材として利用
するため出力等するものである。例えば静止画像又は動
画像の１こまの画像はビデオプリンタで出力したり、映
像機器の画面に表示したりする。又、検索された動画像
を画面で利用する場合に動画像データがデータベース管
理装置１０内に記録されていれば（主に短時間の動画像
の場合）、それを出力し、又、保管庫の映像記録媒体
（ビデオテープ等）に記録されていれば当該媒体を取り
寄せて当該媒体中データを出力して利用する。

【００４４】ここで、前記データベースシステムは、図
３に示すように、１つのデータベース管理装置１０に対
して、１つのデータベース入力・検索・利用端末装置１
２を設ける他、図４に示すように、１つのデータベース
管理装置１０に対して、前記端末装置１２を複数接続し
て、複数の前記端末装置１２から前記１つのデータベー
ス管理装置１０をアクセスして用いることができる。

【００４５】又、前記端末装置１２は、遠隔地に設置す
ることができる。

【００４６】又、データベース管理装置１０及びデータ
ベース入力・検索・利用端末装置１２間は、例えばデジ
タル転送ネットワークで接続される。但し、動画像デー
タのリアルタイム（即時）の転送が要求される場合、動
画像映像信号はアナログ転送とする。

【００４７】前記データベースシステムの詳細な構成を
図５に示す。

【００４８】図５に示すように、前記データベースシス
テムにおいて、データベース管理部１０は、検索用イン
デックスデータや後述する縮小画像（代表画像に相当）
を並べた検索画面のデータ等のデジタルデータを主に格
納するための、第１の記憶段１０Ａと、動画像又は静止
画像のデータをアナログデータとして格納するためのビ
デオディスク１０Ｂと、データベース管理部１０と複数
のデータベース入力・検索・利用端末装置１２とが接続
されている場合に、いずれの端末装置１２からディスク
１０Ｂへアナログ画像データを入出力するかを切換える
端末切換器１０Ｃとを有する。

【００４９】なお、データベース管理部１０には、例え
ばファイルサーバの機能を有し、大きなデータ蓄積容量
を有するホストコンピュータを用いることができる。

【００５０】又、前記第１の記憶段１０Ａは、検索画
面、音声データ等の容量が小さく、高いアクセス速度が
要求されるデータを格納する機能を有する。

【００５１】又、前記記憶段１０Ａには、インデックス
データを格納する例えば磁気ディスク（例えば２ギガ
（Ｇ）バイトの容量のもの）装置や検索画面や音声デー
タを格納する光磁気ディスク（例えばディスク１枚当り
５９４メガ（Ｍ）バイトの容量のもの）を用いることが
できる。

【００５２】又、前記ビデオディスク１０Ｂには、ＮＴ
ＳＣコンポジット記録方式の追記型光ディスク装置（例
えば光ディスク１枚当り動画像４８分、静止画８７００
０枚記録できるもの）を用いることができる。これによ
り、アクセス速度が速く、記録密度が高くなる。

【００５３】前記データベース入力・検索・利用端末装
置１２においては、前記各画像入力部１４、１６と、デ
ータベース検索部１８及びデータベース利用部２０がほ
ぼ図５に示すような区分により構成されている。しかし
ながら、構成機器によっては、各部で共用されるものが
あるため、図５に示す区分は概略的な区分構成を示すも
のであり、必要に応じて、他の区分の機器の利用が行わ
れる。なお、このデータベース入力、検索、利用端末装
置１２には、本実施例の各機能を実行可能なワークステ
ーションを用いることができる。

【００５４】前記データベース入力・検索・利用端末装
置１２において、動画像入力部１４は、ＶＴＲやＬＤ等
からなるビデオ機器１４Ａと、当該ビデオ機器１４Ａの
運転、停止を制御して、ビデオ機器１４Ａ中の記録媒体
から動画像データを出力させ、あるいは当該記録媒体に
記録させるためのビデオ機器リモートコントローラ１４
Ｂと、前記ビデオ機器１４Ｃとの自然音声データの入出
力をＡＤＰＣＭ変換して行うための音声コンバータ１４
Ｃと、前記ビデオ機器１４Ａから出力される動画像デー
タ中の１フレーム画像を静止画として一旦記憶するため
の第１のフレームバッファ１４Ｄとを主に有する。

【００５５】又、動画像入力部１４は、画像を入力する
に際し、元の動画像の全こま（駒）毎、又は、一定間隔
のこま毎のフレームの画像を第１のフレームバッファ１
４Ｄから取込み、後記画素密度変換器１６Ｃで画素密度
変換して画素の間引きを行い縮小画像を作成する機能を
有している。この縮小画像を後記動画的表示器１８Ｃが
検索画面上で順次連続的に表示させることにより、動画
的表示ができるようになっている。

【００５６】なお、縮小画像を作成するに際して第１の
フレームバッファ１４Ｄ上の静止画再生された画像を例
えば横７６８×縦４８０ドット、且つ、２４ビットフル
カラーのデジタル画像データとし、その後、当該画像デ
ータを間引いて例えば横１２８×縦９６ドット、且つ８
ビット限定色の縮小画像を作成することがきる。又、こ
の縮小画像のうち動画像の内容を最もよく表わすこま又
は任意のこまの画像の縮小画像を代表画像とし、これを
ビットマップディスプレイ１８Ｅ上の画面に縦、横枡目
状に並べる。なお、このように並べた画面を検索画面と
いう。又、代表画像は、１こまの縮小画像から作成する
のは１例であり、その他例えば複数の画像の和等をとり
縮小して代表画像を作成することができる。

【００５７】前記静止画像入力部１６は、例えばビデオ
カメラやスチルカメラからなるビデオ機器１６Ｅと、前
記ビデオ機器１６Ｅから出力される静止画像データを一
旦記憶するための第２のフレームバッファ１６Ｆと、カ
ラー写真原稿等の平面的な静止画像媒体の情報をディジ
タルデータの形で入力するための、例えばフラットスキ
ャナからなるスキャナ１６Ｂと、入力された静止画像デ
ータを画素密度変換して画面上に表示できる形の、例え
ばＮＴＳＣ方式の画像データに変換する画素密度変換器
１６Ｃと、文字、数値、例えばキーワード、ナレーショ
ン音声の言葉（文字入力する）、映像関連情報の文字等
を入力するための例えばキーボードからなる数値文字入
力器１６Ｄと、例えばワードプロセッサからの文字、数
値、例えばキーワード、ナレーション音声の言葉、映像
関連情報の文字等を入力するためのデータ交換器１６Ａ
とを有する。前記縮小画像は、前記動画像のそれと同様
に検索画面に枡目状に並べる。

【００５８】又、第２のフレームバッファ１６Ｆは、前
記第１のフレームバッファ１４Ｄと共通する、又は、別
のフレームバッファを用いることができる。

【００５９】前記データベース検索部１８は、前記ビッ
トマップディスプレイ１８Ｅ上の検索画面の各縮小画像
について、動画像か静止画像かの区別を表示させる区別
表示器１８Ａと、前記検索画面の縮小画像を静止画の状
態で検索画面上に表示させるための静止画表示器１８Ｂ
と、前記検索画面上で動画像の縮小画像を全こま又は一
定間隔のこま（こま落し）により動画的に表示させるた
めの動画表示器１８Ｃと、ビットマップディスプレイ１
８Ｅ上に前記映像関連情報の数値や文字を表示させるた
めの数値・文字表示器１８Ｄと、前記縮小画像の検索画
面上、関連情報等を表示するビットマップディスプレイ
１８Ｅと、前記検索画面上の縮小画像の選択を入力する
ための選択器１８Ｆとを有する。

【００６０】前記区別表示器１８Ａは例えば動画像デー
タの代表画像を緑色の枠で囲み、静止画像データの代表
画像を赤色の枠で囲んで区別するようにできるものであ
る。

【００６１】又、選択器１８Ｆには前記数値文字入力器
１６Ｄと共通する又は別のキーボードを用いることがで
きる。又、マウスを用いることができる。

【００６２】前記データベース利用部２０には、データ
ベース管理装置１０側から送られてきた画像のハードコ
ピーを取るためのビデオプリンタ２０Ａと、映像関連情
報をプリントアウトするためのドットプリンタ２０Ｂと
が設けられる。なお、データベース利用部２０には、図
示しないが、ナレーション音声を音声合成により発生す
る音声合成器が設けられている。

【００６３】前記端末装置１２には、各処理プログラム
データの記録や、画像及び音声データのデータベース管
理部１０間との入力又は出力に際してのデータの記録を
行うための第２の記憶段２４が設けられている。

【００６４】ここで前記データベースシステムは、前記
の機能を有するため、データベースとして蓄積する画像
データ等及び記録媒体等が次のような構成になる。

【００６５】動画像データにおいて、比較的長時間の動
画像データの場合、そのデータを記録媒体に記録して保
管庫に保管すると共に、検索画面に表示する代表画像の
縮小画像を第１の記憶段１０Ａにデジタルデータの形で
記録しておき、検索の効率化、迅速化を図るようにして
いる。

【００６６】即ち、記録媒体からビデオ機器１４により
動画像を再生し、動画像の内容をよく表わしている画
像、あるいは任意の画像を代表画像としてフレームバッ
ファ１４Ｄにより抽出する。抽出した画像を、画面に枡
目状（例えば縦１０×横１０程度）に並べられるように
縮小した画像データ（検索画面を構成）を作り、第１の
記憶段１０Ａにファイルとしてデータベース管理装置１
０に記録する。又、元の動画像データの記録されている
記録媒体には、整理番号の付されたラベルを当該記録媒
体ケースに貼り保管する。なお、この検索画面、作成及
び検索の詳細な内容は後述する。

【００６７】又、比較的短時間の動画像データの場合、
ビデオ機器１４Ａで再生し、必要な部分を音声と共にビ
デオディスク１０Ｂへアナログ信号として記録する。こ
れにより高速な検索ができる。

【００６８】又、静止画像データにおいて、前記ビデオ
機器１６Ｅからのビデオ信号（アナログ信号）入力とス
キャナ１６Ｂからの静止画信号デジタル信号入力の双方
に対応して入力することができる。又、検索画面に表示
する代表画像の縮小画像を第１の記憶段１０Ａにデジタ
ルデータの形で記録しておき、検索の効率化、迅速化を
図るようにしている。アナログ静止画像データについて
は、ビデオディスク１０Ｂに記録すると共に、フレーム
バッファ１６Ｆにも記憶させ、画面上に枡目状（例えば
縦１０×横１０程度）に並べられるように縮小した画像
データ（検索画面を構成）を作り、第１の記憶段１０Ａ
にファイルとしてデータベース管理装置１０に記憶す
る。又、スキャナ１６Ｂ等から入力されたデジタル静止
画像データについては、画素密度変換器１６Ｃで画素密
度変換してＮＴＳＣ方式のデジタル画像データとし、そ
のデータを第１の記憶段１０Ａに記録すると共に、アナ
ログ静止画像データと同じく、枡目状に並べられるよう
に縮小した画像データを作り、第１の記憶段１０Ａにフ
ァイルとしてデータベース管理装置１０に記憶する。
又、スキャナ１６Ｂ中等から入力されたデジタル静止画
データをフレームバッファ１４Ｄに入力してアナログデ
ータの形とし、ビデオディスク１０Ｂに記録することが
できる。このように、静止画データをアナログデータの
形でビデオディスク１０に記録すれば、デジタルデータ
に比較してデータ量を削減でき、再生時間が短く、取扱
いが容易となる。

【００６９】音声データのうちナレーション音声データ
については、動画像や静止画像の内容を説明するナレー
ション原稿を、前記数値文字入力器１６Ｄ、又は、デー
タ交換器１６Ａを介して例えばワードプロセッサから文
字（文字コードデータ）を入力する。又、当該文字コー
ドデータを表音コードデータに変換して蓄積する。この
表音コードデータにより前記音声合成器でナレーション
音声の再生ができる。この場合、文字コードデータはテ
ロップの表示等に利用するため蓄積する。

【００７０】又、自然音声データについては、自然音声
データは、動画像データと共にビデオディスク１０Ｂに
記憶する。又、ビデオディスク１０Ｂに入力しない場合
で記録が必要な場合は、ＡＤＰＣＭ化して第１の記憶段
１０Ａにファイル化できる。

【００７１】その他、静止画像データ及び動画像データ
について、映像関連情報、即ち撮影者、撮影日等の管理
情報や映像のオリジナル・背景が明確になるような関連
する情報を、各項目最大２００文字程度入力し、検索時
に利用できるようにする。又、動画像データの場合、タ
イムコード等を自動的に記録し、迅速に呼び出せるよう
にする。

【００７２】又、文類・検索の便に供するため画像デー
タにキーワードを付加する。キーワードには映像を直接
表わす任意の単語からなるフリーキーワードや、予め選
択され独自の分類で分類されているキーワード中から適
切なものを選ぶようになっている統制キーワードを選択
し又はワードプロセット入力して画像データに付加す
る。

【００７３】以上のように実施例のデータベースシステ
ムにおいては、静止画像データ、動画像データ、自然音
声データ及びナレーション音声データがデータベースと
して一体化して蓄積されている。

【００７４】図２は、前記データベースシステムを動画
像データより検索画面を作成し、検索する装置の構成図
である。図２において画像入力機能には、図３の動画像
入力部１４、データベース管理装置１０が該当し、画像
検索機能は、データベース管理装置１０、データベース
検索部１８が該当する。

【００７５】即ち、前記画像入力機能は各こま再生部３
０と、縮小画面作成部３２と、縮小画面記憶部３４とか
らなる。

【００７６】各こま再生部３０は、動画像データの各こ
ま毎の画像を再生し、縮小画像からなる検索画面の作成
記録をするためのものであり、主に、ビデオ機器１４Ａ
及びフレームバッファ１４Ｄからなるものである。又、
縮小画像作成部３２は、検索画面に表示するための縮小
画像を作成するためのものであり、主に画素密度変換器
１６Ｃからなるものである。又、縮小画面記憶部３４は
作成縮小画像を記憶するためのものであり、主に第１の
記憶段１０Ａからなるものである。

【００７７】又、前記画像検索機能は、検索画面で検索
し、該画面中の画像を動画的表示させるためのものであ
り、主に前記記憶部３４と、縮小画像静止画的表示部１
８Ｂと、動画的表示部１８Ｃと、ビットマップディスプ
レイ１８Ｅと、選択手段１８Ｆからなる。これら表示部
１８Ｂ等の内容は前述したので省略する。

【００７８】前記検索画面は、ビットマップディスプレ
イ１８Ｅの表示画面を例えば１０×１０（又は８×１
０）程度に分割し、各分割画面に動画像データ及び静止
画像データのそれぞれの代表画像の縮小画像を順に並べ
て表示するものである。

【００７９】即ち、動画像データの場合、各こま又は一
定間隔のこま（例えば１０こま）毎に縮小画像を作成し
て蓄積し、それを連続的に表示すること（全こま、又は
こま落しによる動画的表示）で映像内容を把握できるよ
うにする。この動画的表示の際に元の画像のタイムコー
ドをリアルタイムに表示するようにする。前記のよう
に、こま落しによる動画的表示をすれば短時間で動画像
データの内容を把握できる。

【００８０】又、静止画像データの場合、その画像その
ものが代表画像となるため、静止画データの縮小画像を
検索画面に表示する。

【００８１】次に実施例の作用を説明する。

【００８２】前記のこま落しによる動画的表示のための
縮小画像を作成する手順は、図６に示すようになる。図
６において、ステップ１０１〜１０３は画像入力者の操
作により行う。

【００８３】まず、ビデオ機器１４Ａによりビデオテー
プ等の記録媒体を再生して動画像の最初と最後の部分を
捜し、そのタイムコードを記録する（ステップ１０
１）。

【００８４】次いで、検索画面に動画的表示するための
縮小画像を作るこま間隔を決める（ステップ１０２）。

【００８５】次いで、動画像の最初と最後の部分のタイ
ムコードと縮小画像を作るこま間隔を縮小画像作成部３
２に設定する（ステップ１０３）。

【００８６】これから以降は、自動的に手順を進める。

【００８７】即ち、記録媒体を最初のタイムコードの位
置で静止画再生（スチル）させる（ステップ１０４）。

【００８８】次いで、静止画再生している画像をフレー
ムバッファ１４Ｄに入力して例えば横７６８×縦４８０
ドット（２４ビットのフルカラー画像）でデジタルデー
タ化し、その後、画素密度変換器１６Ｃおいて、例えば
横１２８×縦９６ドット（８ビットの限定色）に間引い
て縮小画像を作成する（ステップ１０５）。

【００８９】次いで、作成した縮小画像を第１の記憶段
１０Ａに格納する（ステップ１０６）。

【００９０】次いで、現在静止画再生している位置のこ
まに縮小画像を作るこま間隔を加えた位置のこまが、動
画像データの最後のこまの部分を越えているか否かを判
断する（ステップ１０７）。越えているならば、検索画
面表示用の縮小画像の作成は終了する（ステップ１０
８）。

【００９１】一方、越えていないならば、記録媒体を縮
小画像を作るこま間隔分早送りして、その位置で静止画
を再生させる（ステップ１０９）。

【００９２】その後、ステップ１０５に戻って、縮小画
像の作成を再開する。

【００９３】ところで、静止画像データの縮小画像は静
止画像データを画素密度変換器１６Ｃで間引くことによ
り作成する。作成縮小画像（これが代表画像となる）
は、第１の記憶段１０Ａに記憶させる。

【００９４】又、検索画面に表示する際に静止画像と動
画像の各縮小画像（各代表画像）を任意に並べることが
できる。この場合には、前記区別表示器１８Ａで動画
像、静止画像の識別表示をする。例えば動画像は緑のわ
くで囲み、静止画像は赤のわくで囲むようにをする。

【００９５】次に、前記のようなデータベースの検索に
ついて説明する。まず、検索画面による検索を説明す
る。

【００９６】この検索においては、オペレータが分類項
目（文化、スポーツ、事件等）を指定すると、その分類
に含まれる各動画像データが選択される。次いで、その
各画像データの各代表画像の縮小画像が１０×１０程度
の枡目状に並べられた検索画面がビットマップディスプ
レイ１８Ｅの画面に表示される。

【００９７】図７は検索画面の表示例を示すものであ
る。

【００９８】この場合、縮小画像が画面上に並び切れな
い場合には、画面を上方スクロール（スクロールアッ
プ）又は下方スクロール（スクロールダウン）、こま表
示、属性表示、検索終了の指示ができるようになってい
る。このスクロールアップの内容については、後に詳述
する。

【００９９】図８は、動画的表示をさせる代表画像を選
択する状態例を示すものである。

【０１００】前記のように、表示された各縮小画像（代
表画像）の中から、なおその内容を良く知りたい場合に
は、図８のように、動画的表示をさせようとする代表画
像をカーソルにより選択する。

【０１０１】このカーソルの選択で、図９に示すように
当該選択した画像の位置に順次全てのこま又はこま落し
の縮小画像が連続的に表示され、動画的な表示が行われ
る。この動画的表示により、動画像データがどのような
動きの被写体を写したものか容易に把握できる。なお、
動画的表示中にその画像をカーソルで選択すると動画的
表示が停止する。

【０１０２】又、代表画像数が多いため、その画像の全
部が表示されていない場合、「スクロールアップ」とい
うアイコンをカーソルで選択すると、表示されている画
像全体が１列分上方に移動し、この移動によって空いた
画面下の横一列分に今まで表示されていなかった別の画
像を表示する。又、「スクロールダウン」というアイコ
ンをカーソルで選択すると、表示されている画像全体を
１列分、下方に移動し、スクロールアップすることによ
って画面上から消えていた画像が再び表示される。スク
ロールアップ及びスクロールダウンの方向は図１０に示
すようになる。

【０１０３】又、「こま表示」というアイコンをカーソ
ルで選択し、その後、こま表示させたい代表画像をカー
ソルで選択すると、選択した代表の画像の動画的表示の
ため蓄積されている縮小画像各こまが読込まれ、その全
こまの画像が画面左側から順番に並べて表示される。表
示の方向は、図１１に示すようになる。このこま表示に
より、動画像データ中の被写体がどのような動きをして
いるか、より詳しく知ることができる。

【０１０４】又、「属性表示」という部分をカーソルで
選択し、その後属性表示させたい代表画像をカーソルで
選択すると、代表画像に対応する元の動画像の保管場
所、撮影日、撮影者等の属性情報が画面上に表示され
る。

【０１０５】本データベースシステムにおいては、前記
のような検索画面上における縮小画像による検索の他、
次の検索が行える。

【０１０６】即ち、分類された分野毎による検索であ
る。この検索においては、画像をデータ分野別に分類
し、分野毎に取り出すようにする。分類は階層構造を持
ち、各項目を更に１０項目程度に細分化ができる。

【０１０７】又、管理情報による検索ができる。この検
索は、撮影者、撮影日等、映像の管理情報を使って検索
するものである。表示画面の検索は、範囲を指定するこ
とができる。

【０１０８】フリーキーワードによる検索もできる。

【０１０９】この検索は、シナリオ等の文章から抽出し
て映像に付加したキーワードを使い、表示画像を選出す
るものである。

【０１１０】統制キーワードによる検索もできる。

【０１１１】この検索は、予め選定されていた、その中
から選んで映像に付加したキーワードを使い、候補画像
を選出するものである。

【０１１２】キーワードネットワークによる検索を行う
ことができる。

【０１１３】このキーワードセネットワークは、キーワ
ード間の関係を重み付けしながら定義することにより、
検索時において、指定したキーワードに関連が深い画像
データを同時に引き出すものである。又、指定したキー
ワードに対する関連度順に映像を並べることができる。

【０１１４】又、検索の組合せを行うことができる。

【０１１５】即ち、管理情報、フリーキーワード、統制
キーワード、分野別の各検索は、ＡＮＤ・ＯＲオペレー
タを入力できる他、お互いに組合せて用いることができ
る。

【０１１６】又、メタキャラクタを用いることができ
る。

【０１１７】メタキャラクタは、単語の一部を指定する
ことができ、当該メタキャラクタを検索キーに使うこと
により、キーワードの部分位置による広範囲な検索がで
きる。例えばメタキャラクタの指定がスキー○○○（○
○○は自由な文字）であれば例えばスキーウェア、スキ
ーブーツが該当する。

【０１１８】なお、検索のための候補となる画像をビデ
オプリンタ２０Ａでハードコピー出力したり、関連情報
をドットプリンタ２０Ｂで出力することができる。

【０１１９】前記のように、検索して得られた静止画像
データ、動画像データ、音声データ等は、ビデオディス
ク１０Ｂに蓄積されている動画像データは出力要求によ
り、データベース入力・検索・利用端末装置１２のビデ
オ機器１４Ａに送出することができる。この場合、音声
も含めて送ることができる。又、検索画面の元の動画像
データが保管庫中の記録媒体に記録されているものの場
合、ドットプリンタ２０Ｂに出力されたテープ管理番号
で保管庫から当該動画像の記録媒体を引き出すことがで
きる。又、当該テープをビデオ機器１４Ａにセットする
際に、頭出しが行い得るようにすることができる。

【０１２０】又、静止画像を読み出してハードコピー出
力を取ることができる。この際、データベース管理部１
０側から送られてきた静止画像をビデオプリンタ２０Ａ
でカラーハードコピー出力することができる。関連する
ナレーションは音声合成器により、又、自然音声はＡＤ
ＰＣＭデコーダにより音声信号に再現され、出力され
る。

【０１２１】前記実施例においては、静止画像データの
検索と共に動画像データの検索が行えるため、従来各デ
ータ毎に重複して行っていた検索を一括して行うことが
でき、迅速な検索が可能である。

【０１２２】又、代表画像のみによる検索では、代表画
像以外のこま（フレーム）以外の内容の見落しの可能性
があるが、本実施例では、全こま又はこま落しによる動
画的表示をするためこのような見落しがなく、しかも、
動画像の動きを適格に把握することができる。

【０１２３】又、こま落し表示による検索では比較的短
時間で動画像の内容を把握できる。従って、従来、全画
像を再生するのに長時間を要していたが、大幅に時間の
短縮化が図れる。

【０１２４】なお、前記実施例においては、図５に示す
ような詳細構成のデータベースシステムを例示したが、
図３又は図４の概念に該当するデータベースシステムで
あれば、本発明のデータベースシステムは図５の構成に
限定されるものではなく、図１又は２に該当すれば本発
明の技術的思想の他の構成のデータベースシステムにも
本発明が適用される。

【０１２５】又、本発明に係るデータベースシステム
は、例えば図７に示すような検索画面で縮小画像により
検索を行う際に用いるのに最も適切なものであるが、こ
のような検索のみに使用するものではなく、他手法によ
る検索にも好適に利用できるものである。例えば動画的
表示は図９の代表画像の表示されている位置で、且つ、
代表画像と同じ大きさで行われることに限定されず、位
置又は、大きさを任意に変えて表示することができる。

【０１２６】

【発明の効果】以上説明した通り、本発明によれば、静
止画像データ及び動画像データから目的に沿う画像デー
タを一緒に検索できるため、利便性が極めて高いと共
に、迅速、且つ確実に検索することができる。

【０１２７】又、画像データを処理することにより、検
索用代表画像のデータを作成できるため、単語や文章で
画像データの内容を入力する場合と異なり、データ入力
作業を自動化でき、入力者による偏りが発生せず、検索
の精度が向上する。

【０１２８】又、動画像データの場合、動画像の被写体
がどのような動きをしているか一目で把握でき、検索の
精度が更に向上する。又、動画像の内容を見るのに手間
がかからず多くの動画像を短時間に確認できる。

【０１２９】又、見ることを望む動画像データが記録さ
れている記録媒体が使用中の場合でも、元の動画像の動
きを確認することができる。

【０１３０】従って、ビジネスニュース等の特定の契約
者のみに配信する映像番組を製作するに際して、製作費
の削減や製作時間の短縮、提供参考資料の豊富化等を図
ることができるという等の優れた効果が得られる。

【図面の簡単な説明】

【図１】図１は、本発明の要旨を示す流れ図である。

【図２】図２は、本発明の実施例に係る検索装置の構成
を示すブロック図である。

【図３】図３は、前記実施例装置に係るデータベースシ
ステムの全体的な構成を示すブロック図である。

【図４】図４は、前記データベースシステムの応用例を
示すブロック図である。

【図５】図５は、前記データベースシステムの詳細な構
成を示すブロック図である。

【図６】図６は、前記実施例の作用を説明するための、
検索画面を作成する手順を示す流れ図である。

【図７】図７は、同じく、作成された検索画面の一例を
示す平面図である。

【図８】図８は、同じく、前記検索画面上で動画表示と
された部分をカーソルで選択する状態例を示す平面図で
ある。

【図９】図９は、同じく、前記カーソルで選択された画
面が動画表示される状態例を示す平面図である。

【図１０】図１０は、同じく、前記検索画面のスクロー
ルアップ及びスクロールダウンの方向例を示す平面図で
ある。

【図１１】図１１は、同じく、前記検索画面における各
こま表示の方向例を示す平面図である。

【符号の説明】

１０…データベース管理装置、 １０Ａ…第１の記憶段、 １０Ｂ…ビデオディスク、 １０Ｃ…端末切換器、 １２…データベース入力・検索・利用端末装置、 １４…動画像入力部、 １４Ａ…ビデオ機器、 １４Ｂ…ビデオ機器リモートコントローラ、 １４Ｃ…音声コンバータ、 １４Ｄ…第１のフレームバッファ、 １６…静止画像入力部、 １６Ａ…データ交換器、 １６Ｂ…スキャナ、 １６Ｃ…画素密度変換器、 １６Ｄ…数値文字入力器、 １６Ｅ…ビデオ機器、 １６Ｆ…第２のフレームバッファ、 １８…データベース検索部、 １８Ａ…識別表示器、 １８Ｂ…縮小画像の静止画的表示器、 １８Ｃ…縮小画像の動画的表示器、 １８Ｄ…数値、文字の表示器、 １８Ｅ…ビットマップディスプレイ、 １８Ｆ…ビットマップディスプレイ上の画像選択手段、 ２０…データベース利用部、 ２０Ａ…ドットプリンタ、 ２０Ｂ…ビデオプリンタ、 ３０…各こま再生部、 ３２…縮小画像作成部、 ３４…縮小画像記憶部。

フロントページの続き (72)発明者 山田 康雄 東京都新宿区市谷加賀町一丁目１番１号 大日本印刷株式会社内

Claims (3)

【特許請求の範囲】
1. 【請求項１】静止画像データ及び動画像データのうち所
   望の画像データを検索する方法であって、 静止画像データ及び動画像データから、当該画像データ
   を代表する代表画像を作成する工程と、 作成代表画像を並べて画面に表示する工程と、 動画像データの代表画像中の所望のものを選択する工程
   と、 動画像データの代表画像が選択された場合に、選択代表
   画像で代表された動画像データの全てのこま、又は、一
   部のこまの画像を連続的に画面に表示する工程と、 を含むことを特徴とする画像検索方法。
2. 【請求項２】請求項１において、 前記代表画像を並べて画面に表示する工程では、更に、
   表示する代表画像が、静止画像データの代表画像か、又
   は、動画像の代表画像かの区別を画面に表示するように
   したことを特徴とする画像検索方法。
3. 【請求項３】請求項１又は２において、 前記動画像データの全てのこま又は一部のこまの画像を
   連続的に画面に表示する工程では、選択された代表画像
   が表示されていた位置に、当該代表画像と同じ大きさで
   当該代表画像で代表された動画像データの全てのこま又
   は一部のこまの画像を連続的に表示することを特徴とす
   る画像検索方法。