JPH08287094A - マルチメディアデータのデータ管理システムおよびデータ管理装置 - Google Patents

Abstract

(57)【要約】 【目的】 マルチメディアデータのデータ管理システム
およびデータ管理装置に関し，映画フィルム，ビデオテ
ープ等の内容について容易に検索することができ，しか
も，必要な場面を簡単に映像，音声として再現できるよ
うにすることを目的とする。 【構成】 データ管理装置は，マルチメディアデータの
格納単位の全体をシナリオとして，シナリオの内容を階
層化し，意味作成部を備えて階層に対して与えられた意
味を階層毎に対応付けてデータ保存装置に保存し，検索
部を備えて階層毎もしくは複数階層間で意味を条件とし
階層化されたシナリオ検索するものであり，階層毎もし
くは複数階層間で検索条件として与えられた意味によ
り，シナリオを検索し，検索して求められた階層の配下
のフレームの内容を出力する構成を持つ。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は，マルチメディアデータ
のデータ管理システムおよびデータ管理装置に関するも
のである。

【０００２】ビデオテープ，映画フィルム等に記録され
た内容等は，その量が増えるにつれ管理が難しくなる。
特にその内容のある場面を見たいという場合に，その場
面を簡単に探すことは不可能になる。

【０００３】本発明は，ビデオテープ，レーザディス
ク，映画フィルム，デジタル写真等の大量のマルチメデ
ィアデータをその内容について効率よく管理し，必要な
場面を検索して表示し，出力することのできるマルチメ
ディアデータのデータ管理システムおよびデータ管理装
置に関するものである。

【０００４】図２２は従来の技術であって，例えば映画
会社，放送局等でフィルム，ビデオテープ等を管理する
システムである。図２２において，２１１はデータベー
ス作成装置であって，コンピュータにより管理するデー
タベースを作成するものである。

【０００５】２１２は入力装置であって，キーボード等
である。２１３は管理データ作成部であって，映画フィ
ルム，ビデオテープ等の管理データを作成するものであ
る。管理データは保管番号，フィルムの題名等である。

【０００６】２１４は検索部であって，管理データを検
索するものである。２２０は磁気ディスク装置であっ
て，管理データを保存するものである。２２１はディス
プレイである。

【０００７】２３０は保管倉庫であって，映画フィル
ム，ビデオテープ等を保管する倉庫である。２３１は資
料であって，保管されている映画フィルム，ビデオテー
プ等である。

【０００８】図２２の構成により資料を検索する場合の
動作を説明する。管理データ作成部２１３に対して入力
装置２１２を使用して，作成した映画フィルム，ビデオ
テープ等の番組名，放映時間，キーワード等を保管番号
に対応付けて入力する。管理データ作成部２１３は保管
番号に対応付けて，磁気ディスク装置２２０に管理デー
タ（番組名，放映時間，キーワード等）を保存する。

【０００９】次に，資料（映画フィルム，ビデオテープ
等）を探す場合には，検索部２１４に対して，入力装置
２１２により検索データ（番組名，放映時間，キーワー
ド等）を入力する。検索部２１４は検索条件と一致する
内容を持つ保管番号を検索する。そして，ディスプレイ
２２１に検索結果の一覧，内容等を表示する。ユーザ２
３２はその一覧表示に従って，保管番号を確認し，保管
倉庫２３０から求められた保管番号の資料（映画フィル
ム，ビデオテープ等）を取り出す。

【００１０】

【発明が解決しようとする課題】従来の映画フィルム，
ビデオテープ等のマルチメディアデータの管理は，番組
名等のＩＤや，放映時間，簡単なキーワード等のインデ
ックスデータだけであり，映画フィルム，ビデオテープ
にどのような場面が収録されているか等の詳細な内容に
ついてを検索することはできなかった。

【００１１】また，従来の方法は検索して求めた映画フ
ィルム，ビデオテープ等を再現しながらその内容を確認
するものであり，必要とする場面等の映像をすぐに再現
する等のことはできなかった。

【００１２】本発明は，映画フィルム，ビデオテープ等
の内容について容易に検索することができ，しかも，必
要な場面を簡単に映像，音声，テキストとして再現でき
るマルチメディアデータのデータ管理システムおよびそ
のデータ管理装置を提供することを目的とする。

【００１３】

【課題を解決するための手段】本発明は，マルチメディ
アデータを管理するデータ管理装置と，データ保存装置
と，表示装置と，入出力装置とを備えたデータ管理シス
テムにおいて，データ管理装置は，マルチメディアデー
タの格納単位の全体をシナリオとしてシナリオの内容を
階層化し，意味付けをしてデータ保存装置に保存し，検
索部を備えて意味を条件とし階層化されたシナリオを検
索するものであり，検索条件として与えられた意味によ
りシナリオを検索し，検索して求められた階層の配下の
フレームの内容を出力するようにした。

【００１４】図１は本発明の基本構成を示す図である。
本発明では，フレームの属性を仮想フレームと称し，そ
の物理データを物理フレームと称する。また，単にフレ
ームと称する場合は，その両者を含むか，あるいは仮想
フレーム，物理フレームを区別する必要のない場合であ
る。

【００１５】図１において，Ｄはデータ管理装置であっ
て， マルチメディアデータ保存装置１０から入力され
るマルチメディアデータの物理フレームの全部もしくは
一部を取り込んで階層化して管理するものである。

【００１６】１はデータ保存部であって，シナリオの物
理フレーム，階層情報および階層毎の意味を保存するも
のである。なお，本明細書で使用するシナリオは，狭い
意味のストーリーのみを指すものでなく，マルチメディ
アデータのファイル単位を表すものである。

【００１７】６は入出力制御装置であって，データ保存
装置１のデータを出力装置７に出力したり，マルチメデ
ィアデータ保存装置１０のデータをデータ保存装置１に
入力したり，データ保存装置１のデータをマルチメディ
ア保存装置１に出力したりするものである。

【００１８】７は出力装置であって，映像表示，音声出
力，文字表示をするものである。８は入力装置であっ
て，意味，検索条件等を入力するものである。１０はマ
ルチメディアデータ保存装置であって，映画フィルム，
ビデオテープ，レーザディスク，ＣＤ−ＲＯＭ等の外部
記憶媒体に記録されているシナリオ等のマルチメディア
データを保存する装置である。あるいは，マルチメディ
アデータ保存装置１０が書き込み可能な記憶媒体であれ
ば，データ管理装置Ｄで検索，編集，加工等の処理をさ
れて得られた物理フレームを必要に応じて書き込んで保
存するものである。

【００１９】１１はマルチメディアデータ入出力装置で
あって，マルチメディアデータ保存装置１０のマルチメ
ディアデータをデータ保存装置１に入力し，マルチメデ
ィアデータ保存装置１０が書き込み可能なものであっ
て，そこに保存する場合には，検索，編集，加工等の処
理により得られた物理フレームをマルチメディアデータ
保存装置１０に出力するものである。

【００２０】データ管理装置Ｄにおいて，２はデータ管
理部であって，シナリオの階層を作成し，階層化により
シナリオを管理するものである。図１はシナリオに対し
てストリームと称する中間階層を作成し，中間階層に対
して仮想フレームを対応させて階層構造とする場合を例
示する。但し，中間階層（ストリーム）は一層である必
要はなく，複数階層で中間階層を構成するようにしても
良い。

【００２１】３は意味作成部であって，シナリオ，スト
リーム，フレームに対して意味付けをするものである。
例えば，シナリオに対して，シナリオの概略を表す文章
もしくはキーワード等を対応付け，ストリームに対して
は例えば，海の情景，森で鳴く鳥の声等の文章もしくは
キーワードを対応付け，フレームに対しては同様にその
具体的内容，例えば，房総の海，ホトトギスの鳴き声等
の文章もしくはキーワードを対応付けるものである。

【００２２】５は検索部であって，与えられた条件によ
り階層毎もしくは複数階層間にまたがって意味により検
索するものである。１１’は物理フレーム編集部であっ
て，マルチメディアデータ保存装置１０から入力される
マルチメディアデータの物理フレームに対して，削除，
加工，合成等の編集処理を行い，システムの物理フレー
ムを作成するものである。また，データ保存装置１から
出力されるマルチメディアデータの物理フレーム対して
編集，加工等を行い，システム外に出力する物理フレー
ムを作成するものである。

【００２３】なお，音声は自然音，擬音等の音および人
の声等のあらゆる音を含むものである。図２は本発明の
階層の例を示す。

【００２４】マルチメディアデータはｎ個のシナリオか
ら構成され，各シナリオはストリームにより構成され
る。各ストリームは仮想フレームにより構成される。仮
想フレームと物理フレームは１対１に対応する。

【００２５】

【作用】図１，図２を参照して本発明の基本構成の動作
を説明する。データ管理装置Ｄは，マルチメディアデー
タ保存装置１０のオリジナルなシナリオのマルチメディ
アデータの物理フレームを取り出し，物理フレーム編集
部１１’によりシステムに保存する物理フレームの選
択，物理フレームの合成，あるいはデータ形式の変換等
の処理をしてデータ管理システムＳの物理フレームとす
る。

【００２６】作業者は，マルチメディアデータ保存装置
１０から取り込まれた内容を表示装置７に表示して物理
フレームの内容を確認し，ひとかたまりの物理フレーム
をまとめ，その仮想フレームの中間階層（ストリーム）
を作成する。データ管理部２はそのようにして作成され
た階層を階層保存部に保存する。

【００２７】また，入力装置８を使用して階層毎に意味
を表す文章，キーワード等を入力する。意味作成部３は
そのように入力された意味を意味保存部４に階層毎に保
存する。ストリームに対してはストリーム毎に意味を付
け，フレームに対してはフレーム毎に意味を保存する。

【００２８】例えば，シナリオの階層に対しては，シナ
リオの概略等を入力する。例えば，「白鳥の湖」の物語
りであれば，シナリオの意味１として「王子が馬に乗り
森の湖を散歩する」，シナリオの意味２として，「魔法
をかけられて白鳥に姿を変えられた姫の白鳥が湖をただ
よう」等のあらすじを文章，キーワード等で意味付けす
る。

【００２９】意味入力画面でフレームの内容を画面表示
できるので，その内容を把握しながら，複数のフレーム
をグループ化してストリーム（場面）を定義し，ストリ
ームに対して意味付けをする。例えば，王子が馬に乗っ
て森の湖を散歩する場面をストリーム１とし，その意味
１として，例えば，王子と馬と湖，意味２として，森で
鳴く声等のように，文章，キーワードで意味付けを行
う。また，白鳥に姿を変えられた姫の白鳥が湖をただよ
う場面をストリーム２とし，その意味付けを行う。

【００３０】さらに，フレームに対しても意味付けを行
い，例えば，フレーム１の意味１は「王子と馬」，「美
しい湖」，「鳥の声」，「白鳥と湖」等に文章，キーワ
ード等で意味付けを行う。

【００３１】このように意味付けをされた階層はデータ
保存装置１に保存される。上記のように階層化されて意
味付けされたシナリオを検索する場合には，検索条件の
文章，キーワード等を入力する。検索部５は，入力され
た検索条件に従って，検索条件のキーワード検索，ある
いは文章を文節等に分解して分析し，検索条件と内容的
に一致する意味を持つ文章を検索し，検索条件に合うシ
ナリオ，ストリーム，フレーム等を求める。

【００３２】データ管理部２は検索部５の求めたシナリ
オ，ストリームに対応する仮想フレームの物理フレー
ム，あるいはフレーム検索であれば求めた仮想フレーム
の物理フレームの内容を表示するように入出力制御装置
６に指示する。入出力制御装置６は指示されたシナリオ
の物理フレームをデータ保存装置１から取り出し，出力
装置７に映像表示，音声出力，テキスト表示する。そし
て，必要ならば，検索結果を物理フレームを含めてデー
タ保存装置１に保存する。あるいは，検索結果として得
られた物理フレームを加工，編集等の処理を行い，処理
された物理フレームをデータ保存装置１に保存する。マ
ルチメディアデータ保存装置１０が書き込み可能な場合
には，データ保存装置１に保存された物理フレームは，
マルチメディアデータ入出力装置１１によりマルチメデ
ィアデータ保存装置１０に書き込んで保存することがで
きる。あるいは，検索結果として得られた物理フレーム
をマルチメディアデータ保存装置１０に書き込んで保
存，もしくは，物理フレーム編集部１１’より編集・加
工等の処理を行い，処理された物理フレームをマルチメ
ディアデータ保存装置１０に書き込んで保存できる。

【００３３】本発明によれば，大量のマルチメディアデ
ータの中から，必要とする条件にあうシナリオ，場面等
を簡単に検索して画面表示することができ，必要なら
ば，外部媒体へ出力することができる。そのため，大量
のマルチメディアデータを効率良く管理することがで
き，マルチメディアデータを有効に利用することができ
る。

【００３４】

【実施例】図３は本発明のシステム構成の実施例１であ
る。図３において，２５はマルチメディアデータ保存装
置１であって，映画フィルム，レーザディスク等の書き
換えできないシナリオのマルチメディアデータを保存す
るものである。２５’はマルチメディアデータ保存装置
２であって，ビデオテープ，書き込み可能な光記憶媒
体，磁気ディスク等にシナリオを保存するものであり，
また，マルチメディアデータ保存装置２（２５’）はデ
ータ管理装置３１において処理されたマルチメディアデ
ータ（物理フレーム（必要ならば，階層，意味等を含め
る））を新しいシナリオとして必要に応じて保存するも
のである。マルチメディアデータ保存装置２（２５’）
はデータ管理装置３１で処理されたマルチメディアデー
タを焼き付けて保存する映画フィルム，写真フィルム等
も含む。

【００３５】３０は管理コンピュータシステムである。
３０’はマルチメディアデータ入力装置であって，映画
フィルム，レーザディスク等のマルチメディアデータ保
存装置１（２５）のシナリオのマルチメディアデータを
データ管理装置３１に入力するものである。

【００３６】３０”はマルチメディアデータ入出力装置
であって，ビデオテープ，書き込み可能な光記憶媒体，
磁気ディスク等のマルチメディアデータ保存装置２（２
５’）に保存されているシナリオのマルチメディアデー
タをデータ管理装置３１に入力するものである。また，
データ管理装置３１において，検索，編集，加工等の処
理で得られた物理フレーム（必要ならば意味，階層も含
む）を新しいシナリオとしてマルチメディアデータ保存
装置２（２５’）に出力するものである。

【００３７】３１はデータ管理装置である。データ管理
装置３１において，４０はデータ管理部である。

【００３８】４０’は階層作成部である。４１は検索部
である。４２は意味作成部である。

【００３９】４３はデータ制御部であって，図１の物理
フレーム編集部１１’に相当するものである。３３は外
部記憶装置であって，データ保存部であり，磁気ディス
ク装置，書き込み可能な光記憶媒体等であり，管理コン
ピュータシステム３０に取り込まれたシナリオ，ストリ
ーム，仮想フレーム，物理フレームを保存するものであ
る。

【００４０】３６はキーボードである。３７はディスプ
レイである。３７’はマウスである。

【００４１】４４はネットワーク送受信部である。５０
は端末装置であって，管理コンピュータシステム３０と
通信を行い，マルチメディアデータ保存装置の画像，音
声を検索し，検索結果の画像，音声を受け取って画面表
示し，保存するものである。

【００４２】５０’はシステム呼び出し部であって，管
理コンピュータシステム３０と通信を行い，データ管理
装置３１を呼び出して利用できるようにするものであ
る。５１はネットワーク送受信部である。

【００４３】５３はディスプレイである。５４はキーボ
ードである。５４’はマウスである。

【００４４】６０は端末装置である。６０’はシステム
呼び出し部である。６１はネットワーク送受信部であ
る。

【００４５】６３はディスプレイである。６４はキーボ
ードである。６４’はマウスである。

【００４６】６５はネットワークである。図３の構成に
おいて，マルチメディアデータ入力装置３０’はマルチ
メディアデータ保存装置１（２５）のシナリオのマルチ
メディアデータを物理フレーム単位に入力する。あるい
は，マルチメディアデータ入出力装置３０”はマルチメ
ディアデータ保存装置２（２５’）のマルチメディアデ
ータを物理フレーム単位に入力する。データ制御部４３
を使用して，物理フレームデータの全部もしくは一部を
管理コンピュータシステム３０の物理フレームとして取
り込む。階層作成部４０’により，物理フレームに対応
して仮想フレームを作成し，いくつかの仮想レームをま
とめてストリームを作成し，全ストリームをまとめてシ
ナリオを作成する。意味作成部４２によりシナリオ，ス
トリーム，仮想フレームに対して意味付けをする。そし
て，意味付けをされて階層化されたシナリオ，ストリー
ム，仮想フレーム，物理フレーム，は外部記憶装置３３
に保存する。

【００４７】また，必要に応じて，外部記憶装置３３に
保存されたマルチメディアデータ（物理フレームはマル
チメディアデータ保存装置２（２５’）に保存すること
ができる。

【００４８】端末装置５０において，外部記憶装置３３
に保存されたシナリオを検索する場合には，キーボード
５４，マウス５４’等を使用して検索条件を入力する。
検索部４１は，保存されている意味を検索条件により検
索する。データ管理装置３１は求めた検索結果に従って
外部記憶装置３３からフレームの内容を取り出し，端末
装置５０に送信する。端末装置５０は受け取ったデータ
をディスプレイ５３に表示し，端末装置５０に表示し，
必要ならば保存する。更に，データを加工，編集し，フ
レームを外部記憶装置３３に保存することもできる。ま
た，受け取ったデータをマルチメディアデータ保存装置
２に出力することもできるし，データを加工・編集し
て，そのフレームをマルチメディアデータ保存装置２に
出力することもできる。

【００４９】端末装置６０においても同様に外部記憶装
置３３に保存されているマルチメディアデータの検索を
行い，検索結果を表示することができる。また，検索結
果に加工，編集を加え，外部記憶装置３３に保存するこ
ともできる。また，受け取ったデータをマルチメディア
データ保存装置２に出力することもできるし，データを
加工，編集して，そのフレームをマルチメディアデータ
保存装置２に出力することもできる。

【００５０】図４は本発明の装置構成の実施例１であ
る。図４において，２５はマルチメディアデータ保存装
置１である。

【００５１】２５’はマルチメディアデータ保存装置２
である。３０’はマルチメディアデータ入力装置であ
る。３０”はマルチメディアデータ入出力装置である。

【００５２】３１はデータ管理装置である。データ管理
装置３１はオブジェクト指向データベース装置等を使用
して構成する。以下，オブジェクト指向データベース装
置を使用する場合を例として説明する。

【００５３】３３は外部記憶装置であって，データ保存
部である。外部記憶装置３３は，磁気ディスク装置等で
構成し，シナリオ，ストリーム，フレーム（仮想フレー
ムと物理フレーム）を保存するものである。

【００５４】データ管理装置３１において，４０はデー
タ管理部である。４１は検索部であって，ファイル名等
のデータ識別情報による検索および意味による検索を行
うものである。

【００５５】４２は意味作成部であって，意味の表示の
機能（プログラム部品），意味の編集の機能，意味の削
除の機能，意味の更新の機能，意味の演算の機能（入力
された意味のキーワードについて論理演算をして重複を
排除するかあるいは重複部分のみを求める等の処理を行
う），意味の解析の機能（例えば，意味の文章を解析し
て文節に分解する等の処理を行う，あるいは文節からキ
ーワードを抽出する等の処理を行う）を備えるものであ
る。

【００５６】４５はデータ入力部であって，実際のデー
タ（外部媒体（マルチメディアデータ保存装置２５）か
ら入力されるシナリオの物理フレームのデータ）および
キーボード７５，マウス７５’から入力される意味，フ
ァイル名，検索条件等のデータをデータ管理装置３１に
取り込むものである。

【００５７】データ管理部４０において，４６はシナリ
オ管理部であって，シナリオの生成，制御，管理を行う
ものである。

【００５８】４７はストリーム管理部であって，ストリ
ームの生成，制御，管理を行うものである。４８はフレ
ーム管理部であって，フレームの生成，制御，管理等を
行うものである。

【００５９】４９はデータ制御部であって，マルチメデ
ィアデータ保存装置２５から入力された実際のデータ
（物理フレームのデータ）に対して，データ保存形式の
変換，データ削除，データの合成等のデータ編集を行う
ものである。また，外部記憶装置３３から出力された物
理フレームのデータに対して，編集を行なうものであ
る。

【００６０】７１はＣＰＵである。７２はメモリであ
る。７５はキーボードである。

【００６１】７５’はマウスである。７６はディスプレ
イである。図５は本発明の装置構成の実施例１におい
て，シナリオの階層化，意味付けを行う場合の構成を説
明するものである。

【００６２】図５において，２５はマルチメディアデー
タ保存装置１である。３０’はマルチメディアデータ入
力装置である。

【００６３】（マルチメディアデータ保存装置２（２
５’），マルチメディアデータ入出力装置３０”は図示
を省略されている）。３３は外部記憶装置であって，デ
ータ保存部である。

【００６４】４５はデータ入力部であって，実際のデー
タ（マルチメディアデータ保存装置２５に保存されてい
るマルチメディアデータの物理フレーム），意味，階層
化のためのデータ（ストリームを構成するためのデー
タ）等をデータ管理装置に取り込むようにするものであ
る。

【００６５】４２は意味作成部である。４９はデータ制
御装置である。４６はシナリオ管理部である。

【００６６】７０は入出力制御装置である。７６はディ
スプレイである。 (1) ，(1”），(2) ，(3) マルチメディアデータ保存
装置１（２５）（もしくはマルチメディアデータ保存装
置２（２５’））からシナリオのマルチメディアデータ
が入力装置３０’（もしくは入出力装置３０”）により
取り出され，データ入力部４５によりデータ管理装置に
取り込まれる。データ制御部４９により入出力制御装置
７０が制御されてディスプレイ７６に物理フレームの内
容が表示される。

【００６７】(4) ，(5) ,(6)，(6') 作業者はディスプ
レイ７６の表示をもとに，データ制御装置４９により物
理フレームに対して，編集，削除等を行う。そして，デ
ータ制御装置４９により加工，編集した物理フレームは
外部記憶装置３３の物理フレーム保存部３４’に保存す
る。さらに，データ入力部４５に階層化するためのデー
タ（ストリームにするフレーム枚数，フレーム番号等）
を入力する。

【００６８】(7) 階層化されたシナリオに対して，シ
ナリオの意味，ストリームの意味，フレームの意味をデ
ータ入力部４５に入力する。 (8) ，(9) ，(10) 階層化されたシナリオ，ストリー
ム，フレームに対してなされた意味はデータ管理部４０
に渡され，シナリオに対する意味はシナリオ管理部４６
で意味付けされ，ストリームに対する意味はストリーム
管理部４７で意味付けされ，フレームに対する意味付け
はフレーム管理部４８により意味付けされ，入出力制御
装置７０を介して外部記憶装置３３に保存される。

【００６９】図６は本発明の装置構成の実施例１により
シナリオの意味検索を行う場合の構成である。図６にお
いて，３３は外部記憶装置であって，データ保存部であ
る。

【００７０】４０はデータ管理部である。４１は検索部
である。４５はデータ入力部である。

【００７１】７０は入出力制御装置である。７６はディ
スプレイである。Ａは類似語辞書であって，キーワード
の類似語を持つものである。

【００７２】Ｂは否定語辞書であって，キーワードの否
定語を持つものである。Ｃは文章解析部であって，文章
の文節等を解析し，文節に含まれるキーワードを抽出す
るものである。

【００７３】Ａ，Ｂ，Ｃは図３では省略されている。図
６の構成において，意味検索を行う場合の動作を説明す
る。 (1) ，(2) データ管理部４０に検索画面の表示を指示
し，検索画面をディスプレイ７６に表示する。データ入
力部４５より検索画面を使用して検索部４１に意味の検
索条件を入力する。その際に，入力された意味に対して
論理演算を行い，論理式に合うキーワードを抽出する。
または，意味の論理演算式が入力された場合，意味に対
して意味の論理演算を行い，論理式に合うキーワードを
抽出する。

【００７４】論理演算の例を次に示す。 集合和：（意味１，意味２）∪（意味３）＝（意味１，
意味２，意味３） 集合積：（意味１，意味２）∩（意味２，意味３）＝
（意味２） 集合差：（意味１，意味２）−（意味２，意味３）＝
（意味１） 集合対差：（意味１，意味２）⇔（意味２，意味３）＝
（意味１，意味３） 意味の補集合：（意味１，意味２）の補集合＝意味の全
集合−（意味１，意味２） 等である。また，意味の論理演算はシナリオ，ストリー
ム，フレームに意味付けをする際，下の階層に意味付け
をしたものに論理演算を行なうことによって，その結果
をその上の階層の意味とすることもできる。

【００７５】(3) ，(4) ，(5) データ管理部４０より
入出力制御装置７０に意味保存部４２’の意味の出力が
指示され，外部記憶装置３３より意味が取り出され，入
出力制御装置７０を介して検索部４１に意味が渡され
る。

【００７６】(6) 検索部４１は与えられた検索条件と
意味保存部から取り出された意味を照合し，検索結果を
データ管理部４０に渡す。検索において，検索部４１は
類似語での範囲の検索指示が与えられた場合には，検索
条件の意味として入力されたキーワードに対して類似語
辞書Ａを参照し，類似語についても意味保存部４２’の
意味に対してキーワード検索を行う。また，否定語での
検索指示が与えられた場合には，検索条件の意味として
入力されたキーワードに対して否定語辞書Ｂを参照し，
否定語を求め，否定語により意味保存部４２’の意味に
対してキーワード検索を行う。また，意味が文章語で入
力された場合には文章解析部Ｃて解析して文節を求め，
文節に含まれるキーワードにより意味保存部４２’に保
存されているキーワードと照合し，検索を行う。あるい
は，意味解析部４２’にも文節により意味が保存されて
いる場合には，文節と同時で照合を行い意味の検索をす
る。

【００７７】(7) ，(8) ，(8'),(9) データ管理部４０
は検索結果に基づいて，検索結果が得られたフレームの
出力を入出力制御装置７０に指示する。入出力制御装置
７０は指示された仮想フレームの物理フレームを外部記
憶装置３３から取り出し，ディスプレイ７６に表示す
る。音声は音声出力する。

【００７８】図７は本発明のシナリオ管理のための構成
の実施例である。図７において，９０はシナリオ管理の
ための構成である。

【００７９】９０’はシナリオである。４０はデータ管
理部である。４６はシナリオ管理部である。

【００８０】４０”は階層保存部である。４１は検索部
である。４２は意味作成部であって，意味表に書き込む
意味の生成，編集等を行うものである。

【００８１】９１はシナリオ管理テーブルであって，配
下のストリームの数，階層保存部へのポインタ，シナリ
オ意味表（意味保存部）へのポインタを保持するもので
ある。ポインタはストリームの全体を指すか，あるいは
ストリームの全体を表とし，表の先頭位置を指定する
等，どのような方法でも良い。

【００８２】９３，９４，９５はそれぞれはストリーム
１へのポインタ，，ストリーム２へのポインタ，ストリ
ームＮへのポインタであって，シナリオ配下のストリー
ムの情報である。

【００８３】９６はシナリオ意味表であって，シナリオ
に付けられた意味を保持するものである。図８は本発明
のストリーム管理のための構成の実施例である。

【００８４】図８において，１００はストリーム管理の
ための構成である。１００’はストリームである。

【００８５】４０はデータ管理部である。４７はストリ
ーム管理部である。４０”は階層保存部である。

【００８６】４２は意味作成部である。１０１はストリ
ーム管理テーブルであって，配下のフレームの数，スト
リームの種類，階層保存部へのポインタ，ストリーム意
味表（意味保存部）１０６へのポインタを保持するもの
である。

【００８７】１０３，１０４，１０５はそれぞれは仮想
フレーム１，仮想フレーム２，仮想フレームＮであっ
て，ストリーム配下の仮想フレームである。８２は検索
部である。

【００８８】図９は本発明のフレーム管理のための構成
の実施例である。図９において，１２０はフレーム管理
のための構成である。

【００８９】１２０’は仮想フレームである。４０”は
階層保存部であって，仮想フレームへのポインタを持つ
ものである。４０はデータ管理部である。

【００９０】４８はフレーム管理部である。１２１はフ
レーム管理テーブルであって，フレームサイズ，フレー
ムの種類と格納方式，階層保存部へのポインタ，フレー
ムの意味表へのポインタ，フレーム表示時間を保持する
ものである。

【００９１】１２２は階層作成部である。１２２’はフ
レームの意味表作成部である。１２４はフレームの意味
表（意味保持部である）。

【００９２】１２５は物理フレームである。４２は意味
作成部である。４１は検索部である。

【００９３】図１０は本発明の意味付の処理のフローチ
ャートである。 Ｓ１ 意味を付けたいデータ（フレームの物理データ）
を取り出し，ディスプレイに表示する。

【００９４】Ｓ２ シナリオ，ストリーム，フレームを
選択し，データの内容と種類によって意味付けの処理を
行う。 Ｓ３ ストリームの場合，ストリームの内容や関連事項
について，言葉やキーワードや文章などを記述してスト
リームの意味領域に格納する。

【００９５】Ｓ４ シナリオの場合，シナリオの内容や
関連事項について，言葉やキーワードや文章などを記述
してシナリオの意味領域に格納する。 Ｓ５ フレームの場合，フレームの内容や関連事項につ
いて，言葉やキーワードや文章などを記述してフレーム
の意味領域に格納する。

【００９６】図１１は本発明の検索処理のフローチャー
トである。 Ｓ１ ユーザが検索したいデータの意味（複数可能）を
入力する。 Ｓ２ ユーザが検索するデータの種類（ストリーム，フ
レームの別，もしくは任意か）を指定する。指定しなけ
ればシナリオである。

【００９７】Ｓ３ ストリームの場合，指定された意味
と同じ意味を持つストリームまたは配下のフレームが指
定された意味を持つストリームを見つけ出す。 Ｓ４ フレームの場合，指定された意味と同じ意味を持
つフレームを取り出す。

【００９８】Ｓ５ シナリオの場合，指定された意味と
同じ意味を持つシナリオまたは配下のストリームまたは
フレームが同じ意味を持つシナリオを取り出す。 Ｓ６ 任意の場合，指定された意味と同じ意味を持つシ
ナリオやストリームやフレームを取り出す。

【００９９】Ｓ７ 検索した結果を表示する。 図１２は本発明のキーワード検索による場合の検索処理
のフローチャートである。

【０１００】Ｓ１ 次の検索対象が存在するか，存在し
なければ処理を終了する。 Ｓ２ Ｓ１で検索対象が存在すれば，検索対象を取り出
す。 Ｓ３ 結果フラグを真にする。

【０１０１】Ｓ４ キーワード群に照合操作をしていな
いキーワードがあるかないかを判定する。なければＳ８
に進む。 Ｓ５ Ｓ４でキーワード群に照合操作をしていないキー
ワードがあれば，キーワード群から順番にキーワードを
取り出す。

【０１０２】Ｓ６ 検索対象テーブルに同じキーワード
が存在するか判定する。存在していればＳ４以降の処理
を繰り返す。存在していなければＳ７に進む。 Ｓ７ 存在しなければ，結果フラグを偽にする。

【０１０３】Ｓ８ 結果フラグが偽であればＳ１以降の
処理を繰り返す。 Ｓ９ Ｓ８の判定において，真であれば見つかったとす
る検索結果に入れ，Ｓ１以降の処理を繰り返す。

【０１０４】図１３は本発明のキーワード検索における
否定検索のフローチャートである。反対語辞書を備え，
入力されたキーワード群の反対語群を見つけだし，それ
らの反対語群で検索対象（シナリオ，ストリーム，フレ
ーム）の意味表に対して照合検索を行うものである。

【０１０５】Ｓ１ キーワード群の一個を取り出す。 Ｓ２ 残りのキーワードがあるか判定する。 Ｓ３ Ｓ２で残りのキーワードがなければ，照合検索を
して，処理を終了する。

【０１０６】Ｓ４ Ｓ２で残りのキーワードがあれば，
反対後辞書を検索する。 Ｓ５ 対応する反対語が存在しなけばＳ１以降の処理を
繰り返す。 Ｓ６ Ｓ５で対応する反対語が存在すれば，その反対語
を反対語群に入れ，Ｓ１以降の処理を繰り返す。

【０１０７】なお，検索処理において，類似語辞書を備
え，入力キーワードに対して類似語群を見つけだし，類
似語群を含めて，検索対象（シナリオ，ストリーム，フ
レーム）の意味データに対して照合検索を行うこともで
きる。このとき，キーワードの類似語群が多数ある場合
には一個ずつ取り出して照合検索をする。

【０１０８】また，文章が入力された場合に，先ず文節
毎に分解し，文節からキーワードを抽出し，キーワード
群を生成し，そのキーワード群で照合する文章検索を行
うこともできる。

【０１０９】図１４は本発明の入力画面の例である。図
１４ (a)は意味入力画面である。１３０は意味入力画面
である。

【０１１０】１３１はシナリオに意味付けをする場合に
選択する領域である。１３２はストリームに意味付けす
る場合に選択する領域である。１３３はフレームに意味
付けをする場合に選択する領域である。

【０１１１】１３４はデータ（物理フレーム）の内容の
画像，音声，文字等を表示する領域である。１３５はフ
レーム番号等のデータ表示領域である。

【０１１２】１３６は検索をする場合に選択する領域で
ある。１３７は意味入力フィールドに入力された意味を
意味保存部に設定することを指示する意味入力領域であ
る。

【０１１３】１３８は意味入力フィールドであって，意
味（文章，キーワード等）を入力す領域である。図１４
(b)はデータ検索画面であって，ファイル名等のデータ
識別情報で検索する場合のデータ入力画面である。

【０１１４】１４０はデータ検索画面である。１４１は
シナリオを検索する場合に選択する領域である。１４２
はストリームを検索する場合に選択する領域である。

【０１１５】１４３はフレームを検索する場合に選択す
る領域である。１４４はデータ識別情報入力フィールド
であって，シナリオ識別情報，ストリーム識別情報，フ
レーム識別情報等のデータ検索する場合の検索データを
入力する領域である。

【０１１６】１４５は検索の実行を指示する領域であ
る。１４６は検索の取り消しを指示する領域である。図
１４ (c)は意味検索を行うための入力画面である。

【０１１７】１５０は意味検索画面である。１５１はシ
ナリオを検索する場合に選択する領域である。１５２は
ストリームを検索する場合に選択する領域である。

【０１１８】１５３はフレームを検索する場合に選択す
る領域である。１５４は任意の組み合わせで検索する場
合に選択する領域である。１５５は検索したデータ（フ
レームの内容の画像，音声，文字等）を表示する領域で
ある。

【０１１９】１５６は検索結果として得られたデータ
（ファイル名，フレーム番号等）を表示する領域であ
る。１５７はデータの表示方法を選択する領域である
（連続，ステップ，早送り，スロー表示等）である。

【０１２０】１５８は意味検索の実行を指示する領域で
ある。１５９は意味演算式を入力するフィールドである
（入力した検索条件の論理和，論理積等の論理演算を指
示する領域）。

【０１２１】図１５は本発明のフレーム管理テーブルの
説明図である。図１５(a) はフレーム管理テーブルの作
成とフレームの意味表の作成のフローチャートである。

【０１２２】Ｓ１ フレーム管理テーブルを作成する。 Ｓ２ フレームの意味表作成をする。 図１５ (b)はフレーム管理テーブルである。

【０１２３】１７０は画像のフレーム管理テーブルであ
って，名前，フレーム番号，フレームサイズ，フレーム
の種類（画像），格納方式（データ圧縮方式等），デー
タの位置のポインタ，表示時間長を持つ。

【０１２４】１７１は音声のフレーム管理テーブルであ
って，名前，フレーム番号，フレームサイズ，フレーム
の種類（音声），格納方式（データ圧縮方式等），デー
タの位置のポインタ，出力する時間長を持つ。

【０１２５】１７２は文字のフレーム管理テーブルであ
って，名前，フレーム番号，フレームサイズ，フレーム
の種類（文字），格納方式（データ圧縮方式等），デー
タの位置のポインタ，表示時間長を持つ。

【０１２６】図１５ (c)はフレームの意味表である。１
７３は画像のフレームの意味表の例であって，意味が単
語であり，付けられた意味が「赤ん坊」，「出産」であ
る。

【０１２７】１７４は音声のフレームの意味表の例であ
って，意味が単語であり，付けられた意味が「オギャ
ー」であるものである。１７５は文字のフレームの意味
表の例であって，意味が単語であり，単語なしである。

【０１２８】図１６は本発明のフレーム管理テーブルの
作成方法のフローチャートである。 Ｓ１ フレーム名を入力する（手入力）。 Ｓ２ フレーム番号を設定する。

【０１２９】Ｓ３ フレームサイズを設定する。 Ｓ４ 画像，音声，文字等の種類を設定する。 Ｓ５ データ格納方式を入力する（手入力）。

【０１３０】Ｓ６ データの位置を示すポインタを設定
する。 Ｓ７ 出力（表示）する時間を設定する。 図１７は本発明のストリーム管理テーブルの説明図であ
る。図１７ (a)はストリーム管理テーブルの作成とスト
リーム意味表作成のフローチャートである。

【０１３１】Ｓ１ ストリーム管理テーブルを作成す
る。 Ｓ２ ストリームの意味表を作成する。 図１７ (b)はストリーム管理テーブル，配下のフレーム
テーブル，ストリームの意味表の例を示す。

【０１３２】１６５は画像に対するストリーム管理テー
ブルである。ストリーム番号，配下のフレーム数，種類
（画像），先頭フレームの位置（ポインタ），ストリー
ムの意味表へのポインタを持つ。

【０１３３】１６６は音声に対するストリーム管理テー
ブルである。ストリーム番号，配下のフレーム数，種類
（音声），先頭フレームの位置（ポインタ），ストリー
ムの意味表ポインタを持つ（図の場合音声の意味表はな
い）。

【０１３４】１６７は文字に対するストリーム管理テー
ブルである。ストリーム番号，配下のフレーム数，種類
（文字），先頭フレームの位置（ポインタ），ストリー
ムの意味表へのポインタを持つ（図の場合文字の意味表
はない）。

【０１３５】１６８は配下のフレームテーブルであっ
て，フレーム識別情報１（フレーム番号等），フレーム
識別情報２，フレーム識別情報３を持つ。１６９はスト
リームの意味表である。画像のストリームに対して意味
として「出産」を持つ。

【０１３６】図１８はストリーム管理テーブルの作成方
法のフローチャートである。 Ｓ１ ストリーム番号を入力する（手入力）。 Ｓ２ 配下のフレーム数を設定する。

【０１３７】Ｓ３ ストリームの種類を設定する。 Ｓ４ 先頭フレームの位置のポインタを設定する。 Ｓ５ ストリーム意味表へのポインタを設定する。

【０１３８】図１９は本発明のシナリオ管理テーブルの
説明図である。図１９ (a)はシナリオの意味表作成のフ
ローチャートである。 Ｓ１ シナリオ管理テーブルを作成する。

【０１３９】Ｓ２ シナリオ意味表を作成する。 図１９ (b)はシナリオ管理テーブル，配下のストリーム
表，シナリオの意味表を示す。

【０１４０】１６０はシナリオ管理テーブルであって，
シナリオ番号，配下のストリーム数，ストリームの先頭
番号のある位置（ポインタ），シナリオの意味表へのポ
インタを持つ。

【０１４１】１６１は配下のストリーム表である。スト
リーム１、ストリーム２，ストリーム３を持つ。１６２
はシナリオの意味表であって，意味として「新婚時代」
を持つ。

【０１４２】図２０はシナリオ管理テーブルの作成方法
のフローチャートである。 Ｓ１ シナリオ番号を設定する（手入力）。 Ｓ２ ストリーム数を入力する。

【０１４３】Ｓ３ ストリーム先頭番号を設定する（ス
トリーム先頭番号の位置へのポインタを設定する）。 Ｓ４ シナリオの意味表へのポインタを設定する。

【０１４４】図２１は本発明のシステム構成の実施例２
である。図２１は，映画フィルム，ビデオテープ等のシ
ナリオの階層構造と階層毎の意味，フレーム番号等のデ
ータを持つが，内容のデータ（物理フレーム）は持たな
い場合に，映画フィルム，ビデオテープ等の資料のライ
ブラリから，検索した資料を取り出し，ドライバにセッ
トし，検索結果の場面等を出力するシステムである。

【０１４５】図２１において，１８０はライブラリであ
って，ビデオテープ，レーザディスク等の資料（内容を
記憶した媒体）の保管庫である。

【０１４６】１８１は保管されているビデオテープ等の
資料（媒体）である。１８２は搬出装置であって指定さ
れた資料を取り出し，ドライバ１８４にセットするもの
である。

【０１４７】１８４はドライバであって，資料をセット
して，内容を出力するものである。１８５はドライバ制
御部であって，検索結果により求められたフレームの位
置を資料に対してサーチするものである。

【０１４８】１８６はデータ管理装置であって，本発明
のデータ管理装置である。１８７は検索結果出力部であ
って，フィルム番号，フレーム位置等の資料のデータを
出力するものである。

【０１４９】１８８はデータ送信部である。１８９はデ
ィスプレイである。１９１は外部記憶装置であって，デ
ータ保存部である。

【０１５０】図２１の構成の動作を説明する。データ管
理装置により，意味検索等で求められたフィルム番号等
のデータが検索結果出力部１８７より，搬出制御部１８
３に出力される。

【０１５１】搬出装置１８２の搬出制御部１８３に転送
される。搬出制御部１８３は受け取ったフィルム番号に
より，該当する資料を取り出し，ドライバ１８４にセッ
トする。ドライバ１８４において，ドライバ制御部１８
５は検索結果出力部１８７から受け取ったフレーム位置
等のデータをもとに資料をサーチし，指定されたフレー
ムの内容を出力する。出力された内容はディスプレイ１
８９に表示される。あるいは遠隔の端末装置１９０に送
信される。

【０１５２】

【発明の効果】本発明によれば，大量のマルチメディア
データの中から，必要とする場面，情景等の内容を意味
検索により簡単に取り出すことができるようになる。そ
のため，マルチメディアデータを一括管理して有効に利
用することができるようになる。また，マルチメディア
データの意味付けも，単語によるキーワードだけでなく
文章による入力もできるので，柔軟に検索できるように
なる。

【図面の簡単な説明】

【図１】本発明の基本構成を示す図である。

【図２】本発明の階層の例を示す図である。

【図３】本発明のシステム構成の実施例１を示す図であ
る。

【図４】本発明の装置構成の実施例１を示す図である。

【図５】本発明の装置構成の実施例１においてシナリオ
の階層化，意味付けを行う場合の構成を示す図である。

【図６】本発明の装置構成の実施例１のシナリオ検索の
構成を示す図である。

【図７】本発明のシナリオ管理のための構成の実施例を
示す図である。

【図８】本発明のストリーム管理のための構成の実施例
を示す図である。

【図９】本発明のフレーム管理のための構成の実施例を
示す図である。

【図１０】本発明の意味付けの処理のフローチャートを
示す図である。

【図１１】本発明の検索処理のフローチャートを示す図
である。

【図１２】本発明のキーワード検索による場合の検索処
理のフローチャートを示す図である。

【図１３】本発明のキーワード検索における否定検索の
フローチャートを示す図である。

【図１４】本発明の入力画面の例を示す図である。

【図１５】本発明のフレーム管理テーブルの説明図であ
る。

【図１６】本発明のフレーム管理テーブルの作成方法の
フローチャートである。

【図１７】本発明のストリーム管理テーブルの説明図で
ある。

【図１８】本発明のストリーム管理テーブルの作成方法
のフローチャートである。

【図１９】本発明のシナリオ管理テーブルの説明図であ
る。

【図２０】本発明のシナリオ管理テーブルの作成方法の
フローチャートを示す図である。

【図２１】本発明のシステム構成の実施例２を示す図で
ある。

【図２２】従来の技術を示す図である。

【符号の説明】

Ｓ：データ管理システム Ｄ：データ管理装置 １：データ保存装置 ２：データ管理部 ２’：階層保存部 ２”：階層作成部 ３：意味作成部 ４：意味保存部 ５：検索部 ６：入出力制御装置 ７：出力装置 ８：入力装置 １０：マルチメディアデータ保存装置 １１：マルチメディアデータ入出力装置

───────────────────────────────────────────────────── フロントページの続き (72)発明者 李 政 東京都品川区大崎１丁目６番４号 株式会 社富士通ソーシアルサイエンスラボラトリ 内 (72)発明者 石川 博 神奈川県川崎市中原区上小田中1015番地 富士通株式会社内 (72)発明者 小林 幸也 東京都品川区大崎１丁目６番４号 株式会 社富士通ソーシアルサイエンスラボラトリ 内

Claims (7)

【特許請求の範囲】
1. 【請求項１】 マルチメディアデータを管理するデータ
   管理装置と，データ保存装置と，表示装置と，入出力装
   置とを備えたデータ管理システムにおいて，データ管理
   装置は，マルチメディアデータの格納単位の全体をシナ
   リオとしてシナリオの内容を階層化し，意味付けをして
   データ保存装置に保存し，検索部を備えて意味を条件と
   して階層化されたシナリオを検索するものであり，検索
   条件として与えられた意味によりシナリオを検索し，検
   索して求められた階層の配下のマルチメディアデータを
   出力することを特徴とするマルチメディアデータのデー
   タ管理システム。
2. 【請求項２】 マルチメディアデータ保存装置からマル
   チメディアデータをデータ管理装置に入力し，データ管
   理装置において処理されたマルチメディアデータをマル
   チメディアデータ保存装置に出力するマルチメディアデ
   ータ入出力装置を備えたことを特徴とする請求項１に記
   載のマルチメディアデータのデータ管理システム。
3. 【請求項３】 シナリオを少なくとも一つの中間階層に
   階層化して管理するデータ管理部と，階層毎に内容を表
   す意味を付加する意味作成部と，意味を条件として階層
   毎もしくは複数階層を対象として意味により検索する検
   索部とを備えることを特徴とする請求項１もしくは２に
   記載のマルチメディアデータの管理システムにおけるデ
   ータ管理装置。
4. 【請求項４】 データ保存装置に保存されているマルチ
   メディアデータに対して編集もしくは削除を行う物理フ
   レーム編集部を備えることを特徴とする請求項３に記載
   のデータ管理装置。
5. 【請求項５】 各階層の意味付けはキーワードにより行
   い，検索部はキーワードにより検索を行うことを特徴と
   する請求項３に記載のデータ管理装置。
6. 【請求項６】 意味作成部は文章により入力された意味
   を文節に分解し，文節もしくは文節に含まれるキーワー
   ドを意味保存部に保存し，文章により入力された意味を
   文節に分解し，意味保存部を参照して検索を行うことを
   特徴とする請求項４に記載のデータ管理装置。
7. 【請求項７】 マルチメディアデータを格納する媒体を
   保持するライブラリを備え，データ管理装置から検索に
   より求められたシナリオに関する情報を受け取り，該情
   報に基づいて該当する媒体を取り出す搬出装置を備えた
   ことを特徴とする請求項１に記載のマルチメディアデー
   タのデータ管理システム。