JP2000514579A - マルチメディア・データのカタログ化をする方法及び装置 - Google Patents

Abstract

(57)【要約】 本発明は、マルチメディア・データ等のデータをカタログ化する。カタログは１つ以上のカタログ要素の集合である。索引を使用してカタログにアクセスする。カタログの要素は１つ以上の属性を有する。属性はカタログの検索、カタログに関する質問への回答及びカタログ内のナビゲーションを行うのに使用される。カタログ要素の属性は、属性を有する要素であっても良い。カタログ要素属性は要素であり、属性要素と呼ばれる。属性要素及び属性を使用してインデックスを構築し、該インデックスを使用してカタログへのアクセスを容易にする。例えば、質問を行うか、または、ユーザ指定により、カタログ内にはより小さなカタログを生成することができる。

Description

【発明の詳細な説明】 マルチメディア・データのカタログ化をする方法及び装置 発明の背景 １．発明の分野 本発明は、記憶及び検索機能を含んだマルチメディアデータのカタログ化に関 する。２．背景 コンピュータシステムを使用してマルチメディア資料のプレゼンテーションを 行うことが増大している。斯かるマルチメディア資料は通常、文書、図形、ビデ オ映像、アニメーション及び音声の形態を取っている。通常、これらのデータが ２つ以上結合されてマルチメディア・データを形成し、コンピュータによってプ レゼンテーションがなされる。マルチメディアのプレゼンテーションに使用され るコンピュータシステムは、マルチメディア・システムと呼ばれる。従来のマル チメディア・システムにおける間題点は、マルチメディア・データの探索及び検 索ができないことである。 ある従来の技術によるマルチメディア・システムではディスク・オペレーティ ング・システムが使用され、このディスク・オペレーティング・システムはマル チメディア・データを含んだファイルの記憶及び検索をするファイル・システム を含んでいる。斯かるファイル・システムは、マルチメディア・データを含んだ ファイルを該ファイル名に基づいて検索するのに使用することができる。このフ ァイル・システムは、ファイル名で内容を識別する程度のことはできるが、それ 以外のデータの内容に基づいてマルチメディア情報を検索することはできない。 従って、一般のファイル・システムが提供する検索（サーチ）システムは、ファ イル名で提供される以上の詳細な検索をするには不十分である。多数の従来の技 術のマルチメディア・システムを下記に説明する。 １９９３年８月３１日に発行されたリード（Ｒｅｅｄ）その他の語、句、数字 、文字、地図、図表、絵、動画、アニメーション、及び音声情報からなるデータ ベースを含んだマルチメディア・システムに関する米国特許第５，２４１，６７ １号に検索システムが記載されている。データベース中で情報の位置決めを行う 一連のエントリ・パスを提供する検索能力が設けられている。ユーザはエントリ ・パスにより１組の有効用語または不要用語からなる検索要求（サーチ・リクエ スト）をすることが可能になる。不要用語とは不要用語リストに載っている用語 であり、例えば、「ｔｈｅ」または「ａ」と言った語である。有効用語は、ステ ム・インデックスを使用して関係する用語に連結されている。ステム・インデッ クスは、ルート用語と該ルート用語に関する各用語に対して１組のステムとを含 んでいる。例えば、「葉（ｌｅａｆ）」と言った語は、「複数の葉（ｌｅａｖｅ ｓ）」及び「葉を出すこと（ｌｅａｆｉｎｇ）」に関連するようにリンクされて いる。 １９９２年６月１６日に発行されたカサハラ（Ｋａｓａｈａｒａ）その他の米 国特許第５，１２３，０８８号には、映像／画像情報の位置決めを行うと共に、 該情報へアクセスするためのナビゲータの生成及び表示が記載されている。画像 情報は、サーキュラ・リストに分類され且つ連結されると共に、属性に従って順 序を付けられている。１つの画像ユニットが表示されると、縮小画像またはナビ ゲータとして、連結された画像ユニットを表示することができる。ユーザは所望 のナビゲータを選択して、連結された画像ユニットのネットワークをナビゲート することが可能となる。 １９９３年５月１１日に発行されたシマダ（Ｓｈｉｍａｄａ）その他の米国特 許第５，２１０，８６８号には、データベース検索システムが記載されており、 データベースのキーワードをマッチング即ち整合する方法によって、異なるデー タベース中のエントリが検索されるようになっている。２つの斯かるデータベー スの例として、マッピング・データベース及び顧客属性データベースが挙げられ る。辞書を使用して、キーワードを第１のデータベースから普通名詞及び固有名 詞の下位区分へ分離する。普通名詞及び固有名詞の同義語は１組のルールに従っ て推論される。同義語は結合ルールを使用して結合され、次い で、第２のデータベースのキーワードと比較されて最終的な整合結果が生成され る。 １９９４年１月１１日に発行されたシマダ（Ｓｈｉｍａｄａ）その他の米国特 許第５，２７８，９４６号には、エンティティ・オブジェクト及びリレーション ・オブジェクトを使用して、マルチメディアを取り扱うシステムが記載されてい る。エンティティ・オブジェクトは、建物、道路、鉄道及び境界線等のエンティ ティのメソッド及びプロパティを定義する。リレーション・オブジェクトは、エ ンティティ間のリレーション（関係）のメソッド及びプロパティを定義する。ユ ーザ・モデル及びシステム・モデルが連結されて、マルチ・メディアのダイジェ ストが作成される。 １９９６年２月２０日に発行されたバロー（Ｂａｌｏｇｈ）その他の米国特許 第５，４９３，６７７号には、ディジタル画像を記憶し検索するシステムが記載 されている。キャプション（見出し９またはその他のメタデータをディジタル画 像と結合させることができる。自然言語能力により、ユーザが入力したメタデー タを記憶する前に、該メタデータから曖昧さを除去する。自然言語能力により、 ユーザ質問と記憶されたメタデータ間の整合が決定される。このシステムにより 、ユーザは画像を選択し、選択した画像のライセンス条件を再検討して、選択し た画像を発注する。 １９９５年５月９日に発行されたシーマン（Ｓｅａｍａｎ）その他の米国特許 第５，４１４，６４４号には、時間軸数字を使用してデータにアクセスする繰り 返し分析イベント（事象）・システムが記載されている。このシステムは、映像 データ記憶装置及びテクスト・データベースからなる情報ライブラリであって、 映像データの記載された説明及び繰り返しイベントまたは動作を識別するキーワ ード集を記憶する情報ライブラリを使用する。動作ラベルは動作アクティビティ （活動）を定義するのに使用される。ユーザは主題、動作アクティビティ、また はその他のタイプの記述テキストを識別することにより、画像を検索することが できる。年代順のタイムラインは、画像表示の順序を制御するのに使用される。 即ち、画像は時間軸数字を使用して順番に表示される。 １９９５年４月４日に発行されたフジサワ（Ｆｕｊｉｓａｗａ）その他の米 国特許第５，４０４，５０６号には、知識に基づいた情報検索システムが記載さ れている。このシステムは、ローカル検索用の映像インタフェース及びグローバ ル検索用の自然言語インタープリタを提供する。自然言語インタープリタは、名 詞句または公称(nominal)句の意味を推論するのに使用される。推論した意味は 、情報の検索に使用される。 上記に挙げた特許における検索能力では、マルチメディア・データを複数のシ ステムまたはアプリケーションを横断して使用できるようにカタログ化すること ができない。また、マルチプル・アプリケーションによりマルチメディア・デー タを記憶し且つ検索するのに使用できるカタログを検索するための汎用カタログ 及びインデックスを、作成することはできない。従来の技術で使用されている記 憶アプローチは、特定のシステム・ニーズを満足するように設計されている。多 数のその他のアプローチが記載されているが、それらのアプローチにおいてもイ ンデックス機能は、特定のシステムでのみ使用するように設計されたものである 。 １９９５年４月１８日に発行されたオレン（Ｏｒｅｎ）その他の米国特許第５ ，４０８，６５５号には、ハイパテキスト・ノード（nodal：節点）ネットワー クと一緒に使用される用に設計されたインデックス機能が記載されている。ハイ パテキスト・ノード・ネットワークを使用して作成される１組のインデックス・ タームがデータベース中のノードの各々と比較されて、各ノードに対する１組の インデックス・ターム（即ち、文書インデックス・ターム）が識別される。１組 のインデックス・タームが、ユーザがメニューから選択可能なオプションまたは 基準（即ち、オプション・インデックス・ターム）と結合される。この場合には 、インデックス機能を使用するためにハイパテキスト・ノード・ネットワークの 使用が必要となる。 １９９２年６月９日に発行されたトロートマン（Ｔｒａｕｔｍａｎ）の米国特 許第５，１２１，４７０号には、インデックスが記載されており、複数のソース から入手したデータを自動的に索引する会話型記録システムが記載されている。 この発明は、医学治療分野に利用される。データが１つ以上の次元（例えば時間 ）に沿って検索される。データ・イベントは、数組のデータを所定の 間隔に分類して、検索されたデータに対して識別される。データ・オブジェクト は、データ・イベントと結合される。該イベント及び関連するデータ・オブジェ クトが表示される。アクチュエータが、データ・オブジェクトに関係付けられて 、該オブジェタトの操作が可能となる。この索引方法を使用するには、データ・ イベント及び次元基準（クライテリア）が必要となる。 １９９１年４月２３日に発行されたマックニ（Ｍａｋｋｕｎｉ）その他の米国 特許第５，０１０，５００号には、ユーザ入力に基づいて選択した画像の識別及 び表示をするシステムが記載されている。マウスを使用して入力されたジュスチ ャーを使用して、入力に類似した特徴を有する画像を識別する。画像の一部に結 合したマルチメディア・データが、該画像の一部を選択することにより起動可能 となる。選択がなされると、メニューが表示されて、ユーザの選択が行われる。 データは、画像の実際の部分に基づいて、索引される。 １９９５年６月２７日に発行されたタカハシ（Ｔａｋａｈａｓｈｉ）その他の 米国特許第５，４２８，７７４号には、動画中のフレーム・シーケンスに対する インデックスが生成される。インデックス中の各レコードは、関係付けられた検 索キーを有している。フレーム・シーケンスの開始及び終了位置がインデックス ・レコード中で指定される。レコードが検索キーに基づいてインデックス・ファ イルから検索される。検索されたレコードは、開始及び終了位置に基づいた時間 軸線に沿って配置される。データ（即ち、動画のフレーム・シーケンス）は、該 データのフレームのタイム・シーケンスに基づいて索引される。 １９９４年１月１８日に発行されたクガ（Ｋｕｇａ）その他の米国特許第５， ２８０，５７３号には、キーワードを使用してより高レベルのレコードの位置決 めと検索をするシステムが記載されている。複数のより高レベルのレコードの各 々が、キーワードに関係付けられた異なるタイプの情報を含んでいる。斯かるよ り高レベルのレコードは、例えば、キーワードに結合した使用、同義語及び意味 情報を含んでいることも可能である。 １９９３年１２月２８日に発行されたベイテル（Ｂｅｉｔｅｌ）その他の米国 特許第５，１１９，４７４号及び第５，２７４，７５８号には、音声画像プレゼ ンテーションを生成するのに使用できる画像及び音声記録システムが記載 されている。該システムは、以下のソフトウェアを含んでいる、即ち、ライブラ リ・エディタ、画像エディタ、ディジタイズ・エディタ、変換エディタ、音声エ ディタ及びストーリ・エディタである。画像エディタは、画像の編集をする（即 ち、画像にテキスト及び図形を追加する）ことができる。ディジタイズ・エディ タ及び音声エディタは、アナログ・データをディジタル・データに変換する。変 換エディタは、画像を当該システムにて使用できる形態へ変換するのに使用され る。画像データ及び音声データは、ストーリ・エディタを使用してプレゼンテー ションに組み上げられる。ライブラリ・エディタは、システム・オブジェクト（ オブジェクトは、画像、音声ファイルまたは音声／映像プレゼンテーション）の 記憶、検索及び処理を管理する。ライブラリ・エディタは、オブジェクトを含む ファイルのライブラリを保持している。 発明の概要 本発明は、マルチメディア・データ等のデータのカタログ化を行うものである 。カタログは、１つ以上のカタログ要素を集成したものである。インデックスは 、カタログにアクセスするのに使用される。カタログの要素は、１つ以上の属性 を有している。属性は、カタログの検索、カタログに関する質問への回答及びカ タログをナビゲートするのに使用することができる情報を提供する。カタログ要 素の属性は、属性を有する要素とすることができる。１つの要素であるカタログ 要素属性は、属性要素と呼ばれる。属性要素及び属性は、カタログ・アクセスを 容易にするのに使用できる索引を構築するのに使用される。例えば、質問をした り、ユーザの指定によりカタログ内により小さなカタログを生成することができ る。 アノロジー（類推）を、本発明のマルチメディア・カタログとライブラリのカ ード・カタログとの間に導入することができる。カード・カタログには、単一の カタログ要素（即ち、カード）が含まれている。カード・カタログは、複数のカ タログ要素インスタンス（事例）（即ち、複数のカード）からなる。各カードは 、ライブラリに含まれている本またはその他の資料に結合される。カードは情報 または属性（例えば、著者、題名、番号システム）を含んでいる。 属性は、カタログ内の検索を容易にするのに使用できるインデックス・システム （例えば、番号システム）を構築するのに使用される。カードは、カード・カタ ログについてなされる質問操作（例えば、カード・カタログからのカードの選択 ）を満足するのに使用することのできる情報または属性を含んでいる。 本発明で使用されるマルチメディア・データ・カタログは、句（フレーズ）と よばれる１つのカタログ要素からなるのが好適である。句はマルチメディア・デ ータの一部と結合される。句は複数の属性を有しており、該属性の幾つかは属性 要素である。句の属性である属性要素は、キーワード、パーソン（人）、イメー ジ（画像）、ビデオ（例えば、ドキュメンタリの場面）、プロポーズド（提案さ れた）・パーソン及びプロポーズト・キーワードを含んでいる。斯かるキーワー ド、パーソン、イメージ、プロポーズド・パーソン及びプロポーズド・キーワー ド等の属性要素は、同様に属性要素である属性を有している。例えば、キーワー ド属性要素の属性である属性要素は、シソーラス（シソーラス）キーワード、シ ソーラス・パーソン、キーワード及びタイプを含んでいる。インデックスは、斯 かる属性及び属性要素上に構築される。斯かるインデックスを使用して、カタロ グをナビゲート（例えば、句の検索）をすることができる。 １組のカタログ要素を属性要素について質問をすることにより、識別すること ができる。質問操作は属性要素に対してなされて、カタログ要素に関係付けられ たその他の属性要素を試験することができる。質問操作において質問に特定され た基準を満足する１組のカタログ要素（例えば、句）が識別される。質問で識別 される１組のカタログ化要素は、セグメントとしてグループ化される。セグメン トは、句の集まりを含んだコンテナ要素である。ユーザはまた、セグメントとし てグループ化することのできる句の集まりを特定できる。セグメントは、その他 の句のグループ（例えば、関係する入力データ部分と関係付けられた句）を含む ことができる。セグメントは、自身の属性及び属性要素を有することができる。 カタログ及び属性要素に加えて、本発明では、複数のイベント要素が入力デー タに結合される。イベント要素は、入力データの一部と結合される。イベン ト要素は、例えば、品質保証データ収集に関連する入力データの一部にマークを 付す品質保証イベントである。品質保証イベントは、肯定イベント、否定イベン トまたは情報イベントとして識別される。品質保証イベントは、また、ファクト （事実）または一片の情報を識別することができる。要素もまたカタログ要素（ 例えば、句）またはコンテナ要素（例えば、セグメント）等のその他の要素に結 合される。 カタログ、属性及びイベント要素は、具体化されて、カタログ化及びリレーシ ョン管理ファシリティすなわち機能を使用して維持される。斯かるカタログ化及 びリレーション管理機能は、ユーザ入力により、要素及びその属性を作成するの に使用される。カタログ化及びリレーション管理機能を使用して作成した要素イ ベントの集合は、どのシステムにもインタフェースとして使用して、入力された データへのアクセスを可能にしている。 句要素の１つの属性は、記述句と呼ばれる。ユーザは、カタログ化機能インタ フェースを使用して、句要素のインスタンスに結合した記述句を入力する。カタ ログ化機能は、記述句をパース即ち構文分析して、既存の属性を識別して句要素 と結合する。更に、記述句を使用して、プロポーズド・パーソン及びプロポーズ ド・キーワード等の潜在的またはプロポーズされた属性要素を識別することがで きる。プロポーズされた属性要素は、ユーザにより入力することもできる。プロ ポーズされた属性要素は、実際の属性要素としての本来の使用をされる前に、承 認を受ける。 シソーラス・キーワード属性要素及びシソーラス・パーソン属性要素は代替情 報を含んだ属性要素の例である。シソーラス・キーワード及びシソーラス・パー ソン属性要素は、それぞれ、キーワード及びパーソン属性要素の代替情報を含ん でいる。例えば、キーワード属性要素は複数の結合ラベルまたは値を有している 。キーワード属性要素と結合したラベルは、シソーラス・キーワード属性要素に より供給される。従って、シソーラス・キーワード属性要素は、キーワード属性 要素の具体例である。 シソーラス・キーワード属性要素は、更に、キーワード属性要素に１以上の言 語のラベルを供給するのも使用することができる。即ち、キーワード属性要 素は、複数の言語の複数のラベルを有することができる。例えば、キーワード属 性要素を各々が１つの言語（例えば、英語、仏語、独語、及び露語）で表された １つのラベルまたは値を有する複数のシソーラス・キーワード属性要素と結合さ せることができる。１つの言語の複数のラベルを有する各キーワード属性は、当 該言語で好適なラベルを有することができる。従って、シソーラス・キーワード 属性要素は、言語シソーラス・キーワード属性要素とすることが可能である。 タイプ属性要素は、キーワード属性要素を分類するのに使用される。タイプは キーワード属性要素に結合してキーワード属性要素を分類する。タイプ属性要素 の階層を使用して、タイプ属性要素のインスタンス及びそれぞれの結合したキー ワード属性要素インスタンスを分類することができる。同様に、キーワード属性 要素を使用して、シソーラス・キーワード属性要素を分類することができる。シ ソーラス・キーワード属性要素を使用して、言語シソーラス・キーワード属性要 素を分類することができる。 リレーション（関係）は、２つの要素の間に存在することができる。リレーシ ョンは、「ｉｓ_ａ」、全体、一部または結合であり得る。「ｉｓ_ａ」のリレー ションは、２つ以上の要素間で継承関係を確立する。全体と一部のリレーション は、別の要素に含まれた要素を識別する。結合の関係は１つの要素を別の要素に 関係付けるのに使用される。 カタログ要素及び関係付けられた属性及び属性要素を使用して異なる組のマル チメディア・データをカタログ化することができる。更に、カタログ内で、シソ ーラス・キーワード及び代替シソーラスを使用して、内容を代替の表現で表すこ とが可能となる。従って、マルチメディアと結合したカタログの性質をシソーラ ス内で（シソーラス・キーワードインスタンスを使用して）または多数のシソー ラスを使用して変化させることが可能となる。 句要素は、コンテンツ（内容）を識別する１つ以上の結合したキーワードを有 している。各キーワードはシソーラス・キーワードの１つ以上の結合したインス タンスを有している。各シソーラス・キーワード・インスタンスは、その結合キ ーワードに対して、内容に関する代替の表現を含んでいる。従って、代 替のシソーラス・キーワードを使用して代替のコンテンツ仕様書を作成すること が可能となる。 更に、カタログに結合した内容をカタログ用の多数のシソーラスを使用して変 更することが可能である。シソーラスは、キーワード及びキーワード及びタイプ 属性要素のインスタンスから形成したタイプ階層を使用して、定義することがで きる。各シソーラスは、カタログのコンテンツの代替仕様書を含むことができる 。即ち、各シソーラスは、キーワード及び代替のコンテンツまたはコンセプト仕 様書を有するタイプ属性要素のインスタンスを含むことができる。従って、カタ ログに結合したコンテンツをシソーラスの各インスタンスに応じて、変更するこ とが可能となる。 図面の簡単な説明 図１は、本発明に使用される汎用コンピュータの例を提示するものである。 図２Ａは、本発明の実施例によるカタログ及び属性要素の例を提示するもので ある。 図２Ｂは、本発明の実施例による図２Ａ中で識別される要素間に形成される関 係を例示するものである。 図２Ｃは、本発明の実施例によるセグメント２０４のインスタンスの例を提示 するものである。 図２Ｄは、本発明の実施例によるカタログの属性及び属性要素の例を提示する ものである。 図２Ｅは、本発明の実施例によるキーワード２１０及び複数の関係付けられた ラベル属性のインスタンスを例示するものである。 図３Ａ〜図３Ｆは、本発明の実施例による入力データの再検討し、該入力デー タをカタログ及び属性要素に関連付けるためのカタログ化機能ユーザ・インタフ ェース・スクリーンを例示するものである。 図４は、本発明の実施例によるキーワードの可視化、及びプロポーズド値及び シソーラス値を識別するカタログ化機能ユーザ・インタフェース・スクリーンを 提示するものである。 図５は、本発明の実施例による品質保証エントリ・スタリーンを提示するもの である。 図６は、本発明の実施例によるイベント及びイメージ情報を可視化するスクリ ーンの例を提示するものである。 図７Ａ及び図７Ｂは、本発明の実施例によるリレーション管理スクリーンの例 を提示するものである。 図８Ａ及び図８Ｂは、本発明の実施例によるユーザ入力の作成及び修正処理の 処理フローの例を提示するものである。 図９Ａは、本発明の実施例による作成セグメント処理フローの例を提示するも のである。 図９Ｂは、本発明の実施例による句作成処理フローの例を提示するものである 。 図１０は、本発明の実施例によるシソーラス要素の作成の処理フローの例を提 示するものである。 図１１は、本発明の実施例によるプロポーズド要素を作成する処理フローの例 を提示するものである。 図１２は、本発明の実施例による処理動作をデリート／マージ（削除及び併合 ）する処理フローの例を提示するものである。 図１３Ａは、本発明の実施例によるイベント・インスタンスを作成する処理フ ローの例を提示するものである。 図１３Ｂは、本発明の実施例によるイメージ属性要素のインスタンスを作成す る処理フローの例を提示するものである。 図１４Ａ及び図１４Ｂは、本発明の実施例による削除処理動作の処理フローの 例を提示するものである。 図１５Ａ及び図１５Ｂは、本発明の実施例による子を削除する処理フローの例 を提示するものである。 図１６は、本発明の実施例による要素をクラス分けから外す（ｄｅｃｌａｓｓ ｆｉｃａｔｉｏｎ）処理フローを提示するものである。 図１７は、本発明の実施例によるドラグ／ドロップ操作の取り扱いの処理フ ローの例を提示するものである。 図１８Ａ及び１８Ｂは、本発明の実施例によるカタログ・インスタンスを例示 するものである。 発明の詳細な説明 マルチメディアのカタログ化を行う方法及び装置を説明する。下記の説明にお いては、数々の詳細について説明して本発明を十分に説明することとするが、斯 かる固有の詳細がなくても本発明を実施できることは当業者には明白なことであ る。その他では、本発明を明確にするために公知の特徴の詳細な説明はしていな い。 本発明の実施例は、図１に例示した如き汎用コンピュータで実行されるコンピ ュータで読み取り可能なプログラム・コードの形態のソフトウェアとして実現す ることが可能である。キーボード１１０及びマウス１１１が双方向システムバス １１８に連結されている。キーボード及びマウスは、ユーザ入力をコンピュータ ・システムへ導入して、該ユーザ入力を中央演算処理装置（ＣＰＵ）１１３へ連 絡させるためのものである。マウス１１１及びキーボード１１０に加えて又はそ れらに代えて、その他の適切な入力装置を使用することが可能である。双方向シ ステムバス１１８に連結されたＩ／Ｏ（入力／出力）装置１１９は、プリンタ、 ネットワーク・コミュニケーション・カード、モデム、Ａ／Ｖ（オーディオ／ビ デオ）Ｉ／Ｏ等のＩ／Ｏ要素を表している。 図１のコンピュータシステムは、また、ビデオメモリ１１４、メイン・メモリ １１５及び大容量記憶を含み、これらは全て、キーボード１１０、マウス１１１ 及びＣＰＵ１１３と共に双方向システムバス１１８い連結されている。大容量記 憶１１２は、磁気、光または光磁気記憶装置、または、その他の利用できる任意 の大容量記憶技術等の固定及び移動自在の双方の媒体を含むことが可能である。 バス１１８は、例えば、ビデオ・メモリ１１４またはメイン・メモリ１１５にア ドレス指定するための３２本のアドレス・ラインを含むことが可能である。シス テムバス１１８は、また、ＣＰＵ１１３、メイン・メモリ１１５、ビデオ・メモ リ１１４及び大容量記憶１１２の、いずれか２者間またはそ れら全体の間で、データを転送するための３２ビット・データ・バスを含んでい る。なお、別個のデータ・ライン及びアドレス・ラインの代わりに、多重データ ／アドレス・ラインを使用することが可能である。 本発明の１実施例では、ＣＰＵ１１３はモトローラ（Ｍｏｔｏｒｏｌａ）によ り製造される６８０Ｘ０プロセッサ等のマイクロプロセッサか、または、インテ ル（Ｉｎｔｅｌ）により製造される８０Ｘ８６またはペンティアム（Ｐｅｎｄｉ ｕｍ）プロセッサ等のマイクロプロセッサか、または、サンマイクロシステムズ （Ｓｕｎ Ｍｉｃｏｒｏｓｙｓｔｅｍｓ）のＳＰＡＲＣマイクロプロセッサであ る。しかしながら、その他の適当なマイクロプロセッサまたはマイクロコンピュ ータを使用することも可能である。メイン・メモリ１１５はダイナミック・ラン ダム・アクセス・メモリ（ＤＲＡＭ）からなる。ビデオ・メモリ１１４はデュア ルポート・ランダム・アクセス・メモリである。ビデオ・メモリ１１４の一方の ポートは、ビデオ増幅器１１６に連結されている。ビデオ増幅器１１６は、陰極 線管（ＣＲＴ）ラスタ・モニタ１１７を駆動するのに使用される。ビデオ増幅器 １１６は当技術分野では公知であり、任意の適当な装置によって実施するのも可 能である。この回路で、ビデオ・メモリ１１４に記憶された画素データが、モニ タ１１７での使用に適したラスタ信号に変換される。モニタ１１７は、図形画像 を表示するのに適したタイプのモニタである。 上記に説明したコンピュータ・システムは、あくまでも例として挙げたもので ある。本発明の実施例は、任意のタイプのコンピュータ・システムまたはプログ ラムまたは処理環境において実施することが可能である。上記に説明した汎用コ ンピュータシステムが本書にて説明する処理及び処理フローを実行する場合には 、該汎用コンピュータが、本発明の１以上の実施例によるマルチメディア・デー タをカタログ化する手段である。カタログの生成 本発明はマルチメディア・データ等のデータをカタログ化する。カタログは、 １以上のカタログ要素の集まりである。インデックスは、カタログにアクセスす るのに使用される。カタログ要素は１以上の属性を有している。属性は、カ タログの検索、カタログに関する質問への回答、及び、カタログをナビゲート（ ｎａｖｉｇａｔｅ）即ち航行するのに使用することができる。カタログ要素の属 性は、属性を有した要素とすることができる。要素であるカタログ要素属性は、 属性要素と呼ばれる。属性要素及び属性は、カタログ・アクセスを容易にするの に使用できるインデックスを構築するのに使用される。例えば、質問やユーザ指 定により、カタログ内により小さなカタログを生成することができる。 （カタログ及び属性要素） 本発明で使用されるマルチメディア・データ・カタログは、句（フレーズ）と 呼ばれる１つのカタログ要素からなるのが好適である。句は、マルチメディアデ ータの一部と結合される。句は複数の属性を有しており、該属性の幾つかは属性 要素である。句の属性である属性要素は、キーワード、パーソン（人）、イメー ジ、ビデオ（例えば、ドキュメンタリの場面）、プロポーズド（提案された）・ パーソン及びプロポーズド・キーワードを含んでいる。該キーワード、パーソン 、イメージ、プロポーズド・パーソン及びプロポーズド・キーワード属性要素は 、属性を有しており、該属性もまた属性要素である。例えば、キーワード属性要 素の属性である属性要素は、シソーラス・キーワード、シソーラス・パーソン、 キーワード、及びタイプを含んでいる。インデックスは、属性及び属性要素上に 構築される。索引を使用して、カタログをナビゲート（例えば、句の検索）をす ることが可能である。 図２Ａは、本発明の実施例によるカタログ及び属性要素の１例を提示している 。セグメント２０４はコンテナ要素である。該コンテナ要素は他の要素を含んで いる。例えば、セグメント２０４は、句の２６の１以上のインスタンスを含むこ とができる。本発明では、入力データは１以上の片またはフラグメントに分解さ れる。句２０６のインスタンスは、各入力データ・フラグメントと結合される。 句２０６はカタログ要素である。句２０６は１以上の属性及び／または属性要素 を有しており、該属性及び／または属性要素上に索引が構築される。この索引を 使用してカタログをナビゲートすることができる。 句２０６の属性はキーワード２１０である。句２０６のインスタンスは、キー ワード２１０の１以上のインスタンスと結合することができる。キーワード２１ ０は、更に、入力データ・フラグメントのアスペクトを定義する。好適には、キ ーワード２１０の属性が、入力データ・フラグメントの内容または実体を識別す る。キーワード２１０に識別されたコンテンツまたはサブスタンスは、単一の語 で表現されるのが好適である。しかしながら、コンテンツまたはサブスタンスを 多数の語を使用して表現することが可能である。 例示すると、入力データはビデオテープとすることが可能である。斯かるビデ オテープは、例えば、ホロコーストの生存者となされたインタビューのビデオテ ープである。該インタビューは、被会見者の戦前、戦中及び戦後の経験に分類さ れる。被会見者の戦前の経験をテーマに分類できる。戦前のテーマは、例えば、 被会見者の私的生活とすることができる。各テーマは、サブ・テーマに分類でき る。被会見者の私的生活の例では、サブ・テーマを被会見者の家族のメンバとの 関係、学校での経験等とすることが可能である。各サブ・テーマは情報アイテム を含んでいる。今の例を使って例示すれば、情報アイテムは、家、兄弟、姉妹、 先生等とすることが可能である。この例では、被会見者の私的生活のテーマは、 セグメント２０４のインスタンスとなる。被会見者の家族との関係及び学校での 経験は、句２０６のインスタンスとなる。家、兄弟、姉妹及び先生と言った語は 、キーワード２１０のインスタンスとなる。これらの家、兄弟、姉妹及び先生と 言った語は、入力データ・フラグメントの内容または実体に関する情報を提供す る。 キーワード２１０のインスタンスは、シソーラス・キーワード２１２の１つ以 上のインスタンスと結合することができる。シソーラス・キーワード２１２のイ ンスタンスは、キーワード２１０のインスタンスの具体例である。シソーラス・ キーワード２１２は、関連するキーワード２１０のインスタンスの値またはラベ ルを特定する。シソーラス・キーワード２１２は、１つ以上の語とすることがで きる。例えば、シソーラス・キーワード２１２を使用して、キーワード２１０の インスタンスを特定の言語で特定することができる。シソーラス・キーワード２ １２の多数のインスタンスを使用して、キーワード２１０の インスタンスの値を多数の言語で表現することができる。キーワード２１０のイ ンスタンスの値の代替表現もシソーラスのインスタンスで保持することができる 。従って、各言語による複数の代替表現を使用すれば、入力データ・フラグメン トのコンテンツまたはサブスタンスを、多数の言語で表現することができる。プ レファランス（選好）をシソーラス・キーワード２１０のインスタンスと関連づ けて、所定の言語による好適な代替例として識別することができる。 図２Ｅは、本発明の実施例によるキーワード２１０のインスタンス及び複数の 関連付けラベル属性を例示している。グリッドが軸線２８６及び２８８で表示さ れている。キーワード２１０のインスタンスは、垂直軸線、即ち、軸線２８６に 沿って表示されている。水平軸線、即ち、軸線２８６は、言語の例を含んでおり 、斯かる例においては、キーワード２１０のインスタンスに関連付けられたラベ ルを表すことができる。シソーラス・キーワード２１２のインスタンスは、これ らの２つの軸線の交差する点で表される。 シソーラス・キーワード２１２の各インスタンスは、キーワード２１０の関連 付けインスタンスの具体例である。シソーラス・キーワード２１２の各インスタ ンスはラベルを含んでおり、このラベルはキーワード２１０のインスタンスのラ ベルとして使用することができる。例えば、シソーラス・キーワード２９０Ａ〜 ２９０Ｄ、２９１Ａ〜２９１Ｅ、２９２Ａ〜２９２Ｂ、及び２９３Ａ〜２９３Ｂ は、キーワード・インスタンス１の具体例である。同様に、シソーラス・キーワ ード２９４Ａ〜２９４Ｂ、２９５Ａ〜２９５Ｂ、２９６Ａから２９６Ｃ、及び２ ９７Ａから２９７Ｂは、キーワード・インスタンス２の具体例である。 シソーラス・キーワード２１２のインスタンスを、特定の言語のキーワード２ １０のインスタンスの具体例とすることができる。例えば、シソーラス・キーワ ード２９１Ａ〜２９１Ｅは、キーワード・インスタンス１の英語の具体例である 。シソーラス・キーワード２９１Ａ〜２９１Ｅは、キーワード・インスタンス１ の代替具体例を提供する。即ち、各々がキーワード１の英語ラベルを含んでいる 。従って、キーワード・インスタンス１は異なる英語ラベルと結合することがで き、この異なる英語ラベルに基づいて、シソーラス・キーワード ２９１Ａ〜２９１Ｅのインスタンスを使用してキーワード・インスタンス１にラ ベルが提供される。同様に、キーワード・インスタンスは、シソーラス・キーワ ード２９５Ａ〜２９５Ｂに含まれた英語の代替例と結合される。 従って、１つの言語において、キーワード２１０のインスタンスは、シソーラ ス・キーワード２１２の代替具体例を有することができる。キーワード２１０の インスタンスもまた、図２Ｅに例示した如く、多数の言語に亙ったシソーラス・ キーワード２１２の代替具体例を有することができる。キーワード・インスタン ス１の代替具体例は、例えば、仏語（例えば、シソーラス・キーワード２９０Ａ 〜２９０Ｄ）、独語（例えば、シソーラス・キーワード２９２Ａ〜２９２Ｂ）及 び露語（例えば、シソーラス・キーワード２９３Ａ〜２９３Ｂ）に存在する。同 様に、キーワードインスタンス２は、仏語（例えば、シソーラス・キーワード２ ９３Ａ〜２９３Ｂ）、独語（例えば、シソーラス・キーワード２９４Ａ〜２９４ Ｃ）及び露語（例えば、シソーラス・キーワード２９７Ａ〜２９７Ｂ）の代替具 体例を有している。 キーワード２１０のインスタンスの好適な代替具体例は、キーワードを表す言 語の各々で識別することができる。従って、例えば、シソーラス・キーワードイ ンスタンス２９０Ｃは、仏語のキーワード・インスタンス１の好適な具体例とし て識別できる。同様に、シソーラス・キーワード・インスタンス２９１Ｂ、２９ ２Ａ及び２９３Ｂはそれぞれ、キーワード・インスタンス２の好適な英語、独語 、及び露語のインスタンスとすることができる。 図２Ａを参照すると、タイプ２１６はキーワード２１０と関連付けられる。タ イプ２１６は、キーワード２１０の属性情報を提供する。タイプ２１６を使用し て、類別または項類にキーワード２１０のインスタンスを含ませることができる 。即ち、キーワード２１０のインスタンスは、タイプ２１６のインスタンスの具 体例である。例えば、属性として「フォード・ブロンコ（Ｆｏｒｄ Ｂｒｏｎｃ ｏ）」を有するキーワード２１０のインスタンスは、「車」の属性を有するタイ プ・インスタンスと結合することが可能である。キーワード２１０の別のインス タンスは、属性として「ムスタング（Ｍｕｓｔａｎｇ）」を有しており、該イン スタンスもまた、タイプ２１６の同一のインスタンスと結合 することができる。キーワード２１０の双方のインスタンスは、車のインスタン スとなる。タイプ２１６の１つ以上のインスタンスを、キーワード２１０の１つ のインスタンスと結合することができる。好適な実施例では、階層がタイプ２１ ６のインスタンスに対して確立される。タイプ２１６のインスタンスを、タイプ ２１６の別のその他のインスタンスの親または子とすることができる。キーワー ド２１９のインスタンスは、タイプ２１６のインスタンスと関連付けられると共 に、タイプ２１６のインスタンスの階層とも結合される。 句２０６を介して入力データ・フラグメントと結合することができるその他の 属性要素は、パーソン（人）１８及びイメージ２２０を含んでいる。パーソン２ １８は、入力データ・フラグメントと関係付けられた個人を識別する。前の例で は、私的生活経験が人についてのレフェランス即ち参照事項を含むことが可能で ある。パーソン２１８のインスタンスを使用して斯かる参照事項を識別すること ができる。人に関する情報２２６は、パーソン２１８のインスタンスに関する属 性情報を提供する。イメージ２２０のインスタンスは、入力データ中で参照され る静止写真等のデータに使用される。 本発明の好適な実施例では、キーワード２１０及びパーソン２１８等の幾つか の要素は、実際のインスタンスとなる前に承認されなければならない。斯かるイ ンスタンスは、承認される前はプロポーズド（提案）・インスタンスと見なされ る。例えば、プロポーズド・キーワード２１４及びプロポーズド・パーソン２２ ４は属性要素であり、斯かる属性要素を使用して、実際のインスタンスとして未 承認のキーワード２１０及びパーソン２１８のインスタンスを識別する。プロポ ーズド・インスタンスは再検討されて、提案された属性要素を実際の属性要素に 変換するか、または、提案された属性要素を処分するかが決定される。 人に関する情報２２６は、パーソン２１８と関連付けられた属性要素である。 「１対１」の関係（リレーション２３６）が人に関する情報２２６とパーソン２ １８との間に存在する。人に関する情報２２６は、パーソン２１８の属性要素を 含んでいる。人に関する情報２２６の属性は、パーソン２１８のインスタンスを 有する人に関する情報を含んでいる。 イベントもまた入力データと結合することができる。各イベントは、イベント ２０８のインスタンスとなる。既に述べた如く、入力データを入力データフラグ メントに分解して、各フラグメントを句２０６のインスタンスと関連付けること ができる。入力データはまた、入力データ・フラグメントに分解して、イベント ２０８のインスタンスと関連付けることができる。タイプ属性は、イベント２０ ８と結合される。好適な実施例のイベント・タイプの例は、セグメント、句、テ ープ間の中断、品質保証詳細、ファクト、及び種々雑多（その他）を含んでいる 。イベントを使用して関連付けられた入力データ・フラグメントへ、アクセスす ることができる。イベント２０８のインスタンスを使用して、入力データ・フラ グメントにアクセスすることができる。例えば、タイプ句のイベント２０８のイ ンスタンスを使用して、句２０６のインスタンスと関係付けられた入力データ・ フラグメントの位置決めをすることができる。 イベント・タイプの別の例は、品質保証イベントである。本発明の好適な実施 例では、品質保証機構を使用して、入力データの品質を監視すると共にフィード バックを提供することができる。品質保証イベントを使用して、入力データに印 をつけることができる。イベントにより、正、負または中間の品質保証イベント の印を付すことができる。例えば、ビデオ入力データが多数のインタビューを通 して収集されている。各インタビューを再検討して、インタビュー・プロセスの 価値のある部分を識別する。例えば、インタビュア即ち会見者が被会見者を追求 しないために詳細が追加して得られない場合には、負の品質保証イベントが生成 される。正のイベントを同様に生成することができる。正でも負でもないイベン ト（即ち、情報的なものまたは中間イベント）もまた、生成することができる。 品質保証イベントのレポートを生成して、入力データ収集に関与する人々にフィ ードバックを提供することができる。 （要素のリレーション（関係）） 好適な実施例では、カタログ要素と属性要素が相互関係にある。本発明を使用 すれば、２つ以上の要素間でリレーションが形成される。図２Ｂは、本発明の実 施例による図２Ａで識別した要素間で形成されるリレーションを例示して いる。「多数」のリレーションが２重矢印を使用して示されている。「１つ」の リレーションは単一矢印により識別される。例えば、リレーション２２８は「多 数」のリレーションである。即ち、セグメント２０４の１以上のインスタンスを 、句２０６の多数のインスタンスと関係付けすることができる。別の言い方をす れば、セグメント２０４は、句２０６の１つ以上のインスタンスを含んでいる。 句２０６の１つのインスタンスを、セグメント２０４の多数のインスタンスと関 係付けすることができる。即ち、句２０６のインスタンスは、セグメント２０４ の１つ以上のインスタンス中に含まれる。リレーション２４６により例示する如 く、タイプ２１６の１つ以上のインスタンスを、タイプ２１６のその他のインス タンスと関係付けすることができる。 「多数対多数」の関係（リレーション２３０）が、句２０６とプロポーズド・ キーワード２１４、キーワード２１０、イメージ／ビデオ２２０、プロポーズド ・パーソン２２４、及びパーソン２１８との間に存在する。句２０６のインスタ ンスを、１組のプロポーズド・キーワード、１組のキーワード、１組のイメージ ／ビデオ、１組のプロポーズド・パーソン及び１組のパーソンと関係付けること ができ、各組は、零以上のメンバを有している。更に、プロポーズド・キーワー ド２１４、キーワード２１０、イメージ／ビデオ２２０、プロポーズド・パーソ ン２２４またはパーソン２１８のインスタンスを、句２０６の１つ以上のインス タンスと関係付けすることができる。 リレーション２３８は、キーワード２１０とシソーラス・キーワード２１２と の間の関係を例示している。キーワード２１０のインスタンスは、シソーラス・ キーワード２１２の１つ以上のインスタンスと結合することができる。シソーラ ス・キーワード２１２の同一のインスタンスは、キーワード２１０の１つ以上の インスタンスと関連付けることができる。 前に述べた如く、タイプ２１６のインスタンスは、タイプ階層を介してタイプ ２１６のその他のインスタンスと相互関係になることができる。リレーション２ ４４は、タイプ２１６のインスタンスを、タイプ２１６の別のインスタンスの親 または子として識別する。同様に、キーワード２１０のインスタンスは、キーワ ード階層を介して相互関係にある。キーワード２１０は、リレーション ２４２を介してキーワード２１０のその他のインスタンスと関係付けすることが できる。リレーション２４２は、キーワード２１０のインスタンスを、キーワー ド２１０の別のインスタンスの親または子として識別する。リレーション２４４ は、キーワード２１０とタイプ２１６とを関係付ける。即ち、キーワード２１０ の１つのインスタンスが、タイプ２１６のインスタンスと関係付けされる。逆に 、タイプ２１６のインスタンスを、キーワード２１０の多数のインスタンスと関 連付けることができる。 更に、キーワード２１０のインスタンスを、リレーション２４２及び２４６を 介して、タイプ２１６の多数のインスタンスと関係付けすることができる。即ち 、キーワード２１０のインスタンスは、タイプ２１６のインスタンスと関係付け られたタイプを有している。更に、キーワード２１０のインスタンスは、タイプ ２１６の関係付けられたインスタンスの子と関係付けられたタイプを継承する。 パーソン２１８及びパーソン情報２２６は、リレーション２２８を介して「１ 対１」の関係を有している。パーソン２１８及びシソーラス・パーソン２２２は 、リレーション２３４を介して関係している。パーソン２１８は、シソーラス・ パーソン２２２の多数のインスタンスと結合することができる。シソーラス・パ ーソン２２２のインスタンスを、リレーション２３４を介して、パーソン２１８ の多数のインスタンスに関係付けすることができる。 セグメント２０４はコンテナ要素である。即ち、リレーション２２８により例 示される如く、セグメント２０４は、句２０６の多数のインスタンスを含むこと ができる。セグメント２０４は、該セグメント２０４に含まれる１組の要素によ り定義される。例えば、セグメント２０４は、例えば、章セグメント、証拠セグ メントまたは一般セグメントである。句２０６のインスタンスを、章セグメント 中の入力データ中で起きる順番にグループ化することができる。証拠セグメント として、セグメント２０４は、入力データに関係付けられた１グループのインス タンスを含んでいる。例えば、証拠セグメントは、ビデオテープに撮られたイン タビューと結合されるセグメント２０４の全てのインスタンスを含むことができ る。パーソン２１８は、リレーション２３２を介してセグ メント２０４に関係付けすることができる。少なくともパーソン２１８の１つの インスタンスが、リレーション２３２を介して証拠セグメントであるセグメント ２０４のインスタンスと関係付けされる。 リレーション２５０は、セグメント２０４のその他のインスタンスのコンテナ として作用するセグメント２０４（即ち、証拠セグメント）のインスタンス間の 関係を例示している。一般セグメントは、特定の入力データに必ずしも関係付け られるものではない句２０６の１組のインスタンスを含んでいる。一般セグメン トは、一定の基準に合致する句の集まりとすることができる。例えば、一般セグ メントは、「先生」の値を有するキーワード２１０のインスタンスに関係付けら れた句２０６のインスタンスを含むことができる。 従って、セグメント２０４は、１グループのカタログ要素（例えば、句２０６ ）を識別する。セグメント２０４のインスタンスは、全てのカタログ要素インス タンスを識別することができる。セグメント２０４のその他のインスタンスは、 カタログ要素の部分集合を識別することができる。従って、例えば、セグメント ２０４のインスタンスが、句２０６の全てのインスタンスまたは句２０６のイン スタンスの全てからなる或る部分集合を識別することができる。句２０６の全て のインスタンスを含でいる前記の１組は、カタログである。句２０６の全てのイ ンスタンスからなる部分集合を含んだより小さなカタログもまた、カタログであ る。より小さなカタログを、例えば、質問操作またはユーザ指定によりカタログ 中に生成することができる。 １組のカタログ要素は、例えば、属性要素を質問することで識別することがで きる。質問操作を属性要素に関して行って、カタログ要素に関係付けられたその 他の属性要素を試験することができる。質問操作は、当該質問中で特定される基 準を満足する１組のカタログ化のための要素（例えば、句２０６のインスタンス ）を識別する。質問で識別される１組のカタログ化のための要素は、セグメント ２０４のインスタンス中でグループ化される。ユーザもまた、セグメント２０４ のインスタンス中にグループ化できる句２０６の集合を特定できる。 図２Ｃは、本発明の実施例によるセグメント２０４のインスタンスの例を提 示している。図２Ｃを参照すると、入力データ２５８は、多数の入力データフラ グメントから構成されている。入力データ・フラグメント２６０は、時間Ｔ０に 開始して、時間Ｔ１で終了する。句Ｐ１は、入力データ・フラグメント２６０と 関連付けられる。同様に、入力データ・フラグメント２６２、２６４、２６６、 ２６８、２７０、２７２及び２７４は、句Ｐ２、Ｐ３、Ｐ４、Ｐ５、Ｐ６、Ｐ７ 、…、Ｐｎと結合される。 セグメント２８０は、句Ｐ１、Ｐ２及びＰ３からなる。セグメント２８２（即 ちＳ２）は、句Ｐ４及びＰ５からなる。セグメントＳ１、Ｓ２及びＳ３（即ち２ ８０、２８２及び２８４）は、章セグメントである。入力データ２５８（即ち、 Ｓ１、Ｓ２及びＳ３）と関連付けられた章セグメントの集合は、証拠セグメント を備えている。一般セグメントはＰ１、Ｐ４、Ｐ５、Ｐ６、…、Ｐｎ等の句から なる任意の集合を含むことができる。 （属性） 図２Ｄは、本発明の実施例によるカタログ用の属性及び属性要素の例を提示し ている。セグメント２０４は、例えば、識別子（ＩＤ）、記述句及び１組の句を 含んでいる。セグメント２０４のインスタンスと関係付けられた句は、前記セグ メント・インスタンスの１組の句内に含まれる。要素間においてリレーションを 生成することで、１組が形成される。図２Ｂは、本発明の実施例の要素間に存在 するリレーションの例を示している。組を形成するリレーションは、当該技術分 野で公知の技術の任意のものを使用して実現することができる。例えば、前記リ レーションは、ポインタを使用してプログラム用言語で実行することができる。 例えば、リレーション・データベース管理システムでは、前記リレーションを比 較及び主及び外部キーを使用して、形成することができる。 図２Ｄを参照すると、句２０６は、入力データＩＤ（例えば、当該句が生成さ れた入力データを識別する）、ＩＤ、記述句、Ｉｎ／Ｏｕｔ（入／出）タイムコ ード（即ち、入力データ中の対応する位置）、１組のキーワード、イメージ、パ ーソン、プロポーズド・キーワード、及びプロポーズド・パーソンを含んでいる 。キーワード２１０は、ＩＤ、タイプの組、シソーラス・キーワード、 子キーワード、及び親キーワードを含んでいる。子及び親キーワードの組は、キ ーワード階層のリレーションを形成する。キーワード２１０に関係付けされたシ ソーラス・キーワードの組は、キーワード・インスタンスの値またはラベルを含 んでいる。 パーソン２１８は、ＩＤ、主たる名前、職業、生年月日、及び１組のプロポー ズド・パーソンを含んでいる。パーソン情報２２６は、パーソン２１８の関連付 けられたインスタンスのパーソンＩＤを含んでいる。パーソン情報２２６は、パ ーソン２１８の関連付けられたインスタンスの１つ以上の属性を含んでいる。属 性情報は、カタログ化されつつあるマルチメディア情報次第で変化する。例えば 、カタログ化されたマルチメディア・データは、個人とのインタビューから構成 されることが可能である。パーソン２１８のインスタンスは、具体化して被会見 者と結合することができる。従って、前記パーソン２１８のインスタンスと関係 付けられたパーソン情報２２６は、被会見者の伝記上の情報を含むことができる 。マルチメディア・データは、スポーツ・イベントをビデオに撮ったものである 。この場合、パーソン２１８のインスタンスは、スポーツ・イベント（例えば、 プレヤー、レフリー、及び放送関係者）と関連付けられた人に関して、生成する ことができる。前記パーソン２１８のインスタンスに関係付けられたパーソン情 報２２６のインスタンスは、参加者に関連付けられた統計上の情報を含むことが できる。 イベント２０８は、ＩＤ、タイプ（例えば、セグメント、句、会見者、ビデオ 映像撮影者、事実またはその他）、サブ・タイプ（例えば、正、負または通報イ ベント）、タイムコード、及びコメント（または記述ノート）を含む。 シソーラス・キーワード２１２は、ＩＤ、キーワードＩＤ（即ち、シソーラス ・キーワード・インスタンスが代替となるキーワード２１０のインスタンスのＩ Ｄ）、ラベル（即ち、シソーラス・インスタンスが関係付けされるキーワードイ ンスタンスの値）、選択識別子の言語（または言語ＩＤ）、好適なフラッグ及び 特性を含んでいる。設定を行うと、好適なフラッグにより、シソーラス・キーワ ード・インスタンスが言語ＩＤにより特定される言語による関連キーワード・イ ンスタンスの好適な代替であるとの、条件をつける。特性属性が 更に、シソーラス・キーワード・インスタンスを定義する。この特性属性を使用 して、シソーラス・キーワードが、例えば、俗語であることを識別する。 ＩＤ、タイムコード、及びロケータが、イメージ２２０の属性として含まれる 。ローケータ属性を使用して、例えば、ディジタル化されたイメージの位置指定 がなされる。プロポーズド・キーワード２１４は、ＩＤ及びラベルを含む。また 、プロポーズド・キーワード２１４中のキーワード２１０に含まれた属性を含む ことが可能である。従って、新たなキーワードの提案を行いつつあるユーザは、 同量のプロポーズド・キーワードに関する情報を入力することができる。プロポ ーズド・パーソン２２４は、ＩＤ及び名前属性を含んでいる。プロポーズド・キ ーワード２１４と同様に、パーソン２１８と関連付けられた属性は、プロポーズ ド・パーソン２２４に含めることができる。タイプ２１６は、ＩＤ及びラベルを 含んでいる。 要素及び該要素の関係を、カタログ化機構及びリレーション管理機構を使用し て管理することができる。カタログ化機構は、一連の表示画面を含んでいる。カ タログ化中に、ユーザ（例えば、カタログ制作者）は、入力データを再検討して 、要素を具体化させると共に、入力データ及びその他の要素と結合させる。既に 存在する要素は、カタログ化中に入力データと結合することができる。更に、カ タログ制作者は、新たな要素及びリレーションを提案することができる。リレー ション管理機能を使用して、カタログ制作者により提案された要素及びリレーシ ョンを再検討する。また、リレーション管理機能を使用して、新たな要素及び関 係を生成することができる。カタログ化機能 カタログ化機能は、一連の表示画面を備えたユーザ・インタフェースを含んで いる。カタログ化機能は、また、ユーザ・インタフェースへの入力を処理する処 理過程を含んでいる。 （カタログユーザインタフェース） 図３Ａ〜図３Ｆは、本発明の実施例による、入力データを再検討し、該入力 データをカタログ及び属性要素と関連付け、且つ、要素属性を識別する、カタロ グ化機能ユーザインタフェース表示画面を例示している。 カタログ化インタフェース（図３Ａ参照）の表示画面３０２は、多数の領域か ら構成されている。領域３１０は、入力データを見る即ち表示するのに使用され る。好適な実施例では、入力データはビデオ映像データである。しかしながら、 本発明はいずれのタイプのデータにも使用することができることは、明白なこと である。図３Ｃは、図３Ａの入力データの表示領域の詳細な例を提示している。 領域３１０は、領域３４０から成り、該領域ではビデオ・データがテレビ画面に 映されるのと同様に再生される。領域３４２には入力データを操作するコントロ ール・ボタン（例えば、再生、ポーズ、速送り、速巻き戻し等）が設けられてい る。ボタン３４４により、カタログ制作者が、イメージ２２０のインスタンス（ 例えば、タイムコード、記述ノート）を生成するのが可能となり、ローケータが 、ビューイング領域即ち表示領域３４０において今表示されている入力データと 結合される。ボタン３４６により、領域３４０に表示中のビデオ入力が、句２０ ６の特定されたインスタンスの始めに移動される。ボタン３４６を押すと、句２ ０６の前のインスタンスに関連付けられたタイムコードを使用して、入力データ 中の前のインスタンスの位置へのアクセスがなされる。ボタン３４８により、ビ デオが前の句の終わりに移動される。その他のコントロール・ボタンを使用して 、入力データ中の移動が可能となる。 図３Ａを参照すると、イベント２０８のインスタンスが表示領域３０４及び３ ０６に表示されている。図３Ｂは、表示領域３０４及び３０６の詳細な例を提示 している。表示領域３０４及び３０６は、イベント・タイムラインを表示する。 イベント・タイムラインは、イベント２０８の各インスタンスのインディケータ 即ち標識を、該インスタンスが関連付けられる入力データ中に起きる順番で含ん でいる。斯かる配列は、例えば、時間零を入力データの始めに割り当て、時間カ ウンタを増分して経過時間（時間、分、秒等）を識別することにより決定するタ イムコードにより識別するのが好適である。 印３２２〜３２７及び３３４Ａ〜３３Ｎは、イベントを示すのに使用される。 １つ以上の印を使用して、イベント２０８のインスタンスを表すことができる。 イベント２０８のインスタンスを表す１つの印または複数の印は、イベント・タ イプに基づいてカラー・コードとすることができる。例えば、黒の印で章セグメ ントを表すようにすることができる。ピンクの印は句を表す。黄、茶、緑及び青 の印を使用して、例えば品質保証印を表すようにすることができる。 ボックス３０４Ａをズーム・ボックスと呼ぶ。このズーム・ボックス３０４Ａ 内に含まれる印（例えば、印３２２〜３２７）は、イベント表示ボックス３０６ 内で拡大または拡張される。表示ボックス３０６は、ズーム・ボックス３０４Ａ に含まれる印３２２〜３２７の拡大図を含んでいる。表示領域３０６の拡大図に より、印を見て選択するのが容易になる。印を選択することで、ユーザは、該印 と関連する入力データの部分までナビゲートすることができる。従って、例えば 、品質保証印を選択して、該印の生成を促進した入力データを見ることができる 。 記述またはノートを入力することにより、カタログ化インタフェースを使用し てイベントと結合することができる。図３Ａを参照すると、入力領域３１２が、 例えば、句、セグメントまたはイメージ・インスタンスの記述を入力するのに設 けられている。句２０６のインスタンスと関連付けられた記述句が構文解析され て、前記句２０６のインスタンスと関連付けられるキーワード２１０及びパーソ ン２１８の複数のインスタンスを識別する。 カタログ化インタフェースは更に、既存の章セグメント（即ち、セグメント３ ０４のインスタンス）及び句２０６のインスタンスを見るための要約表示領域を 提供する。表示画面３０２の領域３１６は入力データの章セグメント及び句の要 約を表示するのに使用される。図３Ｅは、本発明の実施例による図３Ａの表示領 域３１６の詳細な例を提示している。 図３Ｅを参照すると、表示領域３１６はスクロールが可能なウインドウを含ん でいる。表示領域は多数のコラムから構成されている。コラム３６０は表示領域 ３１６に表示された句と関係付けられた数字を表示する。コラム３６２、３６４ 、３６６、３６８及び３７０は、句及びセグメント・インスタンスと関係付けら れた情報を含んでいる。コラム３６２は、句またはセグメント・インスタンスの ために入力された記述句を含んでいる。コラム３６４及び３６６は それぞれ、開始及び終了タイムコードを含んでいる。コラム３６８及び３７０は それぞれ、キーワード及びプロポーズド・キーワードを識別する。水平及び垂直 スクロールが可能に構成されている。ライン３２７Ａ〜３２７Ｂ及び３２７Ａ〜 ３２７Ｃはそれぞれ、セグメント・インスタンス及び句インスタンスの表示情報 の例を提示している。 イベント２０８のインスタンスは、カタログ化インタフェースを使用して生成 することができる。イベント２０８のインスタンスは、セグメント２０４又は句 ２０６のインスタンスが生成される時に生成される。図３Ａを参照すると、領域 ３０８を使用して品質保証イベントが生成される。図３Ｆは本発明の実施例によ る図３Ａの領域３０８の、より詳細な図を示している。図３Ｆを参照すると、領 域３０８は、部分領域３８２〜３８８を含んでいる。部分領域３８２には、デー タ収集処理の参加者（例えば、会見者）と関連付けられる正（「＋」）、負（「 −」）、及び情報（「？」）品質保証イベントを生成するボタンが設けられる。 同様に、部分領域３８４は、別のデータ収集参加者（例えば、ビデオ撮影者）に 関係付けされる品質保証イベントを生成するのに使用される。部分領域３８６を 使用して、チェックを必要とするファクトにより品質保証イベントの生成を促進 することができる。雑種雑多の品質保証イベントは、部分領域３８８を使用して 生成することができる。 カタログ化インタフェースに含まれるコントロール・ボタンを使用して、操作 の選択がなされる。図３Ａを参照すると、コントロール・ボタン３１８を使用し て章セグメントまたは句のデリート（削除）、または、２つの章セグメントまた は２つの句のマージ（併合）ができる。ユーザは、例えば、領域３１６のセグメ ント２０４または句２０６のインスタンス（例えば、図３Ｅのライン３７２Ａ〜 ３７２Ｂ及び３７４Ａ〜３７４Ｃ）及びコントロール・ボタン３１８を選択する ことができる。コントロール・ボタン３２０を使用して、ハイライトが付けられ たライン（例えば、３７４Ｂまたは３７４Ｃ）の上方に、章表題を挿入する。例 えば、ユーザは領域３１６のセグメント２０４のインスタンス（例えば、図３Ｅ のライン３７２Ａ〜３７２Ｂ）及びコントロール・ボタン３１８を選択すること ができる。コントロール・ボタン３００を使用して、句 の記述句をセーブする。コントロール・ボタン３００を押すと、記述句が構文解 析されて、句２０６の新たなインスタンスと関係付けされる既存の属性要素（例 えば、キーワード２１０）が識別される。 コントロール・ボタン３１８は、また、図４に例示した如く、表示画面の表示 をトリガして、キーワードの表示及び提案された値及びシソーラスの値の識別が なされる。図４を参照すると、ブロック４０２が記述ノートを表示する領域を提 供する。コントロール・ボタン３１８が押されると、記述ノートの構文解析がな される。ユーザは、記述ノートの構文解析中に、識別されないキーワードの識別 または提案をすることができる。プロポーズド・キーワード２１４のインスタン スを関連するコメントと一緒にブロック４１０へ入力することができる。前に提 案されたアイテムは、ブロック４１８に表示することができる。キーワード２１ ０の既存のインスタンスは、そのタイプと一緒にブロック４１４に表示すること ができる。様々なスクロール技術を使用して、図３Ａ〜３Ｆと関連して説明した 如く、既存のキーワートを通してスクロールすることができる。シソーラス属性 要素（例えば、シソーラス・キーワード２１２）をブロック４１２へ入力するこ とができる。ブロック４１２では、属性要素が「使用された語」のコラムに入力 されると共に、シソーラス用語が「好適な用語」のコラムに入力される。キーワ ード２１０の新たなインスタンスは、ブロック４０２からの値をハイライト付け してブロック４０４を押すことにより、提案すること（即ち、プロポーズド・キ ーワード２１４を生成すること）ができる。プロポーズド・キーワード２１４は 、また、一定の値をブロック４０６へタイプすることにより、生成することがで きる。 前記の好適な実施例では、一連の質問がユーザになされて、データ収集処理の 品質へのアクセスがなされる。図３Ａを参照すると、ボタン３０１を使用して品 質保証質問表示画面へジャンプする。ユーザは、質問をスクロールして回答を特 定する。質問表示画面により、ユーザは、入力データも見ることができる。図５ は、本発明の実施例による品質保証質問を含んだ品質保証エントリ表示画面の例 を提示している。 ブロック５０２は、入力データの表示領域を提供する。コントロール５０４ により、ユーザは、入力データをナビゲートすることができる。ブロック５０６ 、５０８、５１０は、図３Ｃ（例えば、ブロック３４４、３４６及び３４８）に おいて既に説明している通りである。表示下面は、また、質問を表示しすると共 に質問に回答する領域５１２Ａ〜５１２Ｃを含んでいる。ブロック５１８は、品 質保証質問を含んでいる。ユーザは、ブロック５２０を使用して短い答え（例え ば、ＹＥＳまたはＮＯでの回答）で回答することができる。更に、ユーザは、ブ ロック５２２にコメントを入力することができる。スクロールを可能にすること で、ユーザがコメントをスクロールすることができる。ユーザは、ブロック５３ ４及び５３６を使用して質問をスクロールすることができる。例えば、ブロック ５３６を押すと、質問１（ブロック５１２Ａ）が表示画面からスクロールされて 消え、質問２及び３（ブロック５１２Ｂ及び５１２Ｃ）がスクロールされて上に 上がり、４番目の質問が表示画面の底部に現れる。ユーザは、ブロック５３２を 押せば図３Ａ〜３Ｆに例示した表示画面へ戻ることができる。 好適な実施例では、別の表示画面を設けて、ユーザがイベント及び入力データ と関係付けられたイメージ２２０のインスタンスのみならずイベントと関係付け られた入力データを見ることができるようにされている。図６は、本発明による イベント及びイメージ情報を表示する表示画面の例を示している。ブロック６０ ６が、入力データ（例えば、図３Ｃのブロック３４０で提供される如き）を表示 する領域を提供する。ブロック６０６は、また、前記データ（図３Ｃのブロック ３４２のデータの如き）をナビゲートすると共に、その他のカタログ化するため のインタフェース表示画面を表示するためのコントロール類（例えば、図３Ｃの コントロール・ボタン３４４、３４６及び３４８）を提供する。更に、イベント ・タイムラインを表示する領域６０２及び６０４が設けられている。表示領域６ ０２及び６０４は、図３Ｂの表示領域３０４及び３０６と同様なものである。表 示領域３０４と同様に、表示領域６０２は、表示領域６０４に表示するイベント を識別するズーム・ボックス（例えば、図３Ｂのズーム・ボックス３０４Ａ）を 含んでいる。 ブロック６１０、６２０、６３０及び６４０には、会見者、ビデオ撮影者、 ファクト、及びその他のイベント・タイプが表示される。ブロック６１０、６２ ０、６３０及び６４０の各々には、イベント開始時間（例えば、印が入力された 入力データと関係付けられた時間増分）、印の類別（例えば、正、負または情報 のための）、及びイベントと関係付けられた記述句が表示される。 図６の表示画面を使用すれば、ユーザは、イベント情報を表示すると共に、該 イベント情報をスクロールすることができる。イベントと結合した印を表示領域 ６０２及び６０４内に位置指定することができる。更に、ユーザは、領域６０６ 内への印のプロンプトを行った入力データを表示することができる。表示画面は 、入力データと結合した品質保証情報の会話型レポートを提供する。 （カタログインタフェース処理） 図３Ａ〜図３Ｆ及び図４〜図６に提示したカタログ化インタフェース表示画面 は、入力データ及び該入力データと関連するカタログ化情報を表示するインタフ ェースを例示している。カタログ化インタフェースはまた、カタログ及び属性情 報を入力し、且つ要素を生成することを可能にする。本発明では、カタログイン タフェース処理が可能となる。 図３Ａを参照すると、ユーザは領域３１０に入力データを表示すると共に、領 域３１２に記述を入力することができる。ボタン３２０を選択すると、ユーザは 、セグメント２０４のインスタンスを生成することができる。ボタン３００によ り、ユーザは、句２０６のインスタンスを生成することができる。ボタン３１８ を使用すると、ユーザは、セグメント２０４または句２０６のインスタンスを生 成することができる。句２０６のインスタンスを含んだセグメント２０４のイン スタンスを削除すると、ユーザは、句２０４のインスタンスとセグメント２０４ の残りのインスタンスとを再度関連させることができる。例えば、ユーザは（例 えば、図３Ｅのライン３７２Ａ〜３７２Ｂの一方を選択することにより）、セグ メント２０４のインスタンスを選択することができる。ユーザが例えばセグメン ト３７２Ｂ３を選択すると、セグメント３７２Ｂと関連する句２０６のインスタ ンスが、セグメント３７２Ａにマージ（併合）される。同様に、ユーザは句２０ ６のインスタンス（例えば、図３Ｅのライン３７４Ａ 〜３７４Ｂに表示された）及びボタン３１８を選択して、句インスタンスを削除 することができる。 図３Ｆを参照すると、イベント２０８のインスタンスは、領域３８２、３８４ 、３８６または３８８のボタンを選択することにより生成することができる。図 ３Ｃを参照すると、ユーザは、ボタン３４４を選択してイメージ２２０のインス タンスを生成することができる。図４を参照すると、ユーザは、プロポーズド・ キーワード２１４、プロポーズド・パーソン２２４、シソーラス・キーワード２ １２またはシソーラス・パーソン２２２のインスタンスを生成することができる 。 従って、カタログ化インタフェースにより、カタログ化情報を生成且つ修正す る動作を特定することが可能となる。図８Ａ〜８Ｂは、本発明によるユーザ入力 の生成及び修正を処理する処理フローの例を提示している。 ステップ８０２（即ち「動作（アクション）？」）では、ユーザが動作を呼び 出したか否かを決定する。ユーザにより動作が特定されまで、ステップ８０２で の処理は継続する。ユーザが操作を終了させた（例えば、ユーザが図３Ａの出口 (exit)ボタン３０５を選択した）ことを「動作」が示した場合には、ステップ８ ０６で処理が終了する。終了していない場合には、ステップ８０８で処理が継続 される。ステップ８０８（即ち、「セグメントを生成するか？」）において、ユ ーザが「セグメント生成」操作を特定したか（例えば、ユーザが図３Ａのボタン ３２０を選択したか）否かが決定される。該操作が特定されていれば、ステップ ８１０において、処理が継続されてセグメントが生成される。次いで、処理はス テップ８０２へ戻って、別のユーザ「動作」の受け取りがなされる。 セグメント生成操作が特定されていないと決定されると、ステップ８１２で処 理が継続される。ステップ８１２（即ち、「イベントを生成する？」）では、ユ ーザがイベント生成操作を特定した（例えば、図３Ｆの領域３８２〜３８８のボ タンをユーザが選択した）か否かが決定される。該操作が特定されていれば、ス テップ８１４で処理が継続されて、イベントが生成される。イベント生成操作が 特定されていないと決定されると、ステップ８１６で処理が継続され る。ステップ８１６（即ち、「イメージを生成する？」）では、ユーザ入力でイ メージ生成操作が特定された（例えば、ユーザが図６のブロック６５６にイメー ジ・データを入力した）か否かが決定される。該操作が特定されていれば、ステ ップ８１８で処理が継続されて、イベントが生成されて、次いで、ステップ８０ ２へ戻って、別のユーザ動作の受取がなされる。 ステップ８１６でユーザ動作がイメージ生成操作ではないと決定されると、ス テップ８２０で処理が継続される。ステップ８２０（即ち、「イメージを生成す る？」）でユーザがシソーラス・インスタンス生成操作を特定した（例えば、ユ ーザが図４のブロック４１２にシソーラス・データを入力した）と決定されると 、ステップ８２４で処理が継続されて、シソーラス・インスタンスが生成されて 、次いで、ステップ８０２へ戻って、別のユーザ動作の受取がなされる。 ステップ８２０でユーザ動作がシソーラス・インスタンス生成操作でないと決 定されると、ステップ８２６で処理が継続される。ステップ８２６（即ち、「プ ロポーズド・アイテム（提案項目）を生成する？」）で、ユーザがプロポーズド ・インスタンス生成操作を特定した（例えば、ユーザが図４のブロック４１８に プロポーズド（提案）データを入力した）と決定されると、ステップ８２８で処 理が継続されて、プロポーズド・インスタンスが生成されて、次いで、ステップ ８０２へ戻って、別のユーザ動作の受取がなされる。 ステップ８２６で前記の操作がプロポーズド・インスタンス生成操作ではない と決定されると、ステップ８２８で処理が継続される。ステップ８２８（即ち、 「削除／併合（デリート／マージ）する？」）でユーザが削除／併合操作を呼び 出した（例えば、ユーザが図３Ａのボタン３１８を選択した）か否かが決定され る。該操作が呼び出された場合には、ステップ８３０で処理が継続されて、該操 作が実行され、次いで、ステップ８０２へ戻る。前記操作が削除／併合操作では ないと決定されると、ステップ８３２で処理が継続される。ステップ８３２（即 ち、「句を生成する？」）で前記操作が句生成操作（例えば、ユーザが図３Ａの ボタン３００を選択した）か否かが決定される。該操作が句生成操作であると決 定されると、ステップ８３４で処理が継続されて句インス タンスが生成されて、次いで、ステップ８０２へ戻る。 前に示した如く、要素は、関連の属性（例えば、図２Ｄで識別された属性）を 有している。カタログ化インタフェースを使用して、要素の属性の母集団を形成 する。属性は、例えば、生成処理過程により生成されるか、または、ユーザによ り特定される。従って、例えば、カタログ化インタフェースを使用してセグメン ト２０４の属性の定義を含んだセグメント２０４のインスタンスを生成する。図 ９Ａは、本発明の実施例によるセグメント生成処理過程の例を示している。 ステップ９０２で生成処理過程により、セグメント２０４の新たなインスタン スのＩＤが生成される。ユーザが（例えば、図３Ａの領域３１２へ）入力した記 述句を使用して、ステップ９０４で新たなインスタンスの記述句属性が初期化さ れる。ステップ９０６で、セグメントインスタンスが生成される。 ステップ９０８で、新たなセグメント・インスタンスと別の要素との間に要素 リレーションが確立される。図２Ｂを参照すると、セグメント２０４が、セグメ ント２０４のその他のインスタンス及び句２０６のインスタンスに関係付けされ る。従って、例えば、セグメント２０４の新たなインスタンスを、句２０６のイ ンスタンスに関係付けることができる。ステップ９０８でセグメント２０４の新 たなインスタンスに関係付けられた句２０６のインスタンスは、セグメント・イ ンスタンス内に含まれる。 句２０６のインスタンスは、新たなセグメント・インスタンスに関係付けられ 、ユーザ・インタフェース内で識別される。図３Ｅを参照すると、ライン３７４ Ａ〜３７４Ｃに表示された句２０６のインスタンスは、セグメント２０４のイン スタンスに（ライン３７２Ａに表示された如く）関係付けられる。ユーザは、ラ イン３７４Ｂを選択し、その後、図３Ａのボタン３２０を選択することができる 。その結果、図９Ａの処理過程が呼び出される。ステップ９０６で生成されたセ グメント２０４のインスタンスは、図３Ｅのライン３７４Ｂ〜３７４Ｃと連結し た句２０６のインスタンスのコンテナとなる。ステップ９０８で、句２０６のイ ンスタンス（ライン３７４Ｂ〜３７４Ｃに表示された）とセグメント２０４（ラ イン３７２Ａに表示された）との間の前のリレーションが 削除されて、新たなリレーションが、セグメント２０４の新たなインスタンスと ライン３７４Ｂ〜３７４Ｃに表示された句２０６のインスタンスとの間に生成さ れる。 セグメント２０４と同様に、カタログ化インタフェースが、句２０６のインス タンスを生成する機構を提供する。図９Ｂは、本発明の実施例による句を生成処 理フローの例を提示している。ステップ９２２で句２０６の新たなインスタンス のＩＤが生成される。ステップ９２４で前記句と関連する開始及び終了タイムコ ードが得られる。記述句がステップ９２６で得られる。ステップ９２８で、スペ ルチェッカを使用して、記述句のチェックがされる。ステップ９３０で、記述句 の構文分析がなされて、記述句内に含まれたキーワード及びパーソン要素（即ち 、キーワード２１０及びパーソン２１８）と関連したラベルまたは値等の要素の 属性が識別される。ステップ９３２で、句２０６のインスタンスが生成される。 ステップ９３４で、新たなインスタンスとその他の要素との間にリレーション が形成される。図２Ｂを参照すると、句２０６は、セグメント２０４（例えば、 章セグメント）のインスタンス及びプロポーズド・キーワード２１４、キーワー ド２１０、イメージ２２０、プロポーズド・パーソン２２４及びパーソン２１８ のインスタンスに関係付けることができる。新たなインスタンスとキーワード２ １０及び人２２４のインスタンスとの間のリレーションは、ステップ９３０中に 識別される。ステップ９３４において、新たなインスタンスと前記識別されたイ ンスタンスとの間にリレーションが確立される。新たなインスタンスとプロポー ズド・キーワード２１０及びプロポーズド・パーソン２２４との間のリレーショ ンは、プロポーズド属性要素インスタンスが生成される時に形成される（図４及 び図１１を参照）。 ユーザが「句セーブ」ボタン（図３Ａのボタン３００）を選択すると、図９Ｂ に例示された如く、句がセーブされる。更に、句管理表示画面（例を図４に提示 ）が表示される。前に説明した如く、ユーザはこの表示画面を使用して、句イン スタンス及び全キーワード階層に関連するキーワード・インスタンスを再検討す る。ユーザはまた、この表示画面（例えば、ブロック４１０、４１２ 及び４１８）を使用して、プロポーズド属性要素及びシソーラス属性要素を入力 することができる。図１０及び図１１はそれぞれ、シソーラス属性要素（例えば 、シソーラス・キーワード２１２及びシソーラス・パーソン２２２）及びプロポ ーズド属性要素（例えば、プロポーズド・キーワード２１４及びプロポーズド・ パーソン２２４）を生成する処理フローの例を示している。 図１０を参照すると、入力表示画面（例えば、図４のブロック４１２）で識別 される要素はステップ１００４で得られる。シソーラス値は、ステップ１００６ で、該入力表示画面（例えば、図４のブロック４１２）から得られる。っしそー らす属性要素（例えば、シソーラス・キーワード２１２及びシソーラス・パーソ ン２２２）のインスタンスは、ステップ１００８で生成される。前記の要素のリ レーションは、ステップ１０１０で生成される。図２Ｂを参照すると、一定のリ レーションがキーワード２１０とシソーラス・キーワード２１２との間（例えば 、リレーション２３８）、及びパーソン２１８とシソーラス・パーソン２２２と の間（例えば、リレーション２３４）に存在することが可能である。ステップ１ ０１０において、ステップ１００４で位置の指定された要素がステップ１００８ で生成された新たなシソーラス・インスタンスと関係付けられる。 図１１は、提案された要素（例えば、プロポーズド・キーワード２１４及びプ ロポーズド・パーソン２２４）をそれぞれ生成する処理フローの例を提示してい る。ステップ１１０２で、ユーザが入力したプロポーズド・アイテムが入力表示 画面（例えば、図４のブロック４１０）から得られる。プロポーズド・アイテム と関連するコメントは、ステップ１１０４で入力表示画面（例えば、図４のブロ ック４１０）から得られる。提案された属性要素のインスタンス（プロポーズド 要素インスタンス）は、ステップ１１０６で生成される。ステップ１００８で、 新たなインスタンスとその他の要素との間にリレーション（関係）が形成される 。図２Ｂを参照すると、プロボーズド・キーワード２１４及びプロポーズド・パ ーソン２２４は、句２０６に関係付けられる。ステップ１１０６で生成されたプ ロポーズド・インスタンスは、句２０６のインスタンスと関係付けられる。 図３Ａを参照すると、ユーザはボタン３１８を選択して、要素インスタンスの 削除または併合（デリート又はマージ）を選択することができる。図１２は、本 発明の実施例による操作の削除／併合の処理フローの例を示している。ステップ １２０２で、ユーザが選択し（例えば、図３Ａ及び３Ｅの領域３１６に表示され たセグメント２０４または句２０６のインスタンスを選択）、ユーザが表示画面 に表示した要素が、識別される。ステップ１２０４でユーザが選択した要素に関 係付けられた要素が識別される（例えば、選択アイテムがセグメント２０４のイ ンスタンスの場合には、句２０６のインスタンス、または、選択アイテムが句２ ０６のインスタンスである場合には、プロポーズド・キーワード２１４、キーワ ード２１０、イメージ２２０、プロポーズド・パーソン２２４及びパーソン２１ ８のインスタンス）。 ステップ１２０６（即ち、「関係（リレーション）要素はあるか？」）で、選 択要素が関係要素を有しているか否かの決定がなされる。選択要素が関係要素を 有していない場合には、処理が１２１４まで継続して、該要素が削除される。関 係要素がある場合には、関係要素を削除するかまたは選択要素を削除する前に別 の階層へ併合しなければならない。例えば、選択要素がセグメント２０４のイン スタンスの場合には、該セグメント２０４のインスタンスと関連付けられる句２ ０６のインスタンスが、セグメント２０４の別の階層へ併合される。即ち、句２ ０６のインスタンスが、セグメント２０４の他方のインスタンスに関係付けられ る。図３Ｅを参照すると、ライン３７２Ｂに表示されたセグメント・インスタン スに結合した句２０６のインスタンスが、ライン３７２Ａに表示されたセグメン ト・インスタンスへ併合される。併合されない場合には、関係要素が削除される 。 ステップ１２１０（即ち、「要素の再割り当てまたは削除がなされたか？」） で、関係要素が再割り当てまたは削除が成功した否かが決定される。成功しなか った場合には、ステップ１２１２で処理が継続されて、エラーが提起される。再 割り当てまたは削除が成功裏になされた場合には、ステップ１２１４で処理を継 続して、削除用として選択された要素が削除される。 イベント２０８のインスタンスは、カタログ化インタフェースを使用して生 成することができる。図１３Ａは、本発明の実施例によるイベント・インスタン スを生成する処理フローの例を提示している。ステップ１３０２で、イベントの タイプが識別される。図３Ｆを参照すると、タイプは、ボタンが押されたブロッ ク３０８の領域を決定することにより、決定することができる。例えば、ユーザ が領域３８４でボタンを選択すると、ビデオ撮影者タイプ・イベントが生成され る。更に、セグメント２０４または句２０６のインスタンスと結合したイベント は、生成される新たなインスタンスのタイプにより決定することができる。ステ ップ１３０４で、イベントのサブ・タイプが識別される。例えば、ビデオ撮影者 または会見者イベント・タイプは、正、負または情報のためのサブ・タイプを有 することができる。サブ・タイプは、領域３８２及び３８４のどのボタンをユー ザが選択したかを識別することにより、決定することができる。 ステップ１３０６で、イベントに結合したタイム・コードが決定される。ステ ップ１３０８で、ユーザが入力したコメントが入力から得られる。ステップ１３ １０で、イベント２０８の新たなインスタンスのＩＤが生成される。ステップ１ ３１２で、イベント２０８の別の新たなインスタンスが生成される。ステップ１ ３１４で、前記新たなインスタンスとその他の要素との間でリレーション（関係 ）が確立される。 本発明を使用すれば、イメージの記録ができる。図６を参照すると、ブロック ６５６はイメージ情報を入力する領域を提供する。図１３Ｂは、本発明の実施例 によるイメージ２２０のインスタンスを生成する処理フローの例を示している。 ステップ１３２２で、前記新たなインスタンスのＩＤが生成される。ステップ １３２４で、タイム・コードが得られる。好適な実施例では、イメージがディジ タル化されると共に、記憶されて後で再検討することができる。資源ローケータ を、ディジタル化イメージの位置を識別するために、イメージへ割り当てる。ロ ーケータは、ステップ１３２６でユーザ入力からまたはその他の方法により検索 される。イメージ２２０の新たなインスタンスが、ステップ１３２８で生成され る。ステップ１３３０で、前記新たなインスタンスと既存の要素 インスタンスとの間で関係が生成される。新たなイメージは、例えば、句２０６ のインスタンスに関係付けられる。 （リレーション管理） 本発明のリレーション管理機能を使用して、新たなリレーションを形成し且つ 既存のリレーションを修正することができる。リレーション管理機能を使用して タイプ２１６、キーワード２１０、プロポーズド・キーワード２１４及びパーソ ン２１８等の要素間でリレーションを管理することができる。 リレーション管理で、例えば、全／部分関係、結合関係及び継承関係を管理す る。全／部分関係を２つの要素間で使用して、１つの要素が別の要素内に含まれ ることを条件付けする。例えば、リレーション２２８は全／部分関係である。即 ち、句２０６は、リレーション２２８を介してセグメント２０４内に含まれる。 リレーション２４２を介してキーワード２１０のインスタンス間に確立されるキ ーワード階層は、全／部分関係の別の例を表している。 結合関係は２つ以上の要素が互いに関係付けされることを条件付けしている。 結合は、暗示または明確に示すことができる。暗示した結合は、１以上のその他 の関係から暗示される。例えば、句２０６の同一のインスタンス内で起きるキー ワード２１０の２つのインスタンスは、暗示された結合または関係である。明確 な結合は、特定された関係から形成される。キーワード階層は、明確な結合であ る。明確な結合関係は、また、リレーション２３８を介してキーワード２１０の インスタンス及びシソーラス・キーワード２１２のインスタンスの間、及び、リ レーション２３４を介してパーソン２１８及びシソーラス・パーソン２２２の間 で確立される。 リレーション２４６により確立されるタイプ階層は、継承関係（即ち、「ｉｓ _ａ」関係）の例である。リレーション２４６を介して、タイプ２１６の子イン スタンスは、タイプ２１６の親インスタンスの特性を継承する。更に、キーワー ド２１０のインスタンスは、タイプ２１６の関係付けられたインスタンス及びタ イプ２１６の親インスタンスを継承する。 一定の関係は、 「親／子」または「等／等」関係であると考えられる。「親 ／子」関係は、タイプ及びキーワード階層に存在する。「等／等」関係は、句２ ０６及びセグメント２０４に対して存在する。 リレーション管理は、ユーザインタフェースを含んでおり、リレーション管理 ユーザが、管理機能を果たすことができるようにされている。一定の処理能力が 与えられて、ユーザが識別した操作を処理できるようにされている。 （リレーション管理ユーザ・インタフェース） ユーザ・インタフェースは、要素を表示する領域を提供する。ドラグ及びドロ ップが可能にされて、要素関係を図形特定する手段が提供される。更に、コント ロール・ボタンが設けられて、管理操作を選択できるようにされている。図７Ａ 及び図７Ｂは、本発明の実施例によるリレーション管理表示画面の例を示してい る。 図７Ａにタイプが表示されている。タイプ２１６のインスタンスは、タイプ階 層内で相互関係している。タイプ階層の例は、図７Ａの領域７０２に示されてい る。レベル７４２は、ルート・レベル即ちレベル１である。レベル７４２のタイ プインスタンスは、レベル２（即ち、レベル７４４）のタイプ・インスタンスの 親インスタンス及びレベル３（即ちレベル７４６）のタイプ・インスタンスの祖 父または祖母インスタンスである。レベル７４４は、レベル７４６の親レベルで ある。 タイプの分類または非分類が可能である。未分類のタイプは、タイプ階層に挿 入されていないタイプ・インスタンスである。分類されたタイプ・インスタンス は、タイプ階層へ挿入されている。分類されたタイプは、領域７０２に表示され ている。未分類されたタイプは、領域７０４に表示されている。ドラグ及びドロ ップが可能にされて、ユーザが領域７０４内の未分類タイプを領域７０２に表示 された階層内へドラグすることができるようにされている。 キーワード２１０のインスタンスを図７Ｂに表示する。タイプ・インスタンス と同様に、キーワード・インスタンスは、階層中で相互関係に置かれている。レ ベル７７２及び７７４は、キーワード階層の例を提示している。前に説明した如 く、カタログ・ユーザは、プロポーズド・キーワード２１４のインスタン スを生成して、新たなキーワードを提案することができる。リレーション管理機 能を使用してプロポーズド・キーワード・インスタンスを再検討することができ る。プロポーズド・キーワード・インスタンスは、未分類領域７０４に表示され る。ドラグ及びドロップが可能にされて、ユーザが領域７０４の未分類のキーワ ードを領域７０２に表示された階層内へドラグすることができるようにされてい る。 コントロールボタンが設けられて、ユーザが操作を特定することができるよう にされている。ボタン７１４を使用して、新たな要素が特定される。図７Ｂを参 照すると、新たなキーワードは、ボタン７１４を使用して分類または未分類領域 （それぞれ、７０２及び７０４）のどちらかに生成することができる。逆に、要 素インスタンスは、ボタン７１６を使用して削除することができる。分類された 要素の機密を、要素インスタンスを選択し且つボタン７１８を選択して解除する ことができる。要素インスタンスは、ボタン７２０及び７２２を使用して発見す ることができる。 コントロール・ボタンに加えて、リレーション管理機能において、ドラグ及び ドロップが可能にされている。例えば、未分類の要素インスタンスは一定の要素 インスタンスを選択し、その表示を未分類表示領域７０４から分類表示領域７０ ２へドラグして分類することができる。この要素インスタンスは、該要素を選択 し、その表示を所望の階層へドラグして要素階層内へ挿入することができる。未 分類の要素は、ドラグ及びドロップ特徴を使用して、階層内へ挿入することがで きる。更に、分類された要素は、この特徴を使用して階層の別の領域へ再分類す ることができる。 スクロール機能が、領域７３４及び７３２により示される如く設けられている 。領域７０２及び７０４に表示されている要素インスタンスの全てを斯かるスク ロール機能を使用することで、再検討することができる。 好適な実施例では、アレイが維持されて、図７Ａ〜７Ｂにおいて設けられた表 示画面に表示された情報が記憶される。情報が検索されて、既存の要素が求めら れると共に、該情報がこれらのアレイに記憶される。当該技術分野では公知の技 術を使用して情報が得られて、既存の要素が求められる。例えば、リレ ーション・データベース管理システムでは、１つ以上の質問を使用して、キーワ ード２１０及びプロポーズド・キーワード２１４のインスタンス及びそれらの相 互関係を選択することができる。或いは、一定の要素と関連したオブジェクトに アクセスして、必要な情報を検索することができる。 （リレーション管理処理） 図７Ａ〜７Ｂに示したリレーション管理インタフェース表示画面は、要素イン スタンスを表示して、それらの関係を管理するインタフェースを例示している。 一定のリレーション管理処理能力を使用して、リレーション管理インタフェース 表示画面から生成されたユーザ入力を処理する。 図１４Ａ及び図１４Ｂは、本発明の実施例による、図７Ａ、図７Ｂのボタン７ １４を選択して開始される削除操作の処理フローの例を示している。ステップ１ ４０２で選択した要素インスタンスのＩＤが識別される。ステップ１４０４（即 ち、「分類アイテムか？」）で、選択した要素インスタンスが分類された要素イ ンスタンスであるか否かが決定される。即ち、選択した要素インスタンスが、図 ７Ａ及び図７Ｂの表示領域７０２に表示される。該要素が分類されていなければ 、該要素は要素階層へ挿入されてはいない。従って、該要素は要素関係を有して おらず、削除することができる。従って、ステップ１４１６で処理が継続されて 選択したアイテムが削除される。 ステップ１４０４で、選択した要素インスタンスが分類された要素であると決 定された場合には、ステップ１４０６で処理が継続されて、選択した要素インス タンスの子が見つけられる。ステップ１４０８（即ち、「アイテムは子を有して いるか？」）で、選択した要素インスタンスが子を有しているか否かの決定がな される。有していなければ、ステップ１４１６で処理が継続されて、選択したア イテムが削除される。選択したアイテムが子を有していれば、ステップ１４１０ で処理が継続されて、ユーザから確認のリクエストがなされて削除処理が継続さ れる。 ステップ１４１２（即ち、「削除を確認したか？」）でユーザが削除操作を確 認しなければ、ステップ１４２０で現在の削除操作の処理が終了する。ステ ップ１４１２でユーザが削除を確認したと決定されると、ステップ１４１４で処 理が継続されて、選択したアイテムの子が削除される。子のインスタンスが一旦 削除されると、ステップ１４１６で、処理が継続されて、選択したアイテムが削 除される。ステップ１４１８で、処理が継続されて、リレーション管理表示画面 及び関連付けされたアレイが更新されて、選択したアイテムの子のみならず選択 したアイテムの削除が反映される。 選択したアイテムの子を削除する処理過程において、１つ以上の要素インスタ ンスの親インスタンスである子インスタンスに遭遇する可能性がある。本発明の 削除処理を使用して、斯かる子インスタンスを削除することができる。図１５Ａ 及び１５Ｂは、本発明の実施例による子インスタンスを削除する処理フローの例 を提示している。 ステップ１５０２（即ち、「全ての子が処理されたか？」）で、親インスタン スの子の全てが削除されたか否かが決定される。削除がされた場合には、ステッ プ１５０４で、現在の親インスタンスの処理が終了する。削除がなされていない 場合には、ステップ１５０６で処理が継続されて、親インスタンスの次の子イン スタンスが得られる。ステップ１５０８（即ち、「インスタンスは他の親を有し ているか？」）で、現在の子インスタンスが削除するために選択された親インス タンスの外に親インスタンスを有しているか否かが決定される。有していれば、 現在の子インスタンスを削除する必要はなく、ステップ１５０２で処理が継続さ れて、残った子インスタンスが処理される。有していない場合には、ステップ１ ５１０で処理が継続されて、現在の子インスタンスの子インスタンスが識別され る。ステップ１５１２（即ち、「子は親か？」）で、ステップ１５１０において 現在の子インスタンスの子インスタンスの位置指定がされたか否かが、決定され る。斯かる位置指定がされていなければ、ステップ１５１６で処理が継続されて 、現在の子インスタンスが削除されて、次いで、ステップ１５０２へ戻って残っ た子インスタンスの処理がなされる。 ステップ１５１２で、現在の子インスタンスが親インスタンスであると決定さ れると、ステップ１５１４で処理が継続されて、図１５Ａ及び１５Ｂの処理フロ ーが呼び出されて、現在の子インスタンスの子インスタンスが削除される。 即ち、前記処理フローが帰納的に呼び出されて、削除するために選択した要素イ ンスタンスの第１の子レベルで始まる多数の階層レベルが削除される。斯かる処 理フローを呼び出す毎に、階層内の子レベルが削除される。しかしながら、子レ ベルを、該レベルの子の全ての削除が完了するまでは削除しないのが好適である 。子レベルが削除されると、ステップ１５１６で処理が継続されて現在の子イン スタンス削除される。その後、ステップ１５０２で処理が継続されて、残った子 インスタンスの処理がなされる。 分類された要素は、該要素を選択してボタン７１８を選択するか、または、該 要素を領域７０２から領域７０４へドラグすることで機密区分から外すことがで きる。図１６は、本発明の実施例による要素の機密区分を外す処理フローの例を 提示している。 ステップ１６０２（即ち、「選択アイテムは親か？」）で、選択した要素が親 か否かが決定される。親である場合には、ステップ１６０４でエラーが提起され て、現在の機密区分解除操作の処理が終了する。親でない場合には、ステップ１ ６０６で処理が継続されて、選択した要素の親が見つけられる。ステップ１６０ ８で、親及び子要素間の関係が取り除かれる。ステップ１６０６で、選択した要 素が領域７０４内へ挿入される（例えば、リレーション管理表示画面及びアレイ が更新される）。現在の機密解除操作の処理は、ステップ１６０８で終了する。 前に示した如く、ドラグ及びドロップ機能が設けられる。図１７は、本発明の 実施例によるドラグ及びドロップ操作の取り扱い処理フローの例を示している。 ユーザが選択したアイテムのＩＤがステップ１７０２で得られる。ステップ１７ ０４（即ち、「分類されたリストからアイテムをドラグしたか？」）で、選択し たアイテムが未分類リストからドラグされたか否かが決定される。ドラグされて いない（即ち、選択アイテムが未分類リストからドラグされつつある）場合には 、ステップ１７０６で処理が継続されて、選択アイテムがドラグ操作中のカーソ ルの最終位置に基づいて階層へ追加される。即ち、選択アイテムの親レベルが識 別される。親レベルにおいて表される要素の位置の指定がなされ、親要素と新た な子要素（即ち、選択アイテム）との間に、一定の関係が 形成される。 ステップ１７０４で、分類リスト中で前記アイテムがドラグ中であると決定さ れた場合には、ステップ１７０８で処理が継続される。ステップ１７０８（即ち 、「アイテムが子の中へドラグされたか？」）で、親要素が子レベル中へ挿入中 であるか否かが決定される。挿入中である場合には、ステップ１７１０で処理が 継続されてエラーが提起され、現在のドラグ操作の処理がステップ１７１８で終 了する。 ステップ１７０８で、親レベルが子レベル中へドラグ中でないと決定された場 合には、ステップ１７１２で処理が継続される。即ち、例えば、一定の要素が階 層の１つの枝から別の枝へ転送中である。古い親インスタンスのＩＤがステップ １７１２で識別される。新たな親インスタンスのＩＤは、ステップ１７１４で識 別される。新旧の親インスタンスの階層関係が更新される。現在のドラグ及びド ロップ操作の処理がステップ１７１８で終了する。 （カタログ・インスタンス） 前に議論した如く、図２Ａ、図２Ｂ、図２Ｄ、図２Ｅに例示した要素を使用し て、マルチメディア・データをカタログ化することができる。これらの要素を使 用して、異なるマルチメディアデータをカタログ化することができる。これらの 要素を使用すれば、任意のマルチメディアのカタログを作成することができる。 更に、同一のカタログは代替のシソーラスを使用してマルチメディア・データを 特定する。図１８Ａ及び図１８Ｂは、本発明の実施例によるカタログ・インスタ ンスの例を提示している。 図１８Ａを参照すると、マルチメディア・データ１８０２Ａは、カタログＡを 使用する。マルチメディア・データ１８０２Ａは、例えば、一連のビデオテープ に撮られたインタビュー及び該ビデオテープに撮られたインタビューにおいて参 照されるその他のマルチメディア・データ（例えば、スチル及びビデオ）を含ん でいる。セグメント２０４（例えば、インタビュー・セグメント）のインスタン スが、インタビューと関連したビデオテープ・ライブラリのビデオテープの一部 を識別する。カタログＡは、複数の句２０６のインスタンスを 有しており、該複数のインスタンスの各々は、マルチメディア・データ１８０２ Ａの一部と結合されている。句２０６の各インスタンスは、１つ以上の属性及び ／または属性要素を有している。イン・タイム・コード及びアウト・タイム・コ ード等の属性が、句２０６のインスタンスと関連したインタビューからのビデオ の一部を識別する。 句２０６のインスタンスは記述句属性を有している。更に、句２０６のインス タンスは、キーワード２１０、イメージ／ビデオ２２０、パーソン２１８、プロ ポーズド・キーワード２１４及びプロポーズド・パーソン２２４の複数の結合し たインスタンスを有している。少なくともパーソン２１８の１つのインスタンス が、インタビュー・セグメント（即ち、インタビューと結合したセグメント２０ ４のインスタンス）と関連している。パーソン２１８のその他のインスタンスを 使用して、データの一部において参照される各人を識別する。 パーソン情報（人に関する情報）２２６のインスタンスを使用して、各人の背 景情報を保持することができる。パーソン情報２２６を特注して、任意のタイプ のマルチメディア・データを収容することができる。例えば、マルチメディア・ データがホロコースト（Ｈｏｌｏｃａｕｓｔ）の生存者のインタビューを含んで いる場合には、パーソン情報のインスタンスは、強制収容所、強制収容所での仕 事、強制移送に関する情報、及び解放データ等となる。 キーワード２１０の１つ以上のインスタンスは、句２０６の各インスタンス毎 に識別される。タイプ２１６の１つ以上のインスタンスは、具体化されると共に 相互関係に置かれて、キーワード２１０のインスタンスを分類するのに使用でき るタイプ階層を形成する。シソーラス・キーワード２１２の１つ以上のインスタ ンスはキーワードのインスタンスを結合することができる。シソーラス・キーワ ード２１２は、句２０６のインスタンスの内容を識別するのに使用できるラベル を含んでいる。 プロポーズド・キーワード２１４及びプロポーズド・パーソン２２４のインス タンスは、上記に述べたカタログ化中に、句２０６のインスタンスと結合するこ とができる。これらのインスタンスは、キーワード２１０またはパーソン２１８ （それぞれの）インスタンス内へ転送されるかまたは削除される。従っ て、プロポーズド・キーワード２１４及びプロポーズド・パーソン２２４の全て のインスタンスは、カタログ化中に分解される。イメージ／ビデオ２２０のイン スタンスは、インタビュー中に参照されるイメージ又はビデオ映像を得るのに使 用することができる。 上記の要素はまた、具体化してマルチメディア・データ１８０２Ｂ及び１８０ ２Ｃをカタログ化することができる。マルチメディア・データ１８０２Ａ及び１ ８０２Ｃは、例えば、カタログＢ及びＣを使用する。マルチメディア・データ１ ８０２Ａは、例えば、音声またはビデオ・テープに取られたスポーツ・イベント 及びその中で参照されるその他のマルチメディア・データ（例えば、スチル及び ビデオ）を含むことができる。セグメント２０４（例えば、イベントセグメント ）のインスタンスは、例えば、音声またはビデオ・テープに撮られたイベントを 識別する。カタログＢは、各々がマルチメディア・データ１８０２Ｂの一部に関 連付けられた句２０６の複数のインスタンスを有している。句２０６の各インス タンスは、１つ以上の属性及び／または属性要素を有している。イン・タイム・ コード及びアウト・タイム・コード等の属性が、句２０６のインスタンスと関連 するイベントからのビデオテープの一部を識別する。 句２０６のインスタンスは、記述句属性を有している。更に、句２０６のイン スタンスは、キーワード２１０、イメージ／ビデオ２２０、パーソン２１８、プ ロポーズド・キーワード２１４及びプロポーズド・パーソン２２４の複数の関係 付けられたインスタンスを有している。少なくともパーソン２１８の１つのイン スタンスが、イベント・セグメント（即ち、イベントと結合したセグメント２０ ４のインスタンス）と結合する。パーソン２１８のその他のインスタンスを使用 して、データ部において参照される各人を識別することができる。 パーソン情報２２６のインスタンスを使用して、各人の背景情報を保持するこ とができる。この場合、パーソン情報２２６を特注して、プレヤー統計及び前の 試合経験（例えば、学生チーム及び新人年情報）等の情報を収容することができ る。 キーワード２１０の１つ以上のインスタンスは、句２０６の各インスタンス毎 に識別される。タイプ２１６の１つ以上のインスタンスは、具体化されると 共に相互関係に置かれて、キーワード２１０のインスタンスを分類するのに使用 することができるタイプ階層を形成する。シソーラス２１２の１つ以上インスタ ンスは、キーワードのインスタンスと結合することができる。プロポーズド・キ ーワード２１４及びプロポーズド・パーソン２２４のインスタンスは、句２０６ のインスタンスで識別されると共に、カタログ化中に分解される。 マルチメディア・データ１８０２Ｃは、カタログを使用してデータを組織化し て記憶及び検索を行うその他のデータを含むことができる。キーワード２１０、 タイプ２１６、及びパーソン２１８のインスタンスは、具体化すると共に各カタ ログ・インスタンス（例えば、句２０６のインスタンス）と結合することができ る。キーワード２１０のインスタンス及びシソーラス・キーワード２１２の結合 したインスタンスを使用して、キーワードのインスタンス及び句２０６の結合し たインスタンスに結合したマルチメディア・データの一部の内容を識別すること ができる。キーワード２１０及びタイプ２１６のインスタンスから、階層関係を 形成することができる。パーソン情報２２６をパーソン２１８のインスタンスの 属性を含むように特注して、マルチメディア・データ１８０２Ｃに含まれるタイ プのデータを収容するようにすることができる。 カタログ内で、多数のシソーラスを同一のマルチメディア・データ用に生成す ることができる。例えば、１つ以上のシソーラスを図１８ＡのカタログＡ、Ｂま たはＣ毎に生成することができる。シソーラスを、キーワード及びキーワード２ １０及びタイプ２１６のインスタンスから形成したタイプ階層を使用して定義す ることができる。図１８Ｂは、多数のキーワード及びタイプ階層を有したカタロ グの例を例示している。マルチメディア・データ１８１２は、カタログ１８１４ を使用する。カタログ１８１４は、シソーラス１８１８Ａ、１８１８Ｂ及び１８ １８Ｃに結合される。 カタログ１８１４は、句２０６の１つ以上のインスタンスからなる。句２０６ の各インスタンスは、シソーラス１８１８Ａに含まれたキーワード２１０の１つ 以上のインスタンスと結合される。シソーラス１８１８Ａのキーワード２１０の インスタンスが、句２０６のインスタンスの内容の１つの代替仕様を識別する。 キーワード２１０の各インスタンスは、シソーラス１８１８Ａのタイ プ２１６のインスタンスと結合する。前に述べた如く、代替内容仕様は、キーワ ード２１０のインスタンスと結合したシソーラス・キーワード２１２の１つ以上 のインスタンスを使用して保持することができる。更に、内容をキーワード２１ ０の代替インスタンスを使用して変更することができる。 句２０６のインスタンスは、シソーラス１８１８Ｂまたは１８１８Ｃに含まれ たキーワード２１０の１つ以上のインスタンスと関連付けることができる。シソ ーラス１８１８Ｂのキーワード２１０のインスタンスは、句２０６のインスタン スの内容の別の代替仕様を識別する。同様に、シソーラス１８１８Ｃは、句２０ ６のインスタンスの内容の別の代替仕様を含むことができる。従って、マルチメ ディア・データ１８１２と関連するカタログの性質は、シソーラス内でまたは多 数のシソーラスを横断して変更することができる。 以上の如く、マルチメディア・データをカタログ化する方法及び装置が提供さ れる。

───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＤＥ， ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，ＩＴ，Ｌ Ｕ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ，ＣＦ ，ＣＧ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＭＬ，ＭＲ，ＮＥ， ＳＮ，ＴＤ，ＴＧ)，ＡＰ(ＧＨ，ＫＥ，ＬＳ，ＭＷ，Ｓ Ｄ，ＳＺ，ＵＧ，ＺＷ)，ＥＡ(ＡＭ，ＡＺ，ＢＹ，ＫＧ ，ＫＺ，ＭＤ，ＲＵ，ＴＪ，ＴＭ)，ＡＬ，ＡＭ，ＡＴ ，ＡＵ，ＡＺ，ＢＡ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ， ＣＨ，ＣＮ，ＣＵ，ＣＺ，ＤＥ，ＤＫ，ＥＥ，ＥＳ，Ｆ Ｉ，ＧＢ，ＧＥ，ＧＨ，ＨＵ，ＩＬ，ＩＳ，ＪＰ，ＫＥ ，ＫＧ，ＫＰ，ＫＲ，ＫＺ，ＬＣ，ＬＫ，ＬＲ，ＬＳ， ＬＴ，ＬＵ，ＬＶ，ＭＤ，ＭＧ，ＭＫ，ＭＮ，ＭＷ，Ｍ Ｘ，ＮＯ，ＮＺ，ＰＬ，ＰＴ，ＲＯ，ＲＵ，ＳＤ，ＳＥ ，ＳＧ，ＳＩ，ＳＫ，ＳＬ，ＴＪ，ＴＭ，ＴＲ，ＴＴ， ＵＡ，ＵＧ，ＵＳ，ＵＺ，ＶＮ，ＹＵ，ＺＷ

Claims (1)

1. 【特許請求の範囲】 １． マルチメディア・データをカタログ化する方法において、 前記マルチメディア・データの一部の記述を特定するステップと、 前記マルチメディア・データの前記一部のカタログ要素を生成するステップと 、 複数の属性及び属性要素を生成するステップと、 前記カタログ要素と、前記複数の属性及び属性要素との間に複数のリレーショ ン（関係）を生成するステップと を備えていることを特徴とするカタログ化方法。 ２． 請求項１記載の方法において、前記複数のリレーションを生成するステッ プが更に、 前記記述中の複数の既存の属性要素の参照を識別するステップと、 前記カタログ要素と、前記複数の既存の属性要素との間に複数のリレーション を生成するステップと を備えていることを特徴とする方法。 ３． 請求項１記載の方法において、前記属性要素が提案された要素であり、害 方法はさらに、 前記提案された要素を試験して、該要素が承認された要素であるか否かを決定 するステップと、 前記提案された要素が承認された要素である場合には、前記提案された要素を 既存の属性要素に変換するステップと、 前記提案された要素が未承認の要素である場合には、前記提案された要素を削 除するステップと を備えていることを特徴とする方法。 ４． 請求項３記載の方法において、前記変換するステップが更に、前記提案さ れた要素を要素の階層に挿入するステップを備えていることを特徴とする方法。 ５． 請求項１記載の方法において、前記複数のリレーションの１つが階層関 係であることを特徴とする方法。 ６． 請求項１記載の方法において、前記複数の属性要素の１つが別の要素の代 替として使用されるシソーラス要素であり、前記複数のリレーションを生成する ステップが更に、 前記別の要素を識別するステップと、 前記シソーラス要素と前記別の要素との間に一定のリレーションを生成するス テップと を備えていることを特徴とする方法。 ７． 請求項１記載の方法において、害方法は更に、前記索引から前記カタログ 要素を削除するステップを備えていることを特徴とする方法。 ８． 請求項７記載の方法において、前記削除するステップが更に、 前記複数の属性及び属性要素を識別するステップと、 前記複数の属性及び属性要素の再割り当てができる場合に、前記複数の属性及 び属性要素を再割り当てするステップと、 前記複数の属性及び属性要素の再割り当てができない場合には、前記複数の属 性及び属性要素を削除するステップと、 前記カタログ要素を削除するステップと を備えていることを特徴とする方法。 ９． 請求項８記載の方法において、前記再割り当てをするステップが更に、前 記カタログ要素と前記複数の属性及び属性要素との間のリレーションを修正して 、前記複数の属性及び属性要素が、前記カタログ要素と無関係にされることを特 徴とする方法。 １０． 請求項８記載の方法において、前記削除するステップが更に、 前記複数の属性及び属性要素に関係付けられた第２の複数の属性及び属性要素 の位置を指定するステップと、 前記第２の複数の属性及び属性要素が再割り当てできる場合に、前記第２の複 数の属性及び属性要素を再割り当てするステップと、 前記第２の複数の属性及び属性要素が再割り当てできない場合に、前記第２の 複数の属性及び属性要素を削除するステップと、 前記複数の属性及び属性要素を削除するステップと を備えていることを特徴とする方法。 １１． 請求項１記載の方法において、該方法は更に、前記マルチメディア・デ ータの第２の部分のイベント要素を生成するステップを備え、前記イベント要素 が前記マルチメディア・データの前記第２の部分と関連するイベントを表してい ることを特徴とする方法。 １２． 請求項１１記載の方法において、前記イベント要素が品質保証イベント を表していることを特徴とする方法。 １３． 製造用のアーティクルであって、 汎用索引構造を使用してマルチメディア・データをカタログ化するコンピュー タで読み取り可能なプログラムコードが具現化されているコンピュータで使用可 能な媒体を備え、前記コンピュータで読み取り可能なプログラムコートが、 コンピュータが前記マルチメディア・データの一部の記述を特定するように構 成されたコンピュータで読み取り可能なプログラム・コードと、 コンピュータが前記マルチメディア・データの一部のカタログ要素を生成する ように構成されたコンピュータで読み取り可能なプログラム・コードと、 コンピュータが複数の属性と属性要素を生成するように構成されたコンピュー タで読み取り可能なプログラム・コードと、 コンピュータが前記カタログ要素と、前記複数の属性及び属性要素との間に複 数のリレーションを生成するように構成されたコンピュータで読み取り可能なプ ログラム・コードとを 備えていることを特徴とする製造用アーティクル。 １４． 請求項１３記載の製造用アーティクルにおいて、コンピュータが複数の リレーションを生成するように構成された前記プログラム・コードが更に、 コンピュータが前記記述中の複数の既存の属性要素の参照を識別するように構 成されたコンピュータで読み取り可能なプログラム・コードと、 コンピュータが前記カタログ要素と前記複数の既存の属性要素との間に複数の リレーション生成するように構成されたコンピュータで読み取り可能なプログラ ム・コードと を備えていることを特徴とする製造用アーティクル。 １５． 請求項１３記載の製造用アーティクルにおいて、インデックス要素が、 提案されたインデックス要素であり、前記プログラムコードが更に、 コンピュータが前記提案されたインデックス要素を試験して、該要素が承認さ れた要素であるか否かを決定するように構成されたコンピュータで読み取り可能 なプログラム・コードと、 前記提案されたインデックス要素が承認された要素である場合に、コンピュー タが前記提案されたインデックス要素を既存の属性要素に変換するように構成さ れたコンピュータで読み取り可能なプログラム・コードと、 前記提案されたインデックス要素が承認された要素でない場合に、コンピュー タが前記提案されたインデックス要素を削除するように構成されたコンピュータ で読み取り可能なプログラム・コードと を備えていることを特徴とする製造用アーティクル。 １６． 請求項１５記載の製造用アーティクルにおいて、前記コンピュータが変 換するように構成されたコンピュータで読み取り可能なプログラム・コードが更 に、コンピュータが前記提案されたインデックス要素を要素の階層内へ挿入する ように構成されたコンピュータで読み取り可能なプログラム・コードを備えてい ることを特徴とする製造用アーティクル。 １７． 請求項１３記載の製造用アーティクルにおいて、前記複数のリレーショ ンの１つが階層関係であることを特徴とする製造用アーティクル。 １８． 請求項１３記載の製造用アーティクルにおいて、前記複数の属性要素の １つが別の要素の代替として使用されるシソーラス要素であり、前記複数のリレ ーションを生成するように構成されたプログラム・コードが更に、 コンピュータが前記別の要素を識別するように構成されたコンピュータで読み 取り可能なプログラム・コードと、 コンピュータが前記シソーラス要素と前記別の要素との間に一定の関係を生成 するように構成されたコンピュータで読み取り可能なプログラム・コードと を備えていることを特徴とする製造用アーティクル。 １９． 請求項１３記載の製造用アーティクルにおいて、該アーティクルは更 に、コンピュータが前記カタログ要素を削除するように構成されたコンピュータ で読み取り可能なプログラム・コードを備えていることを特徴とする製造用アー ティクル。 ２０． 請求項１９記載の製造用アーティクルにおいて、コンピュータが削除す るように構成されたプログラム・コードが更に コンピュータが前記複数の属性及び属性要素を識別するように構成されたコン ピュータで読み取り可能なプログラム・コードと、 前記複数の属性及び属性要素が再割り当てできる場合に、コンピュータが前記 複数の属性及び属性要素を再割り当てするように構成されたコンピュータで読み 取り可能なプログラム・コードと、 前記複数の属性及び属性要素が再割り当てできない場合に、コンピュータが前 記複数の属性及び属性要素を削除するように構成されたコンピュータで読み取り 可能なプログラム・コードと、 コンピュータが前記カタログ要素を削除するように構成されたコンピュータで 読み取り可能なプログラム・コードと を備えていることを特徴とする製造用アーティクル。 ２１． 請求項８記載の製造用アーティクルにおいて、前記コンピュータが再割 り当てをするように構成されたプログラム・コードが更に、コンピュータが前記 カタログ要素と前記複数の属性及び属性要素との間のリレーションを修正して、 前記複数の属性及び属性要素が前記インデックス要素と無関係となるように構成 されたコンピュータで読み取り可能なプログラム・コードを備えていることを特 徴とする製造用アーティクル。 ２２． 請求項２０記載の製造用アーティクルにおいて、前記コンピュータが削 除するように構成されたプログラム・コードが更に、 コンピュータが前記複数の属性及び属性要素に関係付けられた第２の複数の属 性及び属性要素の位置を指定するように構成されたコンピュータで読み取り可能 なプログラム・コードと、 前記第２の複数の属性及び属性要素が再割り当てできる場合に、コンピュータ が前記第２の複数の属性及び属性要素を再割り当てするように構成されたコ ンピュータで読み取り可能なプログラム・コードと、 前記第２の複数の属性及び属性要素が再割り当てできない場合に、コンピュー タが前記第２の複数の属性及び属性要素を削除するように構成されたコンピュー タで読み取り可能なプログラム・コードと、 コンピュータが前記複数の属性及び属性要素を削除するように構成されたコン ピュータで読み取り可能なプログラム・コードとを備えていることを特徴とする 製造用アーティクル。 ２３． 請求項１３記載の製造用アーティクルにおいて、該アーティクルは更に 、コンピュータが前記マルチメディア・データの第２の部分のイベント要素を生 成するように構成されたコンピュータで読み取り可能なプログラム・コード備え 、前記イベント要素が前記マルチメディア・データの前記第２の部分と関連した イベントを表していることを特徴とする製造用アーティクル。 ２４． 請求項２３記載の製造用アーティクルにおいて、前記イベントが品質保 証イベントを表していることを特徴とする製造用アーティクル。 ２５． マルチメディア・データのデータ収集品質を管理する方法において、 前記マルチメディア・データを再検討するステップと、 データ収集の品質に関する情報を含んだイベントを生成するステップと、 前記イベントを前記マルチメディア・データの一部と関連付けるステップと を備えていることを特徴とする管理方法。 ２６． 請求項２５記載の方法において、該方法は更に、 前記イベントを使用して前記マルチメディア・データの前記一部の再呼び出し をするステップと、 前記マルチメディア・データを再検討して、データ収集の品質にアクセスして 前記マルチメディア・データの前記一部を得るステップと を備えていることを特徴とする方法。 ２７． マルチメディア・データをカタログ化するシステムにおいて、 処理装置と、 該処理装置に連結されたカタログ化機構と、 前記処理装置に連結されたリレーション管理機構と、 前記カタログ化機構及び前記リレーション管理機構に連結された複数のインデ ックス要素と を備えていることを特徴とするシステム。 ２８． 請求項２７記載のシステムにおいて、前記カタログ化機構が、 カタログ化インタフェースと、 該カタログ化インタフェースに連結された複数のカタログ化処理機構と を備えていることを特徴とするシステム。 ２９． 請求項２７記載のシステムにおいて、前記関係管理機構が、 リレーション管理インタフェースと、 該リレーション管理インタフェースに連結された複数のリレーション管理処理 機構と を備えていることを特徴とするシステム。 ３０． マルチメディア・データの代替カタログを生成する方法において、 １つ以上のカタログ要素を含んだ、前記マルチメディア・データの第１のカタ ログを生成するステップと、 前記１つ以上のカタログ要素と関連する第１の組のキーワードを生成するステ ップと、 前記１つ以上のカタログ要素と結合した第２の組のキーワードを生成するステ ップと を備えていることを特徴とする方法。 ３１． 請求項３０記載の方法において、該方法は更に、 前記第１の組のキーワードに関連した第１の組のタイプを生成するステップと 、 前記第２の組のキーワードに関連した第２の組のタイプを生成するステップと を備えていることを特徴とする方法。 ３２． 請求項３１記載の方法において、前記第１及び第２の組のタイプが相互 関係に置かれてタイプの階層を形成していることを特徴とする方法。 ３３． 請求項３０記載の方法において、前記第１及び第２の組のキーワード が相互関係に置かれてキーワードの階層を形成していることを特徴とする方法。 ３４． 請求項３０記載の方法において、前記第１の組のキーワードの１つ以上 のキーワードが、第１の値を有する第１のシソーラス・キーワード要素及び第２ の値を有する第２のシソーラス・キーワード要素に関連付けられていることを特 徴とする方法。