JP4162459B2

JP4162459B2 - マルチメディア情報再生装置およびマルチメディア情報再生方法およびプログラム

Info

Publication number: JP4162459B2
Application number: JP2002280298A
Authority: JP
Inventors: 美佳福井; 優鈴木; 秀樹筒井
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2002-09-26
Filing date: 2002-09-26
Publication date: 2008-10-08
Anticipated expiration: 2022-09-26
Also published as: JP2004118483A

Description

【０００１】
【発明の属する技術分野】
本願発明は、映像や音声などのストリーム情報とテキスト情報を含むマルチメディア情報を扱うマルチメディア情報再生装置およびマルチメディア情報再生方法およびプログラムに関する。
【０００２】
【従来の技術】
近年、ＤＶＤ、ハードディスクレコーダーなどのデジタル映像録画装置などが普及し、大容量の記録装置を備えたホームサーバの製品化も相次いでいる。また、ＢＳ、ＣＳなどのチャンネル数が増えたり、ネットワークを介した音楽や映像配信サービスも本格化し、家庭で多量のディジタルコンテンツを簡単に蓄積し、好きなときに楽しむことができるようになった。
【０００３】
これらのデジタルコンテンツは、映像や音声のストリーム情報そのものとしてでは無く、タイトルやチャプター（シーン）などの映像や音声の切れ目を単位とし、チャプターの内容をあらわすテキスト情報などをコンテンツに関連づけて構造化して蓄積・管理されることが多くなっている。このようなマルチメディア情報の記述のための国際標準規格（ＭＰＥＧ７）が制定されている。
【０００４】
デジタルコンテンツを、マルチメディア情報として蓄積、管理すると、たとえば特願２００２−５３７０１などの技術により、「イチローのホームラン」といったような自然言語文を入力して、観たいシーンを検索することが可能になる。これにより好きなスポーツ選手や歌手が出演するシーンだけを、自動的に収集することも可能になる。
【０００５】
しかし、多量のデジタルコンテンツを蓄積しても、すべてのコンテンツをゆっくり楽しむ時間の余裕のあるユーザは少ない。効率よく結果を知るのが目的であれば、このようなマルチメディア情報の検索機能などで解決が可能である。
【０００６】
一方、順を追ってコンテンツを観ていくことによって得られる感動は、結果だけを知る感動とは異なる。時間が許せば、好きなコンテンツは結果だけでなく経過を楽しみたいと考えるユーザは多い。コンテンツの経過を楽しむためには、勝負の結果やドラマの結末などの重要情報は、事前に知らずに観た方がよい。しかし、経過を楽しみたいと思っていたコンテンツの結果が、他のコンテンツの中で紹介されていて、興をそがれることも多い。
【０００７】
たとえば、スポーツの試合を観る前に、ニュースでゲームの結果やおもしろいシーンを観てしまったり、ドラマや映画の批評や結末などを知ってしまうと、せっかく後でゆっくり楽しもうと思っていたコンテンツのおもしろみが半減してしまう。
【０００８】
現状の映像記録装置では、録画された映像を新しい順に並べて選択させたり、映像の分野ごとに分類して提示する機能がある（非特許文献１参照）。これらの機能を使ってユーザが注意してコンテンツを視聴する順番を選択すれば、経過を見たいコンテンツを先に観て、ニュース番組などのような結果を見せるコンテンツを後で観るように調整することは、ある程度可能である。しかし、関係のない番組にニュース速報が流れるなど、ユーザが予期せぬ時に結果情報が流れる場合は防ぎようがない。
【０００９】
また、小説などのコンテンツ情報を読者に提供し、読者同士がコンテンツに関するコメントを交換する場において、まだ読んでいない部分に関するコメントが見えないように制限するために、小説のどこまで読んだ読者がそのコメントを書いたかを記録しておき、そこまで読んでいない読者にはそのコメントは見せないようにするというものである（特許文献１参照）。この方法は、小説配本サイトのように１つのコンテンツに対し誰がどこまで読んだかを厳密に管理できる場では有効である。
【００１０】
しかし、テレビ番組のように無数のコンテンツがある場で、コンテンツごとにそのコンテンツの制作にかかわった人が世の中の全コンテンツをどこまで観たことがあるかを記録しておくことは現実的ではない。
【００１１】
たとえば、あるニュース番組の制作にかかわるすべての人が、その日に放映されたすべての番組の視聴の有無を記録しておくことは不可能に近い。仮にそれが可能であったとしても、番組Ａを観た人が別の番組Ｂを作ったからといって、その番組Ｂの中に、番組Ａの結末を暴露するような情報が含まれているとは限らない。
【００１２】
【特許文献１】
特開２００２−１５７４３４公報
【００１３】
【非特許文献１】
東芝ＨＤＤ＆ＤＶＤレコーダ、ＲＤ−Ｘ１／Ｘ２のカタログ（ライブラリ機能）、２００２年５月
【００１４】
【発明が解決しようとする課題】
しかしながら、このように、従来のマルチメディアシステムでは、ユーザの好みやコンテンツ同士の引用関係を考慮せずにコンテンツを提示しており、録画した番組を観る前に結果を知ってしまっておもしろさが半減する、といった問題を防ぐ手段がなかった。
【００１５】
そこで本願発明は、ユーザの好みにあわせてコンテンツの提示優先度を制御し、ユーザが視聴する可能性のあるコンテンツの結果を引用しているコンテンツを先に提示しないように制御を行い、ユーザが安心してコンテンツを楽しむことができるようにする。
【００１６】
【課題を解決するための手段】
本願発明は映像，音声などのストリーム情報とテキスト情報を関係づけて構造化されたマルチメディア情報を収集するためのマルチメディア情報収集手段と、このマルチメディア情報収集手段により収集されたマルチメディア情報を提示するためのマルチメディア情報提示手段を具備するマルチメディア情報再生装置において、前記マルチメディア情報収集手段により収集した複数のマルチメディア情報のテキスト情報からマルチメディア情報間の引用関係を解析するマルチメディア情報引用関係解析手段と、このマルチメディア情報引用関係解析手段により解析された引用関係に基づき、前記マルチメディア情報提示手段を介して提示すべきマルチメディア情報の優先順位を決定するマルチメディア情報提示順位決定手段を具備することを特徴とするマルチメディア情報再生装置にかかるものである。
【００１７】
上記手段によれば、ユーザがこれから視聴する可能性の高いコンテンツを推測し、そのコンテンツの結果を引用しているコンテンツを誤って先に視聴してしまわないよう、ユーザに注意喚起の情報を提示することができる。これにより、多量のコンテンツを視聴する場合でも、ユーザの好みにあわせて、効率よくダイジェストを視聴するコンテンツと、時間をかけて経過を楽しみながら視聴するコンテンツを切り替えることができる。
【００１８】
【発明の実施の形態】
以下、本願発明の実施の形態を図示例と共に説明する。
【００１９】
図１は、本願発明の一実施例を示すブロック図である。映像、音声などのストリーム情報とメタデータとしてのテキスト情報を含むマルチメディア情報がマルチメディア情報収集部１０により収集される。このメタデータは予めストリーム情報に付加されていてもよいし、ユーザが入力できるようにしてもよい。
【００２０】
次に、マルチメディア情報引用解析部１１では、マルチメディア情報のメタデータの記述を解析し、他のマルチメディア情報を引用している箇所と他のマルチメディア情報に引用されている箇所の対応関係を判定する。
【００２１】
提示履歴記憶部１２では、ユーザにどのマルチメディア情報を提示したかの履歴を記録する。マルチメディア情報提示順位決定部１３では、マルチメディア情報引用解析部１１で判定されたマルチメディア情報間の引用関係と、提示履歴記憶部１２に記録された履歴をもとに、ユーザに提示するマルチメディア情報の優先順位を決定する。
【００２２】
マルチメディア情報提示部１４は、収集したマルチメディア情報をユーザに提示するものであるが、その際、マルチメディア情報提示順位決定部１３で決定された優先順位に基づき、マルチメディア情報の表示をコントロールする。
【００２３】
以下に、本願発明の動作を示す。処理の流れの概略を図２のフローチャートに示す。はじめに、マルチメディア情報収集部１０にてストリーム情報からなるコンテンツの収集を行う（Ｓ２０１）。たとえば、地上波やＢＳ、ＣＳ放送、ケーブルテレビなどの番組、ビデオテープ、ＤＶＤ、ＣＤ、ＣＤ−ＲＯＭなどを媒介に入力されたコンテンツ、ネットワーク経由で配信されたコンテンツなどである。
【００２４】
まだ引用関係の解析処理を行っていない新しいコンテンツがある場合は（Ｓ２０２）、マルチメディア情報引用解析部１１にてコンテンツ間の引用関係を解析する（Ｓ２０３）。各コンテンツは映像や音声などのストリーム情報に加えて、収集時の入手経路となったメディアの種類、入手日時などの情報に加えて、番組名、出演者、概要、時間などの情報がメタデータとして付加されているものがある。また、コンテンツのカットごとの単位（ここでは、チャプター（またはシーン）と呼ぶ）ごとに登場人物や解説者、概要、テロップで流れる文字、セリフなどの情報がテキストで付加されているものもある。つまり、メタデータは図３のコンテンツＡのような形式で記載された情報で記憶される。
【００２５】
また、このように付加されたメタデータは、番組情報を紹介するＷｅｂサイトや、放送局からのＥＰＧなどのデータを参照することによって得ることも可能である。
【００２６】
またメタデータがないストリーム情報であっても、既存の映像認識や音声認識技術を利用することにより、カット検出を行ったり、映像に含まれるテロップ、スコア表示などの文字や音声をテキスト情報に変換したり、顔認識によって登場人物を特定したり、映像の意味情報を抽出することも可能である。
【００２７】
図３にコンテンツ間におけるチャプターの引用関係の概念図を示す。コンテンツＡ、Ｂ、Ｃのうち、Ａ、Ｂは野球中継のコンテンツで、Ｃはスポーツニュースとする。スポーツニュースの中では野球中継のコンテンツＡ，Ｂの一部を引用して紹介している。ここで図３の例では、コンテンツＣのチャプターＣ−３がコンテンツＡのチャプターＡ−ｍを引用し、コンテンツＣのチャプターＣ−２がコンテンツＢのチャプターＢ−ｎを引用していることを表している。
【００２８】
マルチメディア情報引用解析部１１は、メタデータに記載されたコンテンツの分野や、コンテンツＡとＢの内容、コンテンツＣの各チャプターの内容、イベント日時と放送日時の対応などにより引用関係を解析していく。
【００２９】
図４は、引用関係を解析するために用いる用語辞書である。ここでは用語となる名詞と分野とその重要度が定義されている。例えば、野球という分野において、「サヨナラ」は重要度の大きい用語として登録されている。
【００３０】
図５は、日時を抽出するための日時パターンの例である。例えば、１０：２３：４４は１０時間２３分４４秒を意味することを記述したルールである。
【００３１】
図６は、引用解析ルールであり、引用関係を解析するためのルールである。このルールをもとに時間や分野や固有名詞などから引用関係を解析することができる。これら、図４，５，６のようなルールは予めルール記憶部１５に記憶しているものとする。
【００３２】
マルチメディア情報引用解析部１１は、これら図４のような用語辞書を用いてメタデータに記載された用語を抽出したり、図５のような日時パターンとメタデータの一致度により日時を抽出したり、形態素解析などにより固有名詞などを抽出する。また、各コンテンツ間で、図６のような引用解析ルールの項目があてはまれば点を加算していき、点数が高ければ引用関係にあるものとする。
【００３３】
具体的に図７（ａ）の例では、コンテンツＡとＣのチャプターのメタデータの内容を比較すると、図４の用語辞書にある固有名詞「ＢＢＢ」や「２塁打」「勝ち越し」などの用語がどちらにも含まれるため、Ｃ−３とチャプターＡ−ｍの類似度が高いと判断できる。また、図６のルールにより、類似度が高いコンテンツの場合、関連するコンテンツの部分の時間が短く、放送日時がイベント日時より遅い方を引用する方とする。
【００３４】
つまり、図５にあるような日付パターンを参照すると、コンテンツＣの放送日時が２３時１５分でコンテンツＡの放送日時１８時より遅く、コンテンツＣ全体の時間（４５分）もコンテンツＡ（４時間）より短いので、コンテンツＣが引用するコンテンツとなる（コンテンツＡは引用元）。また、引用関係を解析した結果は、図７（ｂ）のような形式で保存してもよい。
【００３５】
このように引用関係が抽出された場合（Ｓ２０４）、マルチメディア情報提示順位決定部１３は提示履歴記憶部１２をもとに引用されるコンテンツはユーザにすでに提示されたかどうかを判定する（Ｓ２０５）。
【００３６】
図８にユーザへ提示される提示履歴の例を示す。この履歴は、いつ，どのコンテンツをユーザが観たかを記録する。また、コンテンツのどの部分を観たかを記録するため、観た部分の内容と開始時刻と視聴時間を記録しておく。マルチメディア情報提示順位決定部１３は提示履歴の中に、引用関係にあるコンテンツと同じコンテンツがあるかどうかを判定する。メディア名と放送日時が一致していれば同じコンテンツであると判定できるが、放送されたものではない場合、再放送の場合などは、イベント日時や内容の一致の度合で判定する。イベント日時や内容の一致の判定には、例えば引用解析に用いたルール記憶手段１５に記憶されている図４，５，６のルールを適用するとよい。
【００３７】
次に、マルチメディア情報提示順位決定部１３は、引用されているコンテンツが提示履歴にない場合、そのコンテンツをユーザがこれから視聴する可能性を判定する（Ｓ２０６）。
【００３８】
図９は、ルール記憶部１５に記憶されている図９に示すような視聴可能性判定ルールである。ここでは最近予約したコンテンツは視聴の可能性が高いといったルールが記載されている。
【００３９】
マルチメディア情報提示順位決定部１３は、視聴可能性判定ルールを用いて、ユーザが明示的に予約を行ったコンテンツでまだ観ていないコンテンツや、ユーザが毎週観ている番組と同じタイトルであって、ユーザの視聴時間全体にしめる割合の高い登場人物（固有名詞）が含まれる、といったルールがあてはまるコンテンツを、これから視聴する可能性が高いものと判定する。登場人物（固有名詞）や内容や時間に関しては引用関係を解析する際に用いた図４，５，６のルールを用いてもよい。
【００４０】
次に、マルチメディア情報提示順位決定部１３は、引用されているコンテンツの視聴可能性が高いと判定された場合、引用されているコンテンツを引用しているコンテンツより優先度を高く設定する（Ｓ２０７）。たとえば、図７の例では、コンテンツＡとＣを比較すると、コンテンツＣがコンテンツＡを引用しており、コンテンツＡは提示履歴によく登場する固有名詞（「野球中継」など）を含んでいるため、これからの視聴可能性が高いと判定され、コンテンツＡの方がコンテンツＣの引用するチャプターより優先度を高く設定する。
【００４１】
これにより、ユーザがコンテンツを観る際に、マルチメディア情報提示部１４にて優先度の高いコンテンツを先に観るように提示することができる。たとえば、図１０のようにまだ視聴していない新しいコンテンツのリストを見せて、引用元のコンテンツＡを先に表示し、コンテンツＣではコンテンツＡを引用していることがわかるように提示する（Ｓ２０８）。
【００４２】
また、ユーザが先にコンテンツＣを観てしまっているとしても、チャプターとチャプターの切れ目を判定し（Ｓ２０９）、チャプターの切れ目である場合次のチャプターに、より優先度の高い引用コンテンツがあるかを判定し（Ｓ２１０）、もしあればユーザに提示する次のチャプターが優先度の高いチャプターであることをマルチメディア情報提示部１４にてユーザに提示する（Ｓ２１１）。
【００４３】
図１１と図１２は、マルチメディア情報提示部１４にて引用元のチャプターの存在を提示する画面例である。画面下のバー１１０によりチャプターの切れ目を提示している。次のチャプターで引用しているコンテンツの優先度が高い場合、コンテンツの再生を一時停止して、お知らせのダイアログボックス１１１，１２０を表示する。
【００４４】
ユーザがリモコンなどで、「今すぐ飛ぶ」を選択すればコンテンツＡの再生をはじめる。また、ユーザが「スキップする」１１２を選択すれば、次のチャプターを飛ばしてその次のチャプターの再生をはじめる。「つづきをみる」を選択すれば、このまま次のチャプターの再生をつづける。
【００４５】
ユーザが、ダイアログボックスのどれかの選択肢を選ぶまで、つづきの再生を行うのを止めてもよいし、一定時間がたったらダイアログボックスを消して再生をつづけてもよい。あるいは、コンテンツの再生はとめずに、チャプターの切れ目の１０秒前ぐらいから警告メッセージを画面の隅にでも出してもよい。また、ダイアログボックスでなく、チャイム音や人の音声により警告の提示を行ってもよい。
【００４６】
また、視聴可能性の優先度だけでなく、引用している箇所に元のコンテンツの重要情報が含まれている可能性も鑑みて優先度を決定する方法も有効である。たとえば、試合の後半や点数に変動があった場面、ドラマの結末に近い部分であるなどにより、重要情報が含まれるかどうかの判定が可能である。また、図４の用語辞書に含まれる用語が含まれるかどうかでも判定することができる。
【００４７】
また、引用関係にあるコンテンツを１つに集約してユーザに提供することも可能である。たとえば、複数の番組で同じニュースが取り上げられている場合、同じシーンを何度も視聴しないように、同じコンテンツを引用しており、ユーザがすでに視聴しているシーンに関しては自動的にスキップしたり、ユーザに「スキップしますか？」と聞いて簡単にスキップできるようなインタフェースを用意してもよい。
【００４８】
また本提案は、マルチメディア情報間の引用関係だけでなく、電子メールやＷｅｂページなどのテキスト情報に、テレビ番組や映画のストーリーや登場人物に関する情報や、スポーツの勝敗に関して言及する記述が含まれる場合にも、応用することができる。たとえば、電子メールを読むメーラーやＷｅｂブラウザには、不適切な表現をユーザから隠蔽するフィルタ機能が実装されているものがある。本願発明のマルチメディア情報引用関係解析手段を用いて、このフィルタ機能を拡張すれば、ユーザがこれから観る可能性の高い番組やスポーツの結果などに関する重要な情報を、ユーザから隠蔽することができる。これにより、録画した番組を観る前に結果を知ってしまっておもしろさが半減する、といった「ネタバレ問題」を防止することができる。
【００４９】
ユーザがこれから視聴する可能性の高いコンテンツを推測し、そのコンテンツを引用しているコンテンツを誤って先にユーザに提示しないように、制御することができる。これにより、多量のコンテンツを視聴するユーザでも、ゆっくり経過を楽しみたいコンテンツの結果を先に知ることを恐れずに、他のコンテンツを視聴することができる。
【００５０】
また、この機能によれば、コンテンツの引用関係により、同じコンテンツに関するシーンを集約して提示することも可能になる。これにより、同じようなシーンを何度も視聴せずに、効率的にコンテンツの視聴を行う効果も期待できる。このように、ユーザの好みにあわせて、効率よく視聴を行うか、経過も楽しむかを簡単に切り替えることが可能になる。
【００５１】
また、本願発明の実施例における処理をコンピュータで実行可能なプログラムで実現し、このプログラムをコンピュータで読み取り可能な記憶媒体として実現することも可能である。
【００５２】
なお、本願発明における記憶媒体としては、磁気ディスク、フレキシブルディスク、ハードディスク、光ディスク（ＣＤ−ＲＯＭ，ＣＤ−Ｒ，ＤＶＤ等）、光磁気ディスク（ＭＯ等）、半導体メモリ等、プログラムを記憶でき、かつコンピュータが読み取り可能な記憶媒体であれば、その記憶形式は何れの形態であってもよい。
【００５３】
また、記憶媒体からコンピュータにインストールされたプログラムの指示に基づきコンピュータ上で稼動しているＯＳ（オペレーションシステム）や、データベース管理ソフト、ネットワーク等のＭＷ（ミドルウェア）等が本実施形態を実現するための各処理の一部を実行してもよい。
【００５４】
さらに、本願発明における記憶媒体は、コンピュータと独立した媒体に限らず、ＬＡＮやインターネット等により伝送されたプログラムをダウンロードして記憶または一時記憶した記憶媒体も含まれる。
【００５５】
また、記憶媒体は１つに限らず、複数の媒体から本実施形態における処理が実行される場合も、本発明における記憶媒体に含まれ、媒体の構成は何れの構成であってもよい。
【００５６】
なお、本願発明におけるコンピュータは、記憶媒体に記憶されたプログラムに基づき、本実施形態における各処理を実行するものであって、パソコン等の１つからなる装置、複数の装置がネットワーク接続されたシステム等の何れの構成であってもよい。
【００５７】
また、本願発明におけるコンピュータとは、パソコンに限らず、情報処理機器に含まれる演算処理装置、マイコン等も含み、プログラムによって本願発明の機能を実現することが可能な機器、装置を総称している。
【００５８】
【発明の効果】
以上、説明したように本願発明のマルチメディアシステムによれば、ユーザがこれから視聴する可能性の高いコンテンツを引用しているコンテンツを誤って先にユーザに提示しないように、制御することができる。これにより、多量のコンテンツを視聴するユーザでも、ゆっくり経過を楽しみたいコンテンツの結果を先に知ることを恐れずに、他のコンテンツを視聴することができるという優れた効果を奏し得る。
【図面の簡単な説明】
【図１】本願発明のマルチメディアシステムの一実施形態における全体構成を示す図。
【図２】本願発明のマルチメディアシステムの一実施形態における全体の処理の流れを示す図である。
【図３】本願発明のマルチメディアシステムの一実施形態におけるコンテンツ間の引用関係を概念的に示した図。
【図４】本願発明のマルチメディアシステムの一実施形態における用語辞書を示す図。
【図５】本願発明のマルチメディアシステムの一実施形態における日時パターンを示す図。
【図６】本願発明のマルチメディアシステムの一実施形態における引用関係解析ルールを示す図である。
【図７】本願発明のマルチメディアシステムの一実施形態における引用関係解析を説明するための図。
【図８】本願発明のマルチメディアシステムの一実施形態におけるユーザへの提示履歴を示す図。
【図９】本願発明のマルチメディアシステムの一実施形態における視聴可能性判定ルールを示す図。
【図１０】本願発明のマルチメディアシステムの一実施形態における未視聴のコンテンツのリストを提示している表示画面の図。
【図１１】本願発明のマルチメディアシステムの一実施形態における引用元のチャプターの存在を提示する画面例である。
【図１２】本願発明のマルチメディアシステムの一実施形態における引用元のチャプターの存在を提示する画面例である。
【符号の説明】
１０…マルチメディア情報収集部
１１…マルチメディア情報引用解析部
１２…提示履歴記憶部
１３…マルチメディア情報提示順位決定部
１４…マルチメディア情報提示部
１５…ルール記憶部

Claims

映像，音声などのストリーム情報とテキスト情報を関係づけて構造化されたマルチメディア情報を収集するためのマルチメディア情報収集手段と、
このマルチメディア情報収集手段により収集されたマルチメディア情報を提示するためのマルチメディア情報提示手段を具備するマルチメディア情報再生装置において、
前記マルチメディア情報収集手段により収集した複数のマルチメディア情報のテキスト情報から、用語辞書及び日時パターンを用いて、用語及び日時を抽出することによって、マルチメディア情報間の引用関係を解析するマルチメディア情報引用関係解析手段と、
このマルチメディア情報引用関係解析手段により解析された引用関係に基づき、前記マルチメディア情報提示手段を介して提示すべきマルチメディア情報の優先順位を決定するマルチメディア情報提示順位決定手段を具備することを特徴とするマルチメディア情報再生装置。
前記マルチメディア情報引用関係解析手段は、前記抽出された用語及び日時から予め記憶された引用解析ルールをもとに、マルチメディア情報間の引用関係を解析することを特徴とする請求項１記載のマルチメディア情報再生装置。
前記マルチメディア情報提示手段にて提示されたストリーム情報の履歴を記録する提示履歴記録手段をさらに有し、
前記マルチメディア情報提示順位決定手段は、この提示履歴記録手段により記録されたマルチメディア情報の提示履歴と前記マルチメディア情報引用関係解析手段により解析された引用関係に基づき、前記マルチメディア情報提示手段を介して提示すべきマルチメディア情報の優先順位を決定することを特徴とする請求項１または請求項２いずれか記載のマルチメディア情報再生装置。
前記マルチメディア情報提示順位決定手段は、予め記憶された視聴可能性判定ルールをもとに、ユーザがまだ視聴していないマルチメディア情報に対して今後視聴する可能性を推定し、
前記マルチメディア情報提示手段は、前記マルチメディア情報提示順位決定手段により視聴可能性が高いと推定された第１のマルチメディア情報を引用している第２のマルチメディア情報を提示する前に、前記第１のマルチメディア情報の存在を提示することを特徴とする請求項１ないし請求項３いずれか記載のマルチメディア情報再生装置。
前記マルチメディア情報提示順位決定手段は、第２のマルチメディア情報に引用元の第１のマルチメディア情報の重要情報の有無をもとに、提示すべきマルチメディア情報の提示順位を決定することを特徴とする請求項４記載のマルチメディア情報再生装置。
マルチメディア情報収集手段が、映像，音声などのストリーム情報とテキスト情報を関係づけて構造化されたマルチメディア情報を収集し、
マルチメディア情報提示手段が、収集された前記マルチメディア情報を提示するマルチメディア情報再生方法において、
マルチメディア情報引用関係解析手段が、前記マルチメディア情報収集手段により収集した複数のマルチメディア情報のテキスト情報から、用語辞書及び日時パターンを用いて、用語及び日時を抽出することによって、マルチメディア情報間の引用関係を解析し、
マルチメディア情報提示順位決定手段が、このマルチメディア情報引用関係解析手段により解析された引用関係に基づき、前記マルチメディア情報提示手段を介して提示すべきマルチメディア情報の優先順位を決定することを特徴とするマルチメディア情報再生方法。
前記マルチメディア情報引用関係解析手段は、前記抽出された用語及び日時から予め記憶された引用解析ルールをもとに、マルチメディア情報間の引用関係を解析することを特徴とする請求項６記載のマルチメディア情報再生方法。
コンピュータを映像，音声などのストリーム情報とテキスト情報を関係づけて構造化されたマルチメディア情報をマルチメディア情報収集手段にて収集させ、
収集された前記マルチメディア情報をマルチメディア情報提示手段にて提示させるマルチメディア情報再生装置として実行させるプログラムであって、
前記マルチメディア情報収集手段により収集した複数のマルチメディア情報のテキスト情報から、用語辞書及び日時パターンを用いて、用語及び日時を抽出することによって、マルチメディア情報間の引用関係をマルチメディア情報引用関係解析手段にて解析させ、
このマルチメディア情報引用関係解析手段により解析された引用関係に基づき、前記マルチメディア情報提示手段を介して提示すべきマルチメディア情報の優先順位をマルチメディア情報提示順位決定手段にて決定させることを特徴とするプログラム。
コンピュータをマルチメディア情報再生装置として実行させるプログラムであって、前記マルチメディア情報引用関係解析手段に、前記抽出された用語及び日時から予め記憶された引用解析ルールをもとに、マルチメディア情報間の引用関係を解析させることを特徴とする請求項８記載のプログラム。