JP2005198303A - 関心度の値を生成及び表示する方法、コンピュータプログラム及びシステム - Google Patents

Abstract

【課題】 映像又は音声の記録の関心度合いの指標を、手作業を必要とせずに自動的に決定及び提示する効果的且つ信頼性のある技術を提供すること。
【解決手段】 プレゼンテーションの出席者又は視聴者は、関心度の高い特定の時点をマーキングする入力を与える。受信されたブックマークは集計され、プレゼンテーション中の様々な時点に関する全体的な関心度の値を生成する。これらの関心度の値の図形描写が与えられ；ユーザは、この図形描写を用いて、高い関心度を有する又は重要なプレゼンテーションの特定の部分を発見するように操作できる。ユーザインターフェース要素は、様々なフィルタリング、表示及びコンフィギュレーションの選択肢に関するアクセス機能を、その図形描写物に与える。
【選択図】 図１

Description

本発明は、一般に媒体項目（メディアアイテム）を記録すること及び索引付けすることに関し、特に出席者、視聴者又は聴取者の入力に基づいて記録の様々な部分に関する関心度の値を生成する技術に関する。

会議、プレゼンテーション、テレビジョン番組、スポーツイベント等を記録するための技術がある。多くの場合に、そのような記録又はメディアアイテムの視聴者は、記録全体の鑑賞を必要とせず、関心のある特定の部分を見分け、ナビゲートしたいであろう。プレゼンテーションの音声記録や、他の格納済みの時間的に連続したメディアアイテムの映像又は音声記録を鑑賞又は聴取する場合に、その記録の特に関心のある部分を見出すことが困難で時間を費やすことが間々ある。テキストメディア又は画像メディアとは異なり、そのような記録を、重要でない部分をスキップし且つ重要な部分を区別するように、効果的に分解することは困難である。

視聴者は、映像部分を速められた速度で鑑賞するために、記録を鑑賞する際にスピードサーチを実行することができる。しかしながら、一般にスピードサーチの動作中では、その音声部分を黙らせている（もし黙らせていなったとすると、解読できないのが一般的であろう。）。１人以上の個人が主に話をするプレゼンテーションの場合には、議論される対象は、記録の映像部分からは容易に判別できない。そのような状況では、高速サーチは、関心のある部分を迅速にナビゲートする観点からは有用ではない。

更に、議論される対象についての何らかの事項を映像部分が明らかにする場合でさえも（例えば、プレゼンテーションがオーバヘッドプロジェクタのスライドを含むような場合）、映像部分を解釈し、議論される対象を確認できる程度に十分遅い速度で、長い記録又はいくつかの記録をスピードサーチすることは、視聴者にとって、依然として時間のかかるものである。更に、そのような方法でのスピードサーチは、画面に現われる短時間の間にスライド又は他の映像部分を見逃さないように、その部分に絶え間なく集中することを視聴者に要求する。

手作業でインデックス（索引）を付けることが可能である。例えば、従来のＤＶＤは通常的にはチャプターインデックス（章見だし）を与え、チャプターインデックスは視聴者が関心を寄せる特定の部分にスキップして移ることを可能にする。ディスクに附随する画面メニュー及び／又は印刷挿入物は、章のタイトルや、フレームさえも、及び／又はインデックスされた章の各々に関する他の情報をも提供し、鑑賞する部分を視聴者が決定するのを支援する。しかしながら、そのようなインデックスの生成は手作業であり、自動的ではない。

記録の転換（ｔｒａｎｓｃｒｉｐｔｉｏｎ）は、例えばリアルタイムのカウンタ値により、当初の記録に関連させることの可能なスキャン可能なテキスト表現を生成する。ユーザはその転換物を読み取り、関心のある部分を識別し、記録中のその部分をナビゲートすることができる。ある場合には、その転換物自体は、ユーザが当初の（オリジナルの）記録に問い合わせをすることさえも要しない程十分な情報を提供するかもしれない。しかしながら、そのような転換は、（ジェスチャー（身ぶり）、デモンストレーション（実演）等を含む会話に附随する映像部分のような）重要な情報を省いてしまうことが間々ある。更に、転換物を作成し、索引付けする手作業が必要とされる。

いくつかの従来のシステムは、ノイズレベル、音の位置関係、場面変更等を分析することで、関心のある記録の部分を推論しようとする。そのようなシステムは、沈黙、拍手、スライド交換等のような事象を検出する。そのような技術を用いるシステムは、例えば、ガージェンソン等による「Ｍｅｄｉａ Ｂｒｏｗｓｅｒ Ｕｓｉｎｇ Ｍｕｌｔｉｍｏｄａｌ Ａｎａｌｙｓｉｓ」と題する米国特許第６，３６６，２９６号（特許文献１）、及びガージェンソン等による「Ｍｅｄｉａ Ｂｒｏｗｓｅｒ Ｕｓｉｎｇ Ｍｕｌｔｉｍｏｄａｌ Ａｎａｌｙｓｉｓ」と題する米国特許出願第２００２／００５４０８３号に記載されている。

しかしながら、重要な又は関心のある部分を連続的に識別するそれらの性能の観点からは、記録に適切なそのような属性は、信頼性が低く不正確であることが間々ある。例えば、ノイズレベルの増加は、講演者の話した冗談の後に笑う人に起因したり、新たな講演者の紹介時の拍手、休憩中の移動、加熱した議論その他多数のいかなる事象（イベント）を含んだりするが、それらの一部には関心があり、一部には関心がない。プレゼンテーションの興味のある部分では、聴取者は心を奪われて鑑賞するので、比較的静かであるかもしれない。ノイズレベル又は同様な適切なメトリックに基づく索引付けでは、記録に関する所与の任意の部分に関する関心度を正確に反映することは困難である。

概して、関心のある部分を判別する既存の方法は、不正確であるか或いは過度に時間を費やし、日常のプレゼンテーションや会議等の大量の記録に使用することは現実的でない。その結果、映像及び音声の記録中に埋もれた有用な情報は、しばしば見逃され、効率的に検索できなくなる。

ニューヨーク州ニュージャージーのドクマットＬＬＣから入手可能なインタークリッパ（Ｉｎｔｅｒｃｌｉｐｐｅｒ）は、ユーザが、ボタンをクリックすることで映像記録の重要な部分をブックマークすることを可能にする。複数人が同一イベントのハイライト（重要事項）をブックマークし、固有に符号化されたマーカーを用いて彼ら自身のハイライトを別々に検索することができる。しかしながら、インタークリッパは、記録に関する様々な部分の関心度合いのメトリック全体を生成するように、いかなる種類のブックマークの照合をも実行することは、何ら示されていない（この点については、例えば非特許文献１参照。）。

非特許文献２は、プレゼンテーション中に出席者がリアルタイムで注釈を付することを可能にするシステムを記載しているが、その注釈を処理したり照合したりすることはできない。

非特許文献３は、ペンを用いた映像ログツールを記載しており、そのツールは、ユーザが、プレゼンテーション中にリアルタイムでメモを取り、プレゼンテーションの映像ストリーム記録にそのメモを関連付けることを可能にする。しかしながら、この手法は、関心度合いのメトリックを生成するように、複数のユーザによりなされた注釈を照合したり組み合わせる機能を提供しない。

チュー等による「Ｉｎｔｅｒｎｅｔ−Ｂａｓｅｄ Ｓｙｓｔｅｍ ｆｏｒ Ｍｕｌｔｉｍｅｄｉａ Ｍｅｅｔｉｎｇ Ｍｉｎｕｔｅｓ」と題する米国特許出願第２００２／０１６１８０４号は、メモを取るシステムを記載しており、そのシステムは、受信した注釈を、マルチメディアストリームの適切な部分に自動的に可憐付けることで、入力されたメモをマルチメディアストリームに合わせることができる。しかしながら、チュー等は、関心の度合いのメトリックを生成するように、複数のユーザにより付された注釈を照合したり組み合わせる技術を開示していない。

非特許文献４は、複数のユーザが彼らのメモを共用することを可能にするメモを取るシステムを開示している。しかしながら、プレゼンテーションに関する関心度のメトリックを生成するように、複数のユーザにより付された注釈を照合する或いは組み合わせる何らの技術も開示していない。
米国特許第６，３６６，２９６号公報 Ｌ．Ｈｅ ｅｔ ａｌ．，"Ａｕｔｏ−Ｓｕｍｍａｒｉｚａｔｉｏｎ ｏｆ Ａｕｄｉｏ−Ｖｉｄｅｏ Ｐｒｅｓｅｎｔａｔｉｏｎｓ"，Ｐｒｏｃ．Ｍｕｌｔｉｍｅｄｉａ‘９９，１９９９ Ｍｉｎｎｅｍａｎ，Ｓ．Ｌ．ａｎｄ Ｈａｒｒｉｓｏｎ，Ｓ．Ｒ．，"Ｗｈｅｒｅ Ｗｅｒｅ Ｗｅ：Ｍａｋｉｎｇ ａｎｄ Ｕｓｉｎｇ Ｎｅａｒ−Ｓｙｎｃｈｒｏｎｏｕｓ Ｐｒｅ−Ｎａｒｒａｔｉｖｅ Ｖｉｄｅｏ"，Ｐｒｏｃ．ＡＣＭ Ｍｕｌｔｉｍｅｄｉａ（ＭＭ‘９３），Ａｕｇｕｓｔ １９９３，Ａｎａｈｅｉｍ，ＵＳＡ，ｐｐ．２０７−２１４ Ｋ．Ｗｅｂｅｒ ａｎｄ Ａ．Ｐｏｏｎ，"Ｍａｒｑｕｅｅ：Ａ Ｔｏｏｌ ｆｏｒ ＲｅａｌＴｉｍｅ Ｖｉｄｅｏ Ｌｏｇｇｉｎｇ"，Ｐｒｏｃ．ＣＨＩ９４，ＡＣＭＰｒｅｓｓ，ＮｅｗＹｏｒｋ，１９９４，ｐｐ．５８−６４ Ｒ．Ｃ．Ｄａｖｉｓ，ｅｔ ａｌ．，"ＮｏｔｅＰａｌｓ：Ｌｉｇｈｔｗｅｉｇｈｔ Ｎｏｔｅ Ｔａｋｉｎｇ ｂｙ ｔｈｅ Ｇｒｏｕｐ，ｆｏｒ ｔｈｅ Ｇｒｏｕｐ"ＵＣ Ｂｅｒｋｅｌｅｙ ＣＯｍｐｕｔｅｒ Ｓｃｉｅｎｃｅ Ｄｉｖｉｓｉｏｎ Ｔｅｃｈｎｉｃａｌ Ｒｅｐｏｒｔ ＵＣＢ／／ＣＳＤ９８−９９７

本発明の課題は、映像又は音声記録の関心度合いの指標を、手作業を必要とせずに自動的に決定及び提示する効果的且つ信頼性のある技術を提供することである。また、その他の課題は、視聴者が、そのような記録の関心のある部分を決定し、そのような部分を容易にナビゲートできるようにする技術を提供することである。更に、その他の課題は、上述した従来技術の制約を回避できる技術を提供することである。

本発明によれば、プレゼンテーションの出席者及び／又は記録、伝送内容若しくはプレゼンテーションを視聴する者は、そのプレゼンテーションの一部に特に興味のあることを示す。一態様では、プレゼンテーションの進行中に、出席者はそのような指図をリアルタイムで行う。

一態様では、携帯用無線リモートコントローラのボタンをクリック（押す）することによって、又はあるコマンドをコンピュータ若しくはパーソナルディジタルアシスタント（ＰＤＡ）上で起動させることによって、出席者はプレゼンテーション中のポイントをマークする。他の態様では、短いコメント、注釈、及び／又は多数の数値的段階的な格付け又は連続的なものによる相対的な関心度の指標のような付加的な情報も入力できる。更なる他の態様では、（ラップトップ、ＰＤＡ又はディジタルノートパッドでメモを取ることのような）出席者の行動が、プレゼンテーションの現在の部分をマークすることを引き起こし、出席者による更なる行動を必要とすることなしに、マーキング（マーク付けすること）を暗黙のうちに行うようにする。

本発明によるシステムは、多数の出席者から入力された指標（「ブックマーク」として言及される）を照合する。一態様では、本発明によるシステムは図式表現物を作成し、その表現物はプレゼンテーション中の様々な時点での関心度（ＬＯＩ：ｌｅｖｅｌ ｏｆ ｉｎｔｅｒｅｓｔ）の値を示す。出席者がより多くの関心を寄せたと思われるこれらの時点は、プレゼンテーション中の他の時点のものより高いＬＯＩ値（関心度の値）を有する。特に、本システムは、何人かの出席者がブックマークしたプレゼンテーション中の時点を強調する或いは指示する。例えば、特定の話題に関連する時点や、１以上の出席者が質問したりコメント述べた等の時点を示す他の種類のブックマークを、追跡及び照合することもできる。

ユーザは、その図形表現物を用いて記録をナビゲートすることができる。例えば、ユーザは、プレゼンテーションの一部を閲覧する（又は保存する若しくは伝送する）ために、高い関心度を有する部分に対応する場所でその図形表現物をクリックすることができる。例えば、関心度測定の表示を出席者に従って選別することを含む他の機能を発揮することもできる。従って、ユーザは特定の出席者、出席者の部分集合又は出席者全体に関するブックマークを見ることができる。例えば、出席者全体の全グループに関心のあることとしてブックマークされる必要がないかもしれないプレゼンテーション中の特定の部分にて、特定の一部の出席者が関心を寄せたことを判別する或いは推測する場合に、そのような技術は有用であるかもしれない。関心度測定をブックマークの種類に従って選別し、例えば出席者が質問を表すブックマークを入力した場所を表示し且つ出席者が他の種類のブックマークを入力した場所を無視するＬＯＩ曲線を表示することもできる。

一態様によれば、ユーザは、ＬＯＩグラフを用いて或いはブックマーク及び／又はメモに基づいて直接的に、複数の異なるマルチメディアストリームをナビゲートすることができる。

添付図面は、本発明のいくつかの実施例を示し、詳細な説明と共に、本発明の概念を説明するために使用される。

本発明は、添付図面を参照しながら更に十分に以下に説明され、本発明のいくつかの実施例が示される。本発明は、多くの異なる態様で実現可能であり、ここに説明される実施例に限定して解釈されるべきではない。むしろこれらの態様は、本説明を完備させ、本発明を当業者に十分に説明するように与えられる。

以下の説明では、説明の便宜上、本発明の十分な理解を促すために、多くの具体的詳細が説明される。しかしながら、そのような具体的詳細とは別に本発明が実現可能であることは当業者に明白であろう。また、本発明を曖昧にすることを避けるために、構造及び装置はブロック図形式で示される。

明細書中の「一態様」又は「一実施例」なる語は、その実施例に関して説明された特定の特徴、構造又は属性が、本発明の少なくとも１つの実施例に含まれることを意味する。明細書中いくつかの場所に見受けられる「一実施例では」なる語は、必ずしも総て同一の実施例に言及しているわけではない。

以下の詳細な説明の一部は、コンピュータメモリ内のデータビットを操作するアルゴリズム及び記号表現により与えられる。これらのアルゴリム的な説明及び表現は、データ処理の技術分野の当業者が、彼らの業務内容を他の当業者に最も効率的に伝達するために使用される手段である。ここで、アルゴリズムは、一般に、所望の結果を導出する一連の一貫したステップと考えられる。これらのステップは物理量の物理的な操作を必要とするものである。通常的には、必須ではないが、これらの量は、格納され、伝送され、組み合わせられ、比較され及び他の操作がなされることの可能な電気的又は磁気的な信号形式をとる。一般的な使用例により原則的に、これらの信号は、ビット、値、要素、記号、キャラクタ、言葉、数等を示すことが、しばしば有用である。

しかしながら、これら及び同様な語の総ては、適切な物理量に関連付けられ、それらの量に付される単なる便宜的なラベルであることに留意すべきである。特に言及しない限り、以下の説明から明らかなように、本説明を通じて、「処理」、「演算」、「計算」、「決定」又は「表示」等のような語を用いる説明は、コンピュータシステムや同様な電子計算機の動作及び処理に関連し、その動作や処理は、コンピュータシステムのレジスタ及びメモリ内の（電子的な）物理量として表現されるデータを、コンピュータシステムメモリ若しくはレジスタ又は他のそのような情報格納部、伝送部又は表示装置内の物理量として表現される同様な他のデータに変換処理することが、理解されよう。

また、本発明は、その動作を実行する装置にも関連する。本装置は、要求される目的に合わせて構成され、或いはコンピュータ内に格納されるコンピュータプログラムにより選択的に起動又は再構成される汎用コンピュータから構成されてもよい。そのようなコンピュータプログラムはコンピュータ読み取り可能な媒体に格納され、その媒体は、限定ではないが、例えばフロッピディスク、光ディスク、ＣＤ−ＲＯＭ及び磁気光ディスクを含む任意の形式のディスク、読み取り専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、ＥＰＲＯＭ、ＥＥＰＲＯＭ、磁気又は光カード、又は電子的な命令を格納するのに適した任意の種類の媒体のようなものであり、それらの各々はコンピュータシステムバスに結合される。

ここに提示されるアルゴリズム及び方法は、いかなる特定のコンピュータや他の装置にも固有に関連付けられない。様々な汎用システムが、ここに教示される内容に従うプログラムにより使用されもよく、或いは要求される方法ステップを実行する、より多くの特定の装置を構築することが有用であることが分かるであろう。これらの様々なシステムに必要な構造は、以下の説明により明らかになるであろう。更に、本発明は、何らかの特定のプログラミング言語に関連して説明されない。様々なプログラミング言語が、ここに説明される本発明の教示内容を実現するために使用されてもよいことが理解されるであろう。更に、当業者に明白であるように、モジュール、特徴、属性、方法及び本発明の他の態様は、ソフトウエア、ハードウエア、ファームウエア又はそれらのいかなる組み合わせによっても実現可能である。当然に、本発明の構成要素がソフトウエアとして実現される場合には、その要素は、スタンドアローンプログラムとして、より大規模なプログラムの一部として、複数の個々のプログラムとして、固定的に又は動的にリンクされたライブラリとして、カーネル（ｋｅｒｎｅｌ）ロード可能モジュールとして、デバイスドライバとして及び／又はコンピュータプログラミングの技術分野の当業者にとって現在又は将来的に知られる総てのいかなる手法で実現されてもよい。更に、本発明は、何らかの特定のオペレーティングシステム又は環境で実施されることに限定されない
以下の説明では簡明化のため、本発明は、プレゼンテーションについての関心度の値を生成及び表示する観点から説明される。しかしながら、本発明は、会議、映画、テレビジョン番組、スポーツイベント、家庭映像等を含むがそれらに限定されないいかなる種類の映像及び／又は音声コンテンツ又はメディアアイテムに適用可能である。ここで、「プレゼンテーション」なる語は、単なる例示であり、本発明の利用可能性を、何らかの特定の形式のコンテンツに限定することは意図されていない。

［システムアーキテクチャ及び要素］
図１を参照するに、本発明の一実施例による、記録する及びユーザの入力したブックマークを照合するシステム１００のブロック図が示されている。当業者は、図１に示される様々な要素が例えば通常のパーソナルコンピュータのソフトウエアで実現可能であることを認識するであろう。

会議レコーダ１０３及びスライドレコーダ１０４は、プレゼンテーションを記録する要素の具体例である。一実施例では、会議レコーダ１０３は周知の記録技術を用いて映像及び／又は音声を記録する。スライドレコーダ１０４はスライドを記録し、それらがプレゼンテーション中に周知の記録技術に従って出席者に表示されるようにする。スライドレコーダ１０４は、表示されるスライドのタイミングをも記録することができ、映像及び／又は音声の再生に関連してそれらが後に再生可能であるようにする。他の装置及び／又は要素は、プレゼンテーションの他の態様を記録するために設けられてもよい。例えば、医療手順に関する記録は、患者の代謝に関する読み取り内容を記録することを含むかもしれないし；デモンストレーションに関する記録は、実演される装置から測定されたテレメトリデータ（遠隔測定データ）を含むかもしれない。

会議案内ソフトウエア１０１は、各レコーダ１０３，１０４から及び他のプレゼンテーションレコーダから記録情報を受信し、その情報をサーバ１０７に格納し、そのサーバ１０７は、一実施例では、格納媒体用であってストリーミングフォーマットでそのような媒体を提供するための通常のサーバである。サーバ１０７はここではストリーミングメディアサーバを言う。

プレゼンテーションの出席者は、関心のあるプレゼンテーションの部分を指示する又はブックマークする。図１は、携帯用無線リモートコントローラ１０５及びラップトップコンピュータ（ラップトップともいう）１０６を示し、それらの一方又は双方が、プレゼンテーションをブックマークするのに使用可能である。ある実施例では携帯用無線リモートコントローラ１０５，ラップトップ１０６の一方のみが用意され、別の実施例では、関心のある部分に関する入力を出席者が行うことを可能にするため、携帯用無線リモートコントローラ１０５，ラップトップ１０６に代えて又はそれらに加えて他の種類の装置が使用可能であることを、当業者は認識するであろう。例えば、ブックマーク種別を示す予め印刷されたバーコードラベルをスキャンすることで、出席者は、バーコードスキャナ（図示せず）により入力を行うことができる。

或いは、出席者は修正テキストエディタにより入力を行うこともでき、そのエディタは、出席者のキー押下（キーストローク）のタイムスタンプを付し、ブックマークを導出するために記録されたキーストロークデータを使用する。例えば、ブックマークは出席者がタイプし始めた時刻に入力される。そして、ブックマーク及び注釈は、出席者がエンターキーをたたいた時又は次の行に移動した時に伝送される（又は保存される）。

一実施例では、いくつかの入力装置が用意され、例えば、多数の出席者が入力できるようにし、各出席者が入力する彼又は彼女自身の装置を有する。一実施例では、そのような入力は、例えばテレビ会議又はウェブ会議の技法により、遠隔した場所からプレゼンテーションを眺める者により与えられる。他の実施例では、そのような入力は、プレゼンテーションが行われた後に、そのプレゼンテーションの記録を見た者により提供される；そのような者から与えられた入力は、合成され、以下に説明されるのと同様な手法で、実況中のプレゼンテーションの多数の出席者からの入力と照合するために、「ライブ（ｌｉｖｅ）」ブックマーク入力と照合される。

携帯用無線リモートコントローラ１０５，ラップトップ１０６は、マークレコーダ１０２に、出席者入力又はブックマークを送信する。一実施例では、そのような伝送は、有線又は無線の通常の通信媒体を通じて行われる。或いは、出席者入力は、保全された（セキュアな）又は保全されていない伝送機構により、インターネット上で、マークレコーダ１０２に送信される。マークレコーダ１０２は、携帯用無線リモートコントローラ１０５，ラップトップ１０６により与えられた出席者入力を記録し、及びその入力にタイムスタンプを付す。会議案内ソフトウエア１０１は、プレゼンテーション中の様々な時点に関する全体的なＬＯＩ値を作成するため、複数の出席者からの入力を照合する。ＬＯＩ値を作成する手法は、以下に更に詳細に説明される。一実施例では、プレゼンテーションに関するＬＯＩ値は、他のプレゼンテーションデータと共にサーバ１０７に格納される。

携帯用無線リモートコントローラ１０５，ラップトップ１０６からのデータは、マークレコーダ１０２にリアルタイムで送信可能であり、或いは、プレゼンテーションの終了時に又は何らかの後の時点で若しくは後日に伝送されてもよい。従って、一実施例では、携帯用無線リモートコントローラ１０５，ラップトップ１０６は、出席者入力のローカルな、タイムスタンプ付の複製を格納し、その複製はマークレコーダ１０２に後に伝送される。携帯用無線リモートコントローラ１０５，ラップトップ１０６は、ブックマーク及び注釈と共にタイムスタンプをマークレコーダ１０２に送信し、マークレコーダ１０２及び／又は会議案内ソフトウエア１０１が照合動作を実行できるようにする。

図３を参照するに、プレゼンテーションに関する出席者入力を入力するための携帯用無線リモートコントローラ１０５が例示されている。携帯用無線リモートコントローラ１０５は、様々な種類の入力を示すための及び／又は他の機能を実行するための４つのボタンを供えるよう示される。当業者は、図３に示される特定の設計事項に限定されずに、携帯用無線リモートコントローラ１０５が、いかなる数のボタン３０１を備えてもよいこと、いかなる形状又は形式を採用してもよいことを認識するであろう。

図４を参照するに、一実施例による、プレゼンテーションに関する注釈を入力するためのダイアログボックスが例示されている。一実施例では、ラップトップ１０６上で動作するソフトウエアは、プレゼンテーション中に、出席者が、メモを取るようにダイアログボックス４００を提示し、ブックマーク又は関心のある場所を示すようにする。例えばジャバ（Ｊａｖａ（登録商標））用に実現されるラップトップ１０６（又はＰＤＡ）上のブックマークを行うソフトウエアは、ダイアログボックス４００を作成し、そこに与えられた入力を受け入れるように使用可能である。

上述したように、一実施例では、出席者入力はインターネットを通じてマークレコーダ１０２に伝送される。従って、そのような実施例では、最初に、出席者がラップトップ１０６上のクライアントソフトウエアを起動し、その出席者は名前及び／又は電子メールアドレスのような識別情報を提供する。そして、ラップトップ１０６はその情報をマークレコーダ１０２に送信する。或いは、ラップトップ１０６は、その出席者を見分けるために、出席者のＩＰアドレス及び／又はクッキー（ｃｏｏｋｉｅ）に格納された情報を使用することもできる。一実施例では、出席者は、識別情報を提供することを辞退することもでき、その場合にその出席者から提供されるブックマーク及び注釈は、「匿名」としてマークされる。

出席者は、例えばキーパッド（図示せず）又はスタイラス入力装置（図示せず）を用いて、フィールド４０１に注釈文字を入力する。出席者は、注釈を入力及び記録するためにボタン４０２の１つをクリックし；図示の特定の設計内容では、３つのボタン４０２は、入力された文字が時点（ポイント）、質問又はメモを表現するか否かを出席者が示すことを可能にする。また、出席者は、フィールド４０１をブランクにしたままボタン４０２の１つを押し、注釈を記録せずに関心のある時点（ポイント）を示す（ブックマークする）こともできる。出席者は、ラジオボタン４０４の１つをクリックすることで、注釈又はブックマークがプレゼンテーション中の時点を示すことを選択的に示すことができ、その時点は例えば過去３０秒に又は１分若しくは３分前に生じたものでも、出席者はプレゼンテーション中の時点を遡及的にブックマークできる。出席者は、チェックボックス４０３をクリックすることで、その注釈を私的に（プライベートに）維持することもでき、注釈文が彼／彼女自身のプライベートな会議メモ内でのみその出席者に示されるようにし、その注釈に関連するブックマークは、他の出席者からの入力と合成及び照合され、公の会議メモの一部に更に広範に利用可能であるようにする。

当業者は、ダイアログボックス４００の具体的な設計内容は単なる例示であること、及び本発明の本質から逸脱せずに他の設計内容も可能であることを認識するであろう。更に、他の設計内容は、図４に示される具体的な特徴及び要素の一部を省略してもよいし、及び／又は図４に示されていない他の特徴及び要素を含んでもよい。例えば、ダイアログボックス４００は、以前に入力したブックマークを消去する機会を出席者に与えることもできる。他の実施例では、ダイアログボックス４００は、ブックマークの種類を指定する機会を出席者に与えることができる。例えば、関心のある現在の時点が、多数の話題の１つに関連することを示す、或いは関心のある現在の時点が、質疑応答セッションの開始であること等を示す。このように、ブックマークはプレゼンテーションの内容に関する付加的な情報を与えることができる。

携帯用無線リモートコントローラ１０５上のボタン３０１を出席者がクリックすると、或いはダイアログボックス４００を用いてラップトップ１０６上でメモを入力すると、その入力はマークレコーダ１０２に伝送される。入力に関する特定の時間が記録される。メモ文又はブックマーク種別のような付加的な情報が与えられたならば、その情報もマークレコーダ１０２に伝送される。以下に更に説明されるように、マークレコーダ１０２は、記録された情報を会議案内ソフトウエアに伝送し、そのソフトウエアは他の出席者により提供された情報を合成及び照合し、照合した情報をサーバ１０７に格納する。

マークレコーダ１０２は、携帯用無線リモートコントローラ１０５，ラップトップ１０６から、ブックマークや注釈等を含む出席者による入力を受信する。マークレコーダ１０２は、受信した入力を会議案内ソフトウエア１０１に伝送する。一実施例では、マークレコーダ１０２又は会議案内ソフトウエア１０１は、会議識別子や映像ストリームのユニフォームリソースロケータ（ＵＲＬ）等のような、プレゼンテーションに関するパラメータをも受信し、出席者による入力が適性な識別子と適切に照合可能であるようにする。

一実施例では、会議案内ソフトウエア１０１は、多数の出席者からの入力を照合し、その入力をサーバ１０７に格納する。一実施例では、ブックマーク及び注釈には、プレゼンテーションの開始時に関するタイムスタンプが付され、そのプレゼンテーションの音声及び／又は映像の記録に同期するようにする。一実施例では、会議案内ソフトウエア１０１は、会議レコーダ１０３及び／又はスライドレコーダ１０４からの情報を受け入れ、その内容をサーバ１０７に格納する。一実施例では、会議案内ソフトウエア１０１は付加的な機能をも実行し、その付加的な機能は、受信したブックマーク及び注釈に会議識別子を関連付けること、会議の長さのメモを取り格納すること、並びに出席者、発表者及び他の参加者に関する名前、電子メールアドレス及び／又は他の連絡先情報を格納すること等である。一実施例では、会議案内ソフトウエア１０１は、プレゼンテーションが終了したことの指標をサーバ１０７に送信する。

一実施例では、サーバ１０７が、プレゼンテーションの終了したことの指標を受信すると、そのプレゼンテーションに関するメモ、ブックマーク及び／又は他の情報の複製を、出席者及び／又は発表者の各人に送信する。一実施例では、そのような情報を誰が受信すべきかについての決定は、予め決められた選択内容及び／又は加入者リストに依存する。一実施例では、ブックマークと共に注釈を行った出席者だけが注釈の複製を受信する。「プライベート」にマークされた注釈は、それらの作者にのみ送信され、他の出席者と共有されない。注釈及び他の情報は、所望のいかなるフォーマットでも送信可能である。例えば、その情報は、標準的な電子メールメッセージ技術により伝送されてもよい。

一実施例では、ブックマーク及び注釈は、プレゼンテーションに関する単独の出席者又は視聴者に関して収集される。更に集約が行われるが、それは、単独の出席者又は視聴者からの一連のブックマーク及び注釈に基づく。例えば、多数の密に接近したブックマークは、より少ない又はより離れたブックマークを有するセッションと比較して、比較的関心度の高いセッションであることを示す。

［動作モード］
図８を参照するに、一実施例による、関心度データを記録、合成及び照合する方法が示されている。

マークレコーダ１０２は、携帯用無線リモートコントローラ１０５，ラップトップ１０６から受信したブックマークを記録する（ステップ８０１）。その情報を会議案内ソフトウエア１０１はマークレコーダ１０２から受信し、プレゼンテーションの様々な時点に関する関心度の値を計算する（ステップ８０２）。ソフトウエア１０１は、各種のレコーダ１０３，１０４から（映像、音声及び／又はスライドを含む）マルチメディアコンテンツを受信し（ステップ８０３）、関心度の値を、受信したマルチメディアコンテンツの対応する時点に関連付ける（ステップ８０４）。

一実施例では、プレゼンテーションが終了すると、会議案内ソフトウエア１０１は、出席者及び他の関心を寄せる者に、記録内容（又は記録内容に至るリンク）を含むプレゼンテーションの記録、及びプレゼンテーション中の様々な時点に関する関心度データを送信する（ステップ８０５）。一実施例では、会議案内ソフトウエア１０１は、プレゼンテーションのプライベート記録を、「プライベート」として指定して注釈を入力した出席者の各々に送信する（ステップ８０６）。このプライベート記録は、その出席者自身の注釈を含むが、他の出席者により入力されたプライベート注釈は省かれている。

ある実施例では、ＬＯＩ値（関心度の値）はプレゼンテーションの最中に又はその後間もなく生成される。別の実施例では、ＬＯＩ値は、ユーザがそれらを要求する時点で、オンデマンドで生成される。

図９を参照するに、一実施例による、記録に関する関心度データを決定及び表示する方法が示される。これらのステップは、ソフトウエア１０１によって又はソフトウエアモジュールによって実行されてもよく、そのモジュールは、ソフトウエア１０１内又は別の機能要素内のＬＯＩ計算部（関心度計算部）のようなものである。

例えば会議ＩＤ、記録されるプレゼンテーションのＵＲＬ及び／又はその映像のＵＲＬを含むデータのロケーションが与えられる（ステップ９０１）。これらの項目は、出力用の統合されたプレゼンテーションを生成するために使用される。ソフトウエア１０１は、出席者のブックマークに加えて、映像及び／又は音声を含む指定されたロケーションからその記録を取得する（ステップ９０２）。他の実施例では、プレゼンテーションの完了時に及び／又は要求に応じて、記録はリアルタイムでソフトウエア１０１に直接的に伝送される。一実施例では、ソフトウエア１０１が、記録自体にアクセスせずにＬＯＩ値を計算し、表示し及び格納することができるので、記録自体を検索する必要はない。例えば、プレゼンテーションのライブラリが維持され、ＬＯＩ情報が、一緒には格納されずに、対応するプレゼンテーションに関連付けられてもよい。

ソフトウエア１０１は、以下に更に詳細に説明される技法により、プレゼンテーション中の様々な時点に関するＬＯＩ曲線やＬＯＩ値を計算する（ステップ９０３）。ＬＯＩ曲線又はＬＯＩ値の他の表現内容を表示する（ステップ９０４）。

一実施例では、ＬＯＩの計算及び表示は反復的に行われ、ユーザがパラメータを変更する及び／又は表示された出力を調整する機会を有するようにする。例えば、ユーザはデータを選別し、あるユーザからのブックマークのみが計算全体に含まれるようにしてもよい。或いは、ユーザは、以下に更に詳細に説明されるようなスライディングウインドウの長さのような他のパラメータを指定又は変更できる。一実施例では、ユーザには、出力ＬＯＩ曲線が申し分ないものであるか否かを示す機会が与えられる（ステップ９０５）。例えば、別のパラメータを与えることによって彼又は彼女が満足していないことを示したならば、そのＬＯＩ曲線データはそれに従って選別される（ステップ９０６）。そして、選別されたデータに関してＬＯＩが再計算され、ステップ９０４，９０５が反復される。ユーザは、望むならば、ＬＯＩ曲線の形状のみを用いて結果を選別することを決めてもよい。曲線が過剰に多くのピークを有するならば、或いは限定された用途に関して一様に高かったならば、ユーザは、より変化の多いＬＯＩ曲線を得るためにブックマークを選別する（フィルタリングする）ことを決定してもよい。また、ユーザは、プレゼンテーションの内容を見ないでそのようにすることの決定を下してもよい。

ステップ９０５にて、ユーザが、表示されたＬＯＩ曲線が申し分ないものであることを示した場合には、ＬＯＩデータが表示され及び／又は送信される（ステップ９０８）。微調整は、例えば、当てにならない１人の出席者のブックマークを無視するために、そのデータポイントを落とすことを含んでもよい。一実施例では、彼又は彼女が微調整に満足したことを示した場合に、その設定及びコンフィギュレーションが格納され、以後の視聴者が再調整せずに処理されたデータを閲覧できるようにする。

ＬＯＩは、結果のＬＯＩグラフに望まれる粒度に依存して、プレゼンテーション中のいかなる数の時点に対しても判別可能である。一実施例ではＬＯＩは固定された間隔の時点について決定される。他の実施例ではＬＯＩは１以上の出席者がある種の入力を与えた時点について決定される。更に他の実施例ではＬＯＩは出席者入力の閾値数がある時間間隔の中で検出された時点について決定される。

例えばある時点について２．５分以内（その時点の後６０秒とそれ以前の９０秒）に作成された注釈及び／又はブックマークの数を見出すスライディングウインドウ関数を用いて、プレゼンテーション中の各時点に関するＬＯＩが計算される。当業者は、いかなるウインドウの長さでも使用可能であり、ここで説明される特定のウインドウの長さは例示に過ぎないことを当然に認識するであろう。一実施例では、ソフトウエア１０１は、ブックマークデータ及びその時点の間の時間の長さの一部に基づいて、その特定の時点における関心度への各ブックマークの相対的な影響を決定する。例えば、ブックマークの影響は、ブックマークとその時点の間の時間に反比例してもよく；或いは他の関連する内容が使用されてもよい。一般に、影響が大きいほどブックマーク数が多く、及び／又は計算される時点に近接しているほど、その時点で計算される関心度は高くなる。結果のグラフに生じる揺らぎを減らすために、一実施例では関数を円滑化（スムージング）することが行われ、ゼロ点からのＬＯＩの標準偏差が計算され、それが閾値として使用される。そして、その閾値を上回るＬＯＩを有する時点のみがカウントされる。一実施例では、システムのユーザはウインドウサイズを変更することができ、望まれるならば、スムージング関数を動作可能にする或いは非動作にすることができる。

他の実施例では、ＬＯＩ関数を計算するために他のアルゴリズムを使用することができる。或いは、システムは、ユーザが重要な部分を視覚的に識別できるように、関心のある地点をグラフ上で単に印を付けることもできる。

図１１乃至１３を参照するに、本発明による、一連の出席者による入力（ブックマーク）の例示、及びその出席者入力から描くことのできるいくつかの異なるＬＯＩグラフが示されている。図１１は、時間軸１１０１に沿って、ドット１１０２Ａ乃至１１０２Ｇにより表現された一連のブックマークを示す。時間軸１１０１は、図示の都合上、１分の増分間隔で描かれている。ドット１１０２の各々は、１人の出席者による１つのブックマークを示し、その指定された時点で関心を寄せたことを示す。

図１２は、図１１の出席者入力から描くことができるＬＯＩグラフを示す。ここで、入力は、固定的な１分の増分間隔であると想定されている。一分の一定間隔内でのブックマーク数が判別され；結果のＬＯＩ値が曲線又は折れ線１２０１にプロットされる。その１分間の間に１つのブックマークがなされると、ＬＯＩ値として１が示され、１分間の間に３つのブックマークがなされると、ＬＯＩ値として３が示される。曲線１２０１は、不連続性を排除するために補間され又は円滑化（スムージング）され、曲線１２０２を得ることもできる。

図１３は、スライディングウインドウを用いたＬＯＩグラフを示す。図示の都合上、ＬＯＩ値は１分間隔で示されるが、ＬＯＩ値は所望のいかなる粒度でも判別可能であること、或いは連続時間で判別することもできることが認識されるであろう。図示の都合上、ウインドウ（時間枠）が、様々なウインドウ部分１３０１Ａ乃至１３０１Ｆに示され、各々は将来に向けて１分間（６０秒）及び過去に向けて１分半（９０秒）伸びる。各時点に関するＬＯＩ値は、その時点を含むウインドウ内のブックマークの総数を計数（カウント）することで決定される。例えば、ウインドウ部分１３０１Ａでは、３つのブックマーク１１０２Ａ，１１０２Ｂ，１１０２Ｃがそのウインドウ内にある。従って、１：３０の時点（ウインドウ部分１３０１Ａに対応する）でのＬＯＩ値は３である。同様に、ウインドウ部分１３０１Ｄでは、２つのブックマークがそのウインドウ内にある。従って、５：００の時点（ウインドウ部分１３０１Ｄに対応する）でのＬＯＩ値は２である。

ＬＯＩ曲線１３０３は、決定されたＬＯＩ値の間をスムージング又は補間することによって導出される。更に、以下に説明されるように、ＬＯＩ曲線１３０３は、ピクセルウエイトの標準偏差を超えるウエイト（重み）を有するピクセルのみをカウントすることによって、更に調整できる。

図１４を参照するに、ブックマークとＬＯＩ値の算出対象の時点との間の時間差に従って、各ブックマークの影響を調整する例が示されている。図示の都合上、１つのウインドウ部分１３０１Ａのみが描かれているが、説明した手法は、多数のウインドウ部分でＬＯＩ値を決定することに適用可能である。ウインドウ１３０１Ａ内に現われるブックマーク１１０２Ａ，１１０２Ｂ，１１０２Ｃの各々について、時点１４０１とブックマーク１１０２の時点との時間差が判定される。時点１４０１から遠く離れたブックマーク１１０２は、時点１４０１に近接したブックマーク１１０２よりも少なく影響する。従って、図示の例では、ブックマーク１１０２Ａは、ブックマーク１１０２Ｂ，１１０２Ｃのものよりも、比較的高い影響度、即ち重みを有する。時点１４０１に関するＬＯＩ値は、ウインドウ１３０１Ａ内で各ブックマーク１１０２について調整された値を決定することで算出される。そして、調整された値は、時点１４０１に関するＬＯＩ値を導出するために加算される。上述したように、決定された時点の間のＬＯＩ値は、望まれるならば、補間又は円滑化することができる。

図１０を参照するに、一実施例によるＬＯＩグラフを生成する方法が示されている。一実施例では、図１０の各ステップは、会議案内ソフトウエア１０１によって実行されるが、当業者は、それらのステップが他の要素でも実行できることを認識するであろう。

先ずブックマークが引き出される（ステップ１００１）。変数ｉが値１に初期化される（ステップ１００２）。

グラフの終点に達したか否かを判別するために、ｉの値が、描かれたグラフの縦軸の寸法と比較される。この縦軸の寸法は、グラフの描かれる時間範囲を表し、例えば、画面サイズ、ウインドウサイズ、ユーザの趣向等に依存してもよい。縦軸の寸法は、例えば画面のピクセル（画素数）で測定されてもよい。図示の手法では、グラフの縦軸は時間軸に対応することが想定されているが；他の実施例では、時間に対応する横軸の寸法と共にグラフが描かれてもよく、その場合の比較（及び本方法の他のステップ）では、縦軸ではなく横軸の寸法と比較される（ステップ１００３）。

ｉがグラフの縦軸の寸法よりも大きくなかったならば、グラフの終点に未だ達しておらず、ステップ１００４乃至１０１０及び１０１４が実行される。会議案内ソフトウエア１０１は、区分ｉにより表現される会議時間を算出する（ステップ１００４）。スライディングウインドウの長さを表すＸ及びＹの所定の値のもとで、会議案内ソフトウエア１０１は、区分ｉにより表現される会議時間以前のＸ秒より少ない最も近いブックマークを見出し（ステップ１００５）、区分ｉにより表現される会議時間以後のＹ秒より少ない最も遅いブックマークを見出す（ステップ１００６）。これら見出されたブックマークの最初のものがＡとして指定され、２番目はＢとして指定される。

変数Ｊは、Ａにより表されるプレゼンテーションの時点に初期化される（ステップ１００７）。各ブックマークによるＬＯＩ値への相対的な寄与は、ブックマークの時点と区分ｉにより表現される会議時間との時間差に反比例するように決定される。そして、ステップ１００８では、Ｊで表現される時点でブックマークが現われると、グラフ上に描かれるピクセルで表現されるＬＯＩ値がある方法で増やされ、その方法は、Ｊとｉにより表現される会議時間との時間差に反比例するようにするものである。ステップ１０１０にてＪがＢより大きくなかったならば、ウインドウの終点に未だ達していない。従って、ステップ１００９でＪは増やされ、ステップ１００８が反復される。

ステップ１０１０にて、ＪがＢより大きかったならば、ウインドウの終点に達しており、ステップ１０１４でｉが増やされ、グラフの終点に達しているか否かを判別するために、ステップ１００３が反復される。上述したように、ステップ１００３にてグラフの終点に達していなかったならば、ステップ１００４乃至１０１０及びステップ１０１４が反復される。

ステップ１００３にてｉが縦軸のグラフ寸法より大きかったならば、グラフは表示される準備が整っている。一実施例では、ステップ１０１１乃至１０１３はグラフを円滑化するために行われる。会議案内ソフトウエア１０１は、総てのピクセルウエイトの標準偏差を計算し（ステップ１０１１）、その標準偏差を下回る（又は何らかの他の閾値を下回る）総てのピクセルをゼロに重み付けする（ステップ１０１２）。ソフトエア１０１は、最大の曲線に適合するようにピクセルウエイトを尺度変更（スケーリング）する（ステップ１０１３）。グラフはその後格納され又は出力される（ステップ１０１５）。

一実施例では、ＬＯＩグラフが一度作成されると、ＬＯＩデータと共にプレゼンテーションレコードは、ウェブページや対話式動画像のような統合されたマルチメディアメッセージの形式で、或いは関連する情報の集合を表示するように用意されたツールを用いて構築される。一実施例では、そのメッセージは、音声、映像、スライド、メモ文を再生するための同期マルチメディア統合言語（ＳＭＩＬ：Ｓｙｎｃｈｏｎｉｚｅｄ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｇｒａｔｉｏｎ Ｌａｎｇｕａｇｅ）及び／又はユーザのブックマーク及びマークされたスライド交換の時間に関するＬＯＩグラフの表現を含む。或いは、そのメッセージは、映像及び／又は音声のストリームを含むウェブページへのリンク形式での表現物、及び／又はユーザにより作成されたメモ文を含んでもよい。一実施例では、テキストメモの各々はハイパーリンクとして提示され、メモが取られた時間に対応する記録されたプレゼンテーション映像をプレーヤが再生する合図を与える。

図５を参照するに、一実施例による、ＬＯＩグラフ、メモ及び記録の再生映像を含む画面５００の例が示されている。一実施例では、画面５００は出席者及び／又は他の関心のある者にメッセージとして送信される。当業者は、図５に示されるデータの具体的な配置及び選択並びに表示される要素は単なる例であること、及び本発明の本質から逸脱せずに他の配置が可能であることを認識するであろう。未処理のＬＯＩデータ５０１は、図式的に表示され、多数の出席者によるブックマーク５０３を含む。個々の縦軸５０２は、縦軸５０２に隣接して示される出席者のブックマーク５０３と共に、出席者の各々について示される。スライド推移５０６は、図式的に示され、スライド推移５０６の各々は軸５０２上の対応する時点に縦に整列している。時間明示部５０５も示され、同様に整列している。

画面５００は、ＬＯＩグラフ５０４も含み、そのグラフは上述した技法で導出及び生成される。一実施例では、ユーザはＬＯＩグラフ５０４の一部をクリックし、拡大し、スクロールし、変更し、強調し、或いはその表示を操作する。

画面５００は、プレゼンテーションによるスライドを表示するためのスライドディスプレイ５０８をも含む。メモ領域５０９は、そのプレゼンテーションに関する一群のメモ書きを示す。表示領域５０７は、メモ領域５０９のウェブページスナップショットを示す。

一実施例では、ＬＯＩグラフ５０４は手動でスクロールすることもできる。一実施例では、メモ領域５０９は自動的にスクロールし、及び／又は手動でスクロールし、関連するメモが画面に表示されるようにする。ＬＯＩグラフ５０４と共に操作し、指示し、又はドラッグすることで、ユーザは、映像記録の再生を制御することができる。メモ領域５０９を含む他の画面領域も、映像記録をナビゲートするために使用できる。

図６を参照するに、一実施例による、記録に関するＬＯＩグラフ及び再生映像を含む画面６００の例が示されている。一実施例では、画面６００はマルチメディア又は映像プレーヤにより見ることができ、そのプレーヤは例えばワシントン州シアトルのリアルネットワークス・インコーポレーテッドから入手可能なリアルワン（ＲｅａｌＯｎｅ）プレーヤのようなものである。図６に示されるデータの特定の配置及び選択並びに表示される要素は単なる例示であること、及び本発明の本質から逸脱せずに他の配置も可能であることを当業者は認識するであろう。

画面６００は画面５００と同様な多くの要素を有する。映像プレーヤ６０１はプレゼンテーションの記録画像を示す。メモ領域５０９は出席者のメモを示す。一実施例では、５０９に示されるメモは、映像プレーヤ６０１で現在表示されているプレゼンテーションの部分に同期している。他の実施例では、５０９に示されるメモはハイパーリンクを含み、そのハイパーリンクは、組み込まれた映像プレーヤ６０１を含むウェブページへ案内するために使用できる。一実施例では、ＬＯＩグラフ５０４は、映像プレーヤ６０１が映像記録を再生するのに合わせて、関連する縦軸５０２及び時間明示部５０５，スライド推移５０６と共に自動的にスクロールし、目下再生されている映像がＬＯＩグラフ５０４の表示部分に対応するようにする。画面６００では、ＬＯＩグラフ５０４に加えて、未処理のＬＯＩデータ５０１、スライド推移５０６、時間明示部５０５の表示部が水平方向に示されている。これら総ての属性は、縦方向に又は横方向に表示可能であること、及びその方向の選択はユーザの定める趣向にすることができることを当業者は認識するであろう。

図２を参照するに、一実施例では、ＬＯＩグラフ及び他の情報を含む記録データを操作及び表示するための専用のクライアントアプリケーション２０１が用意される。そのクライアントアプリケーションは、記録データのロケーションのＵＲＬ又は他の識別子を受信する。また、アプリケーションは、サーバ２０２からそのデータを検索し、表示を操作及び構築するための様々なユーザインターフェース要素と共に、ＬＯＩグラフ及び他の情報をユーザに提示する。

図７を参照するに、一実施例による専用クライアントアプリケーション２０１により提示される画面７００の一例を示す。図７に示されるデータの特定の配置及び選択並びに表示される要素は単なる例示であること、及び本発明の本質から逸脱せずに他の配置も可能であることを当業者は認識するであろう。

グラフ表示領域７０１は縦長の四角形であり、プレゼンテーションに関するＬＯＩ情報の１つの統一的な全体像を与える。グラフ表示領域７０１は、多数の出席者に関するブックマーク５０３を含む、図式的に描かれた未処理ＬＯＩデータ５０１を含む。上記の図５に関して説明したように、個別の縦軸５０２が、縦軸５０２に隣接して示される出席者に関するブックマーク５０３と共に、出席者の各々について示されている。ブックマーク５０３は縦軸５０２に沿う適切な時点で着色されたドットとして表示される。一実施例では、ブックマーク５０３は、それを行ったユーザに関する縦軸５０２に隣接して設けられ、メモ及びブックマークの種別を示すために色分けされる。

一実施例では、マウスのようなポインティングデバイスでメモ又はブックマーク５０３上を旋回することで、メモ又はブックマークに関する付加的な情報を見ることができる。これは、メモ又はブックマークを作成した出席者、ブックマークの種類、（存在するならば）メモ文等のような詳細をツールチップ（ＴｏｏｌＴｉｐ）で表示することができる。

図５に関して説明したように、スライド変更５０６は、変更時点における細い水平線の形式で表示領域７０１に表示可能である。一実施例では、スライド変更５０６は、そのスライドが表示されていた時間の長さに依存する異なる色彩で示される。例えば、青は少なくとも２秒間見せたスライドに使用し、ピンクは２秒より短い間見せたスライドに使用することができる。色分けは、動画像又は速やかなスライド変更をユーザが迅速に見つけることを可能にする。一実施例では、スライド推移５０６を表す線は、ユーザが既に見たスライドについてはより長く作成され、既に表示されたプレゼンテーションの部分をユーザが追跡することを支援する。

表示領域７０１は、上述した技法に従って導出及び生成されたＬＯＩグラフ５０４も含む。一実施例では、ユーザは、ＬＯＩグラフ５０４の一部をクリックし、拡大し、スクロールし、変更し、強調し、或いはそれらの表示を操作することができ、及び映像又は音声の記録における対応する時点に移動するために、ＬＯＩグラフ５０４のどの部分でもクリックすることでプレゼンテーションを直接的にナビゲートすることができる。

ユーザは、様々なユーザインターフェース要素を操作することで、ＬＯＩグラフ５０４を構築することができる。例えば、チェックボックス７０４は、ユーザが特定の出席者を特定することを可能にする。また、ユーザがそのコンフィギュレーションを変更したならば、チェックボックス７０４がアクティブにされている出席者からの入力しか含まないようにＬＯＩグラフ５０４が再度作成される。他のチェックボックス７０４は、時点（ポイント）、メモ又は質問のような特定のブックマーク種別をユーザが指定することを可能にする。例えば、上述の図４に示されるような注釈ボタン４０２により可能とする。ユーザがそのコンフィギュレーションを変更したならば、選択された１つ又は複数の種類の入力しか含まないように、ＬＯＩグラフ５０４が再度作成される。標準偏差チェックボックス７０７は、スムージング機能を動作可能又は動作不能にする。

再生マーカー７０８は、プレーヤウインドウ６０１内での現在の再生時点をマークする水平線である。再生が進行するにつれて、再生マーカー７０８は、表示領域７０１の長さ方向に沿って下向きに移動する。ユーザは再生マーカー７０８をクリックし、表示領域７０１内でそれを上下にスライドさせることができる。一実施例では、再生マーカー７０８を表示領域７０１内で様々な場所に動かすことは、対応するスライド７０２のサムネイル画像を表示することを引き起こす。また、再生マーカー７０８を動かすことは、対応するメモを領域７０５に表示することを引き起こす。

当初の再生マーカー７０８は３分間の区間をカバーし、フィールド７０５が、再生プレーヤー７０８の現在の再生点を含む３分間の中で入力されたいかなるメモをも表示するようにする。ユーザは、フィールド７０８Ａに入力される値を変更することで、そのカバーする区間長を調整できる。

スライドのサムネイル画像７０２も含まれている。一実施例では、画面７００は１０秒（又はユーザの設定可能な他の時間間隔）より長く提示されたスライドのみを含む。ユーザは、サムネイル７０２をクリックすることで、映像又は音声の再生における特定の時点に至る（ナビゲートする）こともできる。また、ユーザは、サムネイル画像７０２を通じてスクロールすることもできる。スライド表示領域７０３はスライドの詳細な画像を提供する。映像又は音声記録が再生されていると、スライド表示領域７０３は、その記録の中の現時点に対応するスライドを表示する。ユーザが再生マーカー７０８をクリックすることでプレゼンテーションをナビゲートしている場合に、スライド表示領域７０３は、再生マーカー７０８の現時点に対応するスライドを表示する。

チェックボックス７０９は、ユーザがスライドを重要であるとしてマークすることを可能にする。一実施例では、そのような指定は、表示領域７０１内でより大きく且つより際立たせる方法（例えば、他のスライド推移５０６に使用される色と異なる色を使用する方法）で、そのスライドの推移５０６を表示することを引き起こす。

上述したように、スライド表示領域７０３の現時点に対応するいかなるメモも、メモ領域７０５に表示される。ユーザは、領域７０５内のメモをダブルクリックし、その記録中の対応する時点に至ることができる。

ユーザは、注釈ボタン７１０をクリックすることで注釈を加えることもできる。ユーザは、望まれるならば、各自の四角形の各々にメモ書きを関連付けることもできる。

開始及び終了フィールド７１２は、ＬＯＩ値を決定するためのスライディングウインドウの間隔を設定する。ユーザは、評価対象の現時点に関して、スライディングウインドウの開始及び終了時点を指定するための値を入力することができる。

アップロードメッセージボタン７１３は、上記のステップ９０８で説明されたように、選別され注釈の付されたプレゼンテーションを他のユーザに送信する。

再描画グラフボタン７１４は、領域７０１内のグラフを再描画する。ある実施例では、適切ならば、そのようなグラフが自動的に描かれる。

プレゼンテーションデータを閲覧し、編集し及び／又は注釈することをユーザが終了すると、彼又は彼女は、データを保存し、それを印刷し、及び／又はそれを他者に送信する。受領社は図５又は図６に示されるのと同様な表示を受け取る。それは、例えば、メモ及び注釈を含むＳＭＩＬファイル、同期したメモのウェブページへのリンク、データファイル等を含む。受領者はそのＳＭＩＬファイルを見ることができ、或いは彼らがクライアントアプリケーション２０１にアクセスしたならば、クライアントアプリケーションにて会議データを閲覧する。

［用途及び有用性］
本発明は多くの用途及び有用性を有する。プレゼンテーションの出席者は、本発明による技法を使用し、プレゼンテーション中の関心のある時点を速やかに見出すことができる。既に出席者はプレゼンテーションに関して関心度の高い時点を概ね知っているので、彼らはＬＯＩ曲線１２０２のピークを用いて、いかなるセグメントをも極めて容易に見出すことができる。プレゼンテーションに出席しなかった者は、本発明による技法を使用して、記録全部を鑑賞せずに、そのプレゼンテーションの主要なポイントにざっと目を通すことができる。ＬＯＩグラフ及び出席者のメモは、記録中の関心のある特定のポイントをより効率的に発見するように各人を支援することができる。

他の実施例では、本発明による技法は、スライド変更と組み合わせてＬＯＩ曲線を使用し、プレゼンテーションの重要な部分を要約した一群の切り抜き（クリップ）を自動的に生成することができる。

ユーザは、本発明による技法を使用し、生成したＬＯＩ曲線に従って、際立ったポイントを引き出し、特定の部分に注釈を行い、ストリームライン化されたデータを他の人々に送信するように、選別することができる。

上述の実施例は単なる例示であること、及び多くの変更が本発明の精神及び範囲から逸脱せずに行われ得ることは、当業者に理解されるであろう。従って、本発明の精神及び範囲からもたらされる添付の特許請求の範囲により、そのような変更及び修正の総てが網羅されることを意図する。

本発明の一実施例による記録及びブックマークの照合を行うシステムを示すブロック図である。 本発明の一実施例による、ＬＯＩグラフを閲覧し、記録をナビゲートするシステムを示すブロック図である。 本発明の一実施例によるプレゼンテーションに関して出席者が入力する携帯用無線リモートコントローラを示す図である。 本発明の一実施例によるプレゼンテーションに関する注釈を入力するダイアログボックスを示す図である。 本発明の一実施例によるＬＯＩグラフ、メモ及び記録のスライドを含むディスプレイを示す画面例である。 本発明の一実施例によるＬＯＩグラフ、スライド及び記録の再生映像を含むディスプレイを示す画面例である。 本発明の一実施例によるＬＯＩグラフ及び記録に関する他の情報を含む、特定のクライアントアプリケーションで表示されるディスプレイを示す画面例である。 本発明の一実施例による全体的な動作を示すフローチャートである。 本発明の一実施例による記録に関する関心度を決定及び表示する方法を示すフローチャートである。 本発明の一実施例によるＬＯＩグラフを作成する方法を示すフローチャートである。 関心度を示す一連の出席者の入力又はブックマークを例示する図である。 固定ウインドウを用いたＬＯＩグラフの例を示す図である。 スライディングウインドウを用いたＬＯＩグラフの例を示す図である。 ブックマーク及び計算されたＬＯＩポイント間の時間差に従って、各ブックマークの影響を調整する例を示す図である。

符号の説明

１００ システム
１０１ 会議案内ソフトウエア
１０２ マークレコーダ
１０３ 会議レコーダ
１０４ スライドレコーダ
１０５ 携帯用無線リモートコントローラ
１０６ ラップトップコンピュータ
１０７ サーバ
２０１ クライアントアプリケーション
２０２ ユーザ
３０１ ボタン
４００ ダイアログボックス
４０１ フィールド
４０２ ボタン
４０３ チェックボックス
４０４ ラジオボタン
５００ 画面
５０１ ＬＯＩデータ
５０２ 縦軸
５０３ ブックマーク
５０４ ＬＯＩグラフ
５０５ 時間明示部
５０６ スライド推移
５０７ 表示領域
５０８ スライドディスプレイ
５０９ メモ領域
６００ 画面
６０１ 映像プレーヤ
７００ 画面
７０１ グラフ表示領域
７０２ サムネイル画像
７０３ スライド表示領域
７０４ チェックボックス
７０５ メモ領域
７０７ チェックボックス
７０８ 再生マーカー
７０９ チェックボックス
７１０ 注釈ボタン
７１２ 開始フィールド及び終了フィールド
７１３ アップロードメッセージボタン
７１４ 再描画グラフボタン
１１０１ 時間軸
１１０２ ドット
１２０１，１２０２ グラフ
１３０１ スライディングウインドウ
１３０３ ＬＯＩ曲線
１４０１ 時点

Claims (58)

1. メディアアイテムに関する一連の関心度の値を生成する方法であって、
   前記メディアアイテム内の特定の時点を印す入力を、複数のユーザから受信するステップ；
   受信した入力を結合し、前記メディアアイテムに関する関心度の値を生成するステップ；及び
   生成した関心度の値を表すものを出力するステップ；
   を有することを特徴とする方法。
2. 前記メディアアイテムが、ライブイベントに関する格納済みの表現物より成る
   ことを特徴とする請求項１記載の方法。
3. 前記ライブイベントが、プレゼンテーション及び会議より成る群から選択された少なくとも１つより成る
   ことを特徴とする請求項２記載の方法。
4. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、ライブイベントの出席者から入力を受信するステップより成る
   ことを特徴とする請求項２記載の方法。
5. 前記メディアアイテムが、
   娯楽イベントの記録；
   医療手順の記録；
   記録されたデモンストレーション；
   動画像；
   映像番組；
   音声番組；及び
   音声映像番組；
   より成る群から選択された少なくとも１つより成る
   ことを特徴とする請求項１記載の方法。
6. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、前記メディアアイテムの視聴者からの入力を受信するステップより成る
   ことを特徴とする請求項１記載の方法。
7. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、前記メディアアイテムの聴取者からの入力を受信するステップより成る
   ことを特徴とする請求項１記載の方法。
8. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、関心のある時点を示す入力を受信するステップより成る
   ことを特徴とする請求項１記載の方法。
9. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、特定の対象事項に関連する部分を示す入力を受信するステップより成る
   ことを特徴とする請求項１記載の方法。
10. 前記出力するステップが、生成された関心度の値に関する図形描写を出力するステップより成る
    ことを特徴とする請求項１記載の方法。
11. 前記図形描写を出力するステップが、時間を表す第１の軸と、生成した関心度の値を表す第２の軸とによる関心度曲線を出力するステップより成る
    ことを特徴とする請求項１０記載の方法。
12. 受信した入力を結合するステップが、複数の時間間隔の各々について、該時間間隔の間に受信したブックマークの総数に基づいて、該時間間隔についての関心度の値を生成するステップより成る
    ことを特徴とする請求項１記載の方法。
13. 生成された関心度の値の少なくとも一部を調整するためにスムージング関数を使用するステップ
    を更に有することを特徴とする請求項１２記載の方法。
14. 受信した入力を結合するステップが、
    ある期間を有するスライディングウインドウを初期化するステップ；
    前記スライディングウインドウの複数の位置の各々について、ウインドウ内のブックマークの総数に基づいて、ウインドウ内の目標時点に関する関心度の値を生成するステップ；
    より成ることを特徴とする請求項１記載の方法。
15. 生成された関心度の値の少なくとも１つの部分集合を調整するためにスムージング関数を使用するステップ
    を更に有することを特徴とする請求項１４記載の方法。
16. 前記目標時点に関する関心度の値を生成するステップが、ウインドウ内のブックマークの各々について、ブックマークと前記目標時点との時間差に従ってブックマークを重み付けするステップ
    を更に有することを特徴とする請求項１４記載の方法。
17. 受信した入力を結合するステップが、
    ある期間を有するスライディングウインドウ及びステップサイズを初期化するステップ；
    ウインドウ内のブックマークの総数に基づいて、ウインドウ内の目標時点に関する関心度の値を生成するステップ；
    前記スライディングウインドウを前記ステップサイズだけ動かすステップ；及び
    前記メディアアイテムの終点に達するまで、前記生成するステップ及び前記動かすステップを反復するステップ；
    より成ることを特徴とする請求項１記載の方法。
18. 前記目標時点に関する関心度の値を生成するステップが、
    ウインドウ内のブックマークの各々について、ブックマークと前記目標時点との時間差に従ってブックマークを重み付けするステップ；及び
    重み付けされたブックマークを合成するステップ；
    より成ることを特徴とする請求項１７記載の方法。
19. 生成された関心度の値の少なくとも１つの部分集合を調整するためにスムージング関数を使用するステップ
    を更に有することを特徴とする請求項１７記載の方法。
20. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、少なくとも２種類のブックマークを受信するステップより成る
    ことを特徴とする請求項１記載の方法。
21. 生成した関心度の値を表すものを出力するステップが、ブックマークの種別の各々について、生成した関心度の値を表すものを出力するステップより成る
    ことを特徴とする請求項２０記載の方法。
22. 複数のブックマークの種類の内の選択したものを受信するステップを更に有し、
    受信した入力を結合するステップが、
    選択した種別の受信したブックマークに従って、受信した入力を選別するステップ；及び
    選択した種別のブックマークに関する関心度の値を生成するために、選択したブックマークの種別に対応する受信した入力を結合するステップ；
    より成り、生成した関心度の値を表すものを出力するステップが、選択したブックマークの種別について、生成した関心度の値を表すものを出力するステップより成る
    ことを特徴とする請求項２０記載の方法。
23. １人のユーザの選択内容を受信するステップを更に有し、
    受信した入力を結合するステップが、
    前記ユーザに従って受信した入力を選別するステップ；及び
    選択されたユーザについての関心度の値を生成するために、選択されたユーザに関して受信した入力を結合するステップ；
    より成り、生成した関心度の値を表すものを出力するステップが、選択されたユーザについて、生成した関心度の値を表すものを出力するステップより成る
    ことを特徴とする請求項２０記載の方法。
24. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、前記メディアアイテム内の特定の時点に関するユーザの関心度のスコアを示す入力を受信するステップより成り；及び
    受信した入力を結合するステップが、前記メディアアイテムに関する全体的な関心度の値を生成するため、ユーザの関心度のスコアを合成するステップより成る
    ことを特徴とする請求項１記載の方法。
25. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、特定の時点の少なくとも１つの部分集合について、ユーザの入力が受信された時にマークされた特定の時点からの近似的な経過時間を示す入力を受信するステップより成る
    ことを特徴とする請求項１記載の方法。
26. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、前記メディアアイテムに関するメモを受信するステップより成る
    ことを特徴とする請求項１記載の方法。
27. 受信したメモを表すものを格納するステップ
    を更に有することを特徴とする請求項２６記載の方法。
28. 受信したメモを表す格納されたものを、前記メディアアイテムを表す格納されたものに関連付けるステップ
    を更に有することを特徴とする請求項２７記載の方法。
29. 受信したメモより成るメッセージを送信するステップ
    を更に有することを特徴とする請求項２７記載の方法。
30. 入力を受信するステップが、受信したメモの少なくとも１つの部分集合について、メモが私的なものであることの指標を受信するステップより成り、
    当該方法が、私的な者であるとして示されていないメッセージを送信するステップを更に有する
    ことを特徴とする請求項２７記載の方法。
31. 生成した関心度の値を表すものを格納するステップを更に有する
    ことを特徴とする請求項１記載の方法。
32. 生成した関心度の値を表す格納されたものを、前記メディアアイテムを表す格納されたものに関連付けるステップを更に有する
    ことを特徴とする請求項３１記載の方法。
33. 受信したブックマークを表すものを格納するステップ
    を更に有することを特徴とする請求項１記載の方法。
34. ブックマークを表す格納されたものを、前記メディアアイテムを表す格納されたものに関連付けるステップを更に有する
    ことを特徴とする請求項３３記載の方法。
35. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、無線装置を通じて入力を受信するステップより成る
    ことを特徴とする請求項１記載の方法。
36. 生成された関心度の値より成るメッセージを送信するステップ
    を更に有することを特徴とする請求項１記載の方法。
37. 前記メッセージを送信するステップが、前記メッセージを、入力を受信した複数のユーザに送信するステップより成る
    ことを特徴とする請求項３６記載の方法。
38. 前記メディアアイテムが、ライブイベントを表す格納されたものより成り；及び
    前記メッセージを送信するステップが、前記メッセージを、前記ライブイベントの出席者に送信するステップより成る；
    ことを特徴とする請求項３６記載の方法。
39. 前記メッセージを送信するステップが、前記メッセージを、予め定められた一群のユーザに送信するステップより成る
    ことを特徴とする請求項３６記載の方法。
40. 前記メディアアイテム及び生成した関心度の値を表すものより成るメッセージを送信するステップ
    を更に有することを特徴とする請求項１記載の方法。
41. 前記メディアアイテムへのリンク及び生成した関心度の値より成るメッセージを送信するステップ
    を更に有することを特徴とする請求項１記載の方法。
42. 前記メディアアイテムが、時間的に同期したメディアアイテムの集合より成る
    ことを特徴とする請求項１記載の方法。
43. メディアアイテムに関する関心度の値を生成する方法であって、
    メディアアイテムの識別子を受信するステップ；
    前記メディアアイテムを検索するステップ；
    前記メディアアイテム内の複数の時点について、複数のユーザからの入力を結合することによって関心度の値を決定するステップ；
    決定した関心度の値から関心度のグラフを作成するステップ；及び
    作成した関心度のグラフを出力するステップ；
    を有することを特徴とする方法。
44. 作成された関心度のグラフより成るメッセージを送信するステップ；
    を更に有することを特徴とする請求項４３記載の方法。
45. メディアアイテムに関する関心度のグラフを、前記メディアアイテムの中で関心のある時点を示す複数のユーザのブックマークに基づいて生成する方法であって、
    ａ）ポインタ値を初期化するステップ；
    ｂ）前記ポインタ値に対応する前記メディアアイテム内の時点を決定するステップ；
    ｃ）決定された時点を含む予め定められたウインドウの中でユーザのブックマークを集計することで、決定された時点に関する関心度の値を決定するステップ；
    ｄ）前記ポインタ値を増やすステップ；
    ｅ）前記メディアアイテムの終点に達するまで、前記ａ）乃至ｄ）のステップを反復するステップ；及び
    ｆ）決定された関心度の値によりグラフを生成するステップ；
    を有することを特徴とする方法。
46. ブックマークを集計するステップが、
    予め定められたウインドウの中のブックマークの各々について、
    ブックマークと決定された時点との間の時間差に従ってブックマークを重み付けし；及び
    重み付けされたブックマークを合成するステップ；
    より成ることを特徴とする請求項４５記載の方法。
47. メディアアイテムに関する一連の関心度の値を生成させるコンピュータプログラムであって、
    前記コンピュータプログラムは、
    前記メディアアイテム内の特定の時点を印す入力を、複数のユーザから受信するステップ；
    受信した入力を結合し、前記メディアアイテムに関する関心度の値を生成するステップ；及び
    生成した関心度の値を表すものを出力するステップ；
    を実行させることを特徴とするコンピュータプログラム。
48. 前記メディアアイテムが、
    娯楽イベントの記録；
    医療手順の記録；
    記録されたデモンストレーション；
    動画像；
    映像番組；
    音声番組；及び
    音声映像番組；
    より成る群から選択された少なくとも１つより成る
    ことを特徴とする請求項４７記載のコンピュータプログラム。
49. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、
    前記メディアアイテムの視聴者からの入力を受信するステップである
    ことを特徴とする請求項４７記載のコンピュータプログラム。
50. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、前記メディアアイテムの聴取者からの入力を受信するステップである
    ことを特徴とする請求項４７記載のコンピュータプログラム。
51. 前記出力するステップが、生成された関心度の値に関する図形描写を出力するステップである
    ことを特徴とする請求項４７記載のコンピュータプログラム。
52. 前記メディアアイテム内の特定の時点を印す入力を受信するステップが、前記メディアアイテム内の特定の時点に関するユーザの関心度のスコアを示す入力を受信するステップを実行させ、
    受信した入力を結合するステップが、前記メディアアイテムに関する全体的な関心度の値を生成するため、ユーザの関心度のスコアを合成するステップである
    ことを特徴とする請求項４７記載のコンピュータプログラム。
53. メディアアイテムに関する一連の関心度の値を生成するシステムであって、
    前記メディアアイテム内の特定の時点を印す入力を、複数のユーザから受信する少なくとも１つの装置；
    受信した入力を合成し、前記メディアアイテムに関する関心度の値を生成する、前記少なくとも１つの装置に結合された関心度計算部；及び
    生成した関心度の値を表すものを出力する、前記関心度計算部に結合された出力装置；
    を有することを特徴とするシステム。
54. 前記メディアアイテムが、
    娯楽イベントの記録；
    医療手順の記録；
    記録されたデモンストレーション；
    動画像；
    映像番組；
    音声番組；及び
    音声映像番組；
    より成る群から選択された少なくとも１つより成る
    ことを特徴とする請求項５３記載のシステム。
55. 前記少なくとも１つの入力装置が、前記メディアアイテムの視聴者からの入力を受信する
    ことを特徴とする請求項５３記載のシステム。
56. 前記少なくとも１つの入力装置が、前記メディアアイテムの聴取者からの入力を受信する
    ことを特徴とする請求項５３記載のシステム。
57. 前記出力装置が、生成された関心度の値に関する図形描写を出力する
    ことを特徴とする請求項５３記載のシステム。
58. 前記少なくとも１つの入力装置が、前記メディアアイテム内の特定の時点に関するユーザの関心度のスコアを示す入力を受信し；及び
    前記関心度計算部が、前記メディアアイテムに関する全体的な関心度の値を生成するため、ユーザの関心度のスコアを合成する；
    ことを特徴とする請求項５３記載のシステム。