JP4836068B2 - コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法 - Google Patents

コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法 Download PDF

Info

Publication number
JP4836068B2
JP4836068B2 JP2005221204A JP2005221204A JP4836068B2 JP 4836068 B2 JP4836068 B2 JP 4836068B2 JP 2005221204 A JP2005221204 A JP 2005221204A JP 2005221204 A JP2005221204 A JP 2005221204A JP 4836068 B2 JP4836068 B2 JP 4836068B2
Authority
JP
Japan
Prior art keywords
content
integrated
similarity
ranking
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005221204A
Other languages
English (en)
Other versions
JP2007034961A (ja
Inventor
ゾラン ステイチ
禎史 荒木
恒 宮森
充 水口
強 馬
克己 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Institute of Information and Communications Technology
Ricoh Co Ltd
Original Assignee
National Institute of Information and Communications Technology
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Institute of Information and Communications Technology, Ricoh Co Ltd filed Critical National Institute of Information and Communications Technology
Priority to JP2005221204A priority Critical patent/JP4836068B2/ja
Publication of JP2007034961A publication Critical patent/JP2007034961A/ja
Application granted granted Critical
Publication of JP4836068B2 publication Critical patent/JP4836068B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法に関する。
ネットワークのWeb環境は日々進展しており、そこに含まれる情報量が増大しつつある。一方、情報の形態もテキストだけでなく、静止画像、動画像、音声等のマルチメディア化がさらに進んでいる。このようなネットワーク上の膨大な情報をWebの閲覧者が有効活用するためには、自らの利用目的に沿った情報を効率的に検索できることが何よりも望まれる。そこで、近年においては、各種の検索エンジンを用いることにより、情報を効率的に検索できるようになっている。
ところで、このような検索エンジンでは、図21に示すように、基本的に検索結果の一部(キーワードを含む数行のテキスト、もしくは、キーワード近傍の画像サムネイル)の一覧を提示するのみであり、それ以上の情報を得るためにはリンク先のウェブページを1つ1つ開けてはその内容を確認し、所望の情報が得られない場合は再び検索結果一覧画面に戻るという作業を繰り返すことになる。
一方、なじみの薄い分野についてキーワードによる情報検索を行う場合、適切なキーワードを思いつくことは必ずしも容易でなく、検索結果の中に閲覧者が期待しない(不要な)情報が含まれることがしばしば発生する。そのような場合、キーワードを試行錯誤的に追加しつつ検索対象を絞り込んでいく方法があるが、何度も検索を繰り返す手間がかかる。そこで、検索結果をカテゴライズして表示すると、閲覧者は対象分野の全容を把握しやすくなるため、希望するカテゴリの情報のみを見つけ出すことが容易となる。このような検索結果のカテゴライズ表示については、例えば非特許文献1に記載されている。
Bill Kules and Ben Shneiderman, "Categorized graphical overviews for web search results: An exploratory study using U. S. government agencies as a meaningful and stable structure," Proceedings of the Third Annual Workshop on HCI Research in MIS, Washington, D.C., December 10-11, 2004
しかしながら、検索結果一覧からリンク先を1つ1つ開けるという作業を繰り返すことは非常に面倒であり、このように検索結果とリンク先を何度も往復すると、情報閲覧の文脈が失われて検索効率が低下するという問題がある。逆に、各検索結果ウェブページに関して多くの情報を提示すると、全体の一覧性が悪くなり、やはり検索効率が低下する。なお、近年においては、リンク先のウェブページを一覧画面内に縮小表示する方法も現れてきているが、これらはリンク先全体の雰囲気を掴むことはできても、テキストの内容や画像の詳細はわからないという問題がある。
また、非特許文献1に記載されている検索結果をカテゴライズして表示する技術によれば、カテゴリを選択した後の一覧画面は、検索エンジンの通常のキーワード検索結果画面と同様の抜粋されたテキストから構成されており、それ以上の情報を得るには、やはり、リンク先ページを開けねばならない。
さらに、近年においては、少なくとも2種以上の性質の異なるコンテンツ(例えば、ネットワーク上のウェブページとローカルに蓄積されたビデオデータなど)を一元的に検索し、関連するコンテンツを閲覧可能に一覧表示することが望まれているが、性質の異なる複数種類のコンテンツを跨いだ検索・閲覧については、いまだ実現されてはいない。
本発明は、上記に鑑みてなされたものであって、閲覧の文脈を保持しつつ、何度も検索する手間を省いて効率的に情報検索を実行することができるとともに、性質の異なる複数種類のコンテンツを跨いだ検索・閲覧を実現することができるコンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法を提供することを目的とする。
上述した課題を解決し、目的を達成するために、請求項1にかかる発明のコンテンツ処理装置は、少なくとも2種以上の性質の異なるコンテンツのテキストから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け部と、前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示部と、を備える。
また、請求項2にかかる発明のコンテンツ処理装置は、第1のコンテンツのテキストとこの第1のコンテンツとは性質の異なる第2のコンテンツのテキストとから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け部と、前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示部と、を備える。
また、請求項3にかかる発明は、請求項2記載のコンテンツ処理装置において、前記関連付け部は、前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方に対し、前記第1のコンテンツと前記第2のコンテンツとから抽出される代表的なキーワードに基づいた統合インデックスを生成する統合インデックシング部と、この統合インデックシング部により生成された前記統合インデックスを用い、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング部と、前記統合インデックシング部により生成された前記統合インデックスを用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング部と、を備える。
また、請求項4にかかる発明は、請求項3記載のコンテンツ処理装置において、前記統合インデックシング部は、前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方から代表的なキーワードを抽出するキーワード抽出部と、このキーワード抽出部により抽出された代表的なキーワードに基づいて、前記第1のコンテンツの内容および前記第2のコンテンツの内容の両方を同じ形式に変換し、前記第1のコンテンツと前記第2のコンテンツの前記統合インデックスを生成するインデックス生成部と、を備える。
また、請求項5にかかる発明は、請求項3記載のコンテンツ処理装置において、前記統合ランキング部は、抽出された代表的なキーワードの中から、1又は複数のキーワードを検索要求として選択させるクエリー入力部と、このクエリー入力部により選択された検索要求を、前記統合インデックスで扱われている形式に変換するクエリー変換部と、前記統合インデックスで扱われている表現形式を用い、検索要求に対する前記第1のコンテンツと前記第2のコンテンツの類似度を計算する統合類似度計算部と、この統合類似度計算部で計算した類似度に基づいて、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング生成部と、を備える。
また、請求項6にかかる発明は、請求項5記載のコンテンツ処理装置において、前記統合ランキング生成部は、計算した類似度に基づいて、検索要求に対し、類似度が高いものから順に前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする。
また、請求項7にかかる発明は、請求項3記載のコンテンツ処理装置において、前記クロス・ランキング部は、前記統合インデックスで扱われている表現形式を用い、前記第1のコンテンツと前記第2のコンテンツの間の相対類似度を計算するクロス類似度計算部と、このクロス類似度計算部により計算した相対類似度を用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング生成部と、を備える。
また、請求項8にかかる発明は、請求項7記載のコンテンツ処理装置において、前記クロス・ランキング生成部は、計算した類似度を用い、それぞれの前記第1のコンテンツに対して類似度が高いものから順に前記第2のコンテンツをランキングし、または、それぞれの前記第2のコンテンツに対して類似度が高いものから順に前記第1のコンテンツをランキングする。
また、請求項9にかかる発明は、請求項3記載のコンテンツ処理装置において、前記表示部は、初期検索結果として前記第1のコンテンツと前記第2のコンテンツとのリストを表示する統合ランキング表示部と、前記第1のコンテンツが選択されてズームインされると当該第1のコンテンツに関連付けられた前記第2のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させ、または、前記第2のコンテンツが選択されてズームインされると当該第2のコンテンツに関連付けられた前記第1のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させるクロス・ランキング表示部と、を備える。
また、請求項10にかかる発明のコンテンツ処理プログラムは、少なくとも2種以上の性質の異なるコンテンツのテキストから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け機能と、前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示機能と、をコンピュータに実行させる。
また、請求項11にかかる発明のコンテンツ処理プログラムは、第1のコンテンツのテキストとこの第1のコンテンツとは性質の異なる第2のコンテンツのテキストとから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け機能と、前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示機能と、をコンピュータに実行させる。
また、請求項12にかかる発明は、請求項11記載のコンテンツ処理プログラムにおいて、前記関連付け機能は、前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方に対し、前記第1のコンテンツと前記第2のコンテンツとから抽出される代表的なキーワードに基づいた統合インデックスを生成する統合インデックシング機能と、この統合インデックシング機能により生成された前記統合インデックスを用い、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング機能と、前記統合インデックシング機能により生成された前記統合インデックスを用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング機能と、をコンピュータに実行させる。
また、請求項13にかかる発明は、請求項12記載のコンテンツ処理プログラムにおいて、前記統合インデックシング機能は、前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方から代表的なキーワードを抽出するキーワード抽出機能と、このキーワード抽出機能により抽出された代表的なキーワードに基づいて、前記第1のコンテンツの内容および前記第2のコンテンツの内容の両方を同じ形式に変換し、前記第1のコンテンツと前記第2のコンテンツの前記統合インデックスを生成するインデックス生成機能と、をコンピュータに実行させる。
また、請求項14にかかる発明は、請求項12記載のコンテンツ処理プログラムにおいて、前記統合ランキング機能は、抽出された代表的なキーワードの中から、1又は複数のキーワードを検索要求として選択させるクエリー入力機能と、このクエリー入力機能により選択された検索要求を、前記統合インデックスで扱われている形式に変換するクエリー変換機能と、前記統合インデックスで扱われている表現形式を用い、検索要求に対する前記第1のコンテンツと前記第2のコンテンツの類似度を計算する統合類似度計算機能と、この統合類似度計算機能で計算した類似度に基づいて、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング生成機能と、をコンピュータに実行させる。
また、請求項15にかかる発明は、請求項14記載のコンテンツ処理プログラムにおいて、前記統合ランキング生成機能は、計算した類似度に基づいて、検索要求に対し、類似度が高いものから順に前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする。
また、請求項16にかかる発明は、請求項12記載のコンテンツ処理プログラムにおいて、前記クロス・ランキング機能は、前記統合インデックスで扱われている表現形式を用い、前記第1のコンテンツと前記第2のコンテンツの間の相対類似度を計算するクロス類似度計算機能と、このクロス類似度計算機能により計算した相対類似度を用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング生成機能と、をコンピュータに実行させる。
また、請求項17にかかる発明は、請求項16記載のコンテンツ処理プログラムにおいて、前記クロス・ランキング生成機能は、計算した類似度を用い、それぞれの前記第1のコンテンツに対して類似度が高いものから順に前記第2のコンテンツをランキングし、または、それぞれの前記第2のコンテンツに対して類似度が高いものから順に前記第1のコンテンツをランキングする。
また、請求項18にかかる発明は、請求項12記載のコンテンツ処理プログラムにおいて、前記表示機能は、初期検索結果として前記第1のコンテンツと前記第2のコンテンツとのリストを表示する統合ランキング表示機能と、前記第1のコンテンツが選択されてズームインされると当該第1のコンテンツに関連付けられた前記第2のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させ、または、前記第2のコンテンツが選択されてズームインされると当該第2のコンテンツに関連付けられた前記第1のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させるクロス・ランキング表示機能と、をコンピュータに実行させる。
また、請求項19にかかる発明のコンテンツ処理方法は、少なくとも2種以上の性質の異なるコンテンツのテキストから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け工程と、前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示工程と、を含む。
また、請求項20にかかる発明のコンテンツ処理方法は、第1のコンテンツのテキストとこの第1のコンテンツとは性質の異なる第2のコンテンツのテキストとから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け工程と、前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示工程と、を含む。
本発明によれば、閲覧の文脈を保持しつつ、何度も検索する手間を省いて効率的に情報検索を実行することができるとともに、性質の異なる複数種類のコンテンツを跨いだ検索・閲覧を実現することができるという効果を奏する。
以下に添付図面を参照して、この発明にかかるコンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法の最良な実施の形態を詳細に説明する。
本発明の実施の一形態を図1ないし図20に基づいて説明する。
[1.Web環境でのコンテンツ閲覧における画面遷移の概要]
最初に、本発明の前提となるWeb環境でのコンテンツ閲覧における画面遷移の概要について説明する。
本実施の形態においては、Web環境でのコンテンツ閲覧効果を高めることを目的に、Web環境におけるコンテンツに対し、ズーミングを利用して詳細度の変化だけでなく、表示メディアの遷移を実現できる「ズーミング・クロスメディア」を適用するようにしたものである。
「ズーミング・クロスメディア」は、ズーム操作を、スクロール、アンカークリックに対する第3の操作と位置づけることにある。スクロールは同一画面内で注視点を連続的に移動させ、アンカークリックは異なる画面に飛ぶのに対し、ズーミング・クロスメディアは同一画面内で詳細度変化や表示メディア遷移を連続的に実現する。表示メディア遷移とは、相互に関連づけられた互いに異なるメディアオブジェクトに関し、ズーム操作に従って、一方から他方へ表示を連続的に変化させたり、一方を表示した状態に加えてもう一方を連続的に拡大しつつ追加表示させたり(もしくはその逆)することである。動画像に関連付けられた字幕テキストを表示するに際し、動画像のみの表示から、ズーミング操作と共に次第に字幕テキストに移り変わっていく、というようなものがその一例である。
このようなズーミング操作/挙動は、ズーム対象、ズーム率、ズーム伝播の3つの基本概念を基にモデル化されている。
1.ズーム対象
「ズーム対象」はズーム操作の対象となる単位で、コンテンツを構成するテキスト、静止画像、動画像、音声の各「メディアオブジェクト」から構成される。閲覧者は所望のズーム対象を指定してズーム操作を行う。
2.ズーム率
「ズーム率」はズーム対象に対して一意的に定まる値で、ズームの程度を表す0.0以上1.0以下の連続値である。ズーム率が大きくなる方向にズーミングすることをズームイン、小さくなる方向にズーミングすることをズームアウトという。各メディアオブジェクトに対し、ズーム率は具体的な属性(フォントサイズ、画像サイズ、動画像や音声の再生区間等)に対応付けられる。
3.ズーム伝播
「ズーム伝播」はあるズーム対象をズーミングすると他のズーム対象も連動してズーミングすることである。ズーム伝播では、伝播元ズーム対象のズーム率から、予め定められた「ズーム率関係」を基に伝播先のズーム率を計算し、伝播先ズーム対象の表示の状態を制御する。ズーム率関係は伝播元と伝播先のズーム率の変化の比率である。
ここで、ズーム率関係がプラスの値の場合のズームの伝播の例について説明する。図1ないし図3は、Web環境でのコンテンツ閲覧における画面遷移例を示す説明図である。図1は、ディスプレイに表示されるWeb環境でのコンテンツの一例を示す正面図である。図1に示す例は、Web環境でのコンテンツとして「出張報告」を適用した例である。図1に示すWeb環境でのコンテンツは、オブジェクトとしてテキストを主体に構成されている。
図1に示すWeb環境でのコンテンツのオブジェクトAに対してズームイン操作を行った結果を図2に示す。図2に示すように、Web環境でのコンテンツのオブジェクトAに対してズームイン操作を行った場合、オブジェクトAの下位のオブジェクトBが新たに表示されるとともに、新たなオブジェクトCがオブジェクトBの下部分に表示される。ここで、新たなオブジェクトCは、オブジェクトAに関連する討議がなされていた時点での討議風景を撮影した動画像の静止状態の画像である。
さらに、図2に示すWeb環境でのコンテンツのオブジェクトAに対してズームイン操作を行った結果を図3に示す。図3に示すように、Web環境でのコンテンツのオブジェクトAに対してズームイン操作を行った場合、オブジェクトA,Bのフォントサイズが拡大される。加えて、図3に示すように、Web環境でのコンテンツのオブジェクトAに対してズームイン操作を行った場合、オブジェクトCである静止画像の詳細度が高くなる(画像サイズが拡大する)。さらに、オブジェクトCは、あるサイズにまで拡大すると、動画像(と音声)の再生を開始する。
このようなWeb環境でのコンテンツ閲覧における画面遷移は、以下に示すような表示記述(構造記述及びズーミング記述)で記述されている。なお、構造記述及びズーミング記述は、XML(Extensible Markup Language)ベースのズーミング記述言語(ZDL:Zooming Description Language )で記述されている。
ここで、ズーミング記述について、以下に簡単な例を挙げて説明する。
1.メディアオブジェクトの指定
テキスト、静止画像、動画像、音声のそれぞれについて、<text/>,<img/>,<video/>,<audio/>のタグで表す。このタグにより、具体的なテキストの内容やソースファイルを指定する。
(例1)
<text id=text1>これはテキストです。</text>
<img id=img1 src=“img1.jpg” />
<video id=video1 src=“video1.mpg” />
<audio id=audio1 src=“audio1.wav” />
2.ズーム率の範囲
<div/>タグ内のzoomFactor属性にて、ズーム率の最大値、最小値を指定し、連続パラメータとしてのズーム率の範囲を表す。
(例2)
<div zoomFactor=“0.0 0.5” />
3.メディアオブジェクトの表示
テキスト、静止画像、動画像、音声のそれぞれについて、<dispText>,<dispImg>,<dispVideo>,<dispAudio>タグで表す。常に<div/>タグに内包され、<div/>タグで指定された範囲のズーム率における各メディアオブジェクトの表示の状態を表す。
(例3−1)
<div zoomFactor=“0.0 0.5” >
<dispText id=“disptext1” textId=“text1” fontSize=“10pt 14pt” />
</div>
上記の意味は、<text/>タグにてtext1で指定されたテキストを、ズーム率が0.0のときは10ptで、ズーム率が0.5のときは14ptでそれぞれ表示し、その間はなるべくなめらかにフォントサイズを変化させるというものである。
(例3−2)
<div zoomFactor=“0.0 0.5” >
<dispImg id=“dispimg1” imgId=“img1” imgSize=“10% 50%” />
</div>
上記の意味は、<img/>タグにてimg1で指定された静止画像を、ズーム率が0.0のときは最大サイズの10%で、ズーム率が0.5のときは50%でそれぞれ表示し、その間はなるべくなめらかにサイズを変化させるというものである。
(例3−3)
<div zoomFactor=“0.0 0.5” >
<dispVideo id=“dispvideo1” videoId=“video1” start=“0” end=“300” videoSize=“10% 50%” />
</div>
上記の意味は、<video/>タグにてvideo1で指定された動画像の第0フレームから300フレームまでを、ズーム率が0.0のときは最大サイズの10%で,ズーム率が0.5のときは50%でそれぞれ表示し、その間はなるべくなめらかにサイズを変化させるというものである。
(例3−4)
<div zoomFactor=“0.0 0.5” >
<dispAudio id=“dispaudio1” audioId=“audio1” start=“0s” end=“30s” />
</div>
上記の意味は、<audio/>タグにてaudio1で指定された音声の最初から30秒までを、ズーム率が0.0から0.5の間再生するというものである。
4.ズーム対象
ズーム対象を<zoomObject/>タグで記述する。初期ズーム率やズーム伝播先のズーム対象、ズーム率関係もタグ内の属性で記述する。<div/>もしくは他の<zoomObject/>のいずれかを必ず内包する。
以下に、図1ないし図3に示す画面遷移例についての構造記述及びズーミング記述を示す。なお、以下においては、コンテンツの構造記述とズーミングの操作/挙動に関するズーミング記述を分けて記述している(onlyHierarchy=“on” は構造のみの記述であることを示す)。

(コンテンツの構造記述)
<zoomObject id=“zoom1” onlyHierarchy=“on” >
<text id=“text1” >1. 新教材の改善点について</text>
<text id=“text2” >参加者から教材の中身について意見を出してもらう。</text>
<zoomObject id=“zoom2” onlyHierarchy=“on” >
<text id=“text3” >新しいものを次々に出していくにはどうすればよいか、
何度も使ってもらえるようにするにはどうすればよいか(問題提起)</text>
<zoomObject id=“zoom3” onlyHierarchy=“on” >
<text id=“text4” >開発はもう少し短いスパンで作っていく必要がある。</text>
<text id=“text5” >3ヶ月毎にアップデートしていくつもり。</text>
.......
</zoomObject>
<zoomObject id=“zoom4” onlyHierarchy=“on” >
<video id=“video1” src=“会議11.mpg” />
</zoomObject>
</zoomObject>
<zoomObject id=“zoom5” onlyHierarchy=“on” >
<text id=“text10” >ステップ6の通訳者メモについて初めて.….</text>
.......
</zoomObject>
.......
</zoomObject>

(ズーミングの操作/挙動に関するズーミング記述)
<zoomObject id=“zoom1” initZoomFactor=“0.0” relatedTo=“children:0.8” >
<div zoomFactor=“0.0 1.0” >
<dispText id=“disptext1” textId=“text1” textSize=“12pt 14pt” />
<dispText id=“disptext2” textId=“text2” textSize=“12pt 14pt” />
</div>
</zoomObject>

<zoomObject id=“zoom2” initZoomFactor=“0.0” relatedTo=“children:0.8” >
<div zoomFactor=“0.0 1.0” >
<dispText id=“disptext5” textId=“text3” textSize=“11pt” />
</div>
</zoomObject>

<zoomObject id=“zoom3” initZoomFactor=“0.0” relatedTo=“brother:-0.5” >
<div zoomFactor=“0.1 1.0” >
<dispText id=“disptext6” textId=“text4” textSize=“8pt 10pt” />
<dispText id=“disptext7” textId=“text5” textSize=“8pt 10pt” />
.......
</div>
</zoomObject>

<zoomObject id=“zoom4” initZoomFactor=“0.0” relatedTo=“brother:-0.5” >
<div zoomFactor=“0.1 0.4” >
<dispVideo id=“dispvideo1” videoId=“video1” start=“0” end=“0” videoSize=“20% 50%” />
</div>
<div zoomFactor=“0.4 1.0” >
<dispVideo id=“dispvideo2” videoId=“video1” start=“0” end=“900” videoSize=“50% 100%” />
</div>
</zoomObject>
このコンテンツの構造記述によれば、最上位にzoom1があり、その下位にzoom2、zoom5他が、さらにzoom2の下位にzoom3、zoom4がある。そして、zoom3は複数のテキスト(text4、text5他)から、zoom4は1つの動画像(video1)からそれぞれ構成されている。
また、ズーミングの操作/挙動に関するズーミング記述によれば、zoom1、zoom2、zoom3、zoom4いずれも初期ズーム率が0.0であるが、前2者は最初からテキスト(text1、text2、text3)が表示されるのに対し、後2者は何も表示されない(これは、図1の初期状態に対応している)。
ここで、zoom2をズームインすると、それが子階層のズーム対象に伝播する(relatedTo=“children: 0.8” はズーム率関係0.8で子階層全てにズーム伝播することを表す)。zoom2のズーム率の増加に対してzoom3、zoom4のズーム率がその0.8の変化率で増加し(zoom2のズーム率が+0.5変化するとzoom3、zoom4はそれぞれ+0.4変化する)、0.1に達した時点でtext4、text5他とvideo1がそれぞれ表示される(図2参照)。これは、テキスト情報に加えて動画像情報が加わっているので、メディア拡張の例である。ただし、video1についてはここではまだフレーム0のみが静止状態で表示される。
この状態からさらにzoom2をズームインしていくと、zoom3、zoom4のズーム率もさらに増加し、text4、text5他のフォントサイズは拡大する。同時にvideo1の表示サイズも拡大し、zoom4のズーム率が0.4に達した時点でvideo1のフレーム0から900までが再生される(図3、詳細度変化の例)。
なお、図3の状態でzoom2をズームアウトすると、ズームインの場合とは逆にzoom3、zoom4も一緒にズームアウトして図2の状態になり、それぞれのズーム率が0.1以下になるとtext4、text5他とvideo1が画面から消えて図1の状態に戻る。あるいは、強制的に初期状態に戻す操作をすると、いかなる表示状態からであっても、図1の状態に戻る。
次に、ズーム率関係がマイナスの値の場合のズームの伝播の例について説明する。
図4は、Web環境でのコンテンツ閲覧における画面遷移例を示す説明図である。図3に示すWeb環境でのコンテンツのオブジェクトBに対してズームイン操作を行った結果を図4に示す。図4に示すように、Web環境でのコンテンツのオブジェクトBに対してズームイン操作を行った場合、オブジェクトBのフォントサイズが拡大されているが、オブジェクトCの表示サイズは縮小する。
前述したズーミングの操作/挙動に関するズーミング記述においては、zoom3、zoom4にはいずれも
relatedTo=“brother: -0.5”
という記述がある。これは、共通の親を持つズーム対象間でズーム伝播が起こることを表している。ズーム率関係がマイナスの値であるのは、一方をズームインすると他方がズームアウトすることを示す。よって、図3の状態からzoom3のみを選択してズームインすると、zoom4がズームアウトする(text4、text5他はさらに拡大し、video1は逆に縮小することになる(図4参照))。
以上が、Web環境でのコンテンツ閲覧における画面遷移の概要である。このような関係を簡単な具体例で表現したものが図5である。図5の例では、A,B,Cがズーム対象で括弧内は初期状態のズーム率を表す。矢印はズームの伝播関係を表し、そのそばに付された値はズーム率関係である。ABのズーム率関係は0.5なので、A→Bとズーム伝播する際、Aをズームインしてズーム率が0.0→0.8と変化すると、Bのズーム率が0.0→0.4と変化する。BとCは相互にズーム伝播するが変化の比率がマイナス(-1.0)なので、一方をズームインすると他方はズームアウトする。例えば、初期状態はC(動画像)のみ表示で、B(テキスト+音声)をズームインして拡大していくと、C(動画像)は次第に縮小する。この例のように、ズーム伝播を導入することで、表示メディアの遷移が容易に実現できるのが本モデリングの特徴である。
上述したようなズーミング記述によれば、一のメディアオブジェクト(テキスト、静止画像、動画像、音声等)をズーミングするとそれに連動して他のメディアオブジェクト(テキスト、静止画像、動画像、音声等)がズーミングするズーム対象間のズームの伝播を記述可能であることにより、一のズーム対象から他のズーム対象へ向けての自然なズーミングを行なうことができる。
[2.コンテンツ処理装置の説明]
本実施の形態は、Web環境におけるコンテンツとして検索エンジン(例えば、ロボット検索エンジン)によるウェブページの検索結果一覧を適用し、このウェブページの検索結果一覧をズーミング記述言語(ZDL)の形式で出力することができるコンテンツ処理装置に適用したものである。
ここで、ウェブページとは、Webブラウザに一度に表示されるデータのまとまりで、テキストデータやHTML(あるいは、CSS(Cascading Style Sheet),XMLなど)によるレイアウト情報、文書中に埋め込まれた画像や音声、動画などから構成されるものである。
このようにズーミング・クロスメディアを情報検索に適用したのは、ズーミング・クロスメディアの大きな効用はコンテンツ閲覧の自由度を高めることができることであることから、固定的な表示内容や表示メディアではなくユーザの好みに応じて内容の詳細度の変化や表示メディアの遷移を制御することができる点にある。すなわち、ウェブページの検索結果一覧画面において、リンク先のウェブページを開くことなくそれが所望の情報か否かを判断するのに必要な情報の詳細度や表示メディアは、検索対象の分野に関する閲覧者の知識、閲覧時の状況、検索対象の情報の形態等によって様々に変化すると考えられるからである。例えば、検索対象の分野になじみの深い閲覧者はタイトルだけでも判断可能だが、不案内な閲覧者の場合はより詳細なテキスト記述に加えて画像データも欲しいなどということはあり得る。時間をかけて1つ1つのリンク先を開く余裕がある場合もあれば、逆に全体的な傾向をざっと一覧したい場合もある。リンク先がテキスト主体であればその抜粋(または要約)が結果一覧画面に提示されるのが適当だが、画像を多く含むリンク先の場合は主要な画像を2,3枚表示するほうが都合良いこともある。このような様々な状況を予め想定して、複数の固定的な検索結果一覧画面を生成するのは現実的ではない。ここにおいて、複数メディアを混在/遷移させて表示でき、かつ、閲覧者の状況や好みに応じて柔軟に詳細度や表示メディアを制御できるズーミング・クロスメディアの特徴が生きてくることになる。
[2−1.コンテンツ処理装置を含むシステム構築例]
図6は、コンテンツ処理装置を含むシステム構築例を示す模式図である。本システムは、図6に示すように、コンテンツ処理装置であるサーバコンピュータ(以下、サーバという)1にネットワークNを介して端末装置であるクライアントコンピュータ(以下、クライアント端末という)Cが複数台接続されたシステムを想定する。なお、このようなネットワーク通信を伴うクライアント・サーバ方式のみに本発明は限定されないことはいうまでもない。
コンテンツ処理装置であるサーバ1は、概略的には、インターネット上の一般的なウェブページやサーバ1内のローカルデータベースに存在する定型的な構造を持つウェブページを対象にキーワードに基づくウェブページ検索を行い、ズーミング記述言語(ZDL)の形式でウェブページの検索結果一覧を出力するものである。
クライアント端末Cは、一般的なパーソナルコンピュータ等であり、Webブラウザを用いることによりサーバ1とのデータ送受信が可能になっている。このクライアント端末Cは、閲覧者からのウェブページのキーワード検索要求(クエリー)を受け付けてサーバ1に出力するとともに、サーバ1においてズーミング記述言語(ZDL)の形式で出力された閲覧者に対するウェブページの検索結果一覧を解釈して表示する。すなわち、クライアント端末Cは、コンテンツ処理装置であるサーバ1に対する入出力デバイスである。
図7は、サーバ1の構成を示すブロック図である。本実施の形態のコンテンツ処理装置であるサーバ1は、パーソナルコンピュータを主体に構成されており、情報処理を行うCPU(Central Processing Unit)2と、BIOS(Basic Input Output System)等を格納するROM(Read Only Memory)3と、情報を処理中に一時的に格納するRAM(Random Access Memory)4と、アプリケーションプログラムや処理結果等を保存する記憶部であるHDD(Hard Disk Drive)5と、情報を外部に保管又は配布し若しくは情報(アプリケーションプログラム等)を外部から入手するための記憶媒体であるリムーバブルメディア6のドライブ6aと、外部の他の電子機器と通信するためのネットワークNに接続するためのネットワークインタフェース8と、処理経過や処理結果等をユーザに表示する表示部であるディスプレイ9と、操作者がコンテンツ処理装置であるサーバ1に命令や情報等を入力するためのキーボード10やマウス11等の入力部とから構成され、これらの間のデータ通信をバスコントローラ12が調停して動作している。
なお、リムーバブルメディア6としては、フレキシブルディスク、ハードディスク、磁気テープ等のような磁気的な記憶媒体、MOのような光磁気的な記憶媒体、CD、CD−ROM、CD−R、CD−RW、DVD−ROM、DVD−R、DVD−RAM、DVD−RW、DVD+RW等のような光学的な記憶媒体、半導体メモリ等、各種の記憶媒体が適用できる。
データ送信は、コンテンツ処理装置であるサーバ1のネットワークインタフェース8へとデータを送ることにより、ネットワークインタフェース8がネットワークNへと信号を出力する。また、ネットワークインタフェース8が受け取った信号については、ネットワークインタフェース8において必要かどうかの判断がなされ、必要なデータであれば取り込み、不必要であれば破棄する、というような処理が行われる。すなわち、あらゆるデータの送受信は、すべてネットワークインタフェース8を経由して行われることになる。
一般的には、ユーザがコンテンツ処理装置であるサーバ1の電源を投入すると、CPU2はROM3内のBIOSに含まれるローダーというプログラムを起動させ、HDD5からオペレーティングシステム(OS)という当該サーバ1のハードウェアとソフトウェアとを管理するプログラムをRAM4に読み込む。OSは起動すると、ユーザの操作に応じてアプリケーションプログラムの起動、情報の読み込み、保存等をサポートする。代表的なOSとしては、Windows(Microsoft Corporationの登録商標)、UNIX(X/Open, Inc.の登録商標)等が知られている。これらのOS上で走るプログラムをアプリケーションプログラムと呼んでいる。なお、アプリケーションプログラムは、所定のOS上で動作するものに限らず、後述の各種処理の一部の実行をOSに肩代わりさせるものであってもよいし、所定のアプリケーションソフトやOSなどを構成する一群のプログラムファイルの一部として含まれているものであってもよい。
また、一般的には、コンテンツ処理装置であるサーバ1のHDD5にインストールされるアプリケーションプログラムは、リムーバブルメディア6に記録され、このリムーバブルメディア6に記録されたアプリケーションプログラムがHDD5にインストールされる。このため、リムーバブルメディア6も、アプリケーションプログラムを記憶する記憶媒体となり得る。さらには、アプリケーションプログラムは、例えばネットワークインタフェース8を介して外部から取り込まれ、HDD5にインストールされても良い。
コンテンツ処理装置であるサーバ1は、OS上で動作するアプリケーションプログラムが起動すると、このアプリケーションプログラムに従い、CPU2が各種の演算処理を実行して各部を集中的に制御する。
[2−2.コンテンツ処理装置におけるコンテンツ検索処理]
次に、コンテンツ処理装置であるサーバ1のCPU2が実行する各種の演算処理のうち、アプリケーションプログラムの1つであるコンテンツ処理プログラムに従って実行する本実施の形態の特長的な処理について以下に説明する。
図8は、サーバ1を含むシステムの概略構成を示すブロック図である。図8に示すように、コンテンツ処理装置であるサーバ1は、CPU2がコンテンツ処理プログラムに従って各部を制御することにより、Web環境における第1のコンテンツであるウェブページを保持するデータベース(ウェブページDB)21と、第2のコンテンツである映像についての説明文であるキャプション付き録画番組を保持するデータベース(キャプション付き録画番組DB)22を管理し、クライアント端末Cから出力されたユーザのクエリーを受け付け、このクエリーに基づいてウェブページDB21に保持されているウェブページとキャプション付き録画番組DB22に保持されているキャプション付き録画番組の関連付けを行ってウェブページとキャプション付き録画番組のクロス・ランキングを生成する関連付け部23と、この関連付け部23により関連付けられたウェブページとキャプション付き録画番組を、ズーミング記述言語(ZDL)の形式であるズーミング・クロスメディアを用いて連続的に表示させる表示部24と、を実現する。
すなわち、このような構成により、クライアント端末C側においては、閲覧者がWebブラウザ上でキーワード検索を開始すると、同時にズーミング記述言語(ZDL)を解釈・表示するZDLビューワが起動される。そして、クライアント端末Cで入力された検索要求(クエリー)はサーバ1に送信される。コンテンツ処理装置であるサーバ1側では、クライアント端末Cで入力された検索要求(クエリー)を受け付けると、キーワードに基づくデータベース検索が実行される。サーバ1は、検索結果一覧をズーミング記述言語(ZDL)形式で生成する。生成されたズーミング記述言語(ZDL)形式の検索結果一覧はコンテンツ処理装置であるサーバ1からクライアント端末Cに送信され、ZDLビューワ上に表示される。閲覧者は表示された検索結果一覧に対して、適宜ズーミング操作を行うことになる。
まず、関連付け部23について詳述する、ここで、図9は関連付け部23の構成を示すブロック図である。関連付け部23は、ウェブページのテキストおよび録画番組のキャプションのテキストの両方に対し、ウェブページと録画番組のキーワードに基づいた統合インデックスを生成してデータベース(統合インデックスDB)30に格納する統合インデックシング部31と、統合インデックシング部31により生成されて統合インデックスDB30に格納された統合インデックスを用い、ユーザのクエリーに対し、ウェブページと録画番組を統合的にランキングする統合ランキング部32と、統合インデックシング部31により生成されて統合インデックスDB30に格納された統合インデックスを用い、それぞれのウェブページに対し、録画番組をランキングし、それぞれの録画番組に対し、ウェブページをランキングするクロス・ランキング部33と、を備えている。すなわち、ウェブページとキャプション付き録画番組のクロス・ランキングとは、統合ランキングのそれぞれのウェブページに対し、録画番組をランキングし、それぞれの録画番組に対し、ウェブページをランキングするものである。
関連付け部23の統合インデックシング部31は、図10に示すように、既存の自然言語処理技術(例えば、形態素解析)を用い、ウェブページのテキストおよび録画番組のキャプションのテキストの両方から代表的なキーワードを抽出するキーワード抽出部41と、キーワード抽出部41で抽出したキーワードに基づいて、既存のテキスト検索技術(例えば、ベクトル空間モデル)を用い、ウェブページと録画番組の統合インデックスを生成するインデックス生成部42と、を備えている。キーワード抽出部41では、代表的なキーワードを抽出する際に、自動的な方法(自然言語処理技術)以外に、手動的な方法、又は、半自動的な手法も使用できる。インデックス生成部42は、抽出した代表キーワードを用い、ウェブページの内容および録画番組のキャプションの内容の両方を同じ形式(例えば、ドキュメント・ベクトル)に変換し、お互いの相対類似度を計算できるようにする。
関連付け部23の統合ランキング部32は、図11に示すように、抽出した代表的なキーワードの中から、ユーザが一つ又は複数のキーワードを選択できるようにするクエリー入力部51と、ユーザが選択したキーワード(ユーザのクエリー)を統合インデックスと同じ形式に変換するクエリー変換部52と、統合インデックスDB30に格納された統合インデックスを用い、それぞれのウェブページと録画番組の、ユーザのクエリーに対する類似度を計算する統合類似度計算部53と、統合類似度計算部53で計算した類似度に基づいて、ユーザのクエリーに対し、ウェブページと録画番組を統合的にランキングする統合ランキング生成部54と、を備えている。クエリー入力部51は、ユーザが、一次元のキーワードのリスト、又は二次元のキーワードのマップから(又は別の方法で)キーワードを選択できるようにする。クエリー変換部52は、抽出した代表キーワードを用い、ユーザが選択したキーワード(ユーザのクエリー)を、統合インデックスDB30に格納された統合インデックスで扱われている形式(例えば、クエリー・ベクトル)に変換し、ユーザのクエリーとウェブページ又は録画番組の間の類似度を計算できるようにする。統合類似度計算部53は、統合インデックスで扱われているクエリー又はウェブページと録画番組の表現形式(例えば、クエリー・ベクトルやドキュメント・ベクトル)を用い、ユーザのクエリーに対し、それぞれのウェブページ又は録画番組の類似度(0と100%の間の値)を計算する。統合ランキング生成部54は、計算した類似度に基づいて、ユーザのクエリーに対し、類似度が高いものから順にウェブページと録画番組を統合的にランキングする。
関連付け部23のクロス・ランキング部33は、図12に示すように、統合インデックスDB30に格納された統合インデックスを用い、それぞれのウェブページと録画番組の間の相対類似度を計算するクロス類似度計算部61と、クロス類似度計算部61で計算した類似度を用い、それぞれのウェブページに対し、録画番組をランキングし、それぞれの録画番組に対し、ウェブページをランキングするクロス・ランキング生成部62と、を備えている。クロス類似度計算部61は、統合インデックスで扱われているウェブページと録画番組の表現形式(例えば、ドキュメント・ベクトル)を用い、それぞれのウェブページと録画番組の間の相対類似度を計算する。クロス・ランキング生成部62は、計算した類似度を用い、それぞれのウェブページに対し、類似度が高いものから順に録画番組をランキングし、又は、それぞれの録画番組に対し、類似度が高いものから順にウェブページをランキングする。
ここで、図13〜図17は関連付け部23における統合インデックスの生成と類似度の計算に関する計算式を示す。この計算式は既存のテキスト検索技術における「ベクトル空間モデル」で扱われている、標準の計算式である。
次いで、表示部24について詳述する、ここで、図18は表示部24の構成を示すブロック図である。表示部24は、図18に示すように、初期検索結果として、ウェブページと録画番組のリストを表示する統合ランキング表示部71と、ユーザがウェブページを選択してズームインするとズーミング・クロスメディアを用いて関連番組を連続的に表示させ、又は、ユーザが関連番組を選択してズームインするとズーミング・クロスメディアを用いて関連ウェブページを連続的に表示させるクロス・ランキング表示部72と、を備えている。統合ランキング表示部71は、ウェブページの場合は、タイトルと2,3行のテキスト、録画番組の場合は、キャプション(タイトルでも可)を表示させる。
ここで、総合ランキングとクロス・ランキングの関係について図19を参照して説明する。統合ランキングは、ユーザのクエリーに対する、ウェブページと録画番組のランキングであり、クロス・ランキングは、ウェブページに対する、録画番組のランキング、又は、録画番組に対する、ウェブページのランキングである。
図20は、ウェブページの検索結果一覧に対するズーミング操作例を示す説明図である。図20に示すように、初期検索結果は総合ランキングとして、ウェブページの場合はタイトルと2,3行のテキスト、録画番組の場合はキャプション(タイトルでも可)のみがクライアント端末CのZDLビューワ上に表示される。この状態で、ウェブページ結果をズームインするとウェブページ縮小画像が出現し、さらにズームインすると拡大して、ある時点で真のウェブページになる。そこで、関連番組縮小画像とキャプションが出現し、これをズームインすると関連番組画像が拡大して再生される。また、録画番組結果をズームインすると、番組の縮小画像が出現し、さらにズームインするとシーン分割(画像とキャプションも分割)及び関連ウェブページの縮小画像が出現する。そこで、番組縮小画像をズームインすると、それが拡大されて再生され、関連ウェブページ縮小画像をズームインすると、それが拡大されて、ある時点で真のウェブページになる。
このように本実施の形態によれば、検索結果一覧から詳細情報までを1つの画面の中で連続的に表示できるので、一覧画面とリンク先を往復する必要が無く、閲覧の文脈を保持しつつ、何度も検索する手間を省いて効率的に情報検索を実行することができる。また、例えば、ネットワーク上のウェブページとローカルに蓄積されたビデオデータなどのように、性質の異なる複数種類のコンテンツを跨いだ検索・閲覧を実現することができる。
本発明の前提となるWeb環境でのコンテンツ閲覧における画面遷移の概要を説明するためのディスプレイに表示されるマルチメディアコンテンツの一例を示す正面図である。 図1に示すマルチメディアコンテンツのオブジェクトAに対してズームイン操作を行った結果を示す正面図である。 図2に示すマルチメディアコンテンツのオブジェクトAに対してズームイン操作を行った結果を示す正面図である。 図3に示すマルチメディアコンテンツのオブジェクトBに対してズームイン操作を行った結果を示す正面図である。 Web環境でのコンテンツ閲覧における画面遷移の概要を簡単な具体例で表現した説明図である。 本発明の実施の一形態にかかるコンテンツ処理装置を含むシステム構築例を示す模式図である。 コンテンツ処理装置であるサーバの構成を示すブロック図である。 コンテンツ処理装置であるサーバを含むシステムの概略構成を示すブロック図である。 関連付け部の構成を示すブロック図である。 関連付け部の統合インデックシング部の構成を示すブロック図である。 関連付け部の統合ランキング部の構成を示すブロック図である。 関連付け部のクロス・ランキング部の構成を示すブロック図である。 関連付け部における統合インデックスの生成と類似度の計算に関する計算式を示す説明図である。 関連付け部における統合インデックスの生成と類似度の計算に関する計算式を示す説明図である。 関連付け部における統合インデックスの生成と類似度の計算に関する計算式を示す説明図である。 関連付け部における統合インデックスの生成と類似度の計算に関する計算式を示す説明図である。 関連付け部における統合インデックスの生成と類似度の計算に関する計算式を示す説明図である。 表示部の構成を示すブロック図である。 総合ランキングとクロス・ランキングの関係について示す説明図である。 ウェブページの検索結果一覧に対するズーミング操作例を示す説明図である。 従来のウェブページの検索結果一覧に対する操作例を示す説明図である。
符号の説明
1 コンテンツ処理装置
23 関連付け部
24 表示部
31 統合インデックシング部
32 統合ランキング部
33 クロス・ランキング部
41 キーワード抽出部
42 インデックス生成部
51 クエリー入力部
52 クエリー変換部
53 統合類似度計算部
54 統合ランキング生成部
61 クロス類似度計算部
62 クロス・ランキング生成部
71 統合ランキング表示部
72 クロス・ランキング表示部

Claims (20)

  1. 少なくとも2種以上の性質の異なるコンテンツのテキストから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け部と、
    前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示部と、
    を備えることを特徴とするコンテンツ処理装置。
  2. 第1のコンテンツのテキストとこの第1のコンテンツとは性質の異なる第2のコンテンツのテキストとから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け部と、
    前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示部と、
    を備えることを特徴とするコンテンツ処理装置。
  3. 前記関連付け部は、
    前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方に対し、前記第1のコンテンツと前記第2のコンテンツとから抽出される代表的なキーワードに基づいた統合インデックスを生成する統合インデックシング部と、
    この統合インデックシング部により生成された前記統合インデックスを用い、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング部と、
    前記統合インデックシング部により生成された前記統合インデックスを用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング部と、
    を備えることを特徴とする請求項2記載のコンテンツ処理装置。
  4. 前記統合インデックシング部は、
    前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方から代表的なキーワードを抽出するキーワード抽出部と、
    このキーワード抽出部により抽出された代表的なキーワードに基づいて、前記第1のコンテンツの内容および前記第2のコンテンツの内容の両方を同じ形式に変換し、前記第1のコンテンツと前記第2のコンテンツの前記統合インデックスを生成するインデックス生成部と、
    を備えることを特徴とする請求項3記載のコンテンツ処理装置。
  5. 前記統合ランキング部は、
    抽出された代表的なキーワードの中から、1又は複数のキーワードを検索要求として選択させるクエリー入力部と、
    このクエリー入力部により選択された検索要求を、前記統合インデックスで扱われている形式に変換するクエリー変換部と、
    前記統合インデックスで扱われている表現形式を用い、検索要求に対する前記第1のコンテンツと前記第2のコンテンツの類似度を計算する統合類似度計算部と、
    この統合類似度計算部で計算した類似度に基づいて、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング生成部と、
    を備えることを特徴とする請求項3記載のコンテンツ処理装置。
  6. 前記統合ランキング生成部は、計算した類似度に基づいて、検索要求に対し、類似度が高いものから順に前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする、
    ことを特徴とする請求項5記載のコンテンツ処理装置。
  7. 前記クロス・ランキング部は、
    前記統合インデックスで扱われている表現形式を用い、前記第1のコンテンツと前記第2のコンテンツの間の相対類似度を計算するクロス類似度計算部と、
    このクロス類似度計算部により計算した相対類似度を用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング生成部と、
    を備えることを特徴とする請求項3記載のコンテンツ処理装置。
  8. 前記クロス・ランキング生成部は、計算した類似度を用い、それぞれの前記第1のコンテンツに対して類似度が高いものから順に前記第2のコンテンツをランキングし、または、それぞれの前記第2のコンテンツに対して類似度が高いものから順に前記第1のコンテンツをランキングする、
    ことを特徴とする請求項7記載のコンテンツ処理装置。
  9. 前記表示部は、
    初期検索結果として前記第1のコンテンツと前記第2のコンテンツとのリストを表示する統合ランキング表示部と、
    前記第1のコンテンツが選択されてズームインされると当該第1のコンテンツに関連付けられた前記第2のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させ、または、前記第2のコンテンツが選択されてズームインされると当該第2のコンテンツに関連付けられた前記第1のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させるクロス・ランキング表示部と、
    を備えることを特徴とする請求項3記載のコンテンツ処理装置。
  10. 少なくとも2種以上の性質の異なるコンテンツのテキストから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け機能と、
    前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示機能と、
    をコンピュータに実行させるためのコンテンツ処理プログラム。
  11. 第1のコンテンツのテキストとこの第1のコンテンツとは性質の異なる第2のコンテンツのテキストとから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け機能と、
    前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示機能と、
    をコンピュータに実行させるためのコンテンツ処理プログラム。
  12. 前記関連付け機能は、
    前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方に対し、前記第1のコンテンツと前記第2のコンテンツとから抽出される代表的なキーワードに基づいた統合インデックスを生成する統合インデックシング機能と、
    この統合インデックシング機能により生成された前記統合インデックスを用い、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング機能と、
    前記統合インデックシング機能により生成された前記統合インデックスを用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング機能と、
    をコンピュータに実行させるための請求項11記載のコンテンツ処理プログラム。
  13. 前記統合インデックシング機能は、
    前記第1のコンテンツに含まれるテキストおよび前記第2のコンテンツに含まれるテキストの両方から代表的なキーワードを抽出するキーワード抽出機能と、
    このキーワード抽出機能により抽出された代表的なキーワードに基づいて、前記第1のコンテンツの内容および前記第2のコンテンツの内容の両方を同じ形式に変換し、前記第1のコンテンツと前記第2のコンテンツの前記統合インデックスを生成するインデックス生成機能と、
    をコンピュータに実行させるための請求項12記載のコンテンツ処理プログラム。
  14. 前記統合ランキング機能は、
    抽出された代表的なキーワードの中から、1又は複数のキーワードを検索要求として選択させるクエリー入力機能と、
    このクエリー入力機能により選択された検索要求を、前記統合インデックスで扱われている形式に変換するクエリー変換機能と、
    前記統合インデックスで扱われている表現形式を用い、検索要求に対する前記第1のコンテンツと前記第2のコンテンツの類似度を計算する統合類似度計算機能と、
    この統合類似度計算機能で計算した類似度に基づいて、検索要求に対し、前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする統合ランキング生成機能と、
    をコンピュータに実行させるための請求項12記載のコンテンツ処理プログラム。
  15. 前記統合ランキング生成機能は、計算した類似度に基づいて、検索要求に対し、類似度が高いものから順に前記第1のコンテンツと前記第2のコンテンツとを統合的にランキングする、
    ことを特徴とする請求項14記載のコンテンツ処理プログラム。
  16. 前記クロス・ランキング機能は、
    前記統合インデックスで扱われている表現形式を用い、前記第1のコンテンツと前記第2のコンテンツの間の相対類似度を計算するクロス類似度計算機能と、
    このクロス類似度計算機能により計算した相対類似度を用い、それぞれの前記第1のコンテンツに対して前記第2のコンテンツをランキングし、それぞれの前記第2のコンテンツに対して前記第1のコンテンツをランキングするクロス・ランキング生成機能と、
    をコンピュータに実行させるための請求項12記載のコンテンツ処理プログラム。
  17. 前記クロス・ランキング生成機能は、計算した類似度を用い、それぞれの前記第1のコンテンツに対して類似度が高いものから順に前記第2のコンテンツをランキングし、または、それぞれの前記第2のコンテンツに対して類似度が高いものから順に前記第1のコンテンツをランキングする、
    ことを特徴とする請求項16記載のコンテンツ処理プログラム。
  18. 前記表示機能は、
    初期検索結果として前記第1のコンテンツと前記第2のコンテンツとのリストを表示する統合ランキング表示機能と、
    前記第1のコンテンツが選択されてズームインされると当該第1のコンテンツに関連付けられた前記第2のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させ、または、前記第2のコンテンツが選択されてズームインされると当該第2のコンテンツに関連付けられた前記第1のコンテンツをズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させるクロス・ランキング表示機能と、
    をコンピュータに実行させるための請求項12記載のコンテンツ処理プログラム。
  19. 少なくとも2種以上の性質の異なるコンテンツのテキストから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け工程と、
    前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示工程と、
    を含むことを特徴とするコンテンツ処理方法。
  20. 第1のコンテンツのテキストとこの第1のコンテンツとは性質の異なる第2のコンテンツのテキストとから代表キーワードを抽出し、抽出した代表キーワードを用いて前記各コンテンツの内容の両方を同じ形式に変換することでお互いの相対類似度を計算できるインデックスを生成し、当該インデックスを用いて検索要求と前記各コンテンツとの間の類似度を計算し、当該類似度が高いものから順に前記各コンテンツを統合的にランキングした統合ランキングを前記検索要求に対して関連付けとともに、前記インデックスを用いて前記各コンテンツ間の類似度を計算し、当該類似度が高いものから順に相互にランキングしたクロス・ランキングを前記各コンテンツに対して関連付け関連付け工程と、
    前記統合ランキングを初期検索結果として表示させるとともに、当該統合ランキングにおける一のコンテンツの選択に基づいて前記クロス・ランキングから得られる関連コンテンツを、同一画面内で詳細度変化や表示メディア遷移を連続的に実現するズーミングの操作/挙動に関するズーミング記述を用いて連続的に表示させる表示工程と、
    を含むことを特徴とするコンテンツ処理方法。
JP2005221204A 2005-07-29 2005-07-29 コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法 Expired - Fee Related JP4836068B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005221204A JP4836068B2 (ja) 2005-07-29 2005-07-29 コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005221204A JP4836068B2 (ja) 2005-07-29 2005-07-29 コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法

Publications (2)

Publication Number Publication Date
JP2007034961A JP2007034961A (ja) 2007-02-08
JP4836068B2 true JP4836068B2 (ja) 2011-12-14

Family

ID=37794102

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005221204A Expired - Fee Related JP4836068B2 (ja) 2005-07-29 2005-07-29 コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法

Country Status (1)

Country Link
JP (1) JP4836068B2 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4768537B2 (ja) 2006-07-18 2011-09-07 株式会社リコー コンテンツ閲覧システムおよびプログラム
US8484192B1 (en) 2007-04-30 2013-07-09 Google Inc. Media search broadening
US8631440B2 (en) 2007-04-30 2014-01-14 Google Inc. Program guide user interface
JP2009110291A (ja) * 2007-10-30 2009-05-21 Toshiba Corp 情報提供サーバおよび情報提供方法
JP5010624B2 (ja) * 2009-02-10 2012-08-29 ヤフー株式会社 検索装置
US9838348B2 (en) 2014-12-31 2017-12-05 Yahoo Holdings, Inc. Electronic message search system and method

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3810463B2 (ja) * 1995-07-31 2006-08-16 株式会社ニューズウオッチ 情報フィルタリング装置
JP2004258887A (ja) * 2003-02-25 2004-09-16 Canon Inc 文書管理システム

Also Published As

Publication number Publication date
JP2007034961A (ja) 2007-02-08

Similar Documents

Publication Publication Date Title
US8392834B2 (en) Systems and methods of authoring a multimedia file
JP4893243B2 (ja) 画像要約方法、画像表示装置、kツリー表示システム、kツリー表示プログラム、および、kツリー表示方法
US8812945B2 (en) Method of dynamically creating real time presentations responsive to search expression
US8009179B2 (en) Content browsing system, content browsing method, and computer program product
US7428705B2 (en) Web map tool
US7149755B2 (en) Presenting a collection of media objects
US7908284B1 (en) Content reference page
US20060085735A1 (en) Annotation management system, annotation managing method, document transformation server, document transformation program, and electronic document attachment program
US20030191776A1 (en) Media object management
JP4669912B2 (ja) コンテンツ閲覧システム、プログラムおよびコンテンツ閲覧方法
US20070300151A1 (en) Content converting device, content display device, content browsing device, content converting method, content browsing method, and computer program product
JP4469868B2 (ja) 説明表現付加装置、プログラムおよび説明表現付加方法
JP4836068B2 (ja) コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法
Ahmadi et al. User-centric adaptation of Web information for small screens
JP2007025786A (ja) コンテンツ検索装置、コンテンツ検索プログラムおよびコンテンツ検索方法
KR100403947B1 (ko) 개인용 전자문서를 생성하는 방법, 시스템 및 컴퓨터프로그램 제조물
JP2003524823A (ja) デジタルソースからの情報の捕獲及び管理のためのシステム及び方法
JP2007034960A (ja) コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法
JP4836069B2 (ja) コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法
JP5391431B2 (ja) コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法
JP4736728B2 (ja) コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法
Christel et al. XSLT for tailored access to a digtal video library
JP4798479B2 (ja) コンテンツ編集装置、コンテンツ編集プログラムおよびコンテンツ編集方法
JP4953190B2 (ja) 表示装置、コンテンツ閲覧方法およびプログラム
JP3604069B2 (ja) 文書間関連度計算装置、その方法およびその記録媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080618

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20080618

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101207

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110510

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110614

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110906

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110920

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141007

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees