JP2003296352A - 情報配信装置、情報提供装置、およびプログラム - Google Patents

Abstract

(57)【要約】 【課題】アクセスデータ等の面倒な入力動作を行うこと
なしに、書籍、音楽、映像等に含まれる文字認識或いは
音声認識可能な情報に関する諸情報を検索して配信する
情報配信装置、同関連情報を提供する情報提供装置、及
びプログラムを提供することを目的とする。 【解決手段】 ＣＣＤカメラ等を介して取得された、
物、操作者の行動、動作、周囲の状況等を含むイベント
情報を取得し、そのイベント情報を認識して、その認識
内容に対応する関連情報を提供、配信する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、例えば、カメラ等
の情報取得手段によって取得した情報において、その情
報中から文字認識或いは音声認識を行い、その認識した
認識情報に対する関連情報を配信・提供する情報配信装
置、情報提供装置、及びプログラムに関する。

【０００２】

【従来の技術】昨今、インターネットを介して多種多様
な文字情報、映像、音楽等の検索及び配信が可能となっ
ている。

【０００３】

【発明が解決しようとする課題】上記のようなインター
ネット等のネットワークを介して様々な情報を検索して
情報を得るためには、その情報に関するアクセスデータ
等を入力する必要がある。即ち、例えば、雑誌等に記載
されているホームページのＵＲＬや、流れてきた音楽の
題名等をパソコンのキーボード等を用いて入力しない
と、それらの関連情報を得ることはできなかった。した
がって、例えば書籍等に記載されているＵＲＬ等をいち
いち入力するのは非常に面倒であるという問題があっ
た。また、例えばラジオ等で流れてきた音楽等に関して
曲名、歌詞等を調べたい場合に、その音楽に関する知識
が多少なりともないと検索することが困難であり、大変
不便であった。

【０００４】本発明は、上記事情に鑑みてなされたもの
であって、アクセスデータ等の面倒な入力動作を行うこ
となしに、書籍、音楽、映像等に含まれる文字認識或い
は音声認識可能な情報に関する諸情報を検索して配信す
る情報配信装置、同関連情報を提供する情報提供装置、
及びプログラムを提供することを目的とする。

【０００５】

【課題を解決するための手段】上記課題を解決するた
め、請求項１記載の発明は、例えば、図１〜図３１に示
すように、関連情報を配信する情報配信装置（情報配信
サーバ３）であって、所定の識別データとその識別デー
タに関連する情報とを対応付けて記憶している関連情報
記憶手段（例えば、関連情報ＤＢ３３２）と、イベント
配信端末（例えば、ユーザ端末２）から配信される、当
該イベント配信端末を利用している使用者の動作、行
動、使用者の周囲の状況を含むイベント情報を監視し、
このイベント情報から前記識別データを認識して取得す
る取得手段（例えば、ＣＰＵ３１等；Ｓ２）と、この取
得手段により取得された識別データに対応する関連情報
（例えば、関連情報１００等）を前記関連情報記憶手段
より取得して前記イベント配信端末に配信する関連情報
配信手段（例えば、ＣＰＵ３１、伝送制御部３４等；Ｓ
８）と、を備えたことを特徴としている。

【０００６】請求項１記載の発明によれば、取得手段に
よって、イベント配信端末から配信される、当該イベン
ト配信端末を利用している使用者の動作、行動、使用者
の周囲の状況を含むイベント情報が監視され、このイベ
ント情報から識別データが認識されて取得され、関連情
報配信手段によって、取得手段により取得された識別デ
ータに対応する関連情報が関連情報記憶手段より取得さ
れてイベント配信端末に配信されるので、ユーザは関連
情報を取得するための情報を入力することなしに関連情
報の提供、配信を実現する。

【０００７】ここで、イベント情報とは、使用者の動
作、行動、使用者の周囲の状況を含む情報であって、文
字認識、或いは音声認識可能な情報を含んでいれば、文
字情報、画像情報、音声情報等の何れであってもよい。

【０００８】また識別データとは、イベント情報に含ま
れており、関連情報を配信するためのデータであって、
文字認識或いは音声認識によって識別可能であれば文字
情報、画像情報、音声情報の何れであってもよい。

【０００９】請求項２記載の発明は、例えば、図１〜図
３１に示すように、関連情報を提供する情報提供装置
（例えば、ユーザ端末２等）であって、ユーザの動作、
行動、ユーザの周囲状況を含む任意のイベント情報（例
えば、書籍１００）を取得するイベント情報取得手段
（例えば、画像データ取得部２６、音声処理装置３０
等；Ｓ１０１、Ｓ２０１、Ｓ３０１、Ｓ４０１、Ｓ５０
１）と、前記イベント情報取得手段によって取得された
イベント情報に含まれる認識情報（例えば、画像１０
１、範囲２００、ＵＲＬ４００、音楽５００、パート６
００等）を文字認識或いは音声認識する認識手段（例え
ば、ＣＰＵ２１；Ｓ１０５、Ｓ２０４、Ｓ３０４、Ｓ４
０２）と、前記認識手段によって文字認識或いは音声認
識された認識情報に関する関連情報（例えば、関連情報
１０２、２０３、３０１、音楽４０１、プロモーション
映像５０１、朗読音６０１）を通信回線網（ネットワー
ク４）を介して検索する検索手段（例えば、ＣＰＵ２１
等；Ｓ１０６、Ｓ２０５、Ｓ３０５、Ｓ４０５〜Ｓ４０
７）と、前記検索手段によって検索された関連情報を出
力させる出力手段（例えば、表示部２３、出力部２５、
音声処理装置３０のスピーカ３０ｃ等；Ｓ１０９、Ｓ２
０７、Ｓ３０７、Ｓ４１１、Ｓ５０８）と、を備えるこ
とを特徴としている。

【００１０】請求項２記載の発明によれば、イベント情
報取得手段によって取得されたイベント情報に含まれる
認識情報が、認識手段によって文字認識或いは音声認識
され、検索手段によってこの文字認識或いは音声認識さ
れた認識情報に関する関連情報が通信回線網を介して検
索され、出力手段によって検索された関連情報が出力さ
れるので、ユーザはイベント情報のうち検索したい内容
である認識情報をいちいち入力して関連情報を検索する
必要がなくなり、大変便利である。

【００１１】ここで、イベント情報とは、前記イベント
情報取得手段より取り込まれるものであって、例えば、
任意の書籍、音楽データ等からの情報であるが、文字認
識或いは音声認識出来るコンテンツ（即ち認識情報）を
含むものであれば、書籍、音楽データに限らず、例えば
商品等、文字情報、音声情報、映像情報等のどのような
形態でもよい。

【００１２】また、認識情報とは、イベント情報に含ま
れる文字認識或いは音声認識可能なデータであって、例
えば、語句、文章、音楽フレーズ、画像等どのようなも
のでもよい。

【００１３】また、関連情報とは、イベント情報、認識
情報に関連した、インターネット等のネットワーク上に
存在する任意の情報であって、その情報媒体は、文字媒
体、音声媒体、映像媒体あるいはこれらの混合したもの
など、どのようなものであってもよい。

【００１４】請求項３記載の発明は請求項２記載の情報
提供装置において、前記イベント情報には音声情報が含
まれ、前記イベント情報取得手段は、任意の音声情報を
前記イベント情報として聞き取る聞き取り手段（例え
ば、音声処理装置３０、マイク３０ｄ等）を備え、前記
認識手段は、前記聞き取り手段によって聞き取られた音
声情報から文字認識或いは音声認識することを特徴とし
ている。

【００１５】請求項３記載の発明によれば、請求項２記
載の発明と同様の効果が得られるのは勿論のこと、特
に、イベント情報には音声情報が含まれており、聞き取
り手段によって、任意の音声情報が前記イベント情報と
して聞き取られ、認識手段によって、聞き取り手段によ
って聞き取られた音声情報から文字認識或いは音声認識
されるので、イベント情報が、文字媒体でなく音媒体の
歌等であってもその関連情報を検索することを可能にす
る。即ち、その音楽フレーズの音声認識、或いはその歌
詞等の文字認識が実行されることとなって音声データに
関する検索、関連情報の提供が実現する。

【００１６】ここで、音声情報とは、例えば、歌、音楽
等であるが、聞き取り手段によって聞き取る事が出来れ
ば、記録媒体に録音されたものでも、例えば、直接演奏
された音楽、テレビ、ラジオ等から放音された音楽、人
の声等であってもよい。

【００１７】請求項４記載の発明は、請求項２又は３に
記載の情報提供装置において、前記イベント情報に含ま
れる認識情報を指定する認識情報指定手段（例えば、入
力部２４等）を備え、前記認識手段は、前記認識情報指
定手段によって指定された認識情報を文字認識或いは音
声認識することを特徴としている。

【００１８】請求項４記載の発明によれば、請求項２又
は３に記載の発明と同様の効果が得られることは勿論の
こと、特に、イベント情報に含まれる認識情報を指定す
る認識情報指定手段を備え、認識手段によって、認識情
報指定手段によって指定された認識情報が文字認識或い
は音声認識されるので、イベント情報のうちユーザ希望
の関連情報を得たい範囲に合わせて認識情報を指定する
ことができ、その部分のみの認識情報を得ることができ
るので、ユーザにとってより効率的な関連情報の提供が
可能となる。

【００１９】請求項５記載の発明は、請求項２〜４の何
れかに記載の情報提供装置において、前記イベント情報
に含まれる認識情報を音声化する音声化手段（例えば、
ＣＰＵ２１、音声処理装置３０等；Ｓ５０７）を備える
ことを特徴としている。

【００２０】請求項５記載の発明によれば、請求項２〜
４の何れかに記載の発明と同様の効果が得られるのは勿
論のこと、特に、イベント情報に含まれる認識情報を音
声化する音声化手段を備えているので、例えば、認識情
報が文字媒体であって、視覚障害等で閲覧出来ない場合
においても聴覚的に把握することができることとなり、
ユーザにとってより関連情報の提供の形態の選択肢が増
えることとなって、より使い勝手が良くなる。

【００２１】請求項６記載の発明は、ユーザの動作、行
動、ユーザの周囲状況を含む任意のイベント情報に含ま
れる識別データに基づいて前記イベント情報に関連する
関連情報を提供する情報提供装置（ユーザ端末２）であ
って、前記イベント情報を取得するイベント情報取得手
段（例えば、画像取得部２６、音声処理装置３０等；Ｓ
３０１、Ｓ５０１）と、前記イベント情報取得手段によ
って取得された前記イベント情報に含まれる前記識別デ
ータ（例えば、ＵＲＬ４００、パート６００等）を文字
認識する識別データ文字認識手段（例えば、ＣＰＵ２１
等；Ｓ３０４、Ｓ５０３）と、前記識別データ文字認識
手段によって文字認識された識別データに基づいて、通
信回線網（ネットワーク４）を介して前記関連情報を取
得する関連情報取得手段（例えば、ＣＰＵ２１等）と、
前記関連情報取得手段によって取得された関連情報（例
えば、音楽４０１、朗読音６０１を出力する出力手段
（例えば、表示部２３、出力部２５、音声処理装置３
０、スピーカ３０ｃ等；Ｓ３０７、Ｓ５０８）と、を備
えることを特徴としている。

【００２２】請求項６記載の発明によれば、識別データ
文字認識手段によって、イベント情報取得手段によって
取得されたイベント情報に含まれる識別データが文字認
識され、関連情報取得手段によって、文字認識された識
別データに基づいて、通信回線網を介して関連情報が取
得され、出力手段によってその関連情報が出力されるの
で、ユーザがイベント情報に含まれる識別データを入力
させたり認識させたりする動作を省略することを可能に
し、関連情報の取得の容易化が実現する。

【００２３】ここで、イベント情報とは、例えば、イベ
ント情報取得手段によって取得されるデータであれば、
文字情報、音声情報、映像情報等どのようなものであっ
てもよい。

【００２４】また、識別データとは、関連情報を識別す
るためのデータであって、例えば、ＵＲＬ、バーコー
ド、デジタル信号データ等であるが、これらに限定され
るものではなくどのようなもであってもよい。

【００２５】また、関連情報を記憶する媒体は、文字媒
体、音声媒体、映像媒体、これらの混合したもの等、ど
のようなものであってもよい。

【００２６】請求項７記載の発明は、請求項６記載の情
報提供装置において、前記識別データは、ホームページ
のＵＲＬ又はバーコードのうち少なくとも何れか一方で
あることを特徴としている。

【００２７】請求項７記載の発明によれば、請求項６記
載の発明と同様の効果が得られるのは勿論のこと、特
に、識別データは、ホームページのＵＲＬ又はバーコー
ドのうち少なくとも何れか一方であるので、ユーザがＵ
ＲＬを入力したり、バーコードを読み取らせたりする作
業を省略することが可能となって、便利さを提供でき
る。

【００２８】請求項８記載の発明は、ユーザの動作、行
動、ユーザの周囲状況を含む所定のイベント情報に含ま
れる識別データに基づいて前記イベント情報に関連する
関連情報を提供する情報提供装置（ユーザ端末２、情報
配信サーバ３）であって、前記所定のイベント情報に関
する関連情報と、前記イベント情報に含まれる識別デー
タとを対応付けて記憶する関連情報記憶手段（例えば、
記録媒体２８Ａ、記録媒体３３Ａ、Ｗｅｂサーバ７等）
と、前記所定のイベント情報を取得するイベント情報取
得手段（例えば、画像データ取得部２６、音声処理装置
３０等；Ｓ３、Ｓ３０１、Ｓ５０１）と、前記イベント
情報取得手段によって取得されたイベント情報の中から
前記識別データを文字認識或いは音声認識して識別する
識別手段（例えば、ＣＰＵ２１等；Ｓ３、Ｓ３０４、Ｓ
５０３）と、前記識別手段によって識別された識別デー
タに対応付けられている関連情報を前記関連情報記憶手
段から取得する関連情報取得手段（例えば、ＣＰＵ２１
等；Ｓ７、Ｓ３０６）と、前記関連情報記憶手段から取
得した関連情報を出力させる出力手段（例えば、表示部
２３、出力部２５、音声処理装置３０等；Ｓ８、Ｓ３０
７、Ｓ５０８）と、を備えたことを特徴としている。

【００２９】請求項８記載の発明によれば、関連情報記
憶手段によって、所定のイベント情報に関する関連情報
と、イベント情報に含まれる識別データとが対応付けて
記憶され、識別手段によって、イベント情報取得手段に
よって取得されたイベント情報の中から識別データが文
字認識或いは音声認識されて識別され、関連情報取得手
段によって、識別された識別情報に対応付けられている
関連情報が関連情報記憶手段から取得され、出力手段に
よって同関連情報が出力されるので、ユーザが識別デー
タを入力したり或いは端末装置等に認識させる操作を行
うことなく関連情報を自動的に提供できることとなっ
て、ユーザの手間が省ける。

【００３０】ここで、イベント情報とはイベント情報取
得手段によって取得される所定の情報であるが、文字認
識或いは音声認識される識別データを備えていれば、例
えば、文字情報、音声情報、映像情報等のどのような形
態であってもよい。

【００３１】また、識別データとは、関連情報記憶手段
に記憶されている関連情報を識別するためのデータであ
れば、文字媒体、音声媒体等どのようなものであっても
よい。また関連情報を記憶する媒体も、文字媒体、音声
媒体、映像媒体、これらの混合等どのような形態であっ
てもよい。

【００３２】請求項９記載の発明は、請求項８記載の情
報提供装置において、前記イベント情報は、文字情報を
含んでおり、前記イベント情報取得手段は、前記文字情
報を閲覧する者の視線に従って文字情報を取得し、前記
識別手段は、前記イベント情報取得手段により読み取ら
れた文字情報の文字認識をして識別を行うことを特徴と
している。

【００３３】請求項９記載の発明によれば、請求項８記
載の発明と同様の効果が得られるのは勿論のこと、特
に、イベント情報取得手段は、書籍を閲覧する者の視線
に従って文字情報を取得し、識別手段は、イベント情報
取得手段により読み取られた文字情報の文字認識をして
識別を行うので、ユーザが文字情報を閲覧すると同時に
その文字情報の認識を行うことが可能となる。

【００３４】請求項１０記載の発明は、所定の識別デー
タとその識別データに関連する関連情報とを対応付けて
記憶している関連情報記憶手段を備え、前記関連情報を
配信するコンピュータに、イベント配信端末から配信さ
れる、当該イベント配信端末を利用している使用者の動
作、行動、使用者の周囲の状況を含むイベント情報を監
視し、このイベント情報から前記識別データを認識して
取得させるための機能と、取得した識別データに対応す
る関連情報を前記記憶手段より取得して前記イベント配
信端末に配信するための機能と、を実行させるためのプ
ログラムである。

【００３５】請求項１０記載の発明によれば、ユーザに
よって関連情報を取得するための情報を入力することな
しに関連情報の配信を実現することができる。

【００３６】請求項１１記載の発明は、通信回線網に接
続され、関連情報を提供するコンピュータに、ユーザの
動作、行動、ユーザの周囲状況を含む任意のイベント情
報を取得させるための機能と、取得したイベント情報に
含まれる認識情報を文字認識或いは音声認識させるため
の機能と、文字認識或いは音声認識した認識情報に関す
る関連情報を通信回線網を介して検索させるための機能
と、検索した関連情報を出力させるための機能と、を実
行させるためのプログラムである。

【００３７】請求項１１記載の発明によれば、ユーザは
イベント情報のうち検索したい内容である認識情報をい
ちいち入力して関連情報を検索する必要がなくなり、大
変便利である。

【００３８】請求項１２記載の発明は、通信回線網に接
続され、ユーザの動作、行動、ユーザの周囲状況を含む
任意のイベント情報に含まれる識別データに基づいて前
記イベント情報に関連する関連情報を提供するコンピュ
ータに、前記イベント情報を取得させるための機能と、
取得されたイベント情報に含まれる前記識別データを文
字認識させるための機能と、文字認識した識別データに
基づいて、通信回線網を介して前記関連情報を取得させ
るための機能と、取得された関連情報を出力させるため
の機能と、を実行させるためのプログラムである。

【００３９】請求項１２記載の発明によれば、ユーザが
イベント情報に含まれる識別データを入力させたり認識
させたりする動作を省略することが可能となって、関連
情報の取得の容易化が実現できる。

【００４０】請求項１３記載の発明は、イベント情報に
関する関連情報と、前記イベント情報に含まれる識別デ
ータとを対応付けて記憶する関連情報記憶手段を備え、
前記関連情報を提供するコンピュータに、前記イベント
情報を取得させるための機能と、取得された前記イベン
ト情報の中から前記識別データを文字認識或いは音声認
識して識別させるための機能と、識別された識別情報に
対応付けられている関連情報を前記関連情報記憶手段か
ら取得させるための機能と、取得した関連情報を出力さ
せるための機能と、を実行させるためのプログラムであ
る。

【００４１】請求項１３記載の発明によれば、ユーザが
識別データを入力或いは認識させることなく関連情報を
自動的に提供できることとなって、関連情報の取得の容
易化が実現できる。

【００４２】

【発明の実施の形態】以下、この発明の実施の形態を、
図面を参照して説明する。

【００４３】［第１の実施の形態］以下、図を参照して
本発明にかかる第１の実施の形態における関連情報配信
システム１について詳細に説明する。

【００４４】図１は、この第１の実施の形態における関
連情報配信システム１の全体構造を示す図である。図１
に示すように、関連情報配信システム１は、後述のＣＣ
Ｄカメラ等から関連情報を配信するための元となる情報
を取得するユーザ端末２（イベント配信端末）と、ユー
ザ端末２によって取得された情報に関連する情報を配信
する情報配信サーバ３（情報配信装置）とが、ネットワ
ーク４（通信回線網）を介して接続されている。

【００４５】ユーザ端末２は、汎用のコンピュータ等か
らなる。そして、図２に示すように、内部に、例えば、
ＣＰＵ２１、ＲＡＭ２２、表示部２３、入力部２４、出
力部２５、画像データ取得部２６、伝送制御部２７、記
憶装置２８、記録媒体２８Ａ等を備えており、記録媒体
２８Ａを除く各部はバス２９により接続されている。

【００４６】ＣＰＵ２１は、記録媒体２８Ａに格納され
たプログラムやデータ等を読み出してＲＡＭ２２へのデ
ータの一時的な格納を行い、各部の制御、データの転
送、種々の演算を行う。

【００４７】具体的に、ＣＰＵ２１は、画像データ取得
部２６より取得した画像データを情報配信サーバ３に送
信する処理や、情報配信サーバ３より配信される関連情
報を受信し、表示部２３等に表示させる処理、或いは出
力部２５より出力させる処理等の制御を行う。

【００４８】ＲＡＭ２２は、ＣＰＵ２１により実行され
る各種処理において、プログラムやデータ等を一時的に
記憶する記憶領域、入力指示と入力データとによって処
理される作業領域などを形成する。そして、図２に示す
ように、ＲＡＭ２２は、情報配信サーバ３より配信され
る関連情報表示画面データを格納する関連情報表示画面
データメモリ２２ａを備えている。

【００４９】表示部２３は、例えば、ＣＲＴやＬＣＤ等
により構成され、ＣＰＵ２１から入力される各種表示デ
ータや画像等を表示する。入力部２４は、例えば、マウ
ス、キーボード等を備え、表示部２３の画面に表示され
た指定情報を選択して指定したり、あるいは所望する指
定情報等を入力することができる。出力部２５は、例え
ば、印刷機等であって、出力手段として、検索された関
連情報等のプリントアウト等を行う。

【００５０】画像データ取得部２６は、情報配信サーバ
３より関連情報を得るための元の情報（イベント情報）
を取得してデジタルデータとして画像処理を行うもので
あって、画像読込部２６ａ、画像処理部２６ｂ、画像蓄
積部２６ｃ等からなる。

【００５１】画像読込部２６ａは、例えば、レーザ光等
のスキャナやＣＣＤを用いたカメラ等からなり、例え
ば、スキャナであれば、書籍等を、ＣＣＤカメラであれ
ば、イベント情報として、ユーザの行動、周囲の状況等
を含むすべての情報をアナログの画像信号として読み込
む。

【００５２】画像処理部２６ｂは、画像読込部２６ａに
よって読み込まれたアナログ画像信号を、標本化と量子
化とによってデジタル画像信号に変換し、更にその補正
処理を行う。即ち、入力画像には一般に各種の歪み、ノ
イズ、周辺減光等を含んでいるので、これらを取り除く
ために、例えば、ノイズ除去、平滑化、鮮鋭化、さらに
画像の２次元ファイルタリング、２値化、認識対象とす
る図形や文字の骨格線を抽出する細線化等の補正処理を
行う。

【００５３】画像蓄積部２６ｃは、画像処理部２６ｂで
画像処理されたデジタル画像データを一時格納する。

【００５４】伝送制御部２７は、モデム、ターミナルア
ダプタ、あるいはルーター等によって構成され、電話回
線、ＩＳＤＮ回線、あるいは専用線等の通信回線を介し
て外部機器（例えば、情報配信サーバ３等）との通信を
行うための制御を行う。

【００５５】記憶装置２８には、プログラムやデータ等
が予め記憶されており、この記憶装置２７は磁気的、光
学的記録媒体、若しくは半導体メモリなどＣＰＵ２１で
読取り可能な記録媒体２８Ａを含んだ構成である。この
記録媒体２８Ａは、ＣＤ‐ＲＯＭ、メモリカード等の可
搬型の媒体やハードディスク等の固定的な媒体を含む。
また、この記録媒体２８Ａに格納するプログラム、デー
タ等は、その一部若しくは全部を他のサーバやクライア
ントからＷＡＮ、ＬＡＮなどのネットワークを介して伝
送制御部２７から受信する構成にしてもよく、更に記録
媒体２８Ａはネットワーク上に構築されたサーバや他の
クライアントの記録媒体であってもよい。

【００５６】具体的に、同記録媒体２８Ａは、本実施例
のイベント情報の送信処理、及び関連情報の表示処理、
或いは出力処理等の各機能を実現するためのアプリケー
ションプログラム、各処理プログラム、及び同処理プロ
グラムで処理されたデータ等を記憶している。そして、
例えば、インターネットブラウザ等を備えている。

【００５７】情報配信サーバ３は、ユーザ端末から送信
されるイベント情報に基づいて、関連情報を検索してユ
ーザ端末２に配信する装置であって、図３に示すよう
に、内部にＣＰＵ３１、ＲＡＭ３２、伝送制御部３４、
記憶装置３２、記録媒体３２Ａを備えており、記録媒体
３２Ａを除く各部はバス３４によって接続されている。

【００５８】ＣＰＵ３１は、記録媒体３３Ａに格納され
たプログラムやデータ等を読み出してＲＡＭ３２へのデ
ータの一時的な格納を行い、各部の制御、データの転
送、種々の演算を行うことにより、関連情報の配信処理
を実行する。

【００５９】具体的に、取得手段として、ユーザ端末２
より送信されるイベント情報より、関連情報と関連づけ
られる識別データを認識して取得する処理の制御を行
う。また、関連情報配信手段として、取得した識別デー
タに対応する関連情報を、記録媒体３３Ａの関連情報Ｄ
Ｂ３３２（後述）より引き出してユーザ端末２に配信す
る処理の制御をする。

【００６０】ＲＡＭ３２は、ＣＰＵ３１により実行され
る各種処理において、プログラムやデータ等を一時的に
記憶する記憶領域、入力指示と入力データとによって処
理される作業領域などを形成する。そして、ＲＡＭ３２
は、図４（ａ）に示すように、内部に、ユーザ端末２よ
り受信した画像データを格納する画像データメモリ３２
ａ、文字認識し検索した識別データを格納する識別デー
タメモリ３２ｂ、ユーザ端末２へ配信する関連情報表示
画面データを格納する関連情報表示画面データメモリ３
２ｃを備えている。

【００６１】記憶装置３３には、プログラムやデータ等
が予め記憶されており、この記憶装置３３は磁気的、光
学的記録媒体、若しくは半導体メモリなどＣＰＵ３１に
よって読み取り可能な記録媒体３３Ａを含んだ構成であ
る。この記録媒３３Ａは、ＣＤ‐ＲＯＭ、メモリカード
等の可搬型の媒体やハードディスク等の固定的な媒体を
含む。また、この記録媒体３３Ａに格納するプログラ
ム、データ等は、その一部若しくは全部を他のサーバや
クライアントからＷＡＮ、ＬＡＮなどのネットワークを
介して伝送制御部３４から受信する構成にしてもよく、
更に記録媒体３３Ａはネットワーク上に構築されたサー
バや他のクライアントの記録媒体であってもよい。

【００６２】上記記録媒体３３Ａに格納されるものとし
て、図４（ｂ）に示すように、例えば、アプリケーショ
ンＤＢ３３１、関連情報ＤＢ３３２がある。

【００６３】アプリケーションＤＢ３３１は、関連情報
の配信処理に必要な各種アプリケーションプログラムを
格納したデータベースであって、例えば、関連情報を関
連情報ＤＢ３３２から検索して取得するための、ＲＤＢ
ＭＳ（Relation Data BaseManagement System）等を備
えている。そのほか具体的に、関連情報の配信処理の全
体的な動作をプログラミングしたメインプログラム３３
１Ａ、ユーザ端末２から送信されるイベント情報から識
別データを認識するための認識プログラム３３１Ｂ、認
識した識別データに対応する関連情報を検索するための
関連情報検索プログラム３３１Ｃ等を備えている。

【００６４】関連情報ＤＢ３３２は、ユーザ端末２より
送信されるイベント情報に含まれる識別データに対応す
る関連情報を記憶、格納するデータベースであって、例
えば、図５に示すように、識別データ３３２ａに対応す
る関連情報３３２ｂの変換テーブルが格納されている。
即ち、例えば、関連情報３３２ｂが、書籍に関連する情
報であるとした場合に、識別データ３３２ａとして、著
者名、出版社、作品名等がある。そして、ユーザ端末２
より送信される情報から情報配信サーバ３のＣＰＵ３１
が上記の様な識別データ３３２ａを認識すると、それに
対応する関連情報３３２ｂがこの様な変換テーブルに基
づいて、引き出される。

【００６５】伝送制御部３４は、モデム、ターミナルア
ダプタ、あるいはルーター等によって構成され、電話回
線、ＩＳＤＮ回線、あるいは専用線等の通信回線を介し
てユーザ端末２等の外部機器との通信を行うための制御
を行う。

【００６６】次に上記の様に構成されている関連情報配
信システム１の動作について、図６に示すフローチャー
トに基づいて、以下説明を行う。

【００６７】まず、ユーザ端末２の操作者は、インター
ネット等のネットワーク４を介してユーザ端末２を情報
配信サーバ３に接続する（ステップＳ１）。

【００６８】次いで、情報配信サーバ３のＣＰＵ３１
は、ユーザ端末２の接続信号を受けて、アプリケーショ
ンＤＢ３３１のメインプログラム３３１Ａを起動させ
て、同プログラム３３１Ａに従って、関連情報を配信す
るための元情報となる画像データの送信をユーザ端末２
に要求する（ステップＳ２）

【００６９】次いで、ユーザ端末２のＣＰＵ２１は、情
報配信サーバ３からの要求に従い、画像取得部２６によ
って取得した（ステップＳ３）画像データを、伝送制御
部２７を介して、情報配信サーバ３に送信する（ステッ
プＳ４）。具体的には、ＣＰＵ２１の制御の下で、画像
読込部２６ａがアナログ画像データを読込み、画像処理
部２６ｂがデジタル化し、更にノイズ等を除去する補正
処理を行い、そして画像蓄積部２６ｃに蓄積する。そし
て、ＣＰＵ２１によって蓄積された画像データが随時、
情報配信サーバ３に送信される。

【００７０】ここで、画像読込部２６ａとは、例えば、
ＣＣＤカメラ等であって、画像データとは、そのＣＣＤ
カメラによって撮像される全ての内容である。従って、
この画像データには、例えば、書籍、ペン、お菓子等の
物の他、例えば、ユーザの動作、行動、周囲の状況をも
が含まれ、これら全てがイベント情報として関連情報を
配信するための元の情報となる。

【００７１】次いで、情報配信サーバ３のＣＰＵ３１
は、ユーザ端末２より配信された画像データを、ＲＡＭ
３２の画像データメモリ３２ａに一時格納し、認識プロ
グラム３３１Ｂを起動させる。そしてＣＰＵ３１は、同
プログラム３３１Ｂに従って、その画像データの文字認
識処理を行い、関連情報と対応付けられている識別デー
タの検索を行う（ステップＳ５）。

【００７２】そしてＣＰＵ３１は、上記の画像データ中
に、識別データの検索処理を実行する。（ステップＳ
６）。その結果ＣＰＵ３１が、識別データ（例えば、著
者１）というデータ）発見し、認識した場合（ステップ
Ｓ６：Ｙｅｓ）は、ステップＳ７に移行する。一方、Ｃ
ＰＵ３１が、いかなる識別データをも認識できない場合
（ステップＳ６：Ｎｏ）は、ステップＳ２に工程を戻
る。

【００７３】ステップＳ７において、ＣＰＵ３１は、認
識した識別データをＲＡＭ３２の識別データメモリ３２
ｂに一時格納し、関連情報検索プログラム３３１Ｃを起
動させ、同プログラムに従って同識別データ（例えば、
著者○×氏）と対応づけられている関連情報を、関連情
報ＤＢ３３２の図５に示したような変換テーブルを介し
て引き出す。そして、ＣＰＵ３１は、関連情報表示画面
データを作成してＲＡＭ３２の関連情報表示画面データ
メモリ３２ｃに格納する。

【００７４】次いでステップＳ８において、上記の関連
情報表示画面データを、伝送制御部３４を介してユーザ
端末２に配信する。

【００７５】上記関連情報表示画面データを受信したユ
ーザ端末２のＣＰＵ２１は、同データをＲＡＭ２２の関
連情報表示画面データメモリ２２ａに格納し、同表示画
面を表示部２３に表示させる（ステップＳ９）。例え
ば、図７に示すような関連情報１００を表示した関連情
報表示画面（Ｇ１）が表示部２３に表示される。

【００７６】次いで、ユーザ端末２のＣＰＵ２１は、操
作者によって終了ボタン（図示なし）の入力信号があっ
たか否かを判断し（ステップＳ１０）、終了ボタンの入
力信号があったと判断した場合（ステップＳ１０：Ｙｅ
ｓ）は、ステップＳ１１に移行して、関連情報配信処理
の終了要求信号を情報配信サーバ３に送信して動作を終
了する。一方、ユーザ端末２のＣＰＵ２１が、終了ボタ
ンの入力信号がないと判断した場合は、ステップＳ３に
工程を戻る。

【００７７】ステップＳ１２において、情報配信サーバ
３のＣＰＵ３１は、ユーザ端末２より関連情報配信処理
の終了要求信号が送信されたか否かを判断し、終了要求
信号が有ったと判断した場合（ステップＳ１２：Ｙｅ
ｓ）は、ユーザ端末２との接続を切断し、本実施の形態
における動作を終了する。

【００７８】一方、情報配信サーバ３のＣＰＵ３１が、
終了要求信号の送信がないと判断した場合（ステップＳ
１２：Ｎｏ）は、ステップＳ２に工程を戻る。即ち、ユ
ーザ端末２の操作者等によって終了ボタンの入力が行わ
れるまで、ユーザ端末２において画像データの取得処理
が行われて情報配信サーバ３に送信される。そして、情
報配信サーバ３において、同画像データ中の識別でデー
タの検索とその検索された識別データと対応づけられて
いる関連情報の検索、及び検索した関連情報のユーザ端
末２への配信という処理が繰り返される。

【００７９】このように第１の実施の形態によれば、ユ
ーザ端末２の画像取得部２６によって取得された画像デ
ータに基づいて、情報配信サーバ３においてその関連情
報が検索されてユーザ端末２に配信されるので、ユーザ
は、関連情報を検索する為のデータ等を入力したり、情
報配信サーバ３に送信したりすることなく自動的に関連
情報を得ることができる。

【００８０】また、例えば、関連情報として広告情報を
配信する場合において、ユーザ端末２から送信される画
像データに商品名が含まれていると、情報配信サーバ３
が、その商品名を識別データとして認識し、その商品に
関する広告情報を配信するという事が可能となり、広告
配信の手段として商業的に利用出来る。

【００８１】尚、上記第１の実施の形態は、本発明を例
示したに過ぎず、適宜変更可能である。例えば、画像デ
ータ取得部２６の画像読込部２６ａは、ＣＣＤカメラに
限られず、どのようなものでもよい。例えば、画像読込
部２６ａとしてのスキャナによって書籍の一ページを読
み込み、そのデータが文字認識されて識別データの検
索、及び識別データと対応づけられた関連情報の配信が
行われるという構成でもよい。

【００８２】［第２の実施の形態］以下、図を参照して
本発明にかかる第２の実施の形態における関連情報提供
システムについて詳細に説明する。

【００８３】まず、本第２の実施の形態の構成を説明す
る。図８は、本発明の関連情報提供システムの全体構造
を示す図である。図８に示すように、本発明の関連情報
提供システム５は、後述のＣＣＤカメラ等から取り込ん
だ書籍、商品等の文字情報（イベント情報）を文字認識
し、さらに文字認識したデータの関連情報を検索するた
めの検索内容の選定を行うユーザ端末２（情報提供装
置）と、関連情報の検索を行う検索エンジン６と、関連
情報のコンテンツを提供するＷｅｂサーバ７ａ、７ｂ、
７ｃ…とから構成され、ユーザ端末２と、検索エンジン
６と、Ｗｅｂサーバ７ａ、７ｂ、７ｃ…とはインターネ
ット等のネットワーク４（通信回線網）で接続されてい
る。

【００８４】図９は、この第２の実施の形態における関
連情報提供システム５の一実施例の概要を説明するため
の説明図である。そして、この第２の実施の形態では、
例えば、ある一ユーザが、任意の書籍１００のページ内
容を、ユーザ端末２に付属されているカメラ（画像読込
部２６ａに該当）等を通してイベント情報としての書籍
１００より、識別情報としての画像１０１をユーザ端末
２内に取り込むと、ユーザ端末２によってその取り込ん
だ画像データ１０１に応じた任意の関連情報１０２が、
検索エンジン６を介してインターネット等のネットワー
ク４上で検索され、その検索された情報を格納している
Ｗｅｂサーバ７より取得されて、ユーザ端末２の表示部
２３に表示されるといった例を示している。

【００８５】ユーザ端末２は、例えば、汎用のコンピュ
ータ等からなる。そして、図１０に示すように、内部
に、例えば、ＣＰＵ２１、ＲＡＭ２２、表示部２３、入
力部２４、出力部２５、画像データ取得部２６、伝送制
御部２７、記憶装置２８、記録媒体２８Ａ等を備えてお
り、記録媒体２８Ａを除く各部はバス２９により接続さ
れている。

【００８６】ＣＰＵ２１は、記録媒体２８Ａに格納され
たプログラムやデータ等を読み出してＲＡＭ２２へのデ
ータの一時的な格納を行い、各部の制御、データの転
送、種々の演算を行う。

【００８７】具体的に、ＣＰＵ２１は、認識手段、或い
は識別データ文字認識手段として、例えば、後述の文字
認識プログラムに従って、後述の画像データ取得部２６
から読み込んだ画像データの文字認識処理の制御を行
う。またＣＰＵ２１は、検索手段、或いは関連情報取得
手段として、文字認識されたデータの関連情報の検索・
取得処理、及び関連情報の表示制御等の制御を行う。

【００８８】ＲＡＭ２２は、ＣＰＵ２１により実行され
る各種処理において、プログラムやデータ等を一時的に
記憶する記憶領域、入力指示と入力データとによって処
理される作業領域などを形成する。

【００８９】また、ＲＡＭ２２は、図１１（ａ）に示す
ように、内部に、読み込んだ画像データを格納する画像
データメモリ２２ｂ、操作者によって指定される検索範
囲データメモリ２２ｃ、検索範囲内において文字認識し
た文字認識データを格納する文字認識データメモリ２２
ｄ、インターネット上で検索された関連情報の検索結果
表示画面データを格納する検索結果表示画面データメモ
リ２２ｅ、及び検索されダウンロードされた関連情報表
示画面データを格納する関連情報表示画面データメモリ
２２ｆを備えている。尚、この関連情報表示画面データ
メモリ２２ｆには一度検索され、表示された関連情報の
表示画面データが複数格納されるので、ユーザは一度検
索した関連情報を、随時引き出すことが可能な構成にな
っている。

【００９０】表示部２３は、例えば、ＣＲＴやＬＣＤ等
により構成され、出力手段として、ＣＰＵ２１から入力
される各種表示データや画像、及び画像データ取得部２
６によって入力された画像等を表示する。

【００９１】入力部２４は、例えば、マウス、キーボー
ド等を備え、表示部２３の画面に表示された指定情報を
選択して指定したり、あるいは所望する指定情報等を入
力することができる。具体的に、例えば、認識情報指定
手段として、操作者によって、読み込まれた文字情報の
画像から、関連情報を検索したい部分、文字等の指定を
行う。

【００９２】出力部２５は、例えば、印刷機等であっ
て、出力手段として、検索された関連情報等のプリント
アウト等を行う。

【００９３】画像データ取得部２６は、イベント情報取
得手段として、書籍のページ等を読み込んでデジタルデ
ータとして画像処理を行うものであって、画像読込部２
６ａ、画像処理部２６ｂ、画像蓄積部２６ｃ等からな
る。

【００９４】画像読込部２６ａは、例えば、レーザ光等
のスキャナやＣＣＤを用いたカメラ等からなり、書籍等
のページをアナログの画像信号として読み込む。

【００９５】画像処理部２６ｂは、画像読込部２６ａに
よって読み込まれたアナログ画像信号を、標本化と量子
化とによってデジタル画像信号に変換し、更にその補正
処理を行う。即ち、入力画像には一般に各種の歪み、ノ
イズ、周辺減光等を含んでいるので、これらを取り除く
ために、例えば、ノイズ除去、平滑化、鮮鋭化、さらに
画像の２次元ファイルタリング、２値化、認識対象とす
る図形や文字の骨格線を抽出する細線化等の補正処理を
行う。

【００９６】画像蓄積部２６ｃは、画像処理部２６ｂで
画像処理されたデジタル画像データを一時格納する。

【００９７】伝送制御部２７は、モデム、ターミナルア
ダプタ、あるいはルーター等によって構成され、電話回
線、ＩＳＤＮ回線、あるいは専用線等の通信回線を介し
て外部機器との通信を行うための制御を行う。

【００９８】記憶装置２８には、プログラムやデータ等
が予め記憶されており、この記憶装置２７は磁気的、光
学的記録媒体、若しくは半導体メモリなどＣＰＵ２１で
読み取り可能な記録媒体２８Ａを含んだ構成である。こ
の記録媒体２８Ａは、ＣＤ‐ＲＯＭ、メモリカード等の
可搬型の媒体やハードディスク等の固定的な媒体を含
む。また、この記録媒体２８Ａに格納するプログラム、
データ等は、その一部若しくは全部を他のサーバやクラ
イアントからＷＡＮ、ＬＡＮなどのネットワークを介し
て伝送制御部２７から受信する構成にしてもよく、更に
記録媒体２８Ａはネットワーク上に構築されたサーバや
他のクライアントの記録媒体であってもよい。

【００９９】上記記録媒体２８Ａに格納されるものとし
て、図１１（ｂ）に示すように、例えば、基本プログラ
ム２８１、インターネットブラウザプログラム２８２、
メインプログラム２８３、文字認識プログラム２８４、
関連情報検索プログラム２８５等を備えている。

【０１００】基本プログラム２８１は、例えば、ＯＳ
（Operation System）と呼ばれるコンピュータの基本的
な動作を制御するものである。

【０１０１】インターネットブラウザプログラム２８２
は、例えば、ネットスケープ社（商号）のネットスケー
プ（商標）のように、インターネット等のネットワーク
４を介して、他の情報処理装置（例えば、検索エンジン
６、Ｗｅｂサーバ７等）と通信する機能を実行し、ＷＷ
Ｗ文書等を閲覧させるのに用いる。

【０１０２】メインプログラム２８３は、本発明の関連
情報提供システム５における全体的な動作を実行するた
めのプログラムであって、例えば、予め設定された複数
の処理（またはプラグラム）等を、予め設定された順序
で順次行う。

【０１０３】文字認識プログラム２８４は、画像データ
取得部２６により読み込まれ、さらにデジタル化、補正
化された画像データを、文字認識する処理を実行するプ
ログラムである。具体的に、文字認識プログラム２８４
には、各種の文字のパターン２８４Ａを予め記憶してお
り、そのパターンと、画像データ取得部２６によりデジ
タル化、補正化されたデータとを比較して文字認識を行
う動作がプログラミングされている。

【０１０４】関連情報検索プログラム２８５は、文字認
識プログラム２８４によって文字認識され、ユーザ端末
２の操作者によって指定された文字に関連する情報を、
インターネット等のネットワーク４を介して検索し、さ
らに検索した結果を表示部２３に表示処理を実行するプ
ログラムである。

【０１０５】検索エンジン６は、ユーザ端末２より送信
された検索データに基づいて、それに関連する（包含す
る）ｈｔｍｌ文書、画像、音声等のデータを、ネットワ
ーク４上に接続された複数のＷｅｂサーバ７ａ、７ｂ、
７ｃ…にアクセスを行って検索し、該当するデータをＵ
ＲＬと共に一覧にしてユーザ端末２に送信させる装置で
ある。

【０１０６】Ｗｅｂサーバ７ａ、７ｂ、７ｃ…は、様々
なコンテンツを格納したデータベースをそれぞれ備えて
おり、ＵＲＬの要求に従って、該当コンテンツをデータ
ベースより読み出してＨＴＭＬ化してユーザ端末２等に
送信する装置である。

【０１０７】上記のように構成されている第２の実施の
形態における関連情報提供システム５の動作を、図１２
に示すフローチャートに沿って以下に説明する。

【０１０８】ユーザ端末２の操作者が、入力部２４を用
いて関連情報認識ツールの起動等を指定すると、関連情
報を検索するためのメインプログラム２８３が起動され
る。そして、ＣＰＵ２１は、このメインプログラム２８
３に従って、関連情報検索のための各処理を開始する。

【０１０９】まず、画像データ取得部２６の画像読込部
２６ａは、関連情報を検索したい書籍（例えば、書籍１
００）のページからコンテンツデータ（イベント情報；
例えば、１０１）をアナログの画像データとして読み取
る（ステップＳ１０１）。

【０１１０】次いで、画像処理部２６ｂは、このアナロ
グの画像データをデジタル画像データに変換するととも
に、所定の補正処理を行う（ステップＳ１０２）。次い
で、画像蓄積部２６ｃは、補正された画像データを格納
し、ＣＰＵ２１は、画像蓄積部２６ｃに格納されている
デジタル画像データから画像データ表示画面データを作
成する。そしてＣＰＵ２１は、上記表示画面データをＲ
ＡＭ２２の画像データ表示画面データメモリ２２ｂに格
納し、同表示画面データを表示部２３に表示させる（ス
テップＳ１０３）。すると例えば、図１３に示すような
画像データ表示画面（Ｇ２）が表示部２３に表示され
る。

【０１１１】次いで、ユーザ端末２の操作者によって、
表示部２３に表示されている画像データ表示画面Ｇ２
（図１３）において、関連情報を検索したい文字が含ま
れている範囲の指定処理が入力部２４を介して行われる
と、ＣＰＵ２１は、その指定範囲を認識し、その検索範
囲データをＲＡＭ２２の検索範囲データメモリ２２ｃに
格納する（ステップＳ１０４）。範囲の指定処理とは、
具体的には、入力部２４のマウス等を用いて、関連情報
を検索したい画像の範囲２００、例えば、図１３の画像
データ表示画面（Ｇ２）上の「スパゲティプッタネス
カ」を含む範囲２００を指定する処理である。

【０１１２】ＣＰＵ２１は、指定範囲を認識すると、文
字認識プログラム２８４を起動し、同プログラムに従っ
て、ステップＳ１０４で指定された範囲データにおける
画像（図１３の「スパゲティ・プッタネスタ」を含む画
像範囲２００）の文字認識処理を行う（ステップＳ１０
５）。具体的には、ＣＰＵ２１は、画像における文字の
特徴を把握する特徴抽出処理を実行して、文字パターン
２８４Ａの文字パターンと比較して、文字の認識、特定
を行う。即ち、ＣＰＵ２１は、関連情報の認識情報とし
て、『スパゲティプッタネスカ』であると文字認識及び
特定を行う。そして、ＣＰＵ２１は、文字認識した文字
認識情報（スパゲティプッタネスカ）をＲＡＭ２２の文
字認識データメモリ２２ｄに一時格納する。

【０１１３】次いで、ＣＰＵ２１は、インターネットブ
ラウザプログラム２８２を起動して、ユーザ端末２をイ
ンターネット等のネットワーク４に接続する。そして、
ステップＳ１０５で文字認識した認識データとしての
『スパゲティプッタネスカ』を、伝送制御部２７を介し
て検索エンジン６に送信する。すると、検索エンジン６
は、ユーザ端末２より受信した認識データ『スパゲティ
プッタネスカ』を包含する情報、関連する情報等を、ネ
ットワーク上で接続されているＷｅｂサーバ７ａ、７
ｂ、７ｃ…に問い合わせて検索する。そして、該当する
ページのＵＲＬ、概要等のデータを含むインデックスペ
ージデータをユーザ端末２に送信する（ステップＳ１０
６）。

【０１１４】上記のインデックスデータを受信したユー
ザ端末２のＣＰＵ２１は、検索結果表示画面データを作
成し、同データをＲＡＭ２２の検索結果表示画面データ
メモリ２２ｅに格納し、そして、図１４に示すような検
索結果表示画面（Ｇ３）を表示部２３に表示させる（ス
テップＳ１０７）。この検索結果表示画面（Ｇ３）に
は、検索の結果、関連情報の候補となるデータの概要２
０１と、そのＵＲＬ２０２が一覧に表示されている。
尚、検索の結果、関連情報が見あたらない場合は、この
検索結果表示画面（Ｇ３）にエラー表示がなされるもの
とする。

【０１１５】次いで、ユーザ端末２の操作者は、検索結
果表示画面（Ｇ３）のうち、閲覧を希望する関連情報の
ＵＲＬ（例えば、ＵＲＬ２０２）を、入力部２４のマウ
ス等を用いて選択する。この選択信号を受信したＣＰＵ
２１は、この選択信号のＵＲＬに該当するデータを保有
しているＷｅｂサーバ７（例えば、Ｗｅｂサーバ７ａ）
に、データの送信を要求する。すると、Ｗｅｂサーバ７
ａより指定ＵＲＬのデータが取得され、ユーザ端末２に
送信される（ステップＳ１０８）。

【０１１６】次いで、ユーザ端末２のＣＰＵ２１は、上
記のように、Ｗｅｂサーバ７（例えば、Ｗｅｂサーバ７
ａ）より受信したデータから関連情報２０３を含む関連
情報表示画面データを作成し、ＲＡＭ２２の関連情報表
示画面データメモリ２２ｆに一時格納する。そして、Ｃ
ＰＵ２１は、図１５に示すような関連情報表示画面（Ｇ
４）を表示部２３に表示させる（ステップＳ１０９）。

【０１１７】上記の関連情報２０３を閲覧したユーザ端
末２の操作者が、この関連情報閲覧処理を終了する場合
は、終了ボタン（図示なし）等を、入力部２４のマウス
でクリックし、他の関連情報を閲覧する場合は、戻るボ
タン（図示なし）をクリックする。ＣＰＵ２１が、戻る
ボタンの入力信号の有無を判断し（ステップＳ１１
０）、その結果、戻るボタンの入力があったと判断した
場合（ステップＳ１１０：Ｙｅｓ）は、ステップＳ１０
７に工程をもどり、戻るボタンの入力が無いと判断した
場合（ステップＳ１１０：Ｎｏ）は、ステップＳ１１１
に移行する。ステップＳ１１１において、ＣＰＵ２１
は、終了ボタンの入力の有無を判断する。その結果、Ｃ
ＰＵ２１が、終了ボタンの入力信号を受信した場合（ス
テップＳ１１１：Ｙｅｓ）は、この第２の実施の形態に
おける動作が終了し、終了ボタンの入力信号を受信しな
い場合（ステップＳ１１１：Ｎｏ）は、ステップＳ１０
９に移行する。

【０１１８】尚、閲覧した関連情報の表示画面データ
は、全て、ＲＡＭ２２の関連情報表示画面データメモリ
２２ｆに格納され、再度閲覧する場合は、同コンテンツ
を格納しているＷｅｂサーバ７に再度アクセスすること
なく、接続が切れた後でも閲覧できるようになってい
る。また、この関連情報を出力部２５より、プリントア
ウトする構成でもよい。

【０１１９】尚、上記で説明した実施の形態の動作は、
例えば、一般的なコンピュータに、関連情報検索を行う
ためのソフトウェア等をインストールすることで実現す
る構成であってもよい。

【０１２０】また、文字認識処理と、関連情報検索処理
は、ユーザ端末２とネットワーク４を介して接続された
別のサーバ（例えば、第１の実施の形態における情報配
信サーバ３）等が行う構成でもよい。この場合、ユーザ
は、関連情報を検索したいコンテンツのデータを読込、
その画像データを前記のサーバ（例えば、第１の実施の
形態における情報配信サーバ３）等に送信するだけで、
特別なソフトウェア等をインストールする必要がなくな
る。

【０１２１】このように、本発明の第２の実施の形態に
おける関連情報提供システム５によれば、ユーザは、関
連情報を得たい書物等の検索元のデータを、いちいちキ
ーボード等で打ち込む手間を省くことが出来、大変便利
である。

【０１２２】また、本第２の実施の形態において、関連
情報の検索を行う検索エンジン６を介して実行する構成
で説明を行ったが、ユーザ端末２のＣＰＵ２１だけで行
う構成であってもよい。

【０１２３】尚、上記第２の実施の形態は、本発明を例
示したに過ぎず、適宜変更可能である。例えば、画像デ
ータ取得部２６から画像データを読み取って検索する対
象は、書籍等に限られず、画像データ取得部２６ａによ
って画像入力され、文字認識が出来ればどのようなもの
であってもよい。例えば、缶コーヒーの文字、お菓子の
箱の文字、或いは携帯電話の文字、ＰＤＡの表示文字、
ユーザのＴシャツ等、どのようなものでもよい。

【０１２４】また、本実施の形態において、関連情報を
検索する対象を文字とし、文字認識を行う内容で説明し
たが、例えば、ユーザ端末２に画像認識を行うプログラ
ムを備え、画像データ取得部２６の画像読込部２６ａか
ら入力された画像を画像認識し、その画像と同じものを
含む画像データをネットワーク４上で検索し、その画像
データの関連情報の検索、提供というシステムであって
もよい。この場合の画像として例えば、有名な絵画の画
像、ブランドのロゴ、キャラクター等である。また、例
えば、関連情報は、文字媒体に限られるものではなく、
ＣＭ等の映像、音楽等を含むものであってもよい。尚、
関連情報が音楽である場合は、ユーザ端末２に音楽の出
力可能な機能が備えられているものとする。

【０１２５】また、画像データ取得部２６の画像読込部
２６ａによって読み込まれた書籍（例えば、書籍１０
０；Ｇ２）等の文字情報のうち、関連情報の検索対象と
なる部分（例えば、２００）をユーザ端末２の操作者に
よって指定を行う方法で説明を行ったが、これに限られ
るものではない。例えば、読み取られた書籍等のイベン
ト情報のうち、ＣＰＵ２１が検索対象部分を自動的に判
断して行う方法であってもよい。具体例として、画像読
込部２６ａを介して本の表紙を取り込むと、ＣＰＵ２１
が、その表紙に記載されている著者名を自動的に認識し
て、その著者に関する情報を自動的に検索する。或い
は、取得された検索対象が文章の場合、例えば、頻度の
高い単語を自動認知して、その関連情報を検索したり、
更に、取得した文章中に含まれる文字の全てに関する関
連情報の検索を行うといった構成であってもよい。即
ち、頻度や、予め決められた項目など、所定の検索対象
を特定する条件に基づいて、取得された画像データを取
得すると、操作者によって検索事項を特定されなくとも
自動的にその関連情報を検索するシステムであってもよ
い。

【０１２６】また、画像データ取得部２６の画像読込部
２６ａは、スキャナ、ＣＣＤカメラ等どのようなもので
もよく、ユーザ端末２本体に内蔵されている構成であっ
ても、内蔵されていない構成であってもよい。例えば、
小型スキャナや、小型カメラ等を指先に取り付け、関連
情報を検索したい画像部分、文字部分のみを指でなぞる
ことによって情報を読み込む構成でもよい。そして、上
記のような機械が、読み込んだ情報を、ユーザ端末２に
赤外線、Ｂｌｕｅｔｏｏｔｈ等の無線や、ケーブル等を
介して読み込んだデータを送信する構成であってもよ
い。

【０１２７】［第３の実施の形態］次に、図を参照して
本発明にかかる第３の実施の形態における関連情報提供
システムについて詳細に説明する。

【０１２８】本第３の実施の形態に係る関連情報提供シ
ステムの構成は、図１６に示すようになっている。即
ち、第３の実施の形態に係る関連情報提供システム８
は、ユーザ端末２と、関連情報を提供するＷｅｂサーバ
７ａ、７ｂ、７ｃ…が、ネットワーク４を介して接続さ
れている。尚、ユーザ端末２、及びＷｅｂサーバ７ａ、
７ｂ、７ｃの各構成は、第２の実施の形態のそれらと略
同様のため、各機能についての詳細な説明を省略し、異
なる部分を以下説明する。

【０１２９】本実施例（第３の実施の形態）におけるＷ
ｅｂサーバ７ａ、７ｂ、７ｃ…には、ユーザ端末２に提
供する関連情報データと、その識別データとが対応付け
られて格納されている関連情報ＤＢ７ａ１、７ｂ１、７
ｃ１をそれぞれ備えている

【０１３０】また、図１６に示すように、ユーザ端末２
のＲＡＭ２２には、図１１（ａ）に示す各種メモリに加
え、更に識別データメモリ２２ｇが備えられている。

【０１３１】また、図１６に示すように、ユーザ端末２
の記録媒体２８Ａには、図１１（ｂ）に示す、第２の実
施の形態と同様の各種プログラムに加え、更に識別デー
タ検索プログラム２８６が格納された構成となってい
る。

【０１３２】また、本実施の形態における関連情報を検
索するための被検索対象物（例えば、書籍）には、予め
関連情報を特定するための識別データが含まれている。
この識別データは、Ｗｅｂサーバ７ａ、７ｂ、７ｃ…に
格納されている関連情報コンテンツと対応付けられてお
り、例えば、ホームページのＵＲＬや、バーコード、デ
ジタル信号等で表されている。

【０１３３】上記のように構成されている、第３の実施
の形態における関連情報提供システム８の動作を、図１
７に示すフローチャートに沿って以下で説明する。
（尚、第２の実施の形態の動作と同様の処理について
は、詳細な説明は省略する。）

【０１３４】まず、第２の実施の形態と同様にして、ユ
ーザ端末２の画像データ取得部２６の画像読込部２６ａ
を用いて、コンテンツ（例えば、書籍等）の画像データ
の読込処理が行われる（ステップＳ２０１）。次いで、
ユーザ端末２の画像データ取得部２６の画像処理部２６
ｂによって、図１２のステップＳ１０２と同様にして読
み込んだ画像データの補正処理が実行され（ステップＳ
２０２）、ＣＰＵ２１が、画像データ表示画面データを
作成して、ＲＡＭ２２に格納し、図１８に示すような画
像データ表示画面（Ｇ５）を表示部２３に表示させる
（ステップＳ２０３）。

【０１３５】次いで、ＣＰＵ２１は、文字認識プログラ
ム２８４に従って、表示されている画像表示画面（Ｇ
５）に含まれている文字の文字認識処理を行う（ステッ
プＳ２０４）。

【０１３６】次いで、ＣＰＵ２１は、識別データ検索プ
ログラム２８６を起動し、同プログラムに従って、文字
認識処理を実行した画像データに含まれるＵＲＬ３００
（識別データ）を検索する（ステップＳ２０５）。具体
的には、図１８の画像データ表示画面（Ｇ５）上のＵＲ
Ｌ３００である「http://www.#$&>?*.co.jp」をＣＰＵ
２１が検索し、同識別データを、ＲＡＭ２２の識別デー
タメモリ２２ｇに格納する。

【０１３７】次いで、ＣＰＵ２１は、インターネット等
のネットワーク４を介して、上記のＵＲＬ３００の示す
関連情報を格納しているＷｅｂサーバ７（例えば、Ｗｅ
ｂサーバ７ａとする）にアクセスし、識別データである
ＵＲＬ３００「http://www.#$&>?*.co.jp」に対応付け
られている関連情報の送信要求を行う（ステップＳ２０
６）。

【０１３８】次いで、上記のＷｅｂサーバ７ａより、関
連情報データが送信されると、ＣＰＵ２１は、同関連情
報の関連情報表示画面データを作成してＲＡＭ２２に格
納し、図１９に示すような関連情報３０１を表示する関
連情報表示画面（Ｇ６）を表示部２３に表示させる（ス
テップＳ２０７）。この関連情報画面（Ｇ６）には、関
連情報３０１の表示終了を行うための「終了」ボタン
（図示なし）が設けられている。また、読み込んだ画像
データの中に複数の識別データ（ＵＲＬ）が含まれてい
た場合、次の関連情報を表示させるための「次へ」ボタ
ン（図示なし）も設けられている。

【０１３９】そこで、ＣＰＵ２１は、操作者の入力部２
４による「終了」ボタン（図示なし）の入力があったか
否かを判断し（ステップＳ２０８）、入力があったと判
断した場合（ステップＳ２０８：Ｙｅｓ）は、関連情報
の表示動作を終了させる。一方、「終了」ボタンの入力
がないと、ＣＰＵ２１が判断した場合（ステップＳ２０
８：Ｎｏ）は、ステップＳ２０９に移行する。

【０１４０】ステップＳ２０９において、ＣＰＵ２１
は、「次へ」ボタン（図示なし）の入力信号があったか
否かを判断し（ステップＳ２０９）、入力信号があった
と判断した場合（ステップＳ２０９：Ｙｅｓ）は、ステ
ップＳ２０５に移行して、次のＵＲＬ（識別データ）の
検索処理を実行する。以下同様の工程を経る。

【０１４１】一方、ＣＰＵ２１が、「次へ」ボタン（図
示なし）の入力信号がないと判断した場合（ステップＳ
２０９：Ｎｏ）は、ステップＳ２０７に工程を戻る。

【０１４２】このようにして、画像データ取得部２６に
おいて、取得した画像データを文字認識し、その結果、
ＵＲＬ（識別データ）を検索すると、自動的にその関連
データを取得し、表示部２３に表示させるという動作が
続けられる。例えば、被検索対象物が書籍で、画像読込
部２６ａがＣＣＤカメラの場合、次のページに移ると、
ＣＣＤカメラによって自動的に読み込まれ、文字認識さ
れて、ＵＲＬに該当する文書が検索されるので、ＵＲＬ
に該当する関連情報が表示されることとなる。この場
合、例えば、特殊なブックスタンド１００ａ（図９）等
によって書物を固定し、画像データを確実に取り込む構
成であってもよい。更に、図２０に示す様なブックスタ
ンド１００ａに取り付けられたスキャナ（画像読込部２
６ａに該当）によって所定位置の識別データを確実に取
り込む構成であってもよい。

【０１４３】このように、本発明の第３の実施の形態に
おける関連情報提供システム８によれば、第２の実施の
形態同様、ユーザは、検索するための元データをキーボ
ード等によって入力することなく関連情報を得ることが
できるという便利さを提供できると共に、もともと関連
情報と対応付けられた識別データ（ＵＲＬ等）を自動的
に認識してその対応付けられた関連情報を取得して表示
させるので、より動作の簡略化を実現できる。特に、実
際の書物等においては、関連情報を記載することなく、
例えば、画像、映像等を関連情報として提供できること
となり、書物等の関連情報や補助情報等の付加が容易と
なることによって内容の充実を実現できる。

【０１４４】例えば、教科書にその関連情報として資料
や、映像等を作成しておき、教科書内にそれらの資料デ
ータを取得するための識別データを包含させておくとい
う用い方も可能である。この場合、関連情報としての資
料は、教科書内には含まれておらず、資料のみを随時新
しいものに更新することが出来るという利点がある。ま
た、関連情報として提供される形態は、文字情報の他、
音声情報、映像情報であってもよく、複合的な関連情報
の提供を可能にすることができる。尚、関連情報が音声
情報の場合、ユーザ端末２には、音声情報を出力可能な
機能が備わっている事とする。

【０１４５】或いは、雑誌等の広告に、関連情報として
のその詳細な広告情報を識別するための識別データを記
載しておけば、自動的に、詳細な広告映像等が表示部２
３に表示されることとなり、広告効果も高まる。更に、
その広告映像から、電子商取引のシステムを利用した買
い物を可能な構成にしてもよい。また、例えば、懸賞商
品の応募に関する広告の場合は、その応募用紙、応募要
項等を、出力部２５からプリントアウトしたり、ＦＡＸ
等でユーザに提供したりする構成でもよい。

【０１４６】尚、上記第３の実施の形態は、本発明を例
示したに過ぎず、適宜変更可能である。例えば、関連情
報を識別するための識別データとして、ＵＲＬを例に説
明を行ったが、関連情報を特定出来れば、例えば、バー
コード等どのようなものであってもよい。そして、識別
データがバーコードの場合は、バーコードの解読用デー
タを記録媒体２８Ａに格納しておき、読み込んだコンテ
ンツよりバーコードを解読して関連情報を取得すること
となる。

【０１４７】また、関連情報データを、ネットワーク４
を介した特定のＷｅｂサーバ７ａ、７ｂ、７ｃから取得
する方法の他に、例えば、予め関連情報をユーザ端末２
の記録媒体２８Ａに格納しておき、関連情報の取得を、
ネットワーク４を介さずに実行する構成であってもよ
い。即ち、上記のような予め関連情報を格納した記録媒
体２８ＡのＣＰＵ２１が読み取り可能な状態にしてお
き、書物に含まれる識別データをＣＰＵ２１が認識する
と、対応する関連情報を、前記の記録媒体２８Ａから読
み出す構成であってもよい。

【０１４８】［第４の実施の形態］次に、図を参照して
本発明の第４の実施の形態における関連情報提供システ
ムについて詳細に説明する。

【０１４９】図２１は、本第４の実施の形態における一
実施例の概要を説明するための説明図である。図２１に
おいては、前記の第３の実施の形態と同様にして、書籍
１００等の文字媒体のコンテンツに含まれている識別デ
ータであるＵＲＬ４００をユーザ端末２が認識すると、
それに対応付けられた音楽データを関連情報としてＷｅ
ｂサーバ７からダウンロードし、ユーザ端末２から音楽
４０１を出力させるという内容を示している。

【０１５０】次いで、第４の実施の形態における関連情
報提供システムの構成は、図１６に示す第３の実施の形
態の関連情報提供システム８とほぼ同様であるので、関
連情報提供システム８を用いて説明を行うこととし、異
なる部分についてのみ以下に説明を行う。

【０１５１】まず、本実施の形態において、関連情報と
してユーザ端末２に提供されるのは、音楽データであ
る。この音楽データは、音楽元データと、この音楽元デ
ータを識別する音符データ等からなっている。そして、
音符データとは、例えば、楽器等の種類によって異なる
波形データである音色データ、音符の高低（音階等）を
指定する音高データ、音符の発音時間を指定する音長デ
ータ、及び発音の強弱を指定するベロシティデータ等の
パラメータのことであり、音楽元データは、前記音色デ
ータ、音高データ、音長データ、ベロシティデータによ
って構成されている。そして、ユーザ端末２の音声処理
装置３０の音声処理部３０ｂ（後述）は、当該音楽元デ
ータに従って、所定の音楽の数フレーズを楽音として再
生する。

【０１５２】本実施例におけるユーザ端末２の内部構成
は、図２２に示すように、ＣＰＵ２１、ＲＡＭ２２、表
示部２３、入力部２４、出力部２５、画像データ取得部
２６、伝送制御部２７、記憶装置２８、記録媒体２８Ａ
に加え、音声処理装置３０がバス２９によって接続され
ている。

【０１５３】音声処理装置３０は、更に、音源３０ａ、
音声処理部３０ｂ、スピーカ３０ｃを備えている。音源
３０ａは、ＭＩＤＩ（Musical Instrument Digital Int
erface）規格に準じた、例えば、ＰＣＭ（Pulse Code M
odule）音源により構成され、複数の音色のＰＣＭ波形
データが記憶された波形データＲＯＭ３０ａ１を有す
る。そして、例えば、ＣＰＵ２１は、関連情報としての
音楽データによって指定された音高に対応するＰＣＭ波
形データを波形データＲＯＭ３０ａ１から読み出し、音
声処理部３０ｂに出力する。

【０１５４】波形データＲＯＭ３０ａ１に記憶される波
形データの音色は、例えば、ギター、ピアノ等の弦楽
器、ドラムス等の打楽器、トランペット等の管楽器な
ど、複数の音色が記憶されており、ＣＰＵ２１の制御に
よって音色が選択されるようになっている。

【０１５５】音声処理部３０ｂは、図示しないＡ／Ｄコ
ンバータ、Ｄ／Ａコンバータ、ＬＰＦ（Low Pass Filte
r）、及び増幅器等により構成されている。音声処理部
３０ｂは、ＣＰＵ２１から入力される音楽元データ等の
デジタルデータをＤ／Ａコンバータによりアナログデー
タに変換し、増幅器を介してスピーカ３０ｃに出力し、
スピーカ３０ｃから同データに基づく音声が放音され
る。

【０１５６】より具体的には、音声処理部３０ｎは、Ｃ
ＰＵ２１から入力されたＰＣＭ波形データをＤ／Ａ変換
し、ＬＰＦによって所定の周波数以上の周波数帯域にお
ける信号をカットしてノイズを除去し、増幅器を介し
て、スピーカ３０ｃに出力する。スピーカ３０ｃは、音
声処理部３０ｂから入力される所定の音色・音高・音長
・ベロシティデータに従って放音する。尚、放音する楽
音は短音でもよいし、和音や異なる音色の同時発音であ
ってもよい。

【０１５７】また、図１６に示す、Ｗｅｂサーバ７ａ、
７ｂ、７ｃ…の関連情報ＤＢ７ａ１、７ｂ１、７ｃ１に
格納されている関連情報は、ユーザ端末２に提供される
音楽データ（音楽元データと音符データ）であり、検索
対象物である文字媒体コンテンツ（例えば、書籍）に含
まれている識別データと対応付けられて記録されてい
る。

【０１５８】また、第４の実施の形態におけるユーザ端
末２のＲＡＭ２２の内部構成は、図２３に示すように、
前実施例までと同様の、画像データ表示画面データメモ
リ２２ｂ、文字認識データメモリ２２ｄ、識別データメ
モリ２２ｇ、関連情報表示画面データメモリ２２ｆに加
え、更に、関連情報として出力される音楽データを格納
する音楽データメモリ２２ｈを備えている。

【０１５９】次に上記のように構成された、本発明の第
４の実施の形態における関連情報提供システム８の動作
を図２４に示すフローチャートに沿って説明する。尚、
図１７に示す第３の実施の形態における動作と同様の処
理については、詳細な説明を省略する。

【０１６０】まず、図１７に示す第３の実施の形態で説
明した、ステップＳ２０１〜ステップＳ２０５までの動
作とほぼ同様の動作が、図２４のステップＳ３０１〜ス
テップＳ３０５において実行される。

【０１６１】即ち、関連情報としての音楽データと対応
付けられている識別データ（例えば、ＵＲＬ４００）を
含んだ書籍（例えば、書籍１００）等の画像データが、
ユーザ端末２に読み込まれ（ステップＳ３０１）、補正
され（ステップＳ３０２）、表示部２３に表示される
（ステップＳ３０３）。そして、同画像データが文字認
識されて、（ステップＳ３０４）、ＵＲＬ、バーコード
等からなる識別データ（例えば、ＵＲＬ４００）の検索
処理が実行される（ステップＳ３０５）。

【０１６２】次いで、ＣＰＵ２１は、インターネット等
のネットワーク４を介して、識別データ（例えば、ＵＲ
Ｌ４００）の示す関連情報を格納しているＷｅｂサーバ
７（例えば、Ｗｅｂサーバ７ａとする）にアクセスし、
識別データに対応付けられている関連情報の送信要求を
行う（ステップＳ３０６）。

【０１６３】次いで、上記のＷｅｂサーバ７ａより、関
連情報としての音楽データが送信されると、ＣＰＵ２１
は、同データを、ＲＡＭ２２の音楽データメモリ２２ｈ
に格納すると共に、同データを音楽処理装置３０の音楽
処理部３０ｂを介してスピーカ３０ｃより音声出力させ
る（ステップＳ３０７）。尚、表示部２３には、この音
楽の放音を終了させるための「終了」ボタン（図示な
し）が表示されており、操作者は、音楽（例えば、音楽
４０１）の放音を止めたい場合に入力部２４等を用いて
選択する。

【０１６４】そこで、ＣＰＵ２１が、「終了」ボタン
（図示なし）の入力信号が入力されたと判断した場合
（ステップＳ２０８：Ｙｅｓ）は、音楽（例えば、音楽
４０１）の放音処理を終了させる終了信号を音声処理装
置３０に送信し、これをもって本第４の実施の形態にお
ける動作が終了する。一方、ＣＰＵ２１が「終了」ボタ
ンの入力信号の入力がないと判断した場合（ステップＳ
２０８：Ｎｏ）は、ステップＳ３０７に移行し、放音処
理を続ける。

【０１６５】尚、音楽データの取得を表す例えば、ＵＲ
Ｌ、バーコード等の識別データ（例えば、ＵＲＬ４０
０）が、例えば、イベント情報である書籍（例えば、書
籍１００）の毎ページ、或いは章といった区分ごとに含
まれている場合は、ユーザ端末２の画像データ取得部２
６の画像読込部２６ａ（例えば、ＣＣＤカメラ等）によ
って随時、書籍１００のページの画像データが読み込ま
れて、新たな識別データをＣＰＵ２１が認識する度にそ
れに対応する音楽データが取得されて、音楽４０１が放
音されるようになっている。

【０１６６】即ち、例えば、本を読んでいる読者に対し
て、その場面場面にあったＢＧＭを随時提供することが
可能となる。或いは、雑誌等において、広告ページに対
し、そのＣＭメッセージを流したりする事が可能とな
る。また、例えば、視線を察知するセンサー（画像読込
部２６ａ）を読者の顔等に装着し、その視線が、文章中
の効果音（例えば、「バーン」）をバーコード等により
文字認識すると、同効果音データを取得し、スピーカ３
０ｃから「バーン」と放音させるといった構成でもよ
い。

【０１６７】このように、本第４の実施の形態における
関連情報提供システム８によれば、文字媒体のコンテン
ツに対し、その関連情報を、文字情報のみならず、音声
情報をも含めてユーザに提供することができる。

【０１６８】尚、上記第４の実施の形態は、本発明を例
示したに過ぎず、適宜変更可能である。即ち、本第４の
実施の形態においては、ユーザ端末２は、ネットワーク
４を介した他のサーバ（Ｗｅｂサーバ７）より、音楽デ
ータを取得していたが、予め音楽データを格納した音楽
ファイル等をユーザ端末２の記録媒体２８Ａ等にインス
トールしておく構成であってもよい。この場合、ＣＰＵ
２１が書籍等（例えば、書籍１００等）の識別データ
（例えば、ＵＲＬ４００）を認識すると、ＣＰＵ２１は
更に、前記記録媒体２８Ａに格納されている音楽ファイ
ルから該当の音楽データを読み出し、音声処理装置３０
によって音楽４０１が出力される。

【０１６９】［第５の実施の形態］次に、図を参照して
本発明にかかる第５の実施の形態における関連情報提供
システムについて詳細に説明する。

【０１７０】図２５は、本第５の実施の形態における一
実施例の概要を説明するための説明図である。図２５に
おいて、ユーザ端末２に備えられたマイク３０ｄ等を介
して、室内等に流れている音楽５００を聴き取り、そし
てその音楽５００を認識する。更にその認識情報に基づ
いて、その音楽５００に関連する情報をＷｅｂサーバ７
上で検索し、該当する関連情報（例えば、プロモーショ
ン映像５０１）を取得し表示部２３に表示させるという
内容を示している。

【０１７１】第５の実施の形態における関連情報提供シ
ステムの構成は、図１６に示す第４の実施の形態の関連
情報提供システム８とほぼ同様であるので、関連情報提
供システム８を用いて以下に説明を行うことする。即
ち、図１６に示すようにユーザ端末２、及びＷｅｂサー
バ７ａ、７ｂ、７ｃとがネットワーク４を介して、接続
されている。ユーザ端末２、及びＷｅｂサーバ７ａ、７
ｂ、７ｃの機能及び構成は、第４の実施の形態で説明し
た内容とほぼ同様であるので、詳細な説明は省略し、異
なる点のみを以下、説明する。

【０１７２】本発明に係る第５の実施の形態において、
関連情報を検索するための検索対象となるコンテンツは
音楽である。従って、ユーザ端末２の内部構成は、第４
の実施の形態で説明した図２２の音声処理装置３０にお
いて、音源３０ａ、音声処理部３０ｂ、スピーカ３０ｃ
に加え、更にマイク３０ｄ（図２５）を備えている。こ
のマイク３０ｄ（図２５）は、室内等に流れている音楽
を取得する。そして、音声処理部３０ｂは、このマイク
３０ｄ（図２５）から入力されるアナログ信号を検知す
ると、該アナログ信号をＡ／Ｄコンバータによりデジタ
ル信号に変換して、ＣＰＵ２１に出力する。

【０１７３】より具体的に、Ａ／Ｄコンバータは、一定
周波数（例えば、４４．１ｋＨｚ）のサンプリングブロ
ックに同期し、取得した音楽である連続波形のアナログ
信号をＰＣＭデジタル音声データに変換する。変換され
たＰＣＭデジタル音声データは、ＣＰＵ２１に出力さ
れ、一時的にＲＡＭ２２に記憶される。そして、ＣＰＵ
２１は、ＰＣＭデジタル音声データを更にＭＩＤＩ信号
データに変換し、当該ＭＩＤＩ信号データは、関連情報
の検索元データとなる。

【０１７４】また、ユーザ端末２のＲＡＭ２２の内部に
は、図２６に示すように、取り込んだ音楽データを格納
する音楽データメモリ２２ｉ、関連情報を検索する元と
なる音楽データである検索元データを格納する検索元デ
ータメモリ２２ｊ、及び関連情報として提供される関連
情報データメモリ２２ｋを備えている。尚、この関連情
報データメモリ２２ｋに格納されるデータは、文字情
報、映像情報、音楽情報のいずれであってもよい。

【０１７５】また、図１２に示す、Ｗｅｂサーバ７ａ、
７ｂ、７ｃ…の関連情報ＤＢ７ａ１、７ｂ１、７ｃ１に
格納されている関連情報は、ユーザ端末２から送信され
る検索元データと同様の音楽データと対応付けられてお
り、例えば、文字媒体データ、画像、映像、音楽データ
等である。

【０１７６】また、Ｗｅｂサーバ７は、ユーザ端末２よ
り送信される検索元データ（室内より取得し、デジタル
化、ＭＩＤＩ信号データ化されたもの）と、関連情報Ｄ
Ｂ４１に格納されている音楽データとを照合して該当す
る関連情報を検索する検索処理を実行する。

【０１７７】上記のように構成されている、第５の実施
の形態における関連情報提供システム８の動作を、図２
７に示すフローチャートに沿って以下で説明する。

【０１７８】まず、ユーザ端末２の操作者が入力部２４
等により、例えば、関連情報の検索のメインプログラム
２８３を起動させると、ＣＰＵ２１は、音声処理装置３
０のマイク３０ｄ（図２５）より例えば、室内等に流れ
ている音楽５００の音データを取り込む音楽取込処理を
実行する（ステップＳ４０１）。そして、ＣＰＵ２１
は、取り込んだ音楽データをＲＡＭ２２の取込音楽デー
タメモリ２２ｉに格納する。

【０１７９】次いで、ＣＰＵ２１の制御に従って、音声
処理部３０ｂは、音楽データのデジタル信号化処理を行
う（ステップＳ４０２）。

【０１８０】次いで、ＣＰＵ２１は、音楽に関する関連
データを検索可能なＷｅｂサーバ７（例えば、Ｗｅｂサ
ーバ７ｂとする）にネットワーク４を介してアクセスす
る（ステップＳ４０３）。尚、Ｗｅｂサーバ７ｂにアク
セスする動作は、予めメインプログラム２８３に組み込
まれており、自動的に行われることとする。

【０１８１】次いで、ＣＰＵ２１は、ステップＳ４０２
においてデジタル信号化された音楽データを検索元デー
タとして、ＲＡＭ２２の検索元データメモリ２２ｊに格
納した上で、同検索元データを、伝送制御部２７を介し
て、Ｗｅｂサーバ７ｂに送信する（ステップＳ４０
４）。

【０１８２】次いで、Ｗｅｂサーバ７ｂは、ユーザ端末
２から受信した検索元データに基づいて、関連情報の検
索処理を実行する。まず、検索処理として、Ｗｅｂサー
バ７ｂは、ユーザ端末２から送信された検索元データ
（ＭＩＤＩ信号データ）の特徴を抽出する（ステップＳ
４０５）。この特徴とは、例えば、目的信号、蓄積信号
等における瞬時瞬時の音の特徴と抽出する。

【０１８３】次いで、Ｗｅｂサーバ７ｂは、この抽出し
た特徴からヒストグラムを作成する（ステップＳ４０
６）。ヒストグラムとは、信号の瞬時瞬時から得られた
特徴をその性質に応じて複数種類に分類し、各分類ごと
に特徴の発生回数を数えて度数分布グラフにしたもので
ある。

【０１８４】次いで、Ｗｅｂサーバ７ｂは、上記のヒス
トグラムに基づいて、それと該当するものを関連情報Ｄ
Ｂ４１ｂにおいて検索する、高速照合処理を行う（ステ
ップＳ４０７）。

【０１８５】そして、上記検索元データと照合する音楽
データ、或いは極めて近い音楽データが有るとＷｅｂサ
ーバ７ｂが判断した場合（ステップＳ４０８：Ｙｅｓ）
は、ステップＳ４１０に移行し、該当する音楽データが
ないと判断した場合（ステップＳ４０８：Ｎｏ）は、ス
テップＳ４０９に移行する。

【０１８６】ステップＳ４０９において、Ｗｅｂサーバ
７ｂは、ユーザ端末２に対して、該当する関連情報がな
いというエラー信号を送信するので、ユーザ端末２のＣ
ＰＵ２１は、表示部２３にエラー表示をして本動作を終
了させる。

【０１８７】一方、ステップＳ４１０において、Ｗｅｂ
サーバ７ｂは、ユーザ端末２から送信された検索元デー
タの関連情報を関連情報ＤＢ４１ｂより読み出して、関
連情報データをユーザ端末２に送信する。この時、関連
情報とは、例えば、検索元データの曲のプロモーション
映像、曲の解説内容データ、歌詞データ、アーティスト
データ等、どのようなものであってもよい。

【０１８８】次いで、ユーザ端末２のＣＰＵ２１は、Ｗ
ｅｂサーバ７ｂより関連情報データを受信すると、同デ
ータＲＡＭ２２の関連情報データメモリ２２ｋに格納
し、関連情報データを出力する。具体的には、例えば、
表示部２３に曲の内容データを表示させたり、例えば、
プロモーション映像５０１を再生したりする（ステップ
Ｓ４１１）。そして、このステップをもって本第５の実
施の形態の動作が終了する。この時、ユーザ端末２は、
映像（動画）等を再生することを可能にするソフトを備
えていることとし、備えていない場合は、プラグインす
ることとする。

【０１８９】このように、本発明の第５の実施の形態に
おける関連情報提供システム８によれば、書籍等の文字
媒体のコンテンツのみならず、音楽データから、その音
楽データに関する各種関連データをユーザに提供できる
ので、より複合的な関連情報の提供が可能となる。

【０１９０】尚、上記第５の実施の形態は、本発明を例
示したに過ぎず、適宜変更可能である。即ち、例えば、
音楽に関する関連情報を提供するサーバ（Ｗｅｂサーバ
７ｂ）を予め認識しているプログラムがユーザ端末２に
おいて起動されることとしたが、例えば、第２の実施の
形態と同様に、検索エンジン６を介して、Ｗｅｂサーバ
７ｂより関連情報を取得するシステムであってもよい。
即ち、ユーザ端末２において任意の音楽より作成された
検索元データが、検索エンジン６に送信され、検索エン
ジン６において、検索処理（ステップＳ４０５からステ
ップＳ４０７）が実行され、その結果、同検索元データ
に関連する情報を格納しているＷｅｂサーバ７ａ、７
ｂ、７ｃ…を含んだ一覧データがユーザ端末２に送信さ
れる。そこで、同一覧データに基づいて、ユーザ端末２
において関連情報が選択されて、同関連情報を格納して
いるＷｅｂサーバ７（例えば、Ｗｅｂサーバ７ｂ）に関
連情報の送信の要求を行うという構成であってもよい。

【０１９１】また、関連情報を検索するための音楽５０
０を、ユーザ端末２の外部からマイク３０ｄを介して取
得し、そのデータを基に検索元データを作成し関連情報
の検索を行う方法で説明を行ったが、この場合は、例え
ば、オーディオ機器、ラジオ、テレビ等、どのようなも
のから発せられる音楽であってもよい。この場合、例え
ば、曲は聴いたことがあるが、誰の何という曲であるか
わからない、歌詞がわからないといったユーザの問題を
解決することができる。

【０１９２】尚、デジタル音楽データを格納した記録媒
体等のデジタル信号をユーザ端末２の音声処理装置３０
において直接読み取らせ、そのデータを元に関連情報の
検索をネットワーク４上において、実行する構成であっ
てもよい。この場合、外部からのデータに比べてノイズ
等がないため、検索処理がスムーズに行え、音楽データ
に加え、関連情報としてのプロモーション映像を取得す
るソフトを記録媒体等に備えておけば、音楽のみならず
その映像データを記録媒体に記憶させておかずとも、映
像をユーザに提供することが出来る。

【０１９３】また、プロモーション映像５０１等の関連
情報をＷｅｂサーバ７ａ、７ｂ、７ｃ…等に記録してお
く構成で説明を行ったが、ユーザ端末２の記録媒体２８
Ａに予め格納しておき、ネットワーク４を介さずにＣＰ
Ｕ２１が関連情報を取得する方法であってもよい。この
場合、図２７のステップＳ４０５〜ステップＳ４０７の
検索処理もユーザ端末２において実行されることとな
る。

【０１９４】［第６の実施の形態］次に、図を参照して
本発明にかかる第６の実施の形態について以下詳細に説
明する。

【０１９５】本第６の実施の形態は、第２〜第５の実施
の形態に係る関連情報提供システム５、又は関連情報提
供システム８におけるユーザ端末２におけるその他の活
用例を説明する実施例である。図２８は、本第６の実施
の形態の概要を説明するための説明図であって、ユーザ
端末２の操作者によって、台本等のセリフがある書籍１
００のページ画像を、ユーザ端末２に認識させ、朗読を
するパート６００を指定すると、ユーザ端末２が、パー
ト部分を文字認識化すると共に、音声処理化して朗読音
６０１を放音するという内容を示している。ユーザ端末
２の内部構成は図２９に示すようになっており、各構成
は、第４の実施の形態の図２２に示すそれらと略同様の
ため、各機能についての詳細な説明を省略し、異なる部
分を以下説明する。

【０１９６】即ち、本実施例（第６の実施の形態）にお
けるユーザ端末２のＲＡＭ２２には、図３０に示すよう
に、前実施例までと同様の画像データ表示画面メモリ２
２ｂと、文字認識したセリフデータを格納する文字認識
セリフデータメモリ２２ｌと、朗読するための音声デー
タを格納する朗読音声データメモリ２２ｍが備えられて
いる。特に文字認識セリフデータメモリ２２ｌは、ユー
ザによって範囲指定された朗読データを一時的に記録し
ておくメモリであって、一セリフ毎、即ち一回に放音す
る単位ごとに、朗読する順番と対応付けられて記憶され
ており、更に、一度朗読されたセリフには既読データが
付与される構成となっている。

【０１９７】また、記録媒体２８Ａには、第２の実施の
形態で説明を行った図１１（ｂ）に示す各種プログラム
に加え、更に音声変換プログラム２８７が格納されてい
る。この音声変換プログラム２８７は文字認識したデー
タを音声データに変換するためのプログラムであって、
その文字データと対応付けられたその音データが一文字
毎に記録されている音声パターン２８７Ａを備えてい
る。

【０１９８】上記のように構成されている、第６の実施
の形態におけるユーザ端末２の動作を、図３１に示すフ
ローチャートに沿って以下で説明する。尚、第２〜第５
の実施の形態の動作と同様の処理については、図１２、
図１７、図２４、図２７のステップ番号で説明する。

【０１９９】まず、ユーザ端末２の操作者は、パートの
朗読処理をしたい書籍のページ内容をユーザ端末２の画
像読込部２６ａのＣＣＤカメラ等の読取り面に合わせる
と共に、本実施の形態の動作のメインプログラム２８３
等を起動させることによって、ユーザ端末２によるパー
ト朗読処理が開始される。

【０２００】まず、第２〜第５の実施の形態と同様にし
て、ユーザ端末２の画像データ取得部２６において、台
本（例えば、書籍１００）等のコンテンツの画像データ
の読込、表示処理が行われる（ステップＳ５０１）。こ
のステップＳ５０１において、図１１のステップＳ１０
１〜ステップＳ１０３までの処理が行われる。即ち、画
像読込部２６ａによって読み込まれた書籍（例えば、書
籍１００）のページの画像データが、画像処理部２６Ｂ
によって補正、デジタル化されて表示部２３に表示され
ている。

【０２０１】次いで、ユーザ端末２の操作者は、その表
示されている画面において、ユーザ端末２によって朗読
処理をさせたい部分（パート６００）を、入力部２４を
用いて設定する（ステップＳ５０２）。具体的に、例え
ば、読み込んだコンテンツが台本の場合、ある役のセリ
フ部分、或いはナレータ部分等を指定する。この設定範
囲は、何ページであってもよいものとする。

【０２０２】次いで、ＣＰＵ２１は、文字認識プログラ
ム２８４に従って、設定された指定部分（パート６０
０）の文字認識処理を行う。そして、せりふ毎に区切
り、その順番を表すセリフ番号を付与してＲＡＭ２２の
文字認識セリフデータメモリ２２ｌに記録しておく。即
ち、セリフとセリフの間に朗読パートが設定されていな
い場合は、別のセリフと認識し、異なったセリフ番号を
付与して、文字認識データを記録しておく（ステップＳ
５０３）。

【０２０３】また、文字認識が終了すると、ＣＰＵ２１
は、表示部２３に、例えば、「朗読開始」ボタン（図示
なし）を表示させるので、ユーザ端末２の操作者が、自
分のパートを朗読し終えると、入力部２４を用いて、上
記「朗読開始」ボタンを選択する。

【０２０４】次いで、ＣＰＵ２１は、「朗読開始」ボタ
ン（図示なし）の入力信号があるかを検出し（ステップ
Ｓ５０４）、入力信号があったと判断した場合（ステッ
プＳ５０４：Ｙｅｓ）は、ステップＳ５０５に移行し、
朗読開始ボタンの入力信号がないと判断した場合（ステ
ップＳ５０４：Ｎｏ）は、入力信号が有るまで、ステッ
プＳ５０４の入力信号の検出動作を繰り返す。

【０２０５】次いで、ステップＳ５０５において、ＣＰ
Ｕ２１は、未読のセリフデータがあるか否かをＲＡＭ２
２の文字認識セリフデータメモリ２２ｌに問い合わせ
て、判断する。そして、ＣＰＵ２１が、未読データがあ
ると判断した場合（ステップＳ５０５：Ｙｅｓ）はステ
ップＳ５０６に移行し、未読データなしと判断した場合
は、この朗読処理を終了させる。

【０２０６】次いで、ＣＰＵ２１は、文字認識セリフデ
ータメモリ２２ｌに記録されている未読データのうち、
セリフ番号が最小のセリフデータを検索する（ステップ
Ｓ５０６）。

【０２０７】次いで、ＣＰＵ２１は、上記のようにして
検索された未読の文字認識データを、音声変換プログラ
ム２８７に従い、音声処理部３０ｂにおいて音声パター
ン２８７Ａに基づいて音声処理化し（ステップＳ５０
７）ＲＡＭ２２の朗読音声データメモリ２２ｍに格納し
た上で、スピーカ３０ｃから朗読音（例えば、朗読音６
０１）を放音させる（ステップＳ５０８）。

【０２０８】次いで、ＣＰＵ２１は、放音した文字認識
データに対して、既読データを付与してＲＡＭ２２の文
字認識セリフデータメモリ２２ｌに記録しデータの更新
処理を行う（ステップＳ５０９）。

【０２０９】次いで、ＣＰＵ２１は、ユーザ端末２によ
って「終了」ボタン（図示なし）が入力されたか否かを
判断し（ステップＳ５１０）、「終了」ボタンが入力さ
れたと判断した場合（ステップＳ５１０：Ｙｅｓ）は本
実施の形態における動作が終了し、「終了」ボタンが入
力されていないとＣＰＵ２１が判断した場合（ステップ
Ｓ５１０：Ｎｏ）は、ステップＳ５０４に工程を戻る。
この様にして、次のセリフが朗読され、「終了」ボタン
が操作者によって押されるか、或いは未読のセリフがな
くなるまで繰り返される。

【０２１０】このように、本発明に係る第６の実施の形
態におけるユーザ端末２によれば、文字認識されたデー
タを音声化して放音する事が可能となる。即ち、文字認
識可能な情報の関連情報を音声によって提供することを
実現できる。

【０２１１】また、セリフの区切り毎に記録して朗読す
るので、台本等の相手役をこなすことが出来る。

【０２１２】尚、上記第６の実施の形態は、本発明を例
示したに過ぎず、適宜変更可能である。例えば、ユーザ
端末２の操作者によって朗読開始信号が入力されたのを
受信してＣＰＵ２１が、朗読処理を実行する構成で説明
を行ったが、台本等、画像データ取得部２６により読み
込んだ書籍（例えば、書籍１００）の前データを文字認
識し、その上で朗読するパート部分６００を更に認識
し、パート以外の部分がユーザ端末２の外部において発
せられたのを、第５の実施の形態と同様のマイク３０ｄ
等によって認識しそれに続くセリフ等を朗読、放音する
という構成であってもよい。この場合、ユーザは朗読開
始の合図をユーザ端末２に出すことなくスムーズに朗読
処理を行うことができる。

【０２１３】また、本実施の形態において、台本等の文
字媒体コンテンツにおける音読化の処理として説明した
が、例えば、楽譜等を読み込ませ、その楽譜に記載され
た音符、コード等をユーザ端末２に認識させ、更にそれ
に対応する演奏音を放音させて、パート演奏に用いる構
成であってもよい。また、音声化されて出力される関連
情報としての音も人の声に限られず楽器の音等であって
もよい。

【０２１４】また、本第６の実施の形態において、台本
等の書籍の一部をパート（セリフ部分）を設定して朗読
処理を実行する構成としたが、単なる文字媒体コンテン
ツをユーザ端末２において文字認識させ、それをそのま
ま音読させる構成であってもよい。この場合、視覚によ
る関連情報を得ることが出来ないユーザにとって、聴覚
的に関連情報をえることを可能にするので、実に有益で
ある。

【０２１５】また、本第６の実施の形態におけるユーザ
端末２は、第２〜第５の実施の形態で説明した関連情報
提供システム５、或いは関連情報提供システム８におけ
るユーザ端末２のその他の機能として説明したが、第６
の実施の形態で説明した機能だけを備えた装置として単
体で用いてもよい。

【０２１６】このように、上記第１〜第６の実施の形態
で説明した本発明によれば、文字認識或いは音声認識可
能な情報（イベント情報）の関連情報をネットワーク４
を介して容易かつ複合的にユーザに提供することができ
るので、商業的な利用価値が大変高い。

【０２１７】尚、上記第１〜第６の実施の形態は、本発
明を例示したに過ぎず、適宜変更可能である。例えば、
画像データ取得部２６（特に、画像読込部２６ａに相当
するカメラ、スキャナ、レーザ光線等）は、ユーザ端末
２に内蔵されていても、外付けでもよい。また、ユーザ
端末２で実行される文字認識処理、関連情報検索処理、
音声変換処理等の各種処理は、ネットワーク４を介した
他のサーバや装置において行われる構成でもよい。

【０２１８】また、第２の実施の形態〜第６の実施の形
態において、ユーザ端末２が関連情報を提供するための
元情報であるイベント情報が取得するのに加え、更に情
報提供装置として取得したイベント情報に基づく関連情
報の検索処理をも実行する構成で説明を行ったが、第１
の実施の形態と同様にして、ユーザ端末２は、関連情報
の元となるイベント情報の取得のみを実行し、ユーザ端
末２とネットワークを介して接続されている他の装置
（例えば、情報配信サーバ３）によって関連情報の検索
処理が行われるように役割が分離された構成であっても
よい。この場合、ユーザ端末２に関連情報を検索、取得
するための機能を果たすためのアプリケーションソフト
等を備える必要がなくなる。

【０２１９】また、ユーザ端末２は必ずしも、一般的な
コンピュータの形状に限られるものではない。例えば、
表示部２３は、顔面装着の眼鏡のようにして閲覧する表
示装置であって、更にその一部に画像読込部２６ａが備
えられているという構成でもよい。具体的に、この眼鏡
のような表示装置を装着して書籍を閲覧すると、その装
着者の視線に合わせて画像読込部２６ａから書籍内容が
読み込まれて、その顔面装着型の表示面に表示され、更
に、その関連情報も同表示面に表示される。これによれ
ば、書籍等の内容を読み取らせる作業及び、その関連情
報を閲覧する作業を同時に実行することができる。

【０２２０】

【発明の効果】請求項１記載の発明によれば、取得手段
によって、イベント配信端末から配信される、当該イベ
ント配信端末を利用している使用者の動作、行動、使用
者の周囲の状況を含むイベント情報が監視され、このイ
ベント情報から識別データが認識されて取得され、関連
情報配信手段によって、取得手段により取得された識別
データに対応する関連情報が関連情報記憶手段より取得
されてイベント配信端末に配信されるので、ユーザは関
連情報を取得するための情報を入力することなしに関連
情報の提供、配信を実現する。

【０２２１】請求項２記載の発明によれば、イベント情
報取得手段によって取得されたイベント情報に含まれる
認識情報が、認識手段によって文字認識或いは音声認識
され、検索手段によってこの文字認識或いは音声認識さ
れた認識情報に関する関連情報が通信回線網を介して検
索され、出力手段によって検索された関連情報が出力さ
れるので、ユーザはイベント情報のうち検索したい内容
である認識情報をいちいち入力して関連情報を検索する
必要がなくなり、大変便利である。

【０２２２】請求項３記載の発明によれば、請求項２記
載の発明と同様の効果が得られるのは勿論のこと、特
に、イベント情報には音声情報が含まれており、聞き取
り手段によって、任意の音声情報が前記イベント情報と
して聞き取られ、認識手段によって、聞き取り手段によ
って聞き取られた音声情報から文字認識或いは音声認識
されるので、イベント情報が、文字媒体でなく音媒体の
歌等であってもその関連情報を検索することを可能にす
る。即ち、その音楽フレーズの音声認識、或いはその歌
詞等の文字認識が実行されることとなって音声データに
関する検索、関連情報の提供が実現する。

【０２２３】請求項４記載の発明によれば、請求項２又
は３に記載の発明と同様の効果が得られることは勿論の
こと、特に、イベント情報に含まれる認識情報を指定す
る認識情報指定手段を備え、認識手段によって、認識情
報指定手段によって指定された認識情報が文字認識或い
は音声認識されるので、イベント情報のうちユーザ希望
の関連情報を得たい範囲に合わせて認識情報を指定する
ことができ、その部分のみの認識情報を得ることができ
るので、ユーザにとってより効率的な関連情報の提供が
可能となる。

【０２２４】請求項５記載の発明によれば、請求項２〜
４の何れかに記載の発明と同様の効果が得られるのは勿
論のこと、特に、イベント情報に含まれる認識情報を音
声化する音声化手段を備えているので、例えば、認識情
報が文字媒体であって、視覚障害等で閲覧出来ない場合
においても聴覚的に把握することができることとなり、
ユーザにとってより関連情報の提供の形態の選択肢が増
えることとなって、より使い勝手が良くなる。

【０２２５】請求項６記載の発明によれば、識別データ
文字認識手段によって、イベント情報取得手段によって
取得されたイベント情報に含まれる識別データが文字認
識され、関連情報取得手段によって、文字認識された識
別データに基づいて、通信回線網を介して関連情報が取
得され、出力手段によってその関連情報が出力されるの
で、ユーザがイベント情報に含まれる識別データを入力
させたり認識させたりする動作を省略することを可能に
し、関連情報の取得の容易化が実現する。

【０２２６】請求項７記載の発明によれば、請求項６記
載の発明と同様の効果が得られるのは勿論のこと、特
に、識別データは、ホームページのＵＲＬ又はバーコー
ドのうち少なくとも何れか一方であるので、ユーザがＵ
ＲＬを入力したり、バーコードを読み取らせたりする作
業を省略することが可能となって、ユーザに便利さを提
供できる。

【０２２７】請求項８記載の発明によれば、関連情報記
憶手段によって、所定のイベント情報に関する関連情報
と、イベント情報に含まれる識別データとが対応付けて
記憶され、識別手段によって、イベント情報取得手段に
よって取得されたイベント情報の中から識別データが文
字認識或いは音声認識されて識別され、関連情報取得手
段によって、識別された識別情報に対応付けられている
関連情報が関連情報記憶手段から取得され、出力手段に
よって同関連情報が出力されるので、ユーザが識別デー
タを入力或いは端末装置等に認識させる操作を行うこと
なく関連情報を自動的に提供できることとなって、ユー
ザの手間が省ける。

【０２２８】請求項９記載の発明によれば、請求項８記
載の発明と同様の効果が得られるのは勿論のこと、特
に、イベント情報取得手段は、書籍を閲覧する者の視線
に従って文字情報を取得し、識別手段は、イベント情報
取得手段により読み取られた文字情報の文字認識をして
識別を行うので、ユーザが文字情報を閲覧すると同時に
その文字情報の認識を行うことが可能となる。

【０２２９】請求項１０記載の発明によれば、ユーザに
よって関連情報を取得するための情報を入力することな
しに関連情報の配信を実現することができる。

【０２３０】請求項１１記載の発明によれば、ユーザは
イベント情報のうち検索したい内容である認識情報をい
ちいち入力して関連情報を検索する必要がなくなり、大
変便利である。

【０２３１】請求項１２記載の発明によれば、ユーザが
イベント情報に含まれる識別データを入力させたり認識
させたりする動作を省略することが可能となって、関連
情報の取得の容易化が実現できる。

【０２３２】請求項１３記載の発明によれば、ユーザが
識別データを入力或いは認識させることなく関連情報を
自動的に提供できることとなって、関連情報の取得の容
易化が実現できる。

【図面の簡単な説明】

【図１】本発明の第１の実施の形態における関連情報配
信システム１の全体構造を示したブロック図である。

【図２】図１のユーザ端末２の内部構造を示すブロック
図である。

【図３】図１の情報配信サーバ３の内部構造を示すブロ
ック図である。

【図４】（ａ）図３の情報配信サーバ３のＲＡＭ３２の
内部構成を示すブロック図である。 （ｂ）図３の情報配信サーバ３の記録媒体３３Ａの内部
構造を示すブロック図である。

【図５】図４に示す関連情報ＤＢ３３２の変換テーブル
の内容に関する例示をした図である。

【図６】第１の実施の形態における動作の流れを説明す
るためのフローチャートである。

【図７】関連情報表示画面（Ｇ１）の表示例を示した図
である。

【図８】本発明の第２の実施の形態における関連情報提
供システム５の全体構造を示したブロック図である。

【図９】第２の実施の形態における関連情報提供システ
ムの一実施例の概要を説明するための説明図である。

【図１０】図８のユーザ端末２の内部構造を示すブロッ
ク図である。

【図１１】（ａ）図１０のユーザ端末２のＲＡＭ２２の
内部構成を示すブロック図である。 （ｂ）図１０のユーザ端末２の記録媒体２８Ａの内部構
造を示すブロック図である。

【図１２】第２の実施の形態における動作の流れを説明
するためのフローチャートである。

【図１３】画像データ表示画面（Ｇ２）の表示例を示し
た図である。

【図１４】検索結果表示画面（Ｇ３）の表示例を示した
図である。

【図１５】関連情報表示画面（Ｇ４）の表示例を示した
図である。

【図１６】本発明の第３の実施の形態における関連情報
提供システム８の全体構造を示すブロック図である。

【図１７】第３の実施の形態における動作の流れを説明
するためのフローチャートである。

【図１８】画像データ表示画面（Ｇ５）の表示例を示し
た図である。

【図１９】関連情報表示画面（Ｇ６）の表示例を示した
図である。

【図２０】本発明におけるブックスタンド１００ａの一
例を示した図である。

【図２１】第４の実施の形態における関連情報提供シス
テムの一実施例の概要を説明するための説明図である。

【図２２】第４の形態におけるユーザ端末２の内部構造
を示すブロック図である。

【図２３】図２２のユーザ端末２のＲＡＭ２２の内部構
成を示すブロック図である。

【図２４】第４の実施の形態における動作の流れを説明
するためのフローチャートである。

【図２５】第５の実施の形態における関連情報提供シス
テムの一実施例の概要を説明するための説明図である。

【図２６】第５の実施の形態におけるユーザ端末２のＲ
ＡＭ２２の内部構成を示すブロック図である。

【図２７】第５の実施の形態における動作の流れを説明
するためのフローチャートである。

【図２８】第６の実施の形態における関連情報提供シス
テムの一実施例の概要を説明するための説明図である。

【図２９】第６の実施の形態におけるユーザ端末２の内
部構造を示すブロック図である。

【図３０】図２９のユーザ端末２のＲＡＭ２２の内部構
成を示すブロック図である。

【図３１】第６の実施の形態における動作の流れを説明
するためのフローチャートである。

【符号の説明】

１ 関連情報配信システム ２ ユーザ端末（イベント配信端末、情報提供装置） ３ 情報配信サーバ（情報配信装置、情報提供装置） ４ ネットワーク（通信回線網） ５ 関連情報提供システム ６ 検索エンジン ７ Ｗｅｂサーバ（関連情報記憶手段） ８ 関連情報配信システム ２１ ＣＰＵ（認識手段、音声化手段、識別データ文字
認識手段、関連情報取得手段） ２３ 表示部（出力手段） ２４ 入力部（認識情報指定手段） ２５ 出力部（出力手段） ２６ 画像データ取得部（イベント情報取得手段） ２６ａ 画像読込部 ２７ 伝送制御部 ２８ 記憶装置 ２８Ａ 記録媒体（関連情報記憶手段） ３０ 音声処理装置（イベント情報取得手段、出力手
段、聞き取り手段、音声か手段） ３１ ＣＰＵ（取得手段、関連情報配信手段） ３３ 記憶装置 ３３Ａ 記録媒体（関連情報記憶手段） ３３２ 関連情報ＤＢ（関連情報記憶手段） ３４ 伝送制御部（関連情報配信手段）

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｍ 3/42 Ｈ０４Ｍ 3/42 Ｂ Ｃ

Claims (13)

【特許請求の範囲】
1. 【請求項１】所定の識別データとその識別データに関連
   する関連情報とを対応付けて記憶している関連情報記憶
   手段と、 イベント配信端末から配信される、当該イベント配信端
   末を利用している使用者の動作、行動、使用者の周囲の
   状況を含むイベント情報を監視し、このイベント情報か
   ら前記識別データを認識して取得する取得手段と、 この取得手段により取得された識別データに対応する関
   連情報を前記関連情報記憶手段より取得して前記イベン
   ト配信端末に配信する関連情報配信手段と、 を備えたことを特徴とする情報配信装置。
2. 【請求項２】ユーザの動作、行動、ユーザの周囲状況を
   含む任意のイベント情報を取得するイベント情報取得手
   段と、 前記イベント情報取得手段によって取得されたイベント
   情報に含まれる認識情報を、文字認識或いは音声認識す
   る認識手段と、 前記認識手段によって文字認識或いは音声認識された認
   識情報に関する関連情報を通信回線網を介して検索する
   検索手段と、 前記検索手段によって検索された関連情報を出力させる
   出力手段と、 を備えることを特徴とする情報提供装置。
3. 【請求項３】請求項２記載の情報提供装置において、 前記イベント情報には音声情報が含まれ、 前記イベント情報取得手段は、任意の音声情報を前記イ
   ベント情報として聞き取る聞き取り手段を備え、 前記認識手段は、前記聞き取り手段によって聞き取られ
   た音声情報から文字認識或いは音声認識することを特徴
   とする情報提供装置。
4. 【請求項４】請求項２又は３に記載の情報提供装置にお
   いて、 前記イベント情報に含まれる認識情報を指定する認識情
   報指定手段を備え、 前記認識手段は、前記認識情報指定手段によって指定さ
   れた認識情報を文字認識或いは音声認識することを特徴
   とする情報提供装置。
5. 【請求項５】請求項２〜４の何れかに記載の情報提供装
   置において、 前記イベント情報に含まれる認識情報を音声化する音声
   化手段を備えることを特徴とする情報提供装置。
6. 【請求項６】ユーザの動作、行動、ユーザの周囲状況を
   含む任意のイベント情報に含まれる識別データに基づい
   て前記イベント情報に関連する関連情報を提供する情報
   提供装置であって、 前記イベント情報を取得するイベント情報取得手段と、 前記イベント情報取得手段によって取得された前記イベ
   ント情報に含まれる前記識別データを文字認識する識別
   データ文字認識手段と、 前記識別データ文字認識手段によって文字認識された識
   別データに基づいて、通信回線網を介して前記関連情報
   を取得する関連情報取得手段と、 前記関連情報取得手段によって取得された関連情報を出
   力させる出力手段と、 を備えることを特徴とする情報提供装置。
7. 【請求項７】請求項６記載の情報提供装置において、 前記識別データは、ホームページのＵＲＬ又はバーコー
   ドのうち少なくとも何れか一方であることを特徴とする
   情報提供装置。
8. 【請求項８】ユーザの動作、行動、ユーザの周囲状況を
   含む所定のイベント情報に含まれる識別データに基づい
   て前記イベント情報に関連する関連情報を提供する情報
   提供装置であって、 前記所定のイベント情報に関する関連情報と、前記イベ
   ント情報に含まれる識別データとを対応付けて記憶する
   関連情報記憶手段と、 前記所定のイベント情報を取得するイベント情報取得手
   段と、 前記イベント情報取得手段によって取得されたイベント
   情報の中から前記識別データを文字認識或いは音声認識
   して識別する識別手段と、 前記識別手段によって識別された識別データに対応付け
   られている関連情報を前記関連情報記憶手段から取得す
   る関連情報取得手段と、 前記関連情報記憶手段から取得した関連情報を出力させ
   る出力手段と、を備えたことを特徴とする情報提供装
   置。
9. 【請求項９】請求項８記載の情報提供装置において、 前記イベント情報は、文字情報を含んでおり、 前記イベント情報取得手段は、前記文字情報を閲覧する
   者の視線に従って文字情報を取得し、 前記識別手段は、前記イベント情報取得手段により読み
   取られた文字情報の文字認識をして識別を行うことを特
   徴とする情報提供装置。
10. 【請求項１０】所定の識別データとその識別データに関
    連する関連情報とを対応付けて記憶している関連情報記
    憶手段を備え、前記関連情報を配信するコンピュータ
    に、 イベント配信端末から配信される、当該イベント配信端
    末を利用している使用者の動作、行動、使用者の周囲の
    状況を含むイベント情報を監視し、このイベント情報か
    ら前記識別データを認識して取得させるための機能と、 取得した識別データに対応する関連情報を前記記憶手段
    より取得して前記イベント配信端末に配信するための機
    能と、 を実行させるためのプログラム。
11. 【請求項１１】通信回線網に接続され、関連情報を提供
    するコンピュータに、 ユーザの動作、行動、ユーザの周囲状況を含む任意のイ
    ベント情報を取得させるための機能と、取得したイベン
    ト情報に含まれる認識情報を文字認識或いは音声認識さ
    せるための機能と、 文字認識或いは音声認識した認識情報に関する関連情報
    を通信回線網を介して検索させるための機能と、 検索した関連情報を出力させるための機能と、 を実行させるためのプログラム。
12. 【請求項１２】通信回線網に接続され、ユーザの動作、
    行動、ユーザの周囲状況を含む任意のイベント情報に含
    まれる識別データに基づいて前記イベント情報に関連す
    る関連情報を提供するコンピュータに、 前記イベント情報を取得させるための機能と、 取得されたイベント情報に含まれる前記識別データを文
    字認識させるための機能と、 文字認識した識別データに基づいて、通信回線網を介し
    て前記関連情報を取得させるための機能と、 取得された関連情報を出力させるための機能と、 を実行させるためのプログラム。
13. 【請求項１３】イベント情報に関する関連情報と、前記
    イベント情報に含まれる識別データとを対応付けて記憶
    する関連情報記憶手段を備え、前記関連情報を提供する
    コンピュータに、 前記イベント情報を取得させるための機能と、 取得された前記イベント情報の中から前記識別データを
    文字認識或いは音声認識して識別させるための機能と、 識別された識別情報に対応付けられている関連情報を前
    記関連情報記憶手段から取得させるための機能と、 取得した関連情報を出力させるための機能と、 を実行させるためのプログラム。