JP5574992B2 - 情報提供システム - Google Patents

Description

本発明は、情報提供システムに関する。

私たちは日常、テレビ、インターネット、人との会話などから多くの情報を得る。それを記憶するために、メモをしたり、ファイルを保存したり、スケジュール帳を書いたりする。そして、記憶したものをキーワードによって検索することで、知識として活用する（例えば、特許文献１）。

しかし、「この写真をみると、このことが思い出される・・」などの一見関係がないような自分の脳だけで整理されている知識の結びつきは上記のようなキーワードによる検索が難しい。

特開平０８−０７７２９５号公報

そこで、本発明は、個人の知識を検索し情報として提供する情報提供システムの実現を課題とする。

この課題を解決するため、本発明は以下の構成を採る。

一の情報と他の情報とを当該一の情報と他の情報との関係を表す関係情報によって紐付けて記憶する記憶手段と、検出した情報を出力する検出手段と、この検出手段から出力された情報を検索キーに変換する変換手段と、この変換手段によって変換された検索キーに対応する前記一の情報を前記記憶手段から検索する検索手段と、この検索手段によって検索された一の情報と、当該一の情報に紐付けられた前記他の情報とを前記記憶手段から読み出して出力する出力手段とを備えた情報提供システム。

本発明によれば、検出手段の出力に基づく検索キーが検索手段に自動的に入力されることによって、その検索キーに対応する一の情報が検索され、当該一の情報と、当該一の情報に紐付けられた他の情報と、両者の関係情報とが出力される。これによると、一の情報と他の情報とが、関係情報によって示される関係にある、という知識を自動的に提供することができる。

本発明の第１実施形態の構成を示すブロック図である。 本発明の第２実施形態の構成を示すブロック図である。 本発明の第３実施形態の構成を示すブロック図である。 本発明の第４実施形態の構成を示すブロック図である。 本発明の第５実施形態の構成を示すブロック図である。 本発明の第６実施形態の構成を示すブロック図である。 本発明の第７実施形態の構成を示すブロック図である。 本発明の第８実施形態の構成を示すブロック図である。 本発明の第９実施形態の構成を示すブロック図である。 知識リンクの一例を示すデータ構造図である。 知識リンクの一例を示すデータ構造図である。 知識リンクの一例を示すデータ構造図である。

［第１実施形態］
図１は、本発明の第１実施形態の構成を示すブロック図である。

記憶部１は、一の情報と他の情報とを当該一の情報と他の情報との関係を表す関係情報によって紐付けて記憶している。検出部２は、センサ等により検出した情報を出力する。変換部３は、この検出部２から出力された情報を検索キーに変換する。検索部４は、この変換部３によって変換された検索キーに対応する一の情報を記憶部１から検索する。出力部５は、この検索部４によって検索された一の情報と、当該一の情報に紐付けられた他の情報とを記憶部１から読み出して出力する。

本実施形態において、記憶部１は、主記憶装置と補助記憶装置との双方を含むものとする。一の情報および他の情報は各種のデータであり、ファイルとしてファイルシステムに管理されている。当該データは、テキスト、画像、音声など、その種類を問わない。当該データは、ファイル名でもよい。また、当該データは、ファイル構造内のどの領域に格納されていてもよい。例えば、ファイルのプロパティ、メモまたはログに格納したデータを一の情報または他の情報として扱ってもよい。一の情報と他の情報との紐付け（リンク）は、一の情報と他の情報とが関連付けられている状態を示している。関連情報は、リンク毎に関連付けられている。

本実施形態において、変換部３、検索部４および出力部５は、プロセッサが所定のプログラムを実行することにより各種の機能を提供するものとする。

図１０は、一の情報と他の情報とのリンクを複数含むデータ構造の模式図である。ノード１から４は、それぞれ一の情報または他の情報に相当する。それらが、リンク１から３によってリンクされている。同一の情報が、一の情報としてリンクされる場合もあれば、他の情報としてリンクされる場合もある。エピソード１，２は、今後一の情報または他の情報としてリンクされる情報を示している。

図１１は、一の情報と他の情報とのリンクを多数含むデータ構造のイメージ図である。ＡリゾートやＡＮＡフライトスケジュール等の各黒丸は、一の情報または他の情報に相当する。枠で囲った現在進行、過去、楽しい、所有物、写真といった表示も、それぞれ一の情報または他の情報に該当する。これらを結ぶ線は、一の情報と他の情報とのリンクを示している。

図１２は、一の情報と他の情報とそれらの関連情報とを示す一例である。一の情報「ギター」は他の情報「ギターＴＡＢスコア」とリンクされ、その関係情報は「練習」である。また、一の情報「ギター」は他の情報「早朝ジョギング」にリンクされ、その関係情報は「趣味」である。また、一の情報「ギター」は他の情報「午後１０時以降」にリンクされ、その関係情報は「気をつけること」である。

以上図１０ないし図１２に示したようなイメージで、一の情報と他の情報とのリンクが記憶部１に格納されている。本願では、この情報のリンクを知識リンクと呼ぶ。リンクされた一の情報または他の情報は、情報の実体に限らず、情報の場所を示すポインタでもよい。例えば、一の情報または他の情報は、ウェブページの場所を示す１つ又は複数のＵＲＬ（Uniform Resource Locator）でもよく、この場合、ＵＲＬが指標するすべてのファイル内の情報も、一の情報または他の情報として取り扱う。

一般の検索システムでは、例えば検索キーに「ギター」を指定しても、その検索結果として「早朝ジョギング」は通常ヒットしない。一方、本発明では、一の情報に「ギター」を指定すると、ギターの練習に用いるものとしてギターＴＡＢスコア、ギターのほか趣味は早朝ジョギング、ギターについて午後１０時以降は演奏に気をつける、といった個人の知識を検索し出力することができる。

次に本実施形態の動作を説明する。

検出部２が、検索キーの基となる情報を検出すると、当該情報を変換部３に出力する。この情報を渡された変換部３は、当該情報を予め定められたアルゴリズムにより検索キーへと変換する。そして、当該検索キーを検索部４に入力する。検索キーを渡された検索部４は、当該検索キーに対応する一の情報を記憶部１から検索する。ここで、「対応する」とは、完全一致、部分一致、類義語、同義語および類似の関係を含むものとする。出力部５は、この検索部４によって検索された一の情報と、当該一の情報に紐付けられた他の情報とを記憶部１から読み出して出力する。出力された検索結果は、出力インターフェースを介して出力装置やコンピュータネットワークに出力され、出力先においてユーザに閲覧される。

この検索結果の出力は、一の情報と他の情報とのリンクを視覚的に示すチャートをユーザに表示する形式でもよい。また、検索結果の出力は、検索された他の情報に基づいてプログラムを実行するものでもよい。

以上の本実施形態によれば、検出部２の出力に基づく検索キーが検索部４に自動的に入力されることによって、その検索キーに対応する一の情報が検索され、当該一の情報と、当該一の情報に紐付けられた他の情報と、両者の関係情報とが出力される。これによると、一の情報と他の情報とが、関係情報によって示される関係にある、という知識を自動的に提供することができる。

［第２実施形態］
次に、本発明の第２実施形態を図２に基づいて説明する。

本実施形態において、検出部２は、電子メール機能による電子メールの送信，受信または保存を検出して当該電子メールの文章情報を出力するようになっている。電子メール機能は、プロセッサがプログラムを実行することにより実現される。電子メールの受信は図示しない入力インターフェースを介して行われる。電子メールの送信は図示しない出力インターフェースを介して行われる。電子メールの保存は、記憶部１の記憶領域を用いて行われる。電子メールの文章情報はテキストデータとする。

変換部３は、当該文章情報から抽出した形態素情報を検索キーとして検索部４に入力する。変換部３は、検出部２から取得した文章情報を形態素解析のアルゴリズムにより形態素に分解し、名詞、動詞、形容詞などの当該形態素のテキストデータを検索キーとして検索部４に入力する。

その他の構成は第１実施形態と同一である。本実施形態によれば、電子メールの送受信または保存が行われた際に、当該電子メールの文章内容に関連する知識情報が出力部５から自動的に出力される。

［第３実施形態］
次に、本発明の第３実施形態を図３に基づいて説明する。

本実施形態において、検出部２は、音声入力用のマイクに搭載され、このマイクに対する音声入力を検出して当該入力された音声情報を出力するようになっている。音声情報はアナログ信号とし、変換部３へ繋がる入力インターフェースにおいて符号化されるものとする。

変換部３は、符号化された音声情報に対し音声認識処理を実行し、音声をテキストに変換する。更に、変換部３は、当該テキストを形態素解析のアルゴリズムにより形態素に分解し、名詞、動詞、形容詞などの当該形態素のテキストデータを検索キーとして検索部４に入力する。

その他の構成は第１実施形態と同一である。本実施形態によれば、音声が入力されると、当該音声によって表された意味内容に関連する知識情報が出力部５から自動的に出力される。

本実施形態ではマイクから音声が入力される場合を説明したが、検出部２は、ラインで入力される音声を検出してもよいし、予め作成された音声ファイルに含まれる音声データを検出し変換部３へ入力してもよい。

［第４実施形態］
次に、本発明の第４実施形態を図４に基づいて説明する。

本実施形態において、検出部２は、音声入力用のマイクに搭載され、このマイクに対する音声入力を検出して当該入力された音声情報を出力するようになっている。音声情報はアナログ信号とし、変換部３へ繋がる入力インターフェースにおいて符号化されるものとする。

変換部３は、符号化された音声情報を分析し、当該音声の特徴量を抽出し、当該特徴量を検索キーとして検索部４に入力する。

記憶部１に記憶された一の情報のうち、音声情報については当該音声の特徴量が予め抽出され、当該一の情報に関連付けて記憶部１に記憶されているものとする。検索部４は、検索キーとしての音声特徴量と一の情報に関連付けられた音声特徴量との類似度を計算し、所定の閾値より近い距離にある音声情報（一の情報）を検索する。

その他の構成は第１実施形態と同一である。本実施形態によれば、音声（種類を問わない）が入力されると、当該音声に関連する知識情報が出力部５から自動的に出力される。

本実施形態ではマイクから音声が入力される場合を説明したが、検出部２は、ラインで入力される音声を検出してもよいし、予め作成された音声ファイルに含まれる音声データを検出し変換部３へ入力してもよい。また、一の情報である音声情報の特徴量は予め抽出して関連付けられているものとしたが、検索部３が、検索の都度、一の情報である音声情報から特徴量を抽出してもよい。

［第５実施形態］
次に、本発明の第５実施形態を図５に基づいて説明する。

本実施形態において、検出部２は、画像を撮像するカメラに搭載され、このカメラで撮影される画像の変換を検出して画像情報を出力するようになっている。例えば、室外で黒い壁面にカメラを向けておき、そこに白い雪が降ってきたら当該画像の変化を検出し、降り出した雪の画像情報を出力する。検出部２は、画像情報を所定形式の画像ファイルに変換して出力するものとする。

変換部３は、この画像ファイルの画像データを分析し、当該画像の特徴量を抽出し、当該特徴量を検索キーとして検索部４に入力する。

記憶部１に記憶された一の情報のうち、画像情報については当該画像の特徴量が予め抽出され、当該一の情報に関連付けて記憶部１に記憶されているものとする。検索部４は、検索キーとしての画像特徴量と一の情報に関連付けられた画像特徴量との類似度を計算し、所定の閾値より近い距離にある画像情報（一の情報）を検索する。

その他の構成は第１実施形態と同一である。本実施形態によれば、画像の変化が検出されると、当該画像に関連する知識情報が出力部５から自動的に出力される。

本実施形態ではカメラから画像が入力される場合を説明したが、検出部２は、予め作成された映像ファイルに含まれる画像の変化を検出し画像ファイルを変換部３へ入力してもよい。また、一の情報である画像情報の特徴量は予め抽出して関連付けられているものとしたが、検索部３が、検索の都度、一の情報である画像情報から特徴量を抽出してもよい。

［第６実施形態］
次に、本発明の第６実施形態を図６に基づいて説明する。

検出部２は、温度センサ等のセンサに搭載され、当該センサにより検出された検出信号を出力する。本実施形態では、センサを温度センサとし、温度に応じた検出信号を出力するものとする。検出信号はアナログ信号とし、変換部３に繋がる入力インターフェースにおいて符号化されるものとする。

記憶部１の記憶領域の一部はキーワード記憶部として利用され、このキーワード記憶部には、検出部２からの検出信号に応じて選択すべきキーワードが予め登録されている。本実施形態では、例えば、検出部２から出力される検出信号（温度情報）が０度未満の場合に選択すべきキーワードとして「冷たい」が登録されているものとし、同様に、０度以上の場合についても温度に応じて異なるキーワードが登録されているものとする。

変換部３は、検出部２から出力され符号化された検出信号（温度情報）に対応するキーワードをキーワード記憶部から読み出し、読み出したキーワードを検索キーとして検索部４に入力する。

その他の構成は第１実施形態と同一である。本実施形態によれば、センサにより状況が検出されると、当該状況に応じた検索キーが検索部に入力され、当該状況に関連する知識情報が出力部５から自動的に出力される。

本実施形態では温度センサを例として説明したが、センサの種類は問わない。また、キーワード記憶部に登録するキーワードとその選択条件も意図に応じて自由に設定することができる。また、本実施形態では、特にキーワード記憶部にキーワードを登録する構成としたが、キーワード記憶部を設ける代わりに、キーワードの選択条件とキーワードとの紐付けを、一の情報と他の情報との紐付けとして、知識情報の一部として記憶部１に予め登録しておいてもよい。その場合、変換部３は、検出信号に対応する一の情報を記憶部１から検索し、検索した一の情報に紐付けられた他の情報をキーワードとして取得する。

［第７実施形態］
次に、本発明の第７実施形態を図７に基づいて説明する。

検出部２ａは、温度センサ等のセンサに搭載され、当該センサにより検出された検出信号を出力する。本実施形態では、センサを温度センサとし、温度に応じた検出信号を出力するものとする。検出信号はアナログ信号とし、変換部３に繋がる入力インターフェースにおいて符号化されるものとする。また、検出部２ｂは、カメラに搭載され、当該カメラが撮像した画像の変化を検出すると当該変化後の画像を表す画像情報を出力する。画像情報は所定形式の画像ファイルとする。

記憶部１の記憶領域の一部はキーワード記憶部として利用され、このキーワード記憶部には、検出部２ａの検出信号と検出部２ｂが出力した画像情報の特徴量との組み合わせに応じて、選択すべきキーワードが予め登録されている。本実施形態では、例えば、検出部２ａから出力された検出信号（温度情報）が０度未満であって、かつ、検出部２ｂから出力された画像情報の特徴量が「白いものが降ってきた」ことを表している場合に選択すべきキーワードとして「雪」が登録されているものとし、同様に、他の温度と画像特徴量との組み合わせについても、それぞれ異なるキーワードが登録されているものとする。

変換部３は、検出部２ａから出力され符号化された検出信号（温度情報）を取得する共に、検出部２ｂから取得した画像情報から特徴量を抽出し、これらの温度情報と画像特徴量との組み合わせに対応するキーワードをキーワード記憶部から読み出し、読み出したキーワードを検索キーとして検索部４に入力する。上記の例では、検出部２ａから出力された検出信号（温度情報）が０度未満であって、かつ、検出部２ｂから出力された画像情報の特徴量が「白いものが降ってきた」ことを表している場合に、検索キーとして「雪」を検索部４に入力する。

その他の構成は第１実施形態と同一である。本実施形態によれば、センサにより検出された状況と、カメラから取得した画像とに応じて、予め登録されたキーワードが選択され、選択されたキーワードが検索キーとして検索部に入力されるので、センサの出力とカメラの出力とから推測される状況に関連する知識情報が出力部５から自動的に出力される。

本実施形態では温度センサを例として説明したが、センサの種類は問わない。また、本実施形態ではカメラから画像が入力される場合を説明したが、検出部２ｂは、予め作成された映像ファイルに含まれる画像の変化を検出し画像ファイルを変換部３へ入力してもよい。

また、キーワード記憶部に登録するキーワードとその選択条件も意図に応じて自由に設定することができる。また、本実施形態では、特にキーワード記憶部にキーワードを登録する構成としたが、キーワード記憶部を設ける代わりに、キーワードの選択条件とキーワードとの紐付けを、一の情報と他の情報との紐付けとして、知識情報の一部として記憶部１に予め登録しておいてもよい。その場合、変換部３は、センサの検出信号と画像特徴量とに対応する一の情報を記憶部１から検索し、検索した一の情報に紐付けられた他の情報をキーワードとして取得する。

［第８実施形態］
次に、本発明の第８実施形態を図８に基づいて説明する。

検出部２ａは、温度センサ等のセンサに搭載され、当該センサにより検出された検出信号を出力する。本実施形態では、センサを温度センサとし、温度に応じた検出信号を出力するものとする。検出信号はアナログ信号とし、変換部３に繋がる入力インターフェースにおいて符号化されるものとする。また、検出部２ｂは、カメラに搭載され、当該カメラが撮像した画像の変化を検出すると当該変化後の画像を表す画像情報を出力する。画像情報は所定形式の画像ファイルとする。

記憶部１の記憶領域の一部はキーワード記憶部として利用され、このキーワード記憶部には、検出部２ａの検出信号に応じて選択すべきキーワードと、検出部２ｂが出力した画像情報の特徴量に応じて選択すべきキーワードとが、予め登録されている。本実施形態では、例えば、検出部２ａから出力された検出信号（温度情報）が０度未満の場合に選択すべきキーワードとして「冷たい」が、検出部２ｂから出力された画像情報の特徴量が上から下に降ることを表している場合に選択すべきキーワードとして「降る」が登録されているものとし、同様に、他の温度についても、それぞれ異なるキーワードが登録され、かつ、他の画像特徴量についても、それぞれ異なるキーワードが登録されているものとする。

変換部３は、検出部２ａから出力され符号化された検出信号（温度情報）を取得し、当該取得した検出信号に対応するキーワードをキーワード記憶部から読み出し、読み出したキーワードを第１検索キーとして検索部４に入力する。また、変換部３は、検出部２ｂから取得した画像情報から特徴量を抽出し、当該画像特徴量に対応するキーワードをキーワード記憶部から読み出し、読み出したキーワードを第２検索キーとして検索部４に入力する。上記の例では、検出部２ａから出力された検出信号（温度情報）が０度未満の場合に第１検索キーとして「冷たい」を検索部４に入力し、かつ、検出部２ｂから出力された画像情報の特徴量が白い色を表している場合に第２検索キーとして「降る」を検索部４に入力する。

検索部４は、第１検索キーと第２検索キーとのＡＮＤ条件に対応する一の情報を記憶部１から検索する。

その他の構成は第１実施形態と同一である。本実施形態によれば、センサにより検出された状況と、カメラから取得した画像とに応じて、予め登録されたキーワードがそれぞれ選択され、選択された各キーワードを複数の検索キーとして検索を行うので、センサが検出した状況とカメラが撮像した状況との両方に関連する知識情報が出力部５から自動的に出力される。

本実施形態では温度センサを例として説明したが、センサの種類は問わない。また、本実施形態ではカメラから画像が入力される場合を説明したが、検出部２ｂは、予め作成された映像ファイルに含まれる画像の変化を検出し画像ファイルを変換部３へ入力してもよい。

また、キーワード記憶部に登録するキーワードとその選択条件も意図に応じて自由に設定することができる。また、本実施形態では、特にキーワード記憶部にキーワードを登録する構成としたが、キーワード記憶部を設ける代わりに、キーワードの選択条件とキーワードとの紐付けを、一の情報と他の情報との紐付けとして、知識情報の一部として記憶部１に予め登録しておいてもよい。その場合、変換部３は、センサの検出信号に対応する一の情報を記憶部１から検索し、検索した一の情報に紐付けられた他の情報を第１のキーワードとして取得する。かつ、変換部３は、画像特徴量に対応する一の情報を記憶部１から検索し、検索した一の情報に紐付けられた他の情報を第２のキーワードとして取得する。

［第９実施形態］
次に、本発明の第９実施形態を説明する。

本実施形態において、検出部２は、プログラム内に記述された関数化されたパターンを検出し当該関数化されたパターン情報（関数情報）を出力する。プログラムは記憶部に記憶されているものとする。変換部３は、検出部２から取得した関数化されたパターン情報を検索キーとして、検索部４に入力する。検索部４は、当該検索キーにマッチする構造の関数化されたパターン情報を有する一の情報を記憶部１から検索する。

その他の構成は第１実施形態と同一である。本実施形態によれば、プログラム内で関数化されたパターンを検出すると、当該関数化されたパターンに関連する知識情報が自動的に出力される。

１ 記憶部
２、２ａ、２ｂ 検出部
３ 変換部
４ 検索部
５ 出力部

Claims (9)

1. 一の情報と他の情報とを当該一の情報と他の情報との関係を表す関係情報によって紐付けて記憶する記憶手段と、検出した情報を出力する検出手段と、この検出手段から出力された情報を検索キーに変換する変換手段と、この変換手段によって変換された検索キーに対応する前記一の情報を前記記憶手段から検索する検索手段と、この検索手段によって検索された一の情報と、当該一の情報に紐付けられた前記他の情報とを前記記憶手段から読み出して出力する出力手段とを備えた情報提供システム。
2. 前記検出手段は、電子メールの送信，受信または保存を検出して当該電子メールの文章情報を出力し、
   前記変換手段は、当該文章情報から抽出した形態素情報を前記検索キーとする請求項１に記載の情報提供システム。
3. 前記検出手段は、音声入力を検出して音声情報を出力し、
   前記変換手段は、当該音声情報を文章情報に変換し更に当該文章情報から抽出した形態素情報を前記検索キーとする請求項１に記載の情報提供システム。
4. 前記検出手段は、音声入力を検出して音声情報を出力し、
   前記変換手段は、当該音声情報から特徴量を抽出して前記検索キーとし、
   前記検索手段は、当該検索キーに対応する特徴量を有する音声情報である前記一の情報を検索する請求項１に記載の情報提供システム。
5. 前記検出手段は、撮像の変化を検出して画像情報を出力し、
   前記変換手段は、当該画像情報から特徴量を抽出して前記検索キーとし、
   前記検索手段は、当該検索キーに対応する特徴量を有する画像情報である前記一の情報を検索する請求項１に記載の情報提供システム。
6. 前記検出手段は、センサによる検出信号を出力し、
   前記変換手段は、当該検出信号を当該検出信号のレベルに応じたキーワードを選択して前記検索キーとする請求項１に記載の情報提供システム。
7. 前記検出手段は、撮像の変化を検出して画像情報を出力すると共に、センサによる検出信号を出力し、
   前記変換手段は、前記画像情報から抽出した特徴量と前記検出信号のレベルとに応じたキーワードを選択して前記検索キーとする請求項１に記載の情報提供システム。
8. 前記検出手段は、撮像の変化を検出して画像情報を出力すると共に、センサによる検出信号を出力し、
   前記変換手段は、前記画像情報から抽出した特徴量に応じて第１検索キーを選択すると共に、前記検出信号のレベルに応じて第２検索キーを選択し、
   前記検索手段は、前記第１検索キーと前記第２検索キーとの両方に対応する前記一の情報を検索する請求項１に記載の情報提供システム。
9. 前記検出手段は、情報内に記述された関数化されたパターン情報を検出して出力し、
   前記変換手段は、当該関数化されたパターン情報を検索キーとし、
   前記検索手段は、当該検索キーにマッチする構造のパターン情報を有する前記一の情報を検索する請求項１に記載の情報提供システム。

Images