JP3614756B2 - Personal adaptive information guidance method and system - Google Patents

Personal adaptive information guidance method and system Download PDF

Info

Publication number
JP3614756B2
JP3614756B2 JP2000116493A JP2000116493A JP3614756B2 JP 3614756 B2 JP3614756 B2 JP 3614756B2 JP 2000116493 A JP2000116493 A JP 2000116493A JP 2000116493 A JP2000116493 A JP 2000116493A JP 3614756 B2 JP3614756 B2 JP 3614756B2
Authority
JP
Japan
Prior art keywords
information
user
search
unit
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000116493A
Other languages
Japanese (ja)
Other versions
JP2001306604A (en
Inventor
悦郎 藤田
伸治 安部
佳伸 外村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2000116493A priority Critical patent/JP3614756B2/en
Publication of JP2001306604A publication Critical patent/JP2001306604A/en
Application granted granted Critical
Publication of JP3614756B2 publication Critical patent/JP3614756B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、実世界全体を対象とするユーザの活動において、GPSなどを利用してユーザの現在位置を認識し、その位置に関連する情報をユーザに提供する情報案内方法およびシステムに関する。
【0002】
【従来の技術】
従来、GPSなどの位置計測システムを接続した携帯情報端末などによって、ユーザの現在位置を計測して地図上でその位置を表現し、さらにその位置に関連する文書情報や画像情報などをユーザに提示する技術が例えば下記の文献で提案されている。
【0003】
(文献1)長尾確、暦本純一、伊藤純一郎、八木正紀、安村通晃、
ウォークナビ:ロケーションアウェアなインタラクティブ情報案内システム、インタラクティブシステムとソフトウェア3、pp. 39―48、近代科学社、1995
(文献2)長尾確、
エージェント拡張現実感
bit, Vol. 31, No. 5, pp. 66―76、1999
前者では、GPSを利用してユーザの現在位置を認識し、認識された結果を地図上で表現し、その位置に関連するWeb情報などをユーザに提供してその活動を支援する、ウォークナビというシステムを提案している。また、後者では、Hyper Campusというキャンパス内のナビゲーションシステムにおいて、ユーザの現在位置や現在時刻などの現在の状況のみならず、システムに事前登録された個人情報なども利用して、よりユーザに個人化された情報を提示し、さらに訪問した場所やアクセスした情報などを行動履歴として記録する個人適応型情報案内技術を実現している。なお、これらの技術では実世界における任意の場所と案内情報との対応付けがシステム設計者などの人手によって行われている。
【0004】
【発明が解決しようとする課題】
しかしながら、前述した従来技術では、実世界における任意の場所と情報との対応付けが特定の人間によって実施されるために、両者の対応付けに時間と労力がかかる、また、両者の関係が、対応付けを実施する人間の主観や製作意図に依存してしまい、多様な視点、興味を持つユーザの要求には必ずしも応えられないという問題があった。
【0005】
また、旅行などの活動では、ユーザの過去、未来の文脈がユーザへの案内情報に反映されることがユーザ個人にとってより有意義な情報となる場合があるが、前述した技術ではこの点が必ずしも実現されないという問題があった。例えば、京都や奈良などの旅行で、ユーザが現在いる場所周辺に、ユーザが既に訪問したお寺Aと歴史的もしくは文化的に強く関係する別のお寺Bやお店Cがあったとしよう。このような場合、お寺Bおよびお店Cは、ユーザ個人にとっては強い興味対象となることが考えられる。それ故、ユーザへの案内情報には、ユーザが訪問したお寺Aとの関連性を含めて、お寺B、お店Cの情報を案内することが、ユーザにとってよりよい情報案内となる。しかし、前述の従来技術では、ユーザの行動履歴を残す技術は実現しているものの、行動履歴情報や未来のスケジュール情報などを動的かつ柔軟にユーザの現在の状況に結び付ける機構がないため、お寺Bおよびお店Cの存在は仮に案内できたとしても、(ユーザが訪問した)お寺Aとの関連性までは必ずしも案内できない、という問題があった。
【0006】
本発明の目的は、場所と情報との対応付けが特定の人間の主観や製作意図によらないものであり、しかも、ユーザの現在、過去、未来の文脈情報が反映される個人適応型情報案内方法およびシステムを提供することにある。
【0007】
【課題を解決するための手段】
本発明の個人適応型情報案内方法は、
クライアント部において、
状況認識システムを用いてユーザの現在位置を認識する状況認識ステップと、
前記状況認識ステップにより得られたユーザの現在位置情報、およびユーザが過去に訪問した場所の経度緯度情報とユーザによって登録されたテキスト情報を含む過去の行動履歴情報、訪問先の場所情報とユーザによって登録されたテキスト情報を含む未来のスケジュール情報をクライアント部からサーバー部へ送信するアップロードステップと、
を有
サーバー部において、
所定の知識情報集合に対し、アップロードステップにより送信されたユーザの現在位置情報を検索条件とする検索を実施する位置検索ステップと、
前記過去の行動履歴情報中のユーザによって登録されたテキスト情報を形態素解析にかけて名詞を抽出し、前記過去の行動履歴情報中の緯度経度情報を住所名情報に変換し、前記抽出された名詞と前記住所名情報とのANDによる第1の検索式を構成し、前記未来のスケジュール情報中のユーザによって登録されたテキスト情報を形態素解析にかけて名詞を抽出し、前記抽出された名詞と前記未来のスケジュール情報中の訪問先の場所情報とのANDによる第2の検索式を構成し、前記第1の検索式と前記第2の検索式のOR結合による第3の検索式を作成し、前記第3の検索式を用いて、前記位置検索ステップの結果をしぼりこむことにより関連情報を選び出すしぼりこみ検索ステップと、
しぼりこみ検索ステップにより得られた関連情報をサーバー部からクライアント部へ送信するダウンロードステップと、
を有し
クライアント部において、前記ダウンロードステップにより受信した関連情報をクライアント部のディスプレイ上に表示する情報提示ステップを有する。
【0008】
本発明は、GPSなどの状況認識システムを用いてユーザの現在位置を認識し、ユーザの現在位置情報およびユーザの過去の行動履歴情報、未来のスケジュール情報などを考慮するかたちで百科事典データベースなどの知識情報集合を検索することによって、現在の状況および過去、未来の文脈に依存する情報をユーザに提供するものである。
【0009】
例えば、本発明を旅行などの情報案内/ナビゲーションシステムに適用すれば、ユーザの現地での情報収集活動において、「○○寺に行って来たのだったら、ここの近くの△△寺に寄って行くことをお薦めします。理由は以下の情報をご参照下さい。」、逆に「○○寺にこれから行くのだったら、ここの近くの△△寺に寄って行くことをお薦めします。理由は以下の情報をご参照下さい。」、あるいは「○○寺に行って来て、これから△△寺に行くのだったら、ここの近くの□□店に寄って行くことをお薦めします。理由は以下の情報をご参照下さい。」といったユーザの現在、過去、未来の文脈を考慮した推薦機能の実現が可能となる。
【0010】
また、本発明における、ユーザの過去、未来の文脈情報を考慮した情報検索技術・情報提示技術は、通常のキーワード検索に対しても適用が可能である。例えば、旅行先などで興味や関心を持った対象についてユーザがインターネットなどを利用して情報収集する際にこのようなキーワード検索を用いれば、その対象に関する情報であって、かつ、ユーザの過去、未来の文脈情報に依存した情報が得られ、ユーザは、その所望の対象とそれまでに訪問した場所・見聞したモノや、これから訪問する場所・見聞するモノなどとの関連性を発見したり理解したりできる。
【0011】
本発明の実施態様によれば、状況認識ステップは、位置計測システムによりユーザの現在位置を定期的に計測して、ユーザがある場所に一定時間以上滞在したことを計測した場合には、その位置をユーザが訪問したと解釈して、当該位置情報を滞在時間情報と共にクライアント部の個人情報記録部に記録する。
【0012】
本発明の実施態様によれば、状況認識ステップは、位置計測システムおよびこれに連動する画像撮影システムを用いて、ユーザがある場所で画像を撮影した場合にはその撮影位置情報を自動的に取得して、当該位置情報および撮影画像情報、撮影時刻情報をクライアント部の個人情報記録部に記録する。
【0016】
【発明の実施の形態】
次に、本発明の実施形態について図面を参照して説明する。
【0017】
図1は本発明の一実施形態の個人適応型情報案内システムの構成図である。
【0018】
本システムは、いわゆるサーバー・クライアント構成をとっており、クライアントである携帯型コンピュータ1と、サーバーであるワークステーション2が基本構成要素である。ワークステーション2には百科事典データベース3が接続されている。百科事典データベース3には歴史、文化などの様々な記事が見出し語別に格納されている。また、ワークステーション2はインターネット4に接続しており、WWWへのアクセスが可能である。なお、ワークステーション2はメインメモリ、CPU、ディスプレイ、キーボードなどからなる、いわゆるコンピュータシステムであるが、その構成は周知であるのでここでは詳細は省略する。一方、携帯型コンピュータ1は、メインメモリ10、CPU12、ディスプレイ13、無線データ通信部14、GPS受信部15、画像撮影部16、個人情報記録部17、電子地図データベース18、ペンインタフェースなどを有する入力デバイス部19、以上の各部を制御する各種プログラムを記録したROM11から構成されている。
【0019】
無線データ通信部14は、インターネット4を介してワークステーション2に接続し、サーバー・クライアント間通信を実行する。
【0020】
GPS受信部15は、GPSシステムによって送信される電波を受信して受信場所の位置情報(緯度経度情報など)および受信時刻の時刻情報を取得する。また、GPS受信部15は画像撮影部16と連動しており、画像が撮影された場合にはGPS受信部15も起動して撮影画像の撮影位置情報および撮影時刻情報を取得する。個人情報記録部17は、ユーザが過去に訪問した場所の位置情報、滞在時間情報などが記録される。また、画像撮影部16によって画像が撮影された場合には、個人情報記録部17には撮影位置情報、撮影時刻情報、撮影画像のファイル名が記録され、ユーザによってコメントなどのテキスト情報も登録される。なお、撮影画像のファイルもここに格納される。個人情報記録部17には、ユーザが訪問する予定の住所名情報、訪問予定時間情報などのスケジュール情報も登録される。
【0021】
図2は本システムにおける個人適応型情報案内処理の流れを示すフローチャートである。まず、状況認識処理21では、携帯型コンピュータ1のGPS受信部15がGPS信号を受信して、ユーザの現在の位置および時刻を取得して個人情報記録部17に記録する。携帯型コンピュータ1においてディファレンシャルGPSシステムの利用が可能ならば、上記で取得した位置情報を補正しておくことが望ましい。
【0022】
なお、状況認識処理21では、GPS受信部15が、ユーザの現在位置を定期的に計測して、ユーザがある場所に一定時間以上滞在したことを計測した場合には、CPU12はその位置をユーザが訪問したと解釈して、当該位置情報を滞在時間情報と共に個人情報記録部17にユーザの行動履歴情報として記録することができる。また、状況認識処理21では、GPS受信部15およびこれに連動する画像撮影部16を用いて、ユーザがある場所で画像を撮影した場合には、その撮影位置情報をGPS受信部15により自動的に取得して、CPU12が当該位置情報および撮影時刻情報、撮影画像情報を個人情報記録部17にユーザの行動履歴情報として記録することができる。図4に、携帯型コンピュータ1の個人情報記録部17に格納される行動履歴ファイルにユーザの行動履歴情報が記録される記録例を示す。
【0023】
なお、GPSシステムが利用できない場所への訪問も考慮して、行動履歴ファイルにはユーザが直接編集できるインタフェースを備えておくことが望ましい。
【0024】
また、PHSでは、およその居場所を検索し、地図に表示するサービスが提供されている。例えば、NTT DoCoMoでは、「いまどこサービス」の名称で、PHS のエリア内なら、どこでもおよその居場所を検索し、地図に表示して利用者にファクスで送信するサービスを提供している。このような位置情報サービスにおいて、検索された居場所を位置情報として携帯型コンピュータ1に送信することによって、GPS受信部15は不要となり、PHSのようにGPS受信部15を持たない端末をクライアントとして使用することも可能となる。
【0025】
なお、個人情報記録部17には、ユーザの訪問予定場所、訪問予定時間などのスケジュール情報もユーザによって事前に記録できる。図5に、クライアントの個人情報記録部17に格納されるスケジュールファイルにユーザのスケジュール情報が記録される記録例を示す。
【0026】
次に、アップロード処理22では、個人情報記録部17に記録された現在位置情報および現在時刻情報、行動履歴ファイルに記録された行動履歴情報、スケジュールフィルに記録されたスケジュール情報のそれぞれを無線データ通信部14を介してワークステーション2へアップロードしてワークステーション2のメインメモリに記録する。なお、アップロード処理22では、行動履歴およびスケジュールの各情報がワークステーション2にアップロードされる前に、送信する内容を携帯型コンピュータ1のディスプレイ13に出力してユーザに了解を求め、修正が必要な場合にはユーザが入力デバイス部19を用いて修正できるようにしておくことが望ましい。
【0027】
次に、関連情報収集処理23では、百科事典データベース3やWWWなどの知識情報集合に対して、上記アップロードされた現在位置情報を検索条件とする検索を実施して現在位置周辺の情報であってユーザの過去、未来の文脈に依存するものを選び出す。
【0028】
図3に、関連情報収集処理22の詳細な流れを示すフローチャートを示す。
【0029】
まず、位置検索処理31では、アップロード処理22においてワークステーション2のメインメモリに記録された現在位置情報を、百科事典データベース3もしくはWWWの検索エンジンに提出して、ユーザの現在位置を検索条件とする検索を実施し、現在位置周辺の情報を収集する。検索結果は、現在位置までの距離情報と共にワークステーション2のメインメモリに記録する。ただし、距離情報は、検索対象に記述されている住所名もしくは緯度経度などの位置情報から現在位置に最も近いものを選び出して、それと現在位置との距離値により定義する。
【0030】
次に、しぼりこみ検索処理32では、上記検索結果の中から、ワークステーション2のメインメモリに記録された現在時刻情報を考慮して、ユーザの過去、未来の文脈に依存する情報、すなわち、行動履歴情報、スケジュール情報に関連するものを選び出す。なお、本しぼりこみ検索処理32および次のソート処理33はワークステーション2のCPUおよびメインメモリを用いて実施する。
【0031】
まず、ワークステーション2のメインメモリに記録され行動履歴情報およびスケジュール情報の各データから、本しぼりこみ検索に使用する検索式を以下の要領により作成する。
【0032】
ワークステーション2のメインメモリに記録された情報がユーザの行動履歴情報である場合:
(a)コメント属性にも情報が登録されている場合には、登録されているテキスト情報を形態素解析にかけて名詞を抽出、キーワード化し、さらに(緯度経度の)の位置属性を住所名情報に変換して、両者のAND検索式を作成する。
【0033】
(b)コメント属性に情報が何も登録されていない場合には、(緯度経度の)位置属性を住所名情報に変換し、それ単独で検索式を作成する。
【0034】
ワークステーション2のメインメモリに記録された情報がユーザのスケジュール情報である場合:
(c)コメント属性にも情報が登録されている場合には、登録されているテキスト情報を形態素解析にかけて名詞を抽出、キーワード化し、当該キーワードと訪問作の住所名情報とのAND検索式を作成する。
【0035】
(d)コメント属性には情報が何も登録されていない場合は、訪問先の住所名情報のみで検索式を作成する。
【0036】
上記の要領で、行動履歴、スケジュールの各データから(部分)検索式を作成し、次に、それらのOR結合による検索式を作成する。この(複合)検索式を用いて位置検索処理31の結果を再度しぼりこむことによって、ユーザの過去、未来の文脈情報(の少なくとも一つのデータ)に依存する関連情報を選び出す。
【0037】
最後に、ソート処理33では、上記しぼりこんだ結果を、上記複合検索式との関連度、さらに位置検索処理31で算出した距離情報(検索対象と現在位置との距離)とを考慮して順序付ける。以上の一連の処理により関連情報収集処理23を終了し、ダウンロード処理24が次に実施される。
【0038】
ダウンロード処理24では、ソート処理33で得られた結果を携帯型コンピュータ1にダウンロードしてメインメモリ10に記録する。
【0039】
最後に、情報提示処理25では、CPU12が携帯型コンピュータ1のメインメモリ10に記録された情報をディスプレイ3上に一覧表示する。以上によって個人適応型情報案内処理が終了する。
【0040】
なお、情報提示処理25は、ユーザが入力デバイス部19を用いて一覧表示の中から所望の関連情報を選択できるようにしておき、選択された情報の詳細および関連する行動履歴およびスケジュールの各情報がディスプレイ13上に表示できるようにしておくことが望ましい。さらに、情報提示処理25では、携帯型コンピュータ1の電子地図データベース部18から現在位置周辺の地図情報を読み出して上記検索結果を当該地図情報の上に表示できるようにしておくことが望ましい。
【0041】
図6に、上記検索結果が現在位置周辺の地図情報と共に携帯型コンピュータ1のディスプレイ13に表示される画面例を示す。また、図7に、ユーザによって選択された所望の情報の詳細が関連する行動履歴およびスケジュールの各情報と共に携帯型コンピュータ1のディスプレイ13に表示される画面例を示す。
【0042】
なお、状況認識処理21、アップロード処理22、関連情報収集処理23を定期的に実行して、ユーザが事前に指定した条件を満たす関連情報がワークステーション2において検索された場合には、当該情報のダウンロード処理24を実行して携帯型コンピュータ1に送信して情報提示処理25によりディスプレイ13に表示し、ユーザの注意を喚起するものであってもよい。
【0043】
また、図2、図3の処理は、フロッピィディスク、CD―ROM、光磁気ディスクなどの記録媒体に記録して携帯型コンピュータ1、ワークステーション2によって実行するようにしてもよい。
【0044】
【発明の効果】
以上説明したように、本発明によれば、GPSなどの状況認識システムを用いてユーザの現在の状況を認識し、当該認識結果およびユーザの過去の行動履歴情報、未来のスケジュール情報などを考慮するかたちで百科事典データベースなどの知識情報集合を検索することによって、現在の状況および過去、未来の文脈に依存する情報をユーザに提供して、よりユーザに個人化された案内情報を提供することが可能となる。
【図面の簡単な説明】
【図1】本発明の一実施形態の個人適応型情報案内システムの構成図である。
【図2】図1のシステムにおける個人適応型情報案内処理の流れを示すフローチャートである。
【図3】関連情報収集処理23の詳細な流れを示すフローチャートである。
【図4】携帯型コンピュータ1の個人情報DB部に格納される行動履歴ファイルにユーザの行動履歴情報が記録される記録例である。
【図5】携帯型コンピュータ1の個人情報DB部に格納されるスケジュールファイルにユーザのスケジュール情報が記録される記録例である。
【図6】関連情報収集処理23の結果が現在位置周辺の地図情報と共にクライアントのディスプレイ13に表示される画面例である。
【図7】ユーザによって選ばれた所望の関連情報の詳細が関連するユーザプロファイル情報と共に携帯型コンピュータ1のディスプレイ13に表示される画面例である。
【符号の説明】
1 携帯型コンピュータ
10 メインメモリ
11 ROM
12 CPU
13 ディスプレイ
14 無線データ通信部
15 GPS受信部
16 画像撮影部
17 個人情報記録部
18 電子地図データベース部
19 入力デバイス部
2 ワークステーション
3 百科事典データベース
4 インターネット
21 状況認識処理
22 アップロード処理
23 関連情報収集処理
24 ダウンロード処理
25 情報提示処理
31 位置検索処理
32 しぼりこみ検索処理
33 ソート処理
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an information guidance method and system for recognizing a user's current position using GPS or the like in a user's activity for the entire real world and providing the user with information related to the position.
[0002]
[Prior art]
Conventionally, a mobile information terminal connected to a GPS or other position measurement system measures the current position of the user, expresses the position on a map, and presents document information or image information related to the position to the user. For example, the following technique is proposed.
[0003]
(Reference 1) Takeshi Nagao, Junichi Kyokumoto, Junichiro Ito, Masaki Yagi, Michiaki Yasumura,
Walk Navi: Location-aware interactive information guidance system, interactive system and software 3, pp. 39-48, Modern Science, 1995
(Reference 2) Nagao,
Agent Augmented Reality bit, Vol. 31, no. 5, pp. 66-76, 1999
The former is a walk navigation system that uses GPS to recognize a user's current location, expresses the recognized results on a map, provides the user with web information related to that location, and supports their activities. A system is proposed. In the latter case, in the on-campus navigation system called Hyper Campus, not only the current situation such as the current position and current time of the user, but also personal information pre-registered in the system is used for personalization. The personalized information guidance technology that presents the recorded information and records the visited place and the accessed information as an action history is realized. In these techniques, association between an arbitrary place in the real world and guidance information is performed manually by a system designer or the like.
[0004]
[Problems to be solved by the invention]
However, in the above-described prior art, since the correspondence between an arbitrary place in the real world and information is performed by a specific person, it takes time and effort to associate the two, and the relationship between the two is There is a problem that it depends on the subjectivity and production intention of the person performing the attachment, and cannot always meet the demands of users with diverse viewpoints and interests.
[0005]
Also, in activities such as travel, reflecting the user's past and future context in the guidance information to the user may be more meaningful information for the individual user, but this is not always possible with the technology described above. There was a problem of not being. For example, suppose that in a trip to Kyoto or Nara, there is another temple B or shop C that is historically or culturally strongly related to the temple A that the user has already visited around the place where the user is currently located. In such a case, it is conceivable that the temple B and the shop C are strongly interested for the individual user. Therefore, in the guidance information to the user, it is better information guidance for the user to guide the information of the temple B and the shop C including the relevance with the temple A visited by the user. However, although the above-mentioned conventional technology has realized the technology to leave the user's behavior history, there is no mechanism for dynamically and flexibly linking the behavior history information and future schedule information to the current situation of the user. Even if the existence of B and the shop C can be guided, there is a problem that the relevance to the temple A (which the user has visited) cannot always be guided.
[0006]
An object of the present invention is that the correspondence between a place and information does not depend on a specific human subjectivity or production intention, and the personal adaptive information guide that reflects the current, past, and future context information of the user. It is to provide a method and system.
[0007]
[Means for Solving the Problems]
The personal adaptive information guidance method of the present invention comprises:
In the client part,
A situation recognition step for recognizing the current position of the user using the situation recognition system;
User's current position information obtained by the situation recognition step, past action history information including text information registered by the user and longitude / latitude information of the place visited by the user in the past, location information of the visited place and the user An upload step for sending future schedule information including registered text information from the client part to the server part,
Have a,
In the server part,
A position search step for performing a search using the current position information of the user transmitted by the upload step as a search condition for a predetermined knowledge information set;
The text information registered by the user in the past action history information is subjected to morphological analysis to extract a noun, the latitude and longitude information in the past action history information is converted into address name information, the extracted noun and the Forming a first search formula by AND with the address name information, extracting a noun by applying morphological analysis to text information registered by the user in the future schedule information, and extracting the noun and the future schedule information A second search expression by AND with the location information of the visited place in the middle, creating a third search expression by OR combination of the first search expression and the second search expression, Using a search formula, a search step for selecting relevant information by compressing the result of the position search step;
A download step of transmitting related information obtained by the squeeze search step from the server unit to the client unit;
Have
The client unit includes an information presentation step of displaying the related information received in the download step on the display of the client unit.
[0008]
The present invention recognizes a user's current position using a situation recognition system such as GPS, and takes into account the user's current position information, user's past action history information, future schedule information, etc. By searching the knowledge information set, the user is provided with information that depends on the current situation and the past and future context.
[0009]
For example, if the present invention is applied to an information guidance / navigation system for travel, etc., in the information gathering activity of the user, “If you have been to XX temple, stop by △△ temple near here. "Please refer to the following information for the reason." On the contrary, "If you are going to the XX temple from now on, it is recommended to stop by the △△ temple near here. Please refer to the following information for the reason. ”Or“ If you come to XX temple and go to △△ temple in the future, we recommend that you stop by a nearby □□ store. It is possible to implement a recommendation function that takes into account the current, past, and future context of the user, such as “Please refer to the following information for the reason.”
[0010]
In addition, the information search technique and information presentation technique in consideration of the past and future context information of the user in the present invention can be applied to normal keyword search. For example, if such a keyword search is used when a user collects information using the Internet or the like about an object that is interested or interested in a travel destination or the like, it is information about the object, and the user's past, Information that depends on future contextual information is obtained, and the user can discover and understand the relationship between the desired target and the places visited / viewed so far, as well as the places visited / viewed in the future. I can do it.
[0011]
According to the embodiment of the present invention, the situation recognition step periodically measures the user's current position by the position measurement system, and if the user has stayed at a certain place for a certain period of time, the position is Is recorded in the personal information recording unit of the client unit together with the staying time information.
[0012]
According to the embodiment of the present invention, the situation recognition step automatically acquires the shooting position information when the user takes an image at a certain place using the position measurement system and the image shooting system linked thereto. Then, the position information, the photographed image information, and the photographing time information are recorded in the personal information recording unit of the client unit.
[0016]
DETAILED DESCRIPTION OF THE INVENTION
Next, embodiments of the present invention will be described with reference to the drawings.
[0017]
FIG. 1 is a configuration diagram of a personal adaptive information guidance system according to an embodiment of the present invention.
[0018]
This system has a so-called server / client configuration, and a portable computer 1 as a client and a workstation 2 as a server are basic components. An encyclopedia database 3 is connected to the workstation 2. In the encyclopedia database 3, various articles such as history and culture are stored for each headword. The workstation 2 is connected to the Internet 4 and can access the WWW. The workstation 2 is a so-called computer system that includes a main memory, a CPU, a display, a keyboard, and the like. However, since the configuration is well known, the details are omitted here. On the other hand, the portable computer 1 has an input having a main memory 10, a CPU 12, a display 13, a wireless data communication unit 14, a GPS receiving unit 15, an image photographing unit 16, a personal information recording unit 17, an electronic map database 18, a pen interface, and the like. The device unit 19 includes a ROM 11 in which various programs for controlling the above-described units are recorded.
[0019]
The wireless data communication unit 14 is connected to the workstation 2 via the Internet 4 and executes server-client communication.
[0020]
The GPS receiver 15 receives radio waves transmitted by the GPS system, and acquires position information (such as latitude / longitude information) of the reception location and time information of the reception time. In addition, the GPS receiving unit 15 is linked to the image capturing unit 16, and when the image is captured, the GPS receiving unit 15 is also activated to acquire the capturing position information and the capturing time information of the captured image. The personal information recording unit 17 records location information of a place visited by the user in the past, stay time information, and the like. Further, when an image is taken by the image photographing unit 16, photographing position information, photographing time information, and a file name of the photographed image are recorded in the personal information recording unit 17, and text information such as a comment is also registered by the user. The Note that the captured image file is also stored here. In the personal information recording unit 17, schedule information such as address name information scheduled to be visited by the user and scheduled visit time information is also registered.
[0021]
FIG. 2 is a flowchart showing the flow of the personal adaptive information guidance process in this system. First, in the situation recognition process 21, the GPS receiving unit 15 of the portable computer 1 receives a GPS signal, acquires the current position and time of the user, and records them in the personal information recording unit 17. If the differential GPS system can be used in the portable computer 1, it is desirable to correct the position information acquired above.
[0022]
In the situation recognition process 21, when the GPS receiving unit 15 periodically measures the current position of the user and measures that the user has stayed at a certain place for a certain period of time, the CPU 12 determines the position of the user. Can be recorded as user action history information in the personal information recording unit 17 together with the staying time information. Further, in the situation recognition process 21, when the user has taken an image at a certain location using the GPS receiving unit 15 and the image capturing unit 16 linked to the GPS receiving unit 15, the GPS receiving unit 15 automatically acquires the shooting position information. The CPU 12 can record the position information, shooting time information, and shot image information in the personal information recording unit 17 as user action history information. FIG. 4 shows a recording example in which user action history information is recorded in an action history file stored in the personal information recording unit 17 of the portable computer 1.
[0023]
In consideration of a visit to a place where the GPS system cannot be used, it is desirable that the action history file has an interface that can be directly edited by the user.
[0024]
In PHS, a service for searching an approximate location and displaying it on a map is provided. For example, NTT DoCoMo provides a service called “Now Where Service” that searches for an approximate location anywhere within the PHS area, displays it on a map, and transmits it to the user by fax. In such a location information service, by transmitting the searched location as location information to the portable computer 1, the GPS receiver 15 is unnecessary, and a terminal that does not have the GPS receiver 15 such as PHS is used as a client. It is also possible to do.
[0025]
In the personal information recording unit 17, schedule information such as a user's planned visit location and planned visit time can also be recorded in advance by the user. FIG. 5 shows a recording example in which user schedule information is recorded in a schedule file stored in the personal information recording unit 17 of the client.
[0026]
Next, in the upload process 22, the current position information and current time information recorded in the personal information recording unit 17, the action history information recorded in the action history file, and the schedule information recorded in the schedule file are transmitted by wireless data communication. Upload to the workstation 2 via the unit 14 and record in the main memory of the workstation 2. In the upload process 22, before each action history and schedule information is uploaded to the workstation 2, the contents to be transmitted are output to the display 13 of the portable computer 1, and the user is asked to understand and need to be corrected. In this case, it is desirable that the user can make corrections using the input device unit 19.
[0027]
Next, in the related information collection process 23, a search is performed on the knowledge information set such as the encyclopedia database 3 or the WWW using the uploaded current position information as a search condition. Select those that depend on the user's past and future context.
[0028]
FIG. 3 is a flowchart showing a detailed flow of the related information collection processing 22.
[0029]
First, in the position search process 31, the current position information recorded in the main memory of the workstation 2 in the upload process 22 is submitted to the encyclopedia database 3 or the WWW search engine, and the user's current position is used as a search condition. Perform a search and collect information around the current location. The search result is recorded in the main memory of the workstation 2 together with the distance information to the current position. However, the distance information is defined by the distance value between the current position and the position information such as the address name or latitude / longitude described in the search target, which is closest to the current position.
[0030]
Next, in the squeeze search process 32, information that depends on the past and future contexts of the user in consideration of the current time information recorded in the main memory of the workstation 2 from the search results, that is, the action Select information related to history information and schedule information. Note that the squeeze-in search process 32 and the next sort process 33 are performed using the CPU and main memory of the workstation 2.
[0031]
First, a search expression used for the full search is created from the action history information and schedule information recorded in the main memory of the workstation 2 as follows.
[0032]
When the information recorded in the main memory of the workstation 2 is user action history information:
(A) When information is also registered in the comment attribute, the registered text information is subjected to morphological analysis to extract nouns and convert them into keywords, and the position attribute (of latitude and longitude) is converted into address name information. Thus, an AND search formula for both is created.
[0033]
(B) If no information is registered in the comment attribute, the position attribute (of latitude and longitude) is converted into address name information, and a search formula is created by itself.
[0034]
When the information recorded in the main memory of the workstation 2 is the user's schedule information:
(C) If information is also registered in the comment attribute, the registered text information is subjected to morphological analysis to extract nouns and convert them into keywords, and an AND search expression is created between the keywords and the address name information of the visited work To do.
[0035]
(D) When no information is registered in the comment attribute, a search formula is created only with the address name information of the visited site.
[0036]
In the above manner, a (partial) search expression is created from the action history and schedule data, and then a search expression based on the OR combination of them is created. By re-squeezing the result of the position search processing 31 using this (compound) search formula, related information depending on the user's past and future context information (at least one data thereof) is selected.
[0037]
Finally, in the sorting process 33, the result of the above-mentioned reduction is ordered in consideration of the degree of relevance with the above compound search expression and the distance information (distance between the search target and the current position) calculated in the position search process 31. wear. The related information collection process 23 is terminated by the above series of processes, and the download process 24 is performed next.
[0038]
In the download process 24, the result obtained in the sort process 33 is downloaded to the portable computer 1 and recorded in the main memory 10.
[0039]
Finally, in the information presentation process 25, the CPU 12 displays a list of information recorded in the main memory 10 of the portable computer 1 on the display 3. The personal adaptive information guidance process is thus completed.
[0040]
The information presentation process 25 allows the user to select desired related information from the list display using the input device unit 19, and details of the selected information and related information of the action history and schedule Is preferably displayed on the display 13. Furthermore, in the information presentation process 25, it is desirable to read out map information around the current position from the electronic map database unit 18 of the portable computer 1 so that the search result can be displayed on the map information.
[0041]
FIG. 6 shows a screen example in which the search result is displayed on the display 13 of the portable computer 1 together with the map information around the current position. FIG. 7 shows an example of a screen displayed on the display 13 of the portable computer 1 together with the action history and schedule information related to the details of the desired information selected by the user.
[0042]
In addition, when the situation recognition process 21, the upload process 22, and the related information collection process 23 are periodically executed and related information satisfying a condition specified in advance by the user is searched in the workstation 2, the information of the information The download process 24 may be executed and transmitted to the portable computer 1 and displayed on the display 13 by the information presentation process 25 to alert the user.
[0043]
2 and 3 may be recorded on a recording medium such as a floppy disk, a CD-ROM, or a magneto-optical disk and executed by the portable computer 1 and the workstation 2.
[0044]
【The invention's effect】
As described above, according to the present invention, the current situation of the user is recognized using a situation recognition system such as GPS, and the recognition result, the user's past action history information, future schedule information, and the like are taken into consideration. By searching a collection of knowledge information such as an encyclopedia database in a form, it is possible to provide the user with information that depends on the current situation, past and future context, and to provide more personalized guidance information to the user It becomes possible.
[Brief description of the drawings]
FIG. 1 is a configuration diagram of a personal adaptive information guidance system according to an embodiment of the present invention.
FIG. 2 is a flowchart showing a flow of personal adaptive information guidance processing in the system of FIG. 1;
FIG. 3 is a flowchart showing a detailed flow of related information collection processing 23;
FIG. 4 is a recording example in which user action history information is recorded in an action history file stored in a personal information DB unit of the portable computer 1;
FIG. 5 is a recording example in which user schedule information is recorded in a schedule file stored in a personal information DB section of the portable computer 1;
FIG. 6 is a screen example in which a result of related information collection processing 23 is displayed on the display 13 of the client together with map information around the current position.
FIG. 7 is an example of a screen displayed on the display 13 of the portable computer 1 together with related user profile information with details of desired related information selected by the user.
[Explanation of symbols]
1 portable computer 10 main memory 11 ROM
12 CPU
13 Display 14 Wireless Data Communication Unit 15 GPS Reception Unit 16 Image Shooting Unit 17 Personal Information Recording Unit 18 Electronic Map Database Unit 19 Input Device Unit 2 Workstation 3 Encyclopedia Database 4 Internet 21 Situation Recognition Processing 22 Upload Processing 23 Related Information Collection Processing 24 download process 25 information presentation process 31 position search process 32 squeeze search process 33 sort process

Claims (6)

実世界全体を対象とし、ユーザの現在の状況および過去、未来の文脈に依存する情報を提供する方法であって、
クライアント部において、
状況認識システムを用いてユーザの現在位置を認識する状況認識ステップと、
前記状況認識ステップにより得られたユーザの現在位置情報、およびユーザが過去に訪問した場所の経度緯度情報とユーザによって登録されたテキスト情報を含む過去の行動履歴情報、訪問先の場所情報とユーザによって登録されたテキスト情報を含む未来のスケジュール情報を前記クライアント部からサーバー部へ送信するアップロードステップと、
を有し、
前記サーバー部において、
所定の知識情報集合に対し、前記アップロードステップにより送信されたユーザの現在位置情報を検索条件とする検索を実施する位置検索ステップと、
前記過去の行動履歴情報中のユーザによって登録されたテキスト情報を形態素解析にかけて名詞を抽出し、前記過去の行動履歴情報中の緯度経度情報を住所名情報に変換し、前記抽出された名詞と前記住所名情報とのANDによる第1の検索式を構成し、前記未来のスケジュール情報中のユーザによって登録されたテキスト情報を形態素解析にかけて名詞を抽出し、前記抽出された名詞と前記未来のスケジュール情報中の訪問先の場所情報とのANDによる第2の検索式を構成し、前記第1の検索式と前記第2の検索式のOR結合による第3の検索式を作成し、前記第3の検索式を用いて、前記位置検索ステップの結果をしぼりこむことにより関連情報を選び出すしぼりこみ検索ステップと、
前記しぼりこみ検索ステップにより得られた関連情報を前記サーバー部から前記クライアント部へ送信するダウンロードステップと、
を有し、
前記クライアント部において、前記ダウンロードステップにより受信した関連情報を前記クライアント部のディスプレイ上に表示する情報提示ステップを有する
個人適応型情報案内方法。
A method of providing information that depends on the current situation of the user and the context of the past and future for the entire real world,
In the client part,
A situation recognition step for recognizing the current position of the user using the situation recognition system;
User's current position information obtained by the situation recognition step, past action history information including text information registered by the user and longitude / latitude information of the place visited by the user in the past, location information of the visited place and the user An upload step of transmitting future schedule information including registered text information from the client unit to the server unit;
Have
In the server part,
A position search step for performing a search using the current position information of the user transmitted by the upload step as a search condition for a predetermined knowledge information set;
The text information registered by the user in the past action history information is subjected to morphological analysis to extract a noun, the latitude and longitude information in the past action history information is converted into address name information, the extracted noun and the Forming a first search formula by AND with the address name information, extracting a noun by applying morphological analysis to text information registered by the user in the future schedule information, and extracting the noun and the future schedule information A second search expression by AND with the location information of the visited place in the middle, creating a third search expression by OR combination of the first search expression and the second search expression, Using a search formula, a search step for selecting relevant information by compressing the result of the position search step;
And download sending related information obtained by the refine step from the server unit to the client unit,
Have
The personal adaptive information guidance method which has the information presentation step which displays the related information received by the said download step on the display of the said client part in the said client part.
前記状況認識ステップは、位置計測システムによりユーザの現在位置を定期的に計測して、ユーザがある場所に一定時間以上滞在したことを計測した場合には、その位置をユーザが訪問したと解釈して、当該位置情報を滞在時間情報と共に前記クライアント部の個人情報記録部に記録する、請求項1記載の個人適応型情報案内方法。In the situation recognition step, the current position of the user is periodically measured by the position measurement system, and when the user has stayed at a certain place for a certain period of time, the position is interpreted as having been visited by the user. Te, and records the position information along with residence time information in the personal information storage unit of the client unit, personal adaptive information guidance method according to claim 1, wherein. 前記状況認識ステップは、位置計測システムおよびこれに連動する画像撮影システムを用いて、ユーザがある場所で画像を撮影した場合にはその撮影位置情報を自動的に取得して、当該位置情報および撮影画像情報、撮影時刻情報を前記クライアント部の個人情報記録部に記録する、請求項記載の個人適応型情報案内方法。In the situation recognition step, when a user takes an image at a certain place using a position measurement system and an image photographing system linked thereto, the photographing position information is automatically acquired, and the position information and the photographing are performed. image information, the photographing time information is recorded in the personal information storage unit of the client unit, personal adaptive information guidance method according to claim 1, wherein. 実世界全体を対象とし、ユーザの現在の状況および過去、未来の文脈に依存する情報を提供するシステムであって、
クライアント部とサーバー部を有し、
前記クライアント部が、
状況認識システムを用いてユーザの現在位置を認識する状況認識手段と、
前記状況認識手段により得られたユーザの現在位置情報、および、ユーザが過去に訪問した場所の緯度経度情報とユーザによって登録されたテキスト情報を含む過去の行動履歴情報、訪問先の場所情報とユーザによって登録されたテキスト情報を含む未来のスケジュール情報を前記サーバー部へ送信するアップロード手段
を有し
前記サーバー部
所定の知識情報集合に対し、前記アップロード手段により送信されたユーザの現在位置情報を検索条件とする検索を実施する位置検索手段と、
前記過去の行動履歴情報中のユーザによって登録されたテキスト情報を形態素解析にかけて名詞を抽出し、前記過去の行動履歴情報中の緯度経度情報を住所名情報に変換し、前 記抽出された名詞と前記住所名情報とのANDによる第1の検索式を構成し、前記未来のスケジュール情報中のユーザによって登録されたテキスト情報を形態素解析にかけて名詞を抽出し、前記抽出された名詞と前記未来のスケジュール情報中の訪問先の場所情報とのANDによる第2の検索式を構成し、前記第1の検索式と前記第2の検索式のOR結合による第3の検索式を作成し、前記第3の検索式を用いて、前記位置検索手段の結果をしぼりこむことにより関連情報を選び出すしぼりこみ検索手段と、
前記しぼりこみ検索手段により得られた関連情報を前記サーバー部から前記クライアント部へ送信するダウンロード手段と、
を有し
前記クライアント部、前記ダウンロード手段から受信した関連情報を前記クライアント部のディスプレイ上に表示する情報提示手段をさらに有する
個人適応型情報案内システム。
A system that targets the entire real world and provides information that depends on the user's current situation and past and future contexts,
It has a client part and a server part,
The client part is
Situation recognition means for recognizing the current position of the user using the situation recognition system;
User's current position information obtained by the situation recognition means, past action history information including text information registered by the user and latitude / longitude information of the place visited by the user in the past, location information and user of the destination and uploading means for transmitting the schedule information of the future to the server portion including the text information that has been registered by the
Have
The server part is
Position search means for performing a search using the current position information of the user transmitted by the upload means as a search condition for a predetermined knowledge information set;
The extract nouns subjected morphological analysis text information registered by the user in the past action history information, the converted latitude and longitude information in the past action history information in the address name information, before Symbol extracted nouns Forming a first search expression by AND with the address name information, extracting a noun by performing morphological analysis on text information registered by the user in the future schedule information, and extracting the noun and the future schedule Forming a second search formula by AND with the location information of the visited place in the information, creating a third search formula by OR combination of the first search formula and the second search formula, A search method for selecting relevant information by squeezing the result of the position search unit using the search formula of
Download means for transmitting the relevant information obtained by the squeeze search means from the server part to the client part;
Have
The client unit, personal adaptive information guidance system further comprising an information presenting means for displaying the related information received from the downloading means on a display of the client unit.
前記状況認識手段は、位置計測システムによりユーザの現在位置を定期的に計測して、ユーザがある場所に一定時間以上滞在したことを計測した場合には、その位置をユーザが訪問したと解釈して、当該位置情報を滞在時間情報と共に前記クライアント部の個人情報記録部に記録する、請求項記載の個人適応型情報案内システム。The situation recognizing means periodically measures the current position of the user by the position measurement system, and when it is measured that the user has stayed at a certain place for a certain period of time, interprets the position as having been visited by the user. Te, and records the position information along with residence time information in the personal information storage unit of the client unit, personal adaptive information guidance system according to claim 4. 前記状況認識手段は、位置計測システムおよびこれに連動する画像撮影システムを用いて、ユーザがある場所で画像を撮影した場合にはその撮影位置情報を自動的に取得して、当該位置情報および撮影画像情報、撮影時刻情報を前記クライアント部の個人情報記録部に記録する、請求項記載の個人適応型情報案内システム。The situation recognition means automatically acquires the shooting position information when the user takes an image at a certain location using the position measurement system and an image shooting system linked to the position measurement system, and acquires the position information and the shooting. The personal adaptive information guidance system according to claim 4 , wherein image information and photographing time information are recorded in a personal information recording unit of the client unit.
JP2000116493A 2000-04-18 2000-04-18 Personal adaptive information guidance method and system Expired - Fee Related JP3614756B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000116493A JP3614756B2 (en) 2000-04-18 2000-04-18 Personal adaptive information guidance method and system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000116493A JP3614756B2 (en) 2000-04-18 2000-04-18 Personal adaptive information guidance method and system

Publications (2)

Publication Number Publication Date
JP2001306604A JP2001306604A (en) 2001-11-02
JP3614756B2 true JP3614756B2 (en) 2005-01-26

Family

ID=18627949

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000116493A Expired - Fee Related JP3614756B2 (en) 2000-04-18 2000-04-18 Personal adaptive information guidance method and system

Country Status (1)

Country Link
JP (1) JP3614756B2 (en)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4552079B2 (en) * 2000-12-19 2010-09-29 ソフトバンク株式会社 Information distribution service system linked to personal calendar
JP2003157206A (en) * 2001-11-21 2003-05-30 Nec Corp System and method for distributing information and program
JP3538176B2 (en) * 2001-11-28 2004-06-14 株式会社東芝 Electronic device and control method thereof
WO2003069525A1 (en) * 2002-02-12 2003-08-21 Fujitsu Limited Position information managing program, position information managing method, and position information managing device
US7356332B2 (en) 2003-06-09 2008-04-08 Microsoft Corporation Mobile information system for presenting information to mobile devices
US7898572B2 (en) 2004-02-04 2011-03-01 Sony Corporation Methods and apparatuses for identifying opportunities to capture content
US8150617B2 (en) 2004-10-25 2012-04-03 A9.Com, Inc. System and method for displaying location-specific images on a mobile device
JP2006209379A (en) * 2005-01-27 2006-08-10 Matsushita Electric Ind Co Ltd Information filtering device
JP2007086902A (en) * 2005-09-20 2007-04-05 Sharp Corp Content provision device, content provision method and content provision processing program
JP2007226611A (en) * 2006-02-24 2007-09-06 Pioneer Electronic Corp Information provision system and information provision method or the like
US7606583B2 (en) 2006-03-31 2009-10-20 Sap Ag Automated generation of context information
US7836151B2 (en) * 2007-05-16 2010-11-16 Palo Alto Research Center Incorporated Method and apparatus for filtering virtual content
JP5118431B2 (en) * 2007-10-01 2013-01-16 株式会社エヌ・ティ・ティ・ドコモ Information providing system, information providing apparatus, portable terminal, information providing method and program
JP5371224B2 (en) * 2007-10-17 2013-12-18 オリンパスイメージング株式会社 Map display method, map display system, and map display program
JP2009237786A (en) * 2008-03-26 2009-10-15 Brother Ind Ltd Information presentation device, computer program, and information presentation method
JP4645728B2 (en) * 2008-11-25 2011-03-09 ソニー株式会社 History display device, history display system, history display method, and program
KR101740059B1 (en) * 2011-04-01 2017-05-26 한국전자통신연구원 Method and apparatus for providing time machine service based on social network service
JP6898064B2 (en) * 2016-02-26 2021-07-07 ヤフー株式会社 Dialogue decision system, dialogue decision method, dialogue decision program, and terminal device

Also Published As

Publication number Publication date
JP2001306604A (en) 2001-11-02

Similar Documents

Publication Publication Date Title
JP3614756B2 (en) Personal adaptive information guidance method and system
KR100329378B1 (en) Information processing device that advises information
KR101514588B1 (en) System and method for providing contextual actions on a search results page
US7653702B2 (en) Method for automatically associating contextual input data with available multimedia resources
KR101123426B1 (en) A system for generating search results including searching by subdomain hints and providing sponsored results by subdomain
TWI529549B (en) Method, computer-readable media and apparatus for supplementing an article of content
US6691106B1 (en) Profile driven instant web portal
US6883001B2 (en) Document information search apparatus and method and recording medium storing document information search program therein
US7941383B2 (en) Maintaining state transition data for a plurality of users, modeling, detecting, and predicting user states and behavior
Jones et al. Context-aware retrieval for ubiquitous computing environments
US20060059152A1 (en) Browse history presentation system
KR100645608B1 (en) Server of providing information search service using visited uniform resource locator log, and method thereof
US20110019919A1 (en) Automatic modification of web pages
JP5732441B2 (en) Information recommendation method, apparatus and program
KR20090006464A (en) Device, method, recording medium for providing customized content
JP4875911B2 (en) Content identification method and apparatus
KR20070082075A (en) Method and apparatus for serving search result using template based on query and contents clustering
JP2007233862A (en) Service retrieval system and service retrieval method
KR101537555B1 (en) A direct search system for message on the instant messenger
KR101867421B1 (en) Method and Apparatus for Recommending Service Provider Using Social Data
US9092409B2 (en) Smart scoring and filtering of user-annotated geocoded datasets
KR100368300B1 (en) Internet-based searching method
JP2001236368A (en) Information communication terminal, server device, and information communication system connected thereto
JP2008204198A (en) Information providing system and information providing program
KR101589957B1 (en) Method and program for selling products linked to contents

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040623

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040823

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20040823

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20040823

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20041013

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20041027

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071112

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081112

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091112

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101112

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101112

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111112

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees