JP2017033482A - Information output device and information output method, as well as information output program - Google Patents
Information output device and information output method, as well as information output program Download PDFInfo
- Publication number
- JP2017033482A JP2017033482A JP2015155647A JP2015155647A JP2017033482A JP 2017033482 A JP2017033482 A JP 2017033482A JP 2015155647 A JP2015155647 A JP 2015155647A JP 2015155647 A JP2015155647 A JP 2015155647A JP 2017033482 A JP2017033482 A JP 2017033482A
- Authority
- JP
- Japan
- Prior art keywords
- user
- time
- information
- information output
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、情報出力装置及び情報出力方法及び情報出力プログラムに関するものである。 The present invention relates to an information output device, an information output method, and an information output program.
従来の技術として、ユーザに唐突な印象を与えずに通知情報をユーザに提示することを目的とし、ユーザの集中度に基づいて通知情報の初期表示位置を決定する技術がある（例えば、特許文献１参照）。この技術において、通知情報は、情報表示装置の画面に表示される。通知情報は、情報表示装置と接続された機器の状態を示す情報、又は、同じ画面に表示されたコンテンツに関連する情報である。 As a conventional technique, there is a technique for determining the initial display position of the notification information based on the user's concentration degree, for the purpose of presenting the notification information to the user without giving a sudden impression to the user (for example, Patent Documents). 1). In this technique, the notification information is displayed on the screen of the information display device. The notification information is information indicating the state of a device connected to the information display device, or information related to content displayed on the same screen.
従来の技術では、通知情報の内容に関わらず、誰にでも通知情報を表示してしまうという課題がある。即ち、情報表示装置と接続された機器であっても、情報表示装置の画面を見ているユーザには全く関係のない機器の状態を示す情報を表示してしまうおそれがある。具体的には、電子レンジを扱えない子供が画面を見ている際に、電子レンジによる加熱処理が終了したことを示すアイコンを表示してしまうことが考えられる。或いは、情報表示装置の画面に表示されたコンテンツに関連していても、その画面を見ているユーザが全く興味を持たない情報を表示してしまうおそれがある。具体的には、女性用の化粧品に興味のない男性が画面を見ている際に、女性用の化粧品に関する広告を表示してしまうことが考えられる。 In the conventional technology, there is a problem that the notification information is displayed to anyone regardless of the content of the notification information. That is, even if the device is connected to the information display device, there is a possibility that information indicating the state of the device that has nothing to do with the user who is viewing the screen of the information display device may be displayed. Specifically, when a child who cannot handle the microwave oven is looking at the screen, an icon indicating that the heating process using the microwave oven has ended may be displayed. Alternatively, even if the content is related to the content displayed on the screen of the information display device, there is a possibility that information that the user viewing the screen is not interested in at all is displayed. Specifically, when a man who is not interested in cosmetics for women is looking at the screen, an advertisement regarding cosmetics for women may be displayed.
本発明は、ユーザに関係のありそうな情報或いはユーザが興味を持てそうな情報をユーザにタイミングよく提示することを目的とする。 It is an object of the present invention to present information that seems to be relevant to the user or information that the user is interested in in a timely manner.
本発明の一の態様に係る情報出力装置は、
少なくとも１人のユーザによる機器の操作の履歴を示す時系列データである操作履歴データを、記録媒体を用いて記録する管理部と、
前記管理部により記録された操作履歴データから、第１時刻よりも前における機器の操作をユーザ操作として少なくとも１つ特定し、前記ユーザ操作を行ったユーザを識別するとともに、前記ユーザ操作によって、前記第１時刻以降の時刻である第２時刻における、識別したユーザの行動を推定する推定部と、
前記推定部により識別されたユーザと前記推定部により推定された行動との組み合わせによって、そのユーザへ前記第１時刻に提示する情報を決定し、決定した情報を出力する出力部とを備える。
An information output device according to one aspect of the present invention is provided.
A management unit that records operation history data, which is time-series data indicating a history of operation of a device by at least one user, using a recording medium;
From the operation history data recorded by the management unit, at least one device operation prior to the first time is specified as a user operation, and the user who performed the user operation is identified. An estimation unit that estimates the action of the identified user at a second time that is a time after the first time;
An output unit that determines information to be presented to the user at the first time by a combination of the user identified by the estimation unit and the behavior estimated by the estimation unit, and outputs the determined information;
本発明では、第１時刻よりも前における機器の操作をどのユーザが行ったか識別するとともに、その操作によって、第１時刻以降の時刻である第２時刻に、そのユーザがどのような行動をとるか推定し、識別したユーザと推定した行動との組み合わせによって、そのユーザへ第１時刻に提示する情報を決定する。このため、本発明によれば、ユーザに関係のありそうな情報或いはユーザが興味を持てそうな情報をユーザにタイミングよく提示することが可能となる。 In the present invention, which user has performed the operation of the device before the first time is identified, and what action the user takes at the second time after the first time by the operation. The information to be presented to the user at the first time is determined by the combination of the estimated user identified and the estimated action. For this reason, according to the present invention, it is possible to present information that is likely to be related to the user or information that the user is likely to be interested to the user in a timely manner.
以下、本発明の実施の形態について、図を用いて説明する。なお、各図中、同一又は相当する部分には、同一符号を付している。実施の形態の説明において、同一又は相当する部分については、その説明を適宜省略又は簡略化する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. In addition, the same code | symbol is attached | subjected to the part which is the same or it corresponds in each figure. In the description of the embodiments, the description of the same or corresponding parts will be omitted or simplified as appropriate.
実施の形態１．
本実施の形態に係るシステム及び装置の構成、本実施の形態に係る装置の動作、本実施の形態の効果を順番に説明する。
Embodiment 1 FIG.
The configuration of the system and apparatus according to this embodiment, the operation of the apparatus according to this embodiment, and the effects of this embodiment will be described in order.
＊＊＊構成の説明＊＊＊
図１を参照して、本実施の形態に係るシステムである情報出力システム８００の構成を説明する。
*** Explanation of configuration ***
With reference to FIG. 1, the structure of the
情報出力システム８００は、情報出力装置１００、情報提供装置２００、センサ３００、機器４００、携帯端末５００を備える。
The
情報出力装置１００、情報提供装置２００、センサ３００、機器４００、携帯端末５００は、それぞれ１つ以上の通信方式に対応する。本実施の形態では、通信方式として、ＩＰ（Ｉｎｔｅｒｎｅｔ・Ｐｒｏｔｏｃｏｌ）が用いられるが、他の規格化された通信方式、又は、独自の通信方式が用いられてもよい。
The
情報出力装置１００は、インターネット７００を介して情報提供装置２００と接続される。また、情報出力装置１００は、センサ３００、機器４００、携帯端末５００とも接続される。接続方法は、有線でも無線でも構わない。インターネット７００に代えて、専用回線、或いは、インターネット７００以外のネットワークが用いられてもよい。
The
情報出力装置１００は、住宅に設置される。情報出力装置１００は、後述するように、情報提供装置２００から情報が通知された場合、機器４００の操作ログ、センサ３００の検知結果、携帯端末５００の位置情報から、住民であるユーザ６００の居場所及び状況を推定することで、ユーザ６００にタイミングよく情報を表示することができる。なお、情報出力装置１００は、ビル、店舗等、住宅以外の建物に設置されてもよい。いずれの場合も、情報出力装置１００が設置された建物にいる人間がユーザ６００に該当する。ユーザ６００は、少なくとも１人いればよいが、本実施の形態では２人以上いるものとする。
The
情報提供装置２００は、インターネット７００を介して、天気情報、地域の催事情報、店舗の広告情報等の情報を情報出力装置１００に配信する。また、情報提供装置２００は、情報出力装置１００から特定の情報が要求された際に該当する情報を情報出力装置１００に送信する。情報提供装置２００は、具体的には、クラウドサーバ等の外部サーバである。
The
センサ３００は、情報出力装置１００と同じ建物に設置される。即ち、本実施の形態では、センサ３００は、住宅に設置される。センサ３００は、具体的には、カメラ、人感センサ、音感センサ、指紋センサ等である。センサ３００は、エアコン（空気調和機の室内機）、テレビといった家電（家庭用電気機器）に搭載されるカメラ又は人感センサであってもよい。
The
センサ３００は、検知結果を発信する機能を有する。センサ３００は、検知結果として、ユーザ６００の顔、体格、声、指紋といった、ユーザ６００を識別するための情報を情報出力装置１００に送信する。情報出力装置１００には、ユーザ６００を識別するための情報が事前に登録されているものとする。また、情報出力装置１００には、どのセンサ３００が住宅のどこに設置されているかを示す情報が事前に登録されているものとする。よって、情報出力装置１００は、センサ３００からの情報に基づいて、どのユーザ６００が住宅のどこにいるのかを特定することができる。
The
センサ３００は、住宅の各部屋に少なくとも１台ずつ設置されることが望ましいが、一部の部屋のみに設置されてもよいし、全く設置されなくてもよい。センサ３００が複数台設置される場合、情報出力装置１００は、図２に示すように、複数台のセンサ３００のそれぞれと直接接続されてもよいし、図３に示すように、センサ中継器３５０を介して複数台のセンサ３００と接続されてもよい。図２の例では、情報出力装置１００がＬＡＮ（Ｌｏｃａｌ・Ａｒｅａ・Ｎｅｔｗｏｒｋ）等のプライベートネットワークを介して複数台のセンサ３００のそれぞれと接続される。図３の例では、情報出力装置１００がプライベートネットワーク、又は、移動通信網等のパブリックネットワークを介してセンサ中継器３５０と接続される。センサ中継器３５０は、具体的には、スマートフォン、携帯電話機等である。
Although at least one
機器４００は、情報出力装置１００と同じ建物に設置される。即ち、本実施の形態では、機器４００は、住宅に設置される。機器４００は、具体的には、エアコン、冷蔵庫、換気扇、テレビ、洗濯機、ＩＨ（Ｉｎｄｕｃｔｉｏｎ・Ｈｅａｔｉｎｇ）ヒータ、給湯機といった家電である。
The
機器４００は、操作ログを発信する機能を有する。機器４００は、本実施の形態では操作ログを情報出力装置１００に直接送信するが、操作ログを情報提供装置２００又はその他の外部サーバにアップロードし、情報出力装置１００がダウンロードできるようにしてもよい。また、機器４００は、本実施の形態では状態が変化した際に自律的に操作ログを情報出力装置１００に送信するが、情報出力装置１００からの問い合わせに応じて操作ログを送信してもよい。ここで、機器４００から送信される操作ログは、操作ログ全体ではなく、更新分のみであることが望ましい。更新分の代わりに、機器４００の１回の操作の結果、即ち、機器４００の現在の状態を示す情報が送信されてもよい。
The
機器４００は、住宅の中に複数台設置されることが望ましいが、少なくとも１台設置されていればよい。
It is desirable that a plurality of
携帯端末５００は、ユーザ６００によって所有され、通常はユーザ６００によって携帯される。携帯端末５００は、具体的には、スマートフォン、携帯電話機、タブレット等である。
The
携帯端末５００は、位置情報を発信する機能を有する。携帯端末５００は、位置情報として、無線ＬＡＮアクセスポイントからの電波強度の情報と、Ｂｌｕｅｔｏｏｔｈ（登録商標）による距離計測の情報とのいずれかを情報出力装置１００に送信する。携帯端末５００は、位置情報として、ＧＰＳ（Ｇｌｏｂａｌ・Ｐｏｓｉｔｉｏｎｉｎｇ・Ｓｙｓｔｅｍ）受信機により得られる測位情報と、移動量、傾き等のセンサ情報とのいずれかを情報出力装置１００に送信してもよい。情報出力装置１００には、どのユーザ６００がどの携帯端末５００の所有者であるかを示す情報が事前に登録されているものとする。また、情報出力装置１００には、必要に応じて、どの無線ＬＡＮアクセスポイントが住宅のどこに設置されているかを示す情報、或いは、どのＢｌｕｅｔｏｏｔｈ（登録商標）アクセスポイントが住宅のどこに設置されているかを示す情報が事前に登録されているものとする。よって、情報出力装置１００は、携帯端末５００からの位置情報に基づいて、どのユーザ６００が住宅のどこにいるのかを特定することができる。
The
携帯端末５００は、全てのユーザ６００によって携帯されることが望ましいが、一部のユーザ６００のみによって携帯されてもよいし、全く携帯されなくてもよい。なお、携帯端末５００に代えて、位置情報を発信する機能を有し、ユーザ６００の体内に埋め込まれる発信器が用いられてもよい。
The
図４を参照して、本実施の形態に係る装置である情報出力装置１００の構成を説明する。
With reference to FIG. 4, the configuration of
情報出力装置１００は、検出部１１０と、管理部１２０と、通信部１３０と、推定部１４０と、出力部１５０とを備える。管理部１２０は、操作履歴管理部１２１と、居場所履歴管理部１２２とを有する。
The
情報出力装置１００には、データを記憶するための記録媒体１０１が１つ以上搭載される。また、情報出力装置１００には、ユーザに情報を提示するための表示器１０２が１つ以上搭載される。なお、本実施の形態では、ユーザに情報を提示する方法として、情報をテキスト又は画像として表示する方法が用いられるが、情報を音声として出力する方法が用いられてもよい。その場合には、表示器１０２とともに、或いは、表示器１０２に代えて、スピーカが情報出力装置１００に搭載される。記録媒体１０１、表示器１０２、スピーカは、それぞれ情報出力装置１００の外部に設置されても構わない。
The
検出部１１０は、センサ３００の検知結果と携帯端末５００の位置情報との少なくともいずれかから、ユーザ６００の位置をリアルタイムに推定する。検出部１１０は、システム時刻と、ユーザ６００を識別するユーザ識別子と、ユーザ６００の位置が該当するユーザ６００の居場所とを示す居場所データを居場所履歴管理部１２２に出力する。本実施の形態では、ユーザ６００の居場所が、住宅の部屋を単位として識別される。即ち、居場所データでは、ユーザ６００の居場所として、ユーザ６００がいる部屋が示される。なお、住宅には、部屋以外にも、廊下、階段等が存在するので、部屋よりも細かい単位でユーザ６００の居場所を特定できたほうが、ユーザ６００の状況をより詳細に把握できるが、部屋を単位とすることで情報出力システム８００の導入が容易になるという効果が得られる。
The
検出部１１０は、ユーザ６００が持つ携帯端末５００を利用してユーザ６００を識別する。ユーザ６００が持つ携帯端末５００のマイクで音声を取得できれば、ユーザ６００をより確実に特定することが可能である。検出部１１０は、ユーザ６００を検知するセンサ３００を利用してユーザ６００を識別してもよい。ユーザ６００が触れたドアノブ等の指紋センサで指紋を取得できれば、ユーザ６００をより確実に特定することが可能である。
The
管理部１２０の操作履歴管理部１２１は、記録媒体１０１を用いて、機器４００から送信された操作ログを蓄積し、操作履歴データ１２３として管理する。本実施の形態では、操作履歴データ１２３が、データベースのテーブルとして保持される。
The operation
管理部１２０の居場所履歴管理部１２２は、記録媒体１０１を用いて、検出部１１０から入力された居場所データを蓄積し、居場所履歴データ１２４として管理する。本実施の形態では、居場所履歴データ１２４が、データベースのテーブルとして保持される。
The location
通信部１３０は、インターネット７００を介して情報提供装置２００から情報を受信した場合に、その情報を出力部１５０に出力する。
When the
推定部１４０は、操作履歴データ１２３と居場所履歴データ１２４とから、ユーザ６００の状況を推定する。
The
出力部１５０は、通信部１３０から入力された情報の中から、推定部１４０により推定されたユーザ６００の状況に応じて情報を選択する。出力部１５０は、選択した情報を表示器１０２に出力する。
The
本実施の形態において、情報出力装置１００は、コンピュータである。情報出力装置１００の機能は、ソフトウェアで実現される。情報出力装置１００は、プロセッサ１０３、記録媒体１０１である補助記憶装置、記録媒体１０１であるメモリ、図示していない通信装置、表示器１０２といったハードウェアを備える。プロセッサ１０３は、信号線を介して他のハードウェアと接続され、これら他のハードウェアを制御する。
In the present embodiment,
プロセッサ１０３は、プロセッシングを行うＩＣ（Ｉｎｔｅｇｒａｔｅｄ・Ｃｉｒｃｕｉｔ）である。プロセッサ１０３は、具体的には、ＣＰＵ（Ｃｅｎｔｒａｌ・Ｐｒｏｃｅｓｓｉｎｇ・Ｕｎｉｔ）である。
The
記録媒体１０１は、補助記憶装置及びメモリにより実現される。
The
補助記憶装置は、具体的には、ＲＯＭ（Ｒｅａｄ・Ｏｎｌｙ・Ｍｅｍｏｒｙ）、フラッシュメモリ、又は、ＨＤＤ（Ｈａｒｄ・Ｄｉｓｋ・Ｄｒｉｖｅ）である。 Specifically, the auxiliary storage device is a ROM (Read / Only / Memory), a flash memory, or an HDD (Hard / Disk / Drive).
メモリは、具体的には、ＲＡＭ（Ｒａｎｄｏｍ・Ａｃｃｅｓｓ・Ｍｅｍｏｒｙ）である。 Specifically, the memory is a RAM (Random Access Memory).
通信装置は、データを受信するレシーバ及びデータを送信するトランスミッタを含む。通信装置は、具体的には、通信チップ又はＮＩＣ（Ｎｅｔｗｏｒｋ・Ｉｎｔｅｒｆａｃｅ・Ｃａｒｄ）である。通信装置は、通信部１３０によって利用される。
The communication device includes a receiver that receives data and a transmitter that transmits data. The communication device is specifically a communication chip or a NIC (Network, Interface, Card). The communication device is used by the
情報出力装置１００は、ハードウェアとして、入力装置を備えていてもよい。
The
入力装置は、具体的には、マウス、タッチペン、キーボード、又は、タッチパネルである。 Specifically, the input device is a mouse, a touch pen, a keyboard, or a touch panel.
表示器１０２は、具体的には、ＬＣＤ（Ｌｉｑｕｉｄ・Ｃｒｙｓｔａｌ・Ｄｉｓｐｌａｙ）である。
The
記録媒体１０１である補助記憶装置には、検出部１１０、管理部１２０、通信部１３０、推定部１４０、出力部１５０といった「部」の機能を実現するプログラムが記憶されている。このプログラムは、記録媒体１０１であるメモリにロードされ、プロセッサ１０３に読み込まれ、プロセッサ１０３によって実行される。補助記憶装置には、ＯＳ（Ｏｐｅｒａｔｉｎｇ・Ｓｙｓｔｅｍ）も記憶されている。ＯＳの少なくとも一部がメモリにロードされ、プロセッサ１０３はＯＳを実行しながら、「部」の機能を実現するプログラムを実行する。
The auxiliary storage device that is the
情報出力装置１００は、１つのプロセッサ１０３のみを備えていてもよいし、複数のプロセッサ１０３を備えていてもよい。複数のプロセッサ１０３が「部」の機能を実現するプログラムを連携して実行してもよい。
The
「部」の処理の結果を示す情報やデータや信号値や変数値は、補助記憶装置、メモリ、又は、プロセッサ１０３内のレジスタ又はキャッシュメモリに記憶される。
Information, data, signal values, and variable values indicating the result of the processing of “unit” are stored in an auxiliary storage device, memory, or a register or cache memory in the
「部」の機能を実現するプログラムは、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ブルーレイ（登録商標）ディスク、ＤＶＤ（Ｄｉｇｉｔａｌ・Ｖｅｒｓａｔｉｌｅ・Ｄｉｓｃ）等の可搬記憶媒体に記憶されてもよい。 The program for realizing the function of “part” may be stored in a portable storage medium such as a magnetic disk, a flexible disk, an optical disk, a compact disk, a Blu-ray (registered trademark) disk, a DVD (Digital Versatile Disc), or the like.
＊＊＊動作の説明＊＊＊
図５を参照して、本実施の形態に係る装置である情報出力装置１００の動作を説明する。情報出力装置１００の動作は、本実施の形態に係る情報出力方法に相当する。情報出力装置１００の動作は、本実施の形態に係る情報出力プログラムの処理手順に相当する。
*** Explanation of operation ***
With reference to FIG. 5, an operation of
ステップＳ１１において、検出部１１０は、各ユーザ６００の携帯端末５００の位置を検出することで、各ユーザ６００の居場所を推定する。或いは、検出部１１０は、各ユーザ６００を、センサ３００を用いて検出することで、各ユーザ６００の居場所を推定する。或いは、検出部１１０は、各ユーザ６００の携帯端末５００の位置を検出した結果と、各ユーザ６００を、センサ３００を用いて検出した結果との両方に基づき、各ユーザ６００の居場所を推定する。
In step S <b> 11, the
本実施の形態では、検出部１１０の機能を実現するプログラムがプロセッサ１０３によって実行されることで、ステップＳ１１の処理が実施される。
In the present embodiment, the program that realizes the function of the
ステップＳ１１の具体的な処理として、検出部１１０は、各ユーザ６００の携帯端末５００に備えられた無線ＬＡＮ通信機能又はＢｌｕｅｔｏｏｔｈ（登録商標）通信機能を用いて、無線ＬＡＮアクセスポイントからの電波強度又はＢｌｕｅｔｏｏｔｈ（登録商標）の距離検知結果から、各ユーザ６００の携帯端末５００の位置を算出する。検出部１１０は、予め記録媒体１０１を用いて住宅の各部屋の位置範囲を示すデータを保持しており、このデータから、算出した位置が、どの部屋の位置範囲に含まれるかを判定する。或いは、検出部１１０は、住宅の各部屋にセンサ３００の一種として設置されたカメラの映像の画像処理を行うことで、各ユーザ６００が、どの部屋にいるかを判定する。これにより、各ユーザ６００がいる部屋、即ち、各ユーザ６００の居場所が推定される。
As a specific process of step S11, the
ステップＳ１２において、管理部１２０の居場所履歴管理部１２２は、居場所履歴データ１２４を、記録媒体１０１を用いて記録する。居場所履歴データ１２４は、各ユーザ６００の居場所の履歴を示す時系列データである。具体的には、居場所履歴データ１２４は、ステップＳ１１で推定された居場所の履歴を示す時系列データである。即ち、本実施の形態では、管理部１２０が、居場所履歴データ１２４として、検出部１１０により推定された居場所の履歴を示す時系列データを記録する。
In step S <b> 12, the location
本実施の形態では、居場所履歴管理部１２２の機能を実現するプログラムがプロセッサ１０３によって実行されることで、ステップＳ１２の処理が実施される。
In the present embodiment, the
ステップＳ１２の具体的な処理として、居場所履歴管理部１２２は、ステップＳ１１で居場所が推定されたユーザ６００について、推定された居場所が前回推定された居場所と同じかどうかを判定する。居場所が異なる場合、そのユーザ６００が別の部屋へ移動したことになる。居場所履歴管理部１２２は、そのような移動を検知する度に、当該移動を検知した時刻と、当該移動を行ったユーザ６００の識別子と、当該ユーザ６００の居場所、即ち、移動先の部屋とを示すレコードを作成する。操作履歴管理部１２１は、居場所履歴データ１２４をテーブル又は複数のテーブルの組み合わせとして格納するデータベースに対して、作成したレコードを追加するクエリを発行する。これにより、居場所履歴データ１２４が記録される。なお、データベースの各テーブルは、ファイルとして記録媒体１０１に記憶される。
As a specific process of step S12, the whereabouts
ステップＳ１３において、管理部１２０の操作履歴管理部１２１は、操作履歴データ１２３を、記録媒体１０１を用いて記録する。操作履歴データ１２３は、各ユーザ６００による機器４００の操作の履歴を示す時系列データである。
In step S <b> 13, the operation
本実施の形態では、操作履歴管理部１２１の機能を実現するプログラムがプロセッサ１０３によって実行されることで、ステップＳ１３の処理が実施される。
In the present embodiment, the
ステップＳ１３の具体的な処理として、操作履歴管理部１２１は、機器４００の操作が行われる度に、当該操作が行われた時刻と、当該機器４００の識別子と、当該機器４００の設置場所と、当該操作の内容とを示すレコードを作成する。機器４００の識別子としては、機器４００の名称等が用いられる。機器４００の設置場所については、予め記録媒体１０１を用いてデータが保持されているものとする。操作履歴管理部１２１は、操作履歴データ１２３をテーブル又は複数のテーブルの組み合わせとして格納するデータベースに対して、作成したレコードを追加するクエリを発行する。これにより、操作履歴データ１２３が記録される。なお、データベースの各テーブルは、ファイルとして記録媒体１０１に記憶される。居場所履歴データ１２４を格納するデータベースと操作履歴データ１２３を格納するデータベースは、共通のデータベースであってもよい。
As a specific process of step S13, the operation
ステップＳ１４において、推定部１４０は、管理部１２０により記録された操作履歴データ１２３から、第１時刻よりも前における機器４００の操作をユーザ操作として少なくとも１つ特定する。本実施の形態において、第１時刻は、ユーザ操作が行われた時刻から数秒又は数十秒又は数分といった短時間以内の時刻である。
In step S14, the
ステップＳ１５において、推定部１４０は、ステップＳ１４で特定したユーザ操作が行われた場所を特定する。具体的には、管理部１２０が、住宅における機器４００の設置場所の情報を予め保持しており、推定部１４０はこの情報に基づいて、ステップＳ１４で特定したユーザ操作が行われた機器４００の設置場所を特定する。そして、推定部１４０は、その設置場所を、ユーザ操作が行われた場所とみなす。
In step S15, the
ステップＳ１６において、推定部１４０は、管理部１２０により記録された居場所履歴データ１２４から、ステップＳ１４で特定したユーザ操作が行われた時刻における居場所が、ステップＳ１５で特定した場所と一致するユーザ６００を特定することで、ユーザ操作を行ったユーザ６００を識別する。即ち、推定部１４０は、ステップＳ１５でユーザ操作が行われた場所として特定した部屋に、ステップＳ１４で特定したユーザ操作が行われた時刻にいることを特定できたユーザ６００が、ユーザ操作を行ったユーザ６００であると判断する。
In step S <b> 16, the
ステップＳ１７において、推定部１４０は、ステップＳ１４で特定したユーザ操作によって、第２時刻における、ステップＳ１６で識別したユーザ６００の行動を推定する。本実施の形態において、第２時刻は、第１時刻と同じ時刻であるが、第１時刻以降の時刻であればよい。
In step S17, the
本実施の形態では、推定部１４０の機能を実現するプログラムがプロセッサ１０３によって実行されることで、ステップＳ１４からステップＳ１７の処理が実施される。
In the present embodiment, the
ステップＳ１４及びステップＳ１５の具体的な処理として、推定部１４０は、操作履歴データ１２３を格納するデータベースに対して、機器４００の操作が行われた時刻が現在時刻に最も近いレコードを抽出するクエリを発行する。抽出されるレコードでは、機器４００の操作が行われた時刻と、当該機器４００の識別子と、当該機器４００の設置場所と、当該操作の内容とが示されている。よって、第１時刻よりも前における機器４００の操作であるユーザ操作と、ユーザ操作が行われた場所とが特定されたことになる。また、ユーザ操作が行われた時刻も特定されたことになる。
As a specific process of steps S14 and S15, the
ステップＳ１６の具体的な処理として、推定部１４０は、居場所履歴データ１２４を格納するデータベースに対して、移動が検知された時刻と移動先の部屋との組み合わせが、ステップＳ１４及びステップＳ１５で特定された時刻及び場所の組み合わせと一致するレコードを抽出するクエリを発行する。抽出されるレコードでは、移動を行ったユーザ６００の識別子が示されている。よって、抽出されたレコードがあれば、ユーザ操作を行ったユーザ６００が識別されたことになる。
As a specific process of step S16, the
ステップＳ１７の具体的な処理として、推定部１４０は、機器４００の識別子と操作の内容との組み合わせごとに、当該機器４００に対して当該操作を行ったユーザ６００がとると予想される行動を示すデータをテーブル又は複数のテーブルの組み合わせとして格納するデータベースに対して、クエリを発行する。このクエリでは、ステップＳ１４及びステップＳ１５で抽出したレコードで示される機器４００の識別子と操作の内容との組み合わせが指定される。データベースからは、クエリで指定された組み合わせに対応する行動を示すデータが返される。これにより、第２時刻における、ステップＳ１６で識別されたユーザ６００の行動が推定されたことになる。なお、データベースの各テーブルは、ファイルとして記録媒体１０１に記憶される。このデータベースも、居場所履歴データ１２４を格納するデータベース、及び、操作履歴データ１２３を格納するデータベースと共通のデータベースであってよい。
As a specific process of step S <b> 17, for each combination of the identifier of the
ステップＳ１８において、出力部１５０は、推定部１４０により識別されたユーザ６００と推定部１４０により推定された行動との組み合わせによって、そのユーザ６００へ第１時刻に提示する情報を決定し、決定した情報を出力する。ここで、ステップＳ１４でテレビのチャンネル操作がユーザ操作として特定され、ステップＳ１６で「おじいさん」がユーザ操作を行ったユーザ６００であると判断され、ステップＳ１７で「テレビを見ている」という行動が推定されたとする。その場合、地域の催事情報等、「おじいさんがリビングで落ち着いて過ごしている」という状況に適した情報が表示器１０２に出力される。このとき、リビングのテレビが表示器１０２として用いられてもよい。
In step S18, the
本実施の形態では、出力部１５０の機能を実現するプログラムがプロセッサ１０３によって実行されることで、ステップＳ１８の処理が実施される。
In the present embodiment, a program that realizes the function of the
ステップＳ１８の具体的な処理として、出力部１５０は、ユーザ６００の識別子とユーザ６００の行動との組み合わせごとに、当該ユーザ６００が当該行動をとっている状況に適した情報をテーブル又は複数のテーブルの組み合わせとして格納するデータベースに対して、クエリを発行する。このクエリでは、ステップＳ１６で抽出されたレコードで示されるユーザ６００の識別子とステップＳ１７で返されたデータで示された行動との組み合わせが指定される。データベースからは、クエリで指定された組み合わせに対応する情報が返される。これにより、ステップＳ１６で識別されたユーザ６００へ第１時刻に提示する情報が決定される。出力部１５０は、返された情報を表示器１０２の画面に表示する。なお、データベースの各テーブルは、ファイルとして記録媒体１０１に記憶される。このデータベースも、居場所履歴データ１２４を格納するデータベース、及び、操作履歴データ１２３を格納するデータベース、及び、機器４００の識別子と操作の内容との組み合わせごとに行動を示すデータを格納するデータベースと共通のデータベースであってよい。また、ユーザ６００の識別子とユーザ６００の行動との組み合わせごとに情報を格納するデータベースに代えて、ユーザ６００の属性とユーザ６００の行動との組み合わせごとに情報を格納するデータベースを利用してもよい。その場合、ユーザ６００の識別子ごとにユーザ６００の属性を定義するデータが予め記録媒体１０１に記憶されており、出力部１５０が発行するクエリでは、このデータで定義された属性が識別子の代わりに指定されるものとする。ユーザ６００の属性としては、性別、年齢、職業、嗜好等がある。
As specific processing in step S18, the
図６及び図７及び図８及び図９を参照して、情報出力装置１００の動作の具体例を説明する。
A specific example of the operation of the
本例は、情報出力装置１００が、ユーザ６００の状況として「お母さんがキッチンで料理中」という状況を推定した際に、朝食の料理のレシピに関する情報を「お母さん」に提示する例である。
This example is an example in which the
図６に示すように、住宅の部屋として、１階に玄関、キッチン、リビング、トイレ、浴室、２階に子供部屋、寝室、トイレ、空き部屋がある。機器４００として、全ての部屋に照明、リビングと子供部屋と寝室にエアコン、キッチンに冷蔵庫及びＩＨヒータ、リビングにテレビがある。管理部１２０は、記録媒体１０１を用いて、図６に示した住宅の間取りと機器４００の配置との情報、即ち、部屋と機器４００との対応関係を示すデータを予め記録する。なお、このデータは、管理部１２０によって記録される代わりに、情報提供装置２００又はその他の外部サーバによって管理されてもよい。その場合、情報出力装置１００は、必要に応じて情報提供装置２００又はその他の外部サーバからデータを取得して利用する。
As shown in FIG. 6, there are an entrance, a kitchen, a living room, a toilet, a bathroom on the first floor, a children's room, a bedroom, a toilet, and a vacant room on the second floor. As the
図７に示すように、ユーザ識別子「Ａ」のユーザ６００である「お父さん」は、携帯端末５００である「スマートフォンＰ１」及び「ウェアラブル端末Ｗ１」を所有する。ユーザ識別子「Ｂ」のユーザ６００である「お母さん」は、携帯端末５００である「スマートフォンＰ２」及び「ウェアラブル端末Ｗ２」を所有する。ユーザ識別子「Ｃ」のユーザ６００である「子供」は、携帯端末５００である「ウェアラブル端末Ｗ３」を所有する。管理部１２０は、記録媒体１０１を用いて、図７に示したユーザ６００と携帯端末５００との対応関係を示す紐付けデータ１２５を予め記録する。なお、紐付けデータ１２５は、管理部１２０によって記録される代わりに、情報提供装置２００又はその他の外部サーバによって管理されてもよい。その場合、情報出力装置１００は、必要に応じて情報提供装置２００又はその他の外部サーバからデータを取得して利用する。
As illustrated in FIG. 7, “dad” who is the
図８は、管理部１２０の居場所履歴管理部１２２が管理する居場所履歴データ１２４の例を示している。前述したように、居場所履歴データ１２４は、センサ３００及び携帯端末５００から常時アップロードされる情報に基づいて検出部１１０により生成される居場所データを蓄積したものである。
FIG. 8 shows an example of
居場所履歴データ１２４には、２０１５年３月２６日６時２０分に、ユーザ識別子「Ｂ」のユーザ６００がキッチンにいたことを示すデータが含まれている。このデータは、以下のように記録される。
The
２０１５年３月２６日６時２０分に「スマートフォンＰ２」を持つ「お母さん」がリビングからキッチンに移動すると、検出部１１０は、自動で居場所データを作成し、居場所履歴管理部１２２に出力する。この動作は、前述したステップＳ１１に相当する。居場所履歴管理部１２２は、居場所データを居場所履歴データ１２４に追加する。この動作は、前述したステップＳ１２に相当する。検出部１１０は、「スマートフォンＰ２」に備えられた無線ＬＡＮ通信機能又はＢｌｕｅｔｏｏｔｈ（登録商標）通信機能を用いて、無線ＬＡＮアクセスポイントからの電波強度又はＢｌｕｅｔｏｏｔｈ（登録商標）の距離検知結果から、２０１５年３月２６日６時２０分における「お母さん」の居場所を推定する。このとき、検出部１１０は、紐付けデータ１２５から、「スマートフォンＰ２」に対応するユーザ識別子を取得することで、キッチンにいるユーザ６００を特定することができる。キッチンの入口に人感センサを取り付けることによって、ユーザ６００の出入りを検出することでユーザ６００がキッチンに入ったことをより確実に検知できるようにしてもよい。
When “mother” having “smartphone P2” moves from the living room to the kitchen at 6:20 on March 26, 2015, the
図９は、管理部１２０の操作履歴管理部１２１が管理する操作履歴データ１２３の例を示している。前述したように、操作履歴データ１２３は、各ユーザ６００が機器４００を操作する度に、機器４００からアップロードされる操作ログを蓄積したものである。
FIG. 9 shows an example of
操作履歴データ１２３には、「２０１５年３月２６日６時３０分」にキッチンのＩＨヒータのスイッチが入れられたことを示すデータが含まれている。このデータは、以下のように記録される。
The
「２０１５年３月２６日６時３０分」にキッチンのＩＨヒータのスイッチが入れられると、機器４００は、自動で操作ログの更新分を操作履歴管理部１２１に送信する。操作履歴管理部１２１は、機器４００の設置場所を示すデータを予め記録媒体１０１に記録しているため、そのデータと併せて操作ログの更新分を操作履歴データ１２３に追加する。この動作は、前述したステップＳ１３に相当する。操作ログには、機器４００の動作の状態及び変化の原因も示される。動作の状態としては、具体的には、機器４００のオン、オフ等がある。変化の原因としては、具体的には、機器４００のスイッチ、タイマ、リモートコントローラ等がある。
When the kitchen IH heater is switched on at “6:30 on March 26, 2015”, the
前述した第１時刻及び第２時刻をともに「２０１５年３月２６日６時３１分」とすると、ＩＨヒータのスイッチが入れられた「２０１５年３月２６日６時３０分」は、第１時刻よりも前である。推定部１４０は、図９に示した操作履歴データ１２３から、最後の機器４００の操作として、ＩＨヒータのスイッチを入れる操作を特定する。この動作は、前述したステップＳ１４に相当する。
If both the first time and the second time described above are “March 26, 2015 6:31”, the IH heater is switched on “March 26, 2015 6:30” It is before the time. The
推定部１４０は、ＩＨヒータのスイッチを入れる操作が行われた場所を特定する。具体的には、推定部１４０は、ＩＨヒータの設置場所であるキッチンを、ＩＨヒータのスイッチが入れられた場所とみなす。この動作は、前述したステップＳ１５に相当する。
The
推定部１４０は、図８に示した居場所履歴データ１２４から、ＩＨヒータのスイッチが入れられた「２０１５年３月２６日６時３０分」における居場所が、ＩＨヒータのスイッチが入れられたキッチンであるユーザ６００を特定する。「２０１５年３月２６日６時３０分」において、ユーザ識別子「Ａ」のユーザ６００である「お父さん」の居場所は、１階のトイレである。ユーザ識別子「Ｂ」のユーザ６００である「お母さん」の居場所は、１階のキッチンである。図８には示していないが、ユーザ識別子「Ｃ」のユーザ６００である「子供」の居場所は、２階の子供部屋であるとする。推定部１４０は、「２０１５年３月２６日６時３０分」にＩＨヒータのスイッチが入れられた場所がキッチンであるとみなしていることから、「２０１５年３月２６日６時３０分」にＩＨヒータのスイッチを入れたユーザ６００が「お母さん」であると判断する。即ち、推定部１４０は、「お母さん」が、「２０１５年３月２６日６時３０分」にキッチンのＩＨヒータのスイッチを入れたユーザ６００であると判断する。この動作は、前述したステップＳ１６に相当する。
Based on the
推定部１４０は、「２０１５年３月２６日６時３０分」の後である「２０１５年３月２６日６時３１分」における「お母さん」の行動が「料理中」であると推定する。この動作は、前述したステップＳ１７に相当する。
The
出力部１５０は、「お母さん」というユーザ６００と「料理中」という行動との組み合わせによって、「お母さんが料理中」という状況を認識する。出力部１５０は、本実施の形態では、さらに、キッチンという居場所によって、「お母さんがキッチンで料理中」という状況を認識する。そして、出力部１５０は、「お母さん」へ「２０１５年３月２６日６時３１分」に提示する情報をレシピ情報に決定し、レシピ情報を出力する。この動作は、前述したステップＳ１８に相当する。レシピ情報の出力先である表示器１０２としては、情報出力装置１００専用のものが用いられてもよいし、キッチンの冷蔵庫又はその他の家電に備えられたディスプレイが用いられてもよい。また、出力部１５０は、冷蔵庫の中の食材を手動又は自動で特定し、その食材を使ったレシピの情報を出力してもよい。
The
なお、本例では、推定部１４０が最後の機器４００の操作のみからユーザ６００の行動を推定するが、推定精度を向上させるために、複数回の操作からユーザ６００の行動を推定してもよい。具体的には、ステップＳ１４において、推定部１４０は、さらに、２０１５年３月２６日６時２３分におけるキッチンの冷蔵庫の扉を開閉する操作をユーザ操作の一部として特定してもよい。推定部１４０は、さらに、２０１５年３月２６日６時２２分におけるキッチンのＩＨヒータのスイッチを入れる操作をユーザ操作の一部として特定してもよい。推定部１４０は、さらに、２０１５年３月２６日６時２０分におけるキッチンの照明のスイッチを入れる操作をユーザ操作の一部として特定してもよい。
In this example, the
＊＊＊効果の説明＊＊＊
本実施の形態では、第１時刻よりも前における機器４００の操作を行ったユーザが識別されるとともに、その操作によって、第１時刻以降の時刻である第２時刻における、識別されたユーザ６００の行動が推定される。そして、そのユーザ６００と、その行動との組み合わせによって、そのユーザ６００へ第１時刻に提示する情報が決定される。このため、本実施の形態によれば、ユーザ６００に関係のありそうな情報或いはユーザ６００が興味を持てそうな情報をユーザ６００にタイミングよく提示することが可能となる。
*** Explanation of effects ***
In the present embodiment, the user who has operated the
本実施の形態では、センサ３００又は携帯端末５００を利用してユーザ６００を識別し、機器４００の操作ログからユーザ６００の状況を予測することで、ユーザ６００の状況に応じた情報をタイミングよく表示することができる。よって、ユーザ６００が、自分の現在の状況に関連する情報を唐突感なく得ることができる。
In this embodiment, the
本実施の形態では、機器４００の操作ログを利用してユーザ６００の居場所と状況とを予測するため、宅内にカメラを設置したり、赤外線センサを設置したりすることは必須ではない。宅内にカメラを設置する場合、システムの導入コストが高くなったり、ユーザ６００が他人に監視されているように感じて不快になったりするが、本実施の形態では、そのような事態を避けることも可能である。即ち、本実施の形態によれば、情報出力システム８００を容易に導入することができる。
In this embodiment, since the location and situation of the
＊＊＊他の構成＊＊＊
図１０を参照して、本実施の形態の変形例を説明する。
*** Other configurations ***
A modification of the present embodiment will be described with reference to FIG.
図１０は、管理部１２０が管理する定義データ１２６の例を示している。定義データ１２６は、各ユーザ６００による機器４００の操作と各ユーザ６００の行動との対応関係を示すデータである。
FIG. 10 shows an example of the
この変形例において、管理部１２０は、記録媒体１０１を用いて、定義データ１２６を予め記録する。定義データ１２６は、各ユーザ６００による機器４００の操作ごとに、対応する行動だけでなく、情報を提示するまでの時間Ｔ１と、対応する行動が始まるまでの時間Ｔ２とを示すデータである。
In this modification, the
ステップＳ１１からステップＳ１６の動作については、前述したものと同じである。 About operation | movement of step S11 to step S16, it is the same as what was mentioned above.
ステップＳ１７において、推定部１４０は、ステップＳ１４で特定したユーザ操作が行われた時刻と、管理部１２０により記録された定義データ１２６で示された時間Ｔ２とから、第２時刻を算出する。そして、推定部１４０は、管理部１２０により記録された定義データ１２６から、第２時刻における、ステップＳ１６で識別したユーザ６００の行動として、ステップＳ１４で特定したユーザ操作に対応する行動を選択することで、第２時刻における、ステップＳ１６で識別したユーザ６００の行動を推定する。
In step S <b> 17, the
ステップＳ１８において、推定部１４０は、ステップＳ１４で特定したユーザ操作が行われた時刻と、管理部１２０により記録された定義データ１２６で示された時間Ｔ１とから、第１時刻を算出する。出力部１５０は、推定部１４０により識別されたユーザ６００と推定部１４０により推定された行動との組み合わせによって、そのユーザ６００へ第１時刻に提示する情報を決定し、決定した情報を出力する。
In step S18, the
定義データ１２６には、ＩＨヒータのスイッチを入れる操作に対して、「料理中」という行動と、「１分」という時間Ｔ１と、「１分」という時間Ｔ２とを指定するデータが予め含まれている。したがって、前述した具体例のように、ステップＳ１４で「２０１５年３月２６日６時３０分」にＩＨヒータのスイッチを入れる操作が特定された場合、ステップＳ１７において、推定部１４０は、「２０１５年３月２６日６時３０分」に時間Ｔ２「１分」を加算して、第２時刻「２０１５年３月２６日６時３１分」を求める。そして、推定部１４０は、「２０１５年３月２６日６時３１分」における「お母さん」の行動が「料理中」であると推定する。ステップＳ１８において、推定部１４０は、「２０１５年３月２６日６時３０分」に時間Ｔ１「１分」を加算して、第１時刻「２０１５年３月２６日６時３１分」を求める。出力部１５０は、「お母さん」というユーザ６００と「料理中」という行動との組み合わせによって決定したレシピ情報を「２０１５年３月２６日６時３１分」に出力する。
The
なお、時間Ｔ１と時間Ｔ２は、互いに異なる時間に設定されてもよい。また、時間Ｔ１と時間Ｔ２とのうち、いずれか一方のみが設定されていてもよいし、どちらも設定されていなくてもよい。時間Ｔ２が設定されていない場合、第２時刻は、ステップＳ１７の動作が行われている時刻となる。時間Ｔ１が設定されていない場合、第１時刻は、ステップＳ１８の動作が行われている時刻となる。 Note that the time T1 and the time T2 may be set to different times. Further, only one of time T1 and time T2 may be set, or neither of them may be set. When the time T2 is not set, the second time is the time when the operation of step S17 is performed. When the time T1 is not set, the first time is the time when the operation of Step S18 is performed.
実施の形態２．
本実施の形態に係るシステム及び装置の構成、本実施の形態に係る装置の動作、本実施の形態の効果を順番に説明する。主に実施の形態１との差異を説明する。
Embodiment 2. FIG.
The configuration of the system and apparatus according to this embodiment, the operation of the apparatus according to this embodiment, and the effects of this embodiment will be described in order. Differences from the first embodiment will be mainly described.
＊＊＊構成の説明＊＊＊
本実施の形態に係るシステムである情報出力システム８００の構成は、図１に示した実施の形態１のものと同じである。
*** Explanation of configuration ***
The configuration of an
本実施の形態では、情報出力装置１００が、機器４００の操作ログ等からユーザ６００の生活パターンを学習し、学習した生活パターンの情報を利用してユーザ６００を識別する。
In the present embodiment, the
図１１を参照して、本実施の形態に係る装置である情報出力装置１００の構成を説明する。
With reference to FIG. 11, the configuration of
情報出力装置１００は、実施の形態１と同じように、検出部１１０と、管理部１２０と、通信部１３０と、推定部１４０と、出力部１５０とを備えるほか、学習部１６０を備える。
As in the first embodiment, the
学習部１６０は、操作履歴データ１２３から、ユーザ６００ごとの生活パターンを学習し、学習した生活パターンの情報から、機器４００を操作したユーザ６００の特定を行う。
The
＊＊＊動作の説明＊＊＊
図１２を参照して、本実施の形態に係る装置である情報出力装置１００の動作を説明する。情報出力装置１００の動作は、本実施の形態に係る情報出力方法に相当する。情報出力装置１００の動作は、本実施の形態に係る情報出力プログラムの処理手順に相当する。
*** Explanation of operation ***
With reference to FIG. 12, the operation of
学習部１６０は、管理部１２０により記録された操作履歴データ１２３から、ユーザ６００の居場所が変化するパターンを予め抽出しておく。
The
本実施の形態では、学習部１６０の機能を実現するプログラムがプロセッサ１０３によって実行されることで、パターンを抽出する処理が実施される。
In the present embodiment, a program for realizing the function of the
その具体的な処理として、学習部１６０は、操作履歴データ１２３を参照して、ユーザ６００ごとに、１日のうち、どの時間帯に、住宅の中で、どの部屋にいる割合が高いかを分析する。分析の結果、あるユーザ６００が、ある時間帯において、予め定められた閾値以上の割合で同じ部屋にいることが判明した場合、学習部１６０は、そのユーザ６００のパターンに含まれる要素として、その時間帯と、その部屋との組み合わせを記録したデータを記録媒体１０１に記録する。
As the specific process, the
ステップＳ２１からステップＳ２５の動作については、図５に示したステップＳ１１からステップＳ１５の動作と同じである。 The operation from step S21 to step S25 is the same as the operation from step S11 to step S15 shown in FIG.
ステップＳ２６において、推定部１４０は、ステップＳ２４で特定したユーザ操作を行ったユーザ６００を、管理部１２０により記録された居場所履歴データ１２４を参照することで識別できるかどうかを判定する。具体的には、推定部１４０は、居場所履歴データ１２４により示される、ユーザ操作が行われた時刻における居場所が、ステップＳ２５で特定した場所と一致するユーザ６００がいるかどうかを判定する。そのようなユーザ６００がいれば、推定部１４０は、そのユーザ６００が、ステップＳ２４で特定した機器４００の操作を行ったユーザ６００であると判断する。この場合、フローはステップＳ２８に進む。一方、そのようなユーザ６００がいなければ、推定部１４０は、ステップＳ２４で特定したユーザ操作を行ったユーザ６００を居場所履歴データ１２４より識別することができないと判断する。この場合、フローはステップＳ２７に進む。
In step S <b> 26, the
ステップＳ２７において、推定部１４０は、ステップＳ２４で特定したユーザ操作が行われた時刻と、ステップＳ２５で特定した、ユーザ操作が行われた場所とが、学習部１６０により抽出されたパターンと整合するユーザ６００を特定することで、ユーザ操作を行ったユーザ６００を識別する。ステップＳ２７の後、フローはステップＳ２８に進む。
In step S27, the
ステップＳ２７の具体的な処理として、推定部１４０は、学習部１６０により記録媒体１０１に記録されたデータを参照し、ステップＳ１４及びステップＳ１５で特定された時刻及び場所の組み合わせと合致する時間帯及び部屋の組み合わせをパターンに含むユーザ６００がいるかどうかを判定する。そのようなユーザ６００がいれば、ユーザ操作を行ったユーザ６００が識別されたことになる。
As a specific process of step S27, the
ステップＳ２８及びステップＳ２９の動作については、図５に示したステップＳ１７及びステップＳ１８の動作と同じである。 About operation | movement of step S28 and step S29, it is the same as operation | movement of step S17 and step S18 shown in FIG.
図６及び図８及び図９を参照して、情報出力装置１００の動作の具体例を説明する。
A specific example of the operation of the
図８に示した居場所履歴データ１２４には、２０１５年３月２６日６時２０分に、ユーザ識別子「Ｂ」のユーザ６００がキッチンにいたことを示すデータが含まれているが、本例では、どのユーザ６００がキッチンにいたかは不明であるとする。「お母さん」が携帯端末５００を持たずに移動した場合等は、このようなことが起こり得る。
The
操作履歴データ１２３には、「２０１５年３月２６日６時３０分」にキッチンのＩＨヒータのスイッチが入れられたことを示すデータが含まれている。よって、推定部１４０は、最後の機器４００の操作として、ＩＨヒータのスイッチを入れる操作を特定する。そして、推定部１４０は、ＩＨヒータの設置場所であるキッチンを、ＩＨヒータのスイッチが入れられた場所とみなす。これらの動作は、ステップＳ２４及びステップＳ２５に相当する。
The
ここで、学習部１６０は、ユーザ識別子「Ｂ」のユーザ６００である「お母さん」が６時２０分から６時４５分までキッチンにいるというパターンを予め学習しているものとする。推定部１４０は、ＩＨヒータのスイッチが入れられた時刻及び場所が、それぞれ「２０１５年３月２６日６時３０分」及びキッチンであることから、学習部１６０により学習されたパターンの情報に基づき、「２０１５年３月２６日６時３０分」にＩＨヒータのスイッチを入れたユーザ６００が「お母さん」であると判断する。即ち、推定部１４０は、「お母さん」が、「２０１５年３月２６日６時３０分」にキッチンのＩＨヒータのスイッチを入れたユーザ６００であると判断する。この動作は、前述したステップＳ２７に相当する。
Here, it is assumed that the
推定部１４０は、「２０１５年３月２６日６時３０分」の後である「２０１５年３月２６日６時３１分」における「お母さん」の行動が「料理中」であると推定する。この動作は、前述したステップＳ２８に相当する。
The
出力部１５０は、「お母さん」というユーザ６００と「料理中」という行動との組み合わせによって、「お母さんが料理中」という状況を認識する。出力部１５０は、本実施の形態では、さらに、キッチンという居場所によって、「お母さんがキッチンで料理中」という状況を認識する。そして、出力部１５０は、「お母さん」へ「２０１５年３月２６日６時３１分」に提示する情報をレシピ情報に決定し、レシピ情報を出力する。この動作は、前述したステップＳ２９に相当する。レシピ情報の出力先である表示器１０２としては、情報出力装置１００専用のものが用いられてもよいし、キッチンの冷蔵庫又はその他の家電に備えられたディスプレイが用いられてもよい。また、出力部１５０は、冷蔵庫の中の食材を手動又は自動で特定し、その食材を使ったレシピの情報を出力してもよい。
The
＊＊＊効果の説明＊＊＊
本実施の形態によれば、実施の形態１と同様に、ユーザ６００に関係のありそうな情報或いはユーザ６００が興味を持てそうな情報をユーザ６００にタイミングよく提示することが可能となる。
*** Explanation of effects ***
According to the present embodiment, as in the first embodiment, information that is likely to be related to the
本実施の形態では、ユーザ６００が携帯端末５００を携帯しない場合にも対処することができる。
In the present embodiment, a case where the
実施の形態３．
本実施の形態について、主に実施の形態１との差異を説明する。
Embodiment 3 FIG.
In the present embodiment, differences from the first embodiment will be mainly described.
本実施の形態に係るシステムである情報出力システム８００の構成は、図１に示した実施の形態１のものと同じである。
The configuration of an
実施の形態１では、情報出力装置１００が、機器４００の操作ログ等からユーザ６００の状況を推定し、その状況に合った情報を情報提供装置２００から取得して出力する。一方、本実施の形態では、情報出力装置１００が、情報提供装置２００から情報を事前に取得しておく。或いは、情報提供装置２００が、情報を事前にマルチキャストしておく。そして、情報出力装置１００が、ユーザ６００の状況を推定した際に、その状況に合った情報を選択して出力する。
In the first embodiment, the
本実施の形態に係る装置である情報出力装置１００の構成は、図４に示した実施の形態１のものと同じである。
The configuration of
本実施の形態において、通信部１３０は、提示条件が付された情報を、外部の情報提供装置２００から受信する。出力部１５０は、推定部１４０により識別されたユーザ６００と推定部１４０により推定された行動との組み合わせが、通信部１３０により受信された情報に付された提示条件と合致する場合、当該情報を、そのユーザ６００へ第１時刻に提示する情報とすることを決定する。
In the present embodiment, the
具体的には、出力部１５０は、情報提供装置２００から配信されたレシピ情報及びその他の情報を事前に保持しておく。レシピ情報には、「お母さんが料理中」という状況が発生することが提示条件として付されているとする。出力部１５０は、定期的に推定部１４０から、推定部１４０により識別されたユーザ６００と推定部１４０により推定された行動との組み合わせの通知を受けて、そのユーザ６００の状況を認識する。出力部１５０は、保持している情報の提示条件に合致する状況が発生するまで情報を提示せずに待機する。出力部１５０は、保持している情報の提示条件と合致する状況が発生したときに、その情報を表示器１０２に出力する。レシピ情報については、出力部１５０が、「お母さんが料理中」という状況を認識したときに、キッチンにある表示器１０２に当該情報を表示する。
Specifically, the
本実施の形態によれば、実施の形態１と同様に、ユーザ６００に関係のありそうな情報或いはユーザ６００が興味を持てそうな情報をユーザ６００にタイミングよく提示することが可能となる。
According to the present embodiment, as in the first embodiment, information that is likely to be related to the
本実施の形態では、ユーザ６００の状況を推定してから情報を提示するまでの時間を短縮することができる。
In the present embodiment, it is possible to shorten the time from the estimation of the situation of the
実施の形態４．
本実施の形態について、主に実施の形態１との差異を説明する。
Embodiment 4 FIG.
In the present embodiment, differences from the first embodiment will be mainly described.
本実施の形態に係るシステムである情報出力システム８００の構成は、図１に示した実施の形態１のものと同じである。
The configuration of an
図１３を参照して、本実施の形態に係る装置である情報出力装置１００の構成を説明する。
With reference to FIG. 13, the configuration of
実施の形態１に係る情報出力装置１００の機能は、ソフトウェアで実現されるが、本実施の形態に係る情報出力装置１００の機能は、ハードウェアで実現される。本実施の形態において、情報出力装置１００は、表示器１０２、処理回路１０４といったハードウェアを備える。
The function of the
処理回路１０４は、「部」及び記録媒体１０１の機能を実現する専用の電子回路である。処理回路１０４は、具体的には、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ロジックＩＣ、ＧＡ（Ｇａｔｅ・Ａｒｒａｙ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ・Ｓｐｅｃｉｆｉｃ・Ｉｎｔｅｇｒａｔｅｄ・Ｃｉｒｃｕｉｔ）、又は、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ・Ｇａｔｅ・Ａｒｒａｙ）である。
The
「部」及び記録媒体１０１の機能は、１つの処理回路１０４で実現されてもよいし、複数の処理回路１０４に分散して実現されてもよい。
The functions of the “unit” and the
表示器１０２は、図４に示した実施の形態１のものと同じである。
The
「部」及び記録媒体１０１の機能についても、実施の形態１のものと同じである。
The “part” and the function of the
実施の形態２及び実施の形態３に係る情報出力装置１００の機能は、実施の形態１に係る情報出力装置１００と同じように、ソフトウェアで実現されるが、本実施の形態に係る情報出力装置１００と同じように、ハードウェアで実現されてもよい。
The functions of the
以上、本発明の実施の形態について説明したが、これらの実施の形態のうち、いくつかを組み合わせて実施しても構わない。或いは、これらの実施の形態のうち、いずれか１つ又はいくつかを部分的に実施しても構わない。例えば、これらの実施の形態の説明において「部」として説明するもののうち、いずれか１つのみを採用してもよいし、いくつかの任意の組み合わせを採用してもよい。なお、本発明は、これらの実施の形態に限定されるものではなく、必要に応じて種々の変更が可能である。 As mentioned above, although embodiment of this invention was described, you may implement combining some of these embodiment. Alternatively, any one or some of these embodiments may be partially implemented. For example, only one of those described as “parts” in the description of these embodiments may be employed, or some arbitrary combinations may be employed. In addition, this invention is not limited to these embodiment, A various change is possible as needed.
本発明の実施の形態に係る情報出力装置１００の機能は、ソフトウェアとハードウェアとの組み合わせで実現されてもよい。即ち、情報出力装置１００の一部の機能が専用のハードウェアで実現され、残りの機能がソフトウェアで実現されてもよい。
The function of the
実施の形態１から実施の形態３における記録媒体１０１及びプロセッサ１０３、実施の形態４における処理回路１０４を、総称して「プロセッシングサーキットリ」という。つまり、情報出力装置１００の構成が図４及び図１１及び図１３のいずれに示した構成であっても、検出部１１０、管理部１２０、通信部１３０、推定部１４０、出力部１５０、学習部１６０といった「部」及び記録媒体１０１の機能は、プロセッシングサーキットリにより実現される。
The
「部」を「工程」又は「手順」又は「処理」に読み替えてもよい。また、「部」の機能をファームウェアで実現してもよい。 “Part” may be read as “step” or “procedure” or “processing”. Further, the function of “unit” may be realized by firmware.
１００ 情報出力装置、１０１ 記録媒体、１０２ 表示器、１０３ プロセッサ、１０４ 処理回路、１１０ 検出部、１２０ 管理部、１２１ 操作履歴管理部、１２２ 居場所履歴管理部、１２３ 操作履歴データ、１２４ 居場所履歴データ、１２５ 紐付けデータ、１２６ 定義データ、１３０ 通信部、１４０ 推定部、１５０ 出力部、１６０ 学習部、２００ 情報提供装置、３００ センサ、３５０ センサ中継器、４００ 機器、５００ 携帯端末、６００ ユーザ、７００ インターネット、８００ 情報出力システム。
DESCRIPTION OF
Claims (11)
前記管理部により記録された操作履歴データから、第１時刻よりも前における機器の操作をユーザ操作として少なくとも１つ特定し、前記ユーザ操作を行ったユーザを識別するとともに、前記ユーザ操作によって、前記第１時刻以降の時刻である第２時刻における、識別したユーザの行動を推定する推定部と、
前記推定部により識別されたユーザと前記推定部により推定された行動との組み合わせによって、そのユーザへ前記第１時刻に提示する情報を決定し、決定した情報を出力する出力部と
を備える情報出力装置。 A management unit that records operation history data, which is time-series data indicating a history of operation of a device by at least one user, using a recording medium;
From the operation history data recorded by the management unit, at least one device operation prior to the first time is specified as a user operation, and the user who performed the user operation is identified. An estimation unit that estimates the action of the identified user at a second time that is a time after the first time;
An information output comprising: an output unit that determines information to be presented to the user at the first time by a combination of the user identified by the estimation unit and the behavior estimated by the estimation unit, and outputs the determined information apparatus.
前記推定部は、前記管理部により記録された居場所履歴データから、前記ユーザ操作が行われた時刻における居場所が、前記ユーザ操作が行われた場所と一致するユーザを特定することで、前記ユーザ操作を行ったユーザを識別する請求項１に記載の情報出力装置。 The management unit further records the location history data, which is time-series data indicating the history of the location of the at least one user, using the recording medium,
The estimation unit identifies the user whose location at the time when the user operation is performed matches the location where the user operation is performed from the location history data recorded by the management unit. The information output device according to claim 1, wherein the information output device identifies the user who performed the operation.
をさらに備え、
前記管理部は、前記居場所履歴データとして、前記検出部により推定された居場所の履歴を示す時系列データを記録する請求項２に記載の情報出力装置。 A detection unit that estimates a location of the at least one user by detecting a position of the portable terminal of the at least one user;
The information output device according to claim 2, wherein the management unit records time-series data indicating a history of the whereabouts estimated by the detection unit as the whereabouts history data.
をさらに備え、
前記管理部は、前記居場所履歴データとして、前記検出部により推定された居場所の履歴を示す時系列データを記録する請求項２に記載の情報出力装置。 A detector that detects the location of the at least one user by detecting the at least one user using a sensor;
The information output device according to claim 2, wherein the management unit records time-series data indicating a history of the whereabouts estimated by the detection unit as the whereabouts history data.
をさらに備え、
前記推定部は、前記ユーザ操作が行われた時刻及び場所が、前記学習部により抽出されたパターンと整合するユーザを特定することで、前記ユーザ操作を行ったユーザを識別する請求項１に記載の情報出力装置。 A learning unit for extracting a pattern in which the location of the at least one user changes from the operation history data recorded by the management unit;
The said estimation part identifies the user who performed the said user operation by specifying the user in which the time and place where the said user operation was performed match the pattern extracted by the said learning part. Information output device.
をさらに備え、
前記出力部は、前記推定部により識別されたユーザと前記推定部により推定された行動との組み合わせが、前記通信部により受信された情報に付された提示条件と合致する場合、当該情報を、そのユーザへ前記第１時刻に提示する情報とすることを決定する請求項１から５のいずれか１項に記載の情報出力装置。 A communication unit for receiving information with presentation conditions from an external information providing device;
When the combination of the user identified by the estimation unit and the behavior estimated by the estimation unit matches the presentation condition attached to the information received by the communication unit, the output unit, The information output device according to claim 1, wherein the information output device determines that the information is to be presented to the user at the first time.
前記推定部は、前記管理部により記録された定義データから、前記第２時刻における、識別したユーザの行動として、前記ユーザ操作に対応する行動を選択することで、前記第２時刻における、識別したユーザの行動を推定する請求項１から６のいずれか１項に記載の情報出力装置。 The management unit further records in advance definition data indicating a correspondence relationship between the operation of the device by the at least one user and the behavior of the at least one user,
The estimation unit is identified at the second time by selecting an action corresponding to the user operation as the identified user action at the second time from the definition data recorded by the management unit. The information output device according to any one of claims 1 to 6, wherein the behavior of the user is estimated.
前記推定部は、前記ユーザ操作が行われた時刻と、前記定義データで示された時間とから、前記第２時刻を算出する請求項７に記載の情報出力装置。 The management unit further records, as the definition data, data indicating a time until a corresponding action starts for each device operation by the at least one user,
The information output device according to claim 7, wherein the estimation unit calculates the second time from a time when the user operation is performed and a time indicated by the definition data.
前記推定部は、前記ユーザ操作が行われた時刻と、前記定義データで示された時間とから、前記第１時刻を算出する請求項７に記載の情報出力装置。 The management unit further records, as the definition data, data indicating a time until the information is presented for each operation of the device by the at least one user,
The information output device according to claim 7, wherein the estimation unit calculates the first time from a time when the user operation is performed and a time indicated by the definition data.
前記コンピュータが、識別したユーザと推定した行動との組み合わせによって、そのユーザへ前記第１時刻に提示する情報を決定し、決定した情報を出力する情報出力方法。 A computer that records operation history data, which is time series data indicating a history of operation of the device by at least one user, using the recording medium, operates the device before the first time from the recorded operation history data. Is identified as a user operation, the user who performed the user operation is identified, and the action of the identified user at a second time that is a time after the first time is estimated by the user operation,
An information output method in which the computer determines information to be presented to the user at the first time based on a combination of the identified user and the estimated action, and outputs the determined information.
記録された操作履歴データから、第１時刻よりも前における機器の操作をユーザ操作として少なくとも１つ特定し、前記ユーザ操作を行ったユーザを識別するとともに、前記ユーザ操作によって、前記第１時刻以降の時刻である第２時刻における、識別したユーザの行動を推定する処理と、
識別されたユーザと推定された行動との組み合わせによって、そのユーザへ前記第１時刻に提示する情報を決定し、決定した情報を出力する処理と
を実行させる情報出力プログラム。 A computer that records operation history data, which is time-series data indicating a history of device operations by at least one user, using a recording medium,
From the recorded operation history data, at least one device operation prior to the first time is specified as a user operation, the user who performed the user operation is identified, and after the first time by the user operation A process of estimating the action of the identified user at the second time which is the time of
The information output program which performs the process which determines the information shown to the said user at the said 1st time with the combination of the identified user and the estimated action, and outputs the determined information.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015155647A JP6452571B2 (en) | 2015-08-06 | 2015-08-06 | Information output apparatus, information output method, and information output program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015155647A JP6452571B2 (en) | 2015-08-06 | 2015-08-06 | Information output apparatus, information output method, and information output program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017033482A true JP2017033482A (en) | 2017-02-09 |
| JP6452571B2 JP6452571B2 (en) | 2019-01-16 |
Family
ID=57988344
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015155647A Expired - Fee Related JP6452571B2 (en) | 2015-08-06 | 2015-08-06 | Information output apparatus, information output method, and information output program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6452571B2 (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018133045A (en) * | 2017-02-17 | 2018-08-23 | シャープ株式会社 | Network system, server, information processing method and refrigerator |
| JP2019078506A (en) * | 2017-10-26 | 2019-05-23 | 三菱電機株式会社 | Refrigerator system |
| WO2019146084A1 (en) * | 2018-01-26 | 2019-08-01 | 三菱電機株式会社 | Information presentation device and information presentation system |
| JP2020027309A (en) * | 2018-08-09 | 2020-02-20 | ソフトバンク株式会社 | Information management system and program |
| WO2020071403A1 (en) * | 2018-10-02 | 2020-04-09 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Information providing method |
| JP2020077141A (en) * | 2018-11-07 | 2020-05-21 | Ｌｉｎｅ株式会社 | Information processing method, program and terminal |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021005815A1 (en) * | 2019-07-08 | 2021-01-14 | パナソニックＩｐマネジメント株式会社 | Information processing method, information processing device, and program |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009116552A (en) * | 2007-11-05 | 2009-05-28 | Yahoo Japan Corp | Behavior attribute acquisition system and method for controlling the system |
| JP2009258976A (en) * | 2008-04-16 | 2009-11-05 | Mitsubishi Electric Corp | Portable terminal |
| JP2010108037A (en) * | 2008-10-28 | 2010-05-13 | Nec System Technologies Ltd | Action tracking system, action tracking method, and action tracking program |
| JP2010198492A (en) * | 2009-02-26 | 2010-09-09 | Nippon Telegr & Teleph Corp <Ntt> | Method, device, and program for estimating information selection index, and method and system for providing information |
| JP2013206139A (en) * | 2012-03-28 | 2013-10-07 | Casio Comput Co Ltd | Information processing apparatus, information processing method and program |
| US20140378159A1 (en) * | 2013-06-24 | 2014-12-25 | Amazon Technologies, Inc. | Using movement patterns to anticipate user expectations |
-
2015
- 2015-08-06 JP JP2015155647A patent/JP6452571B2/en not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009116552A (en) * | 2007-11-05 | 2009-05-28 | Yahoo Japan Corp | Behavior attribute acquisition system and method for controlling the system |
| JP2009258976A (en) * | 2008-04-16 | 2009-11-05 | Mitsubishi Electric Corp | Portable terminal |
| JP2010108037A (en) * | 2008-10-28 | 2010-05-13 | Nec System Technologies Ltd | Action tracking system, action tracking method, and action tracking program |
| JP2010198492A (en) * | 2009-02-26 | 2010-09-09 | Nippon Telegr & Teleph Corp <Ntt> | Method, device, and program for estimating information selection index, and method and system for providing information |
| JP2013206139A (en) * | 2012-03-28 | 2013-10-07 | Casio Comput Co Ltd | Information processing apparatus, information processing method and program |
| US20140378159A1 (en) * | 2013-06-24 | 2014-12-25 | Amazon Technologies, Inc. | Using movement patterns to anticipate user expectations |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018133045A (en) * | 2017-02-17 | 2018-08-23 | シャープ株式会社 | Network system, server, information processing method and refrigerator |
| JP2019078506A (en) * | 2017-10-26 | 2019-05-23 | 三菱電機株式会社 | Refrigerator system |
| WO2019146084A1 (en) * | 2018-01-26 | 2019-08-01 | 三菱電機株式会社 | Information presentation device and information presentation system |
| JPWO2019146084A1 (en) * | 2018-01-26 | 2020-05-28 | 三菱電機株式会社 | Information presentation device and information presentation system |
| JP2020027309A (en) * | 2018-08-09 | 2020-02-20 | ソフトバンク株式会社 | Information management system and program |
| WO2020071403A1 (en) * | 2018-10-02 | 2020-04-09 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Information providing method |
| JP2020077141A (en) * | 2018-11-07 | 2020-05-21 | Ｌｉｎｅ株式会社 | Information processing method, program and terminal |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6452571B2 (en) | 2019-01-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6452571B2 (en) | Information output apparatus, information output method, and information output program | |
| CN111937051B (en) | Smart home device placement and installation using augmented reality visualization | |
| US20220303341A1 (en) | Method and device for controlling home device | |
| US9565521B1 (en) | Automatic semantic labeling based on activity recognition | |
| US9875647B1 (en) | Systems and methods for presenting security questions via connected security system | |
| US9749714B2 (en) | Information notification apparatus and information displaying method | |
| JP6625022B2 (en) | Absence prediction method and presence / absence prediction device | |
| US10203669B2 (en) | Controlling electronic devices based on footstep pattern | |
| CN112166350B (en) | System and method for ultrasonic sensing in smart devices | |
| KR102487902B1 (en) | Method and apparatus for controlling home devices | |
| CN108604254A (en) | The closed caption of voice control is shown | |
| US20200280763A1 (en) | Video integration with home assistant | |
| JP6625740B2 (en) | IOT dialogue system | |
| CN114342357B (en) | Event-based recording | |
| JP6045982B2 (en) | Operation support device, operation support system, and program | |
| US20180363937A1 (en) | Control apparatus, control method, and program | |
| KR102498714B1 (en) | Electronic device and method for providing content | |
| US10989426B2 (en) | Information processing device, electronic apparatus, method, and program | |
| KR102144554B1 (en) | personalized living service apparatus and system for providing personalized living services | |
| CN109196352A (en) | System and method for coming supervision object and its state by using acoustic signal | |
| US10735685B2 (en) | Control method of presented information, control device of presented information, and speaker | |
| US20210208843A1 (en) | Information processing apparatus, information processing method, information processing program | |
| KR20170037795A (en) | Portable terminal apparatus and control method thereof | |
| US20200118243A1 (en) | Display method, display device, and computer-readable recording medium | |
| JP2017182382A (en) | Network system, information processing method, and server |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170822 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20180531 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180604 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180612 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181113 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181211 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6452571 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |