JP2020091231A - Information presentation system, information presentation method, program, and moving body - Google Patents
Information presentation system, information presentation method, program, and moving body Download PDFInfo
- Publication number
- JP2020091231A JP2020091231A JP2018229442A JP2018229442A JP2020091231A JP 2020091231 A JP2020091231 A JP 2020091231A JP 2018229442 A JP2018229442 A JP 2018229442A JP 2018229442 A JP2018229442 A JP 2018229442A JP 2020091231 A JP2020091231 A JP 2020091231A
- Authority
- JP
- Japan
- Prior art keywords
- information
- area
- moving body
- target
- target information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 238000004891 communication Methods 0.000 description 22
- 230000009471 action Effects 0.000 description 16
- 238000012545 processing Methods 0.000 description 11
- 238000001514 detection method Methods 0.000 description 10
- 230000004048 modification Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 6
- 230000015654 memory Effects 0.000 description 6
- 239000013589 supplement Substances 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 239000000446 fuel Substances 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本開示は、情報提示システム、情報提示方法、プログラム、及び、移動体に関する。本開示は、特に、移動体に乗っている人物に情報を提示する情報提示システム、情報提示方法、プログラム、及び、移動体に関する。 The present disclosure relates to an information presentation system, an information presentation method, a program, and a mobile body. The present disclosure particularly relates to an information presenting system, an information presenting method, a program, and a moving body that presents information to a person on the moving body.
特許文献１は、車載用ナビゲーション装置（カーナビゲーションシステム）を開示する。特許文献１の車載用ナビゲーション装置では、マイクロコンピュータは、ドライバがモニタの画面を継続的に注視している時間を判別する。継続時間が２秒以上になると、モニタへの表示及びスピーカにより、ドライバに警告を発して注意を促す。それでも、ドライバが画面を見続けている場合には、画面をオフする。 Patent Document 1 discloses a vehicle-mounted navigation device (car navigation system). In the vehicle-mounted navigation device of Patent Document 1, the microcomputer determines the time during which the driver continuously watches the screen of the monitor. When the duration is 2 seconds or more, a warning is given to the driver by a display on the monitor and a speaker to call attention. If the driver still looks at the screen, turn off the screen.
特許文献１では、ドライバが画面を見続けている場合に画面がオフになる。ドライバが画面を見続けているのは何らかの情報が得たいからである可能性が高い。そうすると、特許文献１ではドライバ（移動体に乗っている人物）に適切に情報を提示できていない。 In Patent Document 1, the screen is turned off when the driver continues to look at the screen. It is likely that the driver keeps looking at the screen because they want some information. Then, in Patent Document 1, the information cannot be properly presented to the driver (person riding on the moving body).
課題は、移動体に乗っている人物に適切な情報を提示できる、情報提示システム、情報提示方法、プログラム、及び、移動体を提供することである。 An object is to provide an information presentation system, an information presentation method, a program, and a mobile body that can present appropriate information to a person riding on the mobile body.
本開示の一態様の情報提示システムは、移動体に乗っている人物が前記移動体の内部において着目している着目エリアを決定する着目エリア決定部と、前記着目エリアと前記移動体に関する移動体情報とに基づいて、前記着目エリアに関する着目エリア情報を提示する提示制御部と、を備える。 An information presentation system according to an aspect of the present disclosure is an area-of-interest determining unit that determines an area of interest in which a person riding on a moving body looks inside the moving body, and a moving body related to the focused area and the moving body. A presentation control unit that presents attention area information regarding the attention area based on the information.
本開示の一態様の情報提示方法は、移動体に乗っている人物が前記移動体の内部において着目している着目エリアを決定し、前記着目エリアと前記移動体に関する移動体情報に基づいて、前記着目エリアに関する着目エリア情報を提示する。 The information presentation method according to an aspect of the present disclosure determines a focused area in which a person riding on a moving body is focused within the moving body, and based on the moving area information regarding the focused area and the moving body, Area of interest information about the area of interest is presented.
本開示の一態様のプログラムは、１以上のプロセッサに、上述の情報提示方法を実行させるための、プログラムである。 A program according to one aspect of the present disclosure is a program for causing one or more processors to execute the above-described information presentation method.
本開示の一態様の移動体は、上述の情報提示システムと、前記情報提示システムが搭載される移動体本体と、を備える。 A mobile body according to one aspect of the present disclosure includes the above-described information presentation system and a mobile body main body on which the information presentation system is mounted.
本開示の態様によれば、移動体に乗っている人物に適切な情報を提示できる、という効果を奏する。 According to the aspects of the present disclosure, it is possible to present appropriate information to a person riding on a moving body.
１．実施形態
１．１ 概要
図１は、一実施形態の情報提示システム１０を示す。情報提示システム１０は、着目エリア決定部１５２と、提示制御部１５５とを備える。着目エリア決定部１５２は、図２に示すように、移動体３０に乗っている人物Ｈ１が移動体３０の内部において着目している着目エリアＲ１，Ｒ２を決定する。提示制御部１５５は、着目エリアＲ１，Ｒ２と移動体３０に関する移動体情報とに基づいて、着目エリアＲ１，Ｒ２に関する着目エリア情報を提示する。
1. Embodiment 1.1 Overview FIG. 1 shows an
このように、情報提示システム１０は、人物Ｈ１が移動体３０の内部において着目している場所（着目エリアＲ１，Ｒ２）がある場合に、情報の提示を実行する。情報提示システム１０で提示される情報は、着目エリアに関する着目エリア情報であって、着目エリアＲ１，Ｒ２と移動体３０に関する移動体情報とに基づいている。これによって、例えば、情報提示システム１０は、人物Ｈ１が着目エリアＲ１，Ｒ２に関して関心を持っている情報を、人物Ｈ１に提示することができる。したがって、情報提示システム１０によれば、移動体３０に乗っている人物Ｈ１に適切な情報を提示できる。特に、人物Ｈ１が移動体３０を運転している人物である場合には、情報提示システム１０が着目エリア情報を提示することによって、人物Ｈ１が欲しい情報を迅速に入手できて、着目エリアではなくウィンドシールド３２の前方を見るようになり得る。よって、情報提示システム１０は、人物Ｈ１のよそ見運転の予防を図ることができ、安全運転に役立つ。
As described above, the
１．２ 詳細
以下、情報提示システム１０について図面を参照して詳細に説明する。情報提示システム１０は、図２に示すように、移動体３０に乗っている人物Ｈ１に、情報を提示するためのシステムである。情報提示システム１０は、移動体３０の本体３１に搭載される。移動体３０は乗物であり、本実施形態では自動車である。
1.2 Details Hereinafter, the
情報提示システム１０は、図１に示すように、撮像部１１と、通信部１２と、提示部１３と、記憶部１４と、処理部１５とを備える。
As shown in FIG. 1, the
撮像部１１は、情報提示システム１０により情報を提示する対象となる人物Ｈ１の頭部を含む画像を撮るための装置又はシステムである。撮像部１１は、１以上のカメラを含む。本実施形態では、人物Ｈ１は、移動体３０を運転するドライバを想定している。人物Ｈ１は必ずしもドライバに限定されず、助手席や後部座席等に座っている人物であってよい。撮像部１１は、図２に示すように、移動体３０の本体３１において、人物Ｈ１の頭部を含む画像、特に、人物Ｈ１の顔面の画像を撮ることができる位置に配置される。撮像部１１で撮られた画像は処理部１５に与えられる。
The
通信部１２は、移動体３０の本体３１に搭載されていない装置又はシステムとの間の情報の入出力を行う。本実施形態では、通信部１２は、外部システム２０に通信可能に接続される。通信部１２は、１以上の通信装置を含み、通信ネットワークを介した通信を実現する。通信ネットワークは、単一の通信プロトコルに準拠したネットワークだけではなく、異なる通信プロトコルに準拠した複数のネットワークで構成されていてもよい。通信プロトコルは、周知の様々な有線及び無線通信規格から選択され得る。ただし、通信部１２と外部システム２０との間の通信は、移動体通信により行われることが好ましい。なお、通信ネットワークは、必要に応じて、リピータハブ、スイッチングハブ、ブリッジ、ゲートウェイ、ルータ等のデータ通信機器を含み得る。
The
提示部１３は、人物Ｈ１に情報の提示を行うための装置又はシステムである。つまり、提示部１３は、ヒューマン−マシンインタフェースである。提示部１３は、画像表示装置１３１と、音声出力装置１３２とを有している。画像表示装置１３１は、人物Ｈ１に視覚的な情報を提示するための装置又はシステムである。画像表示装置１３１は、液晶ディスプレイや、有機ＥＬディスプレイ、３Ｄヘッドアップディスプレイ（ＨＵＤ）等の１以上のディスプレイを含み得る。本実施形態では、画像表示装置１３１は、本体３１に搭載されるカーナビゲーションシステムの液晶ディスプレイを含む。音声出力装置１３２は、人物Ｈ１に聴覚的な情報を提示するための装置又はシステムである。音声出力装置１３２は、１以上のスピーカを含み得る。本実施形態では、音声出力装置１３２は、本体３１に搭載されるオーディオシステムを含む。
The
記憶部１４は、処理部１５が利用する情報を記憶するための装置又はシステムである。記憶部１４は、１以上の記憶装置を含む。記憶装置は、例えば、ＲＡＭ（Random Access Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）である。記憶部１４は、履歴記憶部１４１と、情報記憶部１４２とを備える。
The
履歴記憶部１４１は、後述する着目エリア決定部１５２で決定された着目エリアの履歴を記憶する。履歴記憶部１４１は、着目エリアの決定時の時の移動体３０に関する移動体情報を記憶してよい。
The history storage unit 141 stores the history of the area of interest determined by the area-of-interest determination unit 152 described below. The history storage unit 141 may store mobile body information regarding the
情報記憶部１４２は、移動体３０に関する移動体情報を記憶する。移動体情報は、移動体３０の内部状態の最新情報と移動体３０の外部状態の最新情報との少なくとも一方を含む。このような移動体情報を利用すれば、移動体３０に乗っている人物Ｈ１に、より適切な情報を提示できる。ここで、移動体３０の内部状態は、移動体３０の移動に関する状態、移動体３０に乗っている人物に関する状態、及び移動体３０の性能に関する状態の少なくとも一つを含み得る。移動体３０の移動に関する状態の例としては、移動体３０の走行状態（走行中か停止中か）、移動体３０の速度（現在の速度）、移動体３０の操舵角、移動体３０のエネルギー（ガソリン、電気）の残量が挙げられる。更に、移動体３０の移動に関する状態の例としては、移動体３０の周囲の温度（現在の温度）、移動体３０の周囲の騒音レベル、移動体３０の周囲の状況（物体の有無等）が挙げられる。移動体１００に乗っている人物に関する状態の例としては、移動体３０に乗っている人物の状態（現在の状態）が挙げられる。移動体３０の性能に関する状態は、移動体３０の諸元（移動体３０の本体３１の寸法、燃費等）を含む。ここで、移動体３０の移動に関する状態、及び、移動体３０に乗っている人物に関する状態は、移動体３０に搭載される各種センサから取得可能である。センサとしては、加速度センサ、カメラ、超音波センサ、マイクロフォン、温度センサ、圧力センサ、ミリ波（テラヘルツ波）センサ、呼気センサが挙げられる。移動体３０の性能に関する状態は、情報記憶部１４２に予め記憶されるか、外部システム２０から取得可能である。移動体３０の外部状態は、移動体３０の位置に関する状態、移動体３０の周辺の状態、及び移動体３０と連携するシステムの状態の少なくとも一つを含み得る。移動体３０の位置に関する状態の例としては、移動体３０の位置情報が挙げられる。移動体３０の周辺の状態の例としては、交通情報（渋滞情報等）、騒音レベル、天気情報、時間情報が挙げられる。移動体３０と連携するシステムの状態の例としては、移動体３０とは別の移動体からの情報、移動体３０に関するサービス提供者からの情報等が挙げられる。移動体３０の外部状態は、通信部１２を通じて外部システム２０から取得可能である。外部システム２０は、１以上の情報提供システムを含み得る。情報提供システムの例としては、グローバル・ポジショニング・システム（ＧＰＳ）、道路交通情報通信システムが挙げられる。
The information storage unit 142 stores mobile body information regarding the
処理部１５は、情報提示システム１０の動作を制御する役割を持つ電気回路である。処理部１５は、例えば、１以上のプロセッサ（マイクロプロセッサ）により実現され得る。つまり、１以上のプロセッサが１以上のメモリに記憶された１以上のプログラムを実行することで、処理部１５として機能する。１以上のプログラムは、メモリに予め記録されていてもよいし、インターネット等の電気通信回線を通じて、又はメモリカード等の非一時的な記録媒体に記録されて提供されてもよい。
The
処理部１５は、図１に示すように、視線検出部１５１と、着目エリア決定部１５２と、移動体情報取得部１５３と、対象情報推定部１５４と、提示制御部１５５とを備える。視線検出部１５１と、着目エリア決定部１５２と、移動体情報取得部１５３と、対象情報推定部１５４と、提示制御部１５５とは実体のある構成を示しているわけではなく、処理部１５によって実現される機能を示している。
As shown in FIG. 1, the
視線検出部１５１は、人物Ｈ１の視点（注視点）を検出するように構成される。視点は、人物Ｈ１の視線Ｑ１（図２参照）の注がれるところである。要するに、視線検出部１５１は、移動体３０の内部において人物Ｈ１が見ている場所を検出する。本実施形態では、視線検出部１５１は、撮像部１１から得られた人物Ｈ１の頭部の画像に基づいて、人物Ｈ１の視点を検出する。視点の検出には、従来周知のアイトラッキング技術（特に、オプティカルトラッキング）を用いることができる。
The line-of-sight detection unit 151 is configured to detect the viewpoint (gazing point) of the person H1. The viewpoint is where the line of sight Q1 (see FIG. 2) of the person H1 is poured. In short, the line-of-sight detection unit 151 detects the place where the person H1 is looking inside the moving
着目エリア決定部１５２は、移動体３０に乗っている人物Ｈ１が移動体３０の内部において着目している着目エリアを決定する。特に、着目エリア決定部１５２は、人物Ｈ１の視点に基づいて、着目エリアを決定する。人物Ｈ１の視点は、視線検出部１５１により検出される。これにより、着目エリアの決定の精度の向上が図れる。
The attention area determination unit 152 determines the attention area in which the person H1 on the moving
本実施形態では、移動体３０の内部には、着目エリアの候補として複数のエリアが設定されている。着目エリアの候補となるエリアは、第１エリアＲ１及び第２エリアＲ２を含む。第１エリアＲ１は、画像表示装置１３１の画面である。第２エリアＲ２は、移動体３０のインストルメンタルパネル（ダッシュボード）の計器盤である。
In this embodiment, a plurality of areas are set inside the moving
着目エリア決定部１５２は、視線検出部１５１で検出された人物Ｈ１の視点に基づいて、第１エリアＲ１及び第２エリアＲ２から着目エリアを選択する。着目エリア決定部１５２は、人物Ｈ１が移動体３０の内部において所定時間以上継続して見たエリア、又は、人物Ｈ１が移動体３０の内部において規定時間内に規定回数以上見たエリアを、着目エリアとして決定する。これによって、着目エリアの決定の精度の向上が図れる。人物Ｈ１が移動体３０の内部において所定時間以上継続して見たエリアは、要するに、人物Ｈ１がずっと見ているエリアである。所定時間は一例としては、２秒である。人物Ｈ１が移動体３０の内部において規定時間内に規定回数以上見たエリアは、要するに、人物Ｈ１がちらちら見ているエリアである。規定時間は一例としては５秒である。規定回数は一例としては３回である。本実施形態では、着目エリア決定部１５２は、人物Ｈ１が移動体３０の内部において規定時間内に規定回数以上見たエリアを、着目エリアとして決定する。
The attention area determination unit 152 selects an attention area from the first area R1 and the second area R2 based on the viewpoint of the person H1 detected by the line-of-sight detection unit 151. The area-of-interest determination unit 152 focuses on an area that the person H1 has seen inside the moving
移動体情報取得部１５３は、着目エリア決定部１５２で着目エリアが決定された際に、移動体情報を取得する。移動体情報取得部１５３は、移動体３０に搭載される各種センサ、外部システム２０、及び、記憶部１４から、移動体情報を取得してよい。
The mobile body
対象情報推定部１５４は、着目エリアと移動体情報とに基づいて、人物Ｈ１が着目エリアから取得したい対象情報を決定する。より詳細には、対象情報推定部１５４は、着目エリア決定部１５２で決定された着目エリアと移動体情報取得部１５３で取得された移動体情報とに基づいて、着目エリア決定部１５２で決定された着目エリアから人物Ｈ１が取得したい対象情報を決定する。対象情報は、人物Ｈ１が着目エリアから取得可能な情報、及び、人物Ｈ１が着目エリアから取得可能な情報についての追加情報（例えば、詳細や補足）を含み得る。ここで、人物Ｈ１が着目エリアから取得可能な情報は、着目エリアに明示的又は暗示的に表示されている情報であり得る。着目エリアに明示的に表示されている情報は、着目エリアにテキストで表示されている情報であり得る。着目エリアに暗示的に表示されている情報は、着目エリアに図、絵、マーク、記号等で表示されている情報であり得る。例えば、着目エリアが画像表示装置１３１の画面であり、地図上にナビゲーション情報が表示されているとする。この場合、人物Ｈ１が着目エリアから取得可能な情報としては、地図上の目的地の位置、目的地までの経路、目的地までの距離、渋滞状況、及び予想到着時間である。追加情報としては、地図上の目的地の位置の詳細・補足（目的地の住所）、目的地までの経路の詳細・補足、目的地までの距離の詳細・補足、渋滞状況の詳細・補足、及び予想到着時間の詳細・補足がある。
The target
本実施形態では、対象情報推定部１５４は、着目エリアの表示内容と移動体３０に関する移動体情報とに基づいて、対象情報を決定する。つまり、対象情報を決定するために、対象情報推定部１５４は、着目エリアの表示内容を参照する。一例として、着目エリアがカーナビゲーションシステムの画面である場合に、対象情報推定部１５４は、カーナビゲーションシステムの画面の表示内容を参照する。着目エリアの表示内容とは、着目エリアに直接的に表示されている情報（視覚情報）であり得る。また、着目エリアの表示内容は、単一の視覚情報ではなく、複数の視覚情報を含み得る。
In the present embodiment, the target
第１エリアＲ１は、上述したように、画像表示装置１３１の画面である。画像表示装置１３１の画面の表示内容は、変更され得るから、単一の視覚情報ではなく、複数の視覚情報を含み得る。例えば、画像表示装置１３１の画面の表示内容は、カーナビゲーションシステム又はオーディオシステムによって変わり得る。第１エリアＲ１の表示内容は、地図情報、カーナビゲーションシステムによるナビゲーション情報、及び、オーディオシステムで再生中の音楽情報を含む。対象情報推定部１５４は、カーナビゲーションシステム又はオーディオシステムから、画像表示装置１３１の画面の表示内容を取得してよい。
The first area R1 is the screen of the
対象情報推定部１５４は、表示内容が地図情報を含む場合、地図情報に関連する案内情報を対象情報としてよい。案内情報は、絶対位置情報と、相対位置情報とを含み得る。絶対位置情報は、移動体３０の目的地の位置に関連する情報である。なお、ここでの目的地は、カーナビゲーションシステムで設定された目的地とは必ずしも一致しない。絶対位置情報の例としては、地図情報で表される地図上での目的地の位置がある。相対位置情報は、移動体３０の現在の位置と移動体３０の目的地との位置関係に関連する情報である。相対位置情報の例としては、移動体３０の現在の位置から移動体３０の目的地までの距離、ルート、ナビゲーション情報、時間等がある。
When the display content includes the map information, the target
例えば、着目エリアが第１エリアＲ１であり、表示内容が地図情報である場合を考える。この場合において、移動体情報に含まれる移動体３０の位置が高速道路上であれば、対象情報は、駐停車可能なエリアの場所であると考えられる。対象情報推定部１５４は、目的地が最寄りの駐停車可能なエリアである絶対位置情報を生成してよい。駐車可能エリアとしては、パーキングエリア及びサービスエリアがある。また、移動体情報に含まれる移動体３０の位置が高速道路の出口周辺であれば、対象情報は、高速道路の出口の場所であると考えられる。対象情報推定部１５４は、目的地が高速道路の出口である相対位置情報を生成してよい。相対位置情報は、高速道路の出口までの距離及びナビゲーションであってよい。また、移動体情報に含まれる移動体３０のガソリンの残量が少ない場合（燃料残量警告灯の点灯時）は、対象情報は、ガソリンスタンドの場所であると考えられる。対象情報推定部１５４は、目的地が最寄りのガソリンスタンドの場所である絶対位置情報を生成してよい。
For example, consider a case where the area of interest is the first area R1 and the display content is map information. In this case, if the position of the moving
例えば、着目エリアが第１エリアＲ１であり、表示内容が地図情報及びナビゲーション情報である場合を考える。この場合において、移動体情報が示す移動体３０の位置が高速道路上であれば、対象情報は、駐停車可能なエリアの場所であると考えられる。対象情報推定部１５４は、目的地が駐停車可能なエリアである絶対位置情報を生成してよい。また、移動体情報が示す移動体３０の位置がアクション地点の周辺であれば、対象情報は、アクション地点までの距離や時間であると考えられる。対象情報推定部１５４は、目的地がアクション地点である相対位置情報を生成してよい。アクション地点は、移動体３０の右折、左折、進路変更（車線変更）等である。相対位置情報は、アクション地点までの距離及びナビゲーションであってよい。この場合には、相対位置情報は、カーナビゲーションシステムによるナビゲーション情報よりも詳細な情報であるとよい。また、移動体情報が示す移動体３０の位置が高速道路の出口周辺であれば、対象情報は、高速道路の出口の場所であると考えられる。対象情報推定部１５４は、目的地が高速道路の出口である相対位置情報を生成してよい。相対位置情報は、高速道路の出口までの距離及びナビゲーションであってよい。また、移動体情報に含まれる移動体３０のガソリンの残量が少ない場合（燃料残量警告灯の点灯時）は、対象情報は、次のアクションに関する情報であると考えられる。対象情報推定部１５４は、目的地が次のアクション地点である相対位置情報を生成してよい。相対位置情報は、次のアクション、次のアクション地点までの距離、及びナビゲーションであってよい。
For example, consider a case where the area of interest is the first area R1 and the display contents are map information and navigation information. In this case, if the position of the moving
例えば、着目エリアが第１エリアＲ１であり、表示内容が音楽情報である場合を考える。この場合において、移動体情報が示す移動体３０の位置が高速道路上であれば、対象情報推定部１５４は、再生中の曲の情報（曲名、歌手名等）を対象情報として決定してよい。また、対象情報推定部１５４は、次に再生する曲の情報を対象情報として決定してよい。例えば、着目エリアが第１エリアＲ１であり、表示内容が映像情報である場合を考える。この場合において、移動体情報が示す移動体３０の位置が高速道路上であれば、対象情報推定部１５４は、再生中又は放映中の映像の情報（放送局、作品名等）を対象情報として決定してよい。
For example, consider a case where the area of interest is the first area R1 and the display content is music information. In this case, if the position of the moving
第２エリアＲ２は、上述したように、移動体３０のインストルメンタルパネルの計器盤である。第２エリアＲ２の表示内容は、計器盤で表示される情報である。計器盤で表示される情報は、移動体３０の現在の状態に関する情報を含み得る。例えば、移動体３０の現在の状態に関する情報としては、移動体３０の走行速度（現在の速度）、ガソリンの残量（バッテリーの残量）、走行距離、エンジンの回転数、警告灯、表示灯が挙げられる。警告灯としては、ＡＢＳ警告灯、ブレーキ警告灯、油圧警告灯、高水温警告灯、燃料残量警告灯、故障警告灯が挙げられる。表示灯としては、フォグランプ表示灯、ヘッドランプ上向き表示灯、アイドリングストップ表示灯、低水温表示灯が挙げられる。
The second area R2 is the instrument panel of the instrumental panel of the
例えば、着目エリアが第２エリアＲ２である場合を考える。この場合において、移動体情報に含まれる移動体３０の位置が高速道路上であれば、対象情報推定部１５４は、移動体３０の走行速度（現在の速度）を対象情報として決定してよい。また、移動体情報に含まれる移動体３０のガソリンの残量が少ない場合（燃料残量警告灯の点灯時）は、対象情報推定部１５４は、走行可能距離を対象情報として決定してよい。また、警告灯の点灯時は、対象情報推定部１５４は、警告灯の詳細情報（警告灯の意味）を対象情報として決定してよい。警告灯がＡＢＳ警告灯である場合は、「ＡＢＳが正常に作動していないおそれがあります」という内容の情報が、対象情報となり得る。
For example, consider a case where the area of interest is the second area R2. In this case, if the position of the
更に、対象情報推定部１５４は、着目エリア決定部１５２で決定された着目エリアの履歴を利用して、対象情報を決定する。例えば、人物Ｈ１が短期間のうちに同じ着目エリアに何回も着目している場合には、対象情報推定部１５４が決定した対象情報が人物Ｈ１の要求を満たせていない可能性がある。よって、対象情報推定部１５４は、前回の着目エリアの決定から今回の着目エリアの決定までの時間間隔が閾値以下であり、かつ前回の着目エリアが今回の着目エリアと同じ場合、前回の対象情報とは異なる情報を、今回の対象情報とする。例えば、着目エリアが第１エリアＲ１であり、表示内容が地図情報である場合を考える。この場合において、前回の対象情報が、目的地が駐停車可能なエリアである絶対位置情報を含む場合には、今回の対象情報は、目的地が高速道路の出口である相対位置情報を含んでよい。これによって、人物Ｈ１の要求を満たす対象情報の決定が可能となり得る。なお、前回の着目エリアの決定から今回の着目エリアの決定までの時間間隔の閾値は特には限定されないが、前回の着目エリアの決定に対して提示された対象情報に人物Ｈ１が満足しない場合に、再度着目エリアを見るのにかかる時間を想定して決定され得る。また、閾値は、一定値ではなく、着目エリア、提示された対象情報等に応じて異なってよい。
Furthermore, the target
このように、対象情報推定部１５４は、着目エリアと移動体に関する移動体情報とに基づいて、対象情報を決定する。そして、対象情報推定部１５４は、決定した対象情報を、提示制御部１５５に与える。
In this way, the target
提示制御部１５５は、着目エリアと移動体に関する移動体情報とに基づいて、着目エリアに関する着目エリア情報を提示する。着目エリア情報は、着目エリアに関する情報を人物Ｈ１に通知するための情報である。本実施形態では、提示制御部１５５は、対象情報推定部１５４で決定された対象情報に基づいて着目エリア情報を提示する。着目エリア情報は、対象情報そのものというよりは、対象情報を人物Ｈ１が把握しやすい形式で通知するための情報である。提示制御部１５５は、提示部１３を利用して、着目エリア情報の提示を行う。提示部１３は、画像表示装置１３１及び音声出力装置１３２を含んでいるから、提示制御部１５５は、着目エリア情報を、画像表示装置１３１及び音声出力装置１３２を利用して提示する。つまり、提示制御部１５５は、着目エリア情報を、視覚的及び／又は聴覚的に人物Ｈ１に提示し得る。提示制御部１５５は、終了条件が満たされた際に、着目エリア情報の提示を終了する。終了条件は、着目エリア情報の内容に応じて変化し得る。終了条件は、着目エリア情報を人物Ｈ１が十分に把握できるかどうかを基準として決定され得る。例えば、画像表示装置１３１による表示を行う場合には、表示を一定時間継続したかどうかが基準となる。また、音声出力装置１３２による音声通知を行う場合には、音声通知が終了したかどうかが基準となる。
The presentation control unit 155 presents attention area information regarding the attention area based on the attention area and the moving body information regarding the moving body. The area-of-interest information is information for notifying the person H1 of information regarding the area-of-interest. In the present embodiment, the presentation control unit 155 presents the area-of-interest information based on the target information determined by the target
次に、着目エリア情報の提示の例を挙げる。 Next, an example of presenting the area information of interest will be given.
例えば、着目エリアが第１エリアＲ１である場合を考える。対象情報が、目的地が最寄りの駐停車可能なエリアである絶対位置情報を含む場合、提示制御部１５５は、着目エリア情報の提示では、最寄りの駐停車可能なエリアの場所を画像表示装置１３１に表示してよい。更に、提示制御部１５５は、最寄りの駐停車可能なエリアまでの距離を音声出力装置１３２で通知してよい。また、対象情報が、目的地が高速道路の出口である相対位置情報を含む場合、提示制御部１５５は、着目エリア情報の提示では、高速道路の出口までのナビゲーション情報を画像表示装置１３１に表示してよい。更に、提示制御部１５５は、高速道路の出口の名称及び高速道路の出口までの距離を音声出力装置１３２で通知してよい。また、対象情報が、目的地が最寄りのガソリンスタンドの場所である絶対位置情報を含む場合、提示制御部１５５は、着目エリア情報の提示では、最寄りのガソリンスタンドの場所を画像表示装置１３１に表示してよい。更に、提示制御部１５５は、最寄りのガソリンスタンドまでの距離を音声出力装置１３２で通知してよい。また、対象情報が、目的地がアクション地点である相対位置情報を含む場合、提示制御部１５５は、着目エリア情報の提示では、アクション地点までの距離を音声出力装置１３２で通知してよい。更に、提示制御部１５５は、音声出力装置１３２により、アクション地点までの距離が一定値（５０ｍ毎）減るごとに、アクション地点までの残りの距離を音声出力装置１３２により通知してよい。また、対象情報が、目的地が次のアクション地点である相対位置情報を含む場合、提示制御部１５５は、着目エリア情報の提示では、音声出力装置１３２により、次のアクション、次のアクション地点までの距離、及びナビゲーションを通知してよい。また、対象情報が、再生中の曲の情報（曲名、歌手名等）である場合、提示制御部１５５は、再生中の曲の情報を画像表示装置１３１及び音声出力装置１３２により通知してよい。また、対象情報が、次に再生する曲の情報（曲名、歌手名等）である場合、提示制御部１５５は、次に再生する曲の情報を画像表示装置１３１及び音声出力装置１３２により通知してよい。また、対象情報が、再生中又は放映中の映像の情報（放送局、作品名等）である場合、提示制御部１５５は、再生中又は放映中の映像の情報（放送局、作品名等）を画像表示装置１３１及び音声出力装置１３２により通知してよい。
For example, consider a case where the area of interest is the first area R1. When the target information includes the absolute position information in which the destination is the nearest parking/stopping area, the presentation control unit 155, in the presentation of the attention area information, displays the location of the nearest parking/stopping area in the
例えば、着目エリアが第２エリアＲ２である場合を考える。対象情報が、移動体３０の走行速度（現在の速度）を含む場合、提示制御部１５５は、着目エリア情報の提示では、移動体３０の走行速度（現在の速度）を音声出力装置１３２により通知してもよい。また、対象情報が、走行可能距離を含む場合、提示制御部１５５は、着目エリア情報の提示では、走行可能距離を音声出力装置１３２により通知してもよい。また、対象情報が、警告灯の詳細情報（警告灯の意味）を含む場合、提示制御部１５５は、着目エリア情報の提示では、警告灯の詳細情報（警告灯の意味）を音声出力装置１３２により通知してもよい。
For example, consider a case where the area of interest is the second area R2. When the target information includes the traveling speed (current speed) of the moving
１．３ 動作
次に、情報提示システム１０の動作について図３のフローチャートを参照して簡単に説明する。なお、図３のフローチャートにおいて、ステップＳ１３，Ｓ１４の順番は一例であって、これらは同時に実行され得る。
1.3 Operation Next, the operation of the
情報提示システム１０では、視線検出部１５１は、人物Ｈ１の視点（注視点）を検出する（Ｓ１１）。次に、着目エリア決定部１５２は、移動体３０に乗っている人物Ｈ１が移動体３０の内部において着目している着目エリアの有無を判定する（Ｓ１２）。着目エリアが無い場合（Ｓ１２：Ｎｏ）、処理はＳ１１に戻る。着目エリアが有る場合（Ｓ１２：Ｙｅｓ）、対象情報推定部１５４は、着目エリアの表示内容を取得する（Ｓ１３）。また、対象情報推定部１５４は、移動体情報取得部１５３を通じて移動体情報を取得する（Ｓ１４）。次に、対象情報推定部１５４は、着目エリア（その表示内容）及び移動体情報に基づいて、人物Ｈ１が着目エリアから取得したい対象情報を決定する（Ｓ１５）。提示制御部１５５は、対象情報推定部１５４で決定された対象情報に基づき、着目エリア情報の提示を開始する（Ｓ１６）。着目エリア情報の提示の終了条件が満たされれば（Ｓ１９：Ｙｅｓ）、提示制御部１５５は、着目エリア情報の提示を終了する（Ｓ２０）。ここで、着目エリア情報の提示の開始（Ｓ１６）後も、視線検出部１５１は、人物Ｈ１の視点（注視点）を検出し（Ｓ１７）、着目エリア決定部１５２は、着目エリアの有無を判定する（Ｓ１８）。着目エリアが有る場合（Ｓ１８：Ｙｅｓ）に、前回の着目エリアの決定から今回の着目エリアの決定までの時間間隔が閾値以下かつ前回の着目エリアと今回の着目エリアとが同じという条件が満たされていなければ（Ｓ２１：Ｎｏ）、処理はステップＳ１３に戻る。一方で、前述の条件が満たされていれば（Ｓ２１：Ｙｅｓ）、対象情報推定部１５４は、対象情報の再決定を行う（Ｓ２２）。対象情報の再決定では、対象情報推定部１５４は、前回の対象情報とは異なる情報を今回の対象情報として決定する。これに伴い、提示制御部１５５は、着目エリア情報の提示を終了する。そして、次のステップＳ１６では、提示制御部１５５は、対象情報推定部１５４によって再決定された対象情報に基づき、着目エリア情報の提示を開始する。
In the
１．４ まとめ
以上述べた情報提示システム１０は、着目エリア決定部１５２と、提示制御部１５５とを備える。着目エリア決定部１５２は、図２に示すように、移動体３０に乗っている人物Ｈ１が移動体３０の内部において着目している着目エリアＲ１，Ｒ２を決定する。提示制御部１５５は、着目エリアＲ１，Ｒ２と移動体３０に関する移動体情報とに基づいて、着目エリアＲ１，Ｒ２に関する着目エリア情報を提示する。情報提示システム１０によれば、移動体３０に乗っている人物Ｈ１に適切な情報を提示できる。
1.4 Summary The
換言すれば、情報提示システム１０は、下記の方法（情報提示方法）を実行しているといえる。情報提示方法は、移動体３０に乗っている人物Ｈ１が移動体３０の内部において着目している着目エリアＲ１，Ｒ２を決定し、着目エリアＲ１，Ｒ２と移動体３０に関する移動体情報とに基づいて、着目エリアＲ１，Ｒ２に関する着目エリア情報を提示する。この情報提示方法によれば、情報提示システム１０と同様に、移動体３０に乗っている人物Ｈ１に適切な情報を提示できる。
In other words, it can be said that the
情報提示方法は、１以上のプロセッサがプログラム（コンピュータプログラム）を実行することにより実現される。このプログラムは、１以上のプロセッサに情報提示方法を実行させるためのプログラムである。このようなプログラムによれば、情報提示方法と同様に、移動体３０に乗っている人物Ｈ１に適切な情報を提示できる。
The information presentation method is realized by one or more processors executing a program (computer program). This program is a program for causing one or more processors to execute the information presentation method. According to such a program, like the information presentation method, it is possible to present appropriate information to the person H1 on the moving
２．変形例
本開示の実施形態は、上記実施形態に限定されない。上記実施形態は、本開示の目的を達成できれば、設計等に応じて種々の変更が可能である。以下に、上記実施形態の変形例を列挙する。
2. Modification Embodiments of the present disclosure are not limited to the above-described embodiments. The above embodiment can be variously modified according to the design and the like as long as the object of the present disclosure can be achieved. The modifications of the above embodiment are listed below.
一変形例では、着目エリアは、移動体３０の内部のエリア（場所）であればよく、上記実施形態の例（第１エリアＲ１、第２エリアＲ２）に限定されない。着目エリアの例としては、移動体３０の空調装置の制御盤や、パワーウィンドウの操作盤、運転手席、助手席、後部座席、バックミラー（ルームミラー、サイドミラー）が挙げられる。また、着目エリアは、移動体３０の本体３１の一部のエリアである必要はなく、移動体３０の内部にある装置の一部のエリアであってもよい。例えば、着目エリアは、移動体３０内にある端末装置の画面であってもよい。端末装置は、スマートフォン、タブレット端末、ウェアラブル端末等である。この場合、情報提示システム１０は、通信部１２により端末装置と通信して、着目エリアの表示内容を取得してよい。例えば、端末装置の画面にナビゲーション情報を表示するような場合、端末装置は、移動体３０内の所定位置に配置される。よって、端末装置の画面は、着目エリアとして検出可能である。
In a modified example, the area of interest may be an area (place) inside the moving
一変形例では、対象情報推定部１５４において、学習済みモデルを利用することが可能である。例えば、対象情報推定部１５４は、着目エリアと移動体情報との組み合わせと対象情報との関係を学習した学習済みモデルを利用して対象情報を決定してよい。この場合、記憶部１４は、対象情報推定部１５４での解釈に使用される学習済みモデル（推定モデル）を格納する。推定モデルは、着目エリアと移動体情報との組み合わせと対象情報との関係を示す学習用データセットを用いた人工知能のプログラム（アルゴリズム）の学習によって、生成され得る。人工知能のプログラムは、機械学習のモデルであって、例えば、階層モデルの一種であるニューラルネットワークが用いられる。推定モデルは、ニューラルネットワークに学習用データセットで機械学習（例えば、深層学習）を行わせることで、生成される。推定モデルは、情報提示システム１０の処理部１５又は外部システム２０により生成されてよい。対象情報推定部１５４は、記憶部１４に記憶された推定モデルを利用して、対象情報の決定を行ってよい。対象情報推定部１５４は、推定モデルに、着目エリアと移動体情報を入力して、対象情報を出力させる。対象情報推定部１５４は、対象情報が得られると、提示制御部１５５に与える。情報提示システム１０では、対象情報推定部１５４は、推定モデルを生成するための学習用データを収集し、蓄積してもよい。このように対象情報推定部１５４で新たに収集した学習用データは、推定モデルの再学習に利用でき、これによって、推定モデル（学習済みモデル）の性能の向上が図れる。特に、対象情報推定部１５４は、前回の対象情報とは異なる情報を今回の対象情報とした場合、今回の着目エリアと移動体情報との組み合わせと今回の対象情報との関係を用いて、学習済みモデルの再学習を行う。これによれば、移動体３０に乗っている人物Ｈ１に、より適切な情報を提示でき得る。
In a modification, the target
一変形例では、情報提示システム１０は、撮像部１１、通信部１２、提示部１３、及び記憶部１４を備えていなくてよく、処理部１５を有していれば実現可能である。また、処理部１５も、少なくとも、着目エリア決定部１５２及び提示制御部１５５を含んでいればよい。
In a modification, the
一変形例では、情報提示システム１０が搭載される移動体３０は、自動車ではなく、例えば、二輪車、電車、航空機、建設機械、及び船舶等の乗物であってもよい。
In a modification, the moving
一変形例では、情報提示システム１０は、複数のコンピュータにより構成されていてもよい。例えば、情報提示システム１０の機能（特に、視線検出部１５１、着目エリア決定部１５２、移動体情報取得部１５３、対象情報推定部１５４、及び提示制御部１５５）は、複数の装置に分散されていてもよい。更に、情報提示システム１０の機能の少なくとも一部が、例えば、クラウド（クラウドコンピューティング）によって実現されていてもよい。
In a modification, the
以上述べた情報提示システム１０の実行主体は、コンピュータシステムを含んでいる。コンピュータシステムは、ハードウェアとしてのプロセッサ及びメモリを有する。コンピュータシステムのメモリに記録されたプログラムをプロセッサが実行することによって、本開示における情報提示システム１０の実行主体としての機能が実現される。プログラムは、コンピュータシステムのメモリに予め記録されていてもよいが、電気通信回線を通じて提供されてもよい。また、プログラムは、コンピュータシステムで読み取り可能なメモリカード、光学ディスク、ハードディスクドライブ等の非一時的な記録媒体に記録されて提供されてもよい。コンピュータシステムのプロセッサは、半導体集積回路（ＩＣ）又は大規模集積回路（ＬＳＩ）を含む１乃至複数の電子回路で構成される。ＬＳＩの製造後にプログラムされる、フィールド・プログラマブル・ゲート・アレイ（ＦＧＰＡ）、ＡＳＩＣ（application specific integrated circuit）、又はＬＳＩ内部の接合関係の再構成又はＬＳＩ内部の回路区画のセットアップができる再構成可能な論理デバイスも同じ目的で使うことができる。複数の電子回路は、１つのチップに集約されていてもよいし、複数のチップに分散して設けられていてもよい。複数のチップは、１つの装置に集約されていてもよいし、複数の装置に分散して設けられていてもよい。
The execution subject of the
３．態様
上記実施形態及び変形例から明らかなように、本開示は、下記の態様を含む。以下では、実施形態との対応関係を明示するためだけに、符号を括弧付きで付している。
3. Aspect As is apparent from the above-described embodiments and modifications, the present disclosure includes the following aspects. In the following, the reference numerals are given in parentheses only in order to clearly show the correspondence with the embodiment.
第１の態様は、情報提示システム（１０）であって、着目エリア決定部（１５２）と、提示制御部（１５５）とを備える。着目エリア決定部（１５２）は、移動体（３０）に乗っている人物（Ｈ１）が前記移動体（３０）の内部において着目している着目エリア（Ｒ１，Ｒ２）を決定する。提示制御部（１５５）は、前記着目エリア（Ｒ１，Ｒ２）と前記移動体（３０）に関する移動体情報とに基づいて、前記着目エリア（Ｒ１，Ｒ２）に関する着目エリア情報を提示する。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に適切な情報を提示できる。 A first aspect is an information presentation system (10), which includes an area-of-interest determination unit (152) and a presentation control unit (155). The attention area determination unit (152) determines the attention area (R1, R2) in which the person (H1) on the moving body (30) is paying attention inside the moving body (30). The presentation control unit (155) presents attention area information regarding the attention area (R1, R2) based on the attention area (R1, R2) and moving body information regarding the moving body (30). According to this aspect, it is possible to present appropriate information to the person (H1) on the moving body (30).
第２の態様は、第１の態様の情報提示システム（１０）に基づく。第２の態様では、前記情報提示システム（１０）は、前記着目エリア（Ｒ１，Ｒ２）と前記移動体情報とに基づいて、前記人物（Ｈ１）が前記着目エリア（Ｒ１，Ｒ２）から取得したい対象情報を決定する対象情報推定部（１５４）を更に備える。前記提示制御部（１５５）は、前記対象情報に基づいて前記着目エリア情報を提示する。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The second aspect is based on the information presentation system (10) of the first aspect. In the second aspect, the information presentation system (10) wants the person (H1) to acquire from the attention area (R1, R2) based on the attention area (R1, R2) and the moving body information. A target information estimation unit (154) that determines target information is further provided. The presentation control unit (155) presents the area-of-interest information based on the target information. According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第３の態様は、第２の態様の情報提示システム（１０）に基づく。第３の態様では、前記対象情報推定部（１５４）は、前記着目エリア決定部（１５２）で決定された着目エリア（Ｒ１，Ｒ２）の履歴を利用して、前記対象情報を決定する。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The third aspect is based on the information presentation system (10) of the second aspect. In the third aspect, the target information estimating unit (154) determines the target information by using the history of the target areas (R1, R2) determined by the target area determining unit (152). According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第４の態様は、第３の態様の情報提示システム（１０）に基づく。第４の態様では、前記対象情報推定部（１５４）は、前回の着目エリア（Ｒ１，Ｒ２）の決定から今回の着目エリア（Ｒ１，Ｒ２）の決定までの時間間隔が閾値以下であり、かつ前記前回の着目エリア（Ｒ１，Ｒ２）が前記今回の着目エリア（Ｒ１，Ｒ２）と同じ場合、前回の対象情報とは異なる情報を、今回の対象情報とする。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The fourth aspect is based on the information presentation system (10) of the third aspect. In the fourth mode, the target information estimation unit (154) has a time interval from the determination of the previous area of interest (R1, R2) to the determination of the current area of interest (R1, R2) that is less than or equal to a threshold value, and When the previous area of interest (R1, R2) is the same as the current area of interest (R1, R2), information different from the previous target information is set as the current target information. According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第５の態様は、第４の態様の情報提示システム（１０）に基づく。第５の態様では、前記対象情報推定部（１５４）は、前記着目エリア（Ｒ１，Ｒ２）と前記移動体情報との組み合わせと前記対象情報との関係を学習した学習済みモデルを利用して前記対象情報を決定する。 前記対象情報推定部（１５４）は、前記前回の対象情報とは異なる情報を前記今回の対象情報とした場合、前記今回の着目エリアと前記移動体情報との組み合わせと前記今回の対象情報との関係を用いて、前記学習済みモデルの再学習を行う。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The fifth aspect is based on the information presentation system (10) of the fourth aspect. In a fifth aspect, the target information estimation unit (154) uses the learned model that has learned the relationship between the target information (R1, R2) and the mobile body information and the target information, and uses the learned model. Determine target information. When the target information estimation unit (154) sets the information different from the previous target information as the current target information, the target information estimation unit (154) combines the current target area and the moving body information with the current target information. The learned model is re-learned using the relationship. According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第６の態様は、第２〜第５の態様のいずれか一つの情報提示システム（１０）に基づく。第６の態様では、前記対象情報推定部（１５４）は、前記着目エリア（Ｒ１，Ｒ２）の表示内容と前記移動体（３０）に関する移動体情報とに基づいて、前記対象情報を決定する。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The sixth aspect is based on the information presentation system (10) according to any one of the second to fifth aspects. In the sixth aspect, the target information estimation unit (154) determines the target information based on the display content of the area of interest (R1, R2) and the mobile body information regarding the mobile body (30). According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第７の態様は、第６の態様の情報提示システム（１０）に基づく。第７の態様では、前記対象情報推定部（１５４）は、前記表示内容が地図情報を含む場合、前記地図情報に関連する案内情報を前記対象情報とする。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The seventh aspect is based on the information presentation system (10) of the sixth aspect. In the seventh aspect, when the display content includes map information, the target information estimation unit (154) sets the guide information related to the map information as the target information. According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第８の態様は、第７の態様の情報提示システム（１０）に基づく。第８の態様では、前記案内情報は、前記移動体（３０）の現在の位置と前記移動体（３０）の目的地との位置関係に関連する相対位置情報を含む。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The eighth aspect is based on the information presentation system (10) of the seventh aspect. In the eighth aspect, the guidance information includes relative position information related to the positional relationship between the current position of the moving body (30) and the destination of the moving body (30). According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第９の態様は、第１〜第８の態様のいずれか一つの情報提示システム（１０）に基づく。第９の態様では、前記着目エリア決定部（１５２）は、前記人物（Ｈ１）が、前記移動体（３０）の内部において規定時間内に規定回数以上見たエリアを前記着目エリア（Ｒ１，Ｒ２）として決定するように構成される。この態様によれば、着目エリア（Ｒ１，Ｒ２）の決定の精度の向上が図れる。 The ninth aspect is based on the information presentation system (10) according to any one of the first to eighth aspects. In the ninth aspect, the attention area determination unit (152) uses the attention area (R1, R2) as an area in which the person (H1) has seen a predetermined number of times or more within a predetermined time inside the moving body (30). ) As determined. According to this aspect, it is possible to improve the accuracy of determining the area of interest (R1, R2).
第１０の態様は、第１〜第９の態様のいずれか一つの情報提示システム（１０）に基づく。第１０の態様では、前記着目エリア決定部（１５２）は、前記人物（Ｈ１）の視点に基づいて、前記着目エリア（Ｒ１，Ｒ２）を決定する。この態様によれば、着目エリア（Ｒ１，Ｒ２）の決定の精度の向上が図れる。 The tenth aspect is based on the information presentation system (10) according to any one of the first to ninth aspects. In a tenth aspect, the attention area determination unit (152) determines the attention area (R1, R2) based on the viewpoint of the person (H1). According to this aspect, it is possible to improve the accuracy of determining the area of interest (R1, R2).
第１１の態様は、第１〜第１０の態様のいずれか一つの情報提示システム（１０）に基づく。第１１の態様では、前記人物（Ｈ１）は、前記移動体（３０）の運転をしている人物である。この態様によれば、人物（Ｈ１）のよそ見運転の予防を図ることができ、安全運転に役立つ。 The eleventh aspect is based on the information presentation system (10) according to any one of the first to tenth aspects. In the eleventh aspect, the person (H1) is a person who is driving the moving body (30). According to this aspect, it is possible to prevent the person (H1) from looking aside and driving, which is useful for safe driving.
第１２の態様は、第１〜第１１の態様のいずれか一つの情報提示システム（１０）に基づく。第１２の態様では、前記移動体情報は、前記移動体（３０）の内部状態の最新情報と前記移動体（３０）の外部状態の最新情報との少なくとも一方を含む。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に、より適切な情報を提示できる。 The twelfth aspect is based on the information presentation system (10) according to any one of the first to eleventh aspects. In a twelfth aspect, the mobile body information includes at least one of latest information on an internal state of the mobile body (30) and latest information on an external state of the mobile body (30). According to this aspect, more appropriate information can be presented to the person (H1) on the moving body (30).
第１３の態様は、情報提示方法であって、移動体（３０）に乗っている人物（Ｈ１）が前記移動体（３０）の内部において着目している着目エリア（Ｒ１，Ｒ２）を決定する。前記情報提示方法は、前記着目エリア（Ｒ１，Ｒ２）と前記移動体（３０）に関する移動体情報とに基づいて、前記着目エリア（Ｒ１，Ｒ２）に関する着目エリア情報を提示する。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に適切な情報を提示できる。 A thirteenth aspect is an information presentation method, in which a person (H1) riding on a moving body (30) determines a focused area (R1, R2) focused on inside the moving body (30). .. The information presentation method presents attention area information regarding the attention area (R1, R2) based on the attention area (R1, R2) and moving body information regarding the moving body (30). According to this aspect, it is possible to present appropriate information to the person (H1) on the moving body (30).
第１４の態様は、プログラム（コンピュータプログラム）であって、１以上のプロセッサに、第１３の態様の情報提示方法を実行させるための、プログラムである。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に適切な情報を提示できる。 A fourteenth aspect is a program (computer program) for causing one or more processors to execute the information presentation method of the thirteenth aspect. According to this aspect, it is possible to present appropriate information to the person (H1) on the moving body (30).
第１５の態様は、移動体（３０）であって、第１〜第１２の態様のいずれか一つの情報提示システム（１０）と、前記情報提示システム（１０）が搭載される本体（３１）と、を備える。この態様によれば、移動体（３０）に乗っている人物（Ｈ１）に適切な情報を提示できる。 A fifteenth aspect is a mobile body (30), and the information presentation system (10) according to any one of the first to twelfth aspects, and a main body (31) on which the information presentation system (10) is mounted. And According to this aspect, it is possible to present appropriate information to the person (H1) on the moving body (30).
１０ 情報提示システム
１５２ 着目エリア決定部
１５４ 対象情報推定部
１５５ 提示制御部
３０ 移動体
３１ 本体
Ｈ１ 人物
Ｒ１ 第１エリア（着目エリア）
Ｒ２ 第２エリア（着目エリア）
10 information presentation system 152 attention
R2 second area (focus area)
Claims (15)
前記着目エリアと前記移動体に関する移動体情報とに基づいて、前記着目エリアに関する着目エリア情報を提示する提示制御部と、
を備える、
情報提示システム。 A focus area determination unit that determines a focus area in which a person riding on the mobile body is focused inside the mobile body,
A presentation control unit that presents attention area information regarding the attention area based on the attention area and moving body information regarding the moving body;
With
Information presentation system.
前記提示制御部は、前記対象情報に基づいて前記着目エリア情報を提示する、
請求項１の情報提示システム。 Further comprising a target information estimation unit that determines target information that the person wants to acquire from the target area based on the target area and the mobile body information,
The presentation control unit presents the area-of-interest information based on the target information,
The information presentation system according to claim 1.
請求項２の情報提示システム。 The target information estimation unit uses the history of the target area determined by the target area determination unit to determine the target information,
The information presentation system according to claim 2.
請求項３の情報提示システム。 The target information estimation unit, if the time interval from the determination of the previous attention area to the determination of the current attention area is a threshold value or less, and the previous attention area is the same as the current attention area, the previous target information Information that is different from the target information of this time,
The information presentation system according to claim 3.
前記対象情報推定部は、前記前回の対象情報とは異なる情報を前記今回の対象情報とした場合、前記今回の着目エリアと前記移動体情報との組み合わせと前記今回の対象情報との関係を用いて、前記学習済みモデルの再学習を行う、
請求項４の情報提示システム。 The target information estimation unit determines the target information using a learned model that has learned the relationship between the target information and the combination of the moving body information and the target information,
The target information estimation unit uses the relationship between the current target information and the combination of the current area of interest and the moving body information, when the current target information is information different from the previous target information. To retrain the trained model,
The information presentation system according to claim 4.
請求項２〜５のいずれか一つの情報提示システム。 The target information estimation unit determines the target information based on display content of the area of interest and mobile body information regarding the mobile body,
The information presentation system according to claim 2.
請求項６の情報提示システム。 When the display content includes map information, the target information estimation unit sets the guide information related to the map information as the target information.
The information presentation system according to claim 6.
請求項７の情報提示システム。 The guidance information includes position information related to a relative positional relationship between the current position of the moving body and the destination of the moving body,
The information presentation system according to claim 7.
請求項１〜８のいずれか一つの情報提示システム。 The area-of-interest determination unit is configured to determine, as the area-of-interest, an area in which the person has seen a predetermined number of times or more within a predetermined time within the moving body.
The information presentation system according to claim 1.
請求項１〜９のいずれか一つの情報提示システム。 The attention area determination unit determines the attention area based on the viewpoint of the person,
The information presentation system according to claim 1.
請求項１〜１０のいずれか一つの情報提示システム。 The person is a person driving the mobile body,
The information presentation system according to claim 1.
請求項１〜１１のいずれか一つの情報提示システム。 The mobile body information includes at least one of latest information on the internal state of the mobile body and latest information on the external state of the mobile body,
The information presentation system according to claim 1.
前記着目エリアと前記移動体に関する移動体情報とに基づいて、前記着目エリアに関する着目エリア情報を提示する、
情報提示方法。 The person on the moving body determines the area of interest inside the moving body,
Presenting attention area information about the attention area based on the attention area and moving body information about the moving body,
Information presentation method.
プログラム。 For causing one or more processors to execute the information presentation method of claim 13;
program.
前記情報提示システムが搭載される本体と、
を備える、
移動体。 An information presentation system according to any one of claims 1 to 12,
A main body on which the information presentation system is mounted,
With
Moving body.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018229442A JP7270206B2 (en) | 2018-12-06 | 2018-12-06 | Information presentation system, information presentation method, program, and mobile object |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018229442A JP7270206B2 (en) | 2018-12-06 | 2018-12-06 | Information presentation system, information presentation method, program, and mobile object |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2020091231A true JP2020091231A (en) | 2020-06-11 |
| JP2020091231A5 JP2020091231A5 (en) | 2021-11-04 |
| JP7270206B2 JP7270206B2 (en) | 2023-05-10 |
Family
ID=71012714
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018229442A Active JP7270206B2 (en) | 2018-12-06 | 2018-12-06 | Information presentation system, information presentation method, program, and mobile object |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7270206B2 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015008363A1 (en) * | 2013-07-18 | 2015-01-22 | 三菱電機株式会社 | Information presentation device and information presentation method |
| JP2018121287A (en) * | 2017-01-27 | 2018-08-02 | 株式会社Ｊｖｃケンウッド | Display control apparatus for vehicle, display system for vehicle, display control method for vehicle, and program |
-
2018
- 2018-12-06 JP JP2018229442A patent/JP7270206B2/en active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015008363A1 (en) * | 2013-07-18 | 2015-01-22 | 三菱電機株式会社 | Information presentation device and information presentation method |
| JP2018121287A (en) * | 2017-01-27 | 2018-08-02 | 株式会社Ｊｖｃケンウッド | Display control apparatus for vehicle, display system for vehicle, display control method for vehicle, and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7270206B2 (en) | 2023-05-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10810872B2 (en) | Use sub-system of autonomous driving vehicles (ADV) for police car patrol | |
| US11127373B2 (en) | Augmented reality wearable system for vehicle occupants | |
| US9505413B2 (en) | Systems and methods for prioritized driver alerts | |
| EP3438912A1 (en) | Information processing device, information processing method, program, and system | |
| JP2021095117A (en) | Neural network based facial analysis using facial landmarks and associated confidence values | |
| US20170300762A1 (en) | Information presentation control apparatus, autonomous vehicle, and autonomous-vehicle driving support system | |
| EP3352154A1 (en) | Information processing device, information processing method, and program | |
| US20170174129A1 (en) | Vehicular visual information system and method | |
| FI124068B (en) | A method to improve driving safety | |
| JP6906052B2 (en) | Methods and systems for adjusting the orientation of the bar channel camera when turning the vehicle | |
| US11180082B2 (en) | Warning output device, warning output method, and warning output system | |
| US20200118172A1 (en) | Vehicular advertisement providing device and vehicular advertisement providing method | |
| JP2024111090A (en) | Information processing device, information processing method, program, and vehicle | |
| CN110825290A (en) | Design for user privacy protection on autonomous vehicles | |
| CN114537141A (en) | Method, apparatus, device and medium for controlling vehicle | |
| JP2018083441A (en) | Information display method and information display device | |
| Kashevnik et al. | Context-based driver support system development: Methodology and case study | |
| KR20180013159A (en) | Multimedia Apparatus for Vehicle | |
| JP7270206B2 (en) | Information presentation system, information presentation method, program, and mobile object | |
| JP2020091524A (en) | Information processing system, program, and control method | |
| JP2019074862A (en) | Recommendable driving output device, recommendable driving output system, and recommendable driving output method | |
| CN113401071A (en) | Display control device, display control method, and computer-readable storage medium | |
| WO2020008876A1 (en) | Information processing device, information processing method, program, and mobile body | |
| CN111857117A (en) | GPS message decoder for decoding GPS messages during autonomous driving | |
| JP7119984B2 (en) | Driving support device, vehicle, information providing device, driving support system, and driving support method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210921 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210921 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220825 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220913 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221114 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230322 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230414 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7270206 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| SZ03 | Written request for cancellation of trust registration |
Free format text: JAPANESE INTERMEDIATE CODE: R313Z03 |