JP6712825B2 - Navigation system, occupant monitoring device, information terminal device, server, and navigation program - Google Patents
Navigation system, occupant monitoring device, information terminal device, server, and navigation program Download PDFInfo
- Publication number
- JP6712825B2 JP6712825B2 JP2016198006A JP2016198006A JP6712825B2 JP 6712825 B2 JP6712825 B2 JP 6712825B2 JP 2016198006 A JP2016198006 A JP 2016198006A JP 2016198006 A JP2016198006 A JP 2016198006A JP 6712825 B2 JP6712825 B2 JP 6712825B2
- Authority
- JP
- Japan
- Prior art keywords
- control unit
- route
- destination
- information
- occupant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012806 monitoring device Methods 0.000 title claims description 34
- 238000001514 detection method Methods 0.000 claims description 56
- 238000003384 imaging method Methods 0.000 claims description 48
- 230000002159 abnormal effect Effects 0.000 claims description 30
- 230000006870 function Effects 0.000 claims description 30
- 230000005856 abnormality Effects 0.000 claims description 25
- 239000000809 air pollutant Substances 0.000 claims description 8
- 231100001243 air pollutant Toxicity 0.000 claims description 8
- 230000007613 environmental effect Effects 0.000 claims description 8
- 238000004891 communication Methods 0.000 description 33
- 238000000034 method Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 9
- 238000013500 data storage Methods 0.000 description 3
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 2
- 238000003915 air pollution Methods 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 230000005281 excited state Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 206010041349 Somnolence Diseases 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 230000000544 hyperemic effect Effects 0.000 description 1
- 230000006996 mental state Effects 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
Images
Landscapes
- Navigation (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Traffic Control Systems (AREA)
- Instructional Devices (AREA)
Description
この発明は、ナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムに関する。 The present invention relates to a navigation system, an occupant monitoring device, an information terminal device, a server, and a navigation program.
特許文献１には、自動車等の車内に取り付けられたカメラによって撮影された画像から、運転者の状態を解析して、居眠りやよそ見、わき見等の危険な状態を察知し、運転者への警告を行う運転者状況判定装置が開示されている。 Patent Document 1 analyzes a driver's state from an image captured by a camera mounted in a vehicle such as an automobile, detects a dangerous state such as drowsiness, looking away, and looking aside, and warns the driver. A driver situation determination device that performs
特許文献１には、運転者が危険な状態であることを察知した場合に、例えば、アラーム音等を発生させ、運転者に警告を与えることが開示されている。しかし、当該運転者状況判定装置は、運転者が撮影された画像から運転者の状態を解析し、危険な状態を察知した場合に、運転者に警告を与えるものに過ぎず、当該危険な状態の内容に応じて走行することを推奨するルートを出力するものではなかった。 Patent Document 1 discloses that when a driver perceives a dangerous state, for example, an alarm sound is generated to give a warning to the driver. However, the driver situation determination device analyzes the state of the driver from the image taken by the driver, and only gives a warning to the driver when the driver perceives a dangerous state. It did not output the route recommended to drive according to the contents of.
この発明は、上記のような課題を解決するためになされたもので、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートを選択可能に出力するナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムを得ることを目的とする。 The present invention has been made to solve the above problems. When an abnormality of an occupant is detected based on imaging data, it is possible to select a route recommended to travel according to the content of the abnormality. The object is to obtain a navigation system, an occupant monitoring device, an information terminal device, a server, and a navigation program that output.
この発明に係るナビゲーションシステムは、乗員の顔を撮像する撮像部を制御して、撮像データを生成する撮像制御部と、ネットワークから環境情報を取得する環境情報取得部と、撮像データに基づいて、運転者または同乗者の乗員がマスクを着用していることを示す第１の異変情報を検出する検出部と、車両の現在位置から、設定された目的地までのルートを検索し、目的地までのルート案内を行うとともに、検出部で第１の異変情報が検出されると、環境情報取得部により取得した環境情報に基づき、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して目的地に至る第１の推奨ルートを検索する制御部と、目的地までのルートおよび制御部で検索された第１の推奨ルートが反映され、第１の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部とを備える。 A navigation system according to the present invention controls an image capturing unit that captures an image of a passenger's face to generate image capturing data, an environment information acquiring unit that acquires environmental information from a network, and based on the image capturing data, The detection unit that detects the first abnormal information indicating that the driver or the occupant of the passenger is wearing the mask, and the route from the current position of the vehicle to the set destination is searched until the destination. When the detection unit detects the first abnormal information , it avoids roads in areas where the amount of pollen or air pollutants is large, based on the environmental information acquired by the environmental information acquisition unit. a control unit for searching the first recommended route to the destination by the first recommended route is reflected retrieved in the route and the control unit to the destination and starts route guidance of the first recommended route And a display output control unit for generating and outputting screen information for selecting whether or not.
この発明によれば、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートを選択可能に出力するナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムを得ることができる。 According to the present invention, when an abnormality of the occupant is detected based on the imaged data, a navigation system, an occupant monitoring device, an information terminal device, which selectively outputs a route recommended to travel according to the content of the abnormality, A server and a navigation program can be obtained.
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。 Hereinafter, in order to explain the present invention in more detail, modes for carrying out the present invention will be described with reference to the accompanying drawings.
実施の形態１．
図１は、本発明の実施の形態１に係るナビゲーションシステム１の構成を示すブロック図の一例である。
Embodiment 1.
FIG. 1 is an example of a block diagram showing a configuration of a navigation system 1 according to the first embodiment of the present invention.
図１に示すように、ナビゲーションシステム１は、乗員監視装置２および情報端末装置３を備える。乗員監視装置２は、車両に搭載される。情報端末装置３は、車両に搭載されるナビゲーション装置、または乗員に所持されて車両に持ち込まれる携帯端末である。携帯端末とは、例えば、ポータブルナビゲーションデバイス、タブレットＰＣ、またはスマートフォンである。乗員監視装置２と情報端末装置３とは、有線または無線で接続される。
As shown in FIG. 1, the navigation system 1 includes an
乗員監視装置２は、撮像部２１、撮像制御部２２、検出部２３、および通信制御部２４を備える。
乗員監視装置２は、運転者を撮像し、後述する異変情報を検出する。運転者を撮像する乗員監視装置２は、例えば、メータまたはステアリングの周辺に設置される。また、乗員監視装置２の撮像対象は、運転者に限定されるものではなく、助手席または後部座席の同乗者（以下、同乗者という）を撮像対象としてもよい。その場合、同乗者を撮像することができる位置に乗員監視装置２を適宜設置する。
実施の形態１では、運転者および同乗者を撮像する場合について説明する。以下、乗員という場合、運転者および同乗者のことを指す。
The
The
In the first embodiment, a case where a driver and a passenger are imaged will be described. Hereinafter, the term "occupant" refers to a driver and a passenger.
撮像部２１は、乗員の顔を撮像する。撮像部２１は、例えば、カメラである。また、撮像部２１は、赤外線ＬＥＤ（不図示）を備える。撮像部２１は、赤外線ＬＥＤを点灯することで、夜間でも乗員の顔を撮像することができる。また、詳細は後述するが、撮像部２１の赤外線ＬＥＤを点灯することで、検出部２３において赤外線の反射強度の検出が可能になる。
The
撮像制御部２２は、撮像部２１を制御して、撮像データを生成する。撮像制御部２２は、撮像データを検出部２３に出力する。
The
検出部２３は、撮像データに基づいて、乗員の異変情報を検出する。異変情報の詳細については後述する。検出部２３は、異変情報を検出すると、異変情報を通信制御部２４に出力する。
The
通信制御部２４は、情報の送信および受信を行う。通信制御部２４は、検出部２３から取得した異変情報を情報端末装置３に送信する。また、通信制御部２４は、ネットワークに接続可能である。
The
実施の形態１において、検出部２３が検出する異変情報には、（１）運転者または同乗者がマスクを着用していることを示す異変情報（以下、第１の異変情報という）、（２）運転者または同乗者がサングラスを着用していることを示す異変情報（以下、第２の異変情報という）、（３）運転者または同乗者が眼帯を着用していることを示す異変情報（以下、第３の異変情報という）、（４）運転者または同乗者の目が充血していることを示す異変情報（以下、第４の異変情報という）、（５）基準時間内における運転者の瞬きの回数が閾値（以下、第１の閾値という）より大きいことを示す異変情報（以下、第５の異変情報という）、（６）基準時間内における運転者の心拍数が閾値（以下、第２の閾値という）より大きいことを示す異変情報（以下、第６の異変情報という）、（７）基準時間内における運転者の心拍数が閾値（以下、第３の閾値という）より小さいことを示す異変情報（以下、第７の異変情報という）がある。第５の異変情報、第６の異変情報、および第７の異変情報において、基準時間とは、例えば１０秒である。
In the first embodiment, the change information detected by the
撮像制御部２２が撮像部２１の赤外線ＬＥＤを点灯し、運転者の顔に赤外線を照射すると、運転者の顔の血液の流れの変化に伴い、当該赤外線の反射強度は変化する。検出部２３は、撮像データに基づいて、当該赤外線の反射強度の変化を検出することで、運転者の心拍数を計測する。これにより、検出部２３は、第６の異変情報および第７異変情報を検出することができる。
When the
次に、乗員監視装置２のハードウェア構成例について説明する。
図２Ａ、図２Ｂは、実施の形態１に係る乗員監視装置２のハードウェア構成例を示す図である。
乗員監視装置２における、撮像制御部２２、検出部２３および通信制御部２４は、図２Ａに示すように専用のハードウェアである処理回路１００ａであってもよいし、図２Ｂに示すようにメモリ１００ｃに格納されているプログラムを実行するプロセッサ１００ｂであってもよい。
Next, a hardware configuration example of the
2A and 2B are diagrams showing a hardware configuration example of the
The
図２Ａに示すように、撮像制御部２２、検出部２３および通信制御部２４が専用のハードウェアである場合、処理回路１００ａは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-programmable Gate Array）、またはこれらを組み合わせたものが該当する。撮像制御部２２、検出部２３および通信制御部２４の各部の機能それぞれを処理回路で実現してもよいし、各部の機能をまとめて１つの処理回路で実現してもよい。
As shown in FIG. 2A, when the
図２Ｂに示すように、撮像制御部２２、検出部２３および通信制御部２４がプロセッサ１００ｂである場合、各部の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアはプログラムとして記述され、メモリ１００ｃに格納される。プロセッサ１００ｂは、メモリ１００ｃに記憶されたプログラムを読み出して実行することにより、撮像制御部２２、検出部２３および通信制御部２４の各機能を実現する。即ち、撮像制御部２２、検出部２３および通信制御部２４は、プロセッサ１００ｂにより実行されるときに、後述する図６に示すステップＳＴ２〜ステップＳＴ５が実行されることになるプログラムを格納するためのメモリ１００ｃを備える。また、これらのプログラムは、撮像制御部２２、検出部２３および通信制御部２４の手順または方法をコンピュータに実行させるものであるともいえる。
As shown in FIG. 2B, when the
ここで、プロセッサ１００ｂとは、例えば、ＣＰＵ（Central Processing Unit）、処理装置、演算装置、プロセッサ、マイクロプロセッサ、マイクロコンピュータ、またはＤＳＰ（Digital Signal Processor）等のことである。
メモリ１００ｃは、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable ROM）、ＥＥＰＲＯＭ（Electrically EPROM）等の不揮発性または揮発性の半導体メモリであってもよいし、ハードディスク、フレキシブルディスク等の磁気ディスクであってもよいし、ミニディスク、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）等の光ディスクであってもよい。
Here, the
The
なお、撮像制御部２２、検出部２３および通信制御部２４の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。このように、乗員監視装置２における処理回路１００ａは、ハードウェア、ソフトウェア、ファームウェア、またはこれらの組み合わせによって、上述の各機能を実現することができる。
Note that each of the functions of the
情報端末装置３は、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、入力部３５、自車位置取得部３６、地図データ取得部３７、出力部３８、および環境情報取得部３９を備える。
The
通信制御部３４は、情報の送信および受信を行う。また、通信制御部３４は、乗員監視装置２から異変情報を受信すると、当該異変情報を制御部３１に出力する。また、通信制御部３４は、ネットワークに接続可能である。
The
入力部３５は、目的地等の情報の入力を受け付ける。
自車位置取得部３６は、ＧＰＳ（Global Positioning System）衛星（不図示）からＧＰＳ信号を受信し、自車の現在位置を取得する。
地図データ取得部３７は、地図データ記憶部４から地図データを取得する。なお、地図データ取得部３７は、地図データ記憶部４が設けられた車両外部のサーバ（不図示）から当該地図データを取得してもよい。
出力部３８は、情報を表示する。出力部３８は、例えばディスプレイである。
The
The vehicle
The map
The
制御部３１は、入力部３５を介して目的地が入力され、目的地が設定されると、目的地、自車の現在位置、および地図データに基づいて、車両の現在位置から目的地までのルート（以下、目的地ルートという）を検索する。制御部３１は、検索した目的地ルート、自車の現在位置、および地図データを表示出力制御部３２に出力するとともに、目的地までのルート案内を開始する。また、制御部３１は、目的地までのルート案内情報を音声出力制御部３３に出力する。
音声出力制御部３３は、目的地までのルート案内情報に基づいて音声情報を生成し、当該音声情報をスピーカ５に出力する。
When the destination is input through the
The voice
表示出力制御部３２は、目的地ルートを取得すると、目的地ルート、自車の現在位置、および地図データに基づき、画面情報（以下、目的地案内画面情報という）を生成し、出力部３８に出力する。
図３は、目的地案内画面情報の一例を示したものである。図３に示すように、目的地案内画面情報には、目的地ルートが反映される。
Upon obtaining the destination route, the display
FIG. 3 shows an example of destination guidance screen information. As shown in FIG. 3, the destination route screen is reflected in the destination guidance screen information.
制御部３１は、乗員監視装置２から異変情報を取得すると、異変情報、自車の現在位置、および地図データに基づいて、異変情報の内容に応じて走行することを推奨するルート（以下、推奨ルートという）を検索する。なお、制御部３１は、取得した異変情報によっては、環境情報取得部３９から後述する環境情報をさらに取得し、環境情報にも基づいて推奨ルートを検索する。
制御部３１は、検索した推奨ルートを表示出力制御部３２に出力する。
When the
The
環境情報取得部３９は、通信制御部３４を介して、ネットワークから環境情報を取得する。環境情報には、花粉情報、大気汚染情報等がある。花粉情報とは、現在位置周辺、目的地ルート周辺、または目的地周辺における花粉の飛散量を示す情報である。大気汚染情報とは、現在位置周辺、目的地ルート周辺、または目的地周辺におけるＰＭ２．５、黄砂等の大気汚染物質の飛散量を示す情報である。
The environment
表示出力制御部３２は、推奨ルートを取得すると、推奨ルートのルート案内を開始するか否かを選択する画面情報（以下、ルート選択画面情報という）を生成し、出力部３８に出力する。実施の形態１では、表示出力制御部３２は、推奨ルート、推奨ルートのルート案内を開始するか否かを選択させるためのＧＵＩ（Graphical User Interface）ボタン、目的地ルート、自車の現在位置、および地図データに基づき、ルート選択画面情報を生成する。
図４Ａは、ルート選択画面情報の一例を示したものである。図４Ａに示すように、ルート選択画面情報には、目的地ルートおよび推奨ルートが反映される。また、図４Ｂに示すように、環境情報取得部３９から取得した環境情報をルート選択画面情報に反映してもよい。この場合、制御部３１は、環境情報取得部３９から取得した環境情報を表示出力制御部３２に出力する。
Upon obtaining the recommended route, the display
FIG. 4A shows an example of route selection screen information. As shown in FIG. 4A, the route selection screen information reflects the destination route and the recommended route. Further, as shown in FIG. 4B, the environment information acquired from the environment
制御部３１は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する。制御部３１は、入力部３５を介して、推奨ルートのルート案内を開始する旨の入力がされたか、または、推奨ルートのルート案内を開始しない旨の入力がされたかに基づいて、当該判断を行う。制御部３１は、入力部３５を介して、推奨ルートのルート案内を開始する旨の入力がされたと判断すると、推奨ルートを目的地ルートとするルート変更指示を表示出力制御部３２に出力する。
The
表示出力制御部３２は、ルート変更指示を取得すると、推奨ルートを目的地ルートとする目的地案内画面情報を生成し、出力部３８に出力する。
When the display
ここで、制御部３１が、第１の異変情報（運転者または同乗者がマスクを着用していることを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第１の異変情報を取得すると、環境情報取得部３９から環境情報をさらに取得する。制御部３１は、第１の推奨ルートとして、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して目的地に至るルートを検索する。
ここで、花粉の種類は、季節や草木の種類によって変化する。そこで、制御部３１は、環境情報取得部３９から環境情報として、季節情報および草木の分布情報をさらに取得し、現在の季節において花粉を発生させる草木が多く分布しているエリアを求め、当該エリア内にある道路を回避するルートを検索してもよい。
Here, the recommended route searched when the
Upon acquiring the first change information, the
Here, the type of pollen changes depending on the season and the type of plants and trees. Therefore, the
次に、制御部３１が、第２の異変情報（運転者または同乗者がサングラスを着用していることを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第２の異変情報を取得すると、第２の推奨ルートとして、乗員が日光に晒されることになる道路を回避して目的地に至るルートを検索する。乗員が日光に晒されることになる道路とは、例えば、海沿いの道路である。海沿いの道路では、日光を遮る建物や植物等が少ない。また、当該道路では、海面からの反射光にも晒される。
Next, the recommended route that the
When the
次に、制御部３１が、第３の異変情報（運転者または同乗者が眼帯を着用していることを示す異変情報）、または第４の異変情報（運転者または同乗者の目が充血していることを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第３の異変情報または第４の異変情報を取得すると、第３の推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、眼科に至るルートを検索する。
さらに、第３の異変情報が、運転者が眼帯を着用していることを示している場合、制御部３１は、第４の推奨ルートとして、見通しのよい道路を走行して目的地に至るルートを検索する。見通しのよい道路とは、例えば、大通りである。これは、運転者が眼帯を着用していると、片目運転となり遠近感がなくなることを考慮したものである。
Next, the
When the
Further, when the third abnormality information indicates that the driver wears the eye patch, the
次に、制御部３１が、第５の異変情報（基準時間内における運転者の瞬きの回数が第１の閾値より大きいことを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第５の異変情報を取得すると、第５の推奨ルートとして、仮眠を取ることができる場所に至るルートを検索する。これは、運転者の目が疲れていると判断し、運転者に休憩を促すものである。仮眠が取ることができる場所とは、例えば、サービスエリア、パーキングエリア、ホテル等である。
Next, the recommended route that the
When the fifth change information is acquired, the
次に、制御部３１が、第６の異変情報（基準時間内における運転者の心拍数が第２の閾値より大きいことを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第６の異変情報を取得すると、第６の推奨ルートとして、車両の交通量が少ない道路であり、かつ、道幅の広い道路を走行して目的地に至るルートを検索する。これは、運転者の精神状態が興奮状態にあると判断し、当該興奮状態を鎮静化させることを目的とする。
Next, the recommended route that the
When the
次に、制御部３１が、第７の異変情報（基準時間内における運転者の心拍数が第３の閾値より小さいことを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第７の異変情報を取得すると、第７の推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、病院に至るルートを検索する。これは、運転者の健康状態が異常であると判断し、病院に立ち寄ることを促すものである。
Next, the recommended route searched when the
When the seventh change information is acquired, the
次に、情報端末装置３のハードウェア構成例について説明する。
図５Ａ、図５Ｂは、実施の形態１に係る情報端末装置３のハードウェア構成例を示す図である。
情報端末装置３における、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、入力部３５、自車位置取得部３６、地図データ取得部３７、出力部３８および環境情報取得部３９は、図５Ａに示すように専用のハードウェアである処理回路１００ｄであってもよいし、図５Ｂに示すようにメモリ１００ｆに格納されているプログラムを実行するプロセッサ１００ｅであってもよい。
Next, a hardware configuration example of the
5A and 5B are diagrams showing a hardware configuration example of the
The
図５Ａに示すように、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９が専用のハードウェアである場合、処理回路１００ｄは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-programmable Gate Array）、またはこれらを組み合わせたものが該当する。制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、入力部３５、自車位置取得部３６、地図データ取得部３７、出力部３８および環境情報取得部３９の各部の機能それぞれを処理回路で実現してもよいし、各部の機能をまとめて１つの処理回路で実現してもよい。
As shown in FIG. 5A, the
図５Ｂに示すように、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９がプロセッサ１００ｅである場合、各部の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアはプログラムとして記述され、メモリ１００ｆに格納される。プロセッサ１００ｅは、メモリ１００ｆに記憶されたプログラムを読み出して実行することにより、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９の各機能を実現する。即ち、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９は、プロセッサ１００ｅにより実行されるときに、後述する図６に示すステップＳＴ６〜ステップＳＴ１２が実行されることになるプログラムを格納するためのメモリ１００ｆを備える。また、これらのプログラムは、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９の手順または方法をコンピュータに実行させるものであるともいえる。
As shown in FIG. 5B, the
ここで、プロセッサ１００ｅとは、例えば、ＣＰＵ（Central Processing Unit）、処理装置、演算装置、プロセッサ、マイクロプロセッサ、マイクロコンピュータ、またはＤＳＰ（Digital Signal Processor）等のことである。
メモリ１００ｆは、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable ROM）、ＥＥＰＲＯＭ（Electrically EPROM）等の不揮発性または揮発性の半導体メモリであってもよいし、ハードディスク、フレキシブルディスク等の磁気ディスクであってもよいし、ミニディスク、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）等の光ディスクであってもよい。
Here, the
The
なお、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。このように、情報端末装置３における処理回路１００ｄは、ハードウェア、ソフトウェア、ファームウェア、またはこれらの組み合わせによって、上述の各機能を実現することができる。
Some of the functions of the
次に、ナビゲーションシステム１の動作について、図６のフローチャートを用いて説明する。
制御部３１は、目的地が設定されると、目的地までのルート案内を行う（ステップＳＴ１）。
次に、撮像制御部２２は、乗員の顔を撮像する撮像部２１を制御して、撮像データを生成し、撮像データを検出部２３に出力する（ステップＳＴ２）。
次に、検出部２３は、撮像データに基づいて、異変情報が検出されたか否かを判定する（ステップＳＴ３）。ステップＳＴ３において、異変情報が検出された場合（ステップＳＴ３；ＹＥＳ）、検出部２３は、異変情報を通信制御部２４に出力する（ステップＳＴ４）。
次に、通信制御部２４は、異変情報を情報端末装置３に送信する（ステップＳＴ５）。
一方、ステップＳＴ２において、異変情報が検出されなかった場合（ステップＳＴ３；ＮＯ）、ステップＳＴ１に戻り、目的地までのルート案内を行う。
Next, the operation of the navigation system 1 will be described with reference to the flowchart of FIG.
When the destination is set, the
Next, the
Next, the
Next, the
On the other hand, in step ST2, if no change information is detected (step ST3; NO), the process returns to step ST1 to guide the route to the destination.
制御部３１は、異変情報を取得すると、推奨ルートを検索する（ステップＳＴ６）。
次に、制御部３１は、当該異変情報に対する推奨ルートを、現在、目的地ルートとしているか否かを判断する（ステップＳＴ７）。
ステップＳＴ７において、当該異変情報に対する推奨ルートを、現在、目的地ルートとしている場合（ステップＳＴ７；ＹＥＳ）、ステップＳＴ１に戻り、目的地までのルート案内を行う。
一方、ステップＳＴ７において、当該異変情報に対する推奨ルートを、現在、目的地ルートとしていない場合（ステップＳＴ７；ＮＯ）、制御部３１は、推奨ルートを表示出力制御部３２に出力する（ステップＳＴ８）。
次に、表示出力制御部３２は、推奨ルートを取得すると、ルート選択画面情報を生成し、出力部３８に出力する（ステップＳＴ９）。
When the
Next, the
In step ST7, if the recommended route for the incident information is currently set as the destination route (step ST7; YES), the process returns to step ST1 to guide the route to the destination.
On the other hand, in step ST7, when the recommended route for the change information is not currently set as the destination route (step ST7; NO), the
Next, the display
次に、制御部３１は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する（ステップＳＴ１０）。例えば、出力部３８がタッチパネル式のディスプレイであって、入力部３５を兼ねる場合、制御部３１は、図４Ａに示したＧＵＩボタンの「はい」または「いいえ」のうち、どちらが操作されたかに基づき、当該判断を行う。また、入力部３５が、車両に搭載された他のデバイスである場合、制御部３１は、当該デバイスにより「はい」または「いいえ」のうち、どちらが選択されたかに基づき、当該判断を行う。
Next, the
ステップＳＴ１０において、推奨ルートのルート案内を開始する旨の入力がされたと判断した場合（ステップＳＴ１０；ＹＥＳ）、制御部３１は、推奨ルートを目的地ルートとするルート変更指示を表示出力制御部３２に出力する（ステップＳＴ１１）。
一方、ステップＳＴ１０において、推奨ルートのルート案内を開始しない旨の入力がされたと判断した場合（ステップＳＴ１０；ＮＯ）、ステップＳＴ１に戻り、目的地までのルート案内を行う。
When it is determined in step ST10 that the route guidance for the recommended route has been input (step ST10; YES), the
On the other hand, when it is determined in step ST10 that the route guidance of the recommended route is not started (step ST10; NO), the process returns to step ST1 and the route guidance to the destination is performed.
ステップＳＴ１０において、表示出力制御部３２は、ルート変更指示を取得すると、推奨ルートを目的地ルートとする新たな目的地案内画面情報を生成し、出力部３８に出力する（ステップＳＴ１２）。そして、再びステップＳＴ１に戻る。
In step ST10, when the display
上記では、ステップＳＴ８において、制御部３１が、１つの異変情報に対し、１つの推奨ルートを検索し、当該推奨ルートを出力する場合について説明した。ここで、同ステップにおいて、制御部３１が、１つの異変情報に対し、複数の推奨ルートを検索し、当該複数の推奨ルートを出力する場合について説明する。
この場合、ステップＳＴ８において、制御部３１は、当該複数の推奨ルートを、表示出力制御部３２に出力する。次に、ステップＳＴ９において、表示出力制御部３２は、当該複数の推奨ルートのうち、例えば、現在位置から目的地に至るまでの走行距離が短い推奨ルートから順に、ルート選択画面情報を生成し、出力部３８に出力する。そして、ステップＳＴ１０において、制御部３１は、当該推奨ルートのルート案内を開始するか否かを判断する。
In the above, the case where the
In this case, in step ST8, the
また、ステップＳＴ８において、制御部３１が、複数の異変情報を同時に取得し、各異変情報に対する推奨ルートを検索して、当該推奨ルートを出力する場合について説明する。
この場合、ステップＳＴ８において、制御部３１は、各異変情報に対する推奨ルートを検索して、複数の推奨ルートを表示出力制御部３２に出力する。このとき、制御部３１は、各推奨ルートがどの異変情報に対する推奨ルートであるかという情報を、表示出力制御部３２に出力する。次に、ステップＳＴ９において、表示出力制御部３２は、例えば、異変情報ごとに順番に、当該異変情報に対応する推奨ルートのルート選択画面情報を生成し、出力部３８に出力する。そして、ステップＳＴ１０において、制御部３１は、当該推奨ルートのルート案内を開始するか否かを判断する。なお、各異変情報にあらかじめ優先度を定めておき、表示出力制御部３２が、当該優先度の高いものから順番に、ルート選択画面情報を生成し、出力するようにしてもよい。
Further, a case will be described in which, in step ST8, the
In this case, in step ST8, the
以上のように、実施の形態１に係るナビゲーションシステム１は、乗員の顔を撮像する撮像部２１を制御して、撮像データを生成する撮像制御部２２と、撮像データに基づいて、乗員の異変情報を検出する検出部２３と、車両の現在位置から、設定された目的地までのルートを検索し、目的地までのルート案内を行うとともに、検出部２３で異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部３１と、制御部３１で検索された推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部３２とを備える。このため、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートが選択可能に出力される。これにより、乗員は、当該推奨ルートを走行するか否か選択することができる。
As described above, the navigation system 1 according to the first embodiment controls the
実施の形態２．
実施の形態２に係るナビゲーションシステム１のブロック図は、実施の形態１における図１と同様であるため、図示および説明を省略する。
実施の形態１に係るナビゲーションシステム１は、目的地までのルート案内が行われている間に、検出部２３が異変情報を検出すると、制御部３１が推奨ルートを検索するものであった。
実施の形態２に係るナビゲーションシステム１は、実施の形態１に係るナビゲーションシステム１の機能に加え、目的地までのルート案内が行われていない間であっても、検出部２３が、第１の異変情報から第７の異変情報のうち、特定の異変情報を検出した場合には、制御部３１が推奨ルートを検索するものである。
The block diagram of the navigation system 1 according to the second embodiment is the same as that of the first embodiment shown in FIG.
In the navigation system 1 according to the first embodiment, the
In addition to the functions of the navigation system 1 according to the first embodiment, the navigation system 1 according to the second embodiment allows the
以下に、検出部２３が検出する特定の異変情報と、当該異変情報を取得した場合に、制御部３１が検索する推奨ルートについて説明する。
検出部２３が、第３の異変情報（運転者または同乗者が眼帯を着用していることを示す異変情報）、または第４の異変情報（運転者または同乗者の目が充血していることを示す異変情報）を取得すると、制御部３１は、第８の推奨ルートとして、現在位置周辺にある、眼科に至るルートを検索する。
検出部２３が、第５の異変情報（基準時間内における運転者の瞬きの回数が第１の閾値より大きいことを示す異変情報）を取得すると、制御部３１は、第９の推奨ルートとして、仮眠を取ることができる場所に至るルートを検索する。
検出部２３が、第７の異変情報（基準時間内における運転者の心拍数が第３の閾値より小さいことを示す異変情報）を取得すると、制御部３１は、第１０の推奨ルートとして、現在位置周辺にある、病院に至るルートを検索する。
The specific abnormal information detected by the
The
When the
When the
次に、ナビゲーションシステム１の動作について、図７のフローチャートを用いて説明する。以下の動作は、目的地までのルート案内が行われていない間に実行される。
撮像制御部２２は、乗員の顔を撮像する撮像部２１を制御して、撮像データを生成し、撮像データを検出部２３に出力する（ステップＳＴ２１）。
次に、検出部２３は、撮像データに基づいて、異変情報が検出されたか否かを判定する（ステップＳＴ２２）。ステップＳＴ２２において、異変情報が検出された場合（ステップＳＴ２２；ＹＥＳ）、検出部２３は、異変情報を通信制御部２４に出力する（ステップＳＴ２３）。
次に、通信制御部２４は、異変情報を情報端末装置３に送信する（ステップＳＴ２４）。
一方、ステップＳＴ２２において、異変情報が検出されなかった場合（ステップＳＴ２２；ＮＯ）、ステップＳＴ２１に戻る。
Next, the operation of the navigation system 1 will be described with reference to the flowchart of FIG. The following operations are executed while route guidance to the destination is not being performed.
The image capturing
Next, the
Next, the
On the other hand, in step ST22, when no change information is detected (step ST22; NO), the process returns to step ST21.
次に、制御部３１は、異変情報を取得すると、推奨ルートを検索する（ステップＳＴ２５）。そして、制御部３１は、検索した推奨ルートを表示出力制御部３２に出力する（ステップＳＴ２６）。
次に、表示出力制御部３２は、推奨ルートを取得すると、ルート選択画面情報を生成し、出力部３８に出力する（ステップＳＴ２７）。実施の形態２では、表示出力制御部３２は、推奨ルート、推奨ルートのルート案内を開始するか否かを選択させるためのＧＵＩ（Graphical User Interface）ボタン、自車の現在位置、および地図データに基づき、ルート選択画面情報を生成する。
Next, when the
Next, the display
次に、制御部３１は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する（ステップＳＴ２８）。
ステップＳＴ２８において、推奨ルートのルート案内を開始する旨の入力がされたと判断した場合（ステップＳＴ２８；ＹＥＳ）、制御部３１は、推奨ルートを目的地ルートとする指示を表示出力制御部３２に出力する（ステップＳＴ２９）。
一方、ステップＳＴ２８において、推奨ルートのルート案内を開始しない旨の入力がされたと判断した場合（ステップＳＴ２８；ＮＯ）、ステップＳＴ２１に戻る。
Next, the
When it is determined in step ST28 that the route guidance for the recommended route has been input (step ST28; YES), the
On the other hand, if it is determined in step ST28 that the route guidance of the recommended route is not started (step ST28; NO), the process returns to step ST21.
ステップＳＴ２９において、表示出力制御部３２は、推奨ルートを目的地ルートとする指示を取得すると、推奨ルートを目的地ルートとする目的地案内画面情報を生成し、出力部３８に出力する（ステップＳＴ３０）。
ステップＳＴ３０の後、図６に示したステップＳＴ１に移行し、制御部３１は、目的地までのルート案内を開始する。以降は、図６のフローチャートに示された動作が、適宜実行されることになる。
In step ST29, when the display
After step ST30, the process proceeds to step ST1 shown in FIG. 6, and the
上記では、ステップＳＴ３０の後、図６に示したステップＳＴ１に移行する場合について説明したが、これに限定されるものではない。例えば、ステップＳＴ３０において、表示出力制御部３２が、第１０の推奨ルート（現在位置周辺にある、病院に至るルート）を目的地ルートとする目的地案内画面情報を生成し、出力部３８に出力した場合には、目的地に到達するまでの間、別の異変情報が検出されても推奨ルートを検索しないようにしてもよい。これは、病院に到達することを優先させるためである。
In the above, the case where the process proceeds to step ST1 shown in FIG. 6 after step ST30 has been described, but the present invention is not limited to this. For example, in step ST30, the display
以上のように、実施の形態２に係るナビゲーションシステム１によれば、目的地までのルート案内が行われていない間であっても、乗員について特定の異変が検出された場合には、推奨ルートが検索されるとともに、当該推奨ルートが選択可能に出力される。これにより、乗員は、当該推奨ルートを走行するか否か選択することができる。 As described above, according to the navigation system 1 according to the second embodiment, even when the route guidance to the destination is not performed, the recommended route is detected when a specific abnormality is detected in the occupant. Is searched, and the recommended route is output in a selectable manner. Thereby, the occupant can select whether or not to drive the recommended route.
上述の説明は、実施の形態１に係るナビゲーションシステム１、および実施の形態２に係るナビゲーションシステム１の構成の一例であり、乗員監視装置２の各部の機能を、情報端末装置３が担うように構成してもよい。
例えば、検出部２３の機能を、情報端末装置３が有するように構成してもよい。この場合、情報端末装置３が、図６のステップＳＴ１、ステップＳＴ３〜ステップＳＴ１２の処理、図７のステップＳＴ２２〜ステップＳＴ３０の処理を行うことになる。
The above description is an example of the configurations of the navigation system 1 according to the first embodiment and the navigation system 1 according to the second embodiment, and the
For example, the function of the
また、情報端末装置３の各部の機能を、乗員監視装置２が担うように構成してもよい。例えば、制御部３１の機能、表示出力制御部３２の機能、自車位置取得部３６の機能、地図データ取得部３７の機能、および環境情報取得部３９の機能を、乗員監視装置２が有するように構成してもよい。当該構成では、乗員監視装置２は、情報端末装置３の入力部３５を介して入力された情報を、情報端末装置３から取得する。この場合、乗員監視装置２が、図６のステップＳＴ１〜ステップＳＴ１２の処理、図７のステップＳＴ２１〜ステップＳＴ３０の処理を行うことになる。
Further, the function of each unit of the
また、図８は、実施の形態１に係るナビゲーションシステム１、および実施の形態２に係るナビゲーションシステム１の別の構成の概要を示す図である。
本構成は、乗員監視装置２の各部の機能と、情報端末装置３の各部の機能とを、外部のサーバ６が担うように構成したものである。サーバ６は、ネットワークを介して、乗員監視装置２および情報端末装置３と通信する。
サーバ６は、例えば、検出部２３の機能、制御部３１の機能、表示出力制御部３２の機能、地図データ取得部３７の機能、および環境情報取得部３９の機能を有する。また、サーバ６は、情報端末装置３の入力部３５を介して入力された情報、および、情報端末装置３の自車位置取得部３６が取得した自車の現在位置を、情報端末装置３から取得する。この場合、サーバ６が、図６のステップＳＴ１、ステップＳＴ３〜ステップＳＴ１２の処理、および図７のステップＳＴ２２〜ステップＳＴ３０の処理を行うことになる。
FIG. 8 is a diagram showing an outline of another configuration of the navigation system 1 according to the first embodiment and the navigation system 1 according to the second embodiment.
In this configuration, the function of each part of the
The
なお、本発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは実施の形態において任意の構成要素の省略が可能である。 It should be noted that, within the scope of the invention, the present invention can freely combine the respective embodiments, modify any constituent element of each embodiment, or omit any constituent element in the embodiment.
１ ナビゲーションシステム、２ 乗員監視装置、３ 情報端末装置、４ 地図データ記憶部、５ スピーカ、６ サーバ、２１ 撮像部、２２ 撮像制御部、２３ 検出部、２４ 通信制御部、３１ 制御部、３２ 表示出力制御部、３３ 音声出力制御部、３４ 通信制御部、３５ 入力部、３６ 自車位置取得部、３７ 地図データ取得部、３８ 出力部、３９ 環境情報取得部。 1 navigation system, 2 occupant monitoring device, 3 information terminal device, 4 map data storage unit, 5 speaker, 6 server, 21 imaging unit, 22 imaging control unit, 23 detection unit, 24 communication control unit, 31 control unit, 32 display Output control unit, 33 voice output control unit, 34 communication control unit, 35 input unit, 36 own vehicle position acquisition unit, 37 map data acquisition unit, 38 output unit, 39 environment information acquisition unit.
Claims (12)
ネットワークから環境情報を取得する環境情報取得部と、
前記撮像データに基づいて、運転者または同乗者の乗員がマスクを着用していることを示す第１の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第１の異変情報が検出されると、前記環境情報取得部により取得した環境情報に基づき、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して前記目的地に至る第１の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第１の推奨ルートが反映され、前記第１の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするナビゲーションシステム。 An imaging control unit that controls the imaging unit that images the occupant's face to generate imaging data;
An environment information acquisition unit that acquires environment information from the network,
A detection unit that detects, based on the imaging data, first abnormal information indicating that a driver or an occupant of a passenger wears a mask ;
When the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed and the detection unit detects the first change information, the environmental information acquisition unit A control unit that searches for a first recommended route to the destination while avoiding a road in an area with a large amount of pollen or air pollutant scattering based on the environmental information acquired by
The route to the destination and the first recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the first recommended route is generated and output. A navigation system, comprising: a display output control unit.
前記撮像データに基づいて、運転者または同乗者の乗員がサングラスを着用していることを示す第２の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第２の異変情報が検出されると、乗員が日光に晒されることになる道路を回避して前記目的地に至る第２の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第２の推奨ルートが反映され、前記第２の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするナビゲーションシステム。 An imaging control unit that controls the imaging unit that images the occupant's face to generate imaging data;
A detection unit that detects, based on the imaged data, second abnormality information indicating that a driver or an occupant of a passenger wears sunglasses ;
When the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed and the detection unit detects the second abnormality information, the occupant is exposed to sunlight. A control unit that searches for a second recommended route to the destination while avoiding a road that will be
The route to the destination and the second recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the second recommended route is generated and output. A navigation system, comprising: a display output control unit.
前記制御部および前記表示出力制御部は、車両に搭載され、または当該車両に持ち込まれる情報端末装置に設けられることを特徴とする請求項１から請求項３のいずれかに記載のナビゲーションシステム。 The image pickup unit, the image pickup control unit, and the detection unit are provided in an occupant monitoring device mounted on a vehicle,
The navigation system according to any one of claims 1 to 3, wherein the control unit and the display output control unit are installed in a vehicle or provided in an information terminal device brought into the vehicle.
乗員の顔を撮像して生成された撮像データに基づいて、乗員がマスクを着用していることを示す第１の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第１の異変情報が検出されると、ネットワークから取得した環境情報に基づき、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して前記目的地に至る第１の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第１の推奨ルートが反映され、前記第１の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする情報端末装置。 An information terminal device mounted on or brought into a vehicle,
A detection unit that detects first abnormal information indicating that the occupant wears a mask , based on the imaged data generated by imaging the occupant's face;
The environment acquired from the network when the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed, and when the first abnormality information is detected by the detection unit A control unit for searching for a first recommended route to reach the destination while avoiding a road in an area where the amount of pollen or air pollutants scattered is large based on the information ;
The route to the destination and the first recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the first recommended route is generated and output. An information terminal device, comprising: a display output control unit.
乗員の顔を撮像して生成された撮像データに基づいて、乗員がサングラスを着用していることを示す第２の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第２の異変情報が検出されると、乗員が日光に晒されることになる道路を回避して前記目的地に至る第２の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第２の推奨ルートが反映され、前記第２の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする情報端末装置。 An information terminal device mounted on or brought into a vehicle,
A detection unit that detects second abnormal information indicating that the occupant is wearing sunglasses , based on the imaged data generated by imaging the occupant's face;
When the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed and the detection unit detects the second abnormality information, the occupant is exposed to sunlight. A control unit that searches for a second recommended route to the destination while avoiding a road that will be
The route to the destination and the second recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the second recommended route is generated and output. An information terminal device, comprising: a display output control unit.
乗員の顔を撮像する撮像部を制御して、撮像データを生成する撮像制御部と、
前記撮像データに基づいて、乗員がマスクを着用していることを示す第１の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第１の異変情報が検出されると、ネットワークから取得した環境情報に基づき、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して前記目的地に至る第１の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第１の推奨ルートが反映され、前記第１の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする乗員監視装置。 An occupant monitoring device mounted on a vehicle,
An imaging control unit that controls the imaging unit that images the occupant's face to generate imaging data;
A detection unit that detects first abnormal information indicating that an occupant is wearing a mask based on the imaged data;
The environment acquired from the network when the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed, and when the first abnormality information is detected by the detection unit A control unit for searching for a first recommended route to reach the destination while avoiding a road in an area where the amount of pollen or air pollutants scattered is large based on the information ;
The route to the destination and the first recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the first recommended route is generated and output. An occupant monitoring device, comprising: a display output control unit.
乗員の顔を撮像する撮像部を制御して、撮像データを生成する撮像制御部と、
前記撮像データに基づいて、乗員がサングラスを着用していることを示す第２の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第２の異変情報が検出されると、乗員が日光に晒されることになる道路を回避して前記目的地に至る第２の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第２の推奨ルートが反映され、前記第２の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする乗員監視装置。 An occupant monitoring device mounted on a vehicle,
An imaging control unit that controls the imaging unit that images the occupant's face to generate imaging data;
A detection unit that detects second abnormal information indicating that the occupant is wearing sunglasses based on the imaged data;
When the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed and the detection unit detects the second abnormality information, the occupant is exposed to sunlight. A control unit that searches for a second recommended route to the destination while avoiding a road that will be
The route to the destination and the second recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the second recommended route is generated and output. An occupant monitoring device, comprising: a display output control unit.
前記撮像データに基づいて、乗員がマスクを着用していることを示す第１の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第１の異変情報が検出されると、ネットワークから取得した環境情報に基づき、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して前記目的地に至る第１の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第１の推奨ルートが反映され、前記第１の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするサーバ。 It is a server that receives imaging data generated by imaging an occupant's face from an occupant monitoring device mounted on a vehicle, and transmits screen information to an information terminal device mounted on the vehicle or brought into the vehicle. hand,
A detection unit that detects first abnormal information indicating that an occupant is wearing a mask based on the imaged data;
The environment acquired from the network when the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed, and when the first abnormality information is detected by the detection unit A control unit for searching for a first recommended route to reach the destination while avoiding a road in an area where the amount of pollen or air pollutants scattered is large based on the information ;
The route to the destination and the first recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the first recommended route is generated and output. A server comprising: a display output control unit.
前記撮像データに基づいて、乗員がサングラスを着用していることを示す第２の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第２の異変情報が検出されると、乗員が日光に晒されることになる道路を回避して前記目的地に至る第２の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第２の推奨ルートが反映され、前記第２の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするサーバ。 It is a server that receives imaging data generated by imaging an occupant's face from an occupant monitoring device mounted on a vehicle, and transmits screen information to an information terminal device mounted on the vehicle or brought into the vehicle. hand,
A detection unit that detects second abnormal information indicating that the occupant is wearing sunglasses based on the imaged data;
When the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed and the detection unit detects the second abnormality information, the occupant is exposed to sunlight. A control unit that searches for a second recommended route to the destination while avoiding a road that will be
The route to the destination and the second recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the second recommended route is generated and output. A server comprising: a display output control unit.
乗員の顔を撮像して生成された撮像データに基づいて、乗員がマスクを着用していることを示す第１の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第１の異変情報が検出されると、ネットワークから取得した環境情報に基づき、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して前記目的地に至る第１の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第１の推奨ルートが反映され、前記第１の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部として機能させるためのナビゲーション用プログラム。 A computer installed in or brought into the vehicle,
A detection unit that detects first abnormal information indicating that the occupant wears a mask , based on the imaged data generated by imaging the occupant's face;
The environment acquired from the network when the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed, and when the first abnormality information is detected by the detection unit A control unit for searching for a first recommended route to reach the destination while avoiding a road in an area where the amount of pollen or air pollutants scattered is large based on the information ;
The route to the destination and the first recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the first recommended route is generated and output. A navigation program that functions as a display output control unit.
乗員の顔を撮像して生成された撮像データに基づいて、乗員がサングラスを着用していることを示す第２の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記第２の異変情報が検出されると、乗員が日光に晒されることになる道路を回避して前記目的地に至る第２の推奨ルートを検索する制御部と、
前記目的地までのルートおよび前記制御部で検索された前記第２の推奨ルートが反映され、前記第２の推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部として機能させるためのナビゲーション用プログラム。 A computer installed in or brought into the vehicle,
A detection unit that detects second abnormal information indicating that the occupant is wearing sunglasses , based on the imaged data generated by imaging the occupant's face;
When the route from the current position of the vehicle to the set destination is searched and the route guidance to the destination is performed and the detection unit detects the second abnormality information, the occupant is exposed to sunlight. A control unit that searches for a second recommended route to the destination while avoiding a road that will be
The route to the destination and the second recommended route searched by the control unit are reflected, and screen information for selecting whether to start route guidance of the second recommended route is generated and output. A navigation program that functions as a display output control unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016198006A JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016198006A JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018059834A JP2018059834A (en) | 2018-04-12 |
| JP6712825B2 true JP6712825B2 (en) | 2020-06-24 |
Family
ID=61909910
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016198006A Active JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6712825B2 (en) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7119985B2 (en) * | 2018-12-21 | 2022-08-17 | トヨタ自動車株式会社 | Map generation device, map generation system, map generation method, and map generation program |
| JP7195161B2 (en) * | 2019-01-22 | 2022-12-23 | 本田技研工業株式会社 | Guidance system, guidance method and program |
| JP7347974B2 (en) * | 2019-07-02 | 2023-09-20 | ヤフー株式会社 | Estimation device, estimation method, and estimation program |
| JP7349293B2 (en) * | 2019-08-29 | 2023-09-22 | ダイハツ工業株式会社 | Vehicle guidance system |
| CN115417265B (en) * | 2022-09-27 | 2023-12-15 | 重庆迈高电梯有限公司 | Elevator authentication system based on elevator taking safety management |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3550765B2 (en) * | 1994-12-02 | 2004-08-04 | 株式会社デンソー | Route guidance device for vehicles |
| KR100382154B1 (en) * | 2000-02-22 | 2003-05-01 | 박원희 | Device For Sensing Of Driver's Condition |
| JP2004184285A (en) * | 2002-12-04 | 2004-07-02 | Denso Corp | Cooperative control system for vehicle |
| JP2004246708A (en) * | 2003-02-14 | 2004-09-02 | Mazda Motor Corp | Health care system, health care method and health care program for automobile |
| JP2005108033A (en) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | Driver condition determination device and method |
| JP4748389B2 (en) * | 2006-01-31 | 2011-08-17 | 株式会社エクォス・リサーチ | Route search device |
| JP2008204224A (en) * | 2007-02-21 | 2008-09-04 | Clarion Co Ltd | Awakening support device, awakening support method and control program |
| JP2008292369A (en) * | 2007-05-25 | 2008-12-04 | Victor Co Of Japan Ltd | Navigation device |
| JP2009166783A (en) * | 2008-01-18 | 2009-07-30 | Toyota Motor Corp | Symptom inference device |
| JP2010208540A (en) * | 2009-03-11 | 2010-09-24 | Omron Corp | Control device, method, and program |
| JP5895798B2 (en) * | 2012-10-04 | 2016-03-30 | 株式会社デンソー | Driving support device and driving support method |
| JP6337710B2 (en) * | 2014-09-17 | 2018-06-06 | 日産自動車株式会社 | Communication control device and communication control method |
| JP6485057B2 (en) * | 2015-01-19 | 2019-03-20 | アイシン精機株式会社 | Driving assistance device |
-
2016
- 2016-10-06 JP JP2016198006A patent/JP6712825B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2018059834A (en) | 2018-04-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6712825B2 (en) | Navigation system, occupant monitoring device, information terminal device, server, and navigation program | |
| JP7052174B2 (en) | Systems and methods for estimating future routes | |
| US10556600B2 (en) | Assessment of human driving performance using autonomous vehicles | |
| US10696308B2 (en) | Road condition heads up display | |
| US9727056B2 (en) | Automated vehicle control with time to take-over compensation | |
| US9649979B2 (en) | Autonomous vehicle operation in view-obstructed environments | |
| US20170174129A1 (en) | Vehicular visual information system and method | |
| JP4981566B2 (en) | Driving support device and driving support method | |
| JP6584632B2 (en) | Parking assistance device | |
| US9434382B1 (en) | Vehicle operation in environments with second order objects | |
| EP3084511A1 (en) | System and method for controlling the luminosity of a head-up display and display using said system | |
| US9527442B2 (en) | Driver dangerous driving reporting device | |
| WO2018051399A1 (en) | State prediction device and state prediction method | |
| JP2020027104A (en) | Design for user privacy protection of automatic driving vehicle | |
| JP2018005468A (en) | Vehicular control device | |
| EP3002158A1 (en) | Rearview camera with gps for image storage and retrieval | |
| US20210409578A1 (en) | Dirty monocular camera detection methods for autonomous driving vehicle | |
| CN109795498A (en) | Distraction determination device, distraction determination method, and computer-readable medium | |
| US10864856B2 (en) | Mobile body surroundings display method and mobile body surroundings display apparatus | |
| JP2010117315A (en) | Device and program for supporting driving | |
| JP2014164375A (en) | Information processor, information processing system and information processing method, and program for information processor | |
| GB2548395A (en) | Navigation aid | |
| JP2007062434A (en) | Warning device for vehicle | |
| JP2022186190A (en) | Display device for vehicle, display system for vehicle, display method for vehicle, and program | |
| JP7059566B2 (en) | Vehicle alarm device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181026 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190912 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191008 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191126 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200428 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200526 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6712825 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |