JP2011242190A - Operation support device - Google Patents
Operation support device Download PDFInfo
- Publication number
- JP2011242190A JP2011242190A JP2010112864A JP2010112864A JP2011242190A JP 2011242190 A JP2011242190 A JP 2011242190A JP 2010112864 A JP2010112864 A JP 2010112864A JP 2010112864 A JP2010112864 A JP 2010112864A JP 2011242190 A JP2011242190 A JP 2011242190A
- Authority
- JP
- Japan
- Prior art keywords
- driver
- vehicle
- information
- hazard map
- driving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は,車両を運転するドライバを支援する運転支援装置に関するものである。 The present invention relates to a driving support device that supports a driver who drives a vehicle.
従来から,車両を運転するドライバに提供される道路状況の情報として,事故や渋滞等を知らせる道路交通情報などがある。しかし,道路の持つ危険性やドライバに対する負担度などの尺度で,ドライバに提供される情報は少ない。 Conventionally, as road condition information provided to a driver who drives a vehicle, there is road traffic information for notifying an accident or traffic jam. However, there is little information provided to the driver based on measures such as the danger of the road and the burden on the driver.
近年,ハザードマップやヒヤリハットデータベースなどと呼ばれる,ドライバにとって危険な場所が登録された情報を用意し,その情報に登録された場所を走行するドライバに警告を行う装置が提案されている。このようなハザードマップは,例えば,事故発生地点や,加速度センサ等で検出可能なドライバが急ブレーキ動作を行った地点,ヒアリングによるドライバが危険を感じた地点などのデータを大量に収集し,統計分析を行うことにより作成される。 In recent years, a device called a hazard map or a near-miss database has been proposed that prepares information in which a dangerous place for a driver is registered and warns a driver traveling in the place registered in the information. Such a hazard map, for example, collects a large amount of data such as the location where an accident occurred, a point where a driver that can be detected by an acceleration sensor, etc. suddenly braked, or a point where a driver felt dangerous due to hearing. Created by performing analysis.
なお,サーバで道路交通に関する危険情報を収集して蓄積し,サーバからの危険情報の配信を受けた端末が,ドライバや歩行者に対して,危険地区通過時に警報を発したり,危険地区を回避するように誘導する技術が知られている。 The server collects and accumulates danger information related to road traffic on the server, and the terminal that receives the danger information from the server issues a warning or avoids the dangerous area to the driver or pedestrian when passing through the dangerous area. Techniques that guide the user to do this are known.
また,車両走行中に運転者のヒヤリハット反応を検出して記録したマップに基づいて,運転者に危険箇所を報知する技術が知られている。 In addition, there is known a technique for notifying a driver of a dangerous spot based on a map that is detected and recorded when a driver's near-miss reaction is detected while the vehicle is traveling.
また,運転者の視線方向から,運転者が車両と衝突する可能性がある障害物を認識しているか否かを判断し,警報を出力する技術が知られている。 In addition, a technique is known that determines whether or not the driver recognizes an obstacle that may collide with the vehicle from the direction of the driver's line of sight, and outputs an alarm.
また,運転者の脇見運転または居眠り運転を検出し,運転者の脇見運転または居眠り運転が検出されたときに運転者に対して警報を発する技術が知られている。 There is also known a technique for detecting a driver's side-by-side driving or snoozing driving and issuing a warning to the driver when the driver's side-by-side driving or snoozing driving is detected.
通常,車両を運転するドライバは,危険な場所ほど注意を払って慎重に運転を行うものである。例えば通勤に利用している道路など,普段から通り慣れている道路では,ドライバは,どの場所が危険であるかを知っており,そのような場所では普段から慎重な運転を心がけるものである。また,普段から通り慣れていない道路でも,例えば人や車の交通量が多い駅前の道路や狭い峠道など,一目見ただけで危険であるとわかる道路を通過する場合には,ドライバは,慎重な運転を心がけるものである。 Usually, the driver who drives the vehicle is careful to drive more carefully in dangerous places. For example, on a road that you are used to, such as a road that is used for commuting, the driver knows which place is dangerous, and always tries to drive carefully in such a place. In addition, even if you are not familiar with the road, you may pass through a road that is dangerous at first glance, such as a road in front of a station where there is a lot of traffic of people and cars, or a narrow road. Careful driving is important.
このように,ドライバにとって危険な場所であっても,ドライバがその危険性を知って慎重な運転を心がければ,十分に事故を防ぐことが可能である。すなわち,危険な場所で慎重な運転を心がけているドライバの状態は,事故を起こしやすい危険な状態ではなく,事故を起こしにくい安全な状態であるといえる。逆に,普段ドライバが危険性を感じて慎重な運転を心がけている場所において,例えばボーっと考え事をしている,居眠りをしているなどの注意力が欠けたドライバの状態が,事故を起こしやすい危険な状態であるといえる。 In this way, even in a dangerous place for the driver, it is possible to prevent accidents sufficiently if the driver knows the danger and tries to drive carefully. In other words, it can be said that the state of the driver who is careful driving in a dangerous place is not a dangerous state that easily causes an accident, but a safe state that is unlikely to cause an accident. On the other hand, in a place where the driver usually feels dangerous and tries to drive carefully, for example, the driver's condition lacking attention, such as thinking a dash or sleeping, can cause an accident. It can be said that it is a dangerous state that is easy to cause.
上述のハザードマップを用いた装置は,統計的に危険とされた場所を運転するドライバに対して警告を行うことにより,ドライバに対して慎重な運転を促す装置である。しかし,ドライバ自身がその場所の危険性をすでに認識している場合に頻繁に警告が行われると,しだいにドライバはその警告を鬱陶しく思うようになり,結局はその装置のスイッチをOFFにしてしまう可能性が高い。これでは,ドライバに危険性を促す装置としての意味がなくなってしまう。 The device using the hazard map described above is a device that urges the driver to drive carefully by giving a warning to the driver who operates in a statistically dangerous place. However, if the driver himself is already aware of the danger at the location, and the warning is frequently issued, the driver will gradually become annoyed by the warning and eventually turn off the device. Probability is high. This eliminates the meaning of a device that urges the driver to be dangerous.
上述したように,ドライバが事故を起こす危険性が高いケースは,普段ドライバが慎重な運転を心がけている,事故を起こす危険性がある場所において,ドライバの注意力が欠けて慎重な運転が行われていないケースである。このような本当の意味でのドライバの危険な状態を適切に検知し,ドライバに対する注意喚起の警告を行うことができれば,事故を防ぐための効果的なドライバへの運転支援が可能となる。 As described above, in cases where the driver is at high risk of accidents, the driver is not careful and the driver is not careful at places where there is a risk of accidents. This is not the case. If it is possible to appropriately detect such a driver's dangerous state in the true sense and issue a warning to the driver, it is possible to effectively support the driver to prevent an accident.
本発明は,上記の問題の解決を図り,車両を運転するドライバの危険な状態を適切に検知して警告を行うことにより,効果が高いドライバへの運転支援が可能となる技術を提供することを目的とする。 The present invention provides a technique that can solve the above-mentioned problems and can provide driving assistance to a highly effective driver by appropriately detecting and warning the dangerous state of the driver driving the vehicle. With the goal.
運転支援装置は,車両の位置を取得する位置取得部と,生体センサによりリアルタイムで計測された,車両を運転するドライバの生体情報を取得する生体情報取得部と,過去の車両運転時に計測されたドライバの生体情報に基づいて作成された,ドライバの生体情報が変化する場所が記録されたハザードマップ情報を記憶するハザードマップ記憶部と,取得された車両の位置がハザードマップ情報に記録された場所であるときに,取得された車両を運転するドライバの生体情報に基づいて,車両を運転するドライバの状態が危険な状態であるか否かを判定する危険状態判定部と,車両を運転するドライバの状態が危険な状態であると判定された場合に,車両を運転するドライバに対して注意喚起の警告を行う警告部とを備える。 The driving support device includes a position acquisition unit that acquires the position of the vehicle, a biological information acquisition unit that acquires biological information of a driver that drives the vehicle, which is measured in real time by a biological sensor, and is measured during past driving of the vehicle. A hazard map storage unit that stores hazard map information in which a place where the driver's biometric information changes is recorded, based on the driver's biometric information, and a location where the acquired vehicle position is recorded in the hazard map information A dangerous state determination unit for determining whether or not the state of the driver driving the vehicle is a dangerous state based on the acquired biological information of the driver driving the vehicle, and a driver driving the vehicle And a warning unit that issues a warning to a driver who drives the vehicle when it is determined that the state is a dangerous state.
上記の技術によって,普段とは異なるドライバの危険な状態を適切に検知して,注意喚起の警告を行うことが可能となる。これにより,事故防止の効果が高いドライバへの運転支援が可能となる。 With the above technology, it is possible to appropriately detect a dangerous state of a driver that is different from usual, and to issue a warning warning. This makes it possible to provide driving assistance to drivers who are highly effective in preventing accidents.
以下,本実施の形態について,図を用いて説明する。 Hereinafter, the present embodiment will be described with reference to the drawings.
図1は,本実施の形態による運転支援装置の機能構成例を示す図である。 FIG. 1 is a diagram illustrating a functional configuration example of the driving support apparatus according to the present embodiment.
運転支援装置10は,例えば車両に搭載され,車両を運転するドライバへの支援を行う。具体的には,運転支援装置10は,ドライバが十分な注意を払って運転すべき場所が記録された情報であるハザードマップと,リアルタイムのドライバの状況とに基づいて,ドライバが危険な状態にあると判定された場合に,ドライバに対して警告を行う。また,運転支援装置10は,ドライバの過去の運転時における生体情報や車両の走行経路の情報等を蓄積し,その蓄積情報に基づいて,ドライバの運転支援に用いるハザードマップを作成する。
The
運転支援装置10は,ドライバ認証部11,位置取得部12,生体情報取得部13,ハザードマップ記憶部14,危険状態判定部15,警告部16,情報収集部17,蓄積情報記憶部18,ハザードマップ作成部19を備える。
The
ドライバ認証部11は,認証により車両を運転するドライバを特定する。
The
位置取得部12は,GPS(Global Positioning System )等を用いた位置取得機能により車両の位置をリアルタイムに取得する。
The
生体情報取得部13は,生体センサにより計測されたドライバの生体情報をリアルタイムに取得する。生体情報とは,ドライバの身体的な状態に関する情報である。生体センサにより計測するドライバの生体情報は,例えば,心拍,血圧,発汗,体温などがある。ドライバが車両の運転中に危険や不安を感じると,心拍数が上がる,血圧が上がる,発汗量が増える,体温が上がるなど,生体センサで計測されるドライバの生体情報に変化が生じる。
The biological
ハザードマップ記憶部14は,ハザードマップ140を記憶する,コンピュータがアクセス可能な記憶部である。ハザードマップ140は,例えば事故が起こりやすい場所など,ドライバが十分な注意を払って運転すべき場所が記録された情報である。
The hazard
本実施の形態では,ドライバの過去の車両運転時に収集され,蓄積されたドライバの生体情報と車両の走行経路の情報とから,ドライバの生体情報が変化する場所が記録されたハザードマップ140が作成される。上述したように,ドライバが車両の運転中に危険や不安を感じて運転を行うと,計測される生体情報に変化が生じる。すなわち,ドライバの生体情報が変化する場所が記録されたハザードマップ140は,過去のドライバの生体情報の計測結果から得られた,ドライバが十分な注意を払って運転すべき場所が記録された情報である。
In the present embodiment, a
危険状態判定部15は,ドライバが運転する車両のリアルタイムの位置がハザードマップ140に記録された場所であるときに,車両を運転しているドライバの状態が危険な状態であるか否かを判定する。本実施の形態では,危険状態判定部15は,ドライバの運転車両の位置がハザードマップ140への記録場所であるときに,ドライバのリアルタイムの生体情報に所定の変化があるかをチェックする。ドライバのリアルタイムの生体情報に所定の変化がなければ,危険状態判定部15は,ドライバの状態が危険な状態であると判定する。
The dangerous
ハザードマップ140には,過去にドライバの生体情報が変化した実績がある場所が記録されている。そのような過去にドライバの生体情報が変化した実績がある場所で,ドライバの生体情報が変化しなかった場合には,そのドライバが危険な場所で十分な緊張感を持った運転をしていない可能性がある。このとき,危険状態判定部15は,ドライバの状態が危険な状態であると判定する。
The
警告部16は,危険状態判定部15によりドライバの状態が危険な状態であると判定された場合に,ドライバに対して警告を行う。
The
情報収集部17は,日時,車両の位置,ドライバの生体情報などの各情報を収集する。情報収集部17は,収集した各情報を関連付けて,蓄積情報記憶部18に蓄積する。
The
蓄積情報記憶部18は,蓄積データ180を記憶する,コンピュータがアクセス可能な記憶部である。蓄積データ180は,ドライバの過去の車両運転時に収集された情報が蓄積記録されたデータである。
The stored
ハザードマップ作成部19は,蓄積情報記憶部18に記憶された蓄積データ180に対して統計処理を施し,ハザードマップ140を作成する。ハザードマップ作成部19は,作成したハザードマップ140を,ハザードマップ記憶部14に記憶する。
The hazard
図2は,本実施の形態による運転支援装置を実現するコンピュータの構成例を示す図である。 FIG. 2 is a diagram illustrating a configuration example of a computer that realizes the driving support apparatus according to the present embodiment.
本実施の形態では,運転支援装置10は,例えば,車両に搭載されたコンピュータ100によって実現される。コンピュータ100は,CPU(Central Processing Unit )101,RAM(Random Access Memory)などのメモリ102,HDD(Hard Disk Drive )などの記憶装置103,入力装置104,出力装置105,生体センサ106,GPSアンテナ107等を備える。
In the present embodiment, the driving
図1に示す運転支援装置10および運転支援装置10が備える各機能部は,コンピュータ100が備えるCPU101,メモリ102等のハードウェアと,ソフトウェアプログラムとによって,実現することが可能である。コンピュータ100が実行可能なプログラムは,記憶装置103に記憶され,その実行時にメモリ102に読み出され,CPU101により実行される。
The driving
なお,コンピュータ100は,可搬型記録媒体から直接プログラムを読み取り,そのプログラムに従った処理を実行することもできる。また,コンピュータ100は,サーバコンピュータからプログラムが転送されるごとに,逐次,受け取ったプログラムに従った処理を実行することもできる。さらに,このプログラムは,コンピュータ100で読み取り可能な記録媒体に記録しておくことができる。
The
入力装置104,出力装置105は,例えば,カーナビゲーションシステム等でも使用されるタッチスクリーンやリモコンなどである。生体センサ106は,ドライバの生体情報を計測するセンサである。生体センサ106としては,例えば,ドライバの心拍を計測するセンサ,ドライバの血圧を計測するセンサ,ドライバの発汗量を計測するセンサ,ドライバの体温を計測するセンサなど,様々なセンサが利用可能である。GPSアンテナ107は,GPS衛星からの信号を受信するアンテナである。
The
以下,本実施の形態による運転支援装置10の動作の一例を説明する。
Hereinafter, an example of the operation of the driving
まず,本実施の形態の運転支援装置10が危険な状態にあるドライバに対して警告を行う動作について説明する。図1に示す運転支援装置10において,危険な状態にあるドライバに対して警告を行う動作は,実線の矢印で示されている。
First, an operation for warning the driver in a dangerous state by the driving
運転支援装置10において,ハザードマップ記憶部14には,ハザードマップ140が記憶されている。
In the driving
本実施の形態のハザードマップ140は,ドライバの過去の車両運転時に収集された生体情報の記録に基づいて,ドライバの生体情報が平常な状態から変化する場所が記録された情報である。ドライバが事故の危険性や不安を感じて緊張して運転を行うと,そのときのドライバの心拍数などの生体情報は,平常な状態から変化する。このため,普段からドライバの生体情報が平常な状態から変化する場所は,ドライバが事故の危険性や不安を感じて緊張して運転を行っている場所である可能性が高いと判断できる。すなわち,本実施の形態のハザードマップ140は,普段からドライバが事故の危険性や不安を感じて緊張して運転を行っている場所が登録された情報であるといえる。なお,ハザードマップ140の作成の例については,後述する。
The
本実施の形態では,複数のドライバに共通のハザードマップ140が用意されるのではなく,個々のドライバごとに専用のハザードマップ140が用意される。車両の運転技術や経験などはドライバごとに異なり,事故の危険性や不安を感じる場所はそれぞれのドライバごとに異なるため,それぞれのドライバごとに最適なハザードマップ140は異なるものと考えられる。例えば,図1において,ハザードマップ140aは,ドライバa用のハザードマップ140を示しており,ハザードマップ140bは,ドライバb用のハザードマップ140を示している。
In this embodiment, a
図3は,本実施の形態によるハザードマップの例を示す図である。 FIG. 3 is a diagram illustrating an example of a hazard map according to the present embodiment.
図3に示すハザードマップ140は,場所を示す情報と,その場所におけるドライバの生体情報に関する情報との対応情報となっている。図3に示すハザードマップ140は,登録場所名,登録位置,心拍変動率,占有率等の情報を持つ。
The
図3に示すハザードマップ140において,登録場所名と登録位置は,場所を示す情報である。ハザードマップ140に記録される場所は,ドライバの過去の車両運転において,ドライバの生体情報が変化した場所である。例えば,生体情報が心拍の情報である場合に,ハザードマップ140に記録される場所は,いつもドライバの心拍数が高くなる場所である。
In the
登録場所名は,ハザードマップ140に記録された場所の名称である。カーナビゲーションシステムの地図情報などでは,地名やランドマークの名称等の場所名からの地図検索を可能とするために,場所名と地図上の位置との対応付けが行われている。このように,場所名と位置との対応付けがあれば,ハザードマップ140に場所を記録するときに,場所名で記録することも可能である。
The registered place name is the name of the place recorded in the
登録位置は,ハザードマップ140に登録された場所の緯度・経度等の位置情報である。図3に示すハザードマップ140において,登録位置は,開始地点の緯度・経度・標高と,終了地点の緯度・経度・標高とで示されている。これは,ハザードマップ140に登録された場所が,範囲と方向とを持っていることを意味している。
The registered position is position information such as the latitude and longitude of the place registered in the
例えば,ドライバが危険を感じる交差点を通過する場合に,ドライバはその手前から緊張状態となり,その緊張は通過後徐々に解けていく。すなわち,ドライバが危険や不安を感じる地点に対して,ドライバの生体情報が平常な状態から変化する場所には,ある程度の範囲がある。危険な急カーブが長く続くような道路では,その前後も含めて,ドライバの緊張状態が長く続くことになり,それに対するハザードマップ140の登録位置の範囲も長くなる。
For example, when passing through an intersection where the driver feels dangerous, the driver is in a tension state before that, and the tension is gradually released after the passage. That is, there is a certain range where the driver's biometric information changes from a normal state to a point where the driver feels dangerous or uneasy. On a road where a dangerous sharp curve continues for a long time, the tension state of the driver continues for a long time including before and after the road, and the range of the registered position of the
また,同じ道路でも,上り方向と下り方向とでドライバの緊張感が異なる場所もある。例えば,上り方向では死角が少なく,ドライバがほどよい緊張感で運転できるが,下り方向では死角が多く,ドライバが飛び出し等の不安を感じながら強い緊張感を持って運転しなければならないといったケースも考えられる。すなわち,車両を走行させる方向によって,ドライバの生体情報が平常な状態から変化するか否かが異なる場所がある。 Even on the same road, there are places where the tension of the driver is different between the upward direction and the downward direction. For example, there are cases where there are few blind spots in the upward direction and the driver can drive with moderate tension, but there are many blind spots in the downward direction and the driver must drive with strong tension while feeling anxiety such as popping out. Conceivable. That is, there is a place where whether or not the driver's biometric information changes from a normal state depends on the direction in which the vehicle travels.
このようなハザードマップ140における登録場所を示す情報に関する設計は,図3に示すハザードマップ140の例に限らず任意である。例えば,登録場所として一地点の位置情報のみを記録し,記録された地点を中心とした所定の範囲をドライバが警戒して運転すべき場所としてもよい。また,例えば,登録場所の位置を,道路名とキロポストとの組合せなどで記録してもよい。キロポストは,道路上の位置を,定められた起点からの距離で表す位置情報である。
The design regarding the information indicating the registration location in the
図3に示すハザードマップ140において,心拍変動率と占有率は,過去の車両運転時に計測されたドライバの生体情報から統計的に得られた,ハザードマップ140に記録された場所におけるドライバの生体情報に関する情報である。すなわち,図3に示すハザードマップ140の心拍変動率や占有率は,ドライバが過去にその場所を走行したときの心拍の情報の統計情報となる。ハザードマップ140に記録されたドライバの生体情報に関する情報は,危険状態判定部15がドライバの状態が危険な状態であるか否かを判定するための条件として用いられる。
In the
心拍変動率は,ドライバの平常状態での心拍数に対する,計測された心拍数の変動率を示す。図3に示すハザードマップ140における心拍変動率は,該当場所における過去の車両運転時のドライバの心拍変動率に関する統計的処理結果である。また,図3に示すハザードマップ140において,占有率は,ドライバの過去の車両運転時の該当場所において,ハザードマップ140に示された心拍変動率以上の値の心拍変動率が得られた割合の統計的処理結果である。図3に示すハザードマップ140の心拍変動率と占有率とを用いて,ドライバの状態が危険状態であるか否かの判定を行う例については,後述する。
The heart rate variability indicates the rate of change of the measured heart rate with respect to the heart rate in the normal state of the driver. The heart rate variability in the
なお,このようなハザードマップ140におけるドライバの生体情報に関する情報の設計は,上述の場所を示す情報の設計と同様に,図3に示すハザードマップ140の例に限らず任意である。例えば,ハザードマップ140が個々のドライバごとの情報である場合に,ハザードマップ140におけるドライバの生体情報に関する情報が,該当場所における該当ドライバの過去の車両運転時に計測された心拍数の統計的処理結果などであってもよい。
The design of information related to the driver's biometric information in the
本実施の形態では,このようなハザードマップ140がドライバごとに用意されていることを前提として,車両に搭載された運転支援装置10による,車両を運転するドライバに対する運転支援が行われるものとする。
In the present embodiment, on the assumption that such a
ドライバは,本実施の形態による運転支援装置10を使用して車両の運転を行う場合に,その運転開始時にドライバ認証を行う。ドライバの認証方法については,タッチスクリーンなどの入力装置104でドライバ名などを入力する方法や,指紋等の生体認証を行う方法など,様々な技術が利用可能である。運転支援装置10のドライバ認証部11は,ドライバ認証により得られた情報で,車両を運転するドライバを特定する。
When the driver drives the vehicle using the driving
以後,運転支援装置10は,ドライバ認証部11により特定されたドライバについての運転支援を行う。例えば,特定されたドライバがドライバaであれば,運転支援装置10は,そのドライバaへの運転支援に用いるハザードマップ140として,ドライバa専用のハザードマップ140aを使用する。
Thereafter, the driving
位置取得部12は,ドライバによる車両の運転が開始されると,車両の位置情報の取得を開始する。本実施の形態では,位置取得部12は,GPSアンテナ107が受信したGPS情報から,車両の現在位置を示す緯度・経度・標高等の位置情報を常時求める。
When the driving of the vehicle by the driver is started, the
生体情報取得部13は,ドライバによる車両の運転が開始されると,生体センサ106によりリアルタイムに計測されたドライバの生体情報の取得を開始する。本実施の形態では,ドライバの生体情報として,ドライバの心拍に関する情報を取得する。すなわち,生体センサ106としては,ドライバの心拍を計測する生体センサ106が用いられる。心拍を計測するセンサとしては,例えば,耳たぶなどの毛細血管を流れる血流から心拍の波形にほぼ等しい脈波を計測するセンサなどが既に実現されている。
When the driving of the vehicle by the driver is started, the biological
危険状態判定部15は,ドライバによる車両の運転が開始されると,まず,ドライバが平常状態であるときの生体情報を求める。ドライバが平常状態であるときの生体情報とは,例えばドライバがほどよい緊張感で安定した運転を行っているときなどの,ドライバの状態が安定した状態であるときの生体情報をいう。本実施の形態では,危険状態判定部15は,ドライバが平常状態であるときの生体情報として,ドライバが平常状態であるときの心拍数を求める。ここでは,ドライバが平常状態であるときの心拍数を,標準心拍数と呼ぶ。危険状態判定部15は,求められた標準心拍数を保持する。
When the driving of the vehicle by the driver is started, the dangerous
標準心拍数を求める方法としては,様々な方法がある。例えば,直近の過去10回分の運転開始時に計測されたドライバの心拍数を保存しておき,その心拍数の平均値を求めてそのドライバの標準心拍数としてもよい。また,ドライバが運転開始してから一定時間経過するまでの心拍数を計測し,その平均値をドライバの標準心拍数としてもよい。 There are various methods for obtaining the standard heart rate. For example, the driver's heart rate measured at the start of the last 10 drivings may be stored, and an average value of the heart rate may be obtained to be used as the standard heart rate of the driver. Further, the heart rate from when the driver starts driving until a certain time elapses may be measured, and the average value may be used as the standard heart rate of the driver.
なお,標準心拍数は,ドライバごとに異なる。また,同じドライバであっても,その日そのときのドライバの身体状態や精神状態などによっても変わる可能性がある。 The standard heart rate varies from driver to driver. In addition, even the same driver may change depending on the physical condition and mental condition of the driver at that time.
危険状態判定部15は,ドライバによる車両の運転が開始されると,ハザードマップ140に記録された場所と,位置取得部12により得られる現在の車両の位置との関係を監視する。危険状態判定部15は,ハザードマップ140に記録された場所と現在の車両の位置とが所定の位置関係にある場合に,ドライバが運転する車両がハザードマップ140に記録された場所にあると判定する。
When the driver starts driving the vehicle, the dangerous
このような,危険状態判定部15による,ハザードマップ140に記録された場所と,ドライバが運転する車両の位置との関係についての判定に関する具体的な設計は,任意である。
The specific design regarding the determination of the relationship between the location recorded in the
例えば,危険状態判定部15は,GPSの精度等の誤差を考慮し,位置取得部12により得られた車両の位置がハザードマップ140に記録された場所から,GPSの誤差と心拍変動時間の誤差とを含んだ値として例えば±20m以内である場合に,その車両の位置がハザードマップ140に記録された場所であると判定する。
For example, the dangerous
また,例えば,危険状態判定部15は,図3に示すようにハザードマップ140に記録された場所に方向がある場合に,車両の移動方向が開始地点から終了地点に向かう方向であり,かつ車両の位置が開始地点から終了地点に向かう経路上の地点±20m以内であれば,車両が記録場所にあると判定する。道路情報を保持または取得可能であれば,運転支援装置10は,その道路情報から,図3に示すような開始地点から終了地点に至るまでの経路を求めることができる。
Further, for example, when the danger
危険状態判定部15は,ドライバが運転する車両の位置がハザードマップ140に記録された場所であると判定したときに,ドライバの状態が危険な状態であるか否かを判定する。このとき,危険状態判定部15は,生体情報取得部13により取得されたリアルタイムのドライバの生体情報に基づいた判定を行う。
When it is determined that the position of the vehicle driven by the driver is a place recorded in the
上述したように,ドライバが危険回避のために十分に警戒した運転を行うと,その緊張感からドライバの生体情報に変化が現れる。例えば,生体情報が心拍数であれば,危険な場所で運転するときのドライバの心拍数は,安全な場所で運転するときのドライバの心拍数よりも高くなる。ハザードマップ140に記録されている場所は,ドライバの生体情報に変化があった場所であり,すなわちドライバが普段から危険を感じて慎重に運転を行っている場所である。
As described above, when the driver performs a sufficiently vigilant driving for avoiding danger, a change appears in the driver's biological information due to the tension. For example, if the biological information is a heart rate, the heart rate of the driver when driving in a dangerous place is higher than the heart rate of the driver when driving in a safe place. The place recorded in the
このようなハザードマップ140に記録されている場所を通過するときに,ドライバの生体情報に十分な変化があれば,ドライバが十分に警戒した運転を行っている可能性が高い。この場合には,ドライバが事故を起こす可能性が低く,ドライバの状態は比較的安全な状態であると考えられる。
If the driver's biological information changes sufficiently when passing through a place recorded in such a
これに対して,ハザードマップ140に記録されている場所を通過するときに,ドライバの生体情報に十分な変化がなければ,ボーっと考え事をしている,居眠りをしているなど,ドライバが必要な警戒を怠って運転をしている可能性がでてくる。この場合には,ドライバが事故を起こす可能性も高くなり,ドライバの状態は危険な状態であると考えられる。
On the other hand, if the driver's biometric information does not change sufficiently when passing through the location recorded in the
危険状態判定部15は,ドライバが平常な状態であるときの生体情報に対して,生体情報取得部13により取得されたリアルタイムのドライバの生体情報に所定の変化があれば,ドライバの状態が危険な状態ではないと判定する。また,危険状態判定部15は,ドライバが平常な状態であるときの生体情報に対して,生体情報取得部13により取得されたリアルタイムのドライバの生体情報に所定の変化がなければ,ドライバの状態が危険な状態であると判定する。
If the real-time driver biometric information acquired by the biometric
以下,危険状態判定部15による,生体情報取得部13により取得されたドライバの心拍の情報に基づいた,ドライバの危険状態の判定の一例を説明する。ここで説明する例は,図3に示すハザードマップ140における心拍変動率と占有率とを用いた判定の例である。
Hereinafter, an example of the determination of the driver's dangerous state based on the heart rate information of the driver acquired by the biological
危険状態判定部15は,ドライバが運転する車両の位置がハザードマップ140に記録された場所であると判定したときに,生体情報取得部13により取得されたドライバの心拍の情報から,その時点のドライバの瞬間的な心拍数を算出する。
When the dangerous
図4は,心拍波形の例を示す情報である。 FIG. 4 shows information indicating an example of a heartbeat waveform.
例えば,生体情報取得部13が心拍を計測する生体センサ106から取得した情報から,図4に示すような心拍波形が得られる。図4に示す心拍波形において,R波は,上向きのピーク部分の波であり,心臓の左心室が収縮して全身に血液を送り出す拍動タイミングで発生する心室筋の興奮を表す波である。
For example, a heartbeat waveform as shown in FIG. 4 is obtained from information acquired from the
心拍数は,一般に1分間あたりの心臓の拍動回数をいう。瞬間的な心拍数は,心臓の拍動1回分の時間の逆数を求めることにより算出する。図4に示す心拍波形において,心臓の拍動1回分の波形は,例えば,R波間隔として示された,R波から次のR波までの波形である。このR波間隔の時間の逆数が,その時点の瞬間的な心拍数である。以下では,瞬間的な心拍数を瞬間心拍数と呼ぶ。 Heart rate generally refers to the number of heart beats per minute. The instantaneous heart rate is calculated by obtaining the reciprocal of the time for one heart beat. In the heartbeat waveform shown in FIG. 4, the waveform for one heart beat is, for example, a waveform from the R wave to the next R wave, which is indicated as an R wave interval. The reciprocal of this R wave interval time is the instantaneous heart rate at that time. Below, the instantaneous heart rate is called the instantaneous heart rate.
例えば,R波間隔の時間が1秒(=1/60分)であれば,その逆数から瞬間心拍数60が得られる。また,例えば,R波間隔の時間が0.7秒(0.7/60分)であれば,その逆数から,瞬間心拍数86(小数点以下四捨五入)が得られる。
For example, if the R wave interval time is 1 second (= 1/60 minutes), the
危険状態判定部15は,算出した瞬間心拍数と,あらかじめ算出して保持していた標準心拍数とから,その時点におけるドライバの心拍変動率(%)を算出する。心拍変動率は,瞬間心拍数÷標準心拍数×100%で求められる。例えば,ドライバの標準心拍数が60であり,ある時点でのドライバの瞬間心拍数が90であれば,その時点でのドライバのリアルタイムの心拍変動率は,90÷60×100%=150%となる。
The dangerous
危険状態判定部15は,図3に示すハザードマップ140に記録された,車両が現在走行している場所に対応する心拍変動率と占有率とを用いた判定を行う。ここでは,図3に示すハザードマップ140における心拍変動率と占有率は,危険状態判定部15による判定において,ドライバの過去の車両運転時のデータに基づいた,ドライバの状態が安全な状態であると判定する条件を示しているものとする。
The dangerous
危険状態判定部15は,現在車両が走行しているハザードマップ140の記録場所の範囲において,ハザードマップ140の心拍変動率以上の値を示すドライバのリアルタイムの心拍変動率が,ハザードマップ140の占有率以上の割合で出現していれば,現在のドライバの状態が安全な状態であると判定する。危険な場所を走行するドライバの心拍変動率は,その区間で常に一定の高い値が得られるわけではなく,高い値を維持しながらも値は上下するので,ここでは,占有率の条件を用いた判定を行う。
The dangerous
例えば,ドライバが運転する車両が,図3に示すハザードマップ140の登録場所名“渋谷駅前”の場所を走行するものとする。図3に示すハザードマップにおいて,登録場所名“渋谷駅前”に対応する心拍変動率の条件は140%以上,占有率の条件は30%以上である。
For example, it is assumed that the vehicle driven by the driver travels in the place of the registered place name “Shibuya Station” in the
危険状態判定部15は,ハザードマップ140に登録位置で示される範囲を車両が走行している間,ドライバのリアルタイムの心拍変動率を監視する。危険状態判定部15は,車両が登録場所名“渋谷駅前”の場所に突入してから現時点までの監視において,30%以上の割合で,140%以上のドライバのリアルタイムの心拍変動率が出現していれば,現時点でのドライバの状態は安全な状態であると判定する。また,危険状態判定部15は,車両が登録場所名“渋谷駅前”の場所に突入してから現時点までの監視において,140%以上のドライバのリアルタイムの心拍変動率の出現が,30%未満の割合であれば,現時点でのドライバの状態は危険な状態であると判定する。
The dangerous
このような心拍変動率と占有率とを用いた判定以外でも,生体情報取得部13により取得されたドライバの生体情報に所定の変化があるか否かの判定には,様々な判定基準を用いた判定が可能であり,どのような判定基準を用いて判定を行うか等の設計は,任意である。
In addition to the determination using the heart rate variability and the occupancy rate, various determination criteria are used for determining whether or not the driver's biometric information acquired by the biometric
例えば,ハザードマップ140が個々のドライバごとに専用のものが用意されるものであれば,ドライバの過去の生体情報に関する情報として,該当場所における過去の心拍数の統計的処理結果をハザードマップ140に記録するようにしてもよい。このとき,危険状態判定部15は,例えば,車両がハザードマップ140に記録された場所を走行中に,ドライバのリアルタイムに計測された心拍数が,ハザードマップ140に記録された心拍数−20%以上を維持していれば,ドライバの状態が安全な状態であると判定する。
For example, if the
また,例えば,シンプルに,車両がハザードマップ140に記録された場所を通過するときに,ドライバの心拍変動率が120%以上あれば,ドライバの状態が危険状態ではないと判定し,ドライバの心拍変動率が120%に満たなければ,ドライバの状態が危険状態であると判定する方法なども考えられる。この例の場合には,ハザードマップ140に過去の車両走行時にドライバの心拍変動率が高かった場所の記録があれば,場所ごとのドライバの生体情報に関する情報がなくても,ドライバの危険状態の判定が可能である。ただし,この場合には,場所ごとに異なる生体情報の判定ができないため,上述の心拍変動率と占有率とを用いた判定などのドライバの生体情報に関する情報を用いた判定に比べて,精度は低くなる。
Further, for example, when the vehicle passes through the place recorded in the
警告部16は,危険状態判定部15によりドライバが危険な状態であると判定された場合に,ドライバに対して注意喚起の警告を行う。ドライバに対する警告の方法としては,例えば,表示画面に警告を表示する,警告音を発する,ハンドルを振動させるなど,ドライバに対する視覚的,聴覚的,触覚的な様々な警告の方法がある。
The
ここで説明した本実施の形態の運転支援装置10の一例では,ハザードマップ140は,ドライバごとに用意される。車両の運転技術や経験などはドライバごとに異なるので,事故の危険性や不安を感じる場所はそれぞれのドライバごとに異なる。そのため,ドライバごとに,最適なハザードマップ140は異なるものと考えられる。
In the example of the driving
例えば,バックでの車庫入れに慣れたベテランドライバは,あまり緊張感を持たない平常状態で運転をしても,バックでの車庫入れで車両をぶつけてしまう可能性が低い。これに対して,バックでの車庫入れに慣れていない初心者ドライバは,しっかりと緊張感を持って運転しないと,バックでの車庫入れで車両をぶつけてしまう可能性が高い。当然,ベテランドライバと初心者ドライバとでは,バックでの車庫入れに対する不安感や緊張感も異なり,そのときの生体情報の変化も異なる。 For example, veteran drivers who are accustomed to putting in the garage in the back are less likely to hit the vehicle in the garage in the back even if they drive in a normal state with little tension. On the other hand, beginner drivers who are not familiar with the garage in the back are more likely to hit the vehicle in the garage in the back if they do not drive with a tight sense of tension. Naturally, the veteran driver and the beginner driver also have different anxiety and tension in the garage in the back, and the changes in biometric information at that time are also different.
このような場合に,ベテランドライバと初心者ドライバとで同じハザードマップ140を使用することには,多少の問題がある。
In such a case, there are some problems in using the
例えば,上記のバックでの車庫入れを行う場所がハザードマップ140に登録されていなければ,眠気などにより緊張感が緩んだ状態で初心者ドライバがバックでの車庫入れを行っていても,運転支援装置10は,その初心者ドライバに対して警告を行わない。この場合,眠気などにより緊張感が緩んだ状態でバックでの車庫入れを行ってしまった初心者ドライバが,車両をぶつけてしまう可能性が高くなる。
For example, if the location where the garage is put in the back is not registered in the
また,例えば,上記のバックでの車庫入れを行う場所がハザードマップ140に登録されていれば,特に眠気などの問題がない平常状態のベテランドライバがバックでの車庫入れを行っているときにも,運転支援装置10は,そのベテランドライバに対して警告を行ってしまう。この場合,特に眠気などの問題がない平常状態のベテランドライバが,意味のない警告を鬱陶しく思ってしまい,運転支援装置10を普段から使用しなくなってしまう可能性がある。
In addition, for example, if the place where the garage is stored in the back is registered in the
個々のドライバごとに,それぞれ専用のハザードマップ140を用意することにより,ドライバごとに異なる危険や不安を感じる場所における,ドライバごとに異なるいつもの生体情報に応じたドライバの危険な状態の判定が可能となる。
By preparing a
図5は,本実施の形態の運転支援装置による運転支援処理フローチャートである。 FIG. 5 is a driving assistance processing flowchart by the driving assistance apparatus of the present embodiment.
ドライバによる車両の運転が開始されると,運転支援装置10のドライバ認証部11は,ドライバの認証により,車両を運転するドライバを特定する(ステップS10)。危険状態判定部15は,特定されたドライバの標準心拍数を算出する(ステップS11)。危険状態判定部15は,算出された標準心拍数を保持しておく。
When the driving of the vehicle by the driver is started, the
位置取得部12は,ドライバが運転する車両の位置を取得する(ステップS12)。危険状態判定部15は,取得された車両の位置が,ハザードマップ記憶部14に記憶された該当ドライバのハザードマップ140に記録された場所であるかを判定する(ステップS13)。
The
車両の位置がハザードマップ140の記録場所でなければ(ステップS13のNO),運転支援装置10は,ステップS12に戻って,次の車両位置の処理に移る。
If the position of the vehicle is not the recording location of the hazard map 140 (NO in step S13), the driving
車両の位置がハザードマップ140の記録場所であれば(ステップS13のYES),生体情報取得部13は,生体センサ106からドライバのリアルタイムの心拍の情報を取得する(ステップS14)。危険状態判定部15は,取得されたリアルタイムの心拍の情報から,その時点での瞬間心拍数を算出する(ステップS15)。危険状態判定部15は,算出された瞬間心拍数とあらかじめ算出された標準心拍数とから,心拍変動率を算出する(ステップS16)。
If the vehicle position is the recording location of the hazard map 140 (YES in step S13), the biological
危険状態判定部15は,該当ドライバのハザードマップ140に記録された心拍変動率と心拍数の条件を満たす心拍の変化があるかを判定する(ステップS17)。ここでの判定は,上述の心拍変動率と心拍数とを用いた判定であるものとする。ハザードマップ140の条件を満たす心拍の変化がなければ(ステップS17のNO),危険状態判定部15はドライバの状態が危険な状態であると判定し,警告部16は,車両を運転するドライバに対して注意喚起の警告を行う(ステップS18)。
The dangerous
運転支援装置10は,ドライバによる車両の運転を監視し,運転が終了したかを判定する(ステップS19)。運転が終了していなければ(ステップS19のNO),運転支援装置10は,ステップS12に戻って,次の車両位置の処理に移る。運転が終了していれば(ステップS19のYES),運転支援装置10は,処理を終了する。
The driving
本実施の形態の運転支援装置10により,普段からドライバが危険や不安を感じて緊張して運転を行っている場所を通過するときの,車両を運転するドライバの注意力の低下を高い精度で検出し,注意喚起の警告を行うことが可能となる。
With the driving
次に,本実施の形態の運転支援装置10がハザードマップ140を作成する動作について説明する。図1に示す運転支援装置10において,ハザードマップ140を作成する動作は,破線の矢印で示されている。
Next, an operation in which the driving
ドライバによる車両の運転が開始され,ドライバ認証部11により車両を運転するドライバが特定されると,情報収集部17は,ハザードマップ140の作成のために蓄積して記憶しておく各情報の収集を開始する。情報収集部17は,位置取得部12により取得された車両位置の情報を収集する。また情報収集部17は,生体情報取得部13により取得された車両を運転しているドライバの生体情報を収集する。
When driving of the vehicle by the driver is started and the driver who drives the vehicle is specified by the
情報収集部17は,コンピュータ100の時計機能から日時を取得し,収集された車両位置の情報やドライバの生体情報を日時で関連付けて,蓄積情報記憶部18に記憶された該当ドライバの蓄積データ180に記録する。
The
図6は,本実施の形態による蓄積データの例を示す図である。 FIG. 6 is a diagram illustrating an example of accumulated data according to the present embodiment.
図6に示す蓄積データ180は,走行データ名,運転日時,走行経路データ,心拍データ等の情報を持つ。
The accumulated
図6に示す蓄積データ180において,走行データ名は,1回の車両走行ごとに収集された情報がまとめられたデータを一意に識別する情報である。本実施の形態の蓄積データ180では,1回の車両走行ごとに,すなわちドライバの1回の車両運転ごとに,情報収集部17により収集された情報がまとめられて記録される。
In the accumulated
図6に示す蓄積データ180において,運転日時は,ドライバによる車両の運転開始から運転終了までに取得された日時の情報である。また,走行経路データは,ドライバによる車両の運転開始から運転終了までに収集された車両の位置情報である。図6に示す蓄積データ180では,運転日時として記録された各日時の情報は,走行経路データとして記録した各車両の位置情報の取得時刻である。
In the accumulated
図6に示す蓄積データ180において,心拍データは,ドライバによる車両の運転開始から運転終了までに収集されたドライバの心拍の情報である。すなわち,図6に示す蓄積データ180の心拍データは,図4に示す心拍波形を表す心拍のデータ例である。なお,図6に示す蓄積データ180の心拍データには,心拍の情報をドライバから計測した時刻も含まれている。
In the accumulated
なお,本実施の形態では,過去の車両運転時の情報は,ドライバごとに,蓄積データ180に記録される。例えば,図1において,蓄積データ180aは,ドライバaの車両運転時に収集された情報が記録された蓄積データ180を示しており,蓄積データ180bは,ドライバbの車両運転時に収集された情報が記録された蓄積データ180を示している。
In the present embodiment, information on past driving of the vehicle is recorded in the accumulated
図7は,本実施の形態の運転支援装置による情報収集処理フローチャートである。 FIG. 7 is a flowchart of information collection processing by the driving support apparatus of the present embodiment.
ドライバによる車両の運転が開始されると,運転支援装置10のドライバ認証部11は,ドライバの認証により,車両を運転するドライバを特定する(ステップS20)。
When the driving of the vehicle by the driver is started, the
情報収集部17は,日時と,位置取得部12により取得された車両の位置情報とを収集する(ステップS21)。また,情報収集部17は,生体情報取得部13により取得されたドライバの生体情報を収集する(ステップS22)。
The
情報収集部17は,収集した情報を,蓄積情報記憶部18に記憶された,該当ドライバの蓄積データ180に記録する(ステップS23)。
The
運転支援装置10は,ドライバによる車両の運転を監視し,運転が終了したかを判定する(ステップS24)。運転が終了していなければ(ステップS24のNO),運転支援装置10は,ステップS21,ステップS22に戻って,次の情報収集の処理に移る。運転が終了していれば(ステップS24のYES),運転支援装置10は,情報収集処理を終了する。
The driving
ハザードマップ作成部19は,蓄積情報記憶部18に記憶された蓄積データ180に対する統計処理により,ハザードマップ140を作成する。ハザードマップ作成部19は,例えば,1週間おきなどの定期的に,またはドライバが車両の運転を行ったときなどの不定期的に,ハザードマップ140の作成を行い,ハザードマップ記憶部14に記憶されたハザードマップ140を更新する。
The hazard
本実施の形態では,ハザードマップ作成部19は,ドライバごとの蓄積データ180から,ドライバごとのハザードマップ140を作成する。例えば,図1において,ハザードマップ作成部19は,ドライバaの蓄積データ180aに対して統計処理を施し,ドライバa用のハザードマップ140aを作成する。また,ハザードマップ作成部19は,ドライバbの蓄積データ180bに対して統計処理を施し,ドライバb用のハザードマップ140bを作成する。
In the present embodiment, the hazard
ここで,蓄積データ180からハザードマップ140を作成する手順の一例を,説明する。
Here, an example of a procedure for creating the
ハザードマップ作成部19は,まず,蓄積情報記憶部18に記憶された蓄積データ180から,ドライバの心拍数が高い地点を,ハザードマップ140に記録する地点の候補として抽出する。ここでは,過去のドライバの車両運転時の蓄積データ180において,標準心拍数に対して120%以上のドライバの瞬間心拍数が得られた地点を抽出する。
The hazard
図8は,本実施の形態のハザードマップ作成部による地点候補抽出処理フローチャートである。 FIG. 8 is a flowchart of point candidate extraction processing by the hazard map creation unit of the present embodiment.
ハザードマップ作成部19は,標準心拍数を算出する(ステップS30)。標準心拍数の算出は,例えば上述の危険状態判定部15による標準心拍数の算出と同様である。ハザードマップ作成部19は,蓄積データ180に記録された該当走行データの心拍データを読み込む(ステップS31)。
The hazard
ハザードマップ作成部19は,心拍データからR波間隔を1つ抽出し(ステップS32),その時点での瞬間心拍数を算出する(ステップS33)。ハザードマップ作成部19は,算出された瞬間心拍数と,標準心拍数とから心拍変動率を算出する(ステップS34)。
The hazard
ハザードマップ作成部19は,算出された心拍変動率が所定の閾値Th以上であるかを判定する(ステップS35)。所定の閾値Thは,例えば120%などである。心拍数は,ドライバの状態が平常な状態であっても,±20%程度は変動する。
The hazard
算出された心拍変動率が所定の閾値Th以上であれば(ステップS35のYES),ハザードマップ作成部19は,蓄積データ180に記録された該当走行データから,該心拍変動率が得られた時刻の車両の位置を抽出する(ステップS36)。ハザードマップ作成部19は,抽出された車両の位置を,ハザードマップ140に記録する場所の地点の候補として保持する(ステップS37)。このとき,ハザードマップ作成部19は,算出された心拍変動率も合わせて保持する。
If the calculated heart rate variability is equal to or greater than the predetermined threshold Th (YES in step S35), the hazard
ハザードマップ作成部19は,読み込んだ心拍データの全データについて処理が終了したかを判定する(ステップS38)。全データについて処理が終了していなければ(ステップS38のNO),ハザードマップ作成部19は,ステップS32の処理に戻って,次のR波間隔の処理に移る。全データについて処理が終了していれば(ステップS38のYES),ハザードマップ作成部19は,処理を終了する。
The hazard
ハザードマップ作成部19は,図7に示す地点候補抽出処理を,蓄積データ180の走行データごとに,全走行データについて実行する。なお,例えば直近の10回分の走行データについて地点候補抽出処理を行うなどの設計については,任意である。
The hazard
ハザードマップ作成部19は,各走行データから抽出された地点に対する統計処理により,ハザードマップ140に記録する場所を決定する。各走行データから抽出された地点に対する統計処理には,様々な処理が考えられる。どのような統計処理を用いてハザードマップ140に記録する場所を抽出するかの設計は,任意である。
The hazard
例えば,ハザードマップ作成部19は,各走行データから抽出された地点の分散状態を調べ,各走行データから抽出された地点の出現頻度が集中する領域を切り出して,ハザードマップ140に記録する場所とする。また,ハザードマップ作成部19は,このときの切り出された領域に属する地点の心拍変動率の分散を調べ,ハザードマップ140に記録する,該当場所における心拍変動率や占有率などを決定する。ハザードマップ作成部19は,決定された場所の位置情報,心拍変動率,占有率等の情報を,ハザードマップ140に記録する。
For example, the hazard
ハザードマップ作成部19は,完成したハザードマップ140で,ハザードマップ記憶部14に記憶された,該当ドライバのハザードマップ140を更新する。
The hazard
このように,ハザードマップ140は,過去の車両走行時に収集したドライバの生体情報等の蓄積データ180に基づいて生成される。すなわち,ドライバの運転支援に使用されるハザードマップ140は,過去の車両走行時にドライバがいつも危険や不安を感じて慎重な運転を心がけた場所が記録された情報となる。
In this way, the
以上,本実施の形態について説明したが,本発明はその主旨の範囲において種々の変形が可能であることは当然である。 Although the present embodiment has been described above, the present invention can naturally be modified in various ways within the scope of the gist thereof.
例えば,上述の実施の形態では,車両に搭載された1台のコンピュータ100によって,運転支援装置10が実現される例を説明したが,複数のコンピュータで運転支援装置10を実現してもよい。
For example, in the above-described embodiment, the example in which the driving
図9は,本実施の形態による運転支援装置の実現例(1)を示す図である。 FIG. 9 is a diagram illustrating an implementation example (1) of the driving support apparatus according to the present embodiment.
図9に示す例では,運転支援装置10が,車両側装置10−1とセンタ側装置10−2とで実現されている。
In the example shown in FIG. 9, the driving
車両側装置10−1は,車両に搭載されたコンピュータで実現される,運転支援装置10の一部である。車両側装置10−1は,運転支援装置10が備える各機能部のうち,ドライバ認証部11,位置取得部12,生体情報取得部13,警告部16,情報収集部17を有する。
The vehicle-side device 10-1 is a part of the driving
また,センタ側装置10−2は,複数の車両の車両側装置10−1で収集された情報を蓄積し,集中管理するセンタのコンピュータで実現される,運転支援装置10の一部である。センタ側装置10−2は,運転支援装置10が備える各機能部のうち,ハザードマップ記憶部14,危険状態判定部15,蓄積情報記憶部18,ハザードマップ作成部19を有する。
The center side device 10-2 is a part of the driving
なお,車両側装置10−1とセンタ側装置10−2とは,ネットワーク(図示省略)を介して互いに通信が可能である。 The vehicle side device 10-1 and the center side device 10-2 can communicate with each other via a network (not shown).
車両側装置10−1では,ドライバが運転を開始すると,ドライバ認証部11がドライバを特定する。情報収集部17は,位置取得部12により取得された車両の位置情報や,生体情報取得部13により取得された車両を運転するドライバの生体情報などの情報を収集し,収集された情報にドライバを特定する情報等を付加して,センタ側装置10−2に送る。
In the vehicle side device 10-1, when the driver starts driving, the
センタ側装置10−2では,車両側装置10−1から受信した情報を,蓄積情報記憶部18に記憶された該当ドライバの蓄積データ180に記録する。センタ側装置10−2では,ハザードマップ作成部19が,蓄積情報記憶部18に記憶されたドライバごとの蓄積データ180から,ドライバごとのハザードマップ140を作成し,ハザードマップ記憶部14に記憶する。
In the center side device 10-2, the information received from the vehicle side device 10-1 is recorded in the accumulated
また,センタ側装置10−2では,危険状態判定部15が,車両側装置10−1から受信した情報と,ハザードマップ記憶部14に記憶された該当ドライバのハザードマップ140とに基づいて,該当ドライバの状態が危険な状態であるかを判定する。危険状態判定部15は,該当ドライバの状態が危険な状態であると判定した場合に,その旨を示す通知を該当する車両側装置10−1に送る。
Moreover, in the center side apparatus 10-2, the dangerous
車両側装置10−1において,警告部16は,センタ側装置10−2からドライバの状態が危険な状態である旨の通知を受けると,ドライバに対して注意喚起の警告を行う。
In the vehicle-side device 10-1, when the
このように,複数のコンピュータを用いて,運転支援装置10を実現することも可能である。なお,車両側装置10−1とセンタ側装置10−2とに対して,運転支援装置10の各機能部をどのように配置するかなどの設計は,任意である。
In this manner, the driving
また,例えば,上述の実施の形態では,ハザードマップ140が個々のドライバごとにそれぞれ専用のものが用意されているが,複数のドライバの運転支援に使用する一般化したハザードマップ140を用意するようにしてもよい。
Further, for example, in the above-described embodiment, the
図10は,本実施の形態による運転支援装置の実現例(2)を示す図である。 FIG. 10 is a diagram illustrating an implementation example (2) of the driving support apparatus according to the present embodiment.
図10に示す例では,運転支援装置10が,車両側装置10−1とセンタ側装置10−2とで実現されている。また,図10に示す例では,複数のドライバの蓄積データ180から,複数のドライバの運転支援に使用する一般化したハザードマップ140が作成されている。
In the example shown in FIG. 10, the driving
車両側装置10−1は,車両に搭載されたコンピュータで実現される,運転支援装置10の一部である。車両側装置10−1は,運転支援装置10が備える各機能部のうち,ドライバ認証部11,位置取得部12,生体情報取得部13,ハザードマップ記憶部14−1,危険状態判定部15,警告部16,情報収集部17を有する。ハザードマップ記憶部14−1は,車両側装置10−1のハザードマップ記憶部14である。
The vehicle-side device 10-1 is a part of the driving
また,センタ側装置10−2は,複数の車両の車両側装置10−1で収集された情報を蓄積し,集中管理するセンタのコンピュータで実現される,運転支援装置10の一部である。センタ側装置10−2は,運転支援装置10が備える各機能部のうち,ハザードマップ記憶部14−2,蓄積情報記憶部18,ハザードマップ作成部19を有する。ハザードマップ記憶部14−2は,センタ側装置10−2のハザードマップ記憶部14である。
The center side device 10-2 is a part of the driving
なお,車両側装置10−1とセンタ側装置10−2とは,ネットワーク(図示省略)を介して互いに通信が可能である。 The vehicle side device 10-1 and the center side device 10-2 can communicate with each other via a network (not shown).
車両側装置10−1では,ドライバが運転を開始すると,ドライバ認証部11がドライバを特定する。情報収集部17は,位置取得部12により取得された車両の位置情報や,生体情報取得部13により取得された車両を運転するドライバの生体情報などの情報を収集し,収集した情報をセンタ側装置10−2に送る。
In the vehicle side device 10-1, when the driver starts driving, the
センタ側装置10−2では,車両側装置10−1から受信した情報を,蓄積情報記憶部18に記憶された該当ドライバの蓄積データ180に記録する。センタ側装置10−2では,ハザードマップ作成部19が,蓄積情報記憶部18に記憶された複数のドライバの蓄積データ180から,複数のドライバの運転支援に使用する一般化したハザードマップ140を作成し,ハザードマップ記憶部14−2に記憶する。ハザードマップ記憶部14−2に記憶されたハザードマップ140は,各車両の車両側装置10−1に送られる。
In the center side device 10-2, the information received from the vehicle side device 10-1 is recorded in the accumulated
車両側装置10−1では,ハザードマップ記憶部14−1が,センタ側装置10−2から受信した,複数のドライバの運転支援に使用する一般化したハザードマップ140を記憶する。危険状態判定部15は,位置取得部12により取得された車両の位置情報と,生体情報取得部13により取得されたドライバの生体情報と,ハザードマップ記憶部14−1に記憶された一般化したハザードマップ140とに基づいて,ドライバの状態が危険な状態であるかを判定する。危険状態判定部15により,ドライバの状態が危険な状態であると判定された場合には,警告部16は,ドライバに対して注意喚起の警告を行う。
In the vehicle-side device 10-1, the hazard map storage unit 14-1 stores a
このように,運転支援装置10が,複数のドライバの過去の車両運転時に収集された情報から作成された,複数のドライバの運転支援に使用する一般化したハザードマップ140を使用して,ドライバへの運転支援を行うようにしてもよい。運転支援装置10が一般化したハザードマップ140を用いて,車両運転するドライバへの支援を行うようにすれば,そのドライバが初めて運転する場所でも,ドライバの危険な状態を検知することが可能となる。
As described above, the driving
また,例えば,運転支援装置10が,個々のドライバごとのハザードマップ140と,一般化したハザードマップ140とを組み合わせて使用し,車両を運転するドライバを支援するようにしてもよい。運転支援装置10が,車両を運転するドライバが頻繁に運転を行っている場所では,個々のドライバごとのハザードマップ140を使用し,車両を運転するドライバが初めて運転を行う場所では,一般化したハザードマップ140を使用する,といった実施も可能である。さらに,運転支援装置10が,従来の事故の発生やドライバからのヒアリングに基づいたハザードマップを併用して,ドライバへの運転支援を行うようにしてもよい。
Further, for example, the driving
また,上述の実施の形態では,ドライバの生体情報として心拍の情報1つのみを使用して,ドライバの状態が危険な状態であるかの判定を行っているが,複数の生体情報を組み合わせて,ドライバの状態が危険な状態であるかを判定してもよい。 In the above-described embodiment, only one heartbeat information is used as the driver's biological information to determine whether the driver is in a dangerous state, but a plurality of biological information is combined. , It may be determined whether the driver is in a dangerous state.
なお,本実施の形態による運転支援装置10は,ドライブレコーダや,カーナビゲーションシステム,ドライバモニタリングシステムなど,様々なシステムに適用することが可能である。
The driving
10 運転支援装置
11 ドライバ認証部
12 位置取得部
13 生体情報取得部
14 ハザードマップ記憶部
140 ハザードマップ
15 危険状態判定部
16 警告部
17 情報収集部
18 蓄積情報記憶部
180 蓄積データ
19 ハザードマップ作成部
100 コンピュータ
101 CPU
102 メモリ
103 記憶装置
104 入力装置
105 出力装置
106 生体センサ
107 GPSアンテナ
DESCRIPTION OF
102
Claims (2)
生体センサによりリアルタイムで計測された,前記車両を運転するドライバの生体情報を取得する生体情報取得部と,
過去の車両運転時に計測されたドライバの生体情報に基づいて作成された,ドライバの生体情報が変化する場所が記録されたハザードマップ情報を記憶するハザードマップ記憶部と,
前記取得された車両の位置が前記ハザードマップ情報に記録された場所であるときに,前記取得された前記車両を運転するドライバの生体情報に基づいて,前記車両を運転するドライバの状態が危険な状態であるか否かを判定する危険状態判定部と,
前記車両を運転するドライバの状態が危険な状態であると判定された場合に,前記車両を運転するドライバに対して注意喚起の警告を行う警告部とを備える
ことを特徴とする運転支援装置。 A position acquisition unit for acquiring the position of the vehicle;
A biological information acquisition unit that acquires biological information of a driver driving the vehicle, measured in real time by a biological sensor;
A hazard map storage unit for storing hazard map information, which is created based on the driver's biological information measured during past driving of the vehicle and where the driver's biological information changes is recorded;
When the acquired position of the vehicle is a place recorded in the hazard map information, the state of the driver driving the vehicle is dangerous based on the acquired biological information of the driver driving the vehicle. A dangerous state determination unit that determines whether or not a state is present;
A driving support device, comprising: a warning unit that issues a warning to a driver driving the vehicle when it is determined that the driver driving the vehicle is in a dangerous state.
前記危険状態判定部は,前記取得された車両の位置が前記ハザードマップ情報に記録された場所であるときに,前記ハザードマップ情報において当該場所に対応付けられた前記車両を運転するドライバの過去の生体情報に関する情報に基づいた判定で,前記取得された前記車両を運転するドライバの生体情報に所定の変化がないと判定された場合に,前記車両を運転するドライバの状態が危険な状態であると判定する
ことを特徴とする請求項1に記載された運転支援装置。 The hazard map information includes, for each driver who drives the vehicle, biometric information of a driver who drives the vehicle, which is created based on biological information measured during past vehicle driving by the driver driving the vehicle. Information that is recorded in association with a place that changes and information related to past biological information of a driver who drives the vehicle at the place,
When the acquired position of the vehicle is a place recorded in the hazard map information, the dangerous state determination unit is a past record of a driver driving the vehicle associated with the place in the hazard map information. When it is determined that there is no predetermined change in the biological information of the driver who drives the acquired vehicle in the determination based on the information related to the biological information, the state of the driver who drives the vehicle is in a dangerous state. The driving support device according to claim 1, wherein the driving support device is determined.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010112864A JP5651994B2 (en) | 2010-05-17 | 2010-05-17 | Driving assistance device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010112864A JP5651994B2 (en) | 2010-05-17 | 2010-05-17 | Driving assistance device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011242190A true JP2011242190A (en) | 2011-12-01 |
JP5651994B2 JP5651994B2 (en) | 2015-01-14 |
Family
ID=45409012
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010112864A Active JP5651994B2 (en) | 2010-05-17 | 2010-05-17 | Driving assistance device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5651994B2 (en) |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013205965A (en) * | 2012-03-27 | 2013-10-07 | Fujitsu Ltd | Biological information processor and biological information processing method |
WO2014073174A1 (en) * | 2012-11-08 | 2014-05-15 | 株式会社デンソー | Onboard device and vehicle safety control system |
JP2014206906A (en) * | 2013-04-15 | 2014-10-30 | 株式会社デンソー | Driving support device |
JP2014230209A (en) * | 2013-05-24 | 2014-12-08 | 有限会社 forte | Mobile communication system with gps function, and mobile communication method with gps function |
JP2015191256A (en) * | 2014-03-27 | 2015-11-02 | パイオニア株式会社 | Risk degree determination device, risk degree determination method and risk degree determination program |
JP2016091410A (en) * | 2014-11-07 | 2016-05-23 | ダイキン工業株式会社 | Danger information generation system and danger information provision system |
JP2016191985A (en) * | 2015-03-30 | 2016-11-10 | 国立大学法人東北大学 | Road information database creation support system and operation support system using database created by the same |
JP2017021651A (en) * | 2015-07-13 | 2017-01-26 | 株式会社デンソー | Vehicle control device |
JP2017027414A (en) * | 2015-07-23 | 2017-02-02 | 株式会社日立システムズ | Server device, life log system and caution information output method |
JP2018045303A (en) * | 2016-09-12 | 2018-03-22 | 株式会社デンソー | Driving assist system |
JP2018181386A (en) * | 2018-08-27 | 2018-11-15 | パイオニア株式会社 | Danger level judging device, risk degree judging method, and dangerous degree judging program |
JP2018190460A (en) * | 2018-08-06 | 2018-11-29 | 株式会社東芝 | Wearable terminal and method |
JP2018195249A (en) * | 2017-05-22 | 2018-12-06 | 株式会社Kyowaエンジニアリング・ラボラトリー | Safety driving support device compatible with physical information of vehicle driver |
WO2019021526A1 (en) | 2017-07-27 | 2019-01-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Information processing method, information processor and information processing program |
JP2019028986A (en) * | 2017-07-27 | 2019-02-21 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | Information processing method, information processing equipment and information processing program |
JP2019128887A (en) * | 2018-01-26 | 2019-08-01 | パイオニア株式会社 | Information processing device, advertisement information presentation device and method performed by these devices |
JP2020009084A (en) * | 2018-07-06 | 2020-01-16 | アルパイン株式会社 | Alert system |
JP2020098530A (en) * | 2018-12-19 | 2020-06-25 | ソフトバンク株式会社 | Collision risk notification device, communication terminal device, vehicle, collision risk notification system, collision risk notification method, and program |
WO2022244128A1 (en) * | 2021-05-19 | 2022-11-24 | 三菱電機株式会社 | Driving assistance information generation device, driving assistance device, and driving assistance information generation method |
CN115398509A (en) * | 2020-06-09 | 2022-11-25 | 株式会社日立物流 | Operation assistance method, operation assistance system, and operation assistance server |
JP7260042B1 (en) | 2022-06-24 | 2023-04-18 | トヨタ自動車株式会社 | Pedestrian notification device, pedestrian notification system, and pedestrian notification program |
WO2023203725A1 (en) * | 2022-04-21 | 2023-10-26 | 三菱電機株式会社 | Information analysis device and information analysis method |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06150199A (en) * | 1992-11-13 | 1994-05-31 | Mitsubishi Electric Corp | Preventive safety device for vehicle |
JP2007171154A (en) * | 2005-11-22 | 2007-07-05 | Equos Research Co Ltd | Device for assisting driving |
JP2008015561A (en) * | 2006-06-30 | 2008-01-24 | Equos Research Co Ltd | Information providing vehicle and driving support device |
-
2010
- 2010-05-17 JP JP2010112864A patent/JP5651994B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06150199A (en) * | 1992-11-13 | 1994-05-31 | Mitsubishi Electric Corp | Preventive safety device for vehicle |
JP2007171154A (en) * | 2005-11-22 | 2007-07-05 | Equos Research Co Ltd | Device for assisting driving |
JP2008015561A (en) * | 2006-06-30 | 2008-01-24 | Equos Research Co Ltd | Information providing vehicle and driving support device |
Cited By (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013205965A (en) * | 2012-03-27 | 2013-10-07 | Fujitsu Ltd | Biological information processor and biological information processing method |
WO2014073174A1 (en) * | 2012-11-08 | 2014-05-15 | 株式会社デンソー | Onboard device and vehicle safety control system |
JP2014095987A (en) * | 2012-11-08 | 2014-05-22 | Denso Corp | In-vehicle unit and vehicle safety control system |
JP2014206906A (en) * | 2013-04-15 | 2014-10-30 | 株式会社デンソー | Driving support device |
JP2014230209A (en) * | 2013-05-24 | 2014-12-08 | 有限会社 forte | Mobile communication system with gps function, and mobile communication method with gps function |
JP2015191256A (en) * | 2014-03-27 | 2015-11-02 | パイオニア株式会社 | Risk degree determination device, risk degree determination method and risk degree determination program |
JP2016091410A (en) * | 2014-11-07 | 2016-05-23 | ダイキン工業株式会社 | Danger information generation system and danger information provision system |
JP2016191985A (en) * | 2015-03-30 | 2016-11-10 | 国立大学法人東北大学 | Road information database creation support system and operation support system using database created by the same |
JP2017021651A (en) * | 2015-07-13 | 2017-01-26 | 株式会社デンソー | Vehicle control device |
JP2017027414A (en) * | 2015-07-23 | 2017-02-02 | 株式会社日立システムズ | Server device, life log system and caution information output method |
JP2018045303A (en) * | 2016-09-12 | 2018-03-22 | 株式会社デンソー | Driving assist system |
JP2018195249A (en) * | 2017-05-22 | 2018-12-06 | 株式会社Kyowaエンジニアリング・ラボラトリー | Safety driving support device compatible with physical information of vehicle driver |
WO2019021526A1 (en) | 2017-07-27 | 2019-01-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Information processing method, information processor and information processing program |
US10785404B2 (en) | 2017-07-27 | 2020-09-22 | Panasonic Intellectual Property Corporation Of America | Information processing method, information processing apparatus, and non-transitory recording medium |
JP2019028986A (en) * | 2017-07-27 | 2019-02-21 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | Information processing method, information processing equipment and information processing program |
JP7007216B2 (en) | 2017-07-27 | 2022-01-24 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Information processing method, information processing device and information processing program |
JP2019128887A (en) * | 2018-01-26 | 2019-08-01 | パイオニア株式会社 | Information processing device, advertisement information presentation device and method performed by these devices |
JP7212464B2 (en) | 2018-07-06 | 2023-01-25 | アルパイン株式会社 | alert system |
JP2020009084A (en) * | 2018-07-06 | 2020-01-16 | アルパイン株式会社 | Alert system |
JP2018190460A (en) * | 2018-08-06 | 2018-11-29 | 株式会社東芝 | Wearable terminal and method |
JP2018181386A (en) * | 2018-08-27 | 2018-11-15 | パイオニア株式会社 | Danger level judging device, risk degree judging method, and dangerous degree judging program |
JP2020098530A (en) * | 2018-12-19 | 2020-06-25 | ソフトバンク株式会社 | Collision risk notification device, communication terminal device, vehicle, collision risk notification system, collision risk notification method, and program |
CN115398509A (en) * | 2020-06-09 | 2022-11-25 | 株式会社日立物流 | Operation assistance method, operation assistance system, and operation assistance server |
WO2022244128A1 (en) * | 2021-05-19 | 2022-11-24 | 三菱電機株式会社 | Driving assistance information generation device, driving assistance device, and driving assistance information generation method |
WO2023203725A1 (en) * | 2022-04-21 | 2023-10-26 | 三菱電機株式会社 | Information analysis device and information analysis method |
JP7260042B1 (en) | 2022-06-24 | 2023-04-18 | トヨタ自動車株式会社 | Pedestrian notification device, pedestrian notification system, and pedestrian notification program |
JP2024002733A (en) * | 2022-06-24 | 2024-01-11 | トヨタ自動車株式会社 | Notification device for pedestrian, notification system for pedestrian and notification program for pedestrian |
Also Published As
Publication number | Publication date |
---|---|
JP5651994B2 (en) | 2015-01-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5651994B2 (en) | Driving assistance device | |
JP6497915B2 (en) | Driving support system | |
JP7324716B2 (en) | Information processing device, mobile device, method, and program | |
JP5950025B2 (en) | Driving support device, driving support method, information providing device, information providing method, navigation device, and navigation method | |
US9676395B2 (en) | Incapacitated driving detection and prevention | |
JP4905832B2 (en) | Driver state determination device and driving support device | |
JP4595377B2 (en) | Driver state detection device and program | |
EP3316231A1 (en) | Alert generation correlating between head mounted imaging data and external device | |
US20030043045A1 (en) | Information providing system and information providing method | |
CN104318714A (en) | Fatigue driving pre-warning method | |
JPWO2019202881A1 (en) | Information processing equipment, mobile devices, information processing systems, and methods, and programs | |
JP2016081511A (en) | Method and device for improving traffic safety | |
WO2009148188A1 (en) | System for automatic evaluation of driving behavior | |
CN101673464A (en) | Intelligent management system of fatigue driving | |
JP2012118951A (en) | On-vehicle device and driving support system | |
JP2014071628A (en) | Drive support system, drive support program, and drive support method | |
WO2019208014A1 (en) | Information processing device, information processing system, information processing method, and program | |
JP2006167425A (en) | Mental resource assessment device for vehicle and its utilization | |
JP2018181386A (en) | Danger level judging device, risk degree judging method, and dangerous degree judging program | |
EP2204784B1 (en) | A system and method for monitoring the state of vigilance of the driver of a vehicle | |
US11214263B2 (en) | Management assistance system | |
WO2019155818A1 (en) | Management assistance system | |
JP2022149946A (en) | Driving characteristic determination device, driving characteristic determination method, and driving characteristic determination program | |
JP2020107365A (en) | Danger level judging device, risk degree judging method, and dangerous degree judging program | |
US11780458B1 (en) | Automatic car side-view and rear-view mirrors adjustment and drowsy driver detection system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130403 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140228 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140428 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141021 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141103 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5651994 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |