JP3739113B2 - The awareness decrease detection device - Google Patents

The awareness decrease detection device Download PDF

Info

Publication number
JP3739113B2
JP3739113B2 JP17322195A JP17322195A JP3739113B2 JP 3739113 B2 JP3739113 B2 JP 3739113B2 JP 17322195 A JP17322195 A JP 17322195A JP 17322195 A JP17322195 A JP 17322195A JP 3739113 B2 JP3739113 B2 JP 3739113B2
Authority
JP
Grant status
Grant
Patent type
Prior art keywords
frequency distribution
processing unit
sight
means
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP17322195A
Other languages
Japanese (ja)
Other versions
JPH0920157A (en )
Inventor
野 明 広 松
Original Assignee
日産ディーゼル工業株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Description

【0001】 [0001]
【発明の属する技術分野】 BACKGROUND OF THE INVENTION
本発明は、車両運転中のドライバの覚醒度低下を検出し、ドライバに危険を報知する技術に関する。 The present invention relates to detecting the awareness decrease of the driver during vehicle operation, to inform the danger driver technology.
【0002】 [0002]
【従来の技術】 BACKGROUND OF THE INVENTION
交通事故を低減するために車両運転中のドライバの覚醒度低下や居眠りを検知するには、脳波の測定、ハンドル操作の状況や瞬き等により行う事は提案されている。 To detect the driver awareness decrease and falling asleep during vehicle operation in order to reduce traffic accidents, EEG, it has been proposed to carry out the situation and blinking like handle operation.
【0003】 [0003]
【発明が解決しようとする課題】 [Problems that the Invention is to Solve
しかしながら、上記の技術では測定しているデータが確実に覚醒度の低下や居眠りの兆候を示しているとは言えないという問題があり、また、測定用のセンサを体に装着しなければならない等のために面倒で厄介であり、実用化されていないのが実情である。 However, there is a problem that it can not be said data being measured in the above technology is showing signs of degradation or snooze reliably alertness, also must wear a sensor for measuring the body or the like cumbersome cumbersome for, not been commercialized in actuality.
【0004】 [0004]
したがって、本発明はドライバの体にセンサ等を装着することなく、覚醒度の低下を検出し、ドライバに報知して安全を確保する覚醒度低下検出装置を提供することを目的としている。 Accordingly, the present invention is not to mount the sensor such as the body of the driver, detects a decrease in the degree of awakening, and its object is to provide an awareness decrease detector to ensure safety to notify the driver.
【0005】 [0005]
【課題を解決するための手段】 In order to solve the problems]
本発明によれば、赤外線LED(2)で眼球に赤外線を照射しCCDカメラ(1)で眼球の動きを撮影して画像とし、その画像信号を解析して視線方向を算出する画像解析手段(3)と、視線の頻度分布処理部(4)、覚醒度判定処理部(5)、および警報出力手段(6)を備えかつ前記画像解析手段(3)に電気回路で接続された判定装置(9)とを有する覚醒度低下検出装置において、前記判定装置(9)は、速度、視線方向のデータを読み込み(S2)、走行中か否か判断し(S3)、走行中であれば前記視線方向データから前記頻度分布処理部(4)にてフロントガラスとその両側のサイドミラー近傍に対応する分割視野に視線頻度を積算して視線頻度分布処理を行い、パターン作成手段にて頻度分布パターンを作成し(S5)、予 According to the present invention, the image analysis means and image capturing movement of the eyeball in irradiating infrared rays to the eye in the infrared LED (2) CCD camera (1) to calculate the gaze direction by analyzing the image signal ( and 3), the frequency distribution processing unit of the line of sight (4), awareness determination processing unit (5), and alarm output comprises means (6) and said image analysis means (3) connected to the determination device in an electric circuit ( in the awareness decrease detector having 9) and the determination device (9) the speed, reads a line-of-sight direction of data (S2), it is determined whether or not traveling (S3), the line of sight if traveling perform gaze frequency distribution processing by integrating gaze frequency split field of view corresponding to the vicinity of the side mirror on both sides and a front glass in the frequency distribution processing unit (4) from the direction data, the frequency distribution pattern in the pattern creating means created (S5), pre 作成した覚醒時の基準パターンを前記覚醒度判定処理部(5)に読み込み(S6)、その基準パターンと前記頻度分布処理部(4)にて作成した頻度分布パターンとを比較して覚醒度の低下を3レベルで判断し(S7)、それぞれ第1のレベルでは表示(S10)、第2のレベルではブザー(S11)、第3のレベルではライト点滅(S12)を警報出力手段(6)に出力する機能を有する。 Reads the reference pattern awake created in the awareness determination processing section (5) (S6), the degree of awakening by comparing the frequency distribution pattern generated by the frequency distribution processing unit and the reference pattern (4) determining reduced in three levels (S7), the display in the respective first level (S10), the buzzer in the second level (S11), the third level in the alarm output means light blinking (S12) (6) It has a function of output.
【0006】 [0006]
また、本発明によれば、赤外線LED(2)で眼球に赤外線を照射しCCDカメラ(1)で眼球の動きを撮影して画像とし、その画像信号を解析して視線方向を算出する画像解析手段(3)と、視線の頻度分布処理部(4)、覚醒度判定処理部(5)、および警報出力手段(6)を備えかつ前記画像解析手段(3)に電気回路で接続された判定装置(9)とを有する覚醒度低下検出装置において、照度センサ(10)を前記判定装置(9)に接続し、その判定装置(9)は、速度、時刻、照度、視線方向のデータを読み込み(S2)、走行中か否か判断し(S3)、走行中であれば前記視線方向データから前記頻度分布処理部(4)にてフロントガラスとその両側のサイドミラー近傍に対応する分割視野に視線頻度を積算して視線頻度分布処 Further, according to the present invention, image analysis and image capturing movement of the eyeball in irradiating infrared rays to the eye in the infrared LED (2) CCD camera (1) to calculate the gaze direction by analyzing the image signals means (3) and, the frequency distribution processing unit of the line of sight (4), awareness determination processing unit (5), and alarm output comprises means (6) and determining that the connected in an electrical circuit to the image analysis means (3) in the awareness decrease detecting device having a device (9), an illuminance sensor (10) connected to said determining device (9), the determination unit (9), read speed, time, intensity, line-of-sight direction of the data (S2), or during travel whether determined (S3), the frequency distribution processing unit from the viewing direction data if traveling (4) at the windshield and the divided field of view corresponding to the vicinity of the side mirror on both sides line-of-sight frequency distribution processing by integrating the line-of-sight frequency を行い、パターン作成手段にて頻度分布パターンを作成し(S5)、予め作成した昼、夜、夕暮れの各照度によって異なる基準パターンを前記覚醒度判定処理部(5)に読み込み(S6)、その基準パターンと前記頻度分布処理部(4)にて作成した頻度分布パターンとを比較し(S8〜10)、覚醒度の低下と判断した場合に警報出力手段(6)に出力する(S17)機能を有する。 Was carried out, to create a frequency distribution pattern in the pattern creating means (S5), daytime previously prepared, at night, reads the different reference patterns with each of the dusk illumination to said awareness determination processing section (5) (S6), the comparing the frequency distribution pattern generated by said the reference pattern frequency distribution processing unit (4) (S8~10), and outputs to the alarm output means (6) when it is determined that the reduction of alertness (S17) function having.
【0007】 [0007]
そして、本発明によれば、赤外線LED(2)で眼球に赤外線を照射しCCDカメラ(1)で眼球の動きを撮影して画像とし、その画像信号を解析して視線方向を算出する画像解析手段(3)と、視線の頻度分布処理部(4)、覚醒度判定処理部(5)、および警報出力手段(6)を備えかつ前記画像解析手段(3)に電気回路で接続された判定装置(9)とを有する覚醒度低下検出装置において、ステアリングセンサ(11)、アクセルセンサ(12)、ブレーキセンサ(13)、およびシフトセンサ(14)からなる車両の走行状態検出手段を前記判定装置(9)に接続し、その判定装置(9)は、速度データを読み込み(S2)、走行中か否か判断し(S3)、走行中であれば視線、ステアリング、アクセル、ブレーキ、シフトの各走 Then, according to the present invention, image analysis and image capturing movement of the eyeball in irradiating infrared rays to the eye in the infrared LED (2) CCD camera (1) to calculate the gaze direction by analyzing the image signals means (3) and, the frequency distribution processing unit of the line of sight (4), awareness determination processing unit (5), and alarm output comprises means (6) and determining that the connected in an electrical circuit to the image analysis means (3) in the awareness decrease detecting device having a device (9), a steering sensor (11), an accelerator sensor (12), brake sensor (13), and the shift sensor (14) said determining device running state detecting means of the vehicle consisting of (9) connected to, the determination unit (9) reads the velocity data (S2), while driving it is determined whether or not (S3), if the traveling line of sight, steering, accelerator, brakes, each of the shift run 状態データを読み込み(S4)、前記視線方向データから前記頻度分布処理部(4)にてフロントガラスとその両側のサイドミラー近傍に対応する分割視野に視線頻度を積算して視線頻度分布処理を行い、パターン作成手段にて頻度分布パターンを作成し(S5)、前記走行状態データから走行形態の算出処理を行い(S6)、基準パターンと異なるか否か判断し(S7)、その結果異なると判断した場合に警報出力手段(6)に出力する(S8)機能を有する。 Reads the status data (S4), performs a gaze frequency distribution processing by integrating gaze frequency split field of view corresponding to the vicinity of the side mirror on both sides from the viewing direction data the frequency distribution processing unit (4) windscreen at the , to create a frequency distribution pattern in the pattern creating means (S5), from said running state data performs a process for calculating the running form (S6), the reference pattern is different whether it is determined (S7), the result differs from the determination and outputs to the alarm output means (6) when having (S8) feature.
【0008】 [0008]
本発明に係る覚醒度低下検出装置によれば、ドライバの視線を計測する計測手段によりデータを累積して視線の方向の頻度分布パターンを作成する。 According to the awareness decrease detecting apparatus according to the present invention, to create a direction of frequency distribution patterns of the line of sight by accumulating data by measuring means for measuring the line of sight of the driver. そして、予め設けられた覚醒時の頻度分布パターンと比較する。 Then, comparing the frequency distribution pattern during waking provided in advance. 一般的に覚醒度が低下すると前記パターンは一点に収束する傾向を示すので、これを利用して対象となるドライバの覚醒時のパターンと検出時のパターンとを比較して、収束の傾向が表れたならば覚醒度低下と判断し、警報を出力する。 Since generally exhibit a tendency alertness is to converge to the pattern one point to decline, by comparing the detection time of the pattern and the driver pattern upon awakening of interest Using this, it appears prone convergence if it is determined that the degree of awakening decreases, and outputs a warning.
【0009】 [0009]
また、走行環境が夜、昼、明け方或は夕暮れ等による頻度パターンの変化についても予め基準のパターンを設けておけば、精度のよい判断ができ、ステアリングの操作量、アクセル開度、ブレーキ操作およびシフト位置等の走行状態についても同様に併せて判断すれば、さらに精度の高い判断が可能となる。 The running environment night, daytime, if provided in advance reference pattern also changes in the frequency pattern by dawn or dusk, etc., can accurate determination, the operation amount of the steering, accelerator opening, brake operation and if it is determined in conjunction Similarly, the traveling state of the shift position or the like, it is possible to further highly accurate determination.
【0010】 [0010]
したがって、体にセンサ等を装着せずに覚醒度低下が検出できる。 Therefore, the awareness decrease without mounting a sensor or the like to the body can be detected.
【0011】 [0011]
【発明の実施の形態】 DETAILED DESCRIPTION OF THE INVENTION
以下、図面を参照して、本発明の実施例を説明する。 Hereinafter, with reference to the drawings, an embodiment of the present invention.
【0012】 [0012]
図1は本発明の覚醒度低下検出装置の例を示す全体構成図であり、図示しない車両のキャブに設けられたインストルメントパネル20にはドライバの視線の動きを画像とするCCDカメラ1が取り付けられ、そのCCDカメラ1とパネルには眼球に目的の反射像をう得るため、眼球に赤外線を照射する赤外発光ダイオード(以降赤外LEDという)2が設けられ、画像信号を解析し、視線方向を算出する手段である画像解析装置3とCCDカメラ1とは覚醒度を判断する判断手段である判定装置9に電気回路で接続されている。 Figure 1 is an overall configuration diagram showing an example of the awareness decrease detecting device of the present invention, CCD camera 1 is attached to the instrument panel 20 provided in the cab of the vehicle (not shown) to image the motion of the driver's line of sight are, therefore the CCD camera 1 and the panel obtained cormorants a reflection image of the object to the eye, (referred to hereinafter infrared LED) infrared light emitting diode for irradiating infrared rays onto the eye 2 is provided, analyzing the image signals, the line of sight the image analyzer 3 and the CCD camera 1 is a means for calculating a direction and is connected in an electrical circuit to the decision making unit 9 is a judgment means for judging alertness. なお、赤外LED2はCCDカメラ1内のレンズ中心に設置してもよく、或いは図1において符号2aで示すようにCCDカメラ1内に設置せずに、CCDカメラ1からの光線をハーフミラー(図示せず)で受けて赤外LED2の光路中心とレンズ中心とが一致するように設置してもよい。 Incidentally, infrared LED2 may be installed in the lens center of the CCD camera 1, or without installed CCD camera 1 as shown by reference numeral 2a in FIG. 1, a half mirror rays from the CCD camera 1 ( may be installed as is received by not shown) and the optical path center and the lens center of the infrared LED2 match.
【0013】 [0013]
図2は図1の画像解析装置3と判定装置9とのブロックダイヤグラムを示し、CCDカメラ1と2つの赤外LED2とは画像解析装置3に電気回路で接続され、その画像解析装置3は判定装置9に接続されている。 Figure 2 shows a block diagram of the image analysis device 3 and the determination unit 9 of FIG. 1, CCD camera 1 and the two infrared LED2 are connected in an electrical circuit to the image analysis apparatus 3, the image analysis device 3 determines It is connected to the device 9. また、判定装置9は視線の頻度分布処理部4、昼夜判断手段および走行状態検出手段の結果をも含めて判断する覚醒度判定処理部5、警報出力手段6および車速センサ8に接続された信号入力手段7とで構成され、信号入力手段7は覚醒度判定処理部5に接続されている。 The determination unit 9 frequency distribution processing unit 4 of the sight line, awareness determination unit 5 for determining, including the results of the day and night determining means and traveling state detection means, the signal connected to the alarm output unit 6 and a vehicle speed sensor 8 is composed of an input means 7, the signal input means 7 is connected to the awareness determination processing unit 5.
【0014】 [0014]
以下、図3を参照して、作用について説明する。 Referring to FIG. 3, operation will be described.
【0015】 [0015]
作動に際し、まず、ステップS1で初期化し、速度、視線方向データを読み込む(ステップS2)。 In operation, first, initialized in step S1, the speed, read viewing direction data (step S2). 車両は走行中か否かを判断する(ステップS3)。 Vehicle determines whether traveling (step S3). NOの場合は戻り、YESだったら、視線方向データを読みだし(ステップ、S4)、視線方向データの頻度分布処理を行う(ステップS5)。 If NO return, it was YES, reads the viewing direction data (Step, S4), performs the frequency distribution processing viewing direction data (step S5). ついで、覚醒時のパターンである頻度分布の基準パターンを読み込み(ステップS6)、ステップS5の視線方向の頻度分布と比較し、覚醒度が低下したか否か判断する(ステップS7)。 Then, reading the reference pattern in the frequency distribution is a pattern when awake (step S6), and compared to the line-of-sight direction of the frequency distribution of the step S5, the awakening degree is determined whether decreased (step S7). NOの場合は戻り、YESだったら、その低下の度合いはレベル2か否かを判断する(ステップS8)。 If NO return, you were YES, the degree of the decrease is determined whether level 2 (step S8). NOの場合は警報レベル1をONする(ステップS10)。 If NO is ON the warning level 1 (step S10). YESだったら、レベル3か否か判断し(ステップS9)、NOの場合は警報レベル2をONし(ステップS11)、YESだったら、警報レベル3を0Nして(ステップS12)リターンし、制御を終わる。 It was YES, you were level 3 it is determined whether or not (step S9), and in the case of NO ON the warning level 2 (step S11), YES, an alarm level 3 0N (step S12) and returns the control ending the.
【0016】 [0016]
そして、警報レベル1、2、3は例えばレベル1は表示、レベル2はブザー、レベル3は光の点滅というように区分しておけばドライバは容易に判断出来る。 The warning level 1, 2 and 3 for example level 1 display, level 2 buzzer, level 3 if by classifying and so flashing lights driver easily determined. なお、図4はドライバ視野分割の例を示し、このX−Y座標に視線の頻度分布を積算したものが図5に示す視線頻度分布となる。 Incidentally, FIG. 4 shows an example of a driver vision division, that by integrating the frequency distribution of the line of sight to the X-Y coordinate becomes gaze frequency distribution shown in FIG. ここで、符号26はサイドミラー、符号27はフロントガラスをそれぞれ示している。 Here, reference numeral 26 denotes a side mirror, reference numeral 27 denotes a windscreen, respectively.
【0017】 [0017]
したがって、ドライバの体にセンサを装着することなく覚醒度低下を検出しドライバに報知することが出来る。 Thus, detecting the awareness decrease without mounting the sensor on the body of the driver can be informed to the driver.
【0018】 [0018]
図6は本発明の別の実施例の画像解析装置3と判定装置9のブロックダイヤグラムを示し、第1実施例にたいし、照度センサ10を追加して判定装置9の信号入力手段7に接続し昼、夜、夕暮れ或は明け方を照度により異なるパターンとして判定し、それらを判定の環境条件として覚醒度低下をより高い確度で判定する様にしたものである。 Figure 6 shows another embodiment block diagram of the image analysis apparatus 3 and the determination unit 9 of the present invention, against the first embodiment, connected to the signal input means 7 of the decision device 9 by adding the illuminance sensor 10 and daytime, night, determines dusk or the dawn as different patterns by illuminance is obtained by them in the manner to determine the awareness decrease with higher accuracy as the environmental conditions of the determination.
【0019】 [0019]
作用については、第1実施例と基本的に同じであるので、異なる部分だけ図7を参照して説明する。 The effect, since the first embodiment is basically the same, will be described with reference to FIG. 7 only different parts.
【0020】 [0020]
ステップS2に照度データが追加されこと以外ステップS8までは基本的に同じであり、ステップS9で昼か否か判断する。 The step S2 to step S8 except that adds the illuminance data is basically the same, it is determined whether the day in step S9. YESだったら、昼のパターンを読み込み覚醒度低下したか否か判断し、YESだったら、警報をONする(ステップS11、S14、S17)。 You were YES, the determination whether or not the day of the pattern decreases read alertness, you were YES, the ON alarm (step S11, S14, S17). ステップS9でNOの場合は、夜か否か判断し、NOの場合は夜、昼以外のパターンを読み込み、覚醒度低下か否か判断し、YESだったら、警報をONし、NOの場合はリタンする(ステップS10、S12、S15、S17)。 If NO in step S9, it is determined whether or not the evening, at night in the case of NO, reads the pattern other than daytime, it is determined whether or not the awareness decrease, you were YES, the ON an alarm, if NO, to Litan (step S10, S12, S15, S17). スッテップS10でYESの場合は、夜のパタンを読み込み覚醒度低下か否か判断し、YESだったら、警報ををONし、NOの場合はリタンして制御を終わる(ステップS13、S16、S17)。 If YES in Sutteppu S10, it is determined whether reduction read wakefulness night pattern, it was YES, then ON the alarm, in the case of NO ends the control by Litan (step S13, S16, S17) .
【0021】 [0021]
環境条件を含めて判断しているので、より的確で確度が高い判断が可能となる。 Since it is determined, including the environmental conditions, more accurate and accuracy is made possible high judgment.
【0022】 [0022]
図8は、本発明のその他の実施例を示し、第1実施例に比し、ステアリングセンサ11、アクセルセンサ12、ブレーキセンサ13およびシフトセンサ14を判定装置9の信号入力手段7にそれぞれ接続したもので、走行状態を組み入れて覚醒度低下を判断するようにしている。 Figure 8 shows other examples of the present invention, compared with the first embodiment, the steering sensor 11, an accelerator sensor 12, respectively connected to a brake sensor 13 and shift sensor 14 to the signal input means 7 of the decision device 9 what is, so that to determine the awareness decrease incorporate running state.
【0023】 [0023]
以下、図9を参照して、作用について説明する。 Referring to FIG. 9, operation will be described.
【0024】 [0024]
走行中であれば、視線、ステアリング、アクセル、ブレーキ、シフトの各データを読み込み(ステップS4)、視線頻度分布処理し、走行形態を算出処理し(ステップS5、S6)、基準パタンと大きく異なるか否か判断する(ステップS7)。 If traveling, sight, steering, accelerator, brakes, reads each data in the shift (step S4), and treated gaze frequency distribution, and calculation of the travel mode (step S5, S6), whether the reference patterns differ whether it is determined (step S7). NOの場合は戻り、YESだったら、警報出力をONし(ステップS8)、リタンして制御を終わる。 If NO return, it was YES, the ON the alarm output (step S8), and ends the Litan controlled.
【0025】 [0025]
走行状態を組み合わせて判定しているので、確度の高い判断が出来る。 Since it is determined by combining the running state, accuracy high determination can.
【0026】 [0026]
したがって、ドライバのくせや、走行する路線、時間帯等により組み合わせる要素を適切に選択すれば、要求にあった覚醒度低下検出装置を提供出来る。 Thus, the habit of the driver or, route of travel, by appropriately selecting the element to combine the time zone or the like, can be provided there to the requesting awareness decrease detector.
【0027】 [0027]
【発明の効果】 【Effect of the invention】
本発明は上記のように構成されており、以下の優れた効果を奏することができる。 The present invention is constructed as described above, it can provide the following excellent effects.
(1) ドライバの体にセンサ等を装着しないで覚醒度低下を検出するので、ドライバの疲労がなく、実用性が高い。 (1) and detects the awareness decrease without wearing the sensor or the like to the body of the driver, there is no fatigue of the driver, is highly practical.
(2) 昼と夜および夕暮れ或いは明け方における視線の変化に対応して覚醒度低下が検出出来るので、判定の確度が高い。 (2) Since the day and night and twilight or awareness decrease in response to changes in line of sight at dawn can be detected, the accuracy of determination is high.
(3) 高速、郊外路や市街地等の走行状態を検出し、それぞれの走行状態に合ったパターンで判定できるので、確度の高い判定が出来る。 (3) High-speed, to detect the running state of the suburban road or urban areas, it can be determined in patterns appropriate to the respective running state, accuracy high determination is possible.
(4) したがって、目的に合ったパターンを選択することで効率のよい覚醒度低下検出装置を提供できる。 (4) Thus, it is possible to provide an efficient awareness decrease detector by selecting patterns appropriate to the purpose.
【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS
【図1】本発明の一実施例を示す全体構成斜視図。 [1] a perspective view showing the entire configuration of an embodiment of the present invention.
【図2】図1の制御のブロック図。 2 is a block diagram of the control of Figure 1.
【図3】図1の制御のフローチャート図。 FIG. 3 is a flowchart diagram of the control of Figure 1.
【図4】ドライバの視野分割状況を示す図。 FIG. 4 is a diagram showing the viewing division status of the driver.
【図5】視線頻度分布の例を示す図。 FIG. 5 is a diagram showing an example of the line-of-sight frequency distribution.
【図6】本発明の別の実施例の制御のブロック図。 6 is a block diagram of the control of another embodiment of the present invention.
【図7】図6の制御のフローチャート図。 FIG. 7 is a flowchart diagram of the control of Figure 6.
【図8】本発明のその他の実施例の制御のブロック図。 FIG. 8 is a block diagram of a control according to another Embodiment of the present invention.
【図9】図8の制御のフローチャート図。 Figure 9 is a flow chart diagram of the control of FIG.
【符号の説明】 DESCRIPTION OF SYMBOLS
1・・・CCDカメラ2・・・赤外LED 1 ··· CCD camera 2 ... infrared LED
3・・・画像解析装置9・・・判定装置21・・・ステアリングハンドル26・・・サイドミラー27・・・フロントガラス 3 ... image analyzer 9 ... determination device 21 ... steering wheel 26 ... side mirror 27 ... windshield

Claims (3)

  1. 赤外線LED(2)で眼球に赤外線を照射しCCDカメラ(1)で眼球の動きを撮影して画像とし、その画像信号を解析して視線方向を算出する画像解析手段(3)と、視線の頻度分布処理部(4)、覚醒度判定処理部(5)、および警報出力手段(6)を備えかつ前記画像解析手段(3)に電気回路で接続された判定装置(9)とを有する覚醒度低下検出装置において、前記判定装置(9)は、速度、視線方向のデータを読み込み(S2)、走行中か否か判断し(S3)、走行中であれば前記視線方向データから前記頻度分布処理部(4)にてフロントガラスとその両側のサイドミラー近傍に対応する分割視野に視線頻度を積算して視線頻度分布処理を行い、パターン作成手段にて頻度分布パターンを作成し(S5)、予め作成した覚醒時 And eye capturing the movement of the eyeball with a CCD camera irradiated with infrared (1) in an infrared LED (2) is an image, the image analysis means for calculating the sight line direction by analyzing the image signal (3), the line of sight of the frequency distribution processing unit (4), awareness determination processing unit (5), and alarm output comprises means (6) and waking with said image analysis means (3) to be connected in an electrical circuit the determination device (9) in degrees drop detecting device, the determining device (9) the speed, read data of the line-of-sight direction (S2), or during travel whether determined (S3), the frequency distribution from the viewing direction data if traveling processor (4) integrates the gaze frequency split field corresponding windshield and in the vicinity of the side mirror on both sides perform gaze frequency distribution processing by, creating a frequency distribution pattern in the pattern creating means (S5), during the awakening that was created in advance 基準パターンを前記覚醒度判定処理部(5)に読み込み(S6)、その基準パターンと前記頻度分布処理部(4)にて作成した頻度分布パターンとを比較して覚醒度の低下を3レベルで判断し(S7)、それぞれ第1のレベルでは表示(S10)、第2のレベルではブザー(S11)、第3のレベルではライト点滅(S12)を警報出力手段(6)に出力する機能を有することを特徴とする覚醒度低下検出装置。 Said awareness determination processing unit reference pattern (5) is read in (S6), a reduction in the degree of awakening by comparing the frequency distribution pattern generated by the reference pattern and the frequency distribution processing unit (4) at three levels determining (S7), the display in the respective first level (S10), the second level buzzer (S11), in the third level has the function of outputting the alarm output means light blinking (S12) (6) awareness decrease detecting apparatus characterized by.
  2. 赤外線LED(2)で眼球に赤外線を照射しCCDカメラ(1)で眼球の動きを撮影して画像とし、その画像信号を解析して視線方向を算出する画像解析手段(3)と、視線の頻度分布処理部(4)、覚醒度判定処理部(5)、および警報出力手段(6)を備えかつ前記画像解析手段(3)に電気回路で接続された判定装置(9)とを有する覚醒度低下検出装置において、照度センサ(10)を前記判定装置(9)に接続し、その判定装置(9)は、速度、時刻、照度、視線方向のデータを読み込み(S2)、走行中か否か判断し(S3)、走行中であれば前記視線方向データから前記頻度分布処理部(4)にてフロントガラスとその両側のサイドミラー近傍に対応する分割視野に視線頻度を積算して視線頻度分布処理を行い、パターン作成 And eye capturing the movement of the eyeball with a CCD camera irradiated with infrared (1) in an infrared LED (2) is an image, the image analysis means for calculating the sight line direction by analyzing the image signal (3), the line of sight of the frequency distribution processing unit (4), awareness determination processing unit (5), and alarm output comprises means (6) and waking with said image analysis means (3) to be connected in an electrical circuit the determination device (9) in degrees drop detecting device, an illuminance sensor (10) connected to said determining device (9), not the determining device (9), the speed, time, intensity, reads the viewing direction data (S2), or during travel or determined by (S3), the line of sight frequently divided visual field by integrating the line of sight frequently if traveling from the viewing direction data corresponding to the vicinity of the side mirror on both sides and a front glass in the frequency distribution processing unit (4) It performs the distribution processing, pattern creation 段にて頻度分布パターンを作成し(S5)、予め作成した昼、夜、夕暮れの各照度によって異なる基準パターンを前記覚醒度判定処理部(5)に読み込み(S6)、その基準パターンと前記頻度分布処理部(4)にて作成した頻度分布パターンとを比較し(S8〜10)、覚醒度の低下と判断した場合に警報出力手段(6)に出力する(S17)機能を有することを特徴とする覚醒度低下検出装置。 Create a frequency distribution pattern at step (S5), daytime previously prepared, at night, reads the different reference patterns by dusk each illumination to said awareness determination processing section (5) (S6), the frequency and the reference pattern comparing the frequency distribution pattern generated by the distribution processing unit (4) (S8~10), and outputs to the alarm output means (6) when it is determined that the reduction of alertness (S17) characterized in that it has a function to the awareness decrease detection device.
  3. 赤外線LED(2)で眼球に赤外線を照射しCCDカメラ(1)で眼球の動きを撮影して画像とし、その画像信号を解析して視線方向を算出する画像解析手段(3)と、視線の頻度分布処理部(4)、覚醒度判定処理部(5)、および警報出力手段(6)を備えかつ前記画像解析手段(3)に電気回路で接続された判定装置(9)とを有する覚醒度低下検出装置において、ステアリングセンサ(11)、アクセルセンサ(12)、ブレーキセンサ(13)、およびシフトセンサ(14)からなる車両の走行状態検出手段を前記判定装置(9)に接続し、その判定装置(9)は、速度データを読み込み(S2)、走行中か否か判断し(S3)、走行中であれば視線、ステアリング、アクセル、ブレーキ、シフトの各走行状態データを読み込み( And eye capturing the movement of the eyeball with a CCD camera irradiated with infrared (1) in an infrared LED (2) is an image, the image analysis means for calculating the sight line direction by analyzing the image signal (3), the line of sight of the frequency distribution processing unit (4), awareness determination processing unit (5), and alarm output comprises means (6) and waking with said image analysis means (3) to be connected in an electrical circuit the determination device (9) in degrees drop detecting device, connected to a steering sensor (11), an accelerator sensor (12), brake sensor (13), and said determining device running state detecting means of the vehicle a shift sensor (14) (9), the determining device (9) reads the velocity data (S2), or during travel whether determined (S3), if the traveling line of sight, read steering, accelerator, brakes, each running state data in the shift ( 4)、前記視線方向データから前記頻度分布処理部(4)にてフロントガラスとその両側のサイドミラー近傍に対応する分割視野に視線頻度を積算して視線頻度分布処理を行い、パターン作成手段にて頻度分布パターンを作成し(S5)、前記走行状態データから走行形態の算出処理を行い(S6)、基準パターンと異なるか否か判断し(S7)、その結果異なると判断した場合に警報出力手段(6)に出力する(S8)機能を有することを特徴とする覚醒度低下検出装置。 4), the gaze frequency distribution processing by integrating the gaze frequency from the viewing direction data to the split field of view corresponding to the vicinity of the side mirror on both sides and a front glass in the frequency distribution processing unit (4), the pattern creating means create a frequency distribution pattern Te (S5), performed calculation processing of the traveling mode from the running state data (S6), the reference pattern is different whether it is determined (S7), an alarm output when it is determined that the result differs and outputs to the means (6) (S8) awareness decrease detecting apparatus characterized by having a function.
JP17322195A 1995-07-10 1995-07-10 The awareness decrease detection device Expired - Lifetime JP3739113B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP17322195A JP3739113B2 (en) 1995-07-10 1995-07-10 The awareness decrease detection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP17322195A JP3739113B2 (en) 1995-07-10 1995-07-10 The awareness decrease detection device

Publications (2)

Publication Number Publication Date
JPH0920157A true JPH0920157A (en) 1997-01-21
JP3739113B2 true JP3739113B2 (en) 2006-01-25

Family

ID=15956384

Family Applications (1)

Application Number Title Priority Date Filing Date
JP17322195A Expired - Lifetime JP3739113B2 (en) 1995-07-10 1995-07-10 The awareness decrease detection device

Country Status (1)

Country Link
JP (1) JP3739113B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004034905A1 (en) * 2002-10-15 2004-04-29 Volvo Technology Corporation Method and arrangement for interpreting a subjects head and eye activity
US7435227B2 (en) * 2004-09-13 2008-10-14 Biocognisafe (Bcs) Technologies Method and apparatus for generating an indication of a level of vigilance of an individual
JP2017045351A (en) * 2015-08-28 2017-03-02 トヨタ自動車株式会社 Vehicle driving support device, vehicle driving support method and program
KR101728333B1 (en) 2015-11-26 2017-04-19 현대자동차주식회사 Vehicle and controlling method thereof

Also Published As

Publication number Publication date Type
JPH0920157A (en) 1997-01-21 application

Similar Documents

Publication Publication Date Title
US6806452B2 (en) Interior rearview mirror system including a forward facing video device
US5801667A (en) Vehicle display which reduces driver's recognition time of alarm display
US6677986B1 (en) Method and device for determining light conditions in front of a moving object, in particular a motor vehicle
US6254259B1 (en) Vehicle Lamp System
US20070063855A1 (en) Method and device for warning a driver
US4983953A (en) G meter
US6229263B1 (en) Lighting-direction control unit for vehicle lamp
US6653614B2 (en) Control system to automatically control vehicle headlamps
US20050134439A1 (en) Helmet lighting system
US5214408A (en) Distance detecting apparatus for a vehicle
US20080175012A1 (en) Alerting illumination device
US8045760B2 (en) Automatic vehicle exterior light control systems
US20100283590A1 (en) Safety light device
JPH0761257A (en) Display device for vehicle
JP2000268297A (en) Safety drive evaluation device
JP2000318513A (en) Obstacle detection device for vehicle
JP2004102889A (en) Vehicle detection device
JP2010176591A (en) Display device for vehicle
US6840342B1 (en) Sensor device for a motor vehicle used for detecting environmental parameters
JPH0840140A (en) Headlamp control device
JPH07329657A (en) Warning display device for vehicle
US20080228400A1 (en) Highway safety system and method
JPH11348696A (en) Traveling path shape estimating device and running supporting device using it
US20040207519A1 (en) Vehicle acceleration/de-acceleration warning light system
JP2002109699A (en) Vehicle drive support device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040720

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040914

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050124

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050317

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050607

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050803

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20050920

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20051101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20051101

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081111

Year of fee payment: 3

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111111

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111111

Year of fee payment: 6

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111111

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111111

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141111

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term