JP7252438B2 - Abnormality detection device and sheet - Google Patents

Abnormality detection device and sheet Download PDF

Info

Publication number
JP7252438B2
JP7252438B2 JP2017157348A JP2017157348A JP7252438B2 JP 7252438 B2 JP7252438 B2 JP 7252438B2 JP 2017157348 A JP2017157348 A JP 2017157348A JP 2017157348 A JP2017157348 A JP 2017157348A JP 7252438 B2 JP7252438 B2 JP 7252438B2
Authority
JP
Japan
Prior art keywords
detection
abnormality
determination
occupant
judgment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017157348A
Other languages
Japanese (ja)
Other versions
JP2019033911A (en
Inventor
英俊 小澤
生佳 伊藤
晃 三好
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TS Tech Co Ltd
Original Assignee
TS Tech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TS Tech Co Ltd filed Critical TS Tech Co Ltd
Priority to JP2017157348A priority Critical patent/JP7252438B2/en
Priority to US16/633,124 priority patent/US11607142B2/en
Priority to PCT/JP2018/028177 priority patent/WO2019035337A1/en
Publication of JP2019033911A publication Critical patent/JP2019033911A/en
Priority to JP2023046100A priority patent/JP2023093454A/en
Application granted granted Critical
Publication of JP7252438B2 publication Critical patent/JP7252438B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、乗り物に備えられる異常検知装置及びシートに関する。 The present invention relates to an abnormality detection device and a seat provided in a vehicle.

車両を運転する運転者の健康状態が悪化した場合、車両の運転に悪影響を及ぼすおそれがあるため、健康状態の悪化を事前に検知して何らかの対策を施すことが望ましい。このような対策として、シートの座面及び背面部に埋め込まれるようにして設けられた非接触式の血流センサーによる脈波等の計測結果に基づいて、血流や血圧等の生体情報を検出推定して運転者の健康状態を把握する技術が知られている(特許文献1,2参照。)。 If the health condition of the driver who drives the vehicle deteriorates, it may adversely affect the driving of the vehicle. Therefore, it is desirable to detect the deterioration of the health condition in advance and take some countermeasures. As a countermeasure against this, biological information such as blood flow and blood pressure is detected based on measurement results such as pulse waves by non-contact blood flow sensors embedded in the seat and back of the seat. Techniques for estimating and grasping the health condition of a driver are known (see Patent Literatures 1 and 2).

特開2016-190022号公報JP 2016-190022 A 特開2016-077890号公報JP 2016-077890 A

特許文献2に記載されたように、カメラとセンサーからそれぞれ得られた情報に基づいて血圧を求めようとすると、処理が複雑になってしまい、装置の製造コストが高くなってしまう。
また、処理が複雑になることで、血圧値が正常か否かの判断が遅くなってしまう。そのため、例えば、運転を行っている乗員の健康状態に異常ありと判断する前に乗員が重篤な状態に陥ってしまい、乗員が運転操作を誤って事故を引き起こしてしまう可能性がある。
As described in Patent Document 2, when blood pressure is obtained based on information obtained from a camera and a sensor, the processing becomes complicated and the manufacturing cost of the device increases.
In addition, complicated processing delays the determination of whether the blood pressure value is normal. Therefore, for example, the occupant may fall into a serious condition before it is determined that there is an abnormality in the health condition of the occupant who is driving, and the occupant may cause an accident by making a mistake in the driving operation.

本発明は、上記課題に鑑みてなされたもので、複数種類の検出手段を用いて乗員の生体情報を検出することにより乗員の健康状態を監視する異常検出装置において、製造コストを低減するとともに、迅速な判断を行えるようにすることを目的とする。 The present invention has been made in view of the above problems, and provides an anomaly detection device that monitors the health condition of a passenger by detecting the biological information of the passenger using a plurality of types of detection means. The purpose is to enable quick decision-making.

以上の課題を解決するため、請求項1に記載の発明は、異常検知装置であって、
乗員の状態を検出する第一検出手段と、
第一検出手段とは異なる方法で乗員の状態を検出する第二検出手段と、
前記第一検出手段が検出した状態に基づいて乗員の異常の有無を判断する第一判断手段と、
前記第二検出手段が検出した状態に基づいて乗員の異常の有無を判断する第二判断手段と、
前記第一判断手段による判断と前記第二判断手段による判断のうち少なくとも一方に基づいて乗員の異常の有無を最終的に判断する第三判断手段と、
前記第一判断手段、前記第二判断手段及び前記第三判断手段のうち少なくともいずれかが異常ありと判断した場合に、乗員に注意を喚起する注意喚起手段と、を備え、
前記第三判断手段は、前記第一判断手段による判断と前記第二判断手段による判断のそれぞれの異常の有無の組み合わせにより判断を行っており、
前記第一検出手段は、乗員の画像を撮影するカメラを有し、撮影した画像から前記第一検出手段が検出した第一検出値を求めるよう構成され、
前記注意喚起手段はモニターであり、被測定者である乗員が着座するシートの前方に設けられ、異常が発生した場合と、異常が発生していない場合であっても、前記第一検出手段が撮影した前記画像や前記第一検出値を表示することを特徴とする。
In order to solve the above problems, the invention according to claim 1 is an abnormality detection device,
a first detection means for detecting the state of an occupant;
a second detection means for detecting the state of the occupant by a method different from that of the first detection means;
a first judgment means for judging whether or not there is an abnormality in the occupant based on the state detected by the first detection means;
a second judgment means for judging whether or not there is an abnormality in the occupant based on the state detected by the second detection means;
a third determination means for finally determining whether or not there is an abnormality in the occupant based on at least one of the determination by the first determination means and the determination by the second determination means;
a warning means for calling the attention of the occupant when at least one of the first determination means, the second determination means, and the third determination means determines that there is an abnormality,
The third determination means makes a determination based on a combination of the presence or absence of abnormality in the determination by the first determination means and the determination by the second determination means ,
The first detection means has a camera that captures an image of the occupant, and is configured to obtain a first detection value detected by the first detection means from the captured image,
The alerting means is a monitor, which is provided in front of the seat on which the occupant who is the person to be measured is seated, and the first detection means is activated regardless of whether an abnormality has occurred or not. It is characterized by displaying the photographed image and the first detection value .

請求項2に記載の発明は、請求項1に記載の異常検知装置であって、
前記第二検出手段は、シートにおける着座した乗員と近接する部位の表層部に設けられていることを特徴とする。
The invention according to claim 2 is the abnormality detection device according to claim 1,
The second detection means is provided on a surface layer of a portion of the seat that is close to a seated occupant .

請求項3に記載の発明は、請求項1又は2に記載の異常検知装置であって、
前記第三判断手段は、前記第一判断手段前記第二判断手段のうち早く判断した方による判断結果を最終的な判断として採用することを特徴とする。
The invention according to claim 3 is the abnormality detection device according to claim 1 or 2 ,
The third judgment means is characterized in that the judgment result by whichever of the first judgment means and the second judgment means makes the earlier judgment is adopted as the final judgment .

請求項4に記載の発明は、請求項1又は2に記載の異常検知装置であって、
前記第三判断手段は、前記第一判断手段による判断結果と前記第二判断手段による判断結果の両方に基づいて異常の有無を最終的に判断することを特徴とする。
The invention according to claim 4 is the abnormality detection device according to claim 1 or 2 ,
The third judgment means is characterized in that it finally judges whether or not there is an abnormality based on both the judgment result of the first judgment means and the judgment result of the second judgment means.

請求項に記載の発明は、請求項1から4のいずれか一項に記載の異常検知装置であって、
前記第一判断手段、前記第二判断手段及び前記第三判断手段のうち少なくともいずれかが異常ありと判断した場合に、乗員に注意を喚起する注意喚起手段を備え、
前記注意喚起手段は、携帯端末によって構成されており、
前記注意喚起手段は、判断が早い方の判断手段が異常ありと判断した場合に、振動や音による第一注意喚起を行い、判断が遅い方の判断手段が異常ありと判断した場合に、前記第一注意喚起よりも強い振動や音による第二注意喚起を行うことを特徴とする。
The invention according to claim 5 is the abnormality detection device according to any one of claims 1 to 4 ,
a warning means for calling a passenger's attention when at least one of the first determination means, the second determination means, and the third determination means determines that there is an abnormality;
The alerting means is configured by a mobile terminal,
The alerting means performs the first alerting by vibration or sound when the determination means with the faster determination determines that there is an abnormality, and when the determination means with the slower determination determines that there is an abnormality, the above-mentioned alerting means It is characterized by performing the second alerting by vibration or sound stronger than the first alerting.

請求項に記載の発明は、請求項4又は5に記載の異常検知装置であって、
前記第一検出手段及び前記第二検出手段は、検出した乗員の状態を数値として検出するよう構成されており、
前記第一判断手段及び前記第二判断手段は、検出された前記数値が所定の数値範囲内にあるか否か、又は前記数値が所定の閾値を超えたか否かによって異常の有無を判断するよう構成されており、
判断が遅い方の判断手段は、判断が早い方の判断手段の判断結果に基づいて、前記数値範囲又は閾値を補正することを特徴とする。
The invention according to claim 6 is the abnormality detection device according to claim 4 or 5 ,
The first detection means and the second detection means are configured to detect the detected state of the occupant as a numerical value,
The first judging means and the second judging means judge whether or not there is an abnormality based on whether the detected numerical value is within a predetermined numerical range or whether the numerical value exceeds a predetermined threshold value. is composed of
The judging means, which makes the judgment later, corrects the numerical range or the threshold based on the judgment result of the judging means, which makes the judgment earlier.

請求項に記載の発明は、請求項に記載の異常検知装置であって、
判断が遅い方の判断手段は、数値範囲を狭める、又は閾値を前回の検出値から遠ざけるように補正することを特徴とする。
The invention according to claim 7 is the abnormality detection device according to claim 6 ,
The slow determination means is characterized by narrowing the numerical range or correcting the threshold so as to move away from the previous detection value.

請求項に記載の発明は、請求項に記載の異常検知装置であって、
判断が遅い方の判断手段は、数値範囲を広げる、又は閾値を前回の検出値に近づけるように補正することを特徴とする。
The invention according to claim 8 is the abnormality detection device according to claim 6 ,
The slow determination means is characterized by widening the numerical range or correcting the threshold so that it approaches the previous detection value.

請求項に記載の発明は、請求項1からのいずれか一項に記載の異常検知装置であって、
第一検出手段と第二検出手段とをそれぞれ複数備え、
前記第一判断手段及び前記第二判断手段は、前記第一検出手段が検出した複数の第一検出値及び前記第二検出手段が検出した複数の第二検出値のうちの少なくとも2つの検出値に基づいて、異常の有無を判定することを特徴とする。
The invention according to claim 9 is the abnormality detection device according to any one of claims 1 to 8 ,
A plurality of first detection means and second detection means are provided,
The first determination means and the second determination means determine at least two detection values among the plurality of first detection values detected by the first detection means and the plurality of second detection values detected by the second detection means. Based on, it is characterized by determining the presence or absence of abnormality.

請求項10に記載の発明は、請求項1からのいずれか一項に記載の異常検知装置であって、
記第一検出値は、目の面積における瞳の面積割合上眼瞼と下眼瞼との距離、頭部の移動距離、頭部の移動速度のいずれかであることを特徴とする。
The invention according to claim 10 is the abnormality detection device according to any one of claims 1 to 9 ,
The first detection value is any one of the ratio of the area of the pupil to the area of the eye , the distance between the upper eyelid and the lower eyelid, the moving distance of the head, and the moving speed of the head.

請求項11に記載の発明は、請求項1から10のいずれか一項に記載の異常検知装置であって、
第二検出手段は、体温、脈拍、血圧、呼吸数、血糖値、脳波の少なくともいずれかの生体情報を検出する生体センサーを有し、
検出した生体情報から前記第二検出手段が検出した第二検出値を求めるよう構成されていることを特徴とする。
The invention according to claim 11 is the abnormality detection device according to any one of claims 1 to 10 ,
the second detection means has a biosensor that detects at least one biometric information of body temperature, pulse, blood pressure, respiratory rate, blood sugar level, and electroencephalogram;
The second detection value detected by the second detection means is obtained from the detected biological information.

請求項12に記載の発明は、請求項10又は11に記載の異常検知装置であって、
前記第一判断手段は、前記第一検出手段が検出した第一検出値及び前記第二検出手段が検出した第二検出値に基づいて異常の有無を判断することを特徴とする。
The invention according to claim 12 is the abnormality detection device according to claim 10 or 11 ,
The first judgment means judges whether or not there is an abnormality based on the first detection value detected by the first detection means and the second detection value detected by the second detection means.

請求項13に記載の発明は、請求項11又は12に記載の異常検知装置であって、
所定期間における乗員の状態の変化を検出する第三検出手段を備え、
前記第一判断手段又は前記第二判断手段は、前記第三検出手段が検出した状態の変化に基づいて、異常の有無の判断条件を補正することを特徴とする。
The invention according to claim 13 is the abnormality detection device according to claim 11 or 12 ,
A third detection means for detecting a change in the state of the occupant during a predetermined period of time,
The first judging means or the second judging means is characterized in that the conditions for judging whether there is an abnormality are corrected based on the change in the state detected by the third detecting means.

請求項14に記載の発明は、シートであって、
請求項1から13のいずれか一項に記載の異常検知装置を備えたことを特徴とする。
The invention according to claim 14 is a sheet,
It is characterized by comprising the abnormality detection device according to any one of claims 1 to 13 .

請求項1に記載の発明によれば、第一、第二判断手段それぞれの判断結果に基づいて最終的な判断を行うので、各検出手段から得られた複数の数値を演算して一つの判断を行う場合に比べて簡素な処理で異常有無の判断を行うことが可能となるため、装置の製造コストを低減することが可能になる。
また、判断の仕組みが簡素であるため、迅速な判断を行うことが可能となる。
さらに、注意喚起を受けた乗員やその同乗者は、当該乗員が急に体調を崩した場合に備えておくことが可能となる。
According to the first aspect of the invention, the final judgment is made based on the judgment results of the first and second judging means. Since it is possible to determine whether or not there is an abnormality with a simpler process than when performing
Moreover, since the mechanism of judgment is simple, it becomes possible to make quick judgment.
Furthermore, the occupant and his/her fellow passenger who have been alerted can be prepared in case the occupant suddenly becomes ill.

請求項に記載の発明によれば、乗員の健康状態に異常が発生した場合に、乗員やその同乗者に迅速に知らせることが可能となる。 According to the third aspect of the invention, it is possible to quickly inform the passenger and his/her fellow passengers when an abnormality occurs in the health condition of the passenger.

請求項に記載の発明によれば、一方の判断手段のみで最終的な判断を行う場合に比べ異常の有無をより正確に判断することが可能となる。 According to the fourth aspect of the present invention, it is possible to more accurately determine the presence or absence of an abnormality as compared with the case where only one determining means makes the final determination.

請求項に記載の発明によれば、第二の注意喚起によって、注意喚起が二度行われることになるため、第一の注意喚起をあまり意識しなかった乗員も注意するようになる。 According to the fifth aspect of the present invention, since the second alerting is performed twice, even the occupant who was not very aware of the first alerting comes to pay attention.

請求項に記載の発明によれば、異常有無の判断を数値の比較のみで行うことができるため、装置をより簡素かつ処理の早いものにすることができる。 According to the sixth aspect of the invention, the presence or absence of an abnormality can be determined only by comparing numerical values, so that the apparatus can be made simpler and faster.

請求項に記載の発明によれば、その後求められる検出値が数値範囲外である、又は閾値を超えたと判断されやすくなるため、より早い段階で異常を検知することが可能となる。 According to the seventh aspect of the present invention, it becomes easier to determine that the detected value obtained thereafter is out of the numerical range or exceeds the threshold value, so that it is possible to detect an abnormality at an earlier stage.

請求項に記載の発明によれば、その後求められる検出値が数値範囲内である、又は閾値を超えていないと判断されやすくなるため、より確実に異常が生じた段階で異常ありと判断されることとなるため、異常の有無の判断をより正確に行うことができる。 According to the eighth aspect of the invention, since it is easier to determine that the detected value obtained thereafter is within the numerical range or does not exceed the threshold value, it is more reliably determined that there is an abnormality at the stage when it occurs. Therefore, the presence or absence of abnormality can be determined more accurately.

請求項に記載の発明によれば、乗員の好みに応じて用いる検出値の組み合わせを変えることにより、異常有無の判断の精度を調節することができる。 According to the ninth aspect of the invention, by changing the combination of detection values to be used according to the occupant's preference, it is possible to adjust the accuracy of the determination of the presence or absence of an abnormality.

請求項10に記載の発明によれば、乗員の肌の血色等から血圧や心拍数を求めたり、瞼が開いているか否かによって居眠りをしていないかどうかを判断したり、頭部の動きによって眠気に襲われたりしていないか等を判断することができる。 According to the tenth aspect of the invention, blood pressure and heart rate are obtained from the color of the skin of the occupant, it is determined whether the occupant is dozing off based on whether the eyelids are open, and movement of the head of the occupant is determined. It is possible to determine whether or not the user is drowsy.

請求項11に記載の発明によれば、体温、脈拍、血圧、呼吸数は基本的な生体情報であり、これらのいずれかを測定すれば、乗員の健康状態を比較的正確に掴むことが可能となる。 According to the eleventh aspect of the invention, body temperature, pulse, blood pressure, and respiratory rate are basic biological information, and if any of these are measured, it is possible to grasp the health condition of the occupant relatively accurately. becomes.

請求項12に記載の発明によれば、例えば、暗くて第一検出手段であるカメラによる撮影がうまくできず、第1判断手段による正確な判断が困難となった場合等に、第二検出値も利用することで、第一判断手段による判断を補い、正確なものとすることができる。 According to the invention of claim 12 , for example, when it is dark and the camera, which is the first detection means, cannot take a picture well, and it becomes difficult to make an accurate judgment by the first judgment means, the second detection value can be used to supplement the judgment by the first judging means and make it accurate.

請求項13に記載の発明によれば、状態が変化した分だけ生体情報の数値範囲や閾値を変更することで、異常ありと誤って判断してしまうことを抑制することが可能となる。 According to the thirteenth aspect of the invention, by changing the numerical range and the threshold of the biometric information by the amount corresponding to the state change, it is possible to suppress erroneous determination that there is an abnormality.

請求項14に記載の発明によれば、第二検出手段が乗員の近傍に位置することになるため、乗員の状態をより正確に検出することが可能となる。 According to the fourteenth aspect of the invention, since the second detection means is positioned near the passenger, it is possible to detect the passenger's condition more accurately.

本発明の第1,第2実施形態に係る異常検知装置の構成を表すブロック図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a block diagram showing the structure of the abnormality detection apparatus which concerns on 1st, 2nd embodiment of this invention. 図1の異常検知装置を備えた乗り物の乗員室内を後方から見たときの概略図である。FIG. 2 is a schematic view of the interior of a passenger compartment of a vehicle equipped with the abnormality detection device of FIG. 1 as viewed from the rear; 図1の異常検知装置を備えたシートの側面図である。FIG. 2 is a side view of a seat provided with the abnormality detection device of FIG. 1; 図1の異常検知装置における異常有無の判断を表す概念図である。FIG. 2 is a conceptual diagram showing determination of the presence/absence of an abnormality in the abnormality detection device of FIG. 1; 同実施形態の変形例に係る異常検知装置の構成を表すブロック図である。It is a block diagram showing the structure of the abnormality detection apparatus based on the modification of the same embodiment.

<第1実施形態 >
まず、本発明の第1実施形態に係る異常検知装置の概略構成について説明する。図1は異常検知装置10のブロック図、図2はこの異常検知装置10を備えた乗り物100の乗員室内を後方から見たときの概略図、図3はこの異常検知装置10を備えたシート200の側面図である。
なお、図2には、乗り物100の乗員室内として乗用車のものを例示したが、本発明は、バスやトラック等の他の自動車にも適用可能であることは勿論、鉄道や船舶、航空機等の自動車以外の乗り物にも適用可能である。
<First Embodiment>
First, a schematic configuration of the abnormality detection device according to the first embodiment of the present invention will be described. FIG. 1 is a block diagram of the abnormality detection device 10, FIG. 2 is a schematic view of the passenger compartment of a vehicle 100 equipped with this abnormality detection device 10, and FIG. 3 is a seat 200 equipped with this abnormality detection device 10. is a side view of the.
Although FIG. 2 illustrates a passenger car as the passenger compartment of the vehicle 100, the present invention can of course be applied to other automobiles such as buses and trucks. It is also applicable to vehicles other than automobiles.

本実施形態に係る異常検知装置10は、乗り物100に備えられるものであって、乗員の健康状態に異常が生じていないかどうかを監視するためのものである。この異常検知装置10は、図1に示したように、第一検出部1、第二検出部2、報知部3、装置本体4等を備えて構成されている。
これらは、有線又は無線で通信可能に接続されている。有線接続とする場合には、乗り物に配設されたワイヤーハーネスを利用してもよいし、専用の配線を設けるようにしてもよい。一方、無線接続とする場合には、Bluetooth(登録商標)等の近距離無線通信を利用するのが好ましい。
An abnormality detection device 10 according to the present embodiment is provided in a vehicle 100 and is for monitoring whether or not there is an abnormality in the health condition of the occupant. As shown in FIG. 1, the abnormality detection device 10 includes a first detection section 1, a second detection section 2, a notification section 3, a device main body 4, and the like.
These are communicably connected by wire or wirelessly. In the case of wire connection, a wire harness installed in the vehicle may be used, or dedicated wiring may be provided. On the other hand, in the case of wireless connection, it is preferable to use short-range wireless communication such as Bluetooth (registered trademark).

第一検出部1は、生体情報を含む乗員の状態を検出するためのものであり、本実施形態においては、カメラで構成されている。カメラは静止画を撮影するスチルカメラであっても動画を撮影するビデオカメラであってもよいが、乗員の状態を、乗員が乗車している間撮影し続ける必要があることからビデオカメラとするのが好ましい。
第一検出部1は、専用の装置としてもよいし、市販のカメラに通信機能を搭載したものとしてもよい。
第一検出部1の電力や装置本体4との接続方式は、特に限定されるものではないが、第一検出部1は、長時間の使用が見込まれるため、装置本体4と有線で接続し、装置本体4から電源の供給を受けるようにするのが好ましい。
The first detection unit 1 is for detecting the state of the occupant including biological information, and is composed of a camera in this embodiment. The camera may be a still camera that captures still images or a video camera that captures moving images. is preferred.
The first detection unit 1 may be a dedicated device, or may be a commercially available camera equipped with a communication function.
The power of the first detection unit 1 and the connection method with the device main body 4 are not particularly limited, but since the first detection unit 1 is expected to be used for a long time, it is connected to the device main body 4 by wire. , preferably receives power supply from the device main body 4 .

第一検出部1は、装置本体4から制御信号を受信したことに基づいて撮影を開始したり行っていた撮影を終了したりするようになっている。
また、第一検出部1は、撮影した画像の画像データを装置本体4へ送信するようになっている。
The first detection unit 1 starts photographing or ends the photographing that has been in progress based on the reception of the control signal from the apparatus main body 4 .
Also, the first detection unit 1 transmits image data of the photographed image to the apparatus main body 4 .

また、第一検出部1は、一の乗り物に対して、一つ又は複数備えることが可能である。
第一検出部1の設置箇所は、乗り物の種類にもよるが、乗員を撮影することが可能な位置でさえあれば特に限定されるものではない。
乗り物が自動車である場合には、例えば図2に示したように、バックミラー110や、天井120、インパネ130、ドア140等に、後方を撮影できるように設けることが考えられる。
なお、図2には、第一検出部1を運転席の周囲にのみ設けた場合を例示したが、助手席等の他の座席の周囲に設けるようにしてもよい。
また、本発明を適用しようとする乗り物が、前後方向に複数並ぶシートを備えたものである場合には、前側のシートの背面に、後ろ側のシートの方向を撮影できるように設けることもできる。
Also, one vehicle or a plurality of first detection units 1 can be provided for one vehicle.
The installation position of the first detection unit 1 is not particularly limited as long as it is a position capable of photographing the occupant, although it depends on the type of vehicle.
When the vehicle is an automobile, for example, as shown in FIG. 2, it is conceivable to provide a rearview mirror 110, a ceiling 120, an instrument panel 130, a door 140, etc. so that the rear can be photographed.
Although FIG. 2 illustrates the case where the first detection unit 1 is provided only around the driver's seat, it may be provided around other seats such as the front passenger seat.
In addition, when the vehicle to which the present invention is applied has a plurality of seats arranged in the front-rear direction, it may be provided on the back surface of the front seat so that the direction of the rear seat can be photographed. .

第二検出部2は、第一検出部1と異なる方法で乗員の状態を検出するものである。本実施形態においては、乗員の体温、脈拍、血圧、呼吸数等のうち少なくともいずれかの生体情報を、乗員と直接接触することにより、又は乗員から得られる情報(反射又は透過してきた光や電磁波等)に基づいて間接的に検出するものとなっている。
第二検出部2は、専用の装置として構成してもよいし、市販の血圧計や体温計、生体センサー等に通信機能を搭載したものとしてもよい。
The second detector 2 detects the state of the occupant by a method different from that of the first detector 1 . In this embodiment, at least one biological information of the occupant's body temperature, pulse, blood pressure, respiratory rate, etc. is obtained by direct contact with the occupant or information obtained from the occupant (reflected or transmitted light or electromagnetic waves etc.).
The second detection unit 2 may be configured as a dedicated device, or may be a commercially available sphygmomanometer, thermometer, biosensor, or the like equipped with a communication function.

なお、第二検出部2を、間接的に状態を検出するものとする場合には、装置本体4から制御信号を受信したことに基づいて光や圧力波(音波や電磁波)、振動等を乗員の方向に向けて出力するように構成する。ここで、電磁波とは、100MHz程度の電波やマイクロ波を始め、赤外光、可視光、紫外光、X線等を含む広義の電磁波を意味しており、人体に悪影響を及ぼさない範囲で好適な電磁波が使用される。
また、この場合、第二検出部2を、乗員の体表で反射した、あるいは乗員を透過した光や圧力波等を検出するように構成する。このようにすれば、第二検出部2は、乗員と接する必要が無くなるため、比較的自由な位置に設けることが可能となる。
When the second detection unit 2 indirectly detects the state, light, pressure waves (sound waves and electromagnetic waves), vibrations, etc. are detected by the occupant based on the reception of the control signal from the device main body 4. configured to output in the direction of Here, the electromagnetic wave means a wide range of electromagnetic waves including radio waves and microwaves of about 100 MHz, infrared light, visible light, ultraviolet light, X-rays, etc., and is suitable within a range that does not adversely affect the human body. electromagnetic waves are used.
In this case, the second detection unit 2 is configured to detect light, pressure waves, and the like that are reflected by the body surface of the occupant or transmitted through the occupant. With this configuration, the second detection section 2 does not need to come into contact with the occupant, so it can be provided at a relatively free position.

また、第二検出部2は、検出した情報に基づく第二検出値(第一検出値については後述する)を算出するようになっている。なお、第二検出値の算出は、後述する装置本体4の制御部41で行うようにしてもよい。
また、第二検出部2は、装置本体4から測定開始を指示する制御信号を受信したり、算出した第二検出値を装置本体4へ送信したりするようになっている。
Also, the second detection unit 2 calculates a second detection value (the first detection value will be described later) based on the detected information. Note that the calculation of the second detection value may be performed by the control unit 41 of the apparatus main body 4, which will be described later.
The second detection unit 2 also receives a control signal for instructing the start of measurement from the device main body 4 and transmits the calculated second detection value to the device main body 4 .

なお、第二検出部2の電力や装置本体4との接続方式は、特に限定されるものではないが、第二検出部2は、乗り物が走行している間、乗員の状態を検出し続けるようにする必要があることから、装置本体4と有線で接続し、装置本体4から電源の供給を受けるようにするのが好ましい。 The power of the second detection unit 2 and the connection method with the device main body 4 are not particularly limited, but the second detection unit 2 continues to detect the state of the occupant while the vehicle is running. Therefore, it is preferable to connect to the apparatus main body 4 by wire so that power is supplied from the apparatus main body 4 .

また、第二検出部2は、一のシート200に対して、一つ又は複数備えることが可能である。
第二検出部2の取り付け位置は、特に限定されるものではないが、図3に示したように、シート200における着席した乗員と近接する部位、すなわち、シートボトム210の上側表層部、シートバック220の前側表層部、あるいはヘッドレスト230の前側表層部等とするのが、第二検出部2が発する光や電磁波等を減衰させることなく透過させる観点から好ましい。
なお、シート200が、図示しないオットマンやフットレスト、ネックレスト等を備える場合には、これらに備えるようにしてもよい。
Also, one or a plurality of second detection units 2 can be provided for one sheet 200 .
Although the mounting position of the second detection unit 2 is not particularly limited, as shown in FIG. 220 or the front surface layer of the headrest 230 is preferable from the viewpoint of transmitting light, electromagnetic waves, etc. emitted by the second detection unit 2 without attenuation.
If the seat 200 is provided with an ottoman, a footrest, a neckrest, etc. (not shown), these may be provided.

報知部3は、例えば、モニターやスピーカー、振動機等で構成される。そして、後述する装置本体4から受信した制御信号に基づいて、異常の有無を、表示や音声、振動等によって乗員に報知するようになっている。
報知部3を振動機とする場合には、振動が伝わりやすいよう、シート200における着席した乗員と近接する部位に設けるのが好ましい。
The notification unit 3 is composed of, for example, a monitor, a speaker, a vibrator, and the like. Based on a control signal received from the device main body 4, which will be described later, the presence or absence of an abnormality is notified to the occupant by display, sound, vibration, or the like.
When the notification unit 3 is a vibrator, it is preferably provided at a portion of the seat 200 close to the seated occupant so that the vibration can be easily transmitted.

一方、報知部3をモニターで構成する場合には、被測定者の視認しやすい位置に設けるのが好ましい。具体的には、シート200の前方(自動車の場合にはインパネ130や、前後方向に複数並ぶシートを備えたものである場合には、前側のシートの背面等)に設けるとよい。
また、報知部3をモニターで構成すれば、異常発生の報知の他、第一検出部1が撮影した画像や検出値を必要に応じて表示する事もできる。このようにすれば、異常がない場合であっても、乗員の現状の状態を確認することが可能となる。
On the other hand, when the notification unit 3 is configured with a monitor, it is preferable to provide it at a position where the subject can easily visually recognize it. Specifically, it is preferably provided in front of the seat 200 (in the case of an automobile, the instrument panel 130, or in the case of a vehicle equipped with a plurality of seats arranged in the front-rear direction, the back surface of the front seat, etc.).
Further, if the notification unit 3 is configured with a monitor, it is possible to display an image captured by the first detection unit 1 and a detection value as needed, in addition to notification of occurrence of an abnormality. In this way, even if there is no abnormality, it is possible to check the current state of the occupant.

装置本体4は、図1に示したように、制御部41、通信部42、記憶部43等を備えて構成されている。
制御部41は、CPU、RAM等で装置本体4の各部の動作を統括的に制御するように構成されている。具体的には、乗り物のエンジンがかけられたことや、乗員がシートに着席したこと、第一検出部1や第二検出部2から信号を受信したこと等に基づいて、記憶部43に記憶されている各種処理プログラムを読み出してRAMに展開し、当該処理プログラムに従って各種処理を実行する。
As shown in FIG. 1, the device main body 4 includes a control section 41, a communication section 42, a storage section 43, and the like.
The control unit 41 is configured to centrally control the operation of each unit of the apparatus main body 4 using a CPU, a RAM, and the like. Specifically, the information is stored in the storage unit 43 based on the fact that the engine of the vehicle has been started, the fact that the passenger has taken a seat, the fact that the signal has been received from the first detection unit 1 or the second detection unit 2, or the like. Various processing programs stored therein are read out and developed in the RAM, and various processing is executed according to the processing programs.

通信部42は、制御信号を第一検出部1や第二検出部2へ送信したり、第一検出部1から画像データを受信したり、第二検出部2から第二検出値を受信したり、制御信号を報知部3へ送信したり、乗り物100の図示しない制御装置との間で制御信号を送受信したりすることが可能となっている。 The communication unit 42 transmits control signals to the first detection unit 1 and the second detection unit 2, receives image data from the first detection unit 1, and receives second detection values from the second detection unit 2. Also, it is possible to transmit a control signal to the notification unit 3 and to transmit/receive a control signal to/from a control device (not shown) of the vehicle 100 .

記憶部43は、HDD(Hard Disk Drive)や半導体メモリー等により構成されている。記憶部43には、各種処理プログラムや、当該プログラムの実行に用いる所定の閾値や数値範囲等を記憶している。
閾値は、例えば、目と認識した領域における開いた状態とみなすことのできる瞳の面積(濃度値の低い画素数)の割合や、上眼瞼と下眼瞼との距離、あるいは頭部と認識した領域における通常範囲とみなすことのできる移動距離や移動速度の上限値等が記憶されている。
The storage unit 43 is configured by an HDD (Hard Disk Drive), a semiconductor memory, or the like. The storage unit 43 stores various processing programs, predetermined threshold values, numerical ranges, and the like used for executing the programs.
The threshold is, for example, the ratio of the pupil area (the number of pixels with low density values) that can be regarded as open in the region recognized as the eyes, the distance between the upper eyelid and the lower eyelid, or the region recognized as the head The upper limits of the movement distance and the movement speed that can be regarded as the normal range in , etc. are stored.

数値範囲は、第二検出部2が測定する項目及び第一検出部1で生体情報を検出する場合の測定項目に対応したもので、その測定項目における標準的なもの(いわゆる正常値)が記憶されている。なお、複数の測定項目に対応した複数種類の数値範囲を記憶しておいて、接続する第二検出部2に応じて切り替えできるようにしてもよい。
また、記憶部43は、第一検出部1や第二検出部2から受信した検出値を記憶することが可能となっている。
The numerical range corresponds to the items measured by the second detection unit 2 and the measurement items when biometric information is detected by the first detection unit 1, and the standard values (so-called normal values) for the measurement items are stored. It is It should be noted that a plurality of types of numerical ranges corresponding to a plurality of measurement items may be stored and switched according to the connected second detection unit 2 .
In addition, the storage unit 43 can store detection values received from the first detection unit 1 and the second detection unit 2 .

このように構成された装置本体4の制御部41は、記憶部43に記憶されている処理プログラムに従って以下のような動作をする。
例えば、制御部41は、乗員の操作や、乗り物のエンジンがかけられたことや、乗員がシートに着席したこと等に基づいて、撮影の開始を指示する信号を、通信部42を介して、第一検出部1へ送信するようになっている。
また、制御部41は、撮影の開始を指示する信号の送信と同時又は送信した後、測定の開始を指示する信号を、通信部42を介して、所定期時間毎に第二検出部2へ繰り返し送信するようになっている。
The control unit 41 of the device body 4 configured as described above operates as follows according to the processing program stored in the storage unit 43 .
For example, the control unit 41 sends a signal for instructing the start of photographing through the communication unit 42 based on the operation of the passenger, the start of the engine of the vehicle, the seating of the passenger in the seat, etc. It is designed to transmit to the first detection unit 1 .
At the same time as or after transmitting a signal instructing the start of imaging, the control unit 41 sends a signal instructing the start of measurement to the second detection unit 2 at predetermined time intervals via the communication unit 42. It is designed to be sent repeatedly.

また、制御部41は、検出した乗員の状態から第一検出値を求めるようになっている。具体的には、第一検出部1から受信した画像データから、脈波等の生体情報を直接抽出したり、画像から目や頭部を認識し、例えば、目の面積における瞳の面積割合(黒い画素の割合)や上眼瞼と下眼瞼との距離の時間変化、頭部が動いた場合の移動速度等を算出したりする。すなわち、制御部41は、本発明における第一検出手段をなす。
なお、第一検出値の算出は、第一検出部1において行うようにしてもよい。
Also, the control unit 41 obtains a first detection value from the detected state of the passenger. Specifically, from the image data received from the first detection unit 1, biological information such as a pulse wave is directly extracted, and the eyes and head are recognized from the image. ratio of black pixels), temporal changes in the distance between the upper eyelid and the lower eyelid, and movement speed when the head moves. That is, the control section 41 constitutes first detection means in the present invention.
Note that the calculation of the first detection value may be performed in the first detection unit 1 .

また、制御部41は、撮影された画像に基づいて異常の有無を判断するようになっている。具体的には、求めた第一検出値を対応する閾値又は数値範囲と比較することにより判断する。
瞳の面積や上眼瞼と下眼瞼との距離等を判断に用いる場合には、第一検出値が閾値未満である状態が所定時間続いた場合に、瞼を閉じている、すなわち居眠りや体調不良が疑われる状態であると判断する。
一方、頭部の動き等を判断に用いる場合には、第一検出値が閾値以上であると、異常に速い速度で首を曲げたことになるため、居眠りや意識の低下が疑われる状態であると判断する。
Also, the control unit 41 determines whether or not there is an abnormality based on the captured image. Specifically, determination is made by comparing the obtained first detection value with the corresponding threshold value or numerical range.
When the area of the pupil, the distance between the upper eyelid and the lower eyelid, etc. are used for determination, the eyelid is closed when the state in which the first detection value is less than the threshold continues for a predetermined time, that is, dozing off or poor physical condition is suspected.
On the other hand, when the movement of the head is used for judgment, if the first detection value is equal to or higher than the threshold, it means that the neck is bent at an abnormally high speed, so it is suspected that the person is falling asleep or has decreased consciousness. judge there is.

一方、画像データから生体情報を検出する場合、血圧値や呼吸数等を第一検出値として求め、第一検出値が数値範囲内にあるか否かによって異常の有無を判断する。
このような処理を行うことにより、制御部41は、本発明における判断手段(第一判断手段)をなす。
On the other hand, when biometric information is detected from image data, a blood pressure value, a respiratory rate, and the like are obtained as first detection values, and the presence or absence of an abnormality is determined based on whether the first detection values are within a numerical range.
By performing such processing, the control unit 41 constitutes a determination means (first determination means) in the present invention.

また、制御部41は、第二検出部2から第二検出値を受信する度に、予め記憶部に格納されている所定の数値範囲R(図4参照)と比較し、第二検出値が数値範囲R内にあれば異常なし、数値範囲R外にあれば何らかの異常ありと判定するようになっている。すなわち、第二検出部2及び制御部41は、本発明における判断手段(第二判断手段)として機能する。こうすることで、比較的簡素なプログラム(仕組み)で判断条件の補正を行うことが可能となる。 Further, every time the control unit 41 receives the second detection value from the second detection unit 2, it compares it with a predetermined numerical range R (see FIG. 4) stored in advance in the storage unit, and determines that the second detection value is If it is within the numerical range R, it is judged that there is no abnormality, and if it is outside the numerical range R, it is judged that there is some kind of abnormality. That is, the second detection unit 2 and the control unit 41 function as determination means (second determination means) in the present invention. By doing so, it is possible to correct the judgment condition with a relatively simple program (mechanism).

また、制御部41は、第一検出値に基づく判断と、第二検出値に基づく判断のうち少なくともいずれかを用いて最終的な異常の有無を判断するようになっている。すなわち、本実施形態では、第一検出値に基づく判断と第二検出値に基づく判断の両方に基づいて最終的な判断をする場合と、いずれか一方に基づいて最終的な判断をする場合と、がある。
本実施形態においては、両方の判断に基づいて最終的な判断を行うことを基本としているが、ユーザーの操作や検出部1,2が検出する項目等に応じて、両方に基づく判断、一方に基づく判断のいずれかを予め設定する構成としてもよい。
いずれか一方の判断に基づいて最終的な判断を行う場合については後述する。
Further, the control unit 41 makes a final judgment as to whether or not there is an abnormality using at least one of the judgment based on the first detection value and the judgment based on the second detection value. That is, in this embodiment, the final judgment is made based on both the judgment based on the first detected value and the judgment based on the second detected value, and the case where the final judgment is made based on either one. , there is.
In this embodiment, the final judgment is basically made based on both judgments, but depending on the user's operation and the items detected by the detection units 1 and 2, judgment based on both, one A configuration may be adopted in which any one of the judgments based on is set in advance.
A case in which the final determination is made based on one of the determinations will be described later.

制御部41は、第一検出値に基づく判断と第二検出値に基づく判断の両方が異常なしであった場合は異常なし、両方が異常ありであった場合は異常ありと判断する。
ここで、第一検出値に基づく判断と第二検出値に基づく判断が異なる場合が考えられる。そこで、装置本体4は、(a)一方が異常なしでも他方が異常ありであれば異常ありと最終判断する、(b)一方が異常ありでも他方が異常なしであれば異常なしと最終判断する、のいずれかを選択するようになっている。こうすることで、(a)が選択された場合には、異常ありと判断されやすくなるため、乗員の健康状態をより慎重に監視することができる。一方、(b)が選択された場合には、異常なし判断されやすくなるため、乗員が必要以上に不安を感じてしまうのを抑制することができる。
The control unit 41 determines that there is no abnormality when both the determination based on the first detection value and the determination based on the second detection value are normal, and determines that there is an abnormality when both are abnormal.
Here, the judgment based on the first detected value and the judgment based on the second detected value may be different. Therefore, the apparatus main body 4 (a) makes a final judgment that there is an abnormality if one is normal but the other is abnormal, and (b) if one is abnormal but the other is normal, it finally judges that there is no abnormality. , is to be selected. By doing so, when (a) is selected, it is likely to be determined that there is an abnormality, so the health condition of the occupant can be monitored more carefully. On the other hand, when (b) is selected, it is easier to determine that there is no abnormality, so it is possible to prevent the occupant from feeling unnecessarily anxious.

なお、第一検出値に基づく判断と第二検出値に基づく判断が異なる場合の設定として、(c)判断結果に関わらず、第一検出値(第二検出値)に基づく判断を優先して採用する、という選択が行えるようにしてもよい。 In addition, as a setting when the judgment based on the first detected value and the judgment based on the second detected value are different, (c) regardless of the judgment result, the judgment based on the first detected value (second detected value) is given priority. You may enable it to select to employ|adopt.

また、第一検出値と数値範囲の上限又は下限もしくは閾値との差がほとんど無く、第一検出値に基づく判断が正確に行われない可能性がある場合には、第二検出値を利用して判断を行うようにしてもよい。例えば、運転している乗員が瞼をうっすらと開きながら居眠りをしてしまった場合、夜間で暗い場合、日差しが強い場合等、第一検出部1による画像からは目の状態(瞼を開いているか閉じているか等)を判断しにくい場合がある。このような場合、第二検出値を用いれば、睡眠による血圧や心拍数の低下が見られるか否かを判断することで、居眠りしているか否かを精度よく発見することができる。つまり、第一検出値に基づく判断が第二検出値によって補われることとなる。 In addition, if there is almost no difference between the first detected value and the upper or lower limit of the numerical range or the threshold, and there is a possibility that the judgment based on the first detected value will not be made accurately, the second detected value is used. You may make a decision by For example, if a driver falls asleep while driving with their eyelids slightly open, if it is dark at night, if the sun is strong, etc., the state of the eyes (eyelids open) can be determined from the image by the first detection unit 1. or closed) may be difficult to determine. In such a case, if the second detection value is used, it is possible to accurately detect whether or not the person is dozing off by determining whether or not a decrease in blood pressure or heart rate due to sleep is observed. That is, the determination based on the first detection value is supplemented by the second detection value.

また、制御部41は、第一検出値や第二検出値が数値範囲や閾値から極端に大きく外れる場合に、第一検出値に基づく判断と第二検出値に基づく判断のうち、先に行われた判断を最終的な判断結果として採用するようになっている。具体的には、例えば、数値範囲の上限よりも所定値分だけ高い上閾値T(図4参照)と、数値範囲の下限よりも所定値分だけ低い下閾値Tを設定し、先の判断において、検出値が数値範囲R外にあると判定した場合に、予め記憶部に格納されている所定の閾値T,Tと比較し、検出値が数値範囲Rの上限と上閾値Tとの間又は数値範囲Rの下限と下閾値Tとの間にあれば、第1の異常が発生した(異常の可能性が高い)と判断して後の判断が行われるのを待ち、検出値が上閾値Tよりも上又は下閾値Tよりも下であれば、第1の異常よりもレベルの高い第2の異常が発生した(異常の可能性が大である)と判断して、後の判断を待つことなく最終的な判断結果とするようにしている。こうすることで、深刻な異常の発生をより迅速に検知し、事故の発生を抑制することが可能となる。 Further, when the first detected value or the second detected value deviates significantly from the numerical range or the threshold value, the control unit 41 performs the judgment based on the first detected value or the second detected value first. The resulting judgment is adopted as the final judgment result. Specifically, for example, an upper threshold TU (see FIG. 4) that is higher than the upper limit of the numerical range by a predetermined value and a lower threshold TL that is lower than the lower limit of the numerical range by a predetermined value are set. In the determination, when it is determined that the detected value is outside the numerical range R, the detected value is compared with the predetermined threshold values T U and T L stored in advance in the storage unit, and the detected value is the upper limit of the numerical range R and the upper threshold value T U or between the lower limit of the numerical range R and the lower threshold value TL , it is determined that the first abnormality has occurred (the possibility of abnormality is high), and the subsequent determination is awaited. , if the detected value is higher than the upper threshold value TU or lower than the lower threshold value TL , it is determined that a second abnormality having a higher level than the first abnormality has occurred (high possibility of abnormality). I make a decision and make it the final decision without waiting for a later decision. By doing so, it is possible to detect the occurrence of a serious abnormality more quickly and suppress the occurrence of an accident.

また、制御部41は、遅い方の判断を行う際に、早い方の判断結果に基づいて、異常の有無の判断条件(数値範囲、閾値)を補正するようになっている。
補正の仕方は、例えばユーザーの操作等に応じて、(A)数値範囲を狭める又は閾値を前回の検出値に近づける、(B)数値範囲を広げる又は閾値を前回の検出値から遠ざける、のいずれかを選択することができるようになっている。こうすることで、(A)が選択された場合には、異常ありと判断されやすくなるため、乗員の異常をより早期に発見することが可能となるし、乗員の健康状態をより慎重に監視することが可能となる。一方、(B)が選択された場合には、異常なしと判断されやすくなるため、乗員が過度に不安を感じてしまうのを抑制することができる。
Further, when making the later determination, the control unit 41 corrects the conditions (numerical range, threshold value) for determining whether there is an abnormality based on the result of the earlier determination.
The method of correction is, for example, according to the user's operation or the like, (A) narrowing the numerical range or moving the threshold closer to the previously detected value, or (B) widening the numerical range or moving the threshold farther from the previously detected value. You can choose between By doing this, when (A) is selected, it is likely to be determined that there is an abnormality, so it is possible to detect the abnormality of the crew at an early stage, and to monitor the health of the crew more carefully. It becomes possible to On the other hand, when (B) is selected, it is likely to be determined that there is no abnormality, so it is possible to prevent the occupant from feeling excessive anxiety.

また、制御部41は、異常ありと判断した場合に、その旨を報知するための信号を報知部3へ送信するようになっている。
これにより、報知部3は、異常が発生した場合に、注意喚起(例えば異常が発生していることの報知等)を行うため、乗員の注意が喚起される。すなわち、報知部3及び制御部41は、本発明における注意喚起手段として機能する。
なお、異常が発生していない場合にも、報知部3が、何らかの表示や音声出力を行えるようにしてもよい。
Further, when determining that there is an abnormality, the control section 41 transmits a signal for notifying that effect to the notification section 3 .
As a result, when an abnormality occurs, the notification unit 3 alerts the passenger (for example, notifies that an abnormality has occurred), thereby drawing the attention of the occupant. In other words, the notification unit 3 and the control unit 41 function as alerting means in the present invention.
Note that the notification unit 3 may be configured to perform some display or audio output even when no abnormality has occurred.

なお、早い方の判断において異常ありとなった場合に第一注意喚起を行うための信号を報知部3へ送信し、遅い方の判断においても異常ありとなった場合に、第一注意喚起よりも強い第二注意喚起(運転を控える旨の案内等)を行うための信号を報知部3へ送信するようにしてもよい。このようにすれば、第一注意喚起によって、乗員の健康状態に異常が発生したことを乗員に速やかに報知することが可能となる。また、第二の注意喚起によって、注意喚起が二度行われることになるため、第一の注意喚起をあまり意識しなかった乗員も注意するようになる。 In addition, when there is an abnormality in the earlier judgment, a signal for performing the first warning is sent to the notification unit 3, and when there is an abnormality in the later judgment, the first warning is issued. A signal for giving a strong second warning (guidance to refrain from driving, etc.) may be transmitted to the notification unit 3 . In this way, it is possible to quickly notify the passenger that an abnormality has occurred in the passenger's health condition by the first warning. In addition, since the second attention is issued twice, even the occupant who was not so conscious of the first attention comes to pay attention.

また、通信部42を、図示しない携帯端末と通信可能に構成し、検出値が閾値T,Tよりも数値範囲Rから遠ざかる方へ超えたと制御部41が判断した(注意喚起手段が第2の注意喚起を行った)場合に、緊急連絡先へ連絡することを指示する制御信号を携帯端末へ送信するようにしてもよい。このようにすれば、異常が生じた場合に、素早く助けを呼ぶことが可能となる。また、例えば意識が朦朧とする等して、携帯端末を操作することが困難となっても、声さえ出すことができれば助けを呼ぶことができるため、無事に救助される可能性が高まる。 Further, the communication unit 42 is configured to be capable of communicating with a mobile terminal (not shown), and the control unit 41 determines that the detection value exceeds the thresholds T U and T L in the direction away from the numerical range R (the alerting means is the first 2), a control signal instructing to contact an emergency contact may be transmitted to the portable terminal. In this way, it is possible to quickly call for help when an abnormality occurs. In addition, even if it becomes difficult to operate the mobile terminal due to, for example, faint consciousness, the user can call for help as long as he/she can speak, thus increasing the possibility of being rescued safely.

また、通信部42を、シートが搭載される乗り物の制御部と通信可能に構成し、検出値が閾値T,Tよりも数値範囲Rから遠ざかる方へ超えたと制御部41が判断した(注意喚起手段が第2の注意喚起を行った)場合に、以降の運転を制限することを指示する信号(例えば、乗り物が停止中であればエンジンを作動させない信号、乗り物が走行中であれば減速及び停止させる信号を、乗り物の制御部へ送信するようにしてもよい。このようにすれば、異常が発生し、かつ、乗員がアクセルを踏み込んでしまっている場合等であっても、大きな事故が生じるのを抑制することが可能となる。 Further, the communication unit 42 is configured to be able to communicate with the control unit of the vehicle on which the seat is mounted, and the control unit 41 determines that the detected values exceed the thresholds T U and T L in the direction away from the numerical range R ( A signal instructing to restrict the subsequent driving (for example, a signal not to operate the engine if the vehicle is stopped, or a signal that does not operate the engine if the vehicle is running) Signals to decelerate and stop may be sent to the control unit of the vehicle.In this way, even if an abnormality occurs and the occupant has stepped on the accelerator, a large amount of It becomes possible to suppress the occurrence of an accident.

また、本発明の実施に際しては、第一検出部1と第二検出部2をそれぞれ複数備え、各検出部及び各測定部によって得られた4つ以上の情報のうちの少なくとも2つの情報に基づいて、異常の有無を判定するようにしてもよい。このようにすれば、より正確に異常の有無を判断することが可能となる。また、複数の情報の用い方を変えることによって、よりきめ細かい判断が可能となる。 In addition, when implementing the present invention, a plurality of first detection units 1 and second detection units 2 are provided, and based on at least two pieces of information among four or more pieces of information obtained by each detection unit and each measurement unit The presence or absence of an abnormality may be determined by By doing so, it is possible to determine the presence or absence of an abnormality more accurately. Also, by changing how to use a plurality of pieces of information, it is possible to make more detailed judgments.

また、報知部3や装置本体4の代わりに、図5に示したように、市販のスマートフォンやタブレット等の携帯端末5を備えるようにしてもよい。
携帯端末5の制御部51及び通信部52は、記憶部53に所定のアプリケーションを予めインストールしておくことにより、上記実施形態の装置本体4の制御部41及び通信部42と同様の機能を有することになる。
また、携帯端末5の表示部54や、図示しないスピーカー、振動機等が、上記実施形態の報知部3と同様の機能を有することになる。
このように構成された異常検知装置10Aは、専用の装置本体や報知部を製造しなくてもよいため、異常検知装置の製造コストを低減することが可能となる。また、画像の表示、音声、振動等、様々な態様で報知を行うことが可能となる。更に、乗員の所持する携帯端末を利用することも可能となる。
Further, instead of the notification unit 3 and the device body 4, as shown in FIG. 5, a mobile terminal 5 such as a commercially available smart phone or tablet may be provided.
The control unit 51 and the communication unit 52 of the portable terminal 5 have functions similar to those of the control unit 41 and the communication unit 42 of the device body 4 of the above-described embodiment by installing a predetermined application in the storage unit 53 in advance. It will be.
Also, the display unit 54 of the mobile terminal 5, a speaker (not shown), a vibrator, etc. have the same functions as the notification unit 3 of the above embodiment.
Since the abnormality detection device 10A configured in this way does not require manufacture of a dedicated device main body or notification unit, the manufacturing cost of the abnormality detection device can be reduced. In addition, it is possible to perform notification in various modes such as image display, sound, vibration, and the like. Furthermore, it is also possible to use a portable terminal possessed by the passenger.

また、異常検知装置10に、着席までの所定期間に乗員が消費したカロリー(状態の変化)を検出する手段を備え、制御部41が、求めたカロリーに基づいて、数値範囲や閾値を補正するようにしてもよい。このようにした場合、消費カロリーを検出する手段及び制御部41は、本発明における第三検出手段として機能することとなる。
着席するまでの間に、例えば運動をする等してカロリーを消費してきた場合、乗員の肌の色が通常よりも赤みを帯びていたり、心拍数や血圧値が高めになったりしやすいため、その分だけ異常ありと誤って判断してしまう可能性が高い。そこで、このようにすれば、運動によって上昇したと考えられる(状態が変化した)分だけ生体情報の数値範囲を広げたり閾値を離したりすることで、誤判断してしまうことを抑制することが可能となる。
Further, the anomaly detection device 10 is provided with means for detecting the calorie consumed by the occupant (change in state) during a predetermined period until the passenger sits down, and the control unit 41 corrects the numerical range and threshold value based on the calculated calorie. You may do so. In this case, the means for detecting the calorie consumption and the control section 41 function as the third detection means in the present invention.
If you have been exercising and consuming calories until you are seated, the skin color of the occupant may be redder than usual, and the heart rate and blood pressure may be higher than usual. There is a high possibility of erroneously determining that there is an abnormality. Therefore, in this way, it is possible to suppress erroneous judgment by widening the numerical range of the biometric information or by separating the threshold value by the amount that is considered to have increased due to exercise (the state has changed). It becomes possible.

<第2実施形態>
次に、本発明の第2実施形態本発明の第1実施形態に係る異常検知装置の概略構成について説明する。
なお、ここでは、第1実施形態との相違点についてのみ説明する(記載を省略した構成や動作は、基本的に第1実施形態と同様である)。
<Second embodiment>
Next, a schematic configuration of an abnormality detection device according to a second embodiment of the present invention and a first embodiment of the present invention will be described.
Here, only differences from the first embodiment will be described (configurations and operations whose description is omitted are basically the same as those of the first embodiment).

本実施形態の異常検知装置10Aは、主に、第一検出部1A及び第二検出部2Aの構成、及び装置本体4Aの行う制御が異なる。 The abnormality detection device 10A of the present embodiment mainly differs in the configuration of the first detection section 1A and the second detection section 2A and the control performed by the device main body 4A.

本実施形態の第一検出部1Aは、乗員の体温、脈拍、血圧、呼吸数等のうち少なくともいずれかの生体情報を乗員と直接接触することにより検出するものとなっている。
第一検出部1Aは、専用の装置としてもよいし、市販のデジタル式の血圧計や電子体温計等に通信機能を搭載したものとしてもよい。
なお、第一検出部1は、乗り物内に据え付けられるものとしてもよいし、指輪型あるいは腕輪型のような、乗り物から物理的に切り離され乗員が身に着けられるものとしてもよい。
また、脳波や血糖値等、より高度な生体情報を測定するようにしてもよい。
The first detection unit 1A of the present embodiment detects at least one biological information such as body temperature, pulse, blood pressure, and respiratory rate of the occupant by direct contact with the occupant.
The first detection unit 1A may be a dedicated device, or may be a commercially available digital sphygmomanometer, electronic thermometer, or the like equipped with a communication function.
The first detection unit 1 may be installed inside the vehicle, or may be physically separated from the vehicle and worn by the occupant, such as a ring type or bracelet type.
Also, more advanced biological information such as brain waves and blood sugar levels may be measured.

第一検出部1Aは、検出した生体情報に基づく第一検出値を求めるようになっている。すなわち、第一検出部1Aは、本発明における第一検出手段をなす。
なお、第一検出値の算出は、後述する装置本体4Aの制御部41で行うようにしてもよい。
また、第一検出部1Aは、求めた第一検出値を装置本体4へ送信するようになっている。
The first detection unit 1A obtains a first detection value based on the detected biological information. That is, the first detection section 1A constitutes the first detection means in the present invention.
Note that the calculation of the first detection value may be performed by the control section 41 of the apparatus main body 4A, which will be described later.
Further, the first detection section 1A is adapted to transmit the obtained first detection value to the apparatus main body 4. FIG.

また、第一検出部1は、一の乗り物に対して、一つ又は複数備えることが可能である。
第一検出部1の設置箇所は、特に限定されるものでは無いが、例えば、シート200の図示しないアームレストやドア140のアームレスト等、乗員(特に肌の部分)が接し易いに備えるようにしてもよい。
Also, one vehicle or a plurality of first detection units 1 can be provided for one vehicle.
The installation location of the first detection unit 1 is not particularly limited. good.

本実施形態の第二検出部2Aは、第一検出部1が測定するものと同じ生体情報を、乗員から得られる情報(反射又は透過してきた光や電磁波等)に基づいて間接的に測定するものである。
第二検出部2Aは、専用の装置として構成してもよいし、市販の生体センサー等を用いたものであってもよい。
The second detection unit 2A of the present embodiment indirectly measures the same biological information as that measured by the first detection unit 1 based on the information obtained from the occupant (reflected or transmitted light, electromagnetic waves, etc.) It is.
The second detector 2A may be configured as a dedicated device, or may use a commercially available biosensor or the like.

装置本体4Aは、記憶部43Aに記憶された処理プログラムの内容が第1実施形態と異なっている。
具体的には、第1実施形態における画像データから目や頭部を認識し、これらに基づいて第一検出値を求めるためのプログラムを有していない。
その代わりに、第一検出部1から受信した第一検出値を数値範囲Rと比較するためのプログラムが記憶されている。
本実施形態のようにすることで、カメラを用いなくても、低コストで製造でき、かつ判断の迅速な異常検知装置を得ることができる。
The apparatus main body 4A differs from the first embodiment in the contents of the processing program stored in the storage section 43A.
Specifically, it does not have a program for recognizing the eyes and the head from the image data in the first embodiment and obtaining the first detection value based thereon.
Instead, a program for comparing the first detected value received from the first detector 1 with the numerical range R is stored.
By adopting the present embodiment, it is possible to obtain an abnormality detection device that can be manufactured at low cost without using a camera and that can make quick judgments.

100 乗り物
110 バックミラー
120 天井
130 インパネ
140 ドア
200 シート
210 シートボトム
220 シートバック
230 ヘッドレスト
10,10A 異常検知装置
1,1A 第一検出部
2,2A 第二検出部
3 報知部
4,4A 装置本体
41 制御部
42 通信部
43,43A 記憶部
5 携帯端末
51 制御部
52 通信部
53 記憶部
54 表示部
R 数値範囲
下閾値
上閾値
100 Vehicle 110 Rearview Mirror 120 Ceiling 130 Instrument Panel 140 Door 200 Seat 210 Seat Bottom 220 Seat Back 230 Headrest 10, 10A Abnormality Detecting Device 1, 1A First Detector 2, 2A Second Detector 3 Reporting Part 4, 4A Device Body 41 Control unit 42 communication unit 43, 43A storage unit 5 portable terminal 51 control unit 52 communication unit 53 storage unit 54 display unit R numerical value range T L lower threshold T U upper threshold

Claims (14)

乗員の状態を検出する第一検出手段と、
第一検出手段とは異なる方法で乗員の状態を検出する第二検出手段と、
前記第一検出手段が検出した状態に基づいて乗員の異常の有無を判断する第一判断手段と、
前記第二検出手段が検出した状態に基づいて乗員の異常の有無を判断する第二判断手段と、
前記第一判断手段による判断と前記第二判断手段による判断のうち少なくとも一方に基づいて乗員の異常の有無を最終的に判断する第三判断手段と、
前記第一判断手段、前記第二判断手段及び前記第三判断手段のうち少なくともいずれかが異常ありと判断した場合に、乗員に注意を喚起する注意喚起手段と、を備え、
前記第三判断手段は、前記第一判断手段による判断と前記第二判断手段による判断のそれぞれの異常の有無の組み合わせにより判断を行っており、
前記第一検出手段は、乗員の画像を撮影するカメラを有し、撮影した画像から前記第一検出手段が検出した第一検出値を求めるよう構成され、
前記注意喚起手段はモニターであり、被測定者である乗員が着座するシートの前方に設けられ、異常が発生した場合と、異常が発生していない場合であっても、前記第一検出手段が撮影した前記画像や前記第一検出値を表示することを特徴とする異常検知装置。
a first detection means for detecting the state of an occupant;
a second detection means for detecting the state of the occupant by a method different from that of the first detection means;
a first judgment means for judging whether or not there is an abnormality in the occupant based on the state detected by the first detection means;
a second judgment means for judging whether or not there is an abnormality in the occupant based on the state detected by the second detection means;
a third determination means for finally determining whether or not there is an abnormality in the occupant based on at least one of the determination by the first determination means and the determination by the second determination means;
a warning means for calling the attention of the occupant when at least one of the first determination means, the second determination means, and the third determination means determines that there is an abnormality,
The third determination means makes a determination based on a combination of the presence or absence of abnormality in the determination by the first determination means and the determination by the second determination means ,
The first detection means has a camera that captures an image of the occupant, and is configured to obtain a first detection value detected by the first detection means from the captured image,
The alerting means is a monitor, which is provided in front of the seat on which the occupant, who is the person to be measured, sits, and the first detection means detects whether an abnormality has occurred or not. An anomaly detection device characterized by displaying the captured image and the first detection value .
前記第二検出手段は、シートにおける着座した乗員と近接する部位の表層部に設けられていることを特徴とする請求項1に記載の異常検知装置。 2. The abnormality detection device according to claim 1, wherein the second detection means is provided on a surface layer of a portion of the seat that is adjacent to a seated occupant. 前記第三判断手段は、前記第一判断手段と前記第二判断手段のうち早く判断した方による判断結果を最終的な判断として採用することを特徴とする請求項1又は2に記載の異常検知装置。 3. The anomaly detection according to claim 1, wherein said third judgment means adopts a judgment result by whichever of said first judgment means and said second judgment means makes an earlier judgment as a final judgment. Device. 前記第三判断手段は、前記第一判断手段による判断結果と前記第二判断手段による判断結果の両方に基づいて異常の有無を最終的に判断することを特徴とする請求項1又は2に記載の異常検知装置。 3. The third determining means according to claim 1, wherein the third determining means finally determines whether or not there is an abnormality based on both the result of determination by the first determining means and the result of determination by the second determining means. anomaly detection device. 前記第一判断手段、前記第二判断手段及び前記第三判断手段のうち少なくともいずれかが異常ありと判断した場合に、乗員に注意を喚起する注意喚起手段を備え、
前記注意喚起手段は、携帯端末によって構成されており、
前記注意喚起手段は、判断が早い方の判断手段が異常ありと判断した場合に、振動や音による第一注意喚起を行い、判断が遅い方の判断手段が異常ありと判断した場合に、前記第一注意喚起よりも強い振動や音による第二注意喚起を行うことを特徴とする請求項1から4のいずれか一項に記載の異常検知装置。
a warning means for calling a passenger's attention when at least one of the first determination means, the second determination means, and the third determination means determines that there is an abnormality;
The alerting means is configured by a mobile terminal,
The alerting means performs the first alerting by vibration or sound when the determination means with the faster determination determines that there is an abnormality, and when the determination means with the slower determination determines that there is an abnormality, the above-mentioned alerting means 5. The abnormality detection device according to any one of claims 1 to 4 , wherein the second alert is performed by vibration or sound stronger than the first alert .
前記第一検出手段及び前記第二検出手段は、検出した乗員の状態を数値として検出するよう構成されており、
前記第一判断手段及び前記第二判断手段は、検出された前記数値が所定の数値範囲内にあるか否か、又は前記数値が所定の閾値を超えたか否かによって異常の有無を判断するよう構成されており、
判断が遅い方の判断手段は、判断が早い方の判断手段の判断結果に基づいて、前記数値範囲又は閾値を補正することを特徴とする請求項4又は5に記載の異常検知装置。
The first detection means and the second detection means are configured to detect the detected state of the occupant as a numerical value,
The first judging means and the second judging means judge whether or not there is an abnormality based on whether the detected numerical value is within a predetermined numerical range or whether the numerical value exceeds a predetermined threshold value. is composed of
6. The anomaly detection device according to claim 4, wherein the determination means that determines later corrects the numerical range or the threshold value based on the determination result of the determination means that determines earlier.
判断が遅い方の判断手段は、数値範囲を狭める、又は閾値を前回の検出値から遠ざけるように補正することを特徴とする請求項に記載の異常検知装置。 7. The anomaly detection device according to claim 6 , wherein the judgment means that judges later narrows the numerical range or corrects the threshold so as to move away from the previous detection value . 判断が遅い方の判断手段は、数値範囲を広げる、又は閾値を前回の検出値に近づけるように補正することを特徴とする請求項に記載の異常検知装置。 7. The anomaly detection device according to claim 6 , wherein the judgment means that judges later widens the numerical range or corrects the threshold so as to approach the previous detection value. 第一検出手段と第二検出手段とをそれぞれ複数備え、
前記第一判断手段及び前記第二判断手段は、前記第一検出手段が検出した複数の第一検出値及び前記第二検出手段が検出した複数の第二検出値のうちの少なくとも2つの検出値に基づいて、異常の有無を判定することを特徴とする請求項1からのいずれか一項に記載の異常検知装置。
A plurality of first detection means and second detection means are provided,
The first determination means and the second determination means determine at least two detection values among the plurality of first detection values detected by the first detection means and the plurality of second detection values detected by the second detection means. 9. The abnormality detection device according to any one of claims 1 to 8 , wherein the presence or absence of abnormality is determined based on .
前記第一検出値は、目の面積における瞳の面積割合、上眼瞼と下眼瞼との距離、頭部の移動距離、頭部の移動速度のいずれかであることを特徴とする請求項1からのいずれか一項に記載の異常検知装置。 2. From claim 1, wherein the first detection value is any one of the ratio of the area of the pupil to the area of the eye, the distance between the upper eyelid and the lower eyelid, the movement distance of the head, and the movement speed of the head. 10. The abnormality detection device according to any one of 9 . 第二検出手段は、体温、脈拍、血圧、呼吸数、血糖値、脳波の少なくともいずれかの生体情報を検出する生体センサーを有し、
検出した生体情報から前記第二検出手段が検出した第二検出値を求めるよう構成されていることを特徴とする請求項1から10のいずれか一項に記載の異常検知装置。
the second detection means has a biosensor that detects at least one biometric information of body temperature, pulse, blood pressure, respiratory rate, blood sugar level, and electroencephalogram;
11. The abnormality detection device according to any one of claims 1 to 10 , wherein the second detection value detected by said second detection means is obtained from the detected biological information.
前記第一判断手段は、前記第一検出手段が検出した第一検出値及び前記第二検出手段が検出した第二検出値に基づいて異常の有無を判断することを特徴とする請求項10又は11に記載の異常検知装置。 10. The first determination means determines whether or not there is an abnormality based on the first detection value detected by the first detection means and the second detection value detected by the second detection means. 12. The abnormality detection device according to 11 . 所定期間における乗員の状態の変化を検出する第三検出手段を備え、
前記第一判断手段又は前記第二判断手段は、前記第三検出手段が検出した状態の変化に基づいて、異常の有無の判断条件を補正することを特徴とする請求項11又は12に記載の異常検知装置。
A third detection means for detecting a change in the state of the occupant during a predetermined period of time,
13. The apparatus according to claim 11 , wherein said first judgment means or said second judgment means corrects the condition for judging the presence or absence of abnormality based on the change in state detected by said third detection means. Anomaly detection device.
請求項1から13のいずれか一項に記載の異常検知装置を備えたことを特徴とするシート。 A seat comprising the abnormality detection device according to any one of claims 1 to 13.
JP2017157348A 2017-08-15 2017-08-17 Abnormality detection device and sheet Active JP7252438B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017157348A JP7252438B2 (en) 2017-08-17 2017-08-17 Abnormality detection device and sheet
US16/633,124 US11607142B2 (en) 2017-08-15 2018-07-27 Biosensor arrangement structure
PCT/JP2018/028177 WO2019035337A1 (en) 2017-08-15 2018-07-27 Biosensor arrangement structure
JP2023046100A JP2023093454A (en) 2017-08-17 2023-03-23 Abnormality detection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017157348A JP7252438B2 (en) 2017-08-17 2017-08-17 Abnormality detection device and sheet

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023046100A Division JP2023093454A (en) 2017-08-17 2023-03-23 Abnormality detection device

Publications (2)

Publication Number Publication Date
JP2019033911A JP2019033911A (en) 2019-03-07
JP7252438B2 true JP7252438B2 (en) 2023-04-05

Family

ID=65636242

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017157348A Active JP7252438B2 (en) 2017-08-15 2017-08-17 Abnormality detection device and sheet
JP2023046100A Pending JP2023093454A (en) 2017-08-17 2023-03-23 Abnormality detection device

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023046100A Pending JP2023093454A (en) 2017-08-17 2023-03-23 Abnormality detection device

Country Status (1)

Country Link
JP (2) JP7252438B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7376389B2 (en) * 2020-02-28 2023-11-08 株式会社Subaru Vehicle control system
WO2021240768A1 (en) * 2020-05-29 2021-12-02 三菱電機株式会社 Driving inability determination device and driving inability determination method
KR20220072127A (en) * 2020-11-24 2022-06-02 현대자동차주식회사 Vehicle and control method thereof
WO2022172391A1 (en) 2021-02-12 2022-08-18 三菱電機株式会社 Occupant status determination device and occupant status determination method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002329300A (en) 2001-04-27 2002-11-15 Honda Motor Co Ltd Travel safety device for vehicle
JP2005211229A (en) 2004-01-28 2005-08-11 Toyota Motor Corp Physical condition monitoring device for vehicle
JP2005334527A (en) 2004-05-31 2005-12-08 Nikkiso Co Ltd Home medical treatment apparatus
JP2007122579A (en) 2005-10-31 2007-05-17 Equos Research Co Ltd Vehicle controller
JP2007531579A (en) 2004-04-01 2007-11-08 ウィリアム・シー・トーチ Biosensor, communicator and controller for monitoring eye movement and methods for using them
JP2011123653A (en) 2009-12-10 2011-06-23 Sumitomo Rubber Ind Ltd Test device for driver's arousal level
JP2011183050A (en) 2010-03-10 2011-09-22 Toyota Motor Corp Driver diagnostic device

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2671394B2 (en) * 1988-06-23 1997-10-29 日産自動車株式会社 Driver abnormal condition detection device
JPH10155749A (en) * 1996-12-04 1998-06-16 Hiyuunet Kk System for monitoring and informing about human health condition

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002329300A (en) 2001-04-27 2002-11-15 Honda Motor Co Ltd Travel safety device for vehicle
JP2005211229A (en) 2004-01-28 2005-08-11 Toyota Motor Corp Physical condition monitoring device for vehicle
JP2007531579A (en) 2004-04-01 2007-11-08 ウィリアム・シー・トーチ Biosensor, communicator and controller for monitoring eye movement and methods for using them
JP2005334527A (en) 2004-05-31 2005-12-08 Nikkiso Co Ltd Home medical treatment apparatus
JP2007122579A (en) 2005-10-31 2007-05-17 Equos Research Co Ltd Vehicle controller
JP2011123653A (en) 2009-12-10 2011-06-23 Sumitomo Rubber Ind Ltd Test device for driver's arousal level
JP2011183050A (en) 2010-03-10 2011-09-22 Toyota Motor Corp Driver diagnostic device

Also Published As

Publication number Publication date
JP2019033911A (en) 2019-03-07
JP2023093454A (en) 2023-07-04

Similar Documents

Publication Publication Date Title
JP2023093454A (en) Abnormality detection device
US10379535B2 (en) Drowsiness sensing system
US10434965B2 (en) Vehicular safety seat, controller coupled with vehicular safety seat, and vehicular safety seat system
EP2648618B1 (en) System for monitoring a vehicle driver
US20150379362A1 (en) Imaging device based occupant monitoring system supporting multiple functions
WO2014068892A1 (en) Passenger monitoring device
US8284041B2 (en) Method and apparatus for in-vehicle presence detection and driver alerting
EP3060434B1 (en) Responding to in-vehicle environmental conditions
US11607142B2 (en) Biosensor arrangement structure
KR101926921B1 (en) Driver monitoring apparatus and method
WO2015175435A1 (en) Driver health and fatigue monitoring system and method
KR101519748B1 (en) A carelessness detmination method of the driver and an apparatus for this
WO2015174963A1 (en) Driver health and fatigue monitoring system and method
US11490843B2 (en) Vehicle occupant health monitor system and method
JP2017131445A (en) Biological information measurement device, on-vehicle device, and biological information measurement system
KR20180120901A (en) Health care apparatus with a passenger physical condition measurement in a vehicle and method there of
JP6816531B2 (en) Crew monitoring device
JP7389372B2 (en) Abnormality detection device and sheet
JP2018128974A (en) Driver state monitoring device
WO2010091464A1 (en) Method and system for monitoring an operator of machinery
JP5447335B2 (en) Notification system
KR20170036168A (en) System and method for monitoring driver condition
JP2004041485A (en) Closed/open eye monitoring device
JP6641642B2 (en) Life sign detection device
JP4395999B2 (en) Child seat with seating monitor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200729

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210831

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20211015

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220510

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220628

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220825

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230221

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230306

R150 Certificate of patent or registration of utility model

Ref document number: 7252438

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150