JP3808454B2 - Seat usage status judging device - Google Patents

Seat usage status judging device Download PDF

Info

Publication number
JP3808454B2
JP3808454B2 JP2003184706A JP2003184706A JP3808454B2 JP 3808454 B2 JP3808454 B2 JP 3808454B2 JP 2003184706 A JP2003184706 A JP 2003184706A JP 2003184706 A JP2003184706 A JP 2003184706A JP 3808454 B2 JP3808454 B2 JP 3808454B2
Authority
JP
Japan
Prior art keywords
seat
image
unit
usage status
determination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003184706A
Other languages
Japanese (ja)
Other versions
JP2004069687A (en
Inventor
和生 久間
裕史 鹿毛
真也 追田
孝 豊田
裕史 植中
聡志 畠
征士 山下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Toyota Motor Corp
Original Assignee
Mitsubishi Electric Corp
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp, Toyota Motor Corp filed Critical Mitsubishi Electric Corp
Priority to JP2003184706A priority Critical patent/JP3808454B2/en
Publication of JP2004069687A publication Critical patent/JP2004069687A/en
Application granted granted Critical
Publication of JP3808454B2 publication Critical patent/JP3808454B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Geophysics And Detection Of Objects (AREA)
  • Passenger Equipment (AREA)
  • Air Bags (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、座席に人が座っているのか、荷物などがおかれているのかなどの座席の使用状況を判定する装置に関し、特に自動車などにおいて、その座席の使用状況に応じて、エアバッグ装置やシートベルト装置などの乗員保護装置の作動を制御する装置に関する。
【0002】
【従来の技術】
乗員保護装置としてエアバッグが組み込まれている自動車では、助手席に乗員がいない場合であっても車両衝突時にはエアバッグが作動する。この作動は無意味な作動であり、修理に当たっても作動した装置の交換の必要が生じ、不必要な修復費用がかかるので、乗員不在の場合はエアバッグの作動を制止することが望ましい。このことから、助手席用のエアバッグ作動時には助手席の使用状況を判定する必要がある。また、乳幼児の乗ったチャイルドシートが後向きに装着されている場合にエアバッグを展開させないようにすることが要求される。このことからエアバッグ展開時にはチャイルドシートの装着の向きも検出可能であることが望ましい。そして、後向きチャイルドシートの識別が可能な助手席の使用状況判定装置の公知例として距離センサを用いた例がある。
【0003】
【発明が解決しようとする課題】
助手席の乗員有無の検出装置の公知例として、特開平7-186880号公報における荷重センサを用いた例がある。しかし、このような荷重センサは乗員と荷物を区別することができず、助手席に荷物などが積載されている場合にエアバッグが作動すると不必要な修復費用がかかる等の問題点があった。
【0004】
後ろ向きチャイルドシートの識別が可能な助手席の使用状況判定装置の公知例として、特開平7-196006号公報における距離センサを用いた例がある。
【0005】
しかし。この方法では乗員が前のめりになった場合と後向きチャイルドシートの区別は困難である。
【0006】
本発明は、上記の問題点を解決するために、助手席の乗員有無の判定、チャイルドシートの向きの判定、助手席上の物体が乗員か荷物かの判定を行う座席の使用状況判定装置を提供することを目的とする。
【0007】
【課題を解決するための手段】
この発明に係る座席の使用状況判定装置は、座席の少なくとも一部を含む範囲を撮影し画像情報を得る画像入力部と、座席位置と前記座席位置の周辺を照明する複数の距離測定用照明を備え、前記画像入力部の画像中に含まれる前記距離測定用照明のスポット位置に基づき撮影対象までの距離を算出する距離計測部と、前記距離計測部によって算出された距離から前記座席の使用状況を判定する状況判定部と、前記状況判定部の判定に基づき、所定条件下において車両内部構造体への衝突から乗員を保護する保護手段に対し、前記保護手段の作動を制御する制御信号出力部とを備えたものである。
【0008】
また、前記距離測定用照明は、画像を撮像する時間だけ照明を行う画像入力用の照明も兼ねている。
【0009】
また、前記座席の使用状況判定装置は、N×N個の画素でマトリックス構成された前記画像入力部を備えたものである。
【0010】
また、画像入力部と、距離計測部と、制御信号出力部を1つの半導体チップ上に集積化したものである。
【0011】
また、画像入力部に特定の波長の光だけを透過する光波長選択フィルタを備えたものである。
【0012】
また、電源投入時に画像入力部の動作不良を判定する動作不良判断部を備えたものである。
【0013】
また、動作不良判断部は、距離測定用照明を照射した場合の入力画像と、照射しない場合の入力画像とを比較する機能を備えたものである。
【0014】
【発明の実施の形態】
実施の形態1.
以下、この発明の一実施の形態を図について説明する。図1は、この発明の実施の形態1による座席の使用状況判定装置の構成を示す図である。図中、1は画像入力部、2は画像入力部1によって取り込まれた画像を照合用データに変換するデータ変換部、3は画像入力部1によって取り込まれた画像の全部または一部の画素の平均値を計算する画素平均値計算部、4はデータ変換部2の照合用データと画素平均値計算部3の画素平均値を基に、ひな型格納部5に予め格納されている座席の各使用状況に応じたひな型データとそのしきい値により照合を行い、座席の使用状況を判定する状況判定部、5は座席の各使用状況に応じたひな型データを予め格納したひな型格納部、6は状況判定部4で判定された座席の使用状況に基づいてエアバッグの制御に関する信号を出力する制御信号出力部である。
【0015】
次に、動作を説明する。画像センサを含む画像入力部1は助手席の着座位置を少なくとも一部に含む画像を取り込む。データ変換部2は、画像入力部1によって取り込まれた画像を照合用データに変換する。画素平均値計算部3は、画像入力部1によって取り込まれた画像の全部または一部の画素の平均値を計算する。状況判定部4はデータ変換部2の照合用データと画素平均値計算部3の画素平均値を基に、ひな型格納部5に予め格納されている座席の各使用状況に応じたひな型データとそのしきい値により照合を行い、座席の使用状況を判定する。座席の使用状況毎に、一つまたは複数個のひな型データが属する。制御信号出力部6は状況判定部4で判定された座席の使用状況に基づいてエアバッグ(図示しない)の制御に関する信号を出力する。
【0016】
本実施の形態における助手席の状態として、それぞれ乗員無、乗員有、チャイルドシート前向き(以下CRS前向)、チャイルドシート後向き(以下CRS後向)、および子供が立っている状態(以下スタンディングチャイルド)の5種類を想定しており(図2(a)〜図6(a))、各状態には複数のひな型画像が対応している(図2(b)〜図6(b))。図中、7は助手席、8は助手席インストルメントパネル(以下インパネと記載する)、9は着座している乗員(大人)、10はチャイルドシート、11は着座している子供、12は立ち上がっている子供(スタンディングチャイルド)を示す。ひな型格納部5には、ひな型画像がデータ変換部2で変換されたベクトルとして表現されたひな形データとして格納されている。
【0017】
以下、本実施の形態の動作を図7を用いて説明する。まず、画像入力部1で取り込まれた入力画像は、データ変換部2によって例えば水平方向と垂直方向にそれぞれ分割され、この分割画像毎の平均画素値を要素として、図7(a)(b)のように垂直方向と水平方向に関する二つのベクトルデータに変換される。また、全てまたは一部の画素の平均値を画素平均値計算部3で計算する。
【0018】
次に、データ変換部2で得られた入力画像のベクトル表現は、状況判定部4によってひな型格納部5に格納されている5種類の座席の使用状況のベクトル表現であるひな型データと照合され、入力画像との類似度が計算される。図7(c)はひな型格納部5に格納されている座席の各使用状況のひな形データのうち、例えば乗員有の場合に相当するひな形データの一つ(図7(c)左図)と乗員無の場合に相当する入力画像のベクトルデータ(図7(c)右図)との照合過程を示し、垂直方向または水平方向どうしで照合が行われることを示す。同時に、状況判定部4は、ひな型格納部5に格納されている各ひな型データに対応した判定しきい値を、画素平均値計算部3で計算された画素の平均値に従って変更する。
【0019】
ベクトルデータ間の類似度は例えば内積計算などを用いて計算することができ、ひな型データと入力画像のベクトルデータの類似度は、例えば垂直方向と水平方向に関する類似度の和として得られる。このようにして得られた各ひな型データとの類似度のうち最大値をとり、かつ、判定しきい値を越えたひな型データの属する座席の使用状況を状況判定部4の出力とする。
【0020】
最後に、制御信号出力部5はエアバッグ展開の可否を決定するために例えば図8のようなテーブルを持っており、状況判定部4で判定されたカテゴリでこのテーブルを参照し、エアバッグ展開の制御に関する信号(ONまたはOFF)を出力する。
【0021】
以上のように、助手席の状況を撮影した画像からエアバッグ展開の制御を判定することができる。
【0022】
なお、本実施の形態ではデータ変換部2における入力画像の分割が水平方向と垂直方向に関して等幅である例を示したが、分割幅は異なってもよく、また分割方向は水平方向もしくは垂直方向のいずれか一方だけでもよい。また、本実施の形態では制御信号出力部5はエアバッグ展開の制御に関する信号としてONまたはOFFを出力する例を示したが、エアバッグの展開圧力の強弱、または、サイドエアバッグ等複数のエアバッグが備えられている場合は展開するエアバッグの個数を制御する信号を出力してもよい。
【0023】
さらに、本実施の形態では、画素平均値計算部3において、全部または一部の画素の画素値を単純に平均する例を示したが、例えば、画像センサの中央の画素の画素値に対しては大きな係数をかけ、周辺の画素の画素値には小さな係数をかけるといった重み付き平均を行ってもよい。
【0024】
実施の形態2.
図9は、この発明の実施の形態2による座席の使用状況判定装置の構成を示す図である。画像入力部1、距離計測部13、状況判定部4、制御信号出力部6の4部分からなる。画像入力部1は少なくとも助手席の一部を撮像範囲に含む画像を撮影する。距離計測部13は複数の距離測定用照明(以下測距照明)を備えている。画像入力部1は、ある時刻において距離計測部13による測距照明を当てた画像を撮影し、次の時刻に測距照明を当てない場合の画像を撮影し、距離計測部13はこれら二画像の差分をとることで測距照明によるスポット光の位置を特定する。さらに距離計測部13には乗員のいない場合のスポット光位置があらかじめ記憶されており、スポット光位置にずれがある場合は、三角測量法の原理によりスポット光までの距離を計算することが可能である。
【0025】
本実施の形態による乗員検知の例として、図10に示すように助手席の着座位置を真上から捉え、9個の測距照明を照射する場合について説明する。例えば乗員無の場合には、図10(a)のように測距照明のスポット光のうち、インパネ近接位置測距照明14、助手席座面位置測距照明15、およびその中間の中間位置測距照明16が当たるように配置されている。なお、図10の例では、各位置に座席の横方向に平行に3点ずつ測距スポット光が照射されている。このように測距照明を配置すれば、乗員有の場合は図10(b)のように乗員9の大腿部と腹部あるいは腕に助手席座面位置測距照明15と中間位置測距照明16のいずれかが当たり、乗員無の場合と比較した場合のスポット光の位置のずれが生じる。このスポット光のずれは、画像入力部1によって撮影され、距離計測部13はこの位置のずれを元にスポット光位置までの距離を計算する。状況判定部3は乗員が存在しない場合の距離と比較することによって助手席の乗員の有無を判定することができる。制御信号出力部6は状況判定部3の判定に基づいてエアバッグ展開の可否に関する信号を出力する。
【0026】
また、スタンディングチャイルド12がインパネ8に密着している場合は図10(c)のようにスタンディングチャイルドの頭部または胴体にインパネ近接位置測距照明14が当たり、乗員無の場合と比較した場合のスポット光の位置のずれが生じる。このスポット光のずれは、図10(b)の乗員の場合と同様に画像入力部1によって撮影され、距離計測部13はこの位置のずれを元にスポット光位置までの距離を計算し、状況判定部3は乗員の状態を判定することができる。制御信号出力部6は状況判定部3の判定に基づいてエアバッグ展開の可否に関する信号を出力する。
【0027】
また、スタンディングチャイルド12がインパネ8から離れ、助手席7の近傍にいる場合は図10(d)のようにスタンディングチャイルドの頭部または胴体に中間位置測距照明16が当たり、乗員無の場合と比較した場合のスポット光の位置のずれが生じる。このスポット光のずれは、図10(b)の乗員の場合と同様に画像入力部1によって撮影され、距離計測部13はこの位置のずれを元にスポット光位置までの距離を計算し、状況判定部3は乗員の状態を判定することができる。制御信号出力部5は状況判定部3の判定に基づいてエアバッグ展開の可否に関する信号を出力する。
【0028】
なお、実施の形態2では乗員有とスタンディングチャイルドの検知について説明したが、CRS前向とCRS後向についても同様にして検知できることは言うまでもない。
【0029】
また、実施の形態2では各位置について測距照明の数をそれぞれ3個の合計9個の場合について説明したが、各位置1個また2個ずつでも良く、また4個以上でも良い。また、各位置について同数の測距照明でなくても良く、例えばインパネ近接位置測距照明、助手席座面位置測距照明、中間位置測距照明の数を、それぞれ、3個、2個、2個としても良い。
【0030】
実施の形態3.
図11は、この発明の実施の形態3による座席の使用状況判定装置の構成を示す図である。図中、17はLED、19はLEDの光を集光するレンズ、20はLEDの光、21は電圧により長さが変化するピエゾ素子、22は画像入力部を構成する画像センサ、23は状況判定等を行うマイクロプロセッサ、18はこれら電子素子を収納したケースである。
【0031】
次に図11、12に基づいて動作を説明する。距離測定を行う場合は、マイクロプロセッサ23から信号が送られピエゾ素子21に電圧が印加される。ピエゾ素子21は電圧により長さが変化し、ピエゾ素子21の上にあるLED17の位置が変わり、レンズ19の焦点位置にLED17の位置が移動する。レンズ19の焦点位置にLED17があると、図12(a)に示すように、LEDの光20は小さなスポットとなり、そのスポット位置を画像センサ22により撮像できる。一方、画像入力を行う場合は、マイクロプロセッサ23にから信号が送られピエゾ素子21に電圧が印加される。ピエゾ素子21は電圧により長さが変化し、ピエゾ素子21の上にあるLED17の位置が変わり、レンズ19の焦点からはずれた位置にLED17の位置が移動する。レンズ19の焦点からはずれた位置にLED17があると、図12(b)に示すように、LEDの光20は拡散して大きな面積の領域に照射されるため、全体に照明された画像を画像センサ22により撮像できる。
【0032】
実施の形態4.
図13は、この発明の実施の形態4による座席の使用状況判定装置の構成を示す図である。図中、22は画像センサ、23はマイクロプロセッサ、24はアナログ/デジタル変換回路、25は画素であり画像センサ22の中に32×32個のアレイ状に構成されている。
【0033】
次に動作について図13に基づいて説明する。画像センサ22は32×32個のアレイ状の画素25により画像を撮像し32×32個のアナログ電気信号に変換を行い、その出力をアナログ/デジタル変換回路24へ送る。アナログ/デジタル変換回路24は画像センサ22から送られてきた32×32個のアナログ電気信号を32×32個のデジタル電気信号に変換し、その出力をマイクロプロセッサ23に送る。マイクロプロセッサ23は、アナログ/デジタル変換回路24から送られてきた32×32個のデジタル電気信号を取り込み、座席の使用状況判定を行う。このため、マイクロプロセッサは32×32個のデジタル電気信号を処理するだけでよいので、小型で安価なマイクロプロセッサが使用でき、安価な座席の使用状況判定装置が実現できる。
【0034】
実施の形態5.
上記実施の形態4では画像センサ22、マイクロプロセッサ23、アナログ/デジタル変換回路24を個々に集めて座席の使用状況判定装置を構成したが、本実施の形態では画像センサ22、マイクロプロセッサ23、アナログ/デジタル変換回路24を1チップに集積化する。図14は、この発明の実施の形態5による座席の使用状況判定装置の構成を示す図である。図中、22は画像センサ(画像入力部)、23はマイクロプロセッサ(距離計測部、制御信号出力部)、24はアナログ/デジタル変換回路、26は画像センサ22、マイクロプロセッサ23、アナログ/デジタル変換回路24を1チップに集積化している半導体基板である。
【0035】
次に動作について説明する。画像センサ22は画像を撮像しアナログ電気信号に変換を行い、その出力をアナログ/デジタル変換回路24へ送る。アナログ/デジタル変換回路24は画像センサ22から送られてきたアナログ電気信号をデジタル電気信号に変換し、その出力をマイクロプロセッサ23に送る。マイクロプロセッサ23は、アナログ/デジタル変換回路24から送られてきたデジタル電気信号を取り込み、座席の使用状況判定を行う。
【0036】
実施の形態6.
図15は、この発明の実施の形態6による座席の使用状況判定装置の構成を示す図である。車内で喫煙をすると光学系にタバコのヤニが被着して画像入力感度が低下し、座席の使用状況の誤判定を招くことがある。本実施の形態はこのような不具合を解消するものである。
図中、22は画像センサ、27はタバコのヤニを透過する光の波長の光だけを透過する光波長選択フィルタ、28は撮像レンズである。
【0037】
次に動作について説明する。撮像レンズ28の前にタバコのヤニを透過する光の波長の光だけを透過する光波長選択フィルタが付いているので、撮像レンズ28のタバコのヤニによる光透過率の変化がなくなり、画像センサに入力される画像がタバコのヤニに影響を受けなくなり、正確に座席の使用状況判定を行える。
【0038】
実施の形態7.
図16は、この発明の実施の形態7による座席の使用状況判定装置の画像センサの動作不良の検出を示すフローチャートである。この画像センサの動作不良検出は動作不良判断部を構成するマイクロプロセッサ23にて行われる。図中、ステップS100は乗員検知装置の電源投入であり、ステップS110は画像センサの不良検査開始処理であり、ステップS120は各画素の信号が出力されているかどうかの判定処理、ステップS130は動作不要としての警告信号出力処理、ステップS140は動作正常としての座席の使用状況判定開始処理である。
【0039】
次に各ブロックの動作について説明する。まず、ステップS100において電源が投入されると、ステップS110の画像センサの不良判定が開始され、ステップS120において、画像センサの各画素の出力信号が正常な値で出力されているかどうか判定を行う。出力されていない場合、ステップS130の動作不良として警告を行う。一方ステップS120の判定処理において、正常な値として出力されている場合、動作正常としてステップS140で座席の使用状況判定を行い乗員検知を開始する。
【0040】
実施の形態8.
図17は、この発明の実施の形態8による座席の使用状況判定装置の画像センサの動作不良の検出を示すブロック図である。図中、17はLED、22は画像センサ、23はマイクロプロセッサである。また図18は、この発明の実施の形態8による座席の使用状況判定装置の画像センサの動作不良の検出を示すフローチャートである。この画像センサの動作不良検出はマイクロプロセッサ23にて行われる。図中、ステップS110は画像センサの不良検査開始処理、ステップS150はLEDを照射したときの画像信号の取得処理、ステップS160はLEDを照射していないときの画像信号の取得処理、ステップS170はLEDを照射したときの画像信号と照射しないときの画像信号の比較処理であり、ステップS180はステップS170で比較した結果正常でないと判断したとき動作不良として警告信号出力処理、ステップS190はステップS170で比較した結果正常であると判断したときの動作正常として座席の使用状況判定開始処理をそれぞれ示す。
【0041】
次にブロックの動作を説明する。LED17を照射したときに画像センサ22で取得した画像と、LED17を照射しないときに画像センサ22で取得した画像とをマイクロプロセッサ23で比較する。この前記2つの画像の比較からマイクロプロセッサ23で画像センサ22が正常か正常でないかを判断することにより、画像センサの不良検査が可能である。これは、即ち、LED17による照射があれば鮮明で強度な画像が画像センサ22により得られる。LED17による照射がない場合は不鮮明で弱度な画像が画像センサ22により得られる。そして、画像センサ22が正常であればそれぞれの条件(LED17の照射の有無)に応じた画像の取得をマイクロプロセッサ23により判断できる。
【0042】
【発明の効果】
この発明によれば、座席の少なくとも一部を含む範囲を撮影し画像情報を得る画像入力部と、前記座席の使用状況に対応した複数のひな型画像を格納しているひな型格納部と、前記画像入力で得られた画像情報と前記ひな型格納部に格納されている各々のひな型画像との照合を行い、前記入力画像の画素値に基づいて判定しきい値を変更して前記座席の使用状況を判定する状況判定部と、前記状況判定部の判定に基づき、所定条件下において車両内部構造体への衝突から乗員を保護する保護手段に対し、前記保護手段の作動を制御する制御信号出力部とを備えたので、入力画像の画素値に基づいて判定のしきい値を変更することにより、助手席の照明状態に判定結果が影響されなくなるため、誤判定を防ぐことができるという効果がある。
【0043】
また、前記画像入力部によって撮影された入力画像をベクトルデータに変換するデータ変換部を備え、ひな型格納部は前記座席の使用状況に対応した複数のひな型画像を前記データ変換部により変換されたベクトルデータで格納し、状況判定部は前記データ変換部で変換された前記入力画像に対応するベクトルデータと、前記ひな型格納部に格納されている各々のひな型画像のベクトルデータとの照合を行い、前記入力画像の画素値に基づいて判定しきい値を変更して前記座席の使用状況を判定することで、助手席の照明状態に判定結果が影響されなくなるため、誤判定を防ぐことができるという効果がある。
【0044】
また、座席の少なくとも一部を含む範囲を撮影し画像情報を得る画像入力部と、座席位置と前記座席位置の周辺を照明する複数の距離測定用照明を備え、前記画像入力部の画像中に含まれる前記距離測定用照明のスポット位置に基づき撮影対象までの距離を算出する距離計測部と、前記距離計測部によって算出された距離から前記座席の使用状況を判定する状況判定部と、前記状況判定部の判定に基づき、所定条件下において車両内部構造体への衝突から乗員を保護する保護手段に対し、前記保護手段の作動を制御する制御信号出力部とを備えたので、乗員がどの位置に存在しても必ず乗員を検出することができるため、乗員検出精度が向上するという効果がある。
【0045】
また、前記距離測定用照明は、画像を撮像する時間だけ照明を行う画像入力用の照明も兼ねているので、小型で安価な座席の使用状況判定装置を実現することができるという効果がある。
【0046】
また、前記座席の使用状況判定装置は、N×N個の画素でマトリックス構成された前記画像入力部を備えたので、小型で安価な座席の使用状況判定装置を実現することができるという効果がある。
【0047】
また、画像入力部と、距離計測部と、制御信号出力部を1つの半導体チップ上に集積化したので、小型で安価な座席の使用状況判定装置を実現することができるという効果がある。
【0048】
また、画像入力部に特定の波長の光だけを透過する光波長選択フィルタを備えたので、耐久性の高い座席の使用状況判定装置を提供することができるという効果がある。
【0049】
また、電源投入時に画像入力部の動作不良を判定する動作不良判断部を備えたので、座席の使用状況判定装置の信頼性を高めることができるという効果がある。
【0050】
また、動作不良判断部は、距離測定用照明を照射した場合の入力画像と、照射しない場合の入力画像とを比較する機能を備えたので、座席の使用状況判定装置の信頼性を高めることができるという効果がある。
【図面の簡単な説明】
【図1】 本発明の実施の形態1の機能構成を示すブロック図である。
【図2】 実施の形態1のひな型格納部に格納されている乗員無の場合のひな型画像と助手席の状態を示す図である。
【図3】 実施の形態1のひな型格納部に格納されている乗員有の場合のひな型画像と助手席の状態を示す図である。
【図4】 実施の形態1のひな型格納部に格納されているCRS前向の場合のひな型画像と助手席の状態を示す図である。
【図5】 実施の形態1のひな型格納部に格納されているCRS後向の場合のひな型画像と助手席の状態を示す図である。
【図6】 実施の形態1のひな型格納部に格納されているスタンディングチャイルドの場合のひな型画像と助手席の状態を示す図である。
【図7】 実施の形態1のデータ変換部と状況判定部における入力画像とひな型画像の照合過程の例を示す図である。
【図8】 実施の形態1の展開信号出力部に格納されているエアバッグ展開の可否を決定するためのテーブルの例を示す図である。
【図9】 本発明の実施の形態2の機能構成を示すブロック図である。
【図10】 本発明の実施の形態2における距離計測部の距離測定用照明の光スポットが当たる位置を示す図である。
【図11】 本発明の実施の形態3の構成を示す図である。
【図12】 実施の形態3におけるLEDスポット光の変化の例を示す図である。
【図13】 本発明の実施の形態4の構成を示すブロック図である。
【図14】 本発明の実施の形態5の構成を示すブロック図である。
【図15】 本発明の実施の形態6の構成を示すブロック図である。
【図16】 本発明の実施の形態7の動作を説明するフローチャートである。
【図17】 本発明の実施の形態8の構成を示すブロック図である。
【図18】 本発明の実施の形態8における動作を説明するフローチャートである。
【符号の説明】
1 画像入力部、2 データ変換部、3 画素平均値計算部、4 状況判定部、5 ひな型格納部、6 制御信号出力部、13 距離計測部、14 インパネ近接位置測距照明、15 助手席座面位置測距照明、16 中間位置測距照明、17 LED、18 ケース、19 LED用レンズ、20 LEDの光、21 ピエゾ素子、22 画像センサ、23 マイクロプロセッサ、24 アナログ/デジタル変換器、25 画素、26 半導体基板、27 光波長選択フィルタ、28 撮像レンズ。
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an apparatus for determining the use status of a seat, such as whether a person is sitting in the seat or whether luggage is placed, and in particular, in an automobile or the like, an airbag apparatus is used according to the use status of the seat. The present invention relates to a device that controls the operation of an occupant protection device such as a seat belt device.
[0002]
[Prior art]
In an automobile in which an airbag is incorporated as an occupant protection device, the airbag operates in the event of a vehicle collision even when no passenger is present in the passenger seat. This operation is meaningless, and it is necessary to replace the operated device even if it is repaired, and there is an unnecessary repair cost. Therefore, it is desirable to stop the operation of the airbag when there is no occupant. Therefore, it is necessary to determine the use situation of the passenger seat when the airbag for the passenger seat is activated. In addition, it is required that the airbag is not deployed when the child seat on which the infant rides is mounted rearward. For this reason, it is desirable that the orientation of the child seat can be detected when the airbag is deployed. A known example of a passenger seat use state determination device that can identify a rear-facing child seat is a distance sensor.
[0003]
[Problems to be solved by the invention]
As a well-known example of a passenger seat presence / absence detection device in a passenger seat, there is an example using a load sensor in JP-A-7-186880. However, such load sensors cannot distinguish between passengers and luggage, and there are problems such as unnecessary repair costs when the airbag is activated when luggage is loaded on the passenger seat. .
[0004]
As a known example of a passenger seat use state determination device capable of identifying a rear-facing child seat, there is an example using a distance sensor in Japanese Patent Application Laid-Open No. 7-19006.
[0005]
However. In this method, it is difficult to distinguish the case where the occupant turns forward and the rear facing child seat.
[0006]
In order to solve the above-described problems, the present invention provides a seat use state determination device that determines whether there is a passenger in the passenger seat, determines the direction of the child seat, and determines whether an object on the passenger seat is a passenger or a baggage. The purpose is to do.
[0007]
[Means for Solving the Problems]
The seat usage status determination apparatus according to the present invention includes an image input unit that captures a range including at least a part of a seat and obtains image information, and a plurality of distance measurement lights that illuminate the seat position and the periphery of the seat position. A distance measuring unit that calculates a distance to a photographing target based on a spot position of the distance measuring illumination included in the image of the image input unit, and a use situation of the seat from the distance calculated by the distance measuring unit And a control signal output unit for controlling the operation of the protection means against the protection means for protecting the occupant from a collision with the vehicle internal structure under a predetermined condition based on the determination of the situation determination section It is equipped with.
[0008]
Further, the distance measuring illumination also serves as an image input illumination that performs illumination for a time required to capture an image.
[0009]
In addition, the seat usage status determination apparatus includes the image input unit configured in a matrix with N × N pixels.
[0010]
Further, the image input unit, the distance measurement unit, and the control signal output unit are integrated on one semiconductor chip.
[0011]
Further, the image input unit includes an optical wavelength selection filter that transmits only light of a specific wavelength.
[0012]
In addition, an operation failure determination unit that determines operation failure of the image input unit when the power is turned on is provided.
[0013]
In addition, the malfunction determination unit has a function of comparing an input image when the distance measurement illumination is irradiated with an input image when the distance measurement illumination is not irradiated.
[0014]
DETAILED DESCRIPTION OF THE INVENTION
Embodiment 1 FIG.
Hereinafter, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a diagram showing a configuration of a seat usage status determining apparatus according to Embodiment 1 of the present invention. In the figure, 1 is an image input unit, 2 is a data conversion unit that converts an image captured by the image input unit 1 into collation data, and 3 is all or some of the pixels of the image captured by the image input unit 1. A pixel average value calculation unit 4 that calculates an average value is used for each of the seats stored in advance in the model storage unit 5 based on the matching data of the data conversion unit 2 and the pixel average value of the pixel average value calculation unit 3. A situation determination unit that compares the template data according to the situation and the threshold value to determine the seat usage status, 5 is a template storage unit that previously stores the template data corresponding to each usage status of the seat, and 6 is the status It is a control signal output unit that outputs a signal related to airbag control based on the seat usage status determined by the determination unit 4.
[0015]
Next, the operation will be described. The image input unit 1 including the image sensor captures an image including at least a part of the sitting position of the passenger seat. The data conversion unit 2 converts the image captured by the image input unit 1 into verification data. The pixel average value calculation unit 3 calculates the average value of all or some of the pixels of the image captured by the image input unit 1. The situation determination unit 4 uses model data corresponding to each use situation of the seat stored in advance in the model storage unit 5 based on the comparison data of the data conversion unit 2 and the pixel average value of the pixel average value calculation unit 3 and its data. Collation is performed based on the threshold value to determine the seat usage status. One or a plurality of model data belong to each seat usage situation. The control signal output unit 6 outputs a signal related to the control of the airbag (not shown) based on the seat usage status determined by the status determination unit 4.
[0016]
The passenger seat states in the present embodiment are 5 for passenger-free, passenger-occupied, child seat forward (hereinafter referred to as CRS forward), child seat rearward (hereinafter referred to as CRS backward), and child standing (hereinafter referred to as standing child). Types are assumed (FIGS. 2A to 6A), and a plurality of template images correspond to each state (FIGS. 2B to 6B). In the figure, 7 is a passenger seat, 8 is a passenger seat instrument panel (hereinafter referred to as instrument panel), 9 is a seated passenger (adult), 10 is a child seat, 11 is a seated child, and 12 is standing up. Indicates a child (standing child). In the model storage unit 5, a model image is stored as model data expressed as a vector converted by the data conversion unit 2.
[0017]
Hereinafter, the operation of the present embodiment will be described with reference to FIG. First, the input image captured by the image input unit 1 is divided by the data conversion unit 2 in, for example, the horizontal direction and the vertical direction, and the average pixel value for each divided image is used as an element, as shown in FIGS. In this way, it is converted into two vector data in the vertical and horizontal directions. In addition, the average value of all or some of the pixels is calculated by the pixel average value calculation unit 3.
[0018]
Next, the vector representation of the input image obtained by the data conversion unit 2 is collated with model data that is a vector representation of the usage status of the five types of seats stored in the model storage unit 5 by the situation determination unit 4. The similarity with the input image is calculated. FIG. 7 (c) shows, for example, one of the template data corresponding to the case where there is an occupant among the template data of each use situation of the seat stored in the model storage unit 5 (the left diagram in FIG. 7 (c)). FIG. 7 shows a matching process between the input image vector data corresponding to the case where there is no occupant (the right figure in FIG. 7 (c)), and shows that matching is performed in the vertical direction or in the horizontal direction. At the same time, the situation determination unit 4 changes the determination threshold value corresponding to each model data stored in the model storage unit 5 according to the average value of the pixels calculated by the pixel average value calculation unit 3.
[0019]
The similarity between the vector data can be calculated by using, for example, inner product calculation, and the similarity between the template data and the vector data of the input image is obtained as, for example, the sum of the similarities in the vertical direction and the horizontal direction. The use status of the seat to which the template data that has the maximum value among the similarity to each template data obtained in this way and exceeds the determination threshold is used as the output of the situation determination unit 4.
[0020]
Finally, the control signal output unit 5 has a table as shown in FIG. 8, for example, in order to determine whether or not the airbag can be deployed. Refer to this table in the category determined by the situation determination unit 4 and deploy the airbag. Outputs a signal related to the control (ON or OFF).
[0021]
As described above, the airbag deployment control can be determined from the image obtained by photographing the situation of the passenger seat.
[0022]
In the present embodiment, an example is shown in which the division of the input image in the data conversion unit 2 is the same width in the horizontal direction and the vertical direction, but the division width may be different, and the division direction may be the horizontal direction or the vertical direction. Either one of them may be used. In the present embodiment, the control signal output unit 5 outputs ON or OFF as a signal related to airbag deployment control. However, the airbag deployment pressure level or a plurality of airbags such as side airbags may be used. If a bag is provided, a signal for controlling the number of airbags to be deployed may be output.
[0023]
Furthermore, in the present embodiment, the pixel average value calculation unit 3 has shown an example in which the pixel values of all or some of the pixels are simply averaged. For example, for the pixel value of the center pixel of the image sensor, May be weighted average by multiplying a large coefficient and applying a small coefficient to the pixel values of surrounding pixels.
[0024]
Embodiment 2. FIG.
FIG. 9 is a diagram showing a configuration of a seat usage status determining apparatus according to Embodiment 2 of the present invention. The image input unit 1, the distance measurement unit 13, the situation determination unit 4, and the control signal output unit 6 include four parts. The image input unit 1 captures an image including at least a part of the passenger seat in the imaging range. The distance measuring unit 13 includes a plurality of distance measuring lights (hereinafter referred to as distance measuring lights). The image input unit 1 captures an image with the distance measurement illumination applied by the distance measurement unit 13 at a certain time, and captures an image when the distance measurement illumination is not applied at the next time, and the distance measurement unit 13 performs these two images. The position of the spot light by the distance measuring illumination is specified by taking the difference of. Furthermore, the distance measurement unit 13 stores in advance the spot light position when no occupant is present, and if there is a deviation in the spot light position, the distance to the spot light can be calculated by the principle of triangulation. is there.
[0025]
As an example of occupant detection according to the present embodiment, a case will be described in which the seating position of the passenger seat is viewed from directly above and nine ranging illuminations are emitted as shown in FIG. For example, in the case of no occupant, as shown in FIG. 10 (a), among the spotlights of the distance measuring illumination, the instrument panel proximity position distance measuring illumination 14, the passenger seat surface position distance measuring illumination 15, and the intermediate position measurement between them. It arrange | positions so that the distance illumination 16 may shine. In the example of FIG. 10, the distance measuring spot light is irradiated to each position in three points parallel to the lateral direction of the seat. If ranging lighting is arranged in this way, when there is an occupant, as shown in FIG. 10 (b), the passenger seat surface position ranging lighting 15 and the intermediate position ranging lighting on the thigh, abdomen or arm of the occupant 9 No. 16 hits and the position of the spot light shifts when compared with the case of no occupant. The spot light shift is photographed by the image input unit 1, and the distance measurement unit 13 calculates the distance to the spot light position based on the position shift. The situation determination unit 3 can determine the presence or absence of a passenger in the passenger seat by comparing with the distance when no passenger is present. The control signal output unit 6 outputs a signal relating to whether or not the airbag can be deployed based on the determination of the situation determination unit 3.
[0026]
In addition, when the standing child 12 is in close contact with the instrument panel 8, as shown in FIG. 10C, the instrument panel near-position distance measuring light 14 hits the head or torso of the standing child, as compared with the case of no occupant. The position of the spot light is shifted. This spot light deviation is photographed by the image input unit 1 as in the case of the occupant in FIG. 10B, and the distance measuring unit 13 calculates the distance to the spot light position based on this position deviation, The determination unit 3 can determine the state of the occupant. The control signal output unit 6 outputs a signal relating to whether or not the airbag can be deployed based on the determination of the situation determination unit 3.
[0027]
Further, when the standing child 12 is away from the instrument panel 8 and in the vicinity of the passenger seat 7, as shown in FIG. 10 (d), the intermediate position measuring light 16 hits the head or the trunk of the standing child and there is no occupant. The position of the spot light shifts when compared. This spot light deviation is photographed by the image input unit 1 as in the case of the occupant in FIG. 10B, and the distance measuring unit 13 calculates the distance to the spot light position based on this position deviation, The determination unit 3 can determine the state of the occupant. The control signal output unit 5 outputs a signal relating to whether or not the airbag can be deployed based on the determination of the situation determination unit 3.
[0028]
In the second embodiment, the detection of the presence of the passenger and the standing child has been described, but it goes without saying that the CRS forward and CRS backward can be detected in the same manner.
[0029]
Further, in the second embodiment, a case has been described where the number of ranging illuminations is three for each position, a total of nine, but each position may be one or two, or may be four or more. In addition, the same number of distance measuring lights may not be used for each position. For example, the number of instrument panel near position distance measuring lights, front passenger seat surface position distance measuring lights, and intermediate position distance measuring lights are three, two, Two may be used.
[0030]
Embodiment 3 FIG.
FIG. 11 is a diagram showing a configuration of a seat usage status determining apparatus according to Embodiment 3 of the present invention. In the figure, 17 is an LED, 19 is a lens for condensing LED light, 20 is LED light, 21 is a piezoelectric element whose length changes with voltage, 22 is an image sensor constituting an image input unit, and 23 is a situation A microprocessor 18 that performs determination and the like is a case that houses these electronic elements.
[0031]
Next, the operation will be described with reference to FIGS. When performing distance measurement, a signal is sent from the microprocessor 23 and a voltage is applied to the piezo element 21. The length of the piezo element 21 changes depending on the voltage, the position of the LED 17 on the piezo element 21 changes, and the position of the LED 17 moves to the focal position of the lens 19. If the LED 17 is at the focal position of the lens 19, the LED light 20 becomes a small spot as shown in FIG. 12A, and the spot position can be imaged by the image sensor 22. On the other hand, when inputting an image, a signal is sent from the microprocessor 23 and a voltage is applied to the piezo element 21. The length of the piezo element 21 changes depending on the voltage, the position of the LED 17 on the piezo element 21 changes, and the position of the LED 17 moves to a position deviated from the focus of the lens 19. If the LED 17 is located at a position deviated from the focal point of the lens 19, as shown in FIG. 12 (b), the LED light 20 diffuses and irradiates a large area. Imaging can be performed by the sensor 22.
[0032]
Embodiment 4 FIG.
FIG. 13 is a diagram showing a configuration of a seat usage status determining apparatus according to Embodiment 4 of the present invention. In the figure, 22 is an image sensor, 23 is a microprocessor, 24 is an analog / digital conversion circuit, 25 is a pixel, and the image sensor 22 is configured in an array of 32 × 32.
[0033]
Next, the operation will be described with reference to FIG. The image sensor 22 captures an image with 32 × 32 arrayed pixels 25, converts it into 32 × 32 analog electrical signals, and sends the output to the analog / digital conversion circuit 24. The analog / digital conversion circuit 24 converts the 32 × 32 analog electrical signals sent from the image sensor 22 into 32 × 32 digital electrical signals and sends the output to the microprocessor 23. The microprocessor 23 takes in 32 × 32 digital electric signals sent from the analog / digital conversion circuit 24 and determines the use situation of the seat. For this reason, since the microprocessor only needs to process 32 × 32 digital electric signals, a small and inexpensive microprocessor can be used, and an inexpensive seat use state determination device can be realized.
[0034]
Embodiment 5 FIG.
In the fourth embodiment, the image sensor 22, the microprocessor 23, and the analog / digital conversion circuit 24 are individually assembled to configure the seat usage state determination device. However, in the present embodiment, the image sensor 22, the microprocessor 23, the analog / Digital conversion circuit 24 is integrated on one chip. FIG. 14 is a diagram showing a configuration of a seat usage status determining apparatus according to Embodiment 5 of the present invention. In the figure, 22 is an image sensor (image input unit), 23 is a microprocessor (distance measuring unit, control signal output unit), 24 is an analog / digital conversion circuit, 26 is an image sensor 22, microprocessor 23, analog / digital conversion. This is a semiconductor substrate in which the circuit 24 is integrated on one chip.
[0035]
Next, the operation will be described. The image sensor 22 captures an image, converts it into an analog electrical signal, and sends the output to the analog / digital conversion circuit 24. The analog / digital conversion circuit 24 converts the analog electric signal sent from the image sensor 22 into a digital electric signal, and sends the output to the microprocessor 23. The microprocessor 23 takes in the digital electric signal sent from the analog / digital conversion circuit 24 and determines the seat usage status.
[0036]
Embodiment 6 FIG.
FIG. 15 is a diagram showing a configuration of a seat usage status determining apparatus according to Embodiment 6 of the present invention. If you smoke in the car, the cigarette dust adheres to the optical system and the image input sensitivity decreases, which may lead to an erroneous determination of the seat usage status. The present embodiment solves such a problem.
In the figure, reference numeral 22 denotes an image sensor, 27 denotes a light wavelength selection filter that transmits only light having a wavelength of light that passes through the tobacco dust, and 28 denotes an imaging lens.
[0037]
Next, the operation will be described. Since the optical wavelength selection filter that transmits only the light having the wavelength of the light transmitted through the cigarette dust is attached in front of the image pickup lens 28, the change in the light transmittance due to the cigarette light of the image pickup lens 28 is eliminated, and the image sensor The input image is not affected by the tobacco dust, and the seat usage status can be accurately determined.
[0038]
Embodiment 7 FIG.
FIG. 16 is a flowchart showing detection of an operation failure of the image sensor of the seat usage status determination apparatus according to Embodiment 7 of the present invention. This malfunction detection of the image sensor is performed by the microprocessor 23 constituting the malfunction determination unit. In the figure, step S100 is power-on of the occupant detection device, step S110 is a defect inspection start process for the image sensor, step S120 is a process for determining whether or not a signal of each pixel is being output, and step S130 is unnecessary. The warning signal output process as step S140 is a seat use state determination start process as a normal operation.
[0039]
Next, the operation of each block will be described. First, when the power is turned on in step S100, the defect determination of the image sensor in step S110 is started, and in step S120, it is determined whether or not the output signal of each pixel of the image sensor is output with a normal value. If not output, a warning is given as an operation failure in step S130. On the other hand, if it is output as a normal value in the determination process in step S120, it is determined that the operation is normal, and the use state of the seat is determined in step S140 to start occupant detection.
[0040]
Embodiment 8 FIG.
FIG. 17 is a block diagram showing detection of an operation failure of the image sensor of the seat usage status determination apparatus according to Embodiment 8 of the present invention. In the figure, 17 is an LED, 22 is an image sensor, and 23 is a microprocessor. FIG. 18 is a flowchart showing detection of an operation failure of the image sensor of the seat usage status determination apparatus according to Embodiment 8 of the present invention. The detection of malfunction of the image sensor is performed by the microprocessor 23. In the figure, step S110 is a defect inspection start process of the image sensor, step S150 is an image signal acquisition process when the LED is irradiated, step S160 is an image signal acquisition process when the LED is not irradiated, and step S170 is an LED. Is a comparison process of the image signal when the irradiation is performed and the image signal when the irradiation is not performed. Step S180 is a warning signal output process as a malfunction when it is determined that the result of comparison in step S170 is not normal, and step S190 is compared in step S170. As a result, the seat usage status determination start process is shown as normal operation when it is determined to be normal.
[0041]
Next, the operation of the block will be described. The microprocessor 23 compares the image acquired by the image sensor 22 when the LED 17 is irradiated with the image acquired by the image sensor 22 when the LED 17 is not irradiated. By comparing the comparison of the two images with the microprocessor 23 to determine whether the image sensor 22 is normal or not, a defect inspection of the image sensor is possible. In other words, a clear and strong image can be obtained by the image sensor 22 if there is irradiation by the LED 17. When there is no irradiation by the LED 17, a blurred and weak image is obtained by the image sensor 22. If the image sensor 22 is normal, the microprocessor 23 can determine acquisition of an image according to each condition (whether or not the LED 17 is irradiated).
[0042]
【The invention's effect】
According to the present invention, an image input unit that captures a range including at least a part of a seat and obtains image information, a model storage unit that stores a plurality of model images corresponding to the use state of the seat, and the image The image information obtained by input is compared with each model image stored in the model storage unit, and the determination threshold value is changed based on the pixel value of the input image to determine the use status of the seat. And a control signal output unit for controlling the operation of the protection means against the protection means for protecting the occupant from a collision with the vehicle internal structure under a predetermined condition based on the determination of the situation determination section. Since the determination result is not affected by the illumination state of the passenger seat by changing the determination threshold based on the pixel value of the input image, there is an effect that erroneous determination can be prevented.
[0043]
And a data conversion unit that converts the input image captured by the image input unit into vector data, and the model storage unit is a vector obtained by converting a plurality of model images corresponding to the use situation of the seat by the data conversion unit. The data is stored, and the situation determination unit compares the vector data corresponding to the input image converted by the data conversion unit with the vector data of each template image stored in the template storage unit, and By determining the use situation of the seat by changing the determination threshold based on the pixel value of the input image, the determination result is not affected by the lighting state of the passenger seat, so that an erroneous determination can be prevented There is.
[0044]
The image input unit includes an image input unit that captures a range including at least a part of the seat and obtains image information, and a plurality of distance measurement lights that illuminate the seat position and the periphery of the seat position. A distance measuring unit that calculates a distance to an imaging target based on a spot position of the included illumination for distance measurement, a situation determining unit that determines a use situation of the seat from the distance calculated by the distance measuring unit, and the situation A control signal output unit for controlling the operation of the protection means is provided for the protection means for protecting the occupant from a collision with the vehicle internal structure under a predetermined condition based on the determination by the determination unit. An occupant can always be detected even if the vehicle is present in the vehicle, so that the occupant detection accuracy is improved.
[0045]
In addition, the distance measurement illumination also serves as an image input illumination that performs illumination for the time required to capture an image, so that there is an effect that it is possible to realize a small and inexpensive seat usage determination device.
[0046]
In addition, since the seat usage status determination device includes the image input unit configured in a matrix with N × N pixels, it is possible to realize a small and inexpensive seat usage status determination device. is there.
[0047]
In addition, since the image input unit, the distance measurement unit, and the control signal output unit are integrated on one semiconductor chip, there is an effect that a small and inexpensive seat use state determination device can be realized.
[0048]
In addition, since the image input unit includes the optical wavelength selection filter that transmits only light of a specific wavelength, there is an effect that it is possible to provide a highly durable seat use state determination device.
[0049]
In addition, since the operation failure determination unit that determines the operation failure of the image input unit when the power is turned on is provided, there is an effect that the reliability of the seat use state determination device can be improved.
[0050]
In addition, since the malfunction determination unit has a function of comparing the input image when the distance measurement illumination is irradiated and the input image when the distance measurement illumination is not irradiated, the reliability of the seat usage status determination device can be improved. There is an effect that can be done.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a functional configuration according to a first embodiment of the present invention.
FIG. 2 is a diagram showing a model image and a passenger seat state when no occupant is stored in the model storage unit according to the first embodiment;
FIG. 3 is a diagram showing a model image and a passenger seat state in the case where there is an occupant stored in the model storage unit of the first embodiment.
FIG. 4 is a diagram showing a model image and a state of a passenger seat in the case of CRS forward stored in the model storage unit of the first embodiment.
FIG. 5 is a diagram showing a model image and a state of a passenger seat in the case of CRS backwards stored in the model storage unit according to the first embodiment.
6 is a diagram showing a model image and a state of a passenger seat in the case of a standing child stored in the model storage unit of Embodiment 1. FIG.
FIG. 7 is a diagram illustrating an example of a matching process between an input image and a template image in the data conversion unit and the situation determination unit according to the first embodiment.
8 is a diagram showing an example of a table for determining whether or not an airbag can be deployed stored in the deployment signal output unit of the first embodiment. FIG.
FIG. 9 is a block diagram showing a functional configuration of a second embodiment of the present invention.
FIG. 10 is a diagram illustrating a position where a light spot of a distance measurement illumination of a distance measurement unit according to a second embodiment of the present invention hits.
FIG. 11 is a diagram showing a configuration of a third embodiment of the present invention.
12 is a diagram showing an example of changes in LED spot light in Embodiment 3. FIG.
FIG. 13 is a block diagram showing a configuration of a fourth embodiment of the present invention.
FIG. 14 is a block diagram showing a configuration of a fifth embodiment of the present invention.
FIG. 15 is a block diagram showing a configuration of a sixth embodiment of the present invention.
FIG. 16 is a flowchart for explaining the operation of the seventh embodiment of the present invention.
FIG. 17 is a block diagram showing a configuration of an eighth embodiment of the present invention.
FIG. 18 is a flowchart illustrating an operation in the eighth embodiment of the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Image input part, 2 Data conversion part, 3 Pixel average value calculation part, 4 Situation determination part, 5 Model storage part, 6 Control signal output part, 13 Distance measurement part, 14 Instrument panel proximity position ranging illumination, 15 Passenger seat Surface position measurement illumination, 16 Intermediate position measurement illumination, 17 LED, 18 Case, 19 LED lens, 20 LED light, 21 Piezo element, 22 Image sensor, 23 Microprocessor, 24 Analog / digital converter, 25 pixels , 26 Semiconductor substrate, 27 Optical wavelength selection filter, 28 Imaging lens.

Claims (7)

座席の少なくとも一部を含む範囲を撮影し画像情報を得る画像入力部と、座席位置と前記座席位置の周辺を照明する複数の距離測定用照明を備え、前記画像入力部の画像中に含まれる前記距離測定用照明のスポット位置に基づき撮影対象までの距離を算出する距離計測部と、前記距離計測部によって算出された距離から前記座席の使用状況を判定する状況判定部と、前記状況判定部の判定に基づき、所定条件下において車両内部構造体への衝突から乗員を保護する保護手段に対し、前記保護手段の作動を制御する制御信号出力部とを備えることを特徴とする座席の使用状況判定装置。An image input unit that captures a range including at least a part of the seat and obtains image information, and a plurality of distance measurement lights that illuminate the seat position and the periphery of the seat position are included in the image of the image input unit A distance measuring unit that calculates a distance to a subject to be photographed based on the spot position of the distance measuring illumination, a situation determining unit that determines a use situation of the seat from the distance calculated by the distance measuring unit, and the situation determining unit And a control signal output unit for controlling the operation of the protection means for the protection means for protecting the occupant from a collision with the vehicle internal structure under a predetermined condition based on the determination of Judgment device. 前記距離測定用照明は、画像を撮像する時間だけ照明を行う画像入力用の照明も兼ねていることを特徴とする請求項1に記載の座席の使用状況判定装置。2. The seat use state determination apparatus according to claim 1, wherein the distance measurement illumination also serves as an image input illumination that performs illumination for a time during which an image is captured. 前記座席の使用状況判定装置は、N×N個の画素でマトリックス構成された前記画像入力部を備えることを特徴とする請求項1または2に記載の座席の使用状況判定装置。The seat usage status determination apparatus according to claim 1, wherein the seat usage status determination device includes the image input unit configured in a matrix with N × N pixels. 画像入力部と、距離計測部と、制御信号出力部が1つの半導体チップ上に集積化されたことを特徴とする請求項1ないし3のいずれかに記載の座席の使用状況判定装置。4. The seat usage status determining apparatus according to claim 1, wherein the image input unit, the distance measuring unit, and the control signal output unit are integrated on a single semiconductor chip. 画像入力部に特定の波長の光だけを透過する光波長選択フィルタを備えることを特徴とする請求項1ないし4のいずれかに記載の座席の使用状況判定装置。5. The seat usage status determination apparatus according to claim 1, wherein the image input unit includes an optical wavelength selection filter that transmits only light of a specific wavelength. 電源投入時に画像入力部の動作不良を判定する動作不良判断部を備えたことを特徴とする請求項1ないし5のいずれかに記載の座席の使用状況判定装置。6. The seat usage status determination apparatus according to claim 1, further comprising an operation failure determination unit that determines an operation failure of the image input unit when the power is turned on. 動作不良判断部は、距離測定用照明を照射した場合の入力画像と、照射しない場合の入力画像とを比較する機能を備えたことを特徴とする請求項6に記載の座席の使用状況判定装置。The seat use state determination device according to claim 6, wherein the malfunction determination unit has a function of comparing an input image when the distance measurement illumination is irradiated with an input image when the distance measurement illumination is not irradiated. .
JP2003184706A 2003-06-27 2003-06-27 Seat usage status judging device Expired - Fee Related JP3808454B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003184706A JP3808454B2 (en) 2003-06-27 2003-06-27 Seat usage status judging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003184706A JP3808454B2 (en) 2003-06-27 2003-06-27 Seat usage status judging device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP20780898A Division JP3460954B2 (en) 1998-07-23 1998-07-23 Seat usage status determination device

Publications (2)

Publication Number Publication Date
JP2004069687A JP2004069687A (en) 2004-03-04
JP3808454B2 true JP3808454B2 (en) 2006-08-09

Family

ID=32025683

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003184706A Expired - Fee Related JP3808454B2 (en) 2003-06-27 2003-06-27 Seat usage status judging device

Country Status (1)

Country Link
JP (1) JP3808454B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4438753B2 (en) 2006-01-27 2010-03-24 株式会社日立製作所 In-vehicle state detection system, in-vehicle state detection device and method

Also Published As

Publication number Publication date
JP2004069687A (en) 2004-03-04

Similar Documents

Publication Publication Date Title
US8081800B2 (en) Detection device of vehicle interior condition
US6198998B1 (en) Occupant type and position detection system
US7607509B2 (en) Safety device for a vehicle
US7898402B2 (en) Vehicle occupant detection apparatus
US5528698A (en) Automotive occupant sensing device
US20080048887A1 (en) Vehicle occupant detection system
US20040085448A1 (en) Vehicle occupant detection apparatus for deriving information concerning condition of occupant of vehicle seat
US6781676B2 (en) Structured lighting detection of vehicle occupant type and position
KR20000062977A (en) Electronic optical target ranging and imaging
US20020149184A1 (en) Method and device for controlling the operation of a vehicle-occupant protection device assigned to a seat, in particular in a motor vehicle
JP2007055294A (en) Occupant detection apparatus for vehicle
US7661706B2 (en) Vehicle occupant sensing system
US6678598B1 (en) Device and method for seat supervision in motor vehicles
KR100759238B1 (en) Device for detecting whether a vehicle seat is occupied by means of a stereoscopic image recording sensor
US10579867B2 (en) Method and device for detecting an object in a vehicle
US20050151053A1 (en) Infrared proximity sensor for air bag safety
JP3460954B2 (en) Seat usage status determination device
JP3808454B2 (en) Seat usage status judging device
US10882484B2 (en) Occupant detection apparatus
JP3344551B2 (en) Crew posture determination device
US10746877B2 (en) Functional safety concept for a 3D interior observation camera
JPH10157563A (en) Vehicle control device
US11999233B2 (en) Driver monitoring device, storage medium storing computer program for driver monitoring, and driver monitoring method
MXPA00002823A (en) Electronic optical target ranging and imaging
KR19980024680A (en) Sensor to detect occupant posture

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060516

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060517

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110526

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110526

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees