JP7296838B2 - 緊急通報装置及び方法 - Google Patents

Description

本発明は、緊急通報装置及び方法に関する。

従来、事故などの際にセンタサーバに通報を行う緊急通報システムが知られている。緊急通報システムでは、センタサーバと通信を行うためにテレマティクスコントロールユニット（ＴＣＵ）を備えるものがある（例えば、特許文献１）。緊急通報システムには、センタサーバに手動で緊急通報を行うための手動スイッチを設けた車両に配置される場合がある。このような手動での緊急通報は、手動スイッチの押圧を検出することによって開始される。

特開２０１５－１７６５６６号公報

このような緊急通報システムでは、手動スイッチの押圧が子供のいたずら等によって行われた場合に誤通報が発生する。そのために、緊急通報システムのセンタサーバにおいて無駄な対応が増加するという不都合があった。

本発明の目的は、緊急通報システムのセンタサーバへの緊急通報の誤通報を減少させる緊急通報装置及び方法を提供することである。

本発明による緊急通報装置は、車両に配置され、押圧により手動で緊急通報を行うための手動スイッチを設けた緊急通報装置であって、車両の車室内に配置され、手動スイッチを押圧可能な人物を撮影可能なカメラにより撮影された画像を取得する画像取得部と、画像取得部によって取得された画像に写った人物の表情を特定する表情特定部と、特定した表情に基づいて、緊急通報を中止するか否かを判定する通報判定部と、を備えることを特徴とする。

好適には、本発明による緊急通報装置は、手動スイッチの押圧を検出する押圧検出部をさらに備え、画像取得部は、手動スイッチの押圧を検出した時に画像を取得することを特徴とする。

好適には、本発明による緊急通報装置は、手動スイッチの押圧を検出する押圧検出部をさらに備え、表情特定部は、画像取得部によって取得された画像の内、手動スイッチの押圧を検出した時にカメラにより撮影された画像に写った人物の表情を特定することを特徴とする。

好適には、通報判定部は、特定した表情が笑顔である場合、緊急通報を中止すると判定することを特徴とする。

好適には、表情特定部は、取得した画像に写った人物の顔の向きを特定し、通報判定部は、特定した人物の顔の向きが手動スイッチを注視する向きでない場合、緊急通報を中止すると判定することを特徴とする。

好適には、通報判定部は、押圧検出部が手動スイッチの押圧を検出した後、予め決定された時間間隔内に再度、押圧検出部が手動スイッチの押圧を検出した場合、緊急通報を中止しないと判定することを特徴とする。

好適には、通報判定部は、緊急通報装置が搭載された車両が走行中である場合、緊急通報を中止すると判定することを特徴とする。

好適には、通報判定部は、表情特定部において、取得された画像に写る人物の表情を特定できなかった場合、緊急通報を中止しないと判定することを特徴とする。

本発明による緊急通報方法は、車両に配置され、押圧により手動で緊急通報を行うための手動スイッチを用いる、コンピュータによって行う緊急通報方法であって、車両の車室内に配置され、手動スイッチを押圧可能な人物を撮影可能なカメラにより撮影された画像を取得するステップと、取得された画像に写った人物の表情を特定するステップと、特定した表情に基づいて緊急通報を中止するか否かを判定するステップと、を備えることを特徴とする。

本発明によれば、緊急通報システムのセンタサーバへの緊急通報の誤通報を減少させることができる。

本実施の形態における緊急通報装置を備える緊急通報システムの概要を示す図である。 本実施の形態における緊急通報装置の構成図の一例である。 笑顔に特徴的な状態である表情要素を有する表情の例を示す図である。 笑顔に特徴的でない表情要素を有する表情の例を示す図である。 本実施の形態における緊急通報装置と通信を行うセンタサーバの構成図の一例である。 図２に示す緊急通報装置の緊急通報処理の一例を示すフローチャートである。

本発明による緊急通報装置及び方法を、図面を参照しながら詳細に説明する。図面中、同一構成要素には同一符号を付すものとする。
図１は、本実施の形態における緊急通報装置を備える緊急通報システムの概要を示す図である。図１に示す緊急通報システムは、車両１及びセンタサーバ２を備える。車両１及びセンタサーバ２は、通信ネットワーク３を介して通信を行う。

車両１は、ＴＣＵ１１と、手動スイッチ１２と、車内カメラ１３と、を備える。車内カメラ１３は、手動スイッチ１２を押圧可能な人物を撮影可能な車室内の所定の位置に配置される。ＴＣＵ１１は、手動スイッチ１２が押圧されたことを検出すると、手動通報処理を開始する（ステップＳ１）。この時、ＴＣＵ１１は、車内カメラ１３から画像を取得する（ステップＳ２）。取得した画像に写っている人物が特定の表情をしている場合、ＴＣＵ１１は、手動通報処理を中止する（ステップＳ３）。

図２は、本実施の形態における緊急通報装置の構成図の一例である。図２において、ＴＣＵ１１は、制御部１４及び通信部１５を備える。制御部１４は、手動スイッチ１２、車内カメラ１３、ディスプレイ１６及び位置取得部１７と接続される。

手動スイッチ１２は、車両１の乗員等がセンタサーバ２に手動で緊急通報を行うためのスイッチである。手動スイッチ１２は、車両１のダッシュボードに配置され、押圧されている間にオン信号（ハイ信号）を制御部１４に出力する。

車内カメラ１３は、レンズ及び撮像素子を備える。本実施の形態では、車内カメラ１３は、車両１の車室内に配置される。また、車内カメラ１３は、手動スイッチ１２を押圧可能な位置の人物を撮影できる位置に配置される。具体的には、車内カメラ１３は、車両１の前方に配置される。例えば、車内カメラ１３は、ダッシュボードなどに配置され、手動スイッチ１２を押圧可能な運転席、助手席、これらの二つの席の間の空間等を撮影できるように配置される。

車内カメラ１３は、撮影した画像に対して、輝度補正、コントラスト補正、圧縮等の画像処理を、車内カメラ１３又はＴＣＵ１１内に配置されたハードウェア回路（図示せず）によって行い、ＭＰＥＧ形式等の画像データとして制御部１４に出力する。

ディスプレイ１６は、各種処理に応じて制御部１４によって出力された画像データに対応する画像を表示する。本実施の形態では、ディスプレイ１６は、緊急通報の動作についての情報を示す画像を表示する。緊急通報の動作についての情報は、例えば、「手動スイッチが押されたために緊急通報を行っています」等の文字情報である。

位置取得部１７は、ＧＰＳ(Global Positioning System)や、ＧＮＳＳ(Global Navigation Satellite System)などの衛星測位システム信号を用いて算出された時刻及び車両１の位置情報を取得する。位置取得部１７によって取得された時刻及び車両１の位置情報は、制御部１４に供給される。

制御部１４は、マイクロコンピュータと、入出力ポート、インタフェース回路等の周辺回路と、を備える。マイクロコンピュータは、ＣＰＵ(Central Processing Unit)、ＲＡＭ(Random Access Memory)及びＲＯＭ(Read Only Memory)を備える。マイクロコンピュータは、コンピュータの一例である。

ＣＰＵは、緊急通報制御プログラムなどの各種制御プログラムを実行する。ＲＡＭは、位置取得部１７から取得した時刻及び車両１の位置情報、車内カメラ１３から取得した画像等を一時的に格納する。ＲＯＭは、各種制御プログラム、車両１を識別するための車両ＩＤ等を格納する。

本実施の形態では、制御部１４は、押圧検出部１４ａ、画像取得部１４ｂ、顔画像抽出部１４ｃ、表情特定部１４ｄ、通報判定部１４ｅ、通信制御部１４ｆ及び表示制御部１４ｇを備える。押圧検出部１４ａ、画像取得部１４ｂ、顔画像抽出部１４ｃ、表情特定部１４ｄ、通報判定部１４ｅ、通信制御部１４ｆ及び表示制御部１４ｇは、ＣＰＵによって実行されるプログラムによってソフトウェア的に構成される。マイクロコンピュータの専用回路により一部又は全てをハードウェア的に構成してもよい。

押圧検出部１４ａは、手動スイッチ１２の押圧を検出する。なお、本実施の形態で押圧検出部１４ａが検出するのは、いわゆる「長押し」に対応する押圧である。すなわち、押圧検出部１４ａは、手動スイッチ１２が予め決定された時間（例えば、１秒）以上の時間押圧され続けられている場合に、押圧を検出する。詳細には、押圧検出部１４ａは、手動スイッチ１２からのオン信号の持続時間をＣＰＵの内部クロックに基づいて計測する。その後、押圧検出部１４ａは、該持続時間と予め決定された時間とを比較することによって、手動スイッチ１２が押圧されたか否かを判断する。

画像取得部１４ｂは、車内カメラ１３により撮影された画像を取得する。具体的には、画像取得部１４ｂは、手動スイッチ１２の押圧を押圧検出部１４ａが検出した時に車内カメラ１３によって撮影された画像を取得する。画像取得部１４ｂは、取得した画像を顔画像抽出部１４ｃに出力する。

顔画像抽出部１４ｃは、画像取得部１４ｂが取得した画像から、人物の顔が写っている領域（以下、「顔画像」）を抽出する。例えば、顔画像抽出部１４ｃは、顔画像検出用に予め学習されたAdaBoost、サポートベクトルマシンのような識別器（図示せず）を用いて顔画像を抽出する。

例えば、顔画像抽出部１４ｃは、画像に対して検出ウィンドウを設定し、検出ウィンドウが設定された領域から、識別器で利用される特徴量を抽出する。特徴量は、例えば、ＨＯＧ特徴量である。そして、顔画像抽出部１４ｃは、抽出した特徴量を識別器に入力することによって、検出ウィンドウが設定された領域に顔画像が存在するか否かの結果を得る。なお、ＨＯＧ特徴量は、局所領域（セル）の画素値を勾配方向ヒストグラム化して特徴量としたものをいう。

顔画像抽出部１４ｃは、上記の処理を検出ウィンドウの位置を変えながら繰り返すことによって、画像中に人物の顔が存在するか否かを判断し、人物の顔が存在する場合には、顔画像を抽出し、ＲＡＭに記憶させる。

上述した顔画像を抽出するための処理は一例であり、顔画像を抽出するために他の処理を適用することもできる。

表情特定部１４ｄは、顔画像から人物がどのような表情をしているかを特定する。本実施の形態では、表情特定部１４ｄは、顔画像に写っている人物の表情が笑顔であるか否かを特定する。

表情特定部１４ｄは、顔画像に含まれる顔の口角、眉毛の角度、目等に基づいて、顔画像に写っている人物の表情が笑顔であるか否かを特定する。

具体的には、表情特定部１４ｄは、顔画像に含まれる顔の口角、眉毛の角度、目等の表情要素に基づいて、顔画像に写っている人物の表情が笑顔に類似しているかの度合いである笑顔度を算出する。

先ず、表情特定部１４ｄは、表情要素ごとにスコアを算出する。表情特定部１４ｄは、表情要素が笑顔の場合に特徴的な状態である場合、高いスコアを付与する。例えば、図３に示すように、符号Ｆ１を付した口角が上がっている、符号Ｆ２を付した眉毛の角度がハの字になっている、符号Ｆ３を付した目が閉じがちである等の笑顔に特徴的な状態である表情要素には、表情特定部１４ｄは、高いスコアを付与する。逆に、図４に示すように、符号Ｆ１を付した口角が下がっている、符号Ｆ２を付した眉毛の角度が逆ハの字になっている、符号Ｆ３を付した目を見開いている等の笑顔に特徴的でない要素には、表情特定部１４ｄは、低いスコアを付与する。

次に、表情特定部１４ｄは、各表情要素のスコアに基づいて笑顔度を算出する。具体的には、表情特定部１４ｄは、各表情要素のスコアの和を取り、笑顔度を算出する。表情特定部１４ｄは、笑顔度が予め決定された閾値以上である場合、顔画像に写っている人物の表情が笑顔であると特定する。

上述した笑顔であるか否かを判定する手法は一例であり、笑顔であるか否かを判定する手法として、他の種々の公知となっている技術を用いてもよい。

通報判定部１４ｅは、表情特定部１４ｄによって特定した表情に基づいて、センタサーバ２への緊急通報を中止するか否かを判定する。本実施の形態では、通報判定部１４ｅは、顔画像に含まれる顔の表情が笑顔であると表情特定部１４ｄによって判定されたときにセンタサーバ２への緊急通報を中止すると判定する。

通信制御部１４ｆは、通信部１５を用いたセンタサーバ２との通信の制御を行う。表示制御部１４ｇは、ディスプレイ１６に表示させる画像を生成し、生成した画像をディスプレイ１６に表示させる制御を行う。

通信部１５は、通信ネットワーク３に接続するためのインタフェース回路を有する。そして、通信部１５は、通信ネットワーク３を介してセンタサーバ２と通信を行う。

図５は、本実施の形態における緊急通報装置と通信を行うセンタサーバの構成図の一例である。図５において、センタサーバ２は、制御部２１、通信部２２及びメモリ２３を備える。

制御部２１は、マイクロコンピュータと、入出力ポート、インタフェース回路等の周辺回路と、を備える。マイクロコンピュータは、ＣＰＵ、ＲＡＭ及びＲＯＭを備える。ＣＰＵは、各種制御プログラムを実行する。ＲＡＭは、ＴＣＵ１１からのデータ等を一時的に格納する。ＲＯＭは、各種制御プログラム等を格納する。

本実施の形態では、制御部２１は、通信制御部２１ａを備える。通信制御部２１ａは、ＣＰＵによって実行されるプログラムによってソフトウェア的に構成される。マイクロコンピュータの専用回路により一部又は全てをハードウェア的に構成してもよい。

通信制御部２１ａは、通信部２２を用いたＴＣＵ１１との通信の制御を行う。通信部２２は、通信ネットワーク３に接続するためのインタフェース回路を有する。そして、通信部２２は、通信ネットワーク３を介してＴＣＵ１１と通信を行う。メモリ２３は、センタサーバ２と通信可能な車両を判別するために車両１の車両ＩＤ等を予め格納する。

図６は、図２に示す緊急通報装置の緊急通報処理の一例を示すフローチャートである。このフローは、センタサーバ２への緊急通報を中止するか否かを判定するためのものであり、ＲＯＭに予め記憶されている緊急通報プログラムに基づいて、主にＴＣＵ１１の各要素によって実行される。また、このフローは、押圧検出部１４ａが手動スイッチ１２の長押しを検出した時に実行される。

先ず、画像取得部１４ｂが、手動スイッチ１２が長押された時に車内カメラ１３によって撮影された画像を取得する（ステップＳ１１）。

次に、顔画像抽出部１４ｃは、画像取得部１４ｂが取得した画像から人物の顔画像を、上述した顔画像を抽出するための処理により抽出する。通報判定部１４ｅは、顔画像が抽出できたか否かを判断する（ステップＳ１２）。通報判定部１４ｅは、顔画像が抽出できなかった場合は緊急通報を中止しないと判定する（ステップＳ１２のＮｏ）。その後、制御部１４は、緊急通報処理を車両ＩＤと関連付けて行い（ステップＳ１３）、処理を終了する。

また、緊急通報時に画像取得部１４ｂが取得した画像をセンタサーバ２に送信してもよい。これによって、車両１の内部の状況を視覚的に伝えることができる。

顔画像抽出部１４ｃにおいて顔画像が抽出できた場合（ステップＳ１２のＹｅｓ）、表情特定部１４ｄは、顔画像に写っている人物の表情が笑顔であるか否かを、上述した笑顔であるか否かを判定する手法により特定する（ステップＳ１４）。通報判定部１４ｅは、顔画像に写っている人物の表情が笑顔でない場合は緊急通報を中止しないと判定する（ステップＳ１４のＮｏ）。制御部１４は、緊急通報処理を車両ＩＤと関連付けて行い（ステップＳ１３）、処理を終了する。

顔画像に写っている人物の表情が笑顔である場合（ステップＳ１４のＹｅｓ）、通報判定部１４ｅは、センタサーバ２への緊急通報を中止すると判定する。その後、制御部１４は、センタサーバ２への緊急通報の中止処理を行う（ステップＳ１５）。センタサーバ２への緊急通報を中止する場合、表示制御部１４ｇは、手動スイッチ１２が押圧されたがいたずらの可能性があるために通報を中止した旨をディスプレイ１６に表示させる。

また、センタサーバ２への緊急通報を中止するか否かを、笑顔以外の表情（例えば、満足／不満足の分類、真顔／喜び／驚き／怒り／悲しみの五つの表情）又は笑顔と笑顔以外の表情の組合せに基づいて判定してもよい。

本実施の形態によれば、画像取得部１４ｂによって取得された画像に写った人物の表情が笑顔である時に、緊急通報を実行しないと判定する。これによって、センタサーバ２への緊急通報の誤通報を減少させることができる。

＜変形例１＞
上述した実施の形態に加えて、通報判定部１４ｅは、通報判定部１４ｅは、特定した表情に基づいて緊急通報を中止するか否かを判定するのに加えて、車両１が走行中であるか否かをさらに判断してもよい。具体的には、通報判定部１４ｅは、位置取得部１７が取得した位置情報に含まれる車両１の位置の変化に基づいて、車両１が走行中であるか否かをさらに判断する。例えば、通報判定部１４ｅは、位置情報に含まれる車両１の位置が予め決定された時間間隔（例えば、１０秒）内で変化したときに、車両１が走行中であると判断する。また、併せて車両１それ自体の情報を用いてもよい。例えば、通報判定部１４ｅは、車両１のイグニション信号や、図示しない速度センサから取得した速度情報などを用いて走行中であるか否かを判断してもよい。

車両１が走行中であると判断された場合、通報判定部１４ｅは、手動スイッチ１２の押圧が荷物等によって行われたと判断する。そして、通報判定部１４ｅは、緊急通報を実行しないと判定し、制御部１４は、センタサーバ２への緊急通報を中止する。

このような構成とすることで、車両１が走行中であるときにセンタサーバ２への緊急通報を実行しないことによって、センタサーバ２への誤通知を減少させることができる。特に、手動スイッチ１２は、見た目や運転操作への影響を鑑みてグローブボックス下などに配置される場合もある。このような場合に荷物や足などが接触して押圧することによる誤操作による誤通報を減少させることができる。

＜変形例２＞
また、上述した実施の形態では、通報判定部１４ｅは、特定した表情に基づいて緊急通報を中止するか否かを判定していたが、さらに、押圧検出部１４ａが手動スイッチ１２の押圧を検出した後、予め決定された時間間隔（例えば、１分）内に再度押圧検出部１４ａが手動スイッチ１２の押圧を検出したか否かを判断してもよい。

手動スイッチ１２の押圧を再度検出したと判断された場合、緊急通報を中止しないと判定する。そして、制御部１４は、センタサーバ２への緊急通報を車両ＩＤと関連付けて行う。

手動スイッチ１２の押圧を再度検出したときにセンタサーバ２への緊急通報を行うことによって、センタサーバ２への誤通報を減少させることができる。

＜変形例３＞
また、表情特定部１４ｄは、表情を特定するのに加えて、顔画像に含まれる顔の視線方向をさらに推定してもよい。具体的には、表情特定部１４ｄは、顔画像に含まれる顔の向きとして（正面／上向き／下向き／右向き／左向き等）を推定する。

そして、通報判定部１４ｅは、表情特定部１４ｄで推定された、顔の向きが手動スイッチ１２を注視する向きであるか否かを判断し、緊急通報を中止するか否かを判定してもよい。具体的には、表情特定部１４ｄで推定された、顔の向きが手動スイッチ１２を注視する向きでない場合、通報判定部１４ｅは、緊急通報を中止しないと判定する。

顔画像に含まれる人物の顔の向きが手動スイッチ１２を注視する向きでないときにセンタサーバ２への緊急通報を中止することによって、センタサーバ２への緊急通報の誤通報を減少させることができる。

＜変形例４＞
さらに、車両１の乗員に注意を喚起させるために、車両１の乗員に注意を喚起させるための音声を、手動スイッチ１２が押圧されたがいたずらの可能性があるために通報を中止した旨をディスプレイ１６に表示させる代わりに又は手動スイッチ１２が押圧されたがいたずらの可能性があるために通報を中止した旨のディスプレイ１６への表示と共に用いてもよい。

１ 車両
２ センタサーバ
３ 通信ネットワーク
１１ テレマティクスコントロールユニット（ＴＣＵ）
１２ 手動スイッチ
１３ 車内カメラ
１４，２１ 制御部
１４ａ 押圧検出部
１４ｂ 画像取得部
１４ｃ 顔画像抽出部
１４ｄ 表情特定部
１４ｅ 通報判定部
１４ｆ，２１ａ 通信制御部
１４ｇ 表示制御部
１５，２２ 通信部
１６ ディスプレイ
１７ 位置取得部
２３ メモリ
Ｆ１ 口角
Ｆ２ 眉毛
Ｆ３ 目

Claims (9)

1. 車両に配置され、押圧により手動で緊急通報を行うための手動スイッチを設けた緊急通報装置であって、
   前記車両の車室内に配置され、前記手動スイッチを押圧可能な人物を撮影可能なカメラにより撮影された画像を取得する画像取得部と、
   前記画像取得部によって取得された画像に写った人物の表情を特定する表情特定部と、
   前記特定した表情に基づいて、前記緊急通報を中止するか否かを判定する通報判定部と、
   を備えることを特徴とする緊急通報装置。
2. 前記手動スイッチの押圧を検出する押圧検出部をさらに備え、
   前記画像取得部は、
   前記手動スイッチの押圧を検出した時に画像を取得することを特徴とする請求項１に記載の緊急通報装置。
3. 前記手動スイッチの押圧を検出する押圧検出部をさらに備え、
   前記表情特定部は、
   前記画像取得部によって取得された画像の内、前記手動スイッチの押圧を検出した時に前記カメラにより撮影された画像に写った人物の表情を特定することを特徴とする請求項１に記載の緊急通報装置。
4. 前記通報判定部は、
   前記特定した表情が笑顔である場合、前記緊急通報を中止すると判定することを特徴とする請求項１ないし３のいずれかに記載の緊急通報装置。
5. 前記表情特定部は、
   前記取得した画像に写った人物の顔の向きを特定し、
   前記通報判定部は、
   前記特定した人物の顔の向きが前記手動スイッチを注視する向きでない場合、前記緊急通報を中止すると判定することを特徴とする請求項１ないし４のいずれかに記載の緊急通報装置。
6. 前記通報判定部は、
   前記押圧検出部が前記手動スイッチの押圧を検出した後、予め決定された時間間隔内に再度、前記押圧検出部が前記手動スイッチの押圧を検出した場合、前記緊急通報を中止しないと判定することを特徴とする請求項２又は３に記載の緊急通報装置。
7. 前記通報判定部は、
   前記緊急通報装置が搭載された車両が走行中である場合、前記緊急通報を中止すると判定することを特徴とする請求項１ないし６のいずれかに記載の緊急通報装置。
8. 前記通報判定部は、
   前記表情特定部において、前記取得された画像に写る人物の表情を特定できなかった場合、前記緊急通報を中止しないと判定することを特徴とする請求項１ないし７のいずれかに記載の緊急通報装置。
9. 車両に配置され、押圧により手動で緊急通報を行うための手動スイッチを用いる、コンピュータによって行う緊急通報方法であって、
   前記車両の車室内に配置され、前記手動スイッチを押圧可能な人物を撮影可能なカメラにより撮影された画像を取得するステップと、
   取得された画像に写った人物の表情を特定するステップと、
   特定した表情に基づいて前記緊急通報を中止するか否かを判定するステップと、
   を備えることを特徴とする緊急通報方法。

Images