JP7090707B2 - 報知対象検知装置、警報システムおよび報知対象検知方法 - Google Patents

Description

この発明は、車室内に放置されると自力で外部に出られない子供またはペットを、車外の人間に報知すべき対象（以下、報知対象と記載する）として検知する報知対象検知装置に関する。

従来から、車室内に放置されると自力で外部に出られない子供またはペットを検知し、車外の人間に報知を行う技術が提案されている。例えば、特許文献１には、車室内に搭載された赤外線センサ、感圧センサ、重量センサおよび車内カメラを利用して、車室内に放置された子供を検知する装置が記載されている。

特開２００６－１５９９３９号公報

特許文献１に記載される装置では、車室内のセンサの検知領域または車内カメラの撮像領域から外れた位置に子供が隠れた場合、当該子供が車室内に放置されても検知できないという課題があった。

本発明は上記課題を解決するものであり、車室内に放置されると自力で外部に出られない子供またはペットである報知対象の検知漏れを低減することができる報知対象検知装置を得ることを目的とする。

本発明に係る報知対象検知装置は、車速またはシフト位置を示す車両情報を取得する車両情報取得部と、車室内が撮影された映像を取得する映像取得部と、映像取得部によって取得された車室内の映像に、車外の人間に報知すべき子供またはペットである報知対象以外の乗員が映っている場合に、車室内に乗員がいると判定し、車室内の映像に報知対象以外の乗員が映っていなければ、車室内に乗員がいないと判定する乗員有無判定部と、車室内の音声を取得する音声取得部と、音声取得部によって取得された車室内の音声に基づいて、車室内の音声の発生源が報知対象のみであるか否かを判別する音声源判別部を備え、音声源判別部は、車両情報取得部によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部によって車室内に乗員がいないと判定された場合に、車室内の音声の発生源が報知対象のみであるか否かを判別する。
また、本発明に係る警報システムは、本発明に係る報知対象検知装置と、車両周辺に警報を出力する警報部と、車室内に報知対象が放置されていることを外部装置に通知する通信部を備え、警報部は、音声源判別部によって、車室内の音声の発生源が報知対象のみであると判別された場合に、警報を出力し、通信部は、警報部による警報の出力に応じて外部装置に通知する。
さらに、本発明に係る報知対象検知方法は、車両情報取得部が、車速またはシフト位置を示す車両情報を取得するステップと、映像取得部が、車室内が撮影された映像を取得するステップと、乗員有無判定部が、映像取得部によって取得された車室内の映像に、車外の人間に報知すべき子供またはペットである報知対象以外の乗員が映っている場合に、車室内に乗員がいると判定し、車室内の映像に報知対象以外の乗員が映っていなければ、車室内に乗員がいないと判定するステップと、音声取得部が、車室内の音声を取得するステップと、音声源判別部が、音声取得部によって取得された車室内の音声に基づいて、車室内の音声の発生源が報知対象のみであるか否かを判別するステップを備え、音声源判別部は、車両情報取得部によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部によって車室内に乗員がいないと判定された場合に、車室内の音声の発生源が報知対象のみであるか否かを判別する。

本発明によれば、報知対象検知装置は、車速が閾値以下またはシフト位置がパーク位置であり、車室内に乗員がいない場合に、車室内の音声の発生源が車外の人間に報知すべき対象であるか否かを判別する。これにより、車内カメラの撮像領域から外れた位置に報知対象が存在したために、車室内に乗員がいないと判定された場合であっても、車室内の音声から報知対象を検知することができる。従って、車室内に放置された子供またはペットである報知対象の検知漏れを低減することができる。

この発明の実施の形態１に係る警報システムの機能構成を示すブロック図である。 図２Ａは、実施の形態１に係る報知対象検知装置の機能を実現するハードウェア構成を示すブロック図である。図２Ｂは、実施の形態１に係る報知対象検知装置の機能を実現するソフトウェアを実行するハードウェア構成を示すブロック図である。 実施の形態１に係る報知対象検知方法を示すフローチャートである。 実施の形態１における警報処理の例を示すフローチャートである。 この発明の実施の形態２に係る警報システムの機能構成を示すブロック図である。 実施の形態２に係る報知対象検知方法を示すフローチャートである。 この発明の実施の形態３に係る警報システムの機能構成を示すブロック図である。 実施の形態３に係る報知対象検知方法を示すフローチャートである。 この発明の実施の形態４に係る警報システムの機能構成を示すブロック図である。 実施の形態４に係る報知対象検知方法を示すフローチャートである。

以下、本発明をより詳細に説明するため、本発明を実施するための形態について、添付の図面に従って説明する。
実施の形態１．
図１は、この発明の実施の形態１に係る警報システム１の機能構成を示すブロック図である。警報システム１は、車室内に放置された報知対象を検知し、報知対象が検知されたことを車外の人間に報知する警報処理を行うシステムであり、報知対象検知装置２、警報部３および通信部４を備える。ここで、報知対象は、車室内に放置されると自力で外部に出られない乗員であり、例えば、子供（乳幼児）またはペットである。

車両が駐車されたときに依然として車室内に存在する子供またはペットは、車室内に放置された可能性が高い。そこで、報知対象検知装置２では、車両が駐車されたときに車室内に存在する子供またはペットを、報知対象として検知する。報知対象検知装置２は、車室内に存在する報知対象を検知したことを警報部３に通知する。

警報部３は、報知対象を検知したことを示す通知を報知対象検知装置２から受けると、車両周辺に警報を出力する。例えば、警報部３は、車両に搭載されたスピーカからアラーム音または音声メッセージを出力させる。また、警報部３は、車両のヘッドランプおよびテールランプを点滅させてもよい。

通信部４は、外部装置と通信する。例えば、通信部４は、車室内に報知対象が放置されたことを示す警報情報を外部装置に送信する。外部装置は、例えば、降車した乗員が携帯している携帯端末である。

報知対象検知装置２は、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４を備える。車両情報取得部２０は、車速またはシフト位置を示す車両情報を取得する。例えば、車両情報取得部２０は、車両に搭載された車速センサから車速に関する車両情報を取得し、車載用電子制御装置（以下、車載用ＥＣＵと記載する）からシフト位置に関する車両情報を取得する。

また、車両情報取得部２０は、車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定する。上記閾値は、車両が駐車されたことを示す車速であり、例えば０（ｋｍ／ｈ）が設定される。ただし、乗員が降車した後に自動運転で駐車位置に移動させる場合を考慮して、例えば５（ｋｍ／ｈ）程度の車速を閾値に設定してもよい。

映像取得部２１は、車室内が撮影された映像を取得する。例えば、映像取得部２１は、車両に搭載された車内カメラから、映像を取得する。なお、映像取得部２１によって取得される映像は、車内カメラによって車室内の全ての席が映るアングルから撮影された映像である。車内カメラとして、ドライバモニタリングシステム（以下、ＤＭＳと記載する）が備えるカメラを使用してもよい。

乗員有無判定部２２は、映像取得部２１によって取得された車室内の映像に乗員が映っているか否かを判定する。例えば、映像取得部２１によって取得される映像には、車室内の全ての席が映っているので、乗員有無判定部２２は、映像中の席のうち、一席でも乗員が着座する席が映っていれば、乗員の有りと判定する。また、映像中に乗員が着座する席が映っていなければ、乗員有無判定部２２は、車室内に乗員がいないと判定する。

音声取得部２３は、車室内の音声を取得する。例えば、音声取得部２３は、車室内に設けられたマイクによって集音された音声を取得する。なお、車室内で発生した音声を漏れなく取得するために、車室内の席ごとにマイクを配置してもよく、後部座席には複数台のマイクを配置してもよい。音声取得部２３によって取得された音声情報は、音声源判別部２４に出力される。

音声源判別部２４は、音声取得部２３によって取得された車室内の音声の発生源が報知対象であるか否かを判別する。例えば、報知対象の音声の特徴を示す音声特徴データを、音声源判別部２４に設定しておく。音声源判別部２４は、音声取得部２３によって取得された音声の特徴を解析し、音声の特徴に基づいて上記音声特徴データを参照することで、音声の発生源を判別する。

また、音声源判別部２４は、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。

このように、音声源判別部２４は、乗員有無判定部２２によって映像に乗員が映っていない、すなわち、車室内に乗員がいないと判定された場合に、判定結果を追認するように車室内の音声の発生源が報知対象であるか否かを判別する。これにより、報知対象検知装置２では、例えば車内カメラの撮影範囲から外れた位置に報知対象が存在したために乗員有無判定部２２が誤判定した場合であっても、車室内の音声から報知対象を検知することができる。

次に、報知対象検知装置２の機能を実現するハードウェア構成について説明する。
報知対象検知装置２における、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４の機能は、処理回路によって実現される。
すなわち、報知対象検知装置２は、図３を用いて後述するステップＳＴ１からステップＳＴ５までの処理を実行するための処理回路を備える。処理回路は、専用のハードウェアであってもよいが、メモリに記憶されたプログラムを実行するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）であってもよい。

図２Ａは、報知対象検知装置２の機能を実現するハードウェア構成を示すブロック図である。図２Ｂは、報知対象検知装置２の機能を実現するソフトウェアを実行するハードウェア構成を示すブロック図である。図２Ａおよび図２Ｂにおいて、カメラ１００は、車両に搭載された車内カメラであり、図１に示した映像取得部２１は、カメラ１００によって撮影された車室内の映像を取得する。

制御インタフェース１０１は、車載用ＥＣＵ１０２から出力された車両情報を中継するインタフェースである。図１に示した車両情報取得部２０は、制御インタフェース１０１を介して、車載用ＥＣＵ１０２から車両情報を取得する。マイク１０３は、車室内に設けられたマイクである。図１に示した音声取得部２３は、マイク１０３によって集音された音声を取得する。警報装置１０４は、図１に示した警報部３であり、通信装置１０５は、図１に示した通信部４である。

処理回路が、図２Ａに示す専用のハードウェアの処理回路１０６である場合、処理回路１０６は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、または、これらを組み合わせたものが該当する。報知対象検知装置２における車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４の機能を、別々の処理回路で実現してもよく、これらの機能をまとめて１つの処理回路で実現してもよい。

処理回路が、図２Ｂに示すプロセッサ１０７である場合、報知対象検知装置２における車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４の機能は、ソフトウェア、ファームウェアまたはソフトウェアとファームウェアとの組み合わせによって実現される。なお、ソフトウェアまたはファームウェアは、プログラムとして記述されてメモリ１０８に記憶される。

プロセッサ１０７は、メモリ１０８に記憶されたプログラムを読み出して実行することによって、報知対象検知装置２における、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４の機能を実現する。すなわち、報知対象検知装置２は、プロセッサ１０７によって実行されるときに、図３に示すステップＳＴ１からステップＳＴ５までの処理が結果的に実行されるプログラムを記憶するためのメモリ１０８を備える。

これらのプログラムは、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４の手順または方法を、コンピュータに実行させる。メモリ１０８は、コンピュータを、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４として機能させるためのプログラムが記憶されたコンピュータ可読記憶媒体であってもよい。

メモリ１０８には、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュメモリ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ－ＥＰＲＯＭ）などの不揮発性または揮発性の半導体メモリ、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤなどが該当する。

車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３および音声源判別部２４の機能について一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現してもよい。例えば、車両情報取得部２０、映像取得部２１および音声取得部２３は、専用のハードウェアである処理回路１０６で機能を実現して、乗員有無判定部２２および音声源判別部２４は、プロセッサ１０７がメモリ１０８に記憶されたプログラムを読み出して実行することによって機能を実現する。このように、処理回路は、ハードウェア、ソフトウェア、ファームウェアまたはこれらの組み合わせにより上記機能を実現することができる。

次に動作について説明する。
図３は、実施の形態１に係る報知対象検知方法を示すフローチャートである。
まず、車両情報取得部２０が、車両の車速またはシフト位置を示す車両情報を取得する（ステップＳＴ１）。車両情報取得部２０は、取得した車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定する（ステップＳＴ２）。ここで、車速が閾値を超えるか、シフト位置がパーク位置以外であれば（ステップＳＴ２；ＮＯ）、図３の処理が終了される。

車速が閾値以下であるか、またはシフト位置がパーク位置である場合（ステップＳＴ２；ＹＥＳ）、車両情報取得部２０は、このことを映像取得部２１に通知する。
映像取得部２１は、車両情報取得部２０から上記通知を受けると、車室内が撮影された映像を取得する（ステップＳＴ３）。例えば、映像取得部２１は、図２Ａおよび図２Ｂに示したカメラ１００から車室内の映像を取得する。映像取得部２１によって取得された映像は、乗員有無判定部２２に出力される。

乗員有無判定部２２は、映像取得部２１から入力した車室内の映像に乗員が映っているか否かを判定する（ステップＳＴ４）。例えば、乗員有無判定部２２は、車室内の映像を画像認識して、乗員が映っているか否かを判定する。判定対象の乗員には報知対象は含まれない。車室内の映像に乗員が映っていた場合（ステップＳＴ４；ＹＥＳ）、車室内に大人が残っていると判断されるため、図３の処理が終了される。

車室内の映像に乗員が映っていなかった場合（ステップＳＴ４；ＮＯ）、乗員有無判定部２２は、このことを音声源判別部２４に通知する。音声源判別部２４は、乗員有無判定部２２から上記通知を受けると、音声取得部２３によって取得された車室内の音声の発生源が報知対象であるか否かを判別する（ステップＳＴ５）。このようにして、音声源判別部２４は、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。

なお、下記の条件に当てはまる場合、音声源判別部２４の動作を一時的に停止させてもよい。例えば、第１の条件として、車両が駐車されたときに乗員有無判定部２２によって車室内に乗員がいないと判定された状態で車両ドアが開閉された場合が挙げられる。この場合、既に降車した者が報知対象を降車させている状態と考えられるため、音声源判別部２４の動作を停止させる。第２の条件として、車載機器に対して、明らかに報知対象では不可能な操作が行われた場合が挙げられる。報知対象では不可能な操作は、例えば、文字入力、分岐機能の的確な選択操作などがある。この場合、車室内に残っている者は、報知対象ではなく、いつでも車外に出られる大人であると考えられるので、音声源判別部２４の動作を停止させる。

第３の条件として、音声源判別部２４によって音声の発生源として報知対象以外の乗員（大人）が判別された場合が挙げられる。この場合、車室内に大人が残っていると判断されるので、音声源判別部２４の動作を停止させる。第４の条件として、車両が駐車されてから音声源判別部２４を動作させる一定の期間内に、音声取得部２３によって音声が取得されなかった場合が挙げられる。この場合、音声で検知可能な報知対象が車室内にいないと判断されるので、音声源判別部２４の動作を停止させる。第５の条件として、報知対象が車室内に放置されない要因が報知対象検知装置２に設定されていた場合が挙げられる。例えば、乗員が、報知対象を乗車させていないことを音声源判別部２４に設定する。これにより、音声源判別部２４は動作を停止する。

図４は、実施の形態１における警報処理の例を示すフローチャートである。図４に示すステップＳＴ１ａの処理は、図３に示したステップＳＴ５の処理と同じである。
音声源判別部２４は、音声取得部２３によって取得された車室内の音声の発生源が報知対象であるか否かを判別する（ステップＳＴ１ａ）。ここで、音声源判別部２４は、音声の発生源が報知対象（子供、ペットなど）のみである場合に、音声の発生源が報知対象であると判定する。すなわち、複数の音声発生源の中に報知対象以外の音声、例えば、大人の音声が含まれる場合、音声の発生源が報知対象であると判定されない。

車室内の音声の発生源が報知対象ではない場合（ステップＳＴ１ａ；ＮＯ）、車室内に報知対象が放置されていないので、図４の処理が終了される。
車室内の音声の発生源が報知対象であれば（ステップＳＴ１ａ；ＹＥＳ）、音声源判別部２４は、車室内に報知対象が放置されたことを警報部３に通知する。警報部３は、音声源判別部２４からの上記通知を受けると、報知対象が放置されたことを示す警報を開始する（ステップＳＴ２ａ）。警報が開始されると、通信部４は、車室内に報知対象が放置されたことを外部装置に通知する（ステップＳＴ３ａ）。外部装置は、例えば、降車した乗員に携帯された携帯端末である。

前述したように、実施の形態１に係る報知対象検知装置２では、車速が閾値以下またはシフト位置がパーク位置であり、車室内の映像に乗員が映っていない場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車内カメラの撮像領域から外れた位置に報知対象が存在したために車室内の映像に乗員が映っていないと判定された場合であっても、車室内の音声から報知対象を検知することができる。従って、車室内に放置された報知対象の検知漏れを低減することができる。

実施の形態１に係る警報システム１は、報知対象検知装置２、警報部３および通信部４を備える。報知対象検知装置２による報知対象の検知漏れが低減されるので、報知対象が放置されたことの警報と外部装置への通知を的確に行うことができる。
実施の形態１に係る報知対象検知方法では、図３に示した一連の処理が行われるので、車室内に放置された報知対象の検知漏れを低減することができる。

車両情報取得部２０が、車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定する場合を示したが、これに限定されるものではない。例えば、音声源判別部２４が、車両情報取得部２０から入力した車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定してもよい。

乗員有無判定部２２が、映像取得部２１によって取得された車室内の映像に乗員が映っているか否かを判定したが、これに限定されるものではない。
例えば、乗員有無判定部２２が、車室内に設けられた赤外線センサ、感圧センサおよび重量センサのいずれかが出力する検知情報に基づいて、車室内の乗員の有無を判定してもよい。この場合、報知対象検知装置２から映像取得部２１を省略してもよく、音声源判別部２４は、車速が閾値以下またはシフト位置がパーク位置であり、乗員有無判定部２２によって車室内に乗員がいないと判定された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車室内で報知対象を検知するセンサの検知領域から外れた位置に報知対象が存在しても、車室内の音声から報知対象を判別することができる。従って、車室内に放置された報知対象の検知漏れを低減できる。

また、乗員有無判定部２２は、映像取得部２１によって取得された車室内の映像に乗員が映っているか否かを判定し、さらに、車室内に設けられた赤外線センサ、感圧センサ、および重量センサのいずれかが出力する検知情報に基づいて、車室内の乗員の有無を判定してもよい。この場合も、音声源判別部２４は、車速が閾値以下またはシフト位置がパーク位置であり、乗員有無判定部２２によって車室内に乗員がいないと判定された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車室内で報知対象を検知するセンサの検知領域から外れた位置に報知対象が存在するか、あるいは、車内カメラの撮像領域から外れた位置に報知対象が存在しても、車室内の音声から報知対象を判別することができる。従って、車室内に放置された報知対象の検知漏れを低減することが可能である。

実施の形態２．
図５は、この発明の実施の形態２に係る警報システム１Ａの機能構成を示すブロック図である。図５において、図１と同一の構成要素には同一の符号を付して説明を省略する。警報システム１Ａは、車室内に放置された報知対象の検知を実施し、報知対象が検知された場合に警報処理を行うシステムであり、報知対象検知装置２Ａ、警報部３および通信部４を備える。また、報知対象検知装置２Ａは、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ａおよび物体検知部２５を備えて構成される。

音声源判別部２４Ａは、車両の車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定され、物体検知部２５によって車室内に報知対象に関わる物体が検知された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。物体検知部２５は、映像取得部２１によって取得された映像に基づいて、車室内に存在する報知対象に関わる物体を検知する。

報知対象に関わる物体とは、車室内で報知対象に付随されている物体である。例えば、報知対象が子供であれば、子供に関わる物体は、車両の座席に取り付けられたチャイルドシートである。また、報知対象がペットであれば、ペットに関わる物体は、ペットが収容されるペット用ケースである。なお、報知対象に関わる物体は、報知対象が乗車していることを示す要件として利用されるため、報知対象に関わる物体には、車両が出荷されたときに車室内に予め取り付けられて報知対象との関わりが不明な物体は含まれない。

報知対象検知装置２Ａにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ａおよび物体検知部２５の機能は、処理回路によって実現される。処理回路が、図２Ａに示した専用のハードウェアの処理回路１０６である場合、処理回路１０６は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、またはこれらを組み合わせたものが該当する。報知対象検知装置２Ａにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ａおよび物体検知部２５の機能を別々の処理回路で実現してもよく、これらの機能をまとめて１つの処理回路で実現してもよい。

処理回路が、図２Ｂに示したプロセッサ１０７である場合、報知対象検知装置２Ａにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ａおよび物体検知部２５の機能は、ソフトウェア、ファームウェアまたはソフトウェアとファームウェアとの組み合わせによって実現される。なお、ソフトウェアまたはファームウェアは、プログラムとして記述されてメモリ１０８に記憶される。

プロセッサ１０７は、メモリ１０８に記憶されたプログラムを読み出して実行することにより、報知対象検知装置２Ａにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ａおよび物体検知部２５の機能を実現する。すなわち、報知対象検知装置２Ａは、プロセッサ１０７によって実行されるときに、後述する図６に示すステップＳＴ１ｂからステップＳＴ６ｂまでの処理が結果的に実行されるプログラムを記憶するためのメモリ１０８を備える。

これらのプログラムは、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ａおよび物体検知部２５の手順または方法を、コンピュータに実行させる。メモリ１０８は、コンピュータを、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ａおよび物体検知部２５として機能させるためのプログラムが記憶されたコンピュータ可読記憶媒体であってもよい。

次に動作について説明する。
図６は、実施の形態２に係る報知対象検知方法を示すフローチャートである。
なお、図６に示すステップＳＴ１ｂからステップＳＴ４ｂまでの処理は、図３に示したステップＳＴ１からステップＳＴ４までの処理と同じであるので説明を省略する。
物体検知部２５は、ステップＳＴ３ｂにおいて映像取得部２１によって取得された映像に基づいて、報知対象に関わる物体を検知する（ステップＳＴ５ｂ）。例えば、物体検知部２５は、車室内の映像を画像認識して、報知対象に関わる物体を検知する。
以下、報知対象が子供またはペットであり、報知対象に関わる物体がチャイルドシートまたはペット用ケースであるものとして説明する。

チャイルドシートまたはペット用ケースが検知されなかった場合（ステップＳＴ５ｂ；ＮＯ）、報知対象である子供またはペットがいないので、図６の処理が終了される。
一方、チャイルドシートまたはペット用ケースが検知された場合（ステップＳＴ５ｂ；ＹＥＳ）、物体検知部２５は、このことを音声源判別部２４Ａに通知する。

音声源判別部２４Ａは、物体検知部２５から上記通知を受けると、音声取得部２３によって取得された車室内の音声の発生源が報知対象であるか否かを判別する（ステップＳＴ６ｂ）。このように、音声源判別部２４Ａは、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定され、物体検知部２５によって報知対象に関わる物体が検知された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。

ステップＳＴ６ｂでは、図４に示したステップＳＴ１ａの処理が実行され、判別結果に応じて、ステップＳＴ１ａ以降の処理が実行される。すなわち、車室内の音声の発生源が報知対象のみであった場合、警報部３は、報知対象が放置されたことを示す警報を開始する。警報が開始されると、通信部４は、車室内に報知対象が放置されたことを外部装置に通知する。

前述したように、実施の形態２に係る報知対象検知装置２Ａは、報知対象に関わる物体を検知する物体検知部２５を備える。音声源判別部２４Ａは、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定され、物体検知部２５によって報知対象に関わる物体が検知された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車内カメラの撮像領域から外れた位置に報知対象が存在したために車室内の映像に乗員が映っていないと判定された場合であっても、車室内の音声から報知対象を検知することができる。特に、実施の形態２では、報知対象に関わる物体が検知された場合に、音声の発生源が報知対象であるか否かが判別されるので、報知対象の検知精度が向上して、実施の形態１の構成よりも報知対象の検知漏れを低減できる。

実施の形態２に係る警報システム１Ａは、報知対象検知装置２Ａ、警報部３および通信部４を備える。報知対象検知装置２Ａによる報知対象の検知漏れが低減されるので、報知対象が放置されたことの警報と外部装置への通知を的確に行うことができる。
実施の形態２に係る報知対象検知方法では、図６に示した一連の処理が行われるので、車室内に放置された報知対象の検知漏れを低減することができる。

車両情報取得部２０が、車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定する場合を示したが、これに限定されるものではない。例えば、音声源判別部２４Ａが、車両情報取得部２０から入力した車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定してもよい。

乗員有無判定部２２が、映像取得部２１によって取得された車室内の映像に乗員が映っているか否かを判定したが、これに限定されるものではない。
例えば、乗員有無判定部２２が、車室内に設けられた赤外線センサ、感圧センサおよび重量センサのいずれかが出力する検知情報に基づいて、車室内の乗員の有無を判定してもよい。この場合、報知対象検知装置２Ａから映像取得部２１を省略してもよく、音声源判別部２４Ａは、車速が閾値以下またはシフト位置がパーク位置であり、乗員有無判定部２２によって車室内に乗員がいないと判定され、車室内に報知対象に関わる物体が検知された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車室内で報知対象を検知するセンサの検知領域から外れた位置に報知対象が存在しても、車室内の音声から報知対象を判別することができる。従って、車室内に放置された報知対象の検知漏れを低減することが可能である。

また、乗員有無判定部２２は、映像取得部２１によって取得された車室内の映像に乗員が映っているか否かを判定し、さらに、車室内に設けられた赤外線センサ、感圧センサおよび重量センサのいずれかが出力する検知情報に基づいて車室内の乗員の有無を判定してもよい。この場合も、音声源判別部２４Ａは、車速が閾値以下またはシフト位置がパーク位置であり、乗員有無判定部２２によって車室内に乗員がいないと判定され、車室内に報知対象に関わる物体が検知された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車室内で報知対象を検知するセンサの検知領域から外れた位置に報知対象が存在するか、あるいは、車内カメラの撮像領域から外れた位置に報知対象が存在しても、車室内の音声から報知対象を判別することが可能である。従って、車室内に放置された報知対象の検知漏れを低減することが可能である。

実施の形態３．
図７は、この発明の実施の形態３に係る警報システム１Ｂの機能構成を示すブロック図である。図７において、図１と同一の構成要素には同一の符号を付して説明を省略する。警報システム１Ｂは、車室内に放置された報知対象の検知を実施し、報知対象が検知された場合に警報処理を行うシステムであり、報知対象検知装置２Ｂ、警報部３および通信部４を備える。また、報知対象検知装置２Ｂは、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ｂおよび温度取得部２６を備えて構成される。

音声源判別部２４Ｂは、車両の車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定され、温度取得部２６によって取得された温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。また、温度取得部２６は、車両に搭載された温度センサから車室内の温度情報を取得する。図７において、温度センサの図示は省略したが、車室内の温度を検知できる位置および能力を有したセンサであればよい。

許容温度範囲は、車室内に放置された報知対象の健康が保たれる温度範囲であり、低温側の許容温度と高温側の許容温度によって規定される。例えば、下限の許容温度を５℃とし、上限の許容温度を３０℃とした場合、許容温度範囲は、５℃以上３０℃以下の範囲である。車室内の温度が許容温度範囲外であると、この車室内に長く放置された報知対象は健康を害する可能性がある。このため、迅速に、車両周辺に警報を出力して、外部装置に通知する必要がある。

一方、車室内の温度が許容温度範囲内である場合は、音声源判別部２４Ｂによって音声の発生源が判別されず、警報部３が警報を行わず、通信部４が通知を行わない。これは、大人が意図的に報知対象を車室内に残したときに、車室内の温度が許容温度範囲内であれば、警報および通知が行われないことを意味する。これにより、実施の形態３に係る警報システム１Ｂでは、車室内の温度が許容温度範囲を外れた適切なタイミングで、車室内に報知対象が放置されたことを警報および通知することが可能となる。

報知対象検知装置２Ｂにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ｂおよび温度取得部２６の機能は、処理回路によって実現される。処理回路が、図２Ａに示した専用のハードウェアの処理回路１０６である場合、処理回路１０６は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、またはこれらを組み合わせたものが該当する。報知対象検知装置２Ｂにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ｂおよび温度取得部２６の機能を別々の処理回路で実現してもよく、これらの機能をまとめて１つの処理回路で実現してもよい。

処理回路が、図２Ｂに示したプロセッサ１０７である場合、報知対象検知装置２Ｂにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ｂおよび温度取得部２６の機能は、ソフトウェア、ファームウェアまたはソフトウェアとファームウェアとの組み合わせによって実現される。なお、ソフトウェアまたはファームウェアは、プログラムとして記述されてメモリ１０８に記憶される。

プロセッサ１０７は、メモリ１０８に記憶されたプログラムを読み出して実行することにより、報知対象検知装置２Ｂにおける車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ｂおよび温度取得部２６の機能を実現する。すなわち、報知対象検知装置２Ｂは、プロセッサ１０７によって実行されるときに、後述する図８に示すステップＳＴ１ｃからステップＳＴ７ｃまでの処理が結果的に実行されるプログラムを記憶するためのメモリ１０８を備える。

これらのプログラムは、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ｂおよび温度取得部２６の手順または方法を、コンピュータに実行させる。メモリ１０８は、コンピュータを、車両情報取得部２０、映像取得部２１、乗員有無判定部２２、音声取得部２３、音声源判別部２４Ｂおよび温度取得部２６として機能させるためのプログラムが記憶されたコンピュータ可読記憶媒体であってもよい。

次に動作について説明する。
図８は、実施の形態３に係る報知対象検知方法を示すフローチャートである。
なお、図８に示すステップＳＴ１ｃからステップＳＴ４ｃまでの処理は、図３に示したステップＳＴ１からステップＳＴ４までの処理と同じであるので説明を省略する。
温度取得部２６は、車両に搭載された温度センサから、車室内の温度を取得する（ステップＳＴ５ｃ）。温度取得部２６によって取得された温度情報は、音声源判別部２４Ｂに出力される。

音声源判別部２４Ｂは、温度取得部２６によって取得された車室内の温度が許容温度範囲を外れたか否かを判定する（ステップＳＴ６ｃ）。このとき、車室内の温度が許容温度範囲を外れていなければ（ステップＳＴ６ｃ；ＮＯ）、ステップＳＴ５ｃの処理に戻る。これにより、車室内の今後の温度変化が監視される。

一方、車室内の温度が許容温度範囲を外れていた場合（ステップＳＴ６ｃ；ＹＥＳ）、音声源判別部２４Ｂは、音声取得部２３によって取得された車室内の音声の発生源が報知対象であるか否かを判別する（ステップＳＴ７ｃ）。
このようにして、音声源判別部２４Ｂは、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定され、温度取得部２６によって取得された温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。

ステップＳＴ７ｃでは、図４に示したステップＳＴ１ａの処理が実行され、判別結果に応じて、ステップＳＴ１ａ以降の処理が実行される。すなわち、車室内の音声の発生源が報知対象のみであった場合、警報部３は、報知対象が放置されたことを示す警報を開始する。警報が開始されると、通信部４は、車室内に報知対象が放置されたことを外部装置に通知する。

前述したように、実施の形態３に係る報知対象検知装置２Ｂは、車室内の温度を取得する温度取得部２６を備える。音声源判別部２４Ｂは、車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定され、車室内の温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車内カメラの撮像領域から外れた位置に報知対象が存在したために車室内の映像に乗員が映っていないと判定された場合であっても、車室内の音声の発生源から報知対象を判別することができる。
特に、実施の形態３では、車室内の温度が許容温度範囲を外れた場合に、音声の発生源が報知対象であるか否かが判別されるので、報知対象の健康を考慮した適切なタイミングで、車室内に報知対象が放置されたことを警報および通知することが可能となる。

実施の形態３に係る警報システム１Ｂは、報知対象検知装置２Ｂ、警報部３および通信部４を備える。報知対象検知装置２Ｂによる報知対象の検知漏れが低減されるので、報知対象が放置されたことの警報と外部装置への通知を的確に行うことができる。
実施の形態３に係る報知対象検知方法では、図８に示した一連の処理が行われるので、車室内に放置された報知対象の検知漏れを低減することができる。

車両情報取得部２０が、車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定する場合を示したが、これに限定されるものではない。例えば、音声源判別部２４Ｂが、車両情報取得部２０から入力した車両情報に基づいて、車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定してもよい。

乗員有無判定部２２が、映像取得部２１によって取得された車室内の映像に乗員が映っているか否かを判定したが、これに限定されるものではない。
例えば、乗員有無判定部２２が、車室内に設けられた赤外線センサ、感圧センサおよび重量センサのいずれかが出力する検知情報に基づいて、車室内の乗員の有無を判定してもよい。この場合、報知対象検知装置２Ｂから映像取得部２１を省略してもよく、音声源判別部２４Ｂは、車速が閾値以下またはシフト位置がパーク位置であり、乗員有無判定部２２によって車室内に乗員がいないと判定され、車室内の温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車室内で報知対象を検知するセンサの検知領域から外れた位置に報知対象が存在しても、車室内の音声から報知対象を判別することができる。従って、車室内に放置された報知対象の検知漏れを低減することが可能である。

また、乗員有無判定部２２は、映像取得部２１によって取得された車室内の映像に乗員が映っているか否かを判定し、さらに、車室内に設けられた赤外線センサ、感圧センサおよび重量センサのいずれかが出力する検知情報に基づいて車室内の乗員の有無を判定してもよい。この場合も、音声源判別部２４Ｂは、車速が閾値以下またはシフト位置がパーク位置であり、乗員有無判定部２２によって車室内に乗員がいないと判定され、車室内の温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車室内で報知対象を検知するセンサの検知領域から外れた位置に報知対象が存在するか、あるいは、車内カメラの撮像領域から外れた位置に報知対象が存在しても、車室内の音声から報知対象を判別することができる。従って、車室内に放置された報知対象の検知漏れを低減することが可能である。

これまで、図１に示した報知対象検知装置２に対して温度取得部２６を追加した構成を示したが、実施の形態３に係る報知対象検知装置は、図５に示した報知対象検知装置２Ａに対して温度取得部２６を追加した構成であってもよい。この場合、音声源判別部２４Ｂは、車速が閾値以下またはシフト位置がパーク位置であると判定され、乗員有無判定部２２によって車室内の映像に乗員が映っていないと判定され、物体検知部２５によって報知対象に関わる物体が検知され、車室内の温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。このように構成しても、車室内に放置された報知対象の検知漏れを低減することが可能である。

実施の形態４．
図９は、この発明の実施の形態４に係る警報システム１Ｃの機能構成を示すブロック図である。図９において、図１と同一の構成要素には同一の符号を付して説明を省略する。警報システム１Ｃは、車室内に放置された報知対象の検知を実施し、報知対象が検知された場合に警報処理を行うシステムであり、報知対象検知装置２Ｃ、警報部３および通信部４を備える。また、報知対象検知装置２Ｃは、車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７を備えて構成される。

音声源判別部２４Ｃは、車速が閾値を超えていたときに報知対象検知部２７によって報知対象が検知され、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。閾値は、車両が駐車されたことを示す車速であり、例えば０（ｋｍ／ｈ）が設定される。音声源判別部２４Ｃは、車速が閾値を超えていたとき、すなわち車両の走行中に報知対象検知部２７によって報知対象が検知されたことを、車室内に報知対象が放置されたか否かの判定を開始する条件としている。

報知対象検知部２７は、映像取得部２１によって取得された映像に基づいて車室内の報知対象を検知する。例えば、報知対象検知部２７は、車室内の映像を画像認識して、報知対象を検知する。ＤＭＳは、一般に、車両を運転している運転者の状態を監視するシステムであるため、ＤＭＳが備える車内カメラは、車両が走行しているときに起動して車室内を撮影し、車両が駐車された場合には動作が停止される。このため、映像取得部２１が、ＤＭＳが備える車内カメラから車室内の映像を取得する場合、車両が走行しているときの映像のみが取得される。報知対象検知部２７は、ＤＭＳが起動している車両の走行中に、車室内に報知対象が存在するか否かを検知する。

報知対象検知装置２Ｃにおける車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７の機能は、処理回路により実現される。処理回路が、図２Ａに示した専用のハードウェアの処理回路１０６である場合、処理回路１０６は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、またはこれらを組み合わせたものが該当する。報知対象検知装置２Ｃにおける車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７の機能を別々の処理回路で実現してもよく、これらの機能をまとめて１つの処理回路で実現してもよい。

処理回路が、図２Ｂに示したプロセッサ１０７である場合、報知対象検知装置２Ｃにおける車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７の機能は、ソフトウェア、ファームウェアまたはソフトウェアとファームウェアとの組み合わせによって実現される。なお、ソフトウェアまたはファームウェアは、プログラムとして記述されてメモリ１０８に記憶される。

プロセッサ１０７は、メモリ１０８に記憶されたプログラムを読み出して実行することにより、報知対象検知装置２Ｃにおける車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７の機能を実現する。すなわち、報知対象検知装置２Ｃは、プロセッサ１０７によって実行されるときに、後述する図１０に示すステップＳＴ１ｄからステップＳＴ５ｄまでの処理が結果的に実行されるプログラムを記憶するためのメモリ１０８を備える。

これらのプログラムは、車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７の手順または方法をコンピュータに実行させる。メモリ１０８は、コンピュータを、車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７として機能させるためのプログラムが記憶されたコンピュータ可読記憶媒体であってもよい。

次に動作について説明する。
図１０は、実施の形態４に係る報知対象検知方法を示すフローチャートである。
まず、映像取得部２１は、車室内が撮影された映像を取得する（ステップＳＴ１ｄ）。例えば、映像取得部２１は、図２Ａおよび図２Ｂに示したカメラ１００から車室内の映像を取得して、報知対象検知部２７に出力する。報知対象検知部２７は、映像取得部２１によって取得された映像に基づいて、車室内の報知対象を検知する。報知対象の有無を示す検知情報は、報知対象検知部２７から音声源判別部２４Ｃに出力される。
車両情報取得部２０が、車両の車速またはシフト位置を示す車両情報を取得して、音声源判別部２４Ｃに出力する（ステップＳＴ２ｄ）。

音声源判別部２４Ｃは、車両情報取得部２０によって取得された車両情報と、報知対象検知部２７から入力した検知情報とに基づいて、車速が閾値を超えているときに車室内に報知対象が検知されたか否かを判定する（ステップＳＴ３ｄ）。車速が閾値を超えているときに車室内に報知対象が検知されなかった場合（ステップＳＴ３ｄ；ＮＯ）、報知対象が車両に乗車していないと判断されるので、図１０の処理が終了される。

車速が閾値を超えているときに車室内に報知対象が検知された場合（ステップＳＴ３ｄ；ＹＥＳ）、音声源判別部２４Ｃは、車両情報取得部２０によって取得された車両情報に基づいて、車両の車速が閾値以下であるか、またはシフト位置がパーク位置であるかを判定する（ステップＳＴ４ｄ）。車速が閾値を超えるか、シフト位置がパーク位置以外であれば（ステップＳＴ４ｄ；ＮＯ）、車両は走行中であるので図１０の処理が終了される。

一方、車速が閾値以下であるか、またはシフト位置がパーク位置である場合（ステップＳＴ４ｄ；ＹＥＳ）、音声源判別部２４Ｃは、音声取得部２３によって取得された車室内の音声の発生源が報知対象であるか否かを判別する（ステップＳＴ５ｄ）。
このようにして、音声源判別部２４Ｃは、車速が閾値を超えていたときに報知対象検知部２７によって報知対象が検知され、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。

ステップＳＴ５ｄでは、図４に示したステップＳＴ１ａの処理が実行され、判別結果に応じて、ステップＳＴ１ａ以降の処理が実行される。すなわち、車室内の音声の発生源が報知対象のみであった場合、警報部３は、報知対象が放置されたことを示す警報を開始する。警報が開始されると、通信部４は、車室内に報知対象が放置されたことを外部装置に通知する。

前述したように、実施の形態４に係る報知対象検知装置２Ｃは、車両情報取得部２０、映像取得部２１、音声取得部２３、音声源判別部２４Ｃおよび報知対象検知部２７を備える。音声源判別部２４Ｃは、車速が閾値を超えていたときに報知対象検知部２７によって報知対象が検知され、車両情報取得部２０によって取得された車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。これにより、車室内に放置された報知対象の検知漏れを低減することが可能である。また、音声源判別部２４Ｃは、車両の走行中に車室内に報知対象が検知された場合に、車両が駐車されたタイミングで車室内の音声の発生源を判別する。従って、車両が駐車されたときに車室内の映像を用いて乗員の有無を判定する必要がなく、報知対象検知装置２Ｃの処理負荷を低減できる。

実施の形態４に係る警報システム１Ｃは、報知対象検知装置２Ｃ、警報部３および通信部４を備える。報知対象検知装置２Ｃによる報知対象の検知漏れが低減されるので、報知対象が放置されたことの警報と外部装置への通知を的確に行うことができる。
また、実施の形態４に係る報知対象検知方法では、図１０に示した一連の処理が行われるので、車室内に放置された報知対象の検知漏れを低減することができる。

また、実施の形態４に係る報知対象検知装置２Ｃに対して、実施の形態２で示した物体検知部２５を追加してもよい。この場合、音声源判別部２４Ｃは、車速が閾値を超えていたときに報知対象が検知されており、車速が閾値以下またはシフト位置がパーク位置であると判定され、物体検知部２５によって報知対象に関わる物体が検知された場合に、車室内の音声の発生源が報知対象であるか否かを判別する。このように構成しても、車室内に放置された報知対象の検知漏れを低減することが可能である。

さらに、実施の形態４に係る報知対象検知装置２Ｃに対して、実施の形態３で示した温度取得部２６を追加してもよい。この場合、音声源判別部２４Ｃは、車速が閾値を超えていたときに報知対象が検知されており、車速が閾値以下またはシフト位置がパーク位置であると判定され、温度取得部２６によって取得された車室内の温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。このように構成しても、車室内に放置された報知対象の検知漏れを低減することが可能である。

さらに、実施の形態４に係る報知対象検知装置２Ｃに対して、実施の形態２で示した物体検知部２５および実施の形態３で示した温度取得部２６を追加してもよい。この場合、音声源判別部２４Ｃは、車速が閾値を超えていたときに報知対象が検知されており、車速が閾値以下またはシフト位置がパーク位置であると判定され、物体検知部２５によって報知対象に関わる物体が検知され、温度取得部２６によって取得された車室内の温度が許容温度範囲を外れた場合に、車室内の音声の発生源が報知対象であるか否かを判別する。
このように構成しても、車室内に放置された報知対象の検知漏れを低減することが可能である。

なお、本発明は上記実施の形態に限定されるものではなく、本発明の範囲内において、実施の形態のそれぞれの自由な組み合わせまたは実施の形態のそれぞれの任意の構成要素の変形もしくは実施の形態のそれぞれにおいて任意の構成要素の省略が可能である。

この発明に係る報知対象検知装置は、車室内に放置された報知対象物の検知漏れを低減することができるので、車両の乗員監視システムに利用可能である。

１，１Ａ，１Ｂ，１Ｃ 警報システム、２，２Ａ，２Ｂ，２Ｃ 報知対象検知装置、３ 警報部、４ 通信部、２０ 車両情報取得部、２１ 映像取得部、２２ 乗員有無判定部、２３ 音声取得部、２４，２４Ａ，２４Ｂ，２４Ｃ 音声源判別部、２５ 物体検知部、２６ 温度取得部、２７ 報知対象検知部、１００ カメラ、１０１ 制御インタフェース、１０２ 車載用ＥＣＵ、１０３ マイク、１０４ 警報装置、１０５ 通信装置、１０６ 処理回路、１０７ プロセッサ、１０８ メモリ。

Claims (10)

1. 車速またはシフト位置を示す車両情報を取得する車両情報取得部と、
   車室内が撮影された映像を取得する映像取得部と、
   前記映像取得部によって取得された前記車室内の映像に、車外の人間に報知すべき子供またはペットである報知対象以外の乗員が映っている場合に、前記車室内に乗員がいると判定し、前記車室内の映像に前記報知対象以外の乗員が映っていなければ、前記車室内に乗員がいないと判定する乗員有無判定部と、
   前記車室内の音声を取得する音声取得部と、
   前記音声取得部によって取得された前記車室内の音声に基づいて、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別する音声源判別部と、
   を備え、
   前記音声源判別部は、前記車両情報取得部によって取得された前記車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、前記乗員有無判定部によって前記車室内に乗員がいないと判定された場合に、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別する
   ことを特徴とする報知対象検知装置。
2. 前記乗員有無判定部は、前記車室内の映像に乗員が映っているか否かに加え、前記車室内に設けられたセンサが出力する検知情報に基づいて、前記車室内に乗員がいるか否かを判定する
   ことを特徴とする請求項１に記載の報知対象検知装置。
3. 前記映像取得部によって取得された前記車室内の映像の画像認識結果に基づいて、前記報知対象に付随されている物体を検知する物体検知部を備え、
   前記音声源判別部は、前記車両情報取得部によって取得された前記車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、前記乗員有無判定部によって前記車室内に乗員がいないと判定され、前記物体検知部によって前記報知対象に付随されている物体が検知された場合に、前記車室内の音声の発生源が前記報知対象であるか否かを判別する
   ことを特徴とする請求項１に記載の報知対象検知装置。
4. 前記車室内の温度を取得する温度取得部を備え、
   前記音声源判別部は、前記車両情報取得部によって取得された前記車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、前記乗員有無判定部によって前記車室内に乗員がいないと判定され、前記温度取得部によって取得された温度が許容温度範囲を外れた場合に、前記車室内の音声の発生源が前記報知対象であるか否かを判別する
   ことを特徴とする請求項１に記載の報知対象検知装置。
5. 車速またはシフト位置を示す車両情報を取得する車両情報取得部と、
   車速が閾値を超えていたときに車室内が撮影された映像を取得する映像取得部と、
   前記車室内の音声を取得する音声取得部と、
   前記音声取得部によって取得された前記車室内の音声に基づいて、前記車室内の音声の発生源が、車外の人間に報知すべき子供またはペットである報知対象のみであるか否かを判別する音声源判別部と、
   前記映像取得部によって取得された前記車室内の映像の画像認識結果に基づいて、前記報知対象を検知する報知対象検知部と、
   を備え、
   前記音声源判別部は、車速が閾値を超えていたときに前記報知対象検知部によって前記報知対象が検知され、前記車両情報取得部によって取得された前記車両情報に基づいて、車速が閾値以下またはシフト位置がパーク位置であると判定された場合に、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別する
   ことを特徴とする報知対象検知装置。
6. 前記映像取得部によって取得された前記車室内の映像の画像認識結果に基づいて、前記報知対象に付随されている物体を検知する物体検知部を備え、
   前記音声源判別部は、車速が閾値を超えていたときに前記報知対象検知部によって前記報知対象が検知され、前記車両情報取得部によって取得された前記車両情報に基づいて、車速が閾値以下またはシフト位置がパーク位置であると判定され、前記物体検知部によって前記報知対象に付随されている物体が検知された場合に、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別する
   ことを特徴とする請求項５に記載の報知対象検知装置。
7. 前記車室内の温度を取得する温度取得部を備え、
   前記音声源判別部は、車速が閾値を超えていたときに前記報知対象検知部によって前記報知対象が検知され、前記車両情報取得部によって取得された前記車両情報に基づいて、車速が閾値以下またはシフト位置がパーク位置であると判定され、前記温度取得部によって取得された温度が許容温度範囲を外れた場合に、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別する
   ことを特徴とする請求項５に記載の報知対象検知装置。
8. 請求項１から請求項７のいずれか１項記載の報知対象検知装置と、
   車両周辺に警報を出力する警報部と、
   前記車室内に前記報知対象が放置されていることを外部装置に通知する通信部と、
   を備え、
   前記警報部は、前記音声源判別部によって、前記車室内の音声の発生源が前記報知対象のみであると判別された場合に、警報を出力し、
   前記通信部は、前記警報部による警報の出力に応じて前記外部装置に通知する
   ことを特徴とする警報システム。
9. 車両情報取得部、映像取得部、乗員有無判定部、音声取得部および音声源判別部を備えた報知対象検知装置による報知対象検知方法であって、
   前記車両情報取得部が、車速またはシフト位置を示す車両情報を取得するステップと、
   前記映像取得部が、車室内が撮影された映像を取得するステップと、
   前記乗員有無判定部が、前記映像取得部によって取得された前記車室内の映像に、車外の人間に報知すべき子供またはペットである報知対象以外の乗員が映っている場合に、前記車室内に乗員がいると判定し、前記車室内の映像に前記報知対象以外の乗員が映っていなければ、前記車室内に乗員がいないと判定するステップと、
   前記音声取得部が、前記車室内の音声を取得するステップと、
   前記音声源判別部が、前記音声取得部によって取得された前記車室内の音声に基づいて、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別するステップと、
   を備え、
   前記音声源判別部は、前記車両情報取得部によって取得された前記車両情報に基づいて車速が閾値以下またはシフト位置がパーク位置であると判定され、前記乗員有無判定部によって前記車室内に乗員がいないと判定された場合に、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別する
   ことを特徴とする報知対象検知方法。
10. 車両情報取得部、映像取得部、音声取得部、音声源判別部および報知対象検知部を備えた報知対象検知装置による報知対象検知方法であって、
    前記車両情報取得部が、車速またはシフト位置を示す車両情報を取得するステップと、
    前記映像取得部が、車速が閾値を超えていたときに車室内が撮影された映像を取得するステップと、
    前記音声取得部が、前記車室内の音声を取得するステップと、
    前記音声源判別部が、前記音声取得部によって取得された前記車室内の音声に基づいて、前記車室内の音声の発生源が、車外の人間に報知すべき子供またはペットである報知対象のみであるか否かを判別するステップと、
    前記報知対象検知部が、前記映像取得部によって取得された前記車室内の映像の画像認識結果に基づいて、前記報知対象を検知するステップと、
    を備え、
    前記音声源判別部は、車速が閾値を超えていたときに前記報知対象検知部によって前記報知対象が検知され、前記車両情報取得部によって取得された前記車両情報に基づいて、車速が閾値以下またはシフト位置がパーク位置であると判定された場合に、前記車室内の音声の発生源が前記報知対象のみであるか否かを判別する
    ことを特徴とする報知対象検知方法。

Images