JP2016094140A - フラップ監視装置 - Google Patents

Abstract

【課題】フラップ部にセンサ類を設けることなく確実にフラップの開閉を判別可能なフラップ監視装置を提供する。【解決手段】車体１に設けられる蓋状のフラップ４０を監視するフラップ監視装置１００を、フラップ周辺部の車体を撮像する撮像手段１３１と、フラップが閉じた状態におけるフラップ周辺部の車体を撮像した参照画像のデータを保持する記憶手段１１１と、撮像手段が撮像した被判別画像を参照画像と比較する画像処理手段１１２と、画像処理手段による被判別画像と参照画像との比較結果に基づいて被判別画像が撮像されたときのフラップの開閉状態を判別する状態判別手段１１０とを備える構成とする。【選択図】図３

Description

本発明は、車両の給油口、充電口などに設けられる開閉式のフラップの開閉状態を監視するフラップ監視装置に関し、特にフラップ部にセンサ類を設けることなく確実にフラップの開閉を判別可能なものに関する。

例えば乗用車等の自動車においては、車体後部の側面部に給油口や充電口が設けられる場合が多い。
給油口、充電口には、通常は開閉式の蓋状の部材であるフラップが設けられている。
従来、給油や充電の後にフラップを閉じ忘れたり、給油ガン、充電ガンなどを装着したまま走行することを防止する等の目的で、各種の技術が提案されている。

例えば、特許文献１には、車両がイグニッションオンされた際に、燃料計の検出値が増加していた場合には、給油扉が開かれて給油が行われたと推定し、車内に設けられた表示部に給油口の扉の確認を促すメッセージを表示するとともに、給油口周辺部を撮像した画像を表示することが記載されている。
また、特許文献２には、給油口扉の開閉状態を検出する機械式のスイッチを、給油口近傍に配置することが記載されている。
また、特許文献３には、燃料タンクの内部に受光センサを設けて、燃料タンク内に入る光量に基づいて給油キャップの開閉状態を検出することが記載されている。

特開２０１２−１９７０１６号公報 特開２０１０−００７４３５号公報 特許４２７３８７８号

特許文献１に記載された技術は、実際に給油口扉の閉じ忘れがあったか否かに関わらず燃料増加などがあった場合にはメッセージ等が表示されるため煩雑であり、さらに、フラップの実際の開閉状態を検出することはできず、ドライバの監視負担軽減という観点では必ずしも十分な効果を得ることができない。
一方、特許文献２、３のように、給油口周辺や燃料タンクにスイッチやセンサを設ける場合、部品点数が増加して構造が複雑化する。
また、スイッチ接点のスパークによる引火防止や、スイッチ、センサ類の耐久性、信頼性の確保が困難である。
さらに、スイッチ、センサ類は外気や燃料に曝される頻度も高いことから耐候性、耐油性などの確保も困難である。
上述した問題に鑑み、本発明の課題は、フラップ部にセンサ類を設けることなく確実にフラップの開閉を判別可能なフラップ監視装置を提供することである。

本発明は、以下のような解決手段により、上述した課題を解決する。
請求項１に係る発明は、車体に設けられる蓋状のフラップを監視するフラップ監視装置であって、前記フラップ周辺部の車体を撮像する撮像手段と、前記フラップが閉じた状態における前記フラップ周辺部の車体を撮像した参照画像のデータを保持する記憶手段と、前記撮像手段が撮像した被判別画像を前記参照画像と比較する画像処理手段と、前記画像処理手段による前記被判別画像と前記参照画像との比較結果に基づいて前記被判別画像が撮像されたときの前記フラップの開閉状態を判別する状態判別手段とを備えることを特徴とするフラップ監視装置である。
これによれば、フラップが閉じた状態の参照画像を、フラップの状態を確認すべきタイミングで撮像された被判別画像と比較することによって、フラップの開閉状態を適切に判別することができる。
これによって、給油ガンや充電ガンが装着されたまま車両が動き出すことを防止できる。
また、フラップの周辺には、開閉状態検出のため専用のスイッチやセンサを設ける必要がないことから、フラップ周辺の部品点数の増加、構造の複雑化、燃料への引火等を防止することができる。

請求項２に係る発明は、前記参照画像は、フラップ監視装置の初回使用時以前に予め撮像されることを特徴とする請求項１に記載のフラップ監視装置である。
これによれば、参照画像としてフラップが確実に閉じている状態の画像を用いることができ、判別精度を高めることができる。

請求項３に係る発明は、前記参照画像は、車両の停止を検出した後に撮像されることを特徴とする請求項１に記載のフラップ監視装置である。
これによれば、給油や充電のため車両を停車させた場所において参照画像を撮像することによって、開状態のフラップに相当する箇所に紛らわしい被写体が存在する場合における判別精度を向上することができる。
また、着雪、着氷、泥などによって車体及びフラップの表面色が本来の塗装色と変化している場合であっても、直前の画像を参照画像として用いることによって、適切な判別を行うことができる。
請求項４に係る発明は、前記参照画像は、車両の停止から前記フラップの開動作が行われるまでの間に撮像されることを特徴とする請求項１に記載のフラップ監視装置である。
これによれば、上述した効果に加えて、確実にフラップが閉じた状態で参照画像を撮像することができ、判別精度をより向上することができる。

請求項５に係る発明は、前記被判別画像は、前記フラップの開操作が行われた後の最初の発進時又は発進準備時に撮像されることを特徴とする請求項１から請求項４までのいずれか１項に記載のフラップ監視装置である。
これによれば、フラップを閉じ忘れた状態で車両を走行させることを防止できる。

請求項６に係る発明は、前記撮像手段は車両の車室内に設けられ、車体外部に設けられたミラーの反射像を撮像することによって前記フラップ周辺部の車体の画像を撮像することを特徴とする請求項１から請求項５までのいずれか１項に記載のフラップ監視装置である。
これによれば、カメラを車室内に配置することによって、カメラに高い耐候性が要求されることがなく、装置の構成を簡素化しコストを抑制することができる。

請求項７に係る発明は、前記ミラーは角度位置を変更可能なアクチュエータを備え、前記被判別画像の撮像時における前記ミラーの角度位置を前記参照画像の撮像時と実質的に同一の位置とするミラー制御手段を有することを特徴とする請求項６に記載のフラップ監視装置である。
これによれば、参照画像及び被判別画像をそれぞれ撮像する際の撮像範囲のずれ、画像内における被写体位置のずれを防止することができ、画像処理を容易化するとともに判別精度をより向上することができる。

請求項８に係る発明は、前記撮像手段は、前記ミラーを撮像可能範囲に含む車両前方監視用のカメラを有することを特徴とする請求項６又は請求項７に記載のフラップ監視装置である。
これによれば、フラップの監視専用に新たにカメラを設ける必要がないことから、最低限のコストアップで本発明を車両に適用することが可能となる。
ここで、車両前方監視用のカメラとして、例えば光軸方向を変更可能であるか、あるいは十分広い画角の広角レンズを有するドライブレコーダ用のカメラや、プリクラッシュ制御、レーンキープ制御、アダプティブクルーズコントロール制御などのために車両前方の環境を認識する単眼又はステレオカメラを用いることができる。

以上説明したように、本発明によれば、フラップ部にセンサ類を設けることなく確実にフラップの開閉を判別可能なフラップ監視装置を提供することができる。

本発明を適用したフラップ監視装置の実施例１を有する車両の模式的外観図である。 実施例１のフラップ監視装置の構成を示すブロック図である。 実施例１のフラップ監視装置の動作を示すフローチャートである。 実施例１のフラップ監視装置における参照画像及び被判別画像の一例を示す図である。 本発明を適用したフラップ監視装置の実施例２の動作を示すフローチャートである。

本発明は、フラップ部にセンサ類を設けることなく確実にフラップの開閉を判別可能なフラップ監視装置を提供する課題を、給油等が終了して車両が発進する際にフラップ周辺部を撮像した画像を、予め撮像されたフラップ周辺部の画像と比較することによって解決した。

以下、本発明を適用したフラップ監視装置の実施例１について説明する。
実施例１のフラップ監視装置は、例えばガソリンエンジン等の内燃機関を走行用動力源として搭載する乗用車等の自動車の給油口フラップを監視するものである。

図１は、実施例１のフラップ監視装置を有する車両の模式的外観図である。
図１（ａ）は車両を左側方から見た状態を示し、図１（ｂ）は車両を上方から見た平面図（図１（ａ）のｂ−ｂ部矢視図）である。

車両１は、一例としてキャビン１０、エンジンルーム２０、トランクルーム３０等を有する３ボックスのセダン型乗用車である。
キャビン（車室）１０は、乗員が収容される部分である。
キャビン１０は、フロントガラス１１、リアガラス１２、フロントサイドガラス１３、リアサイドガラス１４等を有する。

フロントガラス１１は、キャビン１０の上半部における前部に設けられている。
リアガラス１２は、キャビン１０の上半部における後部に設けられている。
フロントサイドガラス１３、リアサイドガラス１４は、キャビン１０の上半部における側部に設けられ、車両前方側から順次配列されている。
フロントサイドガラス１３の前端部は、フロントガラス１１の側端部と、柱状のＡピラーを介して隣接して配置されている。

エンジンルーム２０は、キャビン１０の前端部における下半部から車両前方側へ突き出して形成され、エンジン等のパワートレーンが収容される部分である。
エンジンルーム２０の側部には、前輪ＦＷが収容されるホイルハウス２１が形成されている。

トランクルーム３０は、キャビン１０の後端部における下半部から車両後方側へ突き出して形成され、荷室が設けられる部分である。
トランクルーム３０の側部には、後輪ＲＷが収容されるホイルハウス３１が形成されている。
トランクルーム３０の側面部には、車両外板であるリアクォータパネル３２が設けられている。

車両１は、さらに、フラップ４０、ドアミラー５０等を有する。
フラップ４０は、車両の左右いずれか一方のリアクォータパネル３２に設けられ、車両の床下部に設けられる図示しない燃料タンクに燃料を補給する給油口に設けられる扉である。
給油口には、燃料タンクから突出した給油管の上端部が配置されている。

フラップ４０は、例えば矩形等のパネル状に形成され、車両前方側に配置されたヒンジの回転軸回りに揺動し、給油口を開閉する。
フラップ４０は、ドライバ等のユーザによるフラップオープナスイッチ１３４の操作に応じて、フラップオープナアクチュエータ１３２がラッチのロックを解除することによって開かれる。
また、フラップ４０は、ドライバが手指でリアクォータパネル３２側へ回動させ押圧し、ラッチを係合させることによって閉じられる。
フラップ４０は、閉状態においては、リアクォータパネル３２に形成された凹部へ埋め込まれることによって、周囲のリアクォータパネル３２の表面と実質的に面一（フラッシュサーフェス）となるようになっている。

ドアミラー５０は、ドライバが走行中などに車両の左右後方を目視確認するためのアウタミラーである。
ドアミラー５０は、左右のフロントサイドガラス１３の前端部かつ下端部近傍（Ａピラー下端部近傍）におけるドアアウタパネルから車幅方向外側に突出して設けられている。
ドアミラー５０は、運転席に着座したドライバ視点から、フロントサイドガラス１３を介して目視可能となっている。
ドアミラー５０は、鏡面を上下左右にチルトさせることが可能な電動アクチュエータであるミラー駆動アクチュエータ１３１を備えた電動調整式のものである。

次に、上述した車両に搭載されるフラップ監視装置の構成について説明する。
図２は、実施例１のフラップ監視装置の構成を示すブロック図である。
フラップ監視装置１００は、フラップ監視ユニット１１０、カメラ制御ユニット１２０、車体統合ユニット１３０、エンジン制御ユニット（ＥＣＵ）１４０、マルチファンクションディスプレイ（ＭＦＤ）１５０、オーディオ装置１６０等を、例えばＣＡＮ通信システムなどの車載ＬＡＮ等やその他の配線で直接あるいは間接的に接続したシステムとして構成されている。
フラップ監視ユニット１１０、カメラ制御ユニット１２０、車体統合ユニット１３０、エンジン制御ユニット１４０は、それぞれＣＰＵ等の情報処理手段、ＲＯＭやＲＡＭ等の記憶手段、入出力インターフェイス及びこれらを接続するバス等を有し、ＣＡＮ通信システム等を介して相互に通信可能となっている。

フラップ監視ユニット１１０は、カメラ制御ユニット１２０から提供される被判別画像の画像データに基づいて、フラップ４０の開閉を判別するものである。
フラップ監視ユニット１１０には、画像記憶メモリ１１１、画像処理装置１１２等が接続されている。
画像記憶メモリ１１１は、フラップ４０の開閉判別の基準として用いる参照画像のデータが格納されている。
参照画像は、カメラ１２１によってフラップ４０全閉時におけるリアクォータパネル３２周辺部を撮像したものであって、実施例１の場合には、フラップ監視装置１００の初回使用に先立って撮像される。
例えば、参照画像は、フラップ監視装置１００が新車にライン装着される場合には、新車出荷時に撮像することができる。この場合、参照画像は実際にフラップ監視装置１００が設けられる車両個体で撮像する必要はなく、同一車種の他個体で撮像されたものを利用することも可能である。
また、フラップ監視装置１００が車両に後付けされる場合には、その取付直後に撮像することができる。

画像処理装置１１２は、フラップ４０の開閉判別のために給油直後に撮像された被判別画像と、参照画像とを比較する画像処理を行うものである。
画像処理装置１１２は、参照画像と被判別画像との対応する各画素値の差分を算出し、被判別画像にのみフラップ４０に相当する画素群が存在するか否かを判別する。
この点、後に詳しく説明する。

カメラ制御ユニット１２０は、カメラ１２１、カメラ駆動アクチュエータ１２２等を制御するものである。
カメラ１２１は、例えばＣＣＤやＣＭＯＳ等の固体撮像素子、撮影用レンズ等の光学系及び各デバイスの駆動装置などを備えている。
図１に示すように、カメラ１２１は、キャビン１０内におけるフロントガラス１１の車幅方向中央部における上端部近傍に設置されている。
カメラ駆動アクチュエータ１２２は、カメラ１２１の光学系を左右及び上下にそれぞれ揺動させるものである。
カメラ駆動アクチュエータ１２２は、例えば、カメラ１２１を各方向にそれぞれ駆動する電動モータ及び減速ギヤ列等を有して構成されている。

カメラ１２１は、車両の通常走行時においては、自車両前方側の動画を連続的に撮像し記録するドライブレコーダ用のカメラとして用いられる。
また、カメラ１２１は、フラップ４０の開閉判別用の被判別画像を撮像する際には、カメラ駆動アクチュエータ１２２によって、フラップ４０が設けられた側のドアミラー５０側へ向けられる。
この点に関しては後により詳しく説明する。

車体統合ユニット１３０は、車体に設けられる各種電装品（専用のユニットにより制御されるものを除く）を統括的に制御するものである。
車体統合ユニット１３０には、ミラー駆動アクチュエータ１３１、フラップオープナアクチュエータ１３２、ミラー調整スイッチ１３３、フラップオープナスイッチ１３４等が接続されている。

ミラー駆動アクチュエータ１３１は、ドアミラー５０の鏡面を上下方向、水平方向にそれぞれチルトさせるものである。
ミラー駆動アクチュエータ１３１は、電動モータ及びその出力を減速する減速機構等を有して構成されている。
ミラー駆動アクチュエータ１３１は、ユーザによるミラー調整スイッチ１３３の操作に応じて駆動されるほか、被判別画像の撮像時には、鏡面が予め設定された所定のミラー撮像位置となるよう駆動する。

フラップオープナアクチュエータ１３２は、フラップ４０を閉状態から開状態へ推移させるものである。
フラップ４０は、閉状態においては図示しないラッチ機構によって保持されている。
フラップオープナアクチュエータ１３２は、ラッチ機構を解除する機能を有する。
ラッチ機能が解除されると、フラップ４０は、例えばスプリング等の付勢手段によって開放される。
フラップオープナアクチュエータ１３２は、ユーザによるフラップオープナスイッチ１３４の操作に応じて作動する。

ミラー調整スイッチ１３３は、ユーザがドアミラーの調節操作を行なう操作部である。
フラップオープナスイッチ１３４は、ユーザがフラップ４０の開操作を行なう操作部である。
ミラー調整スイッチ１３３、フラップオープナスイッチ１３４は、例えばインストルメントパネル等のキャビン１０内におけるドライバが手指によって操作可能な位置に配置されている。

エンジン制御ユニット１４０は、車両の走行用動力源であるエンジン及びその補機類を統括的に制御するものである。
エンジン制御ユニット１４０は、エンジンのイグニッションオン（運転）、オフ（停止）に関する情報をフラップ監視ユニット１１０に提供する。

マルチファンクションディスプレイ１５０は、キャビン１０内のインストルメントパネルに設けられた画像表示装置である。
オーディオ装置１６０は、フラップ監視ユニット１１０からの信号に応じて、キャビン１０内に音声を発する機能を備えている。

次に、上述したフラップ監視装置の動作について説明する。
図３は、実施例１のフラップ監視装置の動作を示すフローチャートである。
以下、ステップ毎に順を追って説明する。

＜ステップＳ０１：イグニッションオフ判断＞
フラップ監視ユニット１１０は、エンジン制御ユニット１４０からの情報に基づいて、イグニッションスイッチがオン状態（エンジン運転状態）からオフ状態（エンジン停止状態）へ推移したか否かを判別する。
イグニッションスイッチがオン状態からオフ状態へ推移した場合（車両が運転停止した場合）にはステップＳ０２に進み、その他の場合には一連の処理を終了（リターン）する。

＜ステップＳ０２：フラップ開操作有判断＞
フラップ監視ユニット１１０は、車体統合ユニット１３０からの情報に基づいて、フラップオープナスイッチ１３４にユーザが開操作を行なったか否かを判別する。
フラップ開操作が行われた場合はステップＳ０３に進み、その他の場合には一連の処理を終了する。

＜ステップＳ０３：フラップ開扉＞
フラップ監視ユニット１１０は、車体統合ユニット１３０に指示を出し、フラップオープナアクチュエータ１３２を作動させてラッチを解除し、フラップ４０を閉状態から開状態へ移行させる。
その後、ステップＳ０４に進む。

＜ステップＳ０４：イグニッションオン判断＞
フラップ監視ユニット１１０は、エンジン制御ユニット１４０からの情報に基づいて、イグニッションスイッチがオフ状態からオン状態へ推移したか否かを判別する。
イグニッションスイッチがオフ状態からオン状態へ推移した場合（車両が運転開始した場合）には給油が終了したものとしてステップＳ０５に進み、その他の場合には給油が未了であるとしてステップＳ０４を繰り返す。

＜ステップＳ０５：カメラ・ミラー撮像位置へ駆動＞
フラップ監視ユニット１１０は、カメラ制御ユニット１２０及び車体統合ユニット１３０に指示を出し、カメラ駆動アクチュエータ１２２及びミラー駆動アクチュエータ１３１を駆動させる。
カメラ駆動アクチュエータ１２２は、カメラ１２１を鉛直軸回りに回動させ、ドアミラー５０の鏡面が撮像範囲の中央部となる位置（カメラ撮像位置）に移動させる。
ミラー駆動アクチュエータ１３１は、ドアミラー５０の鏡面を、フラップ４０周辺部の反射像がカメラ１２１に入射されるよう考慮して予め設定された位置（ミラー撮像位置）に移動させる。
このときのカメラ１２１の視野Ａを図１（ｂ）に示す。
その後、ステップＳ０６に進む。

＜ステップＳ０６：フラップ周辺部を撮像＞
フラップ制御ユニット１１０は、カメラ制御ユニット１２０に指示を出し、カメラ１２１にリアクォータパネル３２のフラップ４０周辺の画像を撮像させ、その画像データを取得する。
その後、ステップＳ０７に進む。

＜ステップＳ０７：カメラ・ミラー位置復帰＞
フラップ監視ユニット１１０は、カメラ制御ユニット１２０及び車体統合ユニット１３０に指示を出し、カメラ駆動アクチュエータ１２２及びミラー駆動アクチュエータ１３１を駆動させ、カメラ１２１及びドアミラー５０の位置を、ステップＳ０５における駆動前の状態（走行時位置）に復帰させる。
その後、ステップＳ０８に進む。

＜ステップＳ０８：被判別画像を参照画像と比較＞
フラップ監視ユニット１１０は、画像処理装置１１２を用いて、ステップＳ０６において撮像した画像（被判別画像）を、新車出荷時に撮像された同アングルの画像（参照画像）と比較する。
具体的には、各画像における車体部分の位置が実質的に一致するよう調整し、対応する画素の画素値（例えばＲＧＢ各色の輝度値など）の差分を画素ごとに求める。
そして、参照画像と被判別画像とで画素値の差分が閾値以上となる画素群を相違画素群として抽出する。
その後、ステップＳ０９に進む。

＜ステップＳ０９：フラップ状態判別＞
フラップ監視ユニット１１０は、ステップＳ０８において抽出された相違画素群のなかに、開状態におけるフラップ４０と共通する位置、形状、大きさ、色等の特徴を有する画素群がないか判別し、このような画素群が存在する場合には、被判別画像にのみ開状態におけるフラップ４０が写っているものとして、フラップ開状態を判別する。

図４は、実施例１のフラップ監視装置における参照画像及び被判別画像の一例を示す図である。
図４（ａ）は、フラップ４０が閉じた状態で撮像された参照画像の例を示し、図４（ｂ）は、フラップ４０が開いた状態で撮像された被判別画像の例を示している。
これらの画像間で、対応する各画素値の差分を求めた場合、車体部分に関しては実質的に同様の被写体が写っていることから、画素値の差分は不可避的に生じる誤差程度に小さくなるが、フラップ４０が存在する領域においては、画素値の差分が大きくなり、閾値を超過する。
これにより、フラップ４０に相当する画素群が相違画素群として抽出され、この相違画素群が位置、大きさ、形状、色などにおいて、フラップ４０特有の特徴を備えている場合には、フラップ４０の像であると判別されることになる。
フラップ開状態が判別された場合にはステップＳ１０に進み、その他の場合には一連の処理を終了（リターン）する。

＜ステップＳ１０：メッセージ出力＞
フラップ監視ユニット１１０は、マルチファンクションディスプレイ１５０に、例えば「フラップが開いています」などのユーザに注意喚起するメッセージを文字情報として表示させる。
また、フラップ監視ユニット１１０は、オーディオ装置１６０に、同様のメッセージを音声によって出力させる。このとき、オーディオ装置１６０は、音声メッセージに代えて、あるいはこれとともに、ブザー音などの警告音を発するようにしてもよい。
このようなメッセージ等は、例えば一定時間の経過後に自動的に終了するようにしてもよく、また、ユーザが所定の操作を行なった後に終了するようにしてもよい。
また、再度被判別画像を撮像し、フラップ４０の閉状態が判別された場合に終了するようにしてもよい。
その後、一連の処理を終了する。

以上説明したように、実施例１によれば、フラップ４０の周辺部を撮像した被判別画像を、新車出荷時等にフラップ４０を閉じた状態で撮像した参照画像と比較し、開状態のフラップ４０に相当する画素群が存在するか判別することによって、フラップ４０部にスイッチやセンサ類を設けることなく、フラップ４０の開閉を適切に検出することができる。
また、ドライブレコーダ用のカメラ１３１をフラップ監視にも利用することによって、フラップ監視装置のための専用部品を低減することができ、車両構成の簡素化、低コスト化を図ることができる。
また、被判別画像の撮像時にドアミラー５０を予め設定されたミラー撮像位置に移動させることによって、適切な撮影を行うことができる。

次に、本発明を適用したフラップ監視装置の実施例２について説明する。
以下、上述した実施例１と実質的に共通する箇所については同じ符号を付して説明を省略し、主に相違点について説明する。
実施例２においては、参照画像を車両の停止後フラップ４０を開扉する直前に撮像することを特徴とする。
図５は、実施例２のフラップ監視装置における動作を示すフローチャートである。
以下、ステップ毎に順を追って説明する。

＜ステップＳ１１：イグニッションオフ判断＞
フラップ監視ユニット１１０は、エンジン制御ユニット１４０からの情報に基づいて、イグニッションスイッチがオン状態からオフ状態へ推移したか否かを判別する。
イグニッションスイッチがオン状態からオフ状態へ推移した場合にはステップＳ１２に進み、その他の場合には一連の処理を終了（リターン）する。

＜ステップＳ１２：フラップ開操作有判断＞
フラップ監視ユニット１１０は、車体統合ユニット１３０からの情報に基づいて、フラップオープナスイッチ１３４にユーザが開操作を行なったか否かを判別する。
フラップ開操作が行われた場合はステップＳ１３に進み、その他の場合には一連の処理を終了する。

＜ステップＳ１３：カメラ・ミラー撮像位置へ駆動＞
フラップ監視ユニット１１０は、カメラ制御ユニット１２０及び車体統合ユニット１３０に指示を出し、カメラ駆動アクチュエータ１２２及びミラー駆動アクチュエータ１３１を駆動させる。
カメラ駆動アクチュエータ１２２は、カメラ１２１をカメラ撮像位置に移動させ、ミラー駆動アクチュエータ１３１は、ドアミラー５０の鏡面をミラー撮像位置に移動させる。
その後、ステップＳ１４に進む。

＜ステップＳ１４：フラップ周辺部を撮像＞
フラップ制御ユニット１１０は、カメラ制御ユニット１２０に指示を出し、カメラ１２１にリアクォータパネル３２のフラップ４０周辺の画像を撮像させ、その画像データを取得する。
フラップ監視ユニット１１０は、この時撮像した画像を、フラップ４０が閉じた状態における画像（参照画像）とする。
その後、ステップＳ１５に進む。

＜ステップＳ１５：フラップ開扉＞
フラップ監視ユニット１１０は、車体統合ユニット１３０に指示を出し、フラップオープナアクチュエータ１３２を作動させてフラップ４０を閉状態から開状態へ移行させる。
その後、ステップＳ１６に進む。

＜ステップＳ１６：イグニッションオン判断＞
フラップ監視ユニット１１０は、エンジン制御ユニット１４０からの情報に基づいて、イグニッションスイッチがオフ状態からオン状態へ推移したか否かを判別する。
イグニッションスイッチがオフ状態からオン状態へ推移した場合には給油が終了したものとしてステップＳ１７に進み、その他の場合には給油が未了であるとしてステップＳ１６を繰り返す。

＜ステップＳ１７：フラップ周辺部を撮像＞
フラップ制御ユニット１１０は、カメラ制御ユニット１２０に指示を出し、カメラ１２１にリアクォータパネル３２のフラップ４０周辺の画像を撮像させ、その画像データを取得する。
フラップ制御ユニット１１０は、このとき撮像された画像を、フラップ４０の開閉判別の対象となる被判別画像とする。
その後、ステップＳ１８に進む。

＜ステップＳ１８：カメラ・ミラー位置復帰＞
フラップ監視ユニット１１０は、カメラ制御ユニット１２０及び車体統合ユニット１３０に指示を出し、カメラ駆動アクチュエータ１２２及びミラー駆動アクチュエータ１３１を駆動させ、カメラ１２１及びドアミラー５０の位置を、ステップＳ１３における駆動前の状態に復帰させる。
その後、ステップＳ１９に進む。

＜ステップＳ１９：被判別画像を参照画像と比較＞
フラップ監視ユニット１１０は、画像処理装置１１２を用いて、ステップＳ１７において撮像した被判別画像を、ステップＳ１４において撮像された参照画像と、実施例１におけるステップＳ０８と同様に比較する。
その後、ステップＳ２０に進む。

＜ステップＳ２０：フラップ状態判別＞
フラップ監視ユニット１１０は、実施例１におけるステップＳ０９と同様にして、フラップ開状態を判別する。
フラップ開状態が判別された場合にはステップＳ２１に進み、その他の場合には一連の処理を終了（リターン）する。

＜ステップＳ１０：メッセージ出力＞
フラップ監視ユニット１１０は、実施例１におけるステップＳ１０と同様に、マルチファンクションディスプレイ１５０にメッセージを表示させ、オーディオ装置１６０に、メッセージを音声によって出力させる。
その後、一連の処理を終了する。

以上説明した実施例２によれば、上述した実施例１の効果と実質的に同様の効果に加えて、参照画像を給油ステーション等での停車後に撮像することによって、例えば背景に開状態のフラップ４０と紛らわしい被写体が写っている場合であっても、その影響を排除して精度よくフラップ４０の開閉状態を判別することができる。
また、着雪や着氷、泥などによって車体、フラップの表面色が本来の塗装色と異なっている場合であっても、直前に参照画像を取得することによって、適切にフラップの開閉状態を判別することができる。

（変形例）
本発明は、以上説明した実施例に限定されることなく、種々の変形や変更が可能であって、それらも本発明の技術的範囲内である。
（１）車両及びフラップ監視装置の構成は、上述した実施例に限定されず適宜変更することが可能である。
例えば、実施例では車室内にカメラを設置し、ミラーの反射像を利用してフラップ周辺部を撮像しているが、これに限らず、車外又は車内に設置されたカメラから直接フラップ周辺部を撮像するようにしてもよい。例えば、ドライバ死角軽減のためドアミラーに後方下部確認用のカメラが設けられている場合には、これを利用してフラップ周辺部を撮像してもよい。また、パーキングアシスト用として車両周囲を撮像するカメラを利用してもよい。
（２）実施例のフラップ監視装置は、燃料給油口のフラップを監視するものであったが、本発明は電気自動車やプラグインハイブリッド車両の充電口のフラップの監視にも適用することができる。
（３）実施例では車両の停止をイグニッションオフに基づいて検出しているが、これに限らず、他の手法によって車両の停止を検出してもよい。
例えば、車速が閾値以下となったことや、変速機がパーキングレンジ等の非走行レンジにシフトされたこと、パーキングブレーキの作動等に基づいて検出してもよい。
（４）実施例では車両の発進準備をイグニッションオンに基づいて検出しているが、これに限らず、他の手法によって発進準備又は発進を検出してもよい。
例えば、車速が閾値以上となったことや、変速機がドライブレンジ等の走行レンジにシフトされたこと、パーキングブレーキの解除、アクセルペダルの踏込み操作等に基づいて検出してもよい。
（５）参照画像及び被判別画像を用いてフラップの開閉状態を判別する画像処理の具体的手法は、上述した実施例のものに限定されず、適宜変更することが可能である。
（６）実施例では、画像及び音声によってユーザにフラップの閉め忘れを報知しているが、これに限らず、ワーニングランプの点灯、点滅や、ステアリングホイール等のドライバに接触する部品の振動等、他の手法によってユーザに報知してもよい。また、報知を終了する条件も特に限定されない。
（７）実施例では、参照画像と被判別画像との位置合わせを、ドラミラーの角度位置調整等によって機械的に行っているが、撮像時の位置ずれを画像処理段階でソフトウェア的に合わせるようにしてもよい。
（８）実施例２では、フラップ開操作が行われた場合に、フラップ周辺部を撮像しているが、フラップ開操作が行われたか否かに関わらず、車両の停止を検出した場合（例えば、イグニッションオフを検出した時）に、直ちにフラップ周辺部を撮像するようにしてもよい。

１ 車両 １０ キャビン
１１ フロントガラス １２ リアガラス
１３ フロントサイドガラス １４ リアサイドガラス
２０ エンジンルーム ２１ ホイルハウス
３０ トランクルーム ３１ ホイルハウス
３２ リアクォータパネル ４０ フラップ
５０ ドアミラー １００ フラップ監視装置
１１０ フラップ監視ユニット １１１ 画像記憶メモリ
１１２ 画像処理装置 １２０ カメラ制御ユニット
１２１ カメラ １２２ カメラ駆動アクチュエータ
１３０ 車体統合ユニット １３１ ミラー駆動アクチュエータ
１３２ フラップオープナアクチュエータ
１３３ ミラー調整スイッチ １３４ フラップオープナスイッチ
１４０ エンジン制御ユニット
１５０ マルチファンクションディスプレイ
１６０ オーディオ装置
ＦＷ 前輪 ＲＷ 後輪

Claims (8)

1. 車体に設けられる蓋状のフラップを監視するフラップ監視装置であって、
   前記フラップ周辺部の車体を撮像する撮像手段と、
   前記フラップが閉じた状態における前記フラップ周辺部の車体を撮像した参照画像のデータを保持する記憶手段と、
   前記撮像手段が撮像した被判別画像を前記参照画像と比較する画像処理手段と、
   前記画像処理手段による前記被判別画像と前記参照画像との比較結果に基づいて前記被判別画像が撮像されたときの前記フラップの開閉状態を判別する状態判別手段と
   を備えることを特徴とするフラップ監視装置。
2. 前記参照画像は、フラップ監視装置の初回使用時以前に予め撮像されること
   を特徴とする請求項１に記載のフラップ監視装置。
3. 前記参照画像は、車両の停止を検出した後に撮像されること
   を特徴とする請求項１に記載のフラップ監視装置。
4. 前記参照画像は、車両の停止から前記フラップの開動作が行われるまでの間に撮像されること
   を特徴とする請求項１に記載のフラップ監視装置。
5. 前記被判別画像は、前記フラップの開操作が行われた後の最初の発進時又は発進準備時に撮像されること
   を特徴とする請求項１から請求項４までのいずれか１項に記載のフラップ監視装置。
6. 前記撮像手段は車両の車室内に設けられ、車体外部に設けられたミラーの反射像を撮像することによって前記フラップ周辺部の車体の画像を撮像すること
   を特徴とする請求項１から請求項５までのいずれか１項に記載のフラップ監視装置。
7. 前記ミラーは角度位置を変更可能なアクチュエータを備え、
   前記被判別画像の撮像時における前記ミラーの角度位置を前記参照画像の撮像時と実質的に同一の位置とするミラー制御手段を有すること
   を特徴とする請求項６に記載のフラップ監視装置。
8. 前記撮像手段は、前記ミラーを撮像可能範囲に含む車両前方監視用のカメラを有すること
   を特徴とする請求項６又は請求項７に記載のフラップ監視装置。

Images