JP2010080993A - インターホンシステム - Google Patents

Abstract

【課題】来訪者の顔が認識できる画像が取得できない場合に、来訪者に適切な対処の指示を行うとともに、居住者に必要な警戒を促すことが可能なインターホンシステムを提供する。
【解決手段】子機のカメラによって、来訪者が撮像される。親機では、撮像された静止画では来訪者の顔領域が検出できない場合には（Ｓ１０１：ＮＯ）、子機のスピーカから来訪者に対して、子機の正面に立つように指示する音声が出力される（Ｓ１２０）。来訪者の顔領域は検出できたが（Ｓ１０１：ＹＥＳ）、顔の特徴点が抽出できない場合には（Ｓ１０３：ＮＯ）、子機のスピーカから来訪者に対して、隠されている顔の領域を見せるように指示する音声が出力される（Ｓ１３０）。さらに、親機の操作パネルに、検出エラーの場合は注意を促す情報を表示する注意モード画面、特徴抽出エラーの場合はより高レベルの警戒を促す情報を表示する警戒モード画面が表示される。
【選択図】図６

Description

本発明は、インターホンシステムに関し、より具体的には、室外に設置される子機と、室内に設置される親機とを備えたインターホンシステムに関する。

従来、例えば、住宅の室外に設置される子機と、室内に設置される親機とを備えたインターホンシステムが知られている。このうち、子機が備えるカメラで来訪者を撮像し、撮像された来訪者の画像を親機の備えるモニタに表示可能なものがある。このようなインターホンシステムは、室内に居る居住者が、モニタに表示された来訪者の顔を見て、来訪者が誰であるのかを確認し、適切な応対ができるようにすることを主な目的としている。よって、来訪者の顔を認識できる画像が取得できない場合には、来訪者に何らかの行動を求めるものがある。例えば、特許文献１には、撮像された画像から正常な顔が認識できない場合、子機のスピーカから、来訪者に所定位置への移動を指示する音声を出力するインターホン装置が開示されている。
特開２００５−９２２６２号公報

特許文献１に記載のインターホン装置は、撮像された画像から顔が認識できない原因は複数あるにもかかわらず、来訪者に対して常に同じ指示を行う。よって、来訪者が指示通り対処したとしても、適切な対処ではない可能性がある。また、来訪者があえて顔を認識できないように行動している場合には、指示に従わない可能性がある。また、居住者の側では、来訪者の顔が認識できない場合、来訪者が悪意を持った人物であっても何ら警戒せずに応対をしてしまう虞がある。

本発明は、上記問題点を解決するためになされたものであり、来訪者の顔が認識できる画像が取得できない場合に、来訪者に適切な対処の指示を行うとともに、居住者に必要な警戒を促すことが可能なインターホンシステムを提供することを目的とする。

上記目的を達成するために、請求項１に係る発明のインターホンシステムは、室外に設置された子機と、前記子機に接続され、室内に設置された親機とを備えたインターホンシステムであって、前記子機は、前記子機正面の所定の撮像範囲を撮像し、前記撮像範囲の画像の情報である撮像画像情報を出力する撮像手段と、来訪者を検知する来訪者検知手段と、前記来訪者に情報を通知する子機通知手段を備え、前記親機は、前記来訪者検知手段によって前記来訪者が検知された場合に、前記撮像手段から出力された前記撮像画像情報を取得する画像取得手段と、前記画像取得手段によって取得された前記撮像画像情報に基づいて、前記来訪者の顔が認識可能か否かを判断する認識判断手段と、前記認識判断手段によって、前記来訪者の前記顔が認識可能でないと判断された場合に、前記子機通知手段を制御して、認識を妨げる原因に応じて、前記来訪者に対して異なる行動を促す情報を通知させる子機通知制御手段と、前記室内に情報を通知する親機通知手段と、前記親機通知手段を制御して、前記原因に応じて異なるレベルの警戒を促す情報を通知させる第１の親機通知制御手段を備えている。

請求項２に係る発明のインターホンシステムでは、請求項１に記載の発明の構成に加え、前記認識判断手段は、前記画像取得手段によって取得された前記撮像画像情報に基づいて、前記撮像範囲内に前記来訪者の顔に相当する領域である顔領域が存在するか否かを判断する第１の判断手段と、前記第１の判断手段によって、前記撮像範囲内に前記来訪者の前記顔領域が存在すると判断された場合に、前記撮像画像情報に基づいて、前記来訪者の前記顔の特徴である来訪者顔特徴が抽出可能か否かを判断する第２の判断手段と、前記第１の判断手段による判断結果および前記第２の判断手段による判断結果のいずれかが否である場合に、前記第１の判断手段または前記第２の判断手段による判断結果に応じて前記原因を特定する原因特定手段を備えている。

請求項３に係る発明のインターホンシステムでは、請求項１または２に記載の発明の構成に加え、前記撮像手段は、異なる解像度での撮像、および異なる画角での撮像、および静止画および動画の撮像が可能であり、前記親機は、前記認識判断手段によって、前記来訪者の前記顔が認識可能でないと判断された場合に、前記撮像手段を制御して、前記原因に応じて前記撮像手段の撮像方法を変更させる撮像制御手段と、画像を表示する画像表示手段と、前記画像表示手段を制御して、前記画像取得手段によって取得された前記撮像画像情報に基づき、前記撮像範囲の画像を表示させる表示制御手段をさらに備えている。

請求項４に係る発明のインターホンシステムでは、請求項１〜３のいずれかに記載の発明の構成に加え、前記親機は、前記認識判断手段によって、前記来訪者の前記顔が認識可能であると判断された場合に、前記撮像画像情報に基づいて、前記来訪者の前記顔の特徴である来訪者顔特徴を抽出する顔特徴抽出手段と、複数の人物の認識情報に対応づけて複数の顔の特徴を記憶する顔特徴記憶手段に記憶された前記複数の顔の特徴と、前記来訪者顔特徴とを照合し、前記複数の顔の特徴のいずれかが、前記来訪者顔特徴と一致するか否かを判断する一致判断手段と、前記親機通知手段を制御して、前記一致判断手段による判断結果に応じて異なるレベルの警戒を促す情報を通知させる第２の親機通知制御手段をさらに備えている。

請求項５に係る発明のインターホンシステムでは、請求項４に記載の発明の構成に加え、前記親機は、前記一致判断手段によって、前記来訪者顔特徴と一致すると判断された前記顔の特徴に基づき、前記複数の人物のいずれかを前記来訪者として特定する来訪者特定手段と、前記親機通知手段を制御して、前記来訪者特定手段によって特定された前記来訪者の情報を通知させる第３の親機通知制御手段をさらに備えている。

請求項６に係る発明のインターホンシステムでは、請求項４または５に記載の発明の構成に加え、前記一致判断手段は、前記顔特徴判断手段によって、前記来訪者特徴の一部が抽出された場合には、前記複数の顔の特徴の一部と、前記来訪者特徴の一部に基づいて判断を行い、前記親機は、前記一致判断手段によって、前記来訪者顔特徴の一部と一致すると判断された前記複数の顔の特徴の一部に基づき、前記複数の人物のいずれかを前記来訪者の候補として特定する候補特定手段と、前記親機通知手段を制御して、前記候補特定手段によって特定された前記来訪者の候補の情報を通知させる第４の親機通知制御手段をさらに備えている。

請求項１に係る発明のインターホンシステムによれば、来訪者が検知されると、取得された撮像画像情報から来訪者の顔が認識できるか否かが判断される。来訪者の顔が認識できない場合には、来訪者に認識を妨げる原因に応じた行動を促す情報が、子機通知手段によって来訪者に通知される。また、室内には、親機通知手段によって、認識を妨げる原因に応じたレベルの警戒を促す情報が通知される。したがって、来訪者は、通知された情報に従って、原因に応じた適切な対処をすることができ、室内にいる者は、通知された情報に従って、原因に応じた適切な警戒措置をとることができる。

請求項２に係る発明のインターホンシステムでは、撮像範囲内に来訪者の顔領域が存在するか否かの判断結果、または来訪者の顔の特徴が抽出可能か否かの判断結果に応じて、来訪者の顔の認識を妨げる原因が特定される。取得された撮像画像情報から来訪者の顔が認識できない場合、その原因は、主に、来訪者の顔領域が検出できないか、来訪者の顔の特徴が抽出できないかのいずれかである。したがって、請求項１に記載の発明の効果に加え、原因が上記２つのうちいずれなのかに応じて、来訪者に対する通知内容と、室内に通知される警戒のレベルを変え、来訪者への適切な指示と室内への適切な警告を行うことができる。

請求項３に係る発明のインターホンシステムによれば、来訪者の顔が認識できない場合には、その原因に応じて撮像手段の撮像方法が変更され、取得された撮像画像が親機の画像表示手段に表示される。したがって、請求項１または２に記載の発明の効果に加え、室内にいる人間は、警戒が促された場合、原因に応じて異なる撮像画像を確認することができ、より適切な警戒措置をとることができる。

請求項４に係る発明のインターホンシステムによれば、来訪者の顔の認識が可能な場合には、来訪者の顔の特徴が、顔特徴記憶手段に記憶された複数の人物の顔の特徴と照合され、一致している人物がいるか否か、すなわち来訪者の顔の特徴が登録されているか否かが判断される。そして、判断結果に応じて異なるレベルの警戒を促す情報が通知される。したがって、請求項１〜３のいずれかに記載の発明の効果に加え、室内にいる人間は、来訪者が、警戒すべき人物か否かを知ることが出来、不用意な対応を避けることが容易となる。

請求項５に係る発明のインターホンシステムによれば、来訪者が顔特徴記憶手段に顔の特徴が記憶されている複数の人物のいずれかであると特定された場合には、来訪者の情報が通知される。したがって、請求項４に記載の発明の効果に加え、室内にいる人間は、来訪者の素性を確認することができ、来訪者が警戒すべき人物か否か、または既知の人物であるか否かを判断することがさらに容易となる。

請求項６に係る発明のインターホンシステムによれば、例えば、来訪者の顔の一部がマスクで隠されている場合等、来訪者の顔の特徴の一部しか抽出できない場合には、抽出された一部に基づいて照合が行われ、来訪者の候補が特定され、室内に通知される。したがって、請求項４または５に記載の発明の効果に加え、室内にいる人間は、来訪者の顔が全て見えなくとも推測がしやすくなる。

以下、本発明を具体化したインターホンシステム１の実施の形態について、図面を参照して説明する。なお、これらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。

まず、図１〜図４を参照して、本実施形態に係るインターホンシステム１の全体構成、ならびに、インターホンシステム１の構成要素である子機１０および親機２０の構成について、順に説明する。図１は、インターホンシステム１の電気的構成を示すブロック図である。図２は、親機２０の外観正面図である。図３は、親機２０のフラッシュＲＯＭ２２０が有する記憶エリアの説明図である。図４は、フラッシュＲＯＭ２２０の顔特徴記憶エリア２２１に記憶されるデータの一例を示す説明図である。

図１を参照して、インターホンシステム１の概略構成について説明する。本実施形態のインターホンシステム１は、図１に示すように、信号線３０を介して接続された子機１０および親機２０で構成されている。住宅、会社、ビル等において、子機１０は室外に設置され、親機２０は、室内に設置される。子機１０と親機２０との間で通話が可能であるため、室内に居る者（以下、室内対応者という）は、入口を開けることなく室外の来訪者に応対することができる。

図１を参照して、子機１０について説明する。まず、子機１０の物理的構成について説明する。詳細は図示しないが、子機１０は、略直方体形状の筐体を備えており、筐体の正面（来訪者に対向する面）には、マイク１１１、スピーカ１１２、カメラ１１３、呼出ボタン１１４、および赤外ＬＥＤ照明１１７が設けられている。

図１を参照して、子機１０の電気的構成について説明する。図１に示すように、子機１０は、ＣＰＵ１０１、ＲＯＭ１０２、ＲＡＭ１０３、マイク１１１、スピーカ１１２、カメラ１１３、呼出ボタン１１４、人感センサ１１５、赤外ＬＥＤ照明１１７、および通信装置１５０を備えており、これらはすべてバスで相互に接続されている。

ＣＰＵ１０１は、子機１０全体の制御を司る。ＲＯＭ１０２は、子機１０の基本的な動作に必要なプログラムやそのための設定値を記憶している。ＣＰＵ１０１は、ＲＯＭ１０２に記憶されたプログラムに従って、子機１０の動作を制御する。ＲＡＭ１０３は、各種データを一時的に記憶するための記憶装置である。

マイク１１１は、入力された来訪者の音声を音声信号に変換し、通信装置１５０を介して親機２０に出力する機器である。スピーカ１１２は、親機２０から入力された音声信号を、音声に変換して出力する機器である。

カメラ１１３は、例えば、周知のＣＣＤカメラであり、子機１０の正面の所定の撮像範囲を撮像し、撮像した画像の画像信号を、通信装置１５０を介して親機２０に出力する。所定の撮像範囲は、例えば、通常倍率での撮像時に子機１０の正面に対向して立った来訪者の顔が位置すると予測される領域を含むように予め設定されている。なお、本実施形態のカメラ１１３は、異なる解像度での撮像、異なる倍率、すなわち、ズーム機能を用いた異なる画角での撮像、静止画および動画の撮像が可能である。呼出ボタン１１４は、来訪者が室内対応者を呼び出すためのボタンである。呼出ボタン１１４が押下げられると、呼出信号が通信装置１５０を介して親機２０に送信される。

人感センサ１１５は、子機１０正面の所定領域内にある物体の動きを検知するセンサである。人感センサ１１５として、例えば、物体に対して赤外線を発射し、反射された赤外線の受光量の変化に基づいて物体を検知する赤外線センサを採用することができる。他に、超音波を利用する人感センサ等を採用してもよい。本実施形態では、人感センサ１１５は、常時、移動物の検知を行っており、その結果を示す信号を、第１通信装置２５０を介して親機２０に送信している。

赤外ＬＥＤ照明１１７は照度センサを備えており、検出された照度が所定の閾値より低い場合に、子機１０近傍を照明するために点灯する。通信装置１５０は、親機２０との間で、信号線３０を介して、制御信号、画像信号、および音声信号を含む各種信号の送受信を行う装置である。

次に、図１〜図４を参照して、親機２０の構成について説明する。まず、図２を参照して、親機２０の物理的構成について説明する。親機２０は、略直方体形状の筐体２０５を備えている。筐体２０５の正面左下には、マイク２１１およびスピーカ２１２が設けられている。また、筐体２０５の正面左中央部には、表示モニタ２１４が設けられ、左上部には、警告ランプ２１６が設けられている。筐体２０５の正面右半分には、操作パネル２１５が設けられている。

マイク２１１は、室内対応者の音声を音声信号に変換し、第１通信装置２５０を介して子機１０に出力する機器である。スピーカ２１２は、子機１０から入力された音声信号を音声に変換して出力する機器である。表示モニタ２１４は、例えば、液晶パネルと駆動回路を備えた液晶モニタであり、子機１０のカメラ１１３によって撮像された撮像領域の画像が表示される表示装置である。警告ランプ２１６は、例えば、ＬＥＤランプであり、後述するように、来訪者が特定できない場合に、室内対応者に警戒を促すために点灯される。

操作パネル２１５は、例えば、液晶パネル、液晶パネルを駆動する駆動回路、および入力位置を検知可能な入力装置であるタッチパッドが少なくとも一部に内蔵された表示装置である。操作パネル２１５には、例えば、図２に示すように、来訪者に関する情報を表示する来訪者情報表示領域３１１、および、室内対応者が指示を入力する各種の操作ボタンが表示される。操作ボタンには、例えば、図２に示す登録修正ボタン３１２、対応ボタン３１３、および拒否ボタン３１４がある。室内対応者が指で操作ボタンに触れると、その位置がタッチパッドにより検知され、対応する情報が出力される。なお、本実施形態では、操作パネル２１５には、来訪者の認識状況に応じて異なる表示が行われるが、詳細については後述する。

図１を参照して、親機２０の電気的構成について説明する。図１に示すように、親機２０は、ＣＰＵ２０１、ＲＯＭ２０２、ＲＡＭ２０３、マイク２１１、スピーカ２１２、表示モニタ２１４、操作パネル２１５、警告ランプ２１６、フラッシュＲＯＭ２２０、第１第１通信装置２５０、および第２通信装置２６０を備えており、これらはすべてバスで相互に接続されている。

ＣＰＵ２０１は、親機２０全体の制御を司る。ＲＯＭ２０２は、後述するメイン処理を含む各種処理を親機２０に実行させるために必要なプログラムや、そのための設定値を記憶している。ＣＰＵ２０１は、ＲＯＭ２０２に記憶されたプログラムに従って、親機２０の動作を制御する。ＲＡＭ２０３は、各種データを一時的に記憶するための記憶装置である。

マイク２１１、スピーカ２１２、表示モニタ２１４、操作パネル２１５、および警告ランプ２１６については前述した通りである。第１通信装置２５０は、子機１０との間で、信号線３０を介して、制御信号、画像信号、および音声信号を含む各種信号の送受信を行う装置である。第２通信装置２６０は、電話線５０を介して公衆電話回線網５に接続されており、公衆電話回線網５を通して子機１０との通話を外部の電話機に転送する装置である。

図３および図４を参照して、フラッシュＲＯＭ２２０について説明する。フラッシュＲＯＭ２２０は、不揮発性の半導体メモリである。フラッシュＲＯＭ２２０は、例えば、図３に示すように、顔特徴記憶エリア２２１、表示画面記憶エリア２２２、通知音声記憶エリア２２３、設定情報記憶エリア２２４、動画記憶エリア２２５、および静止画記憶エリア２２６を含む複数の記憶エリアを備えている。

顔特徴記憶エリア２２１には、複数の人物の顔の特徴を示すデータである顔特徴データとその人物に関する情報である関連情報とが対応付けて記憶されている。例えば、図４に示すように、顔特徴記憶エリア２２１には、例えば、ＩＤ欄、顔特徴データ欄、氏名欄、関係欄、前回来訪日欄、およびメモ欄が設けられている。

ＩＤ欄には、各データを識別するための固有情報であるＩＤが記憶される。顔特徴データ欄には、顔特徴データとして、例えば、眉、目、鼻、口等の位置や形状を示す数値データが記憶されている。なお、本実施形態では、目、鼻、口に対応する特徴点のデータが、顔特徴データとして採用されているものとする。氏名欄には、顔特徴データの抽出元の人物（以下、登録者という）の氏名が記憶される。関係欄には、関係として、登録者と、親機２０のユーザとの関係を示す情報が記憶される。親機２０のユーザとは、例えば、インターホンシステム１が設置されているのが住宅であればその住民であり、インターホンシステム１が設置されているのが会社であれば、会社の従業員である。よって、例えば、関係を示す情報として、住民の親族、友人、および近隣の住民、または会社の従業員、顧客、および出入り業者といった情報が記憶される。

前回来訪日欄には、前回来訪日として、登録者が前回このインターホンシステム１が設置されている住宅や会社を訪問した日付が記憶される。メモ欄には、メモとして、登録者が来訪した際に室内対応者に通知される文面が記憶される。顔特徴記憶エリア２２１に顔特徴データに対応して記憶されている氏名、関係、前回来訪日、およびメモは、登録者の関連情報である。また、顔特徴記憶エリア２２１に記憶されている上記の情報のうち、前回来訪日以外は、適宜、親機２０のユーザによって登録される。一方、前回来訪日は、後述するように、登録者が来訪したと認識された際、自動更新される情報である。

図３に示す表示画面記憶エリア２２２には、親機２０の操作パネル２１５に表示させる画面のテンプレートが記憶されている。詳細は後述するが、操作パネル２１５には、例えば、図２に示すように、来訪者に関する情報や、親機２０のユーザが各種指示を入力するための操作ボタンを有する画面が表示される。本実施形態では、操作パネル２１５に表示される画面は複数種類あるため、表示画面記憶エリア２２２には、複数の表示画面のテンプレートが記憶されている。

通知音声記憶エリア２２３には、親機２０のスピーカ２１２または子機１０のスピーカ１１２に出力させる音声の音声データが記憶されている。記憶されている音声データとして、例えば、子機１０のスピーカ１１２から出力される、来訪者に対して所定の行動を促す音声の音声データが挙げられる。

設定情報記憶エリア２２４には、後述する各種処理で使用される各種の設定情報が記憶されている。記憶されている設定情報として、例えば、照合条件、子機１０のカメラ１１３の撮像時の解像度、および倍率がある。照合条件とは、顔特徴データの照合において、目、鼻および口に対応する特徴点のデータの少なくとも１つがあれば照合を行うか、目、鼻および口に対応する特徴点すべてのデータが揃っている場合にのみ照合を行うかを示す情報である。なお、本実施形態では、解像度として、デフォルトの解像度である通常解像度と、通常解像度よりも高い解像度の２種類の値が記憶されている。また、倍率として、デフォルトの倍率である通常倍率、通常倍率より低い低倍率、および通常倍率より高い高倍率の３種類が記憶されている。

動画記憶エリア２２５には、撮像領域の動画が記憶されている。詳細は後述するが、本実施形態では、所定時間に亘って、人感センサ１１５により顔領域が検出できない物体が検出された場合に、カメラ１１３で撮像された動画が、動画記憶エリア２２５に記憶される。

以下に、図５〜図１１を参照して、インターホンシステム１の親機２０において実行される処理について説明する。図５は、親機２０のメイン処理のフローチャートである。図６は、図５のメイン処理中に実行される認識判断処理のフローチャートである。図７は、図６の認識判断処理中に実行される検出エラー処理である。図８は、図６の認識判断処理中に実行される特徴抽出エラー処理である。図９は、図５のメイン処理中に実行される来訪者処理のフローチャートである。図１０は、注意モード画面３２０を表示中の親機２０の外観正面図である。図１１は、警告モード画面３３０を表示中の親機２０の外観正面図である。なお、以下に説明する処理は、ＲＯＭ２０２に記憶されたプログラムに従って、ＣＰＵ２０１が実行する。

図５に示すメイン処理は、親機２０の電源がＯＮにされると開始され、電源がＯＮの間は継続して繰り返され、電源がＯＦＦにされた時点で終了する。まず、リセット処理が行われる（Ｓ１）。具体的には、ＲＡＭ２０３に記憶されている情報がすべて消去され、ＲＡＭ２０３のフラグ記憶エリア（図示外）に記憶されている各種フラグがすべてＯＦＦとされる。

なお、本実施形態では、ステップＳ１でＯＦＦにされるフラグは、検知フラグ、検出エラーフラグ、特徴抽出エラーフラグである。検知フラグは、人感センサ１１５によって移動物が検知されたか否かを示すフラグである。具体的には、検知フラグがＯＮの場合、移動物が検知されたことを示し、ＯＦＦの場合、検知されていないことを示す。検出エラーフラグは、顔領域の検出ができたか否かを示すフラグである。具体的には、検出エラーフラグがＯＮの場合、顔領域の検出ができなかった、つまり検出エラーがあったことを示し、ＯＦＦの場合、顔領域の検出ができたことを示す。特徴抽出エラーフラグは、顔の特徴点すべての抽出ができたか否かを示すフラグである。具体的には、特徴抽出エラーフラグがＯＮの場合、顔の特徴点すべての抽出ができなかった、つまり特徴抽出エラーがあったことを示し、ＯＦＦの場合、顔の特徴点すべての抽出ができたことを示す。

続いて、ＣＰＵ２０１は、検知フラグがＯＮであるか否かを判断する（Ｓ２）。最初の処理では、検知フラグはＯＦＦである（Ｓ２：ＮＯ）。この場合、ＣＰＵ２０１は、子機１０の人感センサ１１５によって、移動物、すなわち来訪者と思われる物体が検知されたことを示す信号が子機１０から親機２０に入力されたか否かを判断する（Ｓ３）。移動物が検知されない間は、ＣＰＵ２０１は待機する（Ｓ３：ＮＯ、Ｓ２：ＮＯ）。

人感センサ１１５によって移動物が検知されたことを示す信号が親機２０に入力されると（Ｓ３：ＹＥＳ）、ステップＳ１でＯＦＦとされた検知フラグがＯＮとされる（Ｓ４）。続いて、第１通信装置２５０により、カメラ１１３による撮像を開始させるための制御信号と所定の撮像条件のデータが、信号線３０を介して子機１０に対して送信される（Ｓ５）。このとき送信される所定の撮像条件のデータには、フラッシュＲＯＭ２２０の設定情報記憶エリア２２４に記憶されている、デフォルトの解像度である通常解像度と、デフォルトの倍率である通常倍率のデータとが含まれる。

親機２０からの制御信号と所定の撮像条件のデータを受信した子機１０では、受信した通常解像度および通常倍率に従って、カメラ１１３の解像度および倍率が設定される。本実施形態では、ステップＳ５で子機１０が撮像開始の制御信号を受信した後、カメラ１１３は常時撮像を行う。カメラ１１３から出力された画像信号は、通信装置１５０により、信号線３０を介して親機２０に送信される。親機２０では、別途実行されるプログラムに従って、第１通信装置２５０により受信された画像信号を表示モニタ２１４に表示可能なデータに変換する処理が行われる。つまり、子機１０のカメラ１１３で撮像された画像がリアルタイムで表示モニタ２１４に表示可能な状態となる。

撮像開始の指示の後（Ｓ５）、すでに来訪者または来訪者の候補は特定済みか否かが判断される（Ｓ７）。最初の処理では、まだ来訪者または来訪者の候補は特定されていない（Ｓ７：ＮＯ）。そこで、認識判断処理が行われる（Ｓ１０および図６）。以下に、図６〜図８を参照して、認識判断処理について説明する。

図６に示すように、ＣＰＵ２０１はまず、子機１０から送信され、第１通信装置２５０によって受信された画像信号の１フレームを取得し、静止画データを生成する（Ｓ１００）。生成された静止画データを基に、顔領域の検出が可能か否かが判断される（Ｓ１０１）。顔領域の検出には、例えば、予め記憶した顔のパターンとのマッチングを行う方法や、肌色領域を検出する方法を採用することができるが、他のいかなる公知の方法を採用してもよい。静止画データから顔領域が可能な場合には（Ｓ１０１：ＹＥＳ）、顔領域が検出される（Ｓ１０２）。

続いて、顔の特徴点が抽出可能か否かが判断される（Ｓ１０３）。ここでは、目、鼻、口に対応する特徴点がすべて抽出可能な場合にのみ、顔の特徴点が抽出可能であると判断される（Ｓ１０３：ＹＥＳ）。この場合、顔領域から、顔の特徴点である目、鼻、口の特徴点が抽出され、これらの位置や形状を示す数値データが来訪者の顔特徴データとして求められる（Ｓ１０４）。

そして、フラッシュＲＯＭ２２０の顔特徴記憶エリア２２１から登録者の顔特徴データが順に読み出され、来訪者の顔特徴データと照合される（Ｓ１０５）。照合の結果、現在の来訪者の顔特徴データが、いずれの登録者とも一致しないと判断された場合には（Ｓ１０６：ＮＯ）、来訪者は未登録者であると決定される（Ｓ１０９）。そして認識判断処理は終了して、図５に示すメイン処理に戻る。

一方、照合の結果、来訪者の顔特徴データが、いずれかの登録者の顔特徴データと一致すると判断された場合（Ｓ１０６：ＹＥＳ）、来訪者は顔特徴データが一致した登録者であると決定される（Ｓ１０７）。そして、来訪者であると特定された登録者の関連情報として顔特徴記憶エリア２２１に記憶されている前回来訪日が、現在の日付に更新される（Ｓ１０８）。これにより、次に同じ登録者が来訪した場合に、後述する登録者モード画面３１０（図２参照）に最新の来訪日を表示することができる。日付の更新後、認識判断処理は終了して、図５に示すメイン処理に戻る。

ステップＳ１０１において、生成された静止画から顔領域が検出できなかったと判断された場合（Ｓ１０１：ＮＯ）、来訪者の顔認識ができないのは、顔領域の検出ができないことに起因すると特定される。そこで、検出エラーが生じたとして、ＲＡＭ２０３のフラグ記憶エリアに記憶されている検出エラーフラグがＯＮにされる（Ｓ１１１）。そして、検出エラー処理が行われる（Ｓ１２０および図７）。検出エラー処理は、顔領域が検出できるように、来訪者に所定の行動を促す処理である。

図７に示すように、検出エラー処理では、人感センサ１１５によって移動物が検知されてから所定時間が経過したか否かが判断される（Ｓ１２１）。具体的には、例えば、図５に示すメイン処理のステップＳ４で検知フラグがＯＮにされた時にタイマをスタートさせて経過時間を計測し、経過時間が所定の閾値を超えたか否かを判断すればよい。所定時間が経過していなければ（Ｓ１２１：ＮＯ）、その後、所定時間内に顔領域が特定される可能性があるため、そのまま検出エラー処理は終了し、図６に示す認識判断処理に戻り、さらに図５に示すメイン処理に戻る。

一方、来訪者が検知されてから所定時間が経過したと判断された場合（Ｓ１２１：ＹＥＳ）、所定時間中に検出された移動物が同一物体であるか否かが判断される（Ｓ１２２）。具体的には、例えば、所定期間中にカメラ１１３で撮像された複数の画像について、各画像の輝度分布を示すヒストグラムを生成し、これらのヒストグラムの比較結果に基づいて判断することができる。所定時間中に検出された移動物は同一物体ではないと判断された場合には（Ｓ１２２：ＮＯ）、そのまま検出エラー処理は終了し、図６に示す認識判断処理に戻り、さらに図５に示すメイン処理に戻る。

所定時間中に検出された移動物は同一物体であると判断された場合には（Ｓ１２２：ＹＥＳ）、この移動物は来訪者であるが、来訪者が適切な位置に立っていないために顔領域が検出できていない可能性がある。そこで、来訪者に対して、顔領域が検出できない場合の所定の行動を促す指示を子機１０のスピーカ１１２から音声出力するための制御信号とデータが、子機１０に送信される（Ｓ１２３）。具体的には、フラッシュＲＯＭ２２０の通知音声記憶エリア２２３に記憶されている、所定の指示音声の音声データが読み出され、音声信号に変換されて、子機１０に送信される。

その結果、子機１０では、例えば、「御用の方は、子機の正面にお立ちください」というように、カメラ１１３により顔が撮影可能な位置に立つように指示する音声が出力される。これにより、来訪者は、音声による指示に従って、顔領域が検出できないという認識エラーに応じた適切な対処をすることができる。

また、所定時間中に検出された移動物は同一物体であると判断された場合には（Ｓ１２２：ＹＥＳ）、不審者が様子をうかがってうろついている可能性もある。そこで、ステップＳ１２３での音声指示に加え、録画が行われる。ただし、前の検出エラー処理ですでに録画が開始されており、録画中の場合は（Ｓ１２５：ＹＥＳ）、そのまま検出エラー処理は終了し、図６に示す認識判断処理に戻る。まだ録画が開始されていなければ（Ｓ１２５：ＮＯ）、所定時間分（例えば、１分）の録画が開始される（Ｓ１２６）。具体的には、ＣＰＵ２０１は、子機１０から送信された画像信号を取得して動画データを生成し、フラッシュＲＯＭ２２０の動画記憶エリア２２５に記憶させる。

このように、不審者の可能性がある場合には動画を記録しておくことにより、後にその人物を特定できる可能性のある証拠を保存することができる。その後、ＣＰＵ２０１は、警告ランプ２１６を点灯させることにより（Ｓ１２７）、特定できない来訪者の存在を室内の親機２０のユーザに知らせる。そして、検出エラー処理は終了し、図６に示す認識判断処理に戻り、さらに図５に示すメイン処理に戻る。

なお、顔領域の検出エラーは、顔がカメラ１１３に近すぎて撮影領域に納まっていないことに起因する可能性がある。よって、ステップＳ１２６では、録画の代わりに、子機１０に対して低倍率（広角）での静止画の撮像を指示し、得られた画像信号から低倍率の静止画を生成してもよい。このように倍率を変更することにより、室内対応者が目で見れば、来訪者の顔が認識できるようになる可能性がある。

図６に示す認識判断処理のステップＳ１０３において、顔領域から目、鼻、口の特徴点のうち少なくとも１つが抽出できなかったと判断された場合には（Ｓ１０３：ＮＯ）、来訪者の顔認識ができないのは、顔の特徴点が抽出できないことに起因すると特定される。そこで、特徴抽出エラーが生じたとして、ＲＡＭ２０３のフラグ記憶エリアに記憶されている特徴抽出エラーフラグがＯＮにされる（Ｓ１１２）。そして、特徴抽出エラー処理が行われる（Ｓ１３０および図８）。特徴抽出エラー処理は、顔の特徴点がすべて抽出できるように、来訪者に所定の行動を促す処理である。

図８に示すように、特徴抽出エラー処理では、まず、顔領域内のどの領域が隠されているのかが特定される（Ｓ１３１）。例えば、認識判断処理で抽出されなかった特徴点が、目、鼻、および口のいずれに対応するかによって、隠されているのは目領域、鼻領域、および口領域のいずれなのかを特定すればよい。あるいは、顔領域内の各画素の輝度値に基づいて特定してもよい。なお、いずれかの領域が隠されている場合とは、例えば、目領域が隠されていると特定された場合には、サングラスをかけている場合が想定される。鼻領域および口領域が隠されている場合には、マスクをかけている場合が想定される。

続いて、部分照合を行う設定がされているか否かが判断される（Ｓ１３２）。ここで、部分照合とは、目、鼻および口に対応する特徴点のすべてが抽出できなかった場合には、その一部のデータを用いて登録者の顔特徴データの一部との照合を行うことをいう。部分照合を行うか否かを示す情報である照合条件は、前述したように、ユーザの設定により、フラッシュＲＯＭ２２０の設定情報記憶エリア２２４に記憶されている。

設定情報記憶エリア２２４に記憶されている照合条件が、部分照合を行わないことを示す場合には（Ｓ１３２：ＮＯ）、来訪者に対して、顔の特徴点が抽出できない場合の所定の行動を促す指示を子機１０のスピーカ１１２から音声出力するための制御信号とデータが、子機１０に送信される（Ｓ１３３）。具体的には、フラッシュＲＯＭ２２０の通知音声記憶エリア２２３に記憶されている、所定の指示音声の音声データが読み出され、音声信号に変換されて、子機１０に送信される。子機１０では、例えば、目領域が隠されていると特定された場合には、「御用の方は、目を出してお立ちください」というように、隠されている領域を見せるように指示する音声が出力される。よって、来訪者は、音声による指示に従って、顔の特徴点が抽出できないという認識エラーに応じた適切な対処をすることができる。

続いて、子機１０に対して高解像度で撮像する指示が送信される（Ｓ１４１）。具体的には、ＣＰＵ２０１は、フラッシュＲＯＭ２２０の設定情報記憶エリア２２４から読み出した高解像度をカメラ１１３の解像度として設定し、撮像させるための制御信号を、子機１０に対して送信する。ここで高解像度での撮像を行うのは、通常解像度では顔の特徴点が抽出できないが、高解像度になれば、室内対応者が目で見て来訪者の顔を認識できる可能性があるからである。そして、ＣＰＵ２０１は、子機１０から送信された１フレームの画像信号を取得して高解像度の静止画を生成し、フラッシュＲＯＭ２２０の静止画記憶エリア２２６に記憶させる（Ｓ１４２）。

なお、ステップＳ１４１では、ＣＰＵ２０１は、高解像度での撮像を指示する代わりに、フラッシュＲＯＭ２２０の設定情報記憶エリア２２４に記憶されている高倍率（ズーム）での撮像を指示してもよい。顔の特徴点が抽出できない場合、来訪者がカメラ１１３から遠すぎることが原因である可能性がある。よって、このように倍率を変更することにより、室内対応者が目で見れば、来訪者の顔が認識できるようになる可能性がある。

その後、ＣＰＵ２０１は、カメラ１１３の解像度を通常解像度に戻す指示を子機１０に送信する（Ｓ１４３）。具体的には、フラッシュＲＯＭ２２０の設定情報記憶エリア２２４から読み出した通常解像度をカメラ１１３の解像度として設定し、撮像させるための制御信号を、子機１０に対して送信する。その後、警告ランプ２１６を点灯させることにより（Ｓ１４４）、特定できない来訪者の存在を室内の親機２０のユーザに知らせる。そして、特徴抽出エラー処理は終了し、図６に示す認識判断処理に戻り、さらに図５に示すメイン処理に戻る。

ステップＳ１３２において、設定情報記憶エリア２２４に記憶されている照合条件が、部分照合を行うことを示すと判断された場合には（Ｓ１３２：ＹＥＳ）、抽出できた一部の特徴点のみを用いて、顔特徴データとの照合が行われる（Ｓ１３５）。例えば、春の花粉飛散期には、花粉症対策としてマスクをかけている人が多くなるが、このような来訪者に対してマスクを外して鼻と口を出すように指示するのは酷である。よって、このような場合、照合条件を予め部分照合を行うように設定しておくことが可能である。

部分照合では、例えば、目に対応する特徴点は抽出できず、鼻と口に対応する特徴点のみが抽出できている場合、鼻と口に対応する特徴点から求められるデータと、登録者の顔特徴データのうち鼻と口のデータとが照合される。登録者のデータのいずれとも一致しない場合には（Ｓ１３６：ＮＯ）、前述したように、子機１０に対して高解像度で撮像する指示が送信され（Ｓ１４１）、高解像度の静止画が静止画記憶エリア２２６に記憶され（Ｓ１４３）、警告ランプ２１６が点灯される（Ｓ１４４）。そして、特徴抽出エラー処理は終了し、図６に示す認識判断処理に戻り、さらに図５に示すメイン処理に戻る。

ステップＳ１３６において、抽出できた一部の特徴点のみを用いて顔特徴データとの照合が行われた結果、登録者の顔特徴データのいずれかと一致すると判断された場合には（Ｓ１３６：ＹＥＳ）、その登録者が来訪者の候補として特定される（Ｓ１３７）。ここで「候補」として特定されるのは、顔の特徴点の一部のみに基づいて照合を行った結果であるため、結果の信頼性はすべての特徴点を用いた場合ほど高くないためである。その後、特徴抽出エラー処理は終了し、図６に示す認識判断処理に戻り、さらに図５に示すメイン処理に戻る。

図５に示すメイン処理では、認識判断処理の後（Ｓ１０）、来訪者によって子機１０の呼出ボタン１１４が押下げられたか否かが判断される（Ｓ１１）。具体的には、子機１０から送信された呼出信号を受信したか否かが判断される。来訪者によって呼出ボタン１１４が押下げられていなければ（Ｓ１１：ＮＯ）、来訪者が呼出ボタン１１４を押下げるまで処理を継続するために、処理はステップＳ２に戻る。

続くステップＳ２では、検知フラグがＯＮとされているか否かが判断される。ステップＳ１１の後でステップＳ２に処理が戻った場合、すでに一度移動物が検知されており、検知フラグはＯＮである（Ｓ２：ＹＥＳ）。さらに、人感センサ１１５によって移動物が検知されたか否かが判断される（Ｓ２３）。ここで移動物が検知されない場合（Ｓ２３：ＮＯ）、一旦検知された移動物が、その後の処理が行われている間に、人感センサ１１５の検知範囲から外れたことを意味する。よって、この場合は来訪者がいなくなったものとして、ステップＳ１に戻る。そして、ＲＡＭ２０３に記憶されている情報が消去され、各種フラグがＯＦＦにされて、次の来訪者についての処理が、前述したように行われる。

一方、ステップＳ２３で、移動物が検知された場合には（Ｓ２３：ＹＥＳ）、移動物がそのまま検知範囲にとどまっている、すなわち、来訪者がまだ子機１０近辺にいることを意味する。そこで、前の処理ですでに来訪者または来訪者の候補が特定されたか否かが判断される（Ｓ７）。すでに特定されていれば、再び認識判断処理を行う必要はないため、処理はそのままステップＳ１１に進み、呼出ボタン１１４が押し下げられたか否かが判断される（Ｓ１１）。一方、まだ前の処理で来訪者または来訪者の候補が特定されていなければ（Ｓ７：ＮＯ）、認識判断処理が再び行われる（Ｓ１０）。そして、来訪者によって呼出ボタン１１４が押下げられるまで、同様の処理が繰り返される（Ｓ２〜Ｓ１０）。

認識判断処理の後（Ｓ１０）、呼出ボタン１１４が押下げられた場合には（Ｓ１１：ＹＥＳ）、来訪者処理が行われる（Ｓ２０および図９）。以下に、図２および図９〜図１１を参照して来訪者処理の詳細について説明する。

図９に示すように、来訪者処理では、ＣＰＵ２０１はまず、親機２０のスピーカ２１２から呼出音を出力するとともに、子機１０から送信された画像信号から生成された表示用のデータに基づき、図２に示すように、カメラ１１３によって撮像された画像を表示モニタ２１４に表示させる（Ｓ２０１）。さらに、操作パネル２１５に来訪者の認識状況に応じた表示を行うために、来訪者または来訪者の候補が特定されているか否かが判断される（Ｓ２０２）。

前述のように、認識判断処理において来訪者が登録者のいずれかであると特定された場合（図６のＳ１０７）、未登録者であると特定された場合（Ｓ１０９）、および特徴検出エラー処理において来訪者の候補として登録者のいずれかが特定された場合には（図８のＳ１３７）、来訪者またはその候補が特定されていると判断される（Ｓ２０２：ＹＥＳ）。この場合、ＣＰＵ２０１は、図２に示す登録者モード画面３１０を操作パネル２１５に表示させる（Ｓ２１３）。

登録者モード画面３１０には、例えば、図２に示すように、来訪者情報表示領域３１１、登録修正ボタン３１２、対応ボタン３１３、拒否ボタン３１４が設けられている。なお、登録者モード画面３１０は、フラッシュＲＯＭ２２０の表示画面記憶エリア２２２（図３参照）に記憶されたテンプレートに、来訪者または来訪者の候補に関する情報を流し込むことにより作成すればよい。以下に説明するその他の画面も同様である。

来訪者情報表示領域３１１には、来訪者または来訪者の候補に関する情報が表示される。具体的には、例えば、来訪者が登録者であると特定されている場合には、「来訪者は以下の登録者です」というメッセージが表示され、来訪者の候補が特定されている場合には、「来訪者の候補は以下の登録者です」というメッセージが表示される。あわせて、顔特徴記憶エリア２２１に関連情報として記憶されている登録者の氏名、関係、前回来訪日、およびメモが読み出され、表示される。

図２は、図４の顔特徴記憶エリア２２１にデータが記憶されている登録者のうち、ＩＤ「１」の登録者が来訪者として特定された場合の登録者モード画面３１０の例である。よって、この登録者の関連情報である来訪者の氏名「Ａさん」、関係「パパの知り合い」、前回来訪日「２００８年９月１日」、およびメモ「パパが帰るのを待ってもらって」が表示されている。

登録修正ボタン３１２は、室内対応者が、表示された登録者の関連情報を修正したい場合に、修正画面への移行の指示を入力するためのボタンである。対応ボタン３１３は、室内対応者が、来訪者に直接対応したい場合に、子機１０との通話開始の指示を入力するためのボタンである。拒否ボタン３１４は、室内対応者が、来訪者に直接対応したくない場合に、代理応対の指示を入力するためのボタンである。

このように、来訪者または来訪者の候補が特定されている場合には、表示モニタ２１４に子機１０から送信されるリアルタイムの画像が表示され、操作パネル２１５に来訪者または来訪者の候補の関連情報が表示される。よって、室内対応者は、来訪者が既知の人物なのか否か、また既知の人物であればその素性を容易に知ることができ、警戒すべき人物か否かを判断することが容易となる。また、顔の特徴点の一部のみで照合が行われた場合には、来訪者は、候補者として表示される。よって、室内対応者は、来訪者が誰なのかを容易に推測することができる。

一方、ステップＳ２０２において、来訪者または来訪者の候補が特定されていないと判断された場合には（Ｓ２０２：ＮＯ）、接続中である旨の通知音声を子機１０のスピーカ１１２から出力するための制御信号とデータが、子機１０に送信される（Ｓ２０３）。ここでは、例えば、「接続中です。少々お待ちください。」という音声が出力される。

続いて、認識判断処理において特徴抽出エラーが生じたか否かが判断される（Ｓ２０５）。具体的には、すべての顔の特徴点が抽出できず、特徴抽出エラーフラグがＯＮとされていれば（図６のＳ１１２）、特徴抽出エラーがあったと判断される（Ｓ２０５：ＹＥＳ）。この場合、ＣＰＵ２０１は、図１０に示す注意モード画面３２０を操作パネル２１５に表示させる（Ｓ２０６）。

注意モード画面３２０には、例えば図１０に示すように、注意情報表示領域３２１、高解像度画像表示領域３２２、警告解除ボタン３２３、および拒否ボタン３１４が設けられている。注意情報表示領域３２１には、来訪者に対する注意を促す情報が表示される。具体的には、例えば、「注意！来訪者の確認が必要です」というメッセージが表示される。高解像度画像表示領域３２２には、特徴抽出エラー処理において、すべての特徴点が抽出できない場合に生成され（図８のＳ１４２）、フラッシュＲＯＭ２２０の静止画記憶エリア２２６に記憶されている高解像度の静止画が読み出され、表示される。

警告解除ボタン３２３は、室内対応者が、表示モニタ２１４に表示された通常解像度のリアルタイム画像と、高解像度画像表示領域３２２に表示された高解像度の静止画を確認した上で、来訪者に直接対応したい場合に、前述の対応ボタン３１３を表示させる指示を入力するためのボタンである。拒否ボタン３１４は、登録者モード画面３１０に関連して説明した通りである。

このように、来訪者の顔は検出されているのにすべての顔の特徴点が抽出できない場合には、表示モニタ２１４に子機１０から送信されるリアルタイムの画像が表示されるとともに、操作パネル２１５に撮像領域の高解像度の静止画が表示される。よって、例えば図１０に示すように、来訪者の顔の一部が隠されており、顔特徴データとの照合によって来訪者が特定できない場合であっても、室内対応者は、高解像度の静止画を見て、来訪者が実は登録者であるか否か、また、不審者か否かを判別することが容易となる。

ステップＳ２０５において、認識判断処理において特徴抽出エラーは生じていないと判断された場合には（Ｓ２０５：ＮＯ）、検出エラーが生じたか否かが判断される（Ｓ２０８）。具体的には、顔領域が検出できず、検出エラーフラグがＯＮとされていれば（図６のＳ１１１）、検出エラーがあったと判断される（Ｓ２０８：ＹＥＳ）。この場合、ＣＰＵ２０１は、図１１に示す警告モード画面３３０を操作パネル２１５に表示させる（Ｓ２０９）。

警告モード画面３３０には、例えば図１１に示すように、警告情報表示領域３３１、動画表示領域３３２、転送ボタン３３３、警告解除ボタン３２３および拒否ボタン３１４が設けられている。警告情報表示領域３３１には、来訪者が要注意人物であることを警告する情報が表示される。具体的には、例えば、「警告！！！要注意人物がいます」というメッセージが表示される。動画表示領域３３２には、検出エラー処理において、所定時間中同一物体が検出された場合に録画され（図７のＳ１２６）、フラッシュＲＯＭ２２０の動画記憶エリア２２５に記憶されている動画が再生表示される。

転送ボタン３３３は、予め定められた転送先の電話機に、子機１０から入力された音声データを転送する指示を入力するためのボタンである。警告解除ボタン３２３および拒否ボタン３１４は、それぞれ、注意モード画面３２０および登録者モード画面３１０に関連して説明した通りである。

このように、所定時間中、移動物が検出されているのに来訪者の顔領域が検出できない場合には、表示モニタ２１４に子機１０から送信されるリアルタイムの画像が表示されるとともに、操作パネル２１５に録画されていた動画が表示される。よって、例えば図１１に示すように、人がうろついている場合等にも、室内対応者は、カメラ１１３からのリアルタイム画像と録画された動画の両方によって、不審者であるのか否かを確認することができる。

ステップＳ２０８において、認識判断処理において検出エラーは生じていないと判断された場合には（Ｓ２０８：ＮＯ）、ＣＰＵ２０１は、未登録モード画面（図示外）を操作パネル２１５に表示させる（Ｓ２１１）。未登録モード画面には、図２に示す登録者モード画面３１０の来訪者情報表示領域３１１に代えて、未登録者通知領域（図示外）が設けられており、来訪者が未登録者である旨が表示される。また、登録者モード画面３１０と同様、対応ボタン３１３および拒否ボタン３１４が設けられている。さらに、来訪者の顔特徴データ等を顔特徴記憶エリア２２１に新たに登録するための画面への移行指示を入力する登録ボタン等を設けてもよい。

以上に説明したように、操作パネル２１５に来訪者の認識状況に応じた表示が行われた後（Ｓ２１３、Ｓ２０６、Ｓ２０９、またはＳ２１１）、パネル操作がされたか否か、具体的には操作パネル２１５のタッチパッドからの入力が検知されたか否かが判断される（Ｓ２１６）。パネル操作がされていない場合（Ｓ２１６：ＮＯ）、所定時間（例えば、１分）が経過したか否かが判断される（Ｓ２１７）。例えば、呼出ボタン１１４の押下が検知された際スタートされるタイマによって経過時間を計測し、閾値を超えたか否かで判断すればよい。所定時間が経過しない間は（Ｓ２１７：ＮＯ）、ＣＰＵ２０１は、パネル操作があったか否かの判断に戻り（Ｓ２１６）、処理を繰り返す。

所定時間が経過した場合は（Ｓ２１７：ＹＥＳ）、室内に人がおらず、応答がされないと考えられるので、来訪者処理はそのまま終了し、図５のメイン処理に戻る。この場合、メイン処理では、次の来訪者のためにリセット処理が行われる（Ｓ１）。

操作パネル２１５からの入力がされたと判断された場合（Ｓ２１６：ＹＥＳ）、表示されている画面とタッチパッドによって検出される入力位置に応じて、入力された指示が、対応ボタン３１３（図２参照）の選択による通話開始の指示か否かが判断される（Ｓ２２１）。対応ボタン３１３が選択された場合には（Ｓ２２１：ＹＥＳ）、ＣＰＵ２０１は、通話開始の処理を行う（Ｓ２２２）。具体的には、ＣＰＵ２０１は、別途、子機１０との通話に関する親機２０の動作を制御するためのプログラムを起動させる。これにより、子機１０と親機２０の間の通話路が形成され、来訪者と室内対応者の通話が可能となる。通話開始処理の後（Ｓ２２２）、来訪者処理は終了し、図５のメイン処理に戻る。メイン処理では、次の来訪者のためにリセット処理が行われる（Ｓ１）。

操作パネル２１５から入力された指示が、対応ボタン３１３の選択による通話開始の指示ではない場合（Ｓ２２１：ＮＯ）、拒否ボタン３１４（図２、図１０および図１１参照）の選択による代理応対の指示か否かが判断される（Ｓ２２４）。拒否ボタン３１４が選択された場合には（Ｓ２２４：ＹＥＳ）、ＣＰＵ２０１は、代理応答の処理を行う（Ｓ２２５）。具体的には、直接応対できない旨の通知音声を子機１０のスピーカ１１２から出力するための制御信号とデータが、子機１０に送信される（Ｓ２２５）。その結果、子機１０では、例えば、「今、取り込み中ですので、申し訳ありませんが応対できません」という音声が出力される。その後、来訪者処理は終了し、図５のメイン処理に戻る。メイン処理では、次の来訪者のためにリセット処理が行われる（Ｓ１）。

操作パネル２１５から入力された指示が、拒否ボタン３１４の選択による代理応対の指示ではない場合（Ｓ２２４：ＮＯ）、転送ボタン３３３（図１１参照）の選択による転送の指示か否かが判断される（Ｓ２２７）。転送ボタン３３３が選択された場合には（Ｓ２２７：ＹＥＳ）、ＣＰＵ２０１は、転送処理を行う（Ｓ２２８）。具体的には、予め転送先としてフラッシュＲＯＭ２２０の所定の記憶エリア（図示外）に記憶されている電話番号に対して発呼がなされる。そして、対応する電話機（携帯電話でも固定電話でもよい）が応答して親機２０との間で公衆電話回線網５を介して回線が通話状態となると、子機１０と電話機との間で親機２０を介して転送通話が可能となる。その後、来訪者処理は終了し、図５のメイン処理に戻る。メイン処理では、次の来訪者のためにリセット処理が行われる（Ｓ１）。

操作パネル２１５から入力された指示が、転送ボタン３３３の選択による転送の指示ではない場合には（Ｓ２２７：ＮＯ）、入力された指示に応じたその他の処理が行われる。
例えば、図１０に示す注意モード画面３２０または図１１に示す警告モード画面３３０で警告解除ボタン３２３が選択された場合には、警告解除ボタン３２３に代えて対応ボタン３１３（図２参照）を表示させる処理が行われる。その他の処理終了後、処理はステップＳ２１６に戻り、前述したように、操作パネル２１５の操作に応じた処理が行われる。

以上、説明したように、本実施形態のインターホンシステム１では、来訪者が検知されると、子機１０のカメラ１１３による撮像が開始される。そして、子機１０から取得された画像信号から生成される静止画から顔領域が検出され、顔領域から特徴点が抽出される。顔領域が検出できない場合、または特徴点が抽出できない場合、予めフラッシュＲＯＭ２２０の顔特徴記憶エリア２２１に記憶されている複数の人物の顔特徴データとの照合による顔認識が不可能である。また、このような場合には、室内対応者がカメラ１１３によって撮像された画像を見たとしても、来訪者の顔が認識できない場合が多い。

よって、来訪者に認識を妨げる原因に応じた行動を促す指示がスピーカ１１２から音声出力されることにより、来訪者に通知される。したがって、来訪者は、通知された指示に従って、原因に応じた適切な対処をすることができる。また、認識を妨げる原因に応じて異なるレベルの警戒を促す情報を示す画面３１０〜３３０が操作パネル２１５に表示される。したがって、室内対応者は、通知された情報に従って、原因に応じた適切な警戒措置をとることができる。

本実施形態では、子機１０のカメラ１１３が、本発明の「撮像手段」に相当し、人感センサ１１５が、「来訪者検知手段」に相当し、スピーカ１１２が、「子機通知手段」に相当する。また、親機２０の操作パネル２１５本発明の「親機通知手段」および「画像表示手段」に相当する。図６のステップＳ１００で、カメラ１１３から出力され、子機１０から送信された画像信号を受信する第１通信装置２５０が、「画像取得手段」に相当する。

図６のステップＳ１０２で顔領域が検出できたか否かを判断するＣＰＵ２０１、およびステップＳ１０４で顔の特徴点が抽出できたか否かを判断するＣＰＵ２０１が、「認識判断手段」に相当する。このうち、ステップＳ１０２で顔領域が検出できたか否かを判断するＣＰＵ２０１が、「第１の判断手段」に相当し、ステップＳ１０４で顔の特徴点が抽出できたか否かを判断するＣＰＵ２０１が、「第２の判断手段」に相当する。ステップＳ１１１で検出エラーが生じたとして検出エラーフラグをＯＮにするＣＰＵ２０１、およびステップＳ１１２で特徴抽出エラーが生じたとして特徴抽出エラーフラグをＯＮにするＣＰＵ２０１が、「原因特定手段」に相当する。

図７のステップＳ１２６で、動画を記録させるＣＰＵ２０１および図８のステップＳ１４１で高解像度での撮像を指示するＣＰＵ２０１が、「撮像制御手段」に相当する。また、図７のステップＳ１２３で、子機１０のスピーカ１１２から、子機１０の正面に立つように来訪者に指示する音声を出力させるＣＰＵ２０１、および図８のステップＳ１３３で、子機１０のスピーカ１１２から、隠されている顔の領域を見せるように来訪者に指示する音声を出力させるＣＰＵ２０１が、「子機通知制御手段」に相当する。

図９のステップＳ２０６とＳ２０９とで、認識判断処理でのエラーに応じて操作パネル２１５に異なるレベルの警戒を促す情報を表示させるＣＰＵ２０１が、「第１の親機制御手段」に相当する。図９のステップＳ２０６とＳ２０９とで、認識判断処理でのエラーに応じて操作パネル２１５に異なった画像を表示させるＣＰＵ２０１が、「表示制御手段」に相当する。

図６のステップＳ１０４で、顔の特徴点を抽出するＣＰＵ２０１が、「顔特徴抽出手段」に相当する。図６のステップＳ１０５または図８のＳ１３５で来訪者の顔特徴データと登録者の顔特徴データとを照合するＣＰＵ２０１が、「一致判断手段」に相当する。また、フラッシュＲＯＭ２２０の顔特徴記憶エリア２２１が、「顔特徴記憶手段」に相当する。図９のステップＳ２１３、Ｓ２０６、Ｓ２０９およびＳ２１１で、顔特徴データの照合結果に応じて操作パネル２１５にそれぞれ警戒レベルが異なる情報を表示させるＣＰＵ２０１が、「第２の親機制御手段」に相当する。

図６のステップＳ１０７で登録者のいずれかを来訪者として特定するＣＰＵ２０１が、「来訪者特定手段」に相当し、図９のステップＳ２１３で特定された来訪者の情報を操作パネル２１５に表示させるＣＰＵ２０１が、「第３の親機制御手段」に相当する。図８のステップＳ１３７で登録者のいずれかを来訪者の候補として特定するＣＰＵ２０１が、「候補特定手段」に相当し、図９のステップＳ２１３で特定された来訪者の候補の情報を操作パネル２１５に表示させるＣＰＵ２０１が、「第４の親機制御手段」に相当する。

なお、前述の実施形態に示される構成や処理は例示であり、各種の変形が可能なことはいうまでもない。例えば、前述の実施形態では、認識判断処理（図６参照）において、来訪者の顔特徴データが得られた場合には、フラッシュＲＯＭ２２０の顔特徴記憶エリア２２１に記憶された登録者の顔特徴データとの照合によって、来訪者の特定が試みられている。しかしながら、顔特徴データの照合による来訪者の特定は、必ずしも行う必要はない。つまり、図６の認識判断処理において、ステップＳ１０４〜Ｓ１０９の処理は行わなくてもよい。この場合、図５に示すメイン処理のステップＳ７の処理、図９に示す来訪者処理のステップＳ２０２およびステップＳ２１３の処理は行わなくてよい。すなわち、ステップＳ２０１の後、ステップＳ２０３に進む。そして、ステップＳ２１１の処理は行わなくてもよい。

つまり、特徴抽出エラーまたは検出エラーがあった場合は、エラーの種別に応じて注意モード画面３２０（図１０参照）または警告モード画面３３０（図１１参照）が表示されるが、顔領域の検出および顔の特徴点の抽出に成功している場合には、単にカメラ１１３によって撮像された画像が表示モニタ２１４に表示されることになる（図９のＳ２０１）。この場合でも、顔領域の検出および顔の特徴点の抽出に成功しているので、表示モニタ２１４に表示された画像を見ることにより、室内対応者は来訪者の顔を認識することができる。

前述の実施形態では、来訪者の顔の認識ができない場合に、その原因に応じて異なる行動を促す情報を、子機１０のスピーカ１１２から音声によって通知している。しかしながら、来訪者への通知は必ずしも音声によって行う必要はない。代わりに、子機１０に表示モニタを設け、来訪者の顔の認識ができない場合に、その原因に応じて異なる行動を促す情報を表示させてもよい。

前述の実施形態では、来訪者の顔の認識ができない原因に応じて異なる画面３１０〜３３０を親機２０の操作パネル２１５に表示させることにより、室内対応者へ、異なるレベルの警戒を促す情報が通知されている。しかしながら、室内対応者への通知は必ずしも表示によって行う必要はない。代わりに、親機２０のスピーカ２１２から、「パパの知り合いです」、「画像をよく確認してください」、「不審者と思われますので警戒してください」等、異なるレベルの警戒を促すメッセージを音声出力させてもよい。また、警戒レベル毎に異なる間隔で警告ランプ２１６を点滅させたり、発光色が互いに異なる警告ランプ２１６を複数設けて、異なる色の警告ランプ２１６を点灯させたりしてもよい。このような場合は、スピーカ２１２または警告ランプ２１６が「親機通知手段」に相当する。

前述の実施形態では、人感センサ１１５によって、子機１０正面の移動物の検知を行っているが、必ずしも人感センサ１１５を子機１０に設ける必要はない。代わりに、カメラ１１３によって撮像される画像を利用して、画像の変化によって移動物を検出する構成としてもよい。

前述の実施形態では、親機２０がフラッシュＲＯＭ２２０を備え、そこに記憶された指示音声のデータ等を子機１０に送信することにより、子機１０での音声出力が行われる。しかしながら、指示音声のデータは、必ずしも親機２０に記憶しておく必要はなく、子機１０にフラッシュＲＯＭを設けて記憶しておいてもよい。この場合、親機２０からは、データを特定する指示のみが子機１０に送信され、子機１０のＣＰＵ１０１が、指示に従って音声出力を行う。

インターホンシステム１の電気的構成を示すブロック図である。 親機２０の外観正面図である。 親機２０のフラッシュＲＯＭ２２０が有する記憶エリアの説明図である。 フラッシュＲＯＭ２２０の顔特徴記憶エリア２２１に記憶されるデータの一例を示す説明図である。 親機２０のメイン処理のフローチャートである。 図５のメイン処理中に実行される認識判断処理のフローチャートである。 図６の認識判断処理中に実行される検出エラー処理である。 図６の認識判断処理中に実行される特徴抽出エラー処理である。 図５のメイン処理中に実行される来訪者処理のフローチャートである。 注意モード画面３２０を表示中の親機２０の外観正面図である。 警告モード画面３３０を表示中の親機２０の外観正面図である。

符号の説明

１ インターホンシステム
１０ 子機
１１２ スピーカ
１１３ カメラ
１１５ 人感センサ
２０ 親機
２０１ ＣＰＵ
２１５ 操作パネル

Claims (6)

1. 室外に設置された子機と、前記子機に接続され、室内に設置された親機とを備えたインターホンシステムであって、
   前記子機は、
   前記子機正面の所定の撮像範囲を撮像し、前記撮像範囲の画像の情報である撮像画像情報を出力する撮像手段と、
   来訪者を検知する来訪者検知手段と、
   前記来訪者に情報を通知する子機通知手段を備え、
   前記親機は、
   前記来訪者検知手段によって前記来訪者が検知された場合に、前記撮像手段から出力された前記撮像画像情報を取得する画像取得手段と、
   前記画像取得手段によって取得された前記撮像画像情報に基づいて、前記来訪者の顔が認識可能か否かを判断する認識判断手段と、
   前記認識判断手段によって、前記来訪者の前記顔が認識可能でないと判断された場合に、前記子機通知手段を制御して、認識を妨げる原因に応じて、前記来訪者に対して異なる行動を促す情報を通知させる子機通知制御手段と、
   前記室内に情報を通知する親機通知手段と、
   前記親機通知手段を制御して、前記原因に応じて異なるレベルの警戒を促す情報を通知させる第１の親機通知制御手段を備えたことを特徴とするインターホンシステム。
2. 前記認識判断手段は、
   前記画像取得手段によって取得された前記撮像画像情報に基づいて、前記撮像範囲内に前記来訪者の顔に相当する領域である顔領域が存在するか否かを判断する第１の判断手段と、
   前記第１の判断手段によって、前記撮像範囲内に前記来訪者の前記顔領域が存在すると判断された場合に、前記撮像画像情報に基づいて、前記来訪者の前記顔の特徴である来訪者顔特徴が抽出可能か否かを判断する第２の判断手段と、
   前記第１の判断手段による判断結果および前記第２の判断手段による判断結果のいずれかが否である場合に、前記第１の判断手段または前記第２の判断手段による判断結果に応じて前記原因を特定する原因特定手段を備えたことを特徴とする請求項１に記載のインターホンシステム。
3. 前記撮像手段は、異なる解像度での撮像、および異なる画角での撮像、および静止画および動画の撮像が可能であり、
   前記親機は、
   前記認識判断手段によって、前記来訪者の前記顔が認識可能でないと判断された場合に、前記撮像手段を制御して、前記原因に応じて前記撮像手段の撮像方法を変更させる撮像制御手段と、
   画像を表示する画像表示手段と、
   前記画像表示手段を制御して、前記画像取得手段によって取得された前記撮像画像情報に基づき、前記撮像範囲の画像を表示させる表示制御手段をさらに備えたことを特徴とする請求項１または２に記載のインターホンシステム。
4. 前記親機は、
   前記認識判断手段によって、前記来訪者の前記顔が認識可能であると判断された場合に、前記撮像画像情報に基づいて、前記来訪者の前記顔の特徴である来訪者顔特徴を抽出する顔特徴抽出手段と、
   複数の人物の認識情報に対応づけて複数の顔の特徴を記憶する顔特徴記憶手段に記憶された前記複数の顔の特徴と、前記来訪者顔特徴とを照合し、前記複数の顔の特徴のいずれかが、前記来訪者顔特徴と一致するか否かを判断する一致判断手段と、
   前記親機通知手段を制御して、前記一致判断手段による判断結果に応じて異なるレベルの警戒を促す情報を通知させる第２の親機通知制御手段をさらに備えたことを特徴とする請求項１〜３のいずれかに記載のインターホンシステム。
5. 前記親機は、
   前記一致判断手段によって、前記来訪者顔特徴と一致すると判断された前記顔の特徴に基づき、前記複数の人物のいずれかを前記来訪者として特定する来訪者特定手段と、
   前記親機通知手段を制御して、前記来訪者特定手段によって特定された前記来訪者の情報を通知させる第３の親機通知制御手段をさらに備えたことを特徴とする請求項４に記載のインターホンシステム。
6. 前記一致判断手段は、前記顔特徴判断手段によって、前記来訪者特徴の一部が抽出された場合には、前記複数の顔の特徴の一部と、前記来訪者特徴の一部に基づいて判断を行い、
   前記親機は、
   前記一致判断手段によって、前記来訪者顔特徴の一部と一致すると判断された前記複数の顔の特徴の一部に基づき、前記複数の人物のいずれかを前記来訪者の候補として特定する候補特定手段と、
   前記親機通知手段を制御して、前記候補特定手段によって特定された前記来訪者の候補の情報を通知させる第４の親機通知制御手段をさらに備えたことを特徴とする請求項４または５に記載のインターホンシステム。

Images