JP2007104385A - インターホン装置 - Google Patents

Abstract

【課題】来訪者が操作ボタンを押す前からこの来訪者を認識し、近づいてきたときに特定するとともに関連情報を表示できるインターホン装置を提供することを目的とする。
【解決手段】本発明は、ドアホン親機６には、来訪者に対する取得済み画像情報と該画像情報と関係付けられた来訪者の来訪者情報とを格納するデータベース部３８と、カメラの撮影した来訪者の画像情報と取得済み画像情報とが一致するか否かを照合する音声認証部５０とが設けられ、音声認証部５０の照合結果が一致した場合に、カメラからの画像情報と共に来訪者情報が表示部７に表示されるインターホン装置であって、ドアホン子機にはセンサ部が設けられ、センサ部が来訪者を検出した時からカメラが起動し、ドアホン親機の表示部に画像情報を表示することを主要な特徴とする。
【選択図】図３

Description

この発明は、来訪者が操作ボタンを押す前からこの来訪者を認識し、近づいてきたときに特定するとともに関連情報を表示できるインターホン装置に関する。

従来のインターホン装置１０１は、図８に示すようにドアホン端末１０２と宅内に配置された応答端末１０３との２つの装置から構成されている。図８は従来のインターホン装置の概略構成図である。このドアホン端末１０２には、来訪者を撮影してその画像を表す画像信号を出力するカメラ１２１と、来訪者によって操作される呼び出しスイッチ１２２と、宅内からの音声を来訪者に知らせるためのスピーカ１２３と、来訪者の声を宅内に伝達するためのマイク１２４が設けられている。

カメラ１２１は応答端末１０３内の画像表示部１３１に接続され、カメラ１２１からの画像信号は画像表示部１３１によって処理され、そのモニタに来訪者の顔が表示される。また、応答端末１０３には、呼び出しスイッチ１２２の操作に応答して呼び出し信号を発生する呼び出し音信号発生部１３２が設けられ、アンプ１３３によって増幅されてスピーカ１３４から呼び出し音が出力される。さらに、応答端末１０３には、呼び出し音に応答して通話を行うために、ドアホン端末１０２のスピーカ１２３及びマイク１２４とアンプ１３５を介して接続された送受話器１３６が設けられ、呼び出し音に応答して応対者が送受話器１３６を取り上げると、ドアホン端末１０２と応答端末１０３との間に通話回路が形成されるとともに、カメラ１２１及び画像表示部１３１が作動状態になるようになっている。

しかし、この従来のインターホン装置１０１においては、呼び出しがあったとき、宅内の応対者は送受話器１３６を取り上げて実際に通話し、カメラ１２１と画像表示部１３１を作動させる等の操作を行わない限り、呼び出しスイッチ１２２を操作したのが誰なのかを確認することができなかった。

そこで、図９に示すように、ドアホン端末１０２の呼び出しスイッチ１２２を操作する可能性のある人物に関する画像データを蓄積した人物データベース１４２と、呼び出しスイッチ１２２を操作した人物の画像データを取り込んで、これと人物データベース１４２に蓄積された画像データとを照合する画像認識部を備えた人物認証インターホン装置が提案された（特許文献１参照）。図９は従来の人物認証インターホン装置の概略構成図である。

このインターホン装置１０１によれば、呼び出しスイッチ１２２が操作された場合、制御部１４３はカメラ１２１、画像表示部１３１、画像認識部１４１、人物データベース１４２を作動させ、画像認識部１４１はカメラ１２１から送られてきた操作者の画像データと人物データベース１４２に蓄積されている各データとを照合する。両画像データを照合した結果、人物データベース１４２にこの人物の画像データが蓄積されていたときには、この人物の対応に適した応対者の特有な呼び出し音を呼び出し音データベース１４４から読み出し、スピーカ１３４から出力する。また、このときこの人物の画像データが蓄積されていなかったときには、呼出音の発生の有無に関する設定により、例えば一般呼び出し音を発生したりする。

人物の画像データは人物確認の結果によって登録するか否かが決定される。登録しておく必要があるときには、この画像データを人物データベース１４２に、また人物に最も適した応対者の呼び出し音のデータを呼び出し音データベース１４４に登録する。また、人物データベースの画像の更新処理を行うこともできるものである。

しかし、以上説明した図９の（特許文献１）のインターホン装置１０１は、呼び出し音データベース１４４等のメモリ容量などで人物推定できる人数に制約が出てくるし、呼び出し方法を変更するときにはドアホン端末１０２を設計し直さなければならなかった。このため、応答端末１０３の人物認証後、人物認証結果情報を別のインターフェースを介して容量のあるメモリを有する外部接続端末装置、例えばコードレス電話親機に送信して、受信した画像で来訪者を特定し、人物認証の報知処理を行い、選択された呼び出し装置、例えばコードレス電話子機に所定の呼び出し音情報を送信する技術が提案された。呼び出し音等の情報は外部接続端末装置のメモリに記憶されるものである（特許文献２参照）。
特許第３２５０７９７号公報 特開２０００−２８７１９６号公報

以上説明したように、（特許文献１）の人物認証インターホン装置は、呼び出しスイッチ１２２を操作した人物の画像データを取り込んで、これと人物データベース１４２に蓄積された画像データとを照合するため、操作者が誰であるか直ちに分り、この操作者に最も適した応対者が応対することができるものであった。

しかし、呼び出しスイッチ１２２を操作した人物を対応するのに適した者に対して、来訪者があったことを単に報知するに止まり、せっかくの人物認証も十分役に立っているとはいえないものであった。しかも、メモリ容量などで人物推定できる人数に制約があり、実用性の面で問題が残るものであった。

この点、（特許文献２）のインターホン装置は、インターフェースを介して外部接続端末装置に人物認証の報知処理プログラムや呼び出し音情報を格納しておくことができ、実用性の面では上記の従来技術を向上させたが、まだ人物認証したことが十分役立っているとはいえないものであった。基本的には上記従来技術と同様、操作者に最も適した応対者に報知するだけのものであった。

ところで、最近、地域社会の人々の絆が薄くなり、従来のように安全は当たり前とはいえず、各家族で自衛が必要になってきている。インターホン装置が単なる呼び出し装置というに止まらず、トラブルに巻き込まれるのを未然に防止する手段として機能できれば、また、来訪者に実際に面会する前にこの来訪者の情報を予め入手する手段として利用できれば、予め人物認証することが役立つことになる。また、家族全員にとって訪問を拒絶した方が望ましい人物もあり、このような人物であると認証された場合には、家族に対応区拒否の警告をすることができる手段も必要である。

しかし、インターホン装置は来訪者が操作ボタンを押さなければ、屋内の人間に訪問者があったことが分らないし、人物認証も開始しない。このため突然の応対を強いられて、応対に失敗することもある。できれば、来訪者が操作ボタンを操作する前に、インターホン装置から情報が得られれば対応が容易になる。そして、人物認証や応対に失敗したときもその後の処理が円滑に行えるのが望ましい。

さらに、認証情報や関連情報は常に変化を伴う場合が多く、情報更新がなされなければ人物認証の精度も低下するし、過去の履歴が面会するか否かの判断の大きな材料になる。

そこで本発明は、来訪者が操作ボタンを押す前からこの来訪者を認識し、近づいてきたときに特定するとともに関連情報を表示できるインターホン装置を提供することを目的とする。

上記従来の課題を解決するために本発明は、上記の目的を達成するために、スピーカ、マイク及びカメラが設けられたドアホン子機と、ドアホン子機と音声通話しカメラの撮影した画像情報を表示する表示部が設けられたドアホン親機とを備えたインターホン装置であって、ドアホン親機には、来訪者に対する取得済み画像情報と該画像情報と関係付けられた来訪者の来訪者情報とを格納する来訪者情報記憶部と、カメラの撮影した来訪者の画像情報と取得済み画像情報とが一致するか否かを照合する照合部とが設けられ、照合部の照合結果が一致した場合に、カメラからの画像情報と共に来訪者情報が表示部に表示されることを主要な特徴とする。

本発明によれば、来訪者が操作ボタンを押す前からこの来訪者を認識し、近づいてきたときに特定するとともに、関連情報を表示できる。この来訪者の特定ができなかったときには、応答を促し、この応答で新規に関連情報を残すことができる。

上記課題を解決するために本発明の第１の発明は、スピーカ、マイク及びカメラが設けられたドアホン子機と、ドアホン子機と音声通話しカメラの撮影した画像情報を表示する表示部が設けられたドアホン親機とを備え、ドアホン親機には、来訪者に対する取得済み画像情報と該画像情報と関係付けられた来訪者の来訪者情報とを格納する来訪者情報記憶部と、カメラの撮影した画像情報と取得済み画像情報とが一致するか否かを照合する照合部とが設けられ、照合部の照合結果が一致した場合に、カメラからの来訪者の画像情報と共に来訪者情報が表示部に表示されるインターホン装置であって、ドアホン子機にはセンサ部が設けられ、センサ部が来訪者を検出した時からカメラが起動し、ドアホン親機の表示部に画像情報を表示するインターホン装置であり、来訪者が操作ボタンを押す前からこの来訪者を認識し、近づいてきたときに特定するとともに、関連情報を表示できる。

本発明の第２の発明は、第１の発明に従属する発明であって、来訪者情報記憶部には、来訪者に対する取得済み音声情報と該音声情報と関係付けられた来訪者の来訪者情報とが格納され、照合部がカメラの撮影した画像情報と取得済み画像情報及びマイクからの音声情報と取得済み音声情報と一致するか否かを照合し、照合部の照合結果がいずれも一致した場合に、カメラからの画像情報と共に来訪者情報を表示部に表示するインターホン装置であり、顔の画像を取得済み画像情報と比較するため、照合結果の精度が高くなる。

本発明の第３の発明は、スピーカ、マイク及びカメラが設けられたドアホン子機と、ドアホン子機と音声通話しカメラの撮影した画像情報を表示する表示部が設けられたドアホン親機とを備え、ドアホン親機には、来訪者に対する取得済み音声情報と該音声情報と関係付けられた来訪者の来訪者情報とを格納する来訪者情報記憶部と、マイクからの音声情報と取得済み音声情報とが一致するか否かを照合する照合部とが設けられ、照合部の照合結果が一致した場合に、カメラからの来訪者の画像情報と共に来訪者情報が表示部に表示されるインターホン装置であって、ドアホン子機にはセンサ部が設けられ、センサ部が来訪者を検出した時からカメラが起動し、ドアホン親機の表示部に画像情報を表示するインターホン装置であり、画像情報は環境で変化したり、音声はこうした環境条件に強く、安定した照合をすることができ、来訪者が操作ボタンを押す前からこの来訪者を認識し、近づいてきたときに特定するとともに、関連情報を表示できる。

本発明の第４の発明は、第１〜３のいずれかの発明に従属する発明であって、センサ部が来訪者を検出した時から照合部が照合を開始することを特徴とするインターホン装置であり、来訪者が操作ボタンを押す前からこの来訪者を特定することができ、関連情報を表示できる。

本発明の第５の発明は、第１〜４のいずれかの発明に従属する発明であって、親ドアホン機が音声案内部を備え、照合部の照合結果が一致しなかった場合には、音声案内部から応答を促すメッセージを子機のスピーカに送信して出力するインターホン装置であり、応答を促すことにより、相手を特定することができるか、退散させることができる。

本発明の第６の発明は、第３の発明に従属する発明であって、ドアホン親機には履歴データ記録手段が設けられ、子機のマイクから入手した応答に基づいて新規来訪者情報が作成され、来訪者情報記憶部には該新規来訪者情報に関係付けられたカメラからの画像情報が格納されるインターホン装置であり、新規に画像情報を訪問者情報として残すことができる。

（実施の形態１）
本発明の実施の形態１におけるインターホン装置は画像により人物認証を行うものである。図１（ａ）は本発明の実施の形態１におけるインターホン装置のドアホン子機の正面図、図１（ｂ）は本発明の実施の形態１におけるインターホン装置のドアホン親機の正面図、図２は本発明の実施の形態１におけるインターホン装置のドアホン子機のブロック構成図、図３は本発明の実施の形態１におけるインターホン装置のドアホン親機のブロック構成図である。

図１（ａ）において、１は実施の形態１のインターホン装置のドアホン子機、２はドアホン子機１本体正面に設けられたＣＣＤ等のカメラ、３は後述するドアホン親機６から入力された音声を出力するためのドアホン子機１本体に設けられたスピーカ、４はドアホン子機１に音声を入力するためのマイク、５は来訪者がドアホン親機６の呼び出し行う操作ボタンである。

１２は例えば赤外線センサの１つである焦電センサを使用して人物の存在を検知する感知センサである。このほか、人間の振動を感じてその振動の大きさや持続時間を検知することで、人間が存在していることを検知するような振動による感知センサ１２でもよい。人間の存在が検知できればどのようなセンサでもよい。例えば焦電センサの場合、感知センサ１２の前面の所定領域に来訪者が入ってくると、感知センサ１２がこれを検知し、この信号がドアホン子機制御部２４に入力され、これによってカメラ２が起動される。さらにドアホン子機制御部２４はこれをドアホン親機６の主制御部３９（後述）に伝え、これによってドアホン親機６は認証処理などを開始する。

次に、図１（ｂ）において、６はドアホン子機１のカメラ２が撮影した来訪者の顔等の映像を受信するとともに、ドアホン子機１のマイク４から入力された音声を受信して、人物認証を行うことができるドアホン親機である。実施の形態１のドアホン親機６は、来訪者の顔等の画像から人物認証を行うものである。また、７はドアホン親機６の正面に設けられたＬＣＤ等の表示部である。この図１（ｂ）ではこの表示部７に表示された表示画面は幾つかに分割され、７ａはドアホン子機１から送信された人物の映像の画像領域、７ｂは表示部７に表示されたこの人物に関する対応拒否の設定がなされている旨を警告する警告領域、７ｃは表示部７に表示された人物の過去の訪問履歴表示領域である。この訪問履歴表示領域７ｃには過去の対応の有無情報も表示されている。８はスピーカ、９はマイク、１０は表示部７の表示を見て応答すると判断したとき押すための応答スイッチ、１１は個人名や企業名、電話番号、アドレスを入力するための入力キーボードである。なお、７ｃ₁は訪問履歴表示領域７ｃの各履歴に関係付けられて自動的に付与された対応の有無情報である。

続いて、図２に基づいて実施の形態１のドアホン子機１の構成について説明する。図２において、２ａは撮像部２０のズーム等の制御を行う撮像制御部、５ａは操作ボタン５が押されたときこれを検出する操作処理部である。操作ボタン５のＯＮによりプルアップ電圧が急激に電圧降下することを利用する。また、１２ａは感知センサ１２から入力された信号を検出するセンサ検知部である。そして、２０はカメラ２を構成するＣＣＤ等の撮像部、２１は撮像部２０から出力された信号を処理して映像信号を出力する撮像処理部、２３は撮像処理部２１から出力された映像信号の周波数変調を行って８．５ＭＨｚ〜１０ＭＨｚのＦＭ信号を出力する映像信号変調部である。

２４はドアホン子機制御部であり、２５はプログラムやデータを記憶したメモリ部である。ドアホン子機制御部２４はハードウェア的には中央演算処理装置（以下、ＣＰＵ）から構成され、メモリ部２５やその他のメモリからプログラムを読み込んでソフトウェア的に機能実現手段として各機能を実行する。２６，２７はそれぞれスピーカ３とマイク４の出力を増幅するアンプ、２８はビデオ信号と音声信号のドアホン親機６に対する第１信号線、２９は感知センサ１２のセンサ検知部１２ａからの出力信号をドアホン子機制御部２４を介してドアホン親機６の主制御部３９に伝送する第２信号線である。

なお、実施の形態１の場合第１信号線２８は２−ワイヤで構成され、一方に直流＋２２Ｖが印加され、他方は接地されている。また、実施の形態１では操作処理部５ａや後述するドアホン操作検知部３６を使って第１信号線２８によって映像信号と音声信号を伝送するが、このほかの方法として、ドアホン子機１とドアホン親機６にそれぞれ通信制御部を設け、ネットワークケーブル等で結んで所定のプロトコルで通信を行う有線ＬＡＮまたは無線ＬＡＮを構成するのもよい。詳細な説明は省略する。

さて、マイク４から入力された通常５００Ｈｚ〜２ｋＨｚの人間の音声はアンプ２７で増幅され、そのまま映像信号変調部２３からの８．５ＭＨｚ〜１０ＭＨｚのＦＭ信号と重畳され、さらにこれに直流電圧＋２２Ｖが重畳されて第１信号線を介してドアホン親機６に伝送される。すなわち、待機時にはドアホン親機６からドアホン子機１に＋５Ｖが給電されているが、この状態で操作ボタン５を押すと、操作処理部５ａの作用で第１信号線に急激な電圧降下を起こし、＋２２Ｖが給電され、ドアホン親機６において操作ボタン５が押下されたことが検知されてその後＋２２Ｖが重畳されたＦＭ信号が伝送され、ドアホン親機６は表示部７に映像を表示する。なお、ドアホン親機６の動作中に操作ボタン５を押した場合はＦＭ信号に影響しないように検知信号が重畳されて伝送される。その後ドアホン親機６は人物認証を開始し、その結果によって関連情報、例えば警告領域７ｂに応答拒否の表示や、訪問履歴表示領域７ｃに訪問履歴を表示することになる。

続いて、図３に基づいてドアホン親機６の構成について説明する。２８は第１信号線、２９は第２信号線である。２８ａは第１信号線を介して重畳して伝送された２つの信号、すなわち映像信号変調部２３で周波数変調されたＦＭ信号とこれに重畳された音声信号を分離する信号分離部である。そして、３０はこのＦＭ信号を復調させるためのＦＭ信号復調部、３１は復調されたアナログのビデオ信号を画像処理や画像認証行うためにデジタル信号に変換するＡ／Ｄ変換部である。

また、３２はＡ／Ｄ変換部３１で変換されたデジタルビデオ信号を画像処理し、所定の画像を生成する画像処理生成部である。実施の形態１においては、図１（ｂ）の表示部７に表示された表示画面は分割され、映像とその他の関連情報が分割されて表示されるので、画像処理生成部３２がこの処理を行う。３３はこの表示部７に表示される表示画面のテンプレート等のデータを格納した画像メモリ部である。画像処理生成部３２は、カメラ２で撮影している映像部分のサイズを調整若しくは切り出してテンプレートの画像領域７ａに貼り付け、また、対応拒否の設定を示すテキスト情報及びシンボルは警告領域７ｂに、さらに訪問履歴に関するテキスト情報を訪問履歴表示領域７ｃに表示して、１画面分のデータ。

３４は画像処理したデジタルのビデオ信号をアナログ信号に変換するＤ／Ａ変換部である。３５はこのビデオ信号を表示部７に表示するための表示制御部であり、カメラ２で撮影した映像はＬＣＤ等の表示部７に表示される。３６はドアホン子機１の操作ボタン５が押下されたとき、ドアホン親機６側でこれを検知するドアホン操作検知部であり、検出信号は後述の主制御部３９に入力され、これをトリガとしてドアホン親機６の各動作が開始される。

実施の形態１のドアホン親機６においては、まず、訪問した人物の顔等の映像を表示部７に表示するとともに、この人物の画像認証（画像による照合）を行うものである。なお、画像を比較して同一人物か否かを推定するという意味であるから、本来、照合というべきであるが、照合後に宅内への侵入を許可するという意味を込めて以下、実施の形態上は認証という。このため次の構成を有している。

３７は、Ａ／Ｄ変換部３１から出力されたビデオ信号を基に１画面分の画像を取り出して個人別に蓄積されている多数の取得済み画像情報と比較し、人物推定を行う画像認証部（実施の形態１の照合部）である。そして、３８は画像認証部３７で行う認証のために過去の来訪者や家族等で個人別に蓄積した取得済み画像のデータと、その個人情報を蓄積したデータベース部（実施の形態１の来訪者情報記憶部）である。データベース部３８に格納されている取得済み画像は、氏名とともに、撮影したカメラ２のズーム等のカメラ条件、明るさ等の環境条件、また画像のサイズや付属物、例えば眼鏡の有無等の対象データ情報が、画像と関係付けられて格納されている。

画像認証部３７は、これらの条件と現在の画像の条件を比較してマッチングさせ、眼や鼻、口の位置や形状、骨格等の所定の位置の特徴点を抽出して、両者の特徴空間上での距離を測って、所定の範囲内であれば同一人であると推定する。格納してある取得済み画像の特徴点をパラメータとして予めデータ保存しておくのが好適である。この場合、画像認証部３７は映像から画像取り出し、所定の部分を切り出して、保存してある取得済み画像のデータとのマッチングを行い、パラメータを比較するだけで同一人か否かの推定ができる。このため多人数との比較が直ちに行える。なお、後述するように、データベース部３８に格納されている取得済み画像は、入力キーボード１１の中の更新キーを押下することで、簡単に更新することができる。また、画像認証の特徴点を比較して認証する方法は、人間の静脈や、眼を利用したりする多くの方法があり、これらを利用するのもよい。
として生成する。

ところで、実施の形態１の画像認証部３７は画像認証するだけでなく、感知センサ１２が人体を検知したとき、別の機能を有している。すなわち、表示画像の生成に入る前に、場合によってはこれを同時に行いながら、次のような処理を行う。すなわち、感知センサ１２が人体を検知すると、カメラ２が起動され、この検知により同時にドアホン親機６の主制御部３９が画像処理生成部３２を起動し、画像認証部３７によって画像認証処理を開始する。このときカメラ２がとらえたカメラ２の前の人物若しくは物体が本当に来訪者なのか、あるいは単なる通行人、不審者なのか、はまだ判然としていない。

そこで、カメラ２から送信されてきた映像の最初の１枚分の画像を取り出して画像上の特徴点（一番高い点や肩の位置、顎の位置等）を抽出すると同時に、所定の時間、例えば３０秒経過した後の画像を取り出して同じ画像上の特徴点の抽出を行い、画像認証部３７の構成によって比較する。所定時間経過後の画像の特徴点が形成する多角形が最初の画像の多角形より拡大していれば、この人物はこのドアホン子機１の方向に進んでいることが分る。そして、この条件を満たしていない場合は、少なくともこの人物はドアホン子機１の方向に進んでいるのでなく、来訪者とは考えにくく、場合によっては不審人物ということになる。ドアホン子機１の方向に進んでいる場合、画像認証部３７はそのまま画像認証を行うが、認証が所定の確率のレベルを越えて行われた段階で、表示部７に関連情報を表示する。これ以外の場合は、感知センサ１２による検知を続け、感知センサ１２の検知領域からこの人物がいなくなっても、所定時間カメラ２は監視のため継続して動作させる。これによって、不審者の対する警戒を続けることができる。

次に、３９はドアホン親機６の主制御部である。主制御部３９はハードウェア的にはＣＰＵから構成され、後述する記憶部４７やその他のメモリからプログラムを読み込んでソフトウェア的に機能実現手段として各機能を実行する。実施の形態１の機能実現手段の各機能については後述する。

４０は第１信号線２８と接続された音声処理部、４３，４４はスピーカ８とマイク９のそれぞれのアンプである。音声処理部４０は音声のとぎれ等を検出し、ドアホン親機６とドアホン子機１との間の通話の切り替えなど音声通信の制御を行う。また、４５は入力キーボード１１の操作ボタンを使って入力する入力部、４６は応答スイッチ１０を押してドアホン子機１との間で通信を開始する応答スイッチ部である。そして、４７は主制御部３９のためのプログラムやデータを記憶した記憶部であり、４８は履歴を残すための時計部である。

そこで、本発明の実施の形態１の主制御部３９に搭載された機能実現手段について説明する。図４（ａ）は本発明の実施の形態１におけるインターホン装置のドアホン親機の履歴制御のブロック図、図４（ｂ）は本発明の実施の形態１におけるデータベース部の構成図、図５は本発明の実施の形態１におけるデータベース部の個人情報部構成図である。

図４（ａ）に示すように、主制御部３９内には履歴情報を処理するため、次の機能実現手段が設けられている。３９ａは来訪者があったときに時計部４８の時刻とともに自動的に画像認証した人物の関連情報を記録する履歴情報記録手段、３９ｂはこの訪問履歴の各回にドアホン親機６から応答したか否かを記録する応答履歴記録手段である。来訪者の中には、絶対対応を拒否したい人物もあり、３９ｃはこのような場合に対応拒否を設定するための応答禁止設定手段である。この設定は、入力キーボード１１の中の対応拒否キーを押下することで、簡単に設定することができる。対応拒否は個人差があり、一時的にこの拒否を解除したいときは、上記対応拒否キーを長押しするなどすることで、簡単に解除することができる。しかし、これらの履歴はすべて応答履歴記録手段３９ｂによって履歴として記録される。なお、対応拒否キーを押下した人物、これを一時的に解除した人物の記録も残され、警告領域７ｂに表示することもできる。

３９ｄはデータベース部３８に格納されている画像データを、最新の画像に更新したいときに実行する画像データ更新手段である。既に述べたように、入力キーボード１１の中の更新キーを押下することで更新することができる。また、更新キーを長押しなどすることにより、自動設定機能にすることができ、この場合訪問があれば自動的に画像を更新させることができる。

３９ｆは感知センサ１２による人物検知後に画像認証部３７によってドアホン子機１の方向に進んで来る来訪者と、そうでない不審人物等の人物を判別するために、画像認証部３７に判定させる不接近時処理手段、３９ｇは不審人物等の人物に対して応答を促すメッセージを送信させる音声案内手段である。さらに、３９ｈはデータ修正手段であって、入力キーボード１１のキーを使って誤って入力されている訪問履歴や個人情報をデータ修正手段３９ｈにより修正、変更することができる。

図４（ｂ）には、データベース部３８の内部構成が示されている。３８ａは画像データ部であって、画像データとその画像の特徴パラメータとが、その氏名等の個人情報が関係付けられて格納されている。３８ｂはその氏名等の個人情報を記録した個人情報部であって、３８ｂ₁は訪問履歴を記録した履歴情報部、３８ｂ₂は対応拒否キーを押下したとき拒否フラグを設定するための履歴情報部３８ｂ₁の拒否部である。

また、３８ｃは実際に応答するのでなく、所定のメッセージを利用して応答するために設けられた応答メッセージ部である。応答メッセージ部３８ｃ内には、「唯今留守にしております」等の家族で共通のメッセージのほかに、個人別のメッセージ、例えば「学校のクラブで会おう」といったメッセージが格納されている。応答スイッチ部４６をおさないで、入力キーボード１１の中から自動応答のキーを選んで、希望するメッセージを送出する。

ところで、実施の形態１においては、感知センサ１２による検知後に、不接近時処理手段３９ｆが、画像認証部３７によってドアホン子機１の方向に進んで来る来訪者と考えられるものと、そうでない不審人物等の人物を判別させる。ドアホン子機１の方向に進んでいる場合には画像認証部３７は画像認証を行うことができる、しかしこれ以外の場合、例えば画像認証ができる距離まで近づかない者には画像認証はできない。そこで、不接近時処理手段３９ｆは感知センサ１２による検知を続けさせるとともに、音声案内手段３９ｇによってこの人物に対して「どちらさまですか（疑問）」「何か御用ですか（疑問）」等のメッセージを応答メッセージ部３８ｃから取り出し、ドアホン子機１のスピーカ３から出力させる。

これにより、不審者の場合は退散するし、これでもなお画像認証できない場合には、音声案内手段３９ｇは応答メッセージ部３８ｃ内の「ドアホンのカメラに近づいて、お名前と御用件をお聞かせ下さい。」などの応答を促すメッセージを選択して、ドアホン子機１のスピーカ３から出力する。このメッセージによって、今まで画像認証できなかった人物が名前を名乗った場合、訪問履歴が自動的に個人情報部３８ｂ内に記録されるとともに、来訪者情報記憶部内の画像データ部３８ａにカメラ２からの画像情報が新規に格納される。できればこのとき、同時に入力キーボード１１の中の文字入力キーを使って個人情報部３８ｂ内にこの来訪者の名前を入力するのがよい。

図５は個人情報部３８ｂの詳細を示すものである。図５において、３８ｂ₁₁は来訪者の氏名である。この氏名３８ｂ₁₁が取得済み画像データと関係付けられている。３８ｂ₁₂は来訪者の所属する企業名、３８ｃ₁₃は連絡先の電話番号、３８ｂ₁₄はメールアドレスである。これらは入力キーボード１１の中の文字入力キーを使って文字入力する。

次に、３８ｂ₁₅はこの人物の過去に訪問したときの履歴をすべて時系列に記録したもの訪問履歴である。例えば、Ｈ１６，０１，０４，１４，１２，応答というのは平成１６年１月４日１４時１２分に来訪し、応答したことを示している。しかし、Ｈ１６，０１，２０，１５，３２，不応答と記録されているように、平成１６年１月２０日１５時３２分に来訪し、応答しなかったことが分る。これらは応答履歴記録手段３９ｂによって自動的に記録される。上記した「ドアホンのカメラに近づいて、お名前と御用件をお聞かせ下さい。」などのメッセージによって名前を名乗った場合なども、入力により氏名が記録される。また、３８ｂ₁₆は入力キーボード１１の中の対応拒否キーを押下することで、拒否部３８ｂ₂内に設定した拒否フラグであり、応答禁止設定手段３９ｃによって拒否部３８ｂ₂内に設定される。これらの情報はすべて画像認証した人物の氏名と関係付けられて、図１（ｂ）に示す表示部７の訪問履歴表示領域７ｃ、拒否フラグは警告領域７ｂにテンプレートを使って表示される。なお、実施の形態１においては、入力キーボード１１を使って入力したが、表示部７をタッチパネルやＧＵＩ表示にすることもできる。例えば、対応拒否キーを押下するのに代えて、図１（ｂ）の警告領域７ｂの拒否マークのボタンを入力可能にアクティブな表示にしておいて、これにタッチすることでこの設定を一時解除できるようにすることもできる。

このように本発明の実施の形態１のインターホン装置においては、感知センサによって来訪者が操作ボタンを押す前からこの来訪者を認識することができ、近づいてきたときに画像認証して特定するとともに、関連情報を表示できる。画像認証部を利用して画像認証前に来訪者なのか、それ以外の人物なのかの判定をさせることができるので、来訪者が呼び出しを行う前から対応可能だけでなく、不審者を警戒することが可能なインターホン装置を提供することができる。

氏名や企業名、電話番号等のほか、訪問履歴情報などの関連情報をドアホン親機に表示するので、この表示を見てトラブルを未然に防いだり、また、来訪者に実際に面会する前にこの来訪者の有力情報を予め入手することができたりするので、来訪者の応対が容易で迅速に行える。また、家族全員にとって訪問を拒否するのが望ましい人物もあり、このような場合に家族に予め警告することができるし、認証情報は自動的に更新できる。

また、不審者、若しくはこれでもなお画像認証できない場合に、応答を促すメッセージをスピーカ３から出力するため、このメッセージによって今まで画像認証できなかった人物が名前を名乗った場合、訪問履歴を記録するとともに、来訪者情報記憶部内にカメラからの画像情報を新規に自動的に格納することができる。

（実施の形態２）
本発明の実施の形態２におけるインターホン装置は音声により人物認証を行うものである。図６は本発明の実施の形態２におけるインターホン装置のドアホン親機のブロック構成図、図７（ａ）は本発明の実施の形態２におけるインターホン装置のドアホン親機の履歴制御のブロック図、図７（ｂ）は本発明の実施の形態２におけるデータベース部の構成図である。実施の形態２のインターホン装置と実施の形態１のインターホン装置は、基本的に同一の構成であり、同一符号は同一構成を示しているから、重複するため説明は省略する。

図６において、４９はドアホン子機１のマイク４から入力された音声信号を受信して音符号化し、あるいはマイク９からの音声信号を符号化して後述の音声認証部５０にスペクトル解析等のためのデジタルデータとして渡すとともに、その後それを復号化して音声処理部４０またはスピーカ８に出力するＡ／Ｄ・Ｄ／Ａ変換部である。５０はＡ／Ｄ・Ｄ／Ａ変換部４９から出力されたデジタル音声信号からサンプリングし、特徴点を抽出して人物の認証を行う音声認証部（実施の形態２の照合部）である。

よく知られているように人の声紋は個人ごとに異なっており、マイク４，９から入力された特定の音声区間、例えば同一人を呼ぶ「誰々さん」「ごめんください」「誰々さんのお宅でしょうか（疑問）」といった音声信号をデジタル信号に変換し、これのスペクトル等の解析などから各個人の特徴パラメータを抽出し、予め格納している取得済み音声データの特徴パラメータを比較し、両者の特徴空間上での距離を測って、所定の範囲内であれば同一人であると推定する。取得済みデータの特徴点をパラメータとして予めデータ保存しておくのが好適である。

この場合、音声認証部５０は特定の音声区間を切り出して、パラメータを比較するだけで同一人か否かの推定ができる。このため多人数との比較が直ちに行える。なお、実施の形態１の画像と同様に、データベース部３８（実施の形態２の来訪者情報記憶部）に格納されている取得済み音声データは、入力キーボード１１の中の更新キーを押下することで、簡単に更新することができる。なお、また、音声認証の特徴点を抽出、比較するために利用する方法としては、最近では高速フーリエ変換（ＦＴＴ）によるもの、線スペクトル対（ＬＳＰ）によるもの、ケプストラムによるものなど、多くの方法があり、これらを利用するのがよい。

図７（ａ）において、３９ｅはデータベース部３８に格納されている取得済み音声データを、最新の音声データに更新したいときに実行する音声データ更新手段である。既に述べたように、入力キーボード１１の中の音声更新キーを押下することで更新することができる。また、音声更新キーを長押しなどすることにより、自動設定機能にすることができ、この場合訪問があれば自動的に音声データを更新させることができる。

図７（ｂ）において、３８ｄはデータベース部３８に設けられた取得済み音声データと、その音声データの特徴パラメータと、その氏名が関係付けられて格納されている音声データ部である。これに対応した個人情報部３８ｂの内容はまったく実施の形態１と同様であり、説明は省略する。

ところで、実施の形態２においては、音声認証部５０を設け、音声データ更新手段３９ｅ、音声データ部３８ｄを設けたが、これは実施の形態１の画像認証部３７や、画像データ更新手段３９ｄ、画像データ部３８ａとの併設ができないものでなく、両者を同時に設けて、認証精度を向上させるのも好適である。この場合、例えば画像認証部３７による画像認証の後、音声認証部５０による音声認証を行って、特徴空間上での距離が所定の閾値内にあるときのみ同一人と推定することになる。また、この逆もありえる。

ところで、実施の形態２において画像認証部３７が設けられていない場合、マイク４から送信される足音等の大きさが大きくなるか否かで、ドアホン子機１の方向に進んでいるか否か、を判断することができる。感知センサ１２による検知後に、不接近時処理手段３９ｆが音声処理部４０によってドアホン子機１の方向に進んで来る来訪者と考えられるものと、そうでない不審人物等の人物を判別させる。ドアホン子機１の方向に進んで来ない場合、感知センサ１２による検知を続けるとともに、この人物に対して「どちらさまですか（疑問）」「何か御用ですか（疑問）」等のメッセージをスピーカ３から出力させる。

さらに音声認証できない場合には、音声案内手段３９ｇによって「ドアホンのカメラに近づいて、お名前と御用件をお聞かせ下さい。」などの応答を促すメッセージを選択してスピーカ３から出力する。このメッセージによって、今まで画像認証できなかった人物が名前を名乗った場合、訪問履歴が自動的に個人情報部３８ｂ内に記録されるとともに、データベース部の画像データ部３８ａにカメラ２からの画像情報が新規に格納される。

このように実施の形態２のインターホン装置は、実施の形態のインターホン装置が、画像を撮る環境条件が変化すると、データが比較的変化するし、眼鏡等の付属物で認証を妨げる可能性も否定できないが、音声はこうした環境条件に強く、しかも画像認証より比較的簡単に認証が行える。

本発明は、来訪者が操作ボタンを押す前からこの来訪者を認識し、近づいてきたときに特定するとともに関連情報を表示できるインターホン装置に適用できる。

（ａ）本発明の実施の形態１におけるインターホン装置のドアホン子機の正面図、（ｂ）本発明の実施の形態１におけるインターホン装置のドアホン親機の正面図 本発明の実施の形態１におけるインターホン装置のドアホン子機のブロック構成図 本発明の実施の形態１におけるインターホン装置のドアホン親機のブロック構成図 （ａ）本発明の実施の形態１におけるインターホン装置のドアホン親機の履歴制御のブロック図、（ｂ）本発明の実施の形態１におけるデータベース部の構成図 本発明の実施の形態１におけるデータベース部の個人情報部構成図 本発明の実施の形態２におけるインターホン装置のドアホン親機のブロック構成図 （ａ）本発明の実施の形態２におけるインターホン装置のドアホン親機の履歴制御のブロック図、（ｂ）本発明の実施の形態２におけるデータベース部の構成図 従来のインターホン装置の概略構成図 従来の人物認証インターホン装置の概略構成図

符号の説明

１ ドアホン子機
２ カメラ
２ａ 撮像制御部
３ スピーカ
４ マイク
５ 操作ボタン
５ａ 操作処理部
６ ドアホン親機
７ 表示部
７ａ 画像領域
７ｂ 警告領域
７ｃ 訪問履歴表示領域
７ｃ₁ 応答の有無情報
８ スピーカ
９ マイク
１０ 応答スイッチ
１１ 入力キーボード
１２ 感知センサ
１２ａ センサ検知部
２１ 撮像部
２２ 撮像処理部
２３ 映像信号変調部
２４ ドアホン子機制御部
２５ メモリ部
２６，２７，４３，４４ アンプ
２８ 第１信号線
２８ａ 信号分離部
２９ 第２信号線
３０ ＦＭ信号復調部
３１ Ａ／Ｄ変換部
３２ 画像処理生成部
３３ 画像メモリ部
３４ Ｄ／Ａ変換部
３５ 表示制御部
３６ ドアホン操作検知部
３７ 画像認証部
３８ データベース部
３８ａ 画像データ部
３８ｂ 個人情報部
３８ｂ₁ 履歴情報部
３８ｂ₂ 拒否部
３８ｂ₁₁ 氏名
３８ｂ₁₂ 企業名
３８ｂ₁₃ 電話番号
３８ｂ₁₄ メールアドレス
３８ｂ₁₅ 訪問履歴
３８ｂ₁₆ 拒否フラグ
３８ｃ 応答メッセージ部
３８ｄ 音声データ部
３９ 主制御部
３９ａ 履歴情報記録手段
３９ｂ 応答履歴記録手段
３９ｃ 応答禁止設定手段
３９ｄ 画像データ更新手段
３９ｅ 音声データ更新手段
３９ｆ 不接近時処理手段
３９ｇ 音声案内手段
３９ｈ データ修正手段
４０ 音声処理部
４５ 入力部
４６ 応答スイッチ部
４７ 記憶部
４８ 時計部
４９ Ａ／Ｄ・Ｄ／Ａ変換部
５０ 音声認証部
１０１ インターホン装置
１０２ ドアホン端末
１０３ 応答端末
１２１ カメラ
１２２ 呼び出しスイッチ
１２３ スピーカ
１２４ マイク
１３１ 画像表示部
１３２ 呼び出し音信号発生部
１３３，１３５ アンプ
１３４ スピーカ
１３６ 送受話器
１４１ 画像認識部
１４２ 人物データベース
１４３ 制御部
１４４ 呼び出し音データベース

Claims (6)

1. スピーカ、マイク及びカメラが設けられたドアホン子機と、前記ドアホン子機と音声通話し前記カメラの撮影した画像情報を表示する表示部が設けられたドアホン親機とを備え、前記ドアホン親機には、来訪者に対する取得済み画像情報と該画像情報と関係付けられた前記来訪者の来訪者情報とを格納する来訪者情報記憶部と、前記カメラの撮影した画像情報と前記取得済み画像情報とが一致するか否かを照合する照合部とが設けられ、前記照合部の照合結果が一致した場合に、前記カメラからの前記来訪者の画像情報と共に前記来訪者情報が前記表示部に表示されるインターホン装置であって、前記ドアホン子機にはセンサ部が設けられ、前記センサ部が来訪者を検出した時から前記カメラが起動し、前記ドアホン親機の表示部に画像情報を表示することを特徴とするインターホン装置。
2. 前記来訪者情報記憶部には、前記来訪者に対する取得済み音声情報と該音声情報と関係付けられた前記来訪者の来訪者情報とが格納され、前記照合部が前記カメラの撮影した画像情報と前記取得済み画像情報及び前記マイクからの音声情報と前記取得済み音声情報と一致するか否かを照合し、前記照合部の照合結果がいずれも一致した場合に、前記カメラからの画像情報と共に前記来訪者情報を前記表示部に表示することを特徴とする請求項１記載のインターホン装置。
3. スピーカ、マイク及びカメラが設けられたドアホン子機と、前記ドアホン子機と音声通話し前記カメラの撮影した画像情報を表示する表示部が設けられたドアホン親機とを備え、前記ドアホン親機には、来訪者に対する取得済み音声情報と該音声情報と関係付けられた前記来訪者の来訪者情報とを格納する来訪者情報記憶部と、前記マイクからの音声情報と前記取得済み音声情報とが一致するか否かを照合する照合部とが設けられ、前記照合部の照合結果が一致した場合に、前記カメラからの前記来訪者の画像情報と共に前記来訪者情報が前記表示部に表示されるインターホン装置であって、前記ドアホン子機にはセンサ部が設けられ、前記センサ部が来訪者を検出した時から前記カメラが起動し、前記ドアホン親機の表示部に画像情報を表示することを特徴とするインターホン装置。
4. 前記センサ部が来訪者を検出した時から前記照合部が照合を開始することを特徴とする請求項１〜３のいずれかに記載のインターホン装置。
5. 前記親ドアホン機が音声案内部を備え、前記照合部の照合結果が一致しなかった場合には、前記音声案内部から応答を促すメッセージを前記子機のスピーカに送信して出力することを特徴とする請求項１〜４のいずれかに記載のインターホン装置。
6. 前記ドアホン親機には履歴データ記録手段が設けられ、前記子機のマイクから入手した応答に基づいて新規来訪者情報が作成され、前記来訪者情報記憶部には該新規来訪者情報に関係付けられた前記カメラからの画像情報が格納されることを特徴とする請求項３記載のインターホン装置。

Images