JP2009278585A - Visitor contact system, intercom system and calling device - Google Patents

Visitor contact system, intercom system and calling device Download PDF

Info

Publication number
JP2009278585A
JP2009278585A JP2008130490A JP2008130490A JP2009278585A JP 2009278585 A JP2009278585 A JP 2009278585A JP 2008130490 A JP2008130490 A JP 2008130490A JP 2008130490 A JP2008130490 A JP 2008130490A JP 2009278585 A JP2009278585 A JP 2009278585A
Authority
JP
Japan
Prior art keywords
visitor
image data
instruction
unit
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008130490A
Other languages
Japanese (ja)
Inventor
Takahito Tomota
崇仁 友田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Funai Electric Co Ltd
Original Assignee
Funai Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Funai Electric Co Ltd filed Critical Funai Electric Co Ltd
Priority to JP2008130490A priority Critical patent/JP2009278585A/en
Publication of JP2009278585A publication Critical patent/JP2009278585A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To suppress increase in data communication quantity and to improve user friendliness. <P>SOLUTION: The present invention relates to an intercom system 100 including an intercom 1 and a server 2 connected with the intercom and an external terminal 3 via a network N, wherein an external speech device 11, outside a room, of the intercom includes an imaging section for imaging a visitor to produce captured image data, and an internal speech device 12 inside the room, of the intercom includes a communication control section for transmitting to a server a first transmission instruction to an external terminal regarding visitor identification text data on the basis of person identification data registered in a registration DB associated with person face image data when determined by visitor determination processing due to a CPU that the person face image data of a visitor relating to the captured image data is registered on the registration DB, and at the same time for transmitting to the server a second transmission instruction to the external terminal regarding visitor image data on the basis of the captured image data when determined that the person face image data is not registered. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、訪問者に関する情報を外部端末に送信する訪問者連絡システム、インターホンシステム及び呼出装置に関する。   The present invention relates to a visitor communication system, an intercom system, and a calling device that transmit information about visitors to an external terminal.

従来、玄関外側の外部インターホンと、建物内の内部インターホンとを通信可能に接続して、建物内に居る利用者が玄関を開けなくても玄関外側の訪問者と会話することができるインターホンシステムが知られている。   Conventionally, there is an intercom system in which an external intercom outside the entrance and an internal intercom inside the building are communicably connected so that a user inside the building can talk with a visitor outside the entrance without opening the entrance. Are known.

また、インターホンシステムにあっては、利用者が建物内に居ない(不在の)場合に、訪問者が予め登録された人物であると、マイクで集音された要件の音声データとカメラで撮像された画像データが添付された電子メールを所定の携帯電話機や外出先のPCに送信する。一方、訪問者が予め登録されていないと、携帯電話機と接続して音声データや画像データを随時送受信して、当該携帯電話機を介して訪問者と会話することができるものが知られている(例えば、特許文献1参照)。
特開2004−56370号公報
In the interphone system, if the user is not in the building (is absent) and the visitor is a pre-registered person, the sound data collected by the microphone and the image taken by the camera The e-mail with the attached image data is transmitted to a predetermined mobile phone or a PC on the go. On the other hand, when a visitor is not registered in advance, it is known that a user can connect to a mobile phone, transmit and receive voice data and image data as needed, and talk with the visitor via the mobile phone ( For example, see Patent Document 1).
JP 2004-56370 A

しかしながら、上記特許文献1の場合、利用者が不在の際には、訪問者が登録されているか否かに関わらず当該訪問者の画像データが携帯電話機に送信されるため、データ通信量が増加してしまうといった問題があった。例えば、訪問販売員などの第三者が度々訪問する場合に、訪問する毎に携帯電話機と接続するようにすると、その応対が煩わしく、訪問販売員を登録しても、画像データが携帯電話機に送信されるため、データ通信量が増加してしまう。
また、訪問者が予め登録されていない場合に、携帯電話機を介して訪問者と会話する構成としても、必ずしも利用者が電話に出られる状況にあるとは限られないため、有用とは言い難い。
However, in the case of the above-mentioned Patent Document 1, when the user is absent, the image data of the visitor is transmitted to the mobile phone regardless of whether or not the visitor is registered. There was a problem such as. For example, when a third party such as a visiting salesperson visits frequently, connecting to a mobile phone every time the visitor visits, the response is troublesome, and even if the visiting salesperson is registered, the image data is stored in the mobile phone. Since it is transmitted, the amount of data communication increases.
In addition, even when the visitor is not registered in advance, the configuration in which the user talks with the visitor via the mobile phone is not always useful because the user is not always in a situation of answering the phone. .

そこで、本発明の課題は、データ通信量の増加を抑制することができるとともに、使い勝手を向上させることができる訪問者連絡システム、インターホンシステム及び呼出装置を提供することである。   Therefore, an object of the present invention is to provide a visitor communication system, an intercom system, and a call device that can suppress an increase in data communication volume and can improve usability.

上記課題を解決するため、請求項1に記載の発明は、
室外の訪問者により操作される操作部と、前記操作部の操作に基づいて室内の利用者を呼び出す呼出手段とを有する呼出装置と、前記呼出装置及び利用者により使用される外部端末とそれぞれ所定の通信回線を介して接続された訪問者連絡装置とを備える訪問者連絡システムであって、
前記呼出装置は、
前記室外の訪問者を撮像して撮像画像データを生成する撮像手段と、
人物の識別に係る人物識別データと当該人物に係る人物画像データを対応付けて登録する登録手段と、
前記撮像手段により生成された前記撮像画像データと前記登録手段に登録されている前記人物画像データを比較照合して、前記撮像画像データに係る訪問者の人物画像データが前記登録手段に登録されているか否かを判定する訪問者判定手段と、
前記訪問者判定手段により登録されていると判定された場合に、前記人物画像データと対応付けて前記登録手段に登録されている前記人物識別データに基づいて、前記訪問者の識別に係る訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第1指示送信手段と、
前記訪問者判定手段により登録されていないと判定された場合に、前記撮像手段により生成された前記撮像画像データに基づいて、前記訪問者に係る訪問者画像データの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第2指示送信手段と、を備え、
前記訪問者連絡装置は、
前記第1指示送信手段及び前記第2指示送信手段から送信された前記送信指示を受信する指示受信手段と、
前記指示受信手段による前記送信指示の受信に基づいて、前記訪問者識別テキストデータ及び前記訪問者画像データのうち、前記送信指示に応じたデータを前記外部端末に送信するデータ送信手段と、を備えることを特徴としている。
In order to solve the above-mentioned problem, the invention described in claim 1
A calling device having an operation unit operated by an outdoor visitor, a calling unit for calling a user in the room based on an operation of the operation unit, and an external terminal used by the calling device and the user, respectively. A visitor communication system comprising a visitor communication device connected via a communication line of
The calling device is:
Imaging means for imaging the outdoor visitors and generating captured image data;
Registration means for registering the person identification data relating to the person identification and the person image data relating to the person in association with each other;
The captured image data generated by the imaging unit and the person image data registered in the registration unit are compared and collated, and the person image data of the visitor related to the captured image data is registered in the registration unit. Visitor determination means for determining whether or not,
A visitor related to the identification of the visitor based on the person identification data registered in the registration means in association with the person image data when it is determined that the visitor determination means has registered. First instruction transmitting means for transmitting an instruction to transmit the identification text data to the external terminal to the visitor communication device;
When it is determined by the visitor determination means that it is not registered, based on the captured image data generated by the imaging means, an instruction to transmit visitor image data related to the visitor to the external terminal is sent Second instruction transmitting means for transmitting to the visitor communication device,
The visitor communication device comprises:
An instruction receiving means for receiving the transmission instruction transmitted from the first instruction transmitting means and the second instruction transmitting means;
A data transmission unit configured to transmit data corresponding to the transmission instruction to the external terminal out of the visitor identification text data and the visitor image data based on reception of the transmission instruction by the instruction reception unit; It is characterized by that.

請求項2に記載の発明は、請求項1に記載の訪問者連絡システムにおいて、
前記呼出装置は、
前記呼出手段からの呼び出しに対して応答する応答手段と、
前記応答手段からの応答があったか否かを判定する応答判定手段と、を備え、
前記訪問者判定手段は、前記応答判定手段により応答がなかったと判定された場合に、前記訪問者の人物画像データが前記登録手段に登録されているか否かを判定することを特徴としている。
The invention according to claim 2 is the visitor communication system according to claim 1,
The calling device is:
Response means for responding to a call from the calling means;
Response determination means for determining whether or not there is a response from the response means,
The visitor determination means determines whether or not the person image data of the visitor is registered in the registration means when the response determination means determines that there is no response.

請求項3に記載の発明は、請求項2に記載の訪問者連絡システムにおいて、
前記呼出装置にあっては、
前記撮像手段は、前記呼出手段からの呼び出しの際に、前記訪問者を撮像して撮像画像データを生成し、
前記応答判定手段により応答がなかったと判定されると、前記撮像手段により生成された前記撮像画像データに基づいて、人物の顔を検出する顔検出手段と、
前記顔検出手段により顔が検出されなかった場合に、顔検出不可に関連した顔検出不可テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第3指示送信手段と、を備え、
前記訪問者連絡装置にあっては、
前記指示受信手段は、前記第3指示送信手段から送信された前記送信指示を受信し、
前記データ送信手段は、
前記指示受信手段による前記送信指示の受信に基づいて、当該送信指示に応じて前記顔検出不可テキストデータを前記外部端末に送信することを特徴としている。
The invention according to claim 3 is the visitor communication system according to claim 2,
In the calling device,
The imaging means, when called from the calling means, images the visitor to generate captured image data,
A face detection unit that detects a human face based on the captured image data generated by the imaging unit when the response determination unit determines that there is no response;
And a third instruction transmission means for transmitting, to the visitor communication device, an instruction to transmit face detection impossible text data related to face detection failure to the external terminal when no face is detected by the face detection means. ,
In the visitor communication device,
The instruction receiving means receives the transmission instruction transmitted from the third instruction transmitting means;
The data transmission means includes
The face detection impossible text data is transmitted to the external terminal in response to the transmission instruction based on reception of the transmission instruction by the instruction receiving unit.

請求項4に記載の発明は、請求項3に記載の訪問者連絡システムにおいて、
前記登録手段は、前記人物画像データとして、人物の顔に係る人物顔画像データを登録し、
前記訪問者判定手段は、
前記撮像画像データに基づいて前記顔検出手段により検出された顔と前記登録手段に登録されている前記人物顔画像データを比較照合して、前記訪問者の人物顔画像データが前記登録手段に登録されているか否かを判定することを特徴としている。
The invention according to claim 4 is the visitor communication system according to claim 3,
The registration means registers person face image data relating to a person's face as the person image data,
The visitor determination means includes
Based on the captured image data, the face detected by the face detection unit and the person face image data registered in the registration unit are compared and collated, and the person face image data of the visitor is registered in the registration unit. It is characterized by determining whether or not.

請求項5に記載の発明は、請求項1〜4の何れか一項に記載の訪問者連絡システムにおいて、
前記呼出装置は、
前記第1指示送信手段から送信された前記送信指示に関する履歴情報を記録する履歴情報記録手段を備え、
前記第1指示送信手段は、前記履歴情報記録手段に記録され、前記訪問者判定手段により登録されていると判定された訪問者に係る履歴情報に基づいて、当該訪問者の訪問回数を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信することを特徴としている。
The invention according to claim 5 is the visitor communication system according to any one of claims 1 to 4,
The calling device is:
Comprising history information recording means for recording history information relating to the transmission instruction transmitted from the first instruction transmitting means;
The first instruction transmission means is a visit including the number of visits of the visitor based on the history information related to the visitor recorded as recorded in the history information recording means and registered by the visitor determination means. An instruction to transmit the visitor identification text data to the external terminal is transmitted to the visitor communication device.

請求項6に記載の発明は、請求項1〜5の何れか一項に記載の訪問者連絡システムにおいて、
前記呼出装置は、
前記訪問者の要件を受け付ける要件受付手段を備え、
前記第1指示送信手段は、前記要件受付手段により受け付けた要件を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信することを特徴としている。
The invention according to claim 6 is the visitor communication system according to any one of claims 1 to 5,
The calling device is:
Comprising requirements accepting means for accepting the visitor's requirements;
The first instruction transmitting unit transmits a transmission instruction to the external terminal of visitor identification text data including the requirements received by the requirement receiving unit, to the visitor communication device.

請求項7に記載の発明は、
室外の訪問者により操作される操作部と、前記操作部の操作に基づいて室内の利用者を呼び出す呼出手段と、前記呼出手段からの呼び出しに対して応答する応答手段と、前記応答手段からの応答があったか否かを判定する応答判定手段とを有するインターホンと、前記インターホン及び利用者により使用される外部端末とそれぞれ所定の通信回線を介して接続された訪問者連絡装置とを備えるインターホンシステムであって、
前記インターホンは、
前記呼出手段からの呼び出しの際に、前記室外の訪問者を撮像して撮像画像データを生成する撮像手段と、
人物の識別に係る人物識別データと当該人物の顔に係る人物顔画像データを対応付けて登録する登録手段と、
前記応答判定手段により応答がなかったと判定されると、前記撮像手段により生成された前記撮像画像データに基づいて、人物の顔を検出する顔検出手段と、
前記撮像画像データに基づいて前記顔検出手段により検出された顔と前記登録手段に登録されている前記人物顔画像データを比較照合して、前記撮像画像データに係る訪問者の人物顔画像データが前記登録手段に登録されているか否かを判定する訪問者判定手段と、
前記訪問者判定手段により登録されていると判定された場合に、前記人物顔画像データと対応付けて前記登録手段に登録されている前記人物識別データに基づいて、前記訪問者の識別に係る訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第1指示送信手段と、
前記訪問者判定手段により登録されていないと判定された場合に、前記撮像手段により生成された前記撮像画像データに基づいて、前記訪問者に係る訪問者画像データの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第2指示送信手段と、
前記顔検出手段により顔が検出されなかった場合に、顔検出不可に関連した顔検出不可テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第3指示送信手段と、
前記第1指示送信手段から送信された前記送信指示に関する履歴情報を記録する履歴情報記録手段と、
前記訪問者の要件を受け付ける要件受付手段と、を備え、
さらに、前記第1指示送信手段は、
前記履歴情報記録手段に記録され、前記訪問者判定手段により登録されていると判定された訪問者に係る履歴情報に基づいて、当該訪問者の訪問回数を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信し、また、前記要件受付手段により受け付けた要件を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信し、
前記訪問者連絡装置は、
前記第1指示送信手段、前記第2指示送信手段及び第3指示送信手段から送信された前記送信指示を受信する指示受信手段と、
前記指示受信手段による前記送信指示の受信に基づいて、前記訪問者識別テキストデータ、前記訪問者画像データ及び前記顔検出不可テキストデータのうち、前記送信指示に応じたデータを前記外部端末に送信するデータ送信手段と、を備えることを特徴としている。
The invention described in claim 7
An operation unit operated by an outdoor visitor, a calling unit that calls a user in the room based on the operation of the operation unit, a response unit that responds to a call from the calling unit, and a response from the response unit An intercom system comprising an interphone having response determination means for determining whether or not there is a response, and a visitor communication device connected to the interphone and an external terminal used by a user via a predetermined communication line, respectively. There,
The intercom is
When calling from the calling unit, an imaging unit that images a visitor outside the room and generates captured image data;
Registration means for registering the person identification data relating to the person identification and the person face image data relating to the face of the person in association with each other;
A face detection unit that detects a human face based on the captured image data generated by the imaging unit when the response determination unit determines that there is no response;
Based on the captured image data, the face detected by the face detection unit and the human face image data registered in the registration unit are compared and collated, and the human face image data of the visitor related to the captured image data is obtained. A visitor determination means for determining whether or not it is registered in the registration means;
When it is determined by the visitor determination means that the visitor is associated with the person face image data, the visit related to the visitor identification is based on the person identification data registered in the registration means. First instruction transmission means for transmitting a transmission instruction of the person identification text data to the external terminal to the visitor communication device;
When it is determined by the visitor determination means that it is not registered, based on the captured image data generated by the imaging means, an instruction to transmit visitor image data related to the visitor to the external terminal is sent Second instruction transmission means for transmitting to the visitor communication device;
A third instruction transmitting means for transmitting, to the visitor communication device, a transmission instruction to the external terminal of face detection impossible text data related to face detection failure when no face is detected by the face detection means;
History information recording means for recording history information related to the transmission instruction transmitted from the first instruction transmitting means;
Requirements receiving means for receiving the requirements of the visitor, and
Furthermore, the first instruction transmission means includes
The external terminal of visitor identification text data including the number of visits of the visitor based on the history information relating to the visitor recorded as recorded in the history information recording means and registered by the visitor determination means A transmission instruction to the visitor communication apparatus, and a transmission instruction to the external terminal of visitor identification text data including the requirements received by the requirement reception means is transmitted to the visitor communication apparatus,
The visitor communication device comprises:
An instruction receiving means for receiving the transmission instructions transmitted from the first instruction transmitting means, the second instruction transmitting means and the third instruction transmitting means;
Based on reception of the transmission instruction by the instruction receiving means, data corresponding to the transmission instruction is transmitted to the external terminal among the visitor identification text data, the visitor image data, and the face detection impossible text data. And a data transmission means.

請求項8に記載の発明は、
室外の訪問者により操作される操作部と、前記操作部の操作に基づいて室内の利用者を呼び出す呼出手段とを備え、利用者により使用される外部端末及び訪問者連絡装置とそれぞれ所定の通信回線を介して接続された呼出装置であって、
前記室外の訪問者を撮像して撮像画像データを生成する撮像手段と、
人物の識別に係る人物識別データと当該人物に係る人物画像データを対応付けて登録する登録手段と、
前記撮像手段により生成された前記撮像画像データと前記登録手段に登録されている前記人物画像データを比較照合して、前記撮像画像データに係る訪問者の人物画像データが前記登録手段に登録されているか否かを判定する訪問者判定手段と、
前記訪問者判定手段により登録されていると判定された場合に、前記人物画像データと対応付けて前記登録手段に登録されている前記人物識別データに基づいて、前記訪問者の識別に係る訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第1指示送信手段と、
前記訪問者判定手段により登録されていないと判定された場合に、前記撮像手段により生成された前記撮像画像データに基づいて、前記訪問者に係る訪問者画像データの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第2指示送信手段と、を備えることを特徴としている。
The invention according to claim 8 provides:
An operation unit operated by an outdoor visitor and a calling unit that calls an indoor user based on the operation of the operation unit, and each of the predetermined communication with an external terminal and a visitor communication device used by the user A calling device connected via a line,
Imaging means for imaging the outdoor visitors and generating captured image data;
Registration means for registering the person identification data relating to the person identification and the person image data relating to the person in association with each other;
The captured image data generated by the imaging unit and the person image data registered in the registration unit are compared and collated, and the person image data of the visitor related to the captured image data is registered in the registration unit. Visitor determination means for determining whether or not,
A visitor related to the identification of the visitor based on the person identification data registered in the registration means in association with the person image data when it is determined that the visitor determination means has registered. First instruction transmitting means for transmitting an instruction to transmit the identification text data to the external terminal to the visitor communication device;
When it is determined by the visitor determination means that it is not registered, based on the captured image data generated by the imaging means, an instruction to transmit visitor image data related to the visitor to the external terminal is sent And a second instruction transmitting means for transmitting to the visitor communication device.

本発明によれば、訪問者の人物画像データが登録されている場合には、人物画像データと対応付けられている人物識別データに基づいて、訪問者の識別に係る訪問者識別テキストデータの外部端末に対する送信指示を訪問者連絡装置に送信することにより、訪問者を認識するための撮像画像データを送信する場合と比較して、呼出装置と訪問者連絡装置間並びに訪問者連絡装置と外部端末間におけるデータ通信量を削減することができる。
一方、訪問者の人物画像データが登録されていない場合には、撮像画像データに基づいて、訪問者に係る訪問者画像データの外部端末に対する送信指示を訪問者連絡装置に送信することにより、利用者は訪問者画像データに係る画像を視認することで訪問者が誰であるか認識することができる。
従って、データ通信量の増加を抑制することができるとともに、使い勝手を向上させることができる。
According to the present invention, when the person image data of the visitor is registered, the outside of the visitor identification text data related to the visitor identification is based on the person identification data associated with the person image data. Compared with the case of transmitting captured image data for recognizing a visitor by transmitting a transmission instruction for the terminal to the visitor communication device, between the calling device and the visitor communication device, and the visitor communication device and the external terminal The amount of data communication between them can be reduced.
On the other hand, when the person image data of the visitor is not registered, it is used by transmitting a transmission instruction to the external terminal of the visitor image data related to the visitor to the visitor communication device based on the captured image data. The person can recognize who the visitor is by visually recognizing the image related to the visitor image data.
Therefore, an increase in the amount of data communication can be suppressed, and usability can be improved.

以下に、本発明について、図面を用いて具体的な態様を説明する。ただし、発明の範囲は、図示例に限定されない。
図1は、本発明を適用した好適な一実施形態として例示するインターホンシステム100を模式的に示す図である。
Hereinafter, specific embodiments of the present invention will be described with reference to the drawings. However, the scope of the invention is not limited to the illustrated examples.
FIG. 1 is a diagram schematically showing an intercom system 100 exemplified as a preferred embodiment to which the present invention is applied.

本実施形態のインターホンシステム100は、利用者が不在の場合に、インターホン(呼出装置)1の撮像部113により撮像された訪問者が登録されている場合に、訪問者識別テキストデータを含む電子メールをサーバ(訪問者連絡装置)2から所定のネットワーク(通信回線)Nを介して外部端末3に送信する一方で、訪問者が登録されていない場合には、訪問者画像データを含む電子メールをサーバ2から所定のネットワークNを介して外部端末3に送信するものである。   The interphone system 100 according to the present embodiment is an e-mail including visitor identification text data when a visitor imaged by the imaging unit 113 of the interphone (calling device) 1 is registered when there is no user. Is transmitted from the server (visitor communication device) 2 to the external terminal 3 via a predetermined network (communication line) N. On the other hand, if the visitor is not registered, an e-mail including visitor image data is sent. The data is transmitted from the server 2 to the external terminal 3 via a predetermined network N.

具体的には、図1に示すように、インターホンシステム100は、玄関などの建物Bの室外に配設された外部通話装置11及び室内に配設された内部通話装置12を有するインターホン1と、室外に存する利用者により使用される外部端末3と、利用者が不在の場合に、インターホン1の登録DB125gにおける訪問者の登録の有無に応じて所定の電子メールを外部端末3に送信するサーバ2と、を備え、内部通話装置12と外部端末3とサーバ2は、所定のネットワークNを介して所定のデータを通信可能に接続されている。   Specifically, as shown in FIG. 1, an interphone system 100 includes an interphone 1 having an external communication device 11 disposed outside a room of a building B such as a front door, and an internal communication device 12 disposed indoors. An external terminal 3 used by a user who exists outside the room, and a server 2 that transmits a predetermined electronic mail to the external terminal 3 depending on whether or not a visitor is registered in the registration DB 125g of the interphone 1 when the user is absent. The internal call device 12, the external terminal 3, and the server 2 are connected via a predetermined network N so that predetermined data can be communicated.

ネットワークNは、専用線や既存の一般公衆回線を利用して構築された通信ネットワークであり、LAN(Local Area Network)やWAN(Wide Area Network)等の様々な回線形態を適用することが可能である。
また、ネットワークNには、例えば、電話回線網、IPネットワーク、VoIP(Voice over Internet Protocol)ゲートウェイ、インターネットサービスプロバイダ等が含まれる。
The network N is a communication network constructed using a dedicated line or an existing general public line, and various line forms such as a LAN (Local Area Network) and a WAN (Wide Area Network) can be applied. is there.
The network N includes, for example, a telephone line network, an IP network, a VoIP (Voice over Internet Protocol) gateway, an Internet service provider, and the like.

先ず、インターホン1の外部通話装置11について、図2を参照して説明する。
図2は、外部通話装置11の要部構成を示すブロック図である。
図2に示すように、外部通話装置11は、操作入力部111と、通話部112と、撮像部113と、通信制御部114と、記憶部115と、CPU116等を備えて構成されている。
First, the external communication device 11 of the intercom 1 will be described with reference to FIG.
FIG. 2 is a block diagram showing a main configuration of the external communication device 11.
As shown in FIG. 2, the external call device 11 includes an operation input unit 111, a call unit 112, an imaging unit 113, a communication control unit 114, a storage unit 115, a CPU 116, and the like.

操作入力部111は、例えば、訪問者により操作され、室内の人間(利用者)を呼び出すための呼出ボタン111aを備えている。そして、訪問者による呼出ボタン111aの所定操作に基づいて呼出信号をCPU116に出力する。
ここで、呼出ボタン111a及びCPU116は、室内の利用者を呼び出す呼出手段を構成している。
The operation input unit 111 includes, for example, a call button 111a that is operated by a visitor and calls a person (user) in the room. And a call signal is output to CPU116 based on predetermined operation of the call button 111a by a visitor.
Here, the calling button 111a and the CPU 116 constitute calling means for calling a user in the room.

通話部112は、利用者との会話に使用されるものであり、具体的には、マイク112a、スピーカ112b、A/D変換部及びD/A変換部(図示略)を有している。
そして、マイク112aから入力される訪問者の送話音声をA/D変換処理して、その送話音声データをCPU116に出力するとともに、CPU116から出力されて入力される受話音声データ等の音声データをD/A変換処理して、利用者の音声をスピーカ112bから出力する。
The call unit 112 is used for a conversation with a user, and specifically includes a microphone 112a, a speaker 112b, an A / D conversion unit, and a D / A conversion unit (not shown).
The voice data of the visitor input from the microphone 112a is A / D converted, and the voice data of the voice is output to the CPU 116 and received voice data such as the received voice data input from the CPU 116. Is D / A converted, and the user's voice is output from the speaker 112b.

撮像部113は、撮像手段として、訪問者(被写体)を連続して撮像して複数の画像フレーム(撮像画像データ)を生成する。
具体的には、撮像部113は、撮像レンズ113aと、撮像レンズ113aを通過した被写体像を二次元の画像信号に変換するCCD(Charge Coupled Device)やCMOS(Complementary Metal-oxide Semiconductor)等の電子撮像部113bと、電子撮像部113bに所定の露出時間で被写体を撮像させ、当該電子撮像部113bの撮像領域から画像信号(画像フレーム)を所定のフレームレートで読み出す処理の実行を制御する撮影制御部113c等を備えている。
The imaging unit 113 continuously captures a visitor (subject) as an imaging unit and generates a plurality of image frames (captured image data).
Specifically, the imaging unit 113 includes an imaging lens 113a and an electronic device such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal-oxide Semiconductor) that converts a subject image that has passed through the imaging lens 113a into a two-dimensional image signal. Shooting control for controlling the execution of processing for causing the imaging unit 113b and the electronic imaging unit 113b to image a subject with a predetermined exposure time and reading an image signal (image frame) from the imaging region of the electronic imaging unit 113b at a predetermined frame rate Part 113c and the like.

なお、撮像部113の撮影範囲は、例えば、呼出ボタン111aを操作する訪問者の顔を中心とした範囲に設定されているのが好ましい。また、撮像部113の撮影範囲は、例えば、手動や自動により調整可能とされていても良い。   Note that the shooting range of the imaging unit 113 is preferably set to a range centering on the face of the visitor who operates the call button 111a, for example. Moreover, the imaging range of the imaging unit 113 may be adjustable manually or automatically, for example.

また、電子撮像部113bから出力される画像信号に対して所定の画像処理を施す信号処理部を備えるようにしても良い。   Further, a signal processing unit that performs predetermined image processing on an image signal output from the electronic imaging unit 113b may be provided.

通信制御部114は、所定の通信ケーブルを介して接続された内部通話装置12の通信制御部124との間で情報通信を行うためのものである。
具体的には、通信制御部114は、訪問者による操作入力部111の呼出ボタン111aの所定操作に基づいて、呼出信号を内部通話装置12に送信し、また、通話部112のマイク112aにより集音された訪問者の音声に係る音声データや撮像部113により生成された訪問者の画像に係る訪問者画像データを内部通話装置12に送信する。また、顔検出処理(後述)にて顔が検出されると、顔検出信号を内部通話装置12に送信する。
また、通信制御部114は、内部通話装置12の通信制御部124から送信された利用者の音声データを受信する。
The communication control unit 114 is for performing information communication with the communication control unit 124 of the internal call device 12 connected via a predetermined communication cable.
Specifically, the communication control unit 114 transmits a call signal to the internal call device 12 based on a predetermined operation of the call button 111 a of the operation input unit 111 by a visitor, and is collected by the microphone 112 a of the call unit 112. The voice data related to the sound of the visitor and the visitor image data related to the visitor image generated by the imaging unit 113 are transmitted to the internal call device 12. Further, when a face is detected by face detection processing (described later), a face detection signal is transmitted to the internal call device 12.
Further, the communication control unit 114 receives the voice data of the user transmitted from the communication control unit 124 of the internal call device 12.

記憶部115は、例えば、RAM、ROM等から構成され、外部通話装置11で実行可能なシステムプログラム、当該システムプログラムで実行可能な各種処理プログラム、これら各種処理プログラムを実行する際に使用されるデータ等を記憶する。   The storage unit 115 is composed of, for example, a RAM, a ROM, and the like, and is a system program that can be executed by the external call device 11, various processing programs that can be executed by the system program, and data that is used when these various processing programs are executed. Memorize etc.

CPU116は、当該外部通話装置11の各部を統括的に制御するものであり、記憶部115に記憶された各種処理プログラムに従って各種の制御動作を行う。その際に、CPU116は、記憶部115の作業用メモリ内に各種処理結果を格納させる。   The CPU 116 comprehensively controls each unit of the external call device 11 and performs various control operations according to various processing programs stored in the storage unit 115. At that time, the CPU 116 stores various processing results in the working memory of the storage unit 115.

次に、インターホン1の内部通話装置12について、図3を参照して説明する。
図3は、内部通話装置12の要部構成を示すブロック図である。
図3に示すように、内部通話装置12は、操作入力部121と、通話部122と、表示部123と、通信制御部124と、記憶部125と、CPU126等を備えて構成されている。
Next, the internal communication device 12 of the intercom 1 will be described with reference to FIG.
FIG. 3 is a block diagram showing a main configuration of the internal communication device 12.
As shown in FIG. 3, the internal call device 12 includes an operation input unit 121, a call unit 122, a display unit 123, a communication control unit 124, a storage unit 125, a CPU 126, and the like.

操作入力部121は、例えば、応答ボタン121aや、数値、文字等を入力するためのデータ入力キーや、データの選択、送り操作等を行うための上下左右移動キーや各種機能キー等を備え、ユーザにより押下された応答ボタン121aやキーの押下信号をCPU126に出力する。
応答ボタン121aは、訪問者の呼出しに応答するためのボタンである。具体的には、応答ボタン121aは、利用者による所定操作に基づいて、当該内部通話装置12と外部通話装置11を接続するための応答信号をCPU126に出力する。そして、応答ボタン121aから送信された応答信号を受信すると、CPU126は、外部通話装置11と内部通話装置12間の回線を通話可能状態となるように接続する。
ここで、応答ボタン121a及びCPU126は、外部通話装置11からの呼出しに対して応答する応答手段を構成している。
The operation input unit 121 includes, for example, a response button 121a, a data input key for inputting a numerical value, a character, and the like, an up / down / left / right movement key for performing data selection, a feed operation, and various function keys. The response button 121a pressed by the user or a key pressing signal is output to the CPU 126.
The response button 121a is a button for responding to a visitor's call. Specifically, the response button 121a outputs a response signal for connecting the internal call device 12 and the external call device 11 to the CPU 126 based on a predetermined operation by the user. Then, when receiving the response signal transmitted from the response button 121a, the CPU 126 connects the line between the external call device 11 and the internal call device 12 so as to be able to make a call.
Here, the response button 121a and the CPU 126 constitute response means for responding to a call from the external communication device 11.

なお、応答ボタン121aを備えずに、利用者による送受話器を取る操作や置く操作に応じてフックスイッチが上げ下げされることで、外部通話装置11と内部通話装置12間の回線を接続状態としたり回線断状態とするようにしても良い。   In addition, without providing the response button 121a, the line between the external call device 11 and the internal call device 12 can be set in a connected state by raising and lowering the hook switch according to the user's operation of picking up and placing the handset or placing it. The line may be disconnected.

また、操作入力部121は、利用者による各種キーの所定操作に基づいて、登録DB125gに登録される人物の名前、性別、生年月日、住所、勤務先等の人物の識別に係る人物識別データを入力する(人物登録処理)。   In addition, the operation input unit 121 performs personal identification data relating to identification of a person such as the name, gender, date of birth, address, and office of a person registered in the registration DB 125g based on predetermined operations of various keys by the user. Is input (person registration process).

通話部122は、訪問者との会話に使用される送受話器であり、具体的には、マイク122a、スピーカ122b、A/D変換部及びD/A変換部(図示略)を有している。
そして、マイク122aから入力される利用者の送話音声をA/D変換処理して、その送話音声データをCPU126に出力するとともに、CPU126から出力されて入力される受話音声データや、呼出音、操作確認音等の音声データをD/A変換処理して、スピーカ122bから出力する。
The call unit 122 is a handset used for a conversation with a visitor, and specifically includes a microphone 122a, a speaker 122b, an A / D conversion unit, and a D / A conversion unit (not shown). .
The user's transmission voice input from the microphone 122a is A / D converted, and the transmission voice data is output to the CPU 126. The audio data such as the operation confirmation sound is D / A converted and output from the speaker 122b.

表示部123は、例えば、LCD(Liquid Crystal Display)等のディスプレイから構成され、CPU126の制御下にて各種情報を表示画面に表示する。具体的には、表示部123は、外部通信装置11の撮像部113により撮像された訪問者に係る訪問者画像データに基づいて、訪問者の画像を表示する。   The display unit 123 includes a display such as an LCD (Liquid Crystal Display), for example, and displays various information on the display screen under the control of the CPU 126. Specifically, the display unit 123 displays the visitor image based on the visitor image data relating to the visitor imaged by the imaging unit 113 of the external communication device 11.

通信制御部124は、所定の通信ケーブルを介して接続された外部通話装置11の通信制御部114との間で情報通信を行うためのものである。
具体的には、通信制御部124は、外部通話装置11の通信制御部114から送信された呼出信号や訪問者の撮像画像データや音声データ等を受信する一方で、利用者の音声に係る音声データを通信制御部114に送信する。
The communication control unit 124 is for performing information communication with the communication control unit 114 of the external call device 11 connected via a predetermined communication cable.
Specifically, the communication control unit 124 receives the call signal transmitted from the communication control unit 114 of the external call device 11, the captured image data of the visitor, the voice data, and the like, while the voice related to the voice of the user. Data is transmitted to the communication control unit 114.

また、通信制御部124は、例えば、ネットワークインターフェースカード(図示略)等を備え、ネットワークNを介して接続されたサーバ2や外部端末3との間で情報通信を行うためのものである。
具体的には、通信制御部124は、外部通話装置11と外部端末3間の通話を仲介する場合には、CPU126の制御下にて、外部通話装置11から送信され受信した音声データを所定の符号化方式に従って圧縮、符号化してVoIPパケットとして、ネットワークNを介して外部端末3に送信する。また、通信制御部124は、ネットワークNを介して外部端末3から送信され受信したVoIPパケットを符号化方式に対応した復号化方式に従って伸張、復号化して音声データを生成する。その後、通信制御部124は、当該音声データを外部通話装置11に送信する。
The communication control unit 124 includes, for example, a network interface card (not shown) and the like, and is for performing information communication with the server 2 and the external terminal 3 connected via the network N.
Specifically, when mediating a call between the external call device 11 and the external terminal 3, the communication control unit 124 receives the voice data transmitted and received from the external call device 11 under the control of the CPU 126. It is compressed and encoded according to the encoding method, and is transmitted to the external terminal 3 via the network N as a VoIP packet. In addition, the communication control unit 124 decompresses and decodes the VoIP packet transmitted and received from the external terminal 3 via the network N according to a decoding method corresponding to the encoding method, and generates audio data. Thereafter, the communication control unit 124 transmits the voice data to the external call device 11.

また、通信制御部124は、第1指示送信手段として、訪問者判定処理にて訪問者の人物顔画像データが登録DB125gに登録されていると判定された場合に、人物画像データと対応付けて登録DB125gに登録されている人物識別データに基づいて、訪問者の識別に係る訪問者識別テキストデータを含む電子メールの外部端末3への第1送信指示をネットワークNを介してサーバ2に送信する。
また、通信制御部124は、第2指示送信手段として、訪問者判定処理にて訪問者の人物顔画像データが登録DB125gに登録されていないと判定された場合に、撮像部113により生成された撮像画像データに基づいて、訪問者に係る訪問者画像データを含む電子メールの外部端末3への第2送信指示をネットワークNを介してサーバ2に送信する。
また、通信制御部124は、第3指示送信手段として、顔検出処理にて顔が検出されなかった場合に、顔検出不可に関連した顔検出不可テキストデータを含む電子メールの外部端末3への第3送信指示をネットワークNを介してサーバ2に送信する。
In addition, when the visitor determination process determines that the visitor's person face image data is registered in the registration DB 125g as the first instruction transmission unit, the communication control unit 124 associates with the person image data. Based on the person identification data registered in the registration DB 125g, a first transmission instruction to the external terminal 3 of an e-mail including visitor identification text data relating to visitor identification is transmitted to the server 2 via the network N. .
Further, the communication control unit 124 is generated by the imaging unit 113 when the visitor determination process determines that the visitor person face image data is not registered in the registration DB 125g as the second instruction transmission unit. Based on the captured image data, a second transmission instruction to the external terminal 3 of an e-mail including visitor image data relating to the visitor is transmitted to the server 2 via the network N.
Further, the communication control unit 124, as a third instruction transmission unit, sends an e-mail to the external terminal 3 that includes face detection impossible text data related to face detection failure when a face is not detected in the face detection process. A third transmission instruction is transmitted to the server 2 via the network N.

記憶部125は、例えば、RAM、ROM等から構成され、外部通話装置11で実行可能なシステムプログラム、当該システムプログラムで実行可能な各種処理プログラム、これら各種処理プログラムを実行する際に使用されるデータ等を記憶する。
具体的には、記憶部125には、応答判定プログラム125a、顔検出プログラム125b、訪問者判定プログラム125c、第1送信制御プログラム125d、第2送信制御プログラム125e、第3送信制御プログラム125fが記憶されている。
The storage unit 125 includes, for example, a RAM, a ROM, and the like, and is a system program that can be executed by the external call device 11, various processing programs that can be executed by the system program, and data that is used when executing these various processing programs Memorize etc.
Specifically, the storage unit 125 stores a response determination program 125a, a face detection program 125b, a visitor determination program 125c, a first transmission control program 125d, a second transmission control program 125e, and a third transmission control program 125f. ing.

応答判定プログラム125a、CPU126を応答判定手段として機能させるものである。即ち、応答判定プログラム125aは、外部通話装置11から送信され通信制御部124により受信した呼出信号に対して応答があったか否かを判定する応答判定処理に係る機能をCPU126に実現させるためのプログラムである。
具体的には、CPU126による応答判定プログラム125aの実行に基づいて、訪問者による呼出ボタン111aの所定操作に応じて呼出信号が内部通話装置12に送信された場合に、利用者による応答ボタン121aが所定操作されたか否かを判定する。
The response determination program 125a and the CPU 126 function as response determination means. That is, the response determination program 125a is a program for causing the CPU 126 to realize a function related to the response determination process for determining whether or not there is a response to the call signal transmitted from the external call device 11 and received by the communication control unit 124. is there.
Specifically, based on the execution of the response determination program 125a by the CPU 126, when a call signal is transmitted to the internal call device 12 in response to a predetermined operation of the call button 111a by the visitor, the response button 121a by the user is displayed. It is determined whether or not a predetermined operation has been performed.

顔検出プログラム125bは、CPU126を顔検出手段として機能させるものである。即ち、顔検出プログラム125bは、撮像部113により生成された撮像画像フレームから人物の顔を検出する顔検出処理の実行に係る機能をCPU126に実現させるためのプログラムである。
具体的には、CPU126による顔検出プログラム125bの実行に基づいて、外部通話装置11から送信された撮像画像フレームについて顔画像探索範囲を画像全体として顔画像探索枠を所定方向に走査して、目、鼻、ロなどに相当する特徴部分(顔パーツ)を特定して、各顔パーツの位置関係から顔であるか否かを判定し、所定の判定値(閾値)よりも大きく顔であると判定されると当該探索枠領域を顔とみなす。
The face detection program 125b causes the CPU 126 to function as face detection means. That is, the face detection program 125b is a program for causing the CPU 126 to realize a function related to execution of face detection processing for detecting a human face from a captured image frame generated by the imaging unit 113.
Specifically, based on the execution of the face detection program 125b by the CPU 126, the face image search frame is scanned in a predetermined direction with the face image search range as the entire image for the captured image frame transmitted from the external call device 11, and the eye is scanned. , A characteristic part (face part) corresponding to nose, batter, etc. is specified, and it is determined whether or not it is a face from the positional relationship of each face part. If the face is larger than a predetermined determination value (threshold) If determined, the search frame area is regarded as a face.

訪問者判定プログラム125cは、CPU126を訪問者判定手段として機能させるものである。即ち、訪問者判定プログラム125cは、応答判定処理にて応答がなかったと判定された場合に、撮像部113により生成された撮像画像データと登録DB125gに登録されている人物顔画像データを比較照合して、撮像画像データに係る訪問者の人物顔画像データが登録DB125gに登録されているか否かを判定する訪問者判定処理に係る機能をCPU126に実現させるためのプログラムである。
具体的には、CPU126による訪問者判定プログラム125cの実行に基づいて、利用者により応答ボタン121aが操作されなかった場合に、外部通話装置11から送信された撮像画像データのうちの顔検出処理にて検出された顔と登録DB125gに登録されている人物顔画像データを比較照合して、撮像画像データに係る訪問者の人物顔画像データが登録DB125gに登録されているか否かを判定する。
The visitor determination program 125c causes the CPU 126 to function as a visitor determination unit. That is, the visitor determination program 125c compares and collates the captured image data generated by the imaging unit 113 and the human face image data registered in the registration DB 125g when it is determined that there is no response in the response determination process. This is a program for causing the CPU 126 to realize a function related to a visitor determination process for determining whether or not a visitor's human face image data related to captured image data is registered in the registration DB 125g.
Specifically, based on the execution of the visitor determination program 125c by the CPU 126, when the response button 121a is not operated by the user, face detection processing in the captured image data transmitted from the external call device 11 is performed. The face detected in this way and the human face image data registered in the registration DB 125g are compared and collated to determine whether the human face image data of the visitor related to the captured image data is registered in the registration DB 125g.

第1送信制御プログラム125dは、訪問者判定処理にて訪問者の人物顔画像データが登録DB125gに登録されていると判定された場合に、人物顔画像データと対応付けて登録DB125gに登録されている人物識別データに基づいて、訪問者の識別に係る訪問者識別テキストデータを含む電子メールの外部端末3への第1送信指示をサーバ2に対して通信制御部124により送信させる処理に係る機能をCPU126に実現させるためのプログラムである。
具体的には、CPU126による第1送信制御プログラム125dの実行に基づいて、人物識別データと、訪問者識別テキストデータを含む電子メールの外部端末3への第1送信指示を通信制御部124によりサーバ2に送信する。
The first transmission control program 125d is registered in the registration DB 125g in association with the human face image data when it is determined in the visitor determination process that the human face image data of the visitor is registered in the registration DB 125g. A function related to processing in which the communication control unit 124 transmits a first transmission instruction to the external terminal 3 of an e-mail including visitor identification text data relating to visitor identification based on the person identification data being stored Is a program for causing the CPU 126 to realize the above.
Specifically, based on the execution of the first transmission control program 125d by the CPU 126, the communication control unit 124 sends a first transmission instruction to the external terminal 3 of the email including the person identification data and the visitor identification text data. 2 to send.

なお、上記の処理にあっては、訪問者判定処理にて人物識別データが登録DB125gに登録されていると判定された訪問者に係る送信履歴情報が記憶部125の履歴情報記憶領域に記憶されているか否かを判定後、送信履歴情報が記憶されていると判定された場合には、CPU126は、人物識別データと、これまでの第1送信指示の送信回数と、当該訪問者の訪問回数を含む訪問者識別テキストデータを含む電子メールの外部端末3への第1送信指示を送信する。   In the above process, the transmission history information related to the visitor for which it is determined in the visitor determination process that the person identification data is registered in the registration DB 125g is stored in the history information storage area of the storage unit 125. If it is determined that the transmission history information is stored, the CPU 126 determines the person identification data, the number of transmissions of the first transmission instruction so far, and the number of visits of the visitor. The first transmission instruction to the external terminal 3 of the electronic mail including the visitor identification text data including is transmitted.

第2送信制御プログラム125eは、訪問者判定処理にて訪問者の人物顔画像データが登録DB125gに登録されていないと判定された場合に、撮像部113により生成された撮像画像データに基づいて、訪問者に係る訪問者画像データを含む電子メールの外部端末3への第2送信指示をサーバ2に対して通信制御部124により送信させる処理に係る機能をCPU126に実現させるためのプログラムである。
具体的には、CPU126による第2送信制御プログラム125eの実行に基づいて、撮像画像データと、訪問者画像データを含む電子メールの外部端末3への第2送信指示を通信制御部124によりサーバ2に送信する。
The second transmission control program 125e is based on the captured image data generated by the imaging unit 113 when it is determined in the visitor determination process that the person's face image data of the visitor is not registered in the registration DB 125g. This is a program for causing the CPU 126 to realize a function related to processing of causing the communication control unit 124 to transmit a second transmission instruction to the external terminal 3 of an electronic mail including visitor image data relating to a visitor.
Specifically, based on the execution of the second transmission control program 125e by the CPU 126, the communication control unit 124 sends a second transmission instruction to the external terminal 3 for the captured image data and the email including the visitor image data by the server 2. Send to.

第3送信制御プログラム125fは、顔検出処理にて顔が検出されなかった場合に、顔検出不可に関連した顔検出不可テキストデータを含む電子メールの外部端末3への第3送信指示をサーバ2に対して通信制御部124により送信させる処理に係る機能をCPU126に実現させるためのプログラムである。
具体的には、CPU126による第3送信制御プログラム125fの実行に基づいて、顔検出不可テキストデータを含む電子メールの外部端末3への第3送信指示を通信制御部124によりサーバ2に送信する。
The third transmission control program 125f instructs the server 2 to transmit a third transmission instruction to the external terminal 3 of the e-mail including the face detection impossible text data related to the face detection failure when the face is not detected in the face detection process. Is a program for causing the CPU 126 to realize a function related to processing to be transmitted by the communication control unit 124.
Specifically, based on the execution of the third transmission control program 125f by the CPU 126, the communication control unit 124 transmits a third transmission instruction to the external terminal 3 of the e-mail including the face detection impossible text data to the server 2.

また、記憶部125は、登録DB(データベース)125gを備えている。
登録DB125gは、登録手段として、複数の人物の識別に係る人物識別データと当該人物の顔に係る人物顔画像データを対応付けて登録するものである。
即ち、登録DB125gには、例えば、利用者による操作入力部121の所定操作に基づいて入力された、複数の人物の各々の名前、性別、生年月日、勤務先等の各人物の識別に係る人物識別データと、以前に訪問したことがあり撮像部113により撮像された画像データ、或いは、図示しないUSB端子やメモリカード等を介して入力された画像データ等の人物顔画像データを対応付けて登録されている。
The storage unit 125 includes a registration DB (database) 125g.
The registration DB 125g registers, as registration means, the person identification data relating to the identification of a plurality of persons and the person face image data relating to the faces of the persons in association with each other.
That is, the registration DB 125g relates to the identification of each person such as the name, sex, date of birth, and workplace of each of a plurality of persons input based on a predetermined operation of the operation input unit 121 by the user. The person identification data is associated with human face image data such as image data that has been visited before and was picked up by the image pickup unit 113, or image data input through a USB terminal or a memory card (not shown). It is registered.

また、記憶部125は、履歴情報記憶領域(図示略)を備えている。
履歴情報記憶領域は、例えば、通話日時、通話時間等の通話履歴情報、第1送信指示に係る送信履歴情報、撮像画像データ及び第2送信指示に係る送信履歴情報、第3送信指示に係る送信履歴情報等を記憶するものである。
なお、第1送信指示に係る送信履歴情報としては、これまでにサーバ2に送信された第1送信指示の送信回数が記憶されている。
ここで、履歴情報記憶領域は、通信制御部124から送信された第1送信指示に関する履歴情報を記録する履歴情報記録手段を構成している。
The storage unit 125 includes a history information storage area (not shown).
The history information storage area includes, for example, call history information such as call date and time, call time, transmission history information related to the first transmission instruction, transmission history information related to the captured image data and second transmission instruction, and transmission related to the third transmission instruction. History information and the like are stored.
The transmission history information related to the first transmission instruction stores the number of transmissions of the first transmission instruction transmitted to the server 2 so far.
Here, the history information storage area constitutes history information recording means for recording history information related to the first transmission instruction transmitted from the communication control unit 124.

CPU126は、当該内部通話装置12の各部を統括的に制御するものであり、記憶部125に記憶された各種処理プログラムに従って各種の制御動作を行う。その際に、CPU126は、記憶部125の作業用メモリ内に各種処理結果を格納させ、必要に応じてその処理結果を表示部123に表示させる。   The CPU 126 comprehensively controls each unit of the internal call device 12 and performs various control operations according to various processing programs stored in the storage unit 125. At that time, the CPU 126 stores various processing results in the working memory of the storage unit 125 and causes the display unit 123 to display the processing results as necessary.

次に、サーバ2について、図4を参照して説明する。
図4は、サーバ2の要部構成を示すブロック図である。
図4に示すように、サーバ2は、操作入力部21と、表示部22、通信制御部23と、記憶部24と、CPU25等を備えて構成されている。
Next, the server 2 will be described with reference to FIG.
FIG. 4 is a block diagram illustrating a main configuration of the server 2.
As shown in FIG. 4, the server 2 includes an operation input unit 21, a display unit 22, a communication control unit 23, a storage unit 24, a CPU 25, and the like.

操作入力部21は、例えば、数値、文字等を入力するためのデータ入力キーや、データの選択、送り操作等を行うための上下左右移動キーや各種機能キー等によって構成されるキーボードやマウス等を備え、ユーザにより押下されたキーの押下信号をCPU25に出力する。   The operation input unit 21 is, for example, a keyboard or mouse configured by data input keys for inputting numerical values, characters, etc., up / down / left / right movement keys for performing data selection, feeding operations, etc., various function keys, and the like. And a key pressing signal pressed by the user is output to the CPU 25.

表示部22は、例えば、LCD(Liquid Crystal Display)等のディスプレイから構成され、CPU25の制御下にて各種情報を表示画面に表示する。
なお、表示部22は、サーバ本体と一体として設けられていても良いし、別体として設けられていても良い。
The display unit 22 includes a display such as an LCD (Liquid Crystal Display), for example, and displays various types of information on the display screen under the control of the CPU 25.
The display unit 22 may be provided integrally with the server main body or may be provided as a separate body.

通信制御部23は、例えば、ネットワークインターフェースカード(図示略)等を備え、ネットワークNを介して接続された内部通話装置12や外部端末3との間で情報通信を行うためのものである。
具体的には、通信制御部23は、指示受信手段として、内部通話装置12の通信制御部124から送信された第1〜第3送信指示を受信する。
The communication control unit 23 includes, for example, a network interface card (not shown) and the like, and is for performing information communication with the internal call device 12 and the external terminal 3 connected via the network N.
Specifically, the communication control unit 23 receives the first to third transmission instructions transmitted from the communication control unit 124 of the internal call device 12 as an instruction receiving unit.

また、通信制御部23は、データ送信手段として、第1〜第3送信指示の受信に基づいて、当該送信指示に応じて電子メール生成処理にて生成された電子メールをネットワークNを介して外部端末3に送信する。
即ち、通信制御部23は、第1送信指示に応じて電子メール生成処理にて生成された訪問者識別テキストデータを含む電子メールをネットワークNを介して外部端末3に送信する。また、通信制御部23は、第2送信指示に応じて電子メール生成処理にて生成された訪問者画像データを含む電子メールをネットワークNを介して外部端末3に送信する。また、通信制御部23は、第3送信指示に応じて電子メール生成処理にて生成された顔検出不可テキストデータを含む電子メールをネットワークNを介して外部端末3に送信する。
Further, the communication control unit 23, as a data transmission unit, externally sends an e-mail generated by the e-mail generation process in response to the transmission instruction based on the reception of the first to third transmission instructions via the network N. Transmit to terminal 3.
That is, the communication control unit 23 transmits an email including the visitor identification text data generated by the email generation process in response to the first transmission instruction to the external terminal 3 via the network N. In addition, the communication control unit 23 transmits an e-mail including visitor image data generated by the e-mail generation process in response to the second transmission instruction to the external terminal 3 via the network N. In addition, the communication control unit 23 transmits an e-mail including face-detectable text data generated by the e-mail generation process in response to the third transmission instruction to the external terminal 3 via the network N.

記憶部24は、例えば、RAM、ROM等から構成され、サーバ2で実行可能なシステムプログラム、当該システムプログラムで実行可能な各種処理プログラム、これら各種処理プログラムを実行する際に使用されるデータ等を記憶する。
具体的には、記憶部24には、電子メール生成プログラム24a、メール送信制御プログラム24bが記憶されている。
The storage unit 24 includes, for example, a RAM, a ROM, and the like, and stores a system program that can be executed by the server 2, various processing programs that can be executed by the system program, data that is used when these various processing programs are executed, and the like. Remember.
Specifically, the storage unit 24 stores an e-mail generation program 24a and a mail transmission control program 24b.

電子メール生成プログラム24aは、通信制御部23により受信した第1〜第3送信指示に基づいて、当該送信指示に応じた内容の電子メールを生成する。
具体的には、CPU25による電子メール生成プログラム24aの実行に基づいて、通信制御部23により第1送信指示及び人物識別データを受信すると、当該第1送信指示及び人物識別データに基づいて、訪問者の識別に係る訪問者識別テキストデータを含む電子メールを生成し、また、通信制御部23により第2送信指示及び撮像画像データを受信すると、当該第2送信指示及び撮像画像データに基づいて、訪問者に係る訪問者画像データを含む電子メールを生成し、また、通信制御部23により第3送信指示を受信すると、当該第3送信指示に基づいて、顔検出処理における顔検出不可に関連した顔検出不可テキストデータを含む電子メールを生成する。
また、上記電子メールにあっては、例えば、「宛先」を予め記憶部24に登録されている利用者の外部端末3の「電子メールアドレス」とし、「タイトル」を「訪問者連絡案内」としても良いが、これらに限られるものではなく、「宛先」や「タイトル」は適宜任意に変更可能となっている。
Based on the first to third transmission instructions received by the communication control unit 23, the e-mail generation program 24a generates an e-mail having contents according to the transmission instructions.
Specifically, when the first transmission instruction and the person identification data are received by the communication control unit 23 based on the execution of the email generation program 24a by the CPU 25, the visitor is based on the first transmission instruction and the person identification data. When the communication control unit 23 receives the second transmission instruction and the captured image data by generating an e-mail including the visitor identification text data related to the identification, the visit is performed based on the second transmission instruction and the captured image data. When an email including visitor image data relating to a person is generated and a third transmission instruction is received by the communication control unit 23, a face related to the face detection failure in the face detection process based on the third transmission instruction Generate an email containing undetectable text data.
In the above e-mail, for example, “destination” is “e-mail address” of the user's external terminal 3 registered in the storage unit 24 in advance, and “title” is “visitor contact information”. However, the present invention is not limited to these, and the “destination” and “title” can be arbitrarily changed as appropriate.

なお、通信制御部23により第1送信指示及び人物識別データに加えて送信履歴情報を受信した場合には、CPU25は、当該第1送信指示、人物識別データ及び送信履歴情報(第1送信指示の送信回数)に基づいて、訪問者の訪問回数を含む訪問者識別テキストデータを含む電子メールを生成する。   When the communication control unit 23 receives the transmission history information in addition to the first transmission instruction and the person identification data, the CPU 25 receives the first transmission instruction, the person identification data, and the transmission history information (the first transmission instruction Based on the number of times of transmission), an email including visitor identification text data including the number of visits of the visitor is generated.

メール送信制御プログラム24bは、通信制御部23による第1〜第3送信指示の受信に基づいて、当該送信指示に応じて電子メール生成処理にて生成された電子メールを通信制御部23により外部端末3に送信させる処理に係る機能をCPU25に実現させるためのプログラムである。
具体的には、CPU25によるメール送信制御プログラム24bの実行に基づいて、第1送信指示に応じて電子メール生成処理にて生成された訪問者識別テキストデータを含む電子メールを通信制御部23により外部端末3に送信し、また、第2送信指示に応じて電子メール生成処理にて生成された訪問者画像データを含む電子メールを通信制御部23により外部端末3に送信し、また、第3送信指示に応じて電子メール生成処理にて生成された顔検出不可テキストデータを含む電子メールを通信制御部23により外部端末3に送信する。
Based on the reception of the first to third transmission instructions by the communication control unit 23, the mail transmission control program 24b sends the e-mail generated by the e-mail generation process according to the transmission instruction to the external terminal by the communication control unit 23. 3 is a program for causing the CPU 25 to realize a function related to processing to be transmitted to the CPU 3.
Specifically, based on the execution of the mail transmission control program 24b by the CPU 25, an email including visitor identification text data generated by the email generation process in response to the first transmission instruction is externally transmitted by the communication control unit 23. An e-mail including visitor image data generated by the e-mail generation process in response to the second transmission instruction is transmitted to the external terminal 3 by the communication control unit 23, and the third transmission is performed. In response to the instruction, the communication control unit 23 transmits an e-mail including the face detection impossible text data generated by the e-mail generation process to the external terminal 3.

CPU25は、当該サーバ2の各部を統括的に制御するものであり、記憶部24に記憶された各種処理プログラムに従って各種の制御動作を行う。その際に、CPU25は、記憶部24の作業用メモリ内に各種処理結果を格納させ、必要に応じてその処理結果を表示部22に表示させる。   The CPU 25 comprehensively controls each unit of the server 2 and performs various control operations according to various processing programs stored in the storage unit 24. At that time, the CPU 25 stores various processing results in the working memory of the storage unit 24 and displays the processing results on the display unit 22 as necessary.

次に、外部端末3について、図5を参照して説明する。
図5は、外部端末3の要部構成を示すブロック図である。
外部端末3は、例えば、一般的な携帯電話機が適用され、ネットワークNを介して内部通話装置12及びサーバ2と情報通信可能に接続されるとともに、内部通話装置12のVoIP技術により外部通話装置11と通話可能に接続されるものである。
具体的には、図5に示すように、外部端末3は、操作入力部31と、通話部32と、表示部33と、通信制御部34と、記憶部35と、CPU36等を備えている。
Next, the external terminal 3 will be described with reference to FIG.
FIG. 5 is a block diagram showing a main configuration of the external terminal 3.
For example, a general mobile phone is applied to the external terminal 3 and is connected to the internal call device 12 and the server 2 via the network N so as to be able to perform information communication. Is connected to be able to make a call.
Specifically, as shown in FIG. 5, the external terminal 3 includes an operation input unit 31, a call unit 32, a display unit 33, a communication control unit 34, a storage unit 35, a CPU 36, and the like. .

操作入力部31は、テンキー及び各種機能スイッチ(図示略)等を備えており、これらテンキーやスイッチのユーザによる操作に基づいて操作信号をCPU36に出力する。   The operation input unit 31 includes a numeric keypad, various function switches (not shown), and the like, and outputs an operation signal to the CPU 36 based on an operation by a user of these numeric keys and switches.

通話部32は、マイク32a、スピーカ32b、A/D変換部及びD/A変換部(図示略)を有している。そして、マイク32aから入力される利用者の送話音声をA/D変換処理して、その送話音声データをCPU36に出力するとともに、CPU36から出力されて入力される受話音声データ等の音声データをD/A変換処理して、訪問者の音声をスピーカ32bから出力する。   The calling unit 32 includes a microphone 32a, a speaker 32b, an A / D conversion unit, and a D / A conversion unit (not shown). Then, the user's transmitted voice input from the microphone 32a is A / D converted, and the transmitted voice data is output to the CPU 36, and voice data such as received voice data that is output from the CPU 36 and input. Is D / A converted, and the voice of the visitor is output from the speaker 32b.

表示部33は、例えば、LCD等のディスプレイから構成され、CPU36の制御下にて各種情報を表示画面に表示する。
具体的には、表示部33は、サーバ2から送信され通信制御部34により受信した電子メール、即ち、訪問者識別テキストデータを含む電子メール、訪問者画像データを含む電子メール、顔検出不可テキストデータを含む電子メールの内容を表示する。
The display unit 33 is composed of a display such as an LCD, for example, and displays various information on the display screen under the control of the CPU 36.
Specifically, the display unit 33 is an email transmitted from the server 2 and received by the communication control unit 34, that is, an email including visitor identification text data, an email including visitor image data, and face detection impossible text. Displays the contents of an email containing data.

通信制御部34は、図示しない無線基地局との間で着信や発信、電子メールの受信等に係る無線信号の送受信を行うアンテナ(図示略)を備え、CPU36から出力されて入力される指示信号に従って、無線基地局との間で所定の通信方式に対応する携帯電話用の通信プロトコルを実行し、この通信方式で設定される通信チャネルにより、送受話音声の送受信やデータ通信を実行する。   The communication control unit 34 includes an antenna (not shown) that transmits and receives radio signals related to incoming and outgoing calls, reception of e-mails, and the like with a radio base station (not shown), and is an instruction signal output and input from the CPU 36. Accordingly, the mobile phone communication protocol corresponding to a predetermined communication method is executed with the radio base station, and transmission / reception voice transmission / reception and data communication are executed by the communication channel set in this communication method.

記憶部35は、例えば、RAM、ROM等から構成され、外部端末3で実行可能なシステムプログラム、当該システムプログラムで実行可能な各種処理プログラム、これら各種処理プログラムを実行する際に使用されるデータ等を記憶する。   The storage unit 35 includes, for example, a RAM, a ROM, and the like, and is a system program that can be executed by the external terminal 3, various processing programs that can be executed by the system program, data that is used when these various processing programs are executed, and the like. Remember.

CPU36は、当該携帯端末の各部を統括的に制御するものであり、記憶部35に記憶された各種処理プログラムに従って各種の制御動作を行う。その際に、CPU36は、記憶部35の作業用メモリ内に各種処理結果を格納させ、必要に応じてその処理結果を表示部33に表示させる。   The CPU 36 comprehensively controls each unit of the mobile terminal, and performs various control operations according to various processing programs stored in the storage unit 35. At that time, the CPU 36 stores various processing results in the working memory of the storage unit 35 and causes the display unit 33 to display the processing results as necessary.

次に、インターホンシステム100における動作について図6及び図7を参照して説明する。
先ず、図6を参照して外部通話装置11と内部通話装置12の通話処理について説明する。
Next, the operation in the intercom system 100 will be described with reference to FIGS.
First, with reference to FIG. 6, a call process between the external call device 11 and the internal call device 12 will be described.

図6に示すように、利用者を訪問した訪問者が玄関などに設置されている外部通話装置11の呼出ボタン111aを操作すると(ステップS1)、外部通話装置11のCPU116は、撮像部113により訪問者を撮像させた後(ステップS2)、撮像部113により生成された撮像画像データ及び呼出信号を通信制御部114により内部通話装置12に送信させる(ステップS3)。   As shown in FIG. 6, when a visitor who visits the user operates the call button 111 a of the external communication device 11 installed at the entrance or the like (step S <b> 1), the CPU 116 of the external communication device 11 causes the imaging unit 113 to perform the operation. After the visitor is imaged (step S2), the captured image data and the calling signal generated by the imaging unit 113 are transmitted to the internal communication device 12 by the communication control unit 114 (step S3).

内部通話装置12にあっては、外部通話装置11から送信された撮像画像データ及び呼出信号を通信制御部124により受信すると、CPU126は、呼出信号に応じてスピーカ122bから呼出音を出力させるとともに、撮像画像データに基づいて表示部123に撮像画像を表示させる(ステップS4)。
続けて、CPU126は、記憶部125内の応答判定プログラム125aを実行して、利用者により応答ボタン121aの所定操作が行われたか否かを判定する(ステップS5)。
ここで、応答ボタン121aが操作されたと判定されると(ステップS5;YES)、CPU126は、外部通話装置11と内部通話装置12間の回線を通話可能に接続して、訪問者と利用者の間で外部通話装置11及び内部通話装置12を介して通話が開始される(ステップS6)。
In the internal communication device 12, when the captured image data and the call signal transmitted from the external call device 11 are received by the communication control unit 124, the CPU 126 outputs a ringing sound from the speaker 122b according to the call signal, A captured image is displayed on the display unit 123 based on the captured image data (step S4).
Subsequently, the CPU 126 executes the response determination program 125a in the storage unit 125 to determine whether or not the user has performed a predetermined operation on the response button 121a (step S5).
Here, if it is determined that the response button 121a has been operated (step S5; YES), the CPU 126 connects the line between the external call device 11 and the internal call device 12 so that a call can be made, and the visitor and the user are connected. A call is started via the external call device 11 and the internal call device 12 (step S6).

その後、訪問者と利用者の間の通話が終了すると(ステップS7)、CPU126は、通話日時、通話時間等の通話履歴情報を記憶部125の履歴情報記憶領域に保存させる(ステップS8)。   Thereafter, when the call between the visitor and the user ends (step S7), the CPU 126 stores call history information such as the call date and time and the call time in the history information storage area of the storage unit 125 (step S8).

一方、ステップS5にて、応答ボタン121aが操作されていないと判定されると(ステップS5;NO)、この場合、「利用者は建物B内に不在」若しくは「応答できない状況にある」と考えられることから、訪問者連絡処理(図7参照)を行う。   On the other hand, if it is determined in step S5 that the response button 121a is not operated (step S5; NO), in this case, it is considered that “the user is not in the building B” or “is unable to respond”. Therefore, a visitor contact process (see FIG. 7) is performed.

以下に、訪問者連絡処理について図7を参照して説明する。
図7は、訪問者連絡処理に係る動作の一例を示すフローチャートである。
なお、以下の訪問者連絡処理にあっては、以前に来訪したことのある複数の訪問者の人物識別データ及び人物顔画像データが登録DB125gに登録されているものとする。
Below, a visitor contact process is demonstrated with reference to FIG.
FIG. 7 is a flowchart illustrating an example of an operation related to a visitor contact process.
In the following visitor contact processing, it is assumed that person identification data and person face image data of a plurality of visitors who have visited before are registered in the registration DB 125g.

図7に示すように、内部通話装置12のCPU126は、記憶部125内の顔検出プログラム125bを実行して、外部通話装置11から送信され通信制御部124により受信した撮像画像フレームから人物の顔を検出する顔検出処理を行う(ステップS9)。   As shown in FIG. 7, the CPU 126 of the internal call device 12 executes the face detection program 125 b in the storage unit 125, and from the captured image frame transmitted from the external call device 11 and received by the communication control unit 124, A face detection process for detecting is performed (step S9).

次に、CPU126は、顔検出処理にて顔が検出されたか否かを判定する(ステップS10)。
そして、顔が検出されたと判定されると(ステップS10;YES)、CPU126は、記憶部125内の訪問者判定プログラム125cを実行して、顔検出処理にて検出された顔と登録DB125gに登録されている人物顔画像データを比較照合して、撮像画像データに係る訪問者の人物顔画像データが登録DB125gに登録されているか否かを判定する訪問者判定処理を行う(ステップS11)。
Next, the CPU 126 determines whether or not a face has been detected in the face detection process (step S10).
If it is determined that a face has been detected (step S10; YES), the CPU 126 executes the visitor determination program 125c in the storage unit 125, and registers the face detected in the face detection process and the registration DB 125g. A visitor determination process is performed to compare and collate the person face image data that has been registered to determine whether or not the person face image data of the visitor associated with the captured image data is registered in the registration DB 125g (step S11).

そして、訪問者の人物顔画像データが登録DB125gに登録されていないと判定されると(ステップS12;YES)、CPU126が記憶部125内の第2送信制御プログラム125eを実行して、通信制御部124は、撮像画像データと、訪問者画像データを含む電子メールの外部端末3への第2送信指示をネットワークNを介してサーバ2に送信する(ステップS13)。
その後、CPU126は、送信された撮像画像データ並びに、送信日時、送信された撮像画像データ名及び第2送信指示等の送信履歴情報を記憶部125の履歴情報記憶領域に保存させる(ステップS14)。
If it is determined that the visitor's human face image data is not registered in the registration DB 125g (step S12; YES), the CPU 126 executes the second transmission control program 125e in the storage unit 125, and the communication control unit 124 transmits the second transmission instruction to the external terminal 3 of the electronic mail including the captured image data and the visitor image data to the server 2 via the network N (step S13).
Thereafter, the CPU 126 stores the transmitted captured image data, the transmission date and time, the transmitted captured image data name and the transmission history information such as the second transmission instruction in the history information storage area of the storage unit 125 (step S14).

一方、ステップS12にて、訪問者の人物顔画像データが登録DB125gに登録されていると判定されると(ステップS12;NO)、CPU126が記憶部125内の第1送信制御プログラム125dを実行して、通信制御部124は、訪問者に係る人物顔画像データと対応付けて登録DB125gに登録されている人物識別データと、訪問者識別テキストデータを含む電子メールの外部端末3への第1送信指示をネットワークNを介してサーバ2に送信する(ステップS15)。
その後、CPU126は、送信日時、送信された人物識別データ名及び第1送信指示等の送信履歴情報を記憶部125の履歴情報記憶領域に保存させる(ステップS16)。
On the other hand, if it is determined in step S12 that the human face image data of the visitor is registered in the registration DB 125g (step S12; NO), the CPU 126 executes the first transmission control program 125d in the storage unit 125. Then, the communication control unit 124 first transmits to the external terminal 3 an e-mail including the person identification data registered in the registration DB 125g in association with the person face image data related to the visitor and the visitor identification text data. The instruction is transmitted to the server 2 via the network N (step S15).
Thereafter, the CPU 126 stores transmission history information such as the transmission date and time, the transmitted person identification data name, and the first transmission instruction in the history information storage area of the storage unit 125 (step S16).

また、ステップS10にて、顔が検出されていないと判定されると(ステップS10)、CPU126は、外部通話装置11の撮像部113により生成された撮像画像データを取得して、背景差分法やフレーム間差分法などにより訪問者(移動物体)が撮像部113の撮影範囲内、即ち、外部通話装置11の近傍に存するか否かを判定する(ステップS17)。
ここで、訪問者が未だ外部通話装置11の近傍に存すると判定されると(ステップS17;YES)、CPU126は、ステップS9に移行して、それ以降の処理の実行を制御する。
即ち、CPU126は、再度、顔検出処理(ステップS9、S10)や訪問者判定処理(ステップS11、S12)を行う。
If it is determined in step S10 that no face has been detected (step S10), the CPU 126 acquires the captured image data generated by the imaging unit 113 of the external call device 11 to obtain the background difference method or the like. It is determined whether or not the visitor (moving object) is within the shooting range of the image pickup unit 113, that is, in the vicinity of the external communication device 11 by the inter-frame difference method or the like (step S17).
Here, if it is determined that the visitor is still in the vicinity of the external communication device 11 (step S17; YES), the CPU 126 proceeds to step S9 and controls the execution of the subsequent processing.
That is, the CPU 126 performs the face detection process (steps S9 and S10) and the visitor determination process (steps S11 and S12) again.

一方、ステップS17にて、訪問者が外部通話装置11の近傍に存しない、即ち、「利用者は建物B内に不在である」と訪問者が判断して立ち退いてしまい、外部通話装置11の近傍に存しないと判定された場合には(ステップS17;NO)、CPU126が記憶部125内の第3送信制御プログラム125fを実行して、通信制御部124は、顔検出不可に関連した顔検出不可テキストデータを含む電子メールの外部端末3への第3送信指示をネットワークNを介してサーバ2に送信する(ステップS18)。
その後、ステップS16に移行して、CPU126は、送信日時及び第3送信指示等の送信履歴情報を記憶部125の履歴情報記憶領域に保存させる。
On the other hand, in step S17, the visitor does not exist in the vicinity of the external communication device 11, that is, the visitor judges that “the user is not in the building B” and leaves, and the external communication device 11 If it is determined not to exist in the vicinity (step S17; NO), the CPU 126 executes the third transmission control program 125f in the storage unit 125, and the communication control unit 124 detects the face related to the face detection failure. A third transmission instruction to the external terminal 3 for the electronic mail including the impossible text data is transmitted to the server 2 via the network N (step S18).
Thereafter, the process proceeds to step S <b> 16, and the CPU 126 stores transmission history information such as a transmission date and time and a third transmission instruction in the history information storage area of the storage unit 125.

サーバ2にあっては、内部通話装置12から送信された第1〜第3送信指示を通信制御部23により受信すると、CPU25は、記憶部24内の電子メール生成プログラム24aを実行して、受信した第1〜第3送信指示に応じた内容の電子メールを生成する(ステップS19)。具体的には、CPU25は、第1送信指示及び人物識別データを受信すると、訪問者の識別に係る訪問者識別テキストデータを含む電子メールを生成し、また、第2送信指示及び撮像画像データを受信すると、訪問者に係る訪問者画像データを含む電子メールを生成し、また、第3送信指示を受信すると、顔検出処理における顔検出不可に関連した顔検出不可テキストデータを含む電子メールを生成する。   In the server 2, when the communication control unit 23 receives the first to third transmission instructions transmitted from the internal communication device 12, the CPU 25 executes the email generation program 24 a in the storage unit 24 to receive An e-mail having contents corresponding to the first to third transmission instructions is generated (step S19). Specifically, when the CPU 25 receives the first transmission instruction and the person identification data, the CPU 25 generates an e-mail including visitor identification text data related to the visitor identification, and also outputs the second transmission instruction and the captured image data. When received, an e-mail including visitor image data relating to the visitor is generated, and upon receiving a third transmission instruction, an e-mail including face detection impossible text data related to face detection disabled in the face detection process is generated. To do.

その後、CPU25が記憶部24内のメール送信制御プログラム24bを実行して、通信制御部23は、電子メール生成処理にて生成された第1〜第3送信指示に応じた電子メールをネットワークNを介して外部端末3に送信する(ステップS20)。   Thereafter, the CPU 25 executes the mail transmission control program 24b in the storage unit 24, and the communication control unit 23 sends an email corresponding to the first to third transmission instructions generated in the email generation process to the network N. To the external terminal 3 (step S20).

外部端末3にあっては、サーバ2から送信された電子メールを通信制御部34により受信すると、CPU36は、当該電子メール、即ち、訪問者識別テキストデータを含む電子メール、訪問者画像データを含む電子メール、顔検出不可テキストデータを含む電子メールの内容を表示部33の表示画面に表示させる。即ち、表示部33に、訪問者識別テキストデータを含む電子メールを受信した場合には、訪問者に係る人物識別データがテキストにて表示され、訪問者画像データを含む電子メールを受信した場合には、訪問者の撮像画像データが表示され、顔検出不可テキストデータを含む電子メールを受信した場合には、顔検出不可の旨がテキストにて表示される。
これにより、利用者は、外部端末3の表示部33の表示画面にて訪問者があったこと、並びに、訪問者が以前にも来訪したことがある人物であるか、初めて来訪した人物であるか等を認識することができる。
In the external terminal 3, when the communication control unit 34 receives the electronic mail transmitted from the server 2, the CPU 36 includes the electronic mail, that is, the electronic mail including the visitor identification text data and the visitor image data. The contents of the e-mail and the e-mail including the face detection impossible text data are displayed on the display screen of the display unit 33. That is, when an e-mail including visitor identification text data is received on the display unit 33, the person identification data relating to the visitor is displayed in text, and when an e-mail including visitor image data is received. When the captured image data of the visitor is displayed and an e-mail including face detection impossible text data is received, the fact that face detection is impossible is displayed in text.
As a result, the user is a person who has visited on the display screen of the display unit 33 of the external terminal 3, and the visitor has visited before or is the person who has visited for the first time. Can be recognized.

以上のように、本実施形態のインターホンシステム100によれば、利用者の不在の際に、即ち、外部通話装置11からの呼び出しに対して応答がなかった際に、内部通話装置12は、呼び出しの際に撮像部113により撮像され生成された撮像画像データに基づいて顔検出処理にて検出された顔と登録DB125gに登録されている人物顔画像データを比較照合して、訪問者の人物顔画像データが登録DB125gに登録されているか否かを判定し、訪問者の人物顔画像データが登録されている場合には、人物顔画像データと対応付けられている人物識別データに基づいて、訪問者の識別に係る訪問者識別テキストデータを含む電子メールの外部端末3に対する第1送信指示をサーバ2に送信する。また、顔検出処理にて顔が検出されなかった場合に、顔検出不可に関連した顔検出不可テキストデータを含む電子メールの外部端末3に対する第3送信指示をサーバ2に送信する。
即ち、訪問者を認識するための撮像画像データの代わりに、訪問者識別テキストデータや顔検出不可テキストデータ等のテキストデータを含む電子メールの送信指示が内部通話装置12からサーバ2に送信され、テキストデータを含む電子メールがサーバ2から外部端末3に送信されるので、撮像画像データを送信する場合と比較して、インターホン1とサーバ2の間並びにサーバ2と外部端末3の間におけるデータ通信量を削減することができることとなって、データ通信量の増加を抑制することができる。
一方、訪問者の人物顔画像データが登録されていない場合には、内部通話装置12は、撮像画像データに基づいて、訪問者に係る訪問者画像データを含む電子メールの外部端末3に対する第2送信指示をサーバ2に送信することにより、利用者は訪問者画像データに係る画像を視認することで訪問者が誰であるか認識することができる。
このように、訪問者識別テキストデータや訪問者画像データによって訪問者を確認することができ、さらに、顔検出不可テキストデータによって訪問者の存在を認識することができることとなって、当該システム100の使い勝手を向上させることができる。
特に、利用者が訪問者を認識後に会話により応対したい場合に、内部通話装置12のVoIP技術によって、外部通話装置11と外部端末3を通話可能に接続して、訪問者とリアルタイムで通話することもでき、より使い勝手の良いインターホンシステム100を提供することができる。
As described above, according to the intercom system 100 of the present embodiment, when the user is absent, that is, when there is no response to the call from the external call device 11, the internal call device 12 The face detected by the face detection process is compared with the human face image data registered in the registration DB 125g based on the picked-up image data picked up and generated by the image pickup unit 113, and the person's face of the visitor is compared. It is determined whether or not the image data is registered in the registration DB 125g. If the visitor's person face image data is registered, the visit is performed based on the person identification data associated with the person face image data. A first transmission instruction to the external terminal 3 of the electronic mail including the visitor identification text data relating to the identification of the visitor is transmitted to the server 2. Further, when a face is not detected in the face detection process, a third transmission instruction to the external terminal 3 of an e-mail including face detection impossible text data related to face detection failure is transmitted to the server 2.
That is, instead of the captured image data for recognizing the visitor, an e-mail transmission instruction including text data such as visitor identification text data and face detection impossible text data is transmitted from the internal communication device 12 to the server 2, Since an e-mail including text data is transmitted from the server 2 to the external terminal 3, data communication between the interphone 1 and the server 2 and between the server 2 and the external terminal 3 as compared with the case where the captured image data is transmitted. Since the amount can be reduced, an increase in the amount of data communication can be suppressed.
On the other hand, when the visitor's person face image data is not registered, the internal call device 12 performs the second e-mail for the external terminal 3 including the visitor image data relating to the visitor based on the captured image data. By transmitting the transmission instruction to the server 2, the user can recognize who the visitor is by visually recognizing the image related to the visitor image data.
Thus, the visitor can be confirmed by the visitor identification text data and the visitor image data, and the presence of the visitor can be recognized by the face detection impossible text data. Usability can be improved.
In particular, when a user wants to respond to a conversation after recognizing a visitor, the external call device 11 and the external terminal 3 are connected so as to be able to make a call using the VoIP technology of the internal call device 12 to make a call with the visitor in real time. It is possible to provide an interphone system 100 that is more convenient to use.

また、インターホン1の内部通話装置12の記憶部125の履歴情報記憶領域に、人物識別データが登録DB125gに登録されていると判定された訪問者に係る送信履歴情報が記憶されている場合には、人物識別データと、これまでの第1送信指示の送信回数と、当該訪問者の訪問回数を含む訪問者識別テキストデータを含む電子メールの外部端末3への第1送信指示をサーバ2に送信して、サーバ2が当該訪問者の訪問回数を含む訪問者識別テキストデータを含む電子メールを外部端末3へ送信するので、訪問者の訪問回数によって訪問者の来訪目的の重要性を認識することができる。即ち、例えば、名前すら登録されていないような訪問販売員であれば何度も来訪するのが日常であり、特に重要性は高くないが、名前や住所などの人物識別データが登録されているような関係性の深い訪問者の場合には、何か目的があって来訪していると推認されるため、重要性が高いと考えられる。
このような場合には、利用者が訪問者の来訪目的の重要性を認識した上で、内部通話装置12のVoIP技術によって、外部通話装置11と外部端末3を通話可能に接続して、訪問者とリアルタイムで通話することもできる。
In addition, when the history information storage area of the storage unit 125 of the internal communication device 12 of the interphone 1 stores transmission history information related to a visitor whose personal identification data is determined to be registered in the registration DB 125g. The first transmission instruction to the external terminal 3 of the e-mail including the person identification data, the number of transmissions of the first transmission instruction so far, and the visitor identification text data including the number of visits of the visitor is transmitted to the server 2. Then, since the server 2 transmits an e-mail including visitor identification text data including the visit number of the visitor to the external terminal 3, the importance of the visit purpose of the visitor is recognized by the visit number of the visitor. Can do. That is, for example, a visiting salesperson who has not even registered his / her name visits many times, and although it is not particularly important, personal identification data such as name and address is registered. In the case of such a deeply related visitor, it is assumed that the visitor has a certain purpose and is therefore highly important.
In such a case, after the user recognizes the importance of the visit purpose of the visitor, the external call device 11 and the external terminal 3 are connected to be able to make a call by using the VoIP technology of the internal call device 12, and the visit is made. You can also talk to the person in real time.

なお、本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において、種々の改良並びに設計の変更を行っても良い。
例えば、上記実施形態にあっては、外部通話装置11に、訪問者の要件を受け付ける要件受付手段を備えて、内部通話装置12の通信制御部124が要件受付手段により受け付けた要件を含む訪問者識別テキストデータの外部端末3への第1送信指示をサーバ2に送信するようにしても良い。
即ち、人物識別データが登録DB125gに登録されている場合には、少なくとも一度は来訪したことがある人物であることから、当該人物にあっては訪問の要件を受け付けるようにして、受け付けた要件に係る要件データをサーバ2に送信するようになっている。具体的には、図7におけるステップS12の後、外部通話装置11が訪問者の要件を受け付ける要件受付処理を実行した後、内部通話装置12が要件受付処理にて受け付けた要件を取得して、受け付けた要件を含む訪問者識別テキストデータの外部端末3への第1送信指示をサーバ2に送信する。
The present invention is not limited to the above-described embodiment, and various improvements and design changes may be made without departing from the spirit of the present invention.
For example, in the above embodiment, the external call device 11 includes a requirement accepting unit that accepts a visitor's requirement, and the visitor includes the requirement accepted by the communication control unit 124 of the internal call device 12 by the requirement accepting unit. A first transmission instruction of the identification text data to the external terminal 3 may be transmitted to the server 2.
That is, when the person identification data is registered in the registration DB 125g, the person has visited at least once. Such requirement data is transmitted to the server 2. Specifically, after step S12 in FIG. 7, after the external call device 11 executes the requirement acceptance process for accepting the visitor's requirement, the internal call device 12 acquires the requirement accepted in the requirement acceptance process, A first transmission instruction to the external terminal 3 of visitor identification text data including the accepted requirements is transmitted to the server 2.

なお、要件受付手段は、訪問者の要件を受け付け可能に構成されたものであれば如何なるものであっても良く、例えば、マイク112aで集音した音声を解析して文字データに変換するものであっても良いし、スピーカ112bから発せられる音声案内に応じて訪問者から発せられた音声に応じて要件を特定するものであっても良いし、外部通話装置11にタッチパッドを備えた表示部(図示略)を設けて、当該タッチパッドにより要件を選択入力するものであっても良い。   Note that the requirement receiving means may be any device configured to be able to receive visitor requirements. For example, the requirement receiving means analyzes voice collected by the microphone 112a and converts it into character data. The requirement may be specified according to the voice emitted from the visitor according to the voice guidance emitted from the speaker 112b, or the display unit provided with the touch pad on the external communication device 11 (Not shown) may be provided, and requirements may be selected and input using the touchpad.

これにより、利用者が訪問者とリアルタイムで通話することができないような状況であっても、訪問者の要件を把握することができ、緊急性の高い要件の場合には、利用者側から訪問者と連絡をとるといったこともできる。このように、より使い勝手の良いインターホンシステム100を提供することができる。   As a result, even if the user cannot make a call with the visitor in real time, the requirements of the visitor can be grasped. You can also get in touch with the person. In this way, the intercom system 100 that is more convenient to use can be provided.

また、上記の要件受付手段を備える構成にあっては、さらに、入力された要件に応じて当該要件を電子メールで利用者に送信するか否かを判定するような構成としても良い。
即ち、例えば、訪問販売員が来訪する場合などの急を要しない要件の場合には、利用者に対して直ぐに電子メールで知らせる必要がない一方で、宅配員が宅配便の再配達時間を要件として残した場合などの時間が指定された要件の場合には、その指定時間を知らせる必要があるためである。
Further, in the configuration including the above requirement receiving means, it may be configured to determine whether or not to transmit the requirement to the user by e-mail according to the input requirement.
That is, for example, in the case of a requirement that does not require urgency, such as when a visiting salesperson visits, it is not necessary to notify the user immediately by e-mail, while the courier requires a redelivery time for the courier service. This is because it is necessary to notify the designated time in the case of a requirement in which the time is designated, such as when it is left as.

さらに、上記実施形態にあっては、顔検出処理や訪問者の人物顔画像データが登録DB125gに登録されているか否かの判定を、利用者が室内に不在で呼出に対する応答がなかった場合に行うようにしたが、これに限られるものではなく、呼出に対する応答の有無に関わらず判定するようにしても良い。
即ち、利用者が室内に居る場合であっても、内部通話装置12の近傍にいない場合や内部通話装置12の近傍まで移動できないような場合、或いは、呼出音が聞こえずに訪問者の存在を認識できないような場合には、表示部123に表示される訪問者の顔を確認することができないため、利用者により携帯される携帯電話機等の携帯端末に訪問者識別テキストデータや訪問者画像データを含む電子メールを送信することで、訪問者並びに訪問者の存在を確認することができることとなる。
Further, in the above embodiment, the face detection process and the determination of whether or not the person's face image data of the visitor is registered in the registration DB 125g are made when the user is absent in the room and there is no response to the call. However, the present invention is not limited to this, and determination may be made regardless of whether or not there is a response to the call.
That is, even when the user is in the room, when the user is not in the vicinity of the internal call device 12 or when the user cannot move to the vicinity of the internal call device 12, or the presence of the visitor without hearing the ringing tone When it cannot be recognized, the visitor's face displayed on the display unit 123 cannot be confirmed, so that the visitor identification text data or the visitor image data is displayed on a mobile terminal such as a mobile phone carried by the user. By sending an e-mail containing, it is possible to confirm the visitor and the presence of the visitor.

また、上記実施形態にあっては、外部通話装置11の撮像部113は、訪問者を連続して撮像して複数の画像フレームを生成するようにしたが、訪問者の撮像タイミング(撮像画像データの生成タイミング)はこれに限られるものではなく、少なくとも呼出ボタン111aが操作された際に、訪問者の撮像画像データを生成するようにすれば良い。   In the above embodiment, the image capturing unit 113 of the external communication device 11 continuously captures a visitor and generates a plurality of image frames. Is not limited to this, and the captured image data of the visitor may be generated at least when the call button 111a is operated.

さらに、上記実施形態にあっては、内部通話装置12は、顔検出不可テキストデータの外部端末3に対する第3送信指示をサーバ2に送信するようにしたが、顔検出処理にて顔検出できなかった場合に必ずしも第3送信指示を送信する必要はなく、第3送信指示を送信するか否かは適宜任意に変更することができる。
即ち、第3送信指示を送信しない場合には、インターホン1とサーバ2間並びにサーバ2と外部端末3間におけるデータ通信量をより削減することができる。
Furthermore, in the above embodiment, the internal communication device 12 is configured to transmit the third transmission instruction to the external terminal 3 of the face detection impossible text data to the server 2, but the face cannot be detected by the face detection process. In this case, it is not always necessary to transmit the third transmission instruction, and whether or not to transmit the third transmission instruction can be arbitrarily changed as appropriate.
That is, when the third transmission instruction is not transmitted, the amount of data communication between the intercom 1 and the server 2 and between the server 2 and the external terminal 3 can be further reduced.

また、上記実施形態にあっては、登録DB125gに人物顔画像データを登録するようにしたが、必ずしも人物顔画像データを登録しておく必要はなく、人物の顔以外の画像に係る人物画像データを登録しておき、当該人物画像データを用いて訪問者の特定を行うようにしても良い。   In the above embodiment, the human face image data is registered in the registration DB 125g. However, it is not always necessary to register the human face image data, and the human image data related to an image other than the human face. May be registered, and a visitor may be specified using the person image data.

加えて、上記実施形態にあっては、顔検出処理や訪問者判定処理を内部通話装置12にて行うようにしたが、これに限られるものではなく、外部通話装置11にて行うようにしても良い。即ち、外部通話装置11の記憶部115に登録DBを記憶しておき、登録DBに登録されている人物顔画像データや人物画像データに基づいて顔検出処理や訪問者判定処理を行うようにしても良い。   In addition, in the above embodiment, the face detection process and the visitor determination process are performed by the internal communication device 12, but the present invention is not limited to this, and the external communication device 11 performs the face detection process and the visitor determination process. Also good. That is, the registration DB is stored in the storage unit 115 of the external call device 11, and the face detection process and the visitor determination process are performed based on the person face image data and person image data registered in the registration DB. Also good.

さらに、上記実施形態にあっては、内部通話装置12の記憶部125に、通話日時、通話時間等の通話履歴情報、第1送信指示に係る送信履歴情報、撮像画像データ及び第2送信指示に係る送信履歴情報、第3送信指示に係る送信履歴情報等の履歴情報を記憶するようにしたが、少なくとも第1送信指示に係る送信履歴情報を記憶しさえしておけば、訪問者の訪問回数を含む訪問者識別テキストデータを含む電子メールを外部端末3に送信することができる。
なお、上記のような履歴情報は、内部通話装置12の記憶部125に必ずしも記憶する必要はなく、履歴情報を記録するか否かは適宜任意に変更することができる。
Furthermore, in the above embodiment, the storage unit 125 of the internal call device 12 stores the call history information such as the call date and time, the call time, the transmission history information related to the first transmission instruction, the captured image data, and the second transmission instruction. The history information such as the transmission history information and the transmission history information related to the third transmission instruction is stored, but as long as at least the transmission history information related to the first transmission instruction is stored, the number of visits of the visitor An e-mail including visitor identification text data including can be transmitted to the external terminal 3.
The history information as described above is not necessarily stored in the storage unit 125 of the internal call device 12, and whether or not the history information is recorded can be arbitrarily changed as appropriate.

また、上記実施形態におけるインターホンシステム100の構成等は一例であって、これに限られるものではない。例えば、上記実施形態にあっては、インターホン1を構成する外部通話装置11と内部通話装置12を所定の通信ケーブルを用いて有線接続するようにしたが、無線接続するようにしても良い。
さらに、訪問者連絡システムとして、インターホン1を備えるインターホンシステム100を例示したが、これに限られるものではなく、訪問者に関する連絡を行うシステムであれば如何なるものであっても良い。
In addition, the configuration of the intercom system 100 in the above embodiment is an example and is not limited thereto. For example, in the above-described embodiment, the external call device 11 and the internal call device 12 constituting the interphone 1 are connected by wire using a predetermined communication cable, but may be wirelessly connected.
Furthermore, although the intercom system 100 including the interphone 1 is illustrated as the visitor communication system, the present invention is not limited to this, and any system may be used as long as it is a system for making a contact about the visitor.

また、上記実施形態では、外部端末3として、携帯電話機を例示したが、これに限られるものではなく、サーバ2から送信された電子メールを受信可能な構成のものであれば如何なるものであっても良い。即ち、例えば、PC、携帯情報端末等の如何なるものであっても良い。   In the above embodiment, a mobile phone is exemplified as the external terminal 3. However, the present invention is not limited to this, and any external device 3 can be used as long as it can receive an e-mail transmitted from the server 2. Also good. That is, for example, any device such as a PC or a portable information terminal may be used.

加えて、その他、具体的な細部構造等についても適宜に変更可能であることは勿論である。   In addition, it is needless to say that other specific detailed structures can be appropriately changed.

本発明を適用した好適な一実施形態として例示するインターホンシステムを模式的に示す図である。It is a figure which shows typically the intercom system illustrated as suitable one Embodiment to which this invention is applied. 図1のインターホンシステムを構成するインターホンの外部通話装置の要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the external call apparatus of the intercom which comprises the intercom system of FIG. 図1のインターホンシステムを構成するインターホンの内部通話装置の要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the internal call apparatus of the intercom which comprises the intercom system of FIG. 図1のインターホンシステムを構成するサーバの要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the server which comprises the intercom system of FIG. 図1のインターホンシステムを構成する外部端末の要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the external terminal which comprises the intercom system of FIG. 図1のインターホンシステムの外部通話装置と内部通話装置による通話処理に係る動作の一例を示すフローチャートである。It is a flowchart which shows an example of the operation | movement which concerns on the telephone call process by the external call apparatus and internal call apparatus of the intercom system of FIG. 図1のインターホンシステムによる訪問者連絡処理に係る動作の一例を示すフローチャートである。It is a flowchart which shows an example of the operation | movement which concerns on the visitor contact process by the intercom system of FIG.

符号の説明Explanation of symbols

100 インターホンシステム(訪問者連絡システム)
1 インターホン(呼出装置)
11 外部通話装置
111 操作入力部
111a 呼出ボタン(呼出手段)
113 撮像部(撮像手段)
114 通信制御部
12 内部通話装置
121 操作入力部
121a 応答ボタン(応答手段)
124 通信制御部(第1指示送信手段、第2指示送信手段、第3指示送信手段)
125 記憶部(履歴情報記録手段)
125g 登録DB(登録手段)
126 CPU(訪問者判定手段、応答判定手段、顔検出手段)
2 サーバ(訪問者連絡装置)
23 通信制御部(指示受信手段、データ送信手段)
3 外部端末
34 通信制御部
N ネットワーク(通信回線)
100 Intercom system (visitor communication system)
1 Intercom (calling device)
11 External call device 111 Operation input unit 111a Call button (calling means)
113 Imaging unit (imaging means)
114 Communication control unit 12 Internal communication device 121 Operation input unit 121a Response button (response means)
124 communication control unit (first instruction transmission means, second instruction transmission means, third instruction transmission means)
125 storage unit (history information recording means)
125g registration DB (registration means)
126 CPU (visitor determination means, response determination means, face detection means)
2 server (visitor communication device)
23 Communication control unit (instruction receiving means, data transmitting means)
3 External terminal 34 Communication control unit N Network (communication line)

Claims (8)

室外の訪問者により操作される操作部と、前記操作部の操作に基づいて室内の利用者を呼び出す呼出手段とを有する呼出装置と、前記呼出装置及び利用者により使用される外部端末とそれぞれ所定の通信回線を介して接続された訪問者連絡装置とを備える訪問者連絡システムであって、
前記呼出装置は、
前記室外の訪問者を撮像して撮像画像データを生成する撮像手段と、
人物の識別に係る人物識別データと当該人物に係る人物画像データを対応付けて登録する登録手段と、
前記撮像手段により生成された前記撮像画像データと前記登録手段に登録されている前記人物画像データを比較照合して、前記撮像画像データに係る訪問者の人物画像データが前記登録手段に登録されているか否かを判定する訪問者判定手段と、
前記訪問者判定手段により登録されていると判定された場合に、前記人物画像データと対応付けて前記登録手段に登録されている前記人物識別データに基づいて、前記訪問者の識別に係る訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第1指示送信手段と、
前記訪問者判定手段により登録されていないと判定された場合に、前記撮像手段により生成された前記撮像画像データに基づいて、前記訪問者に係る訪問者画像データの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第2指示送信手段と、を備え、
前記訪問者連絡装置は、
前記第1指示送信手段及び前記第2指示送信手段から送信された前記送信指示を受信する指示受信手段と、
前記指示受信手段による前記送信指示の受信に基づいて、前記訪問者識別テキストデータ及び前記訪問者画像データのうち、前記送信指示に応じたデータを前記外部端末に送信するデータ送信手段と、を備えることを特徴とする訪問者連絡システム。
A calling device having an operation unit operated by an outdoor visitor, a calling unit for calling a user in the room based on an operation of the operation unit, and an external terminal used by the calling device and the user, respectively. A visitor communication system comprising a visitor communication device connected via a communication line of
The calling device is:
Imaging means for imaging the outdoor visitors and generating captured image data;
Registration means for registering the person identification data relating to the person identification and the person image data relating to the person in association with each other;
The captured image data generated by the imaging unit and the person image data registered in the registration unit are compared and collated, and the person image data of the visitor related to the captured image data is registered in the registration unit. Visitor determination means for determining whether or not,
A visitor related to the identification of the visitor based on the person identification data registered in the registration means in association with the person image data when it is determined that the visitor determination means has registered. First instruction transmitting means for transmitting an instruction to transmit the identification text data to the external terminal to the visitor communication device;
When it is determined by the visitor determination means that it is not registered, based on the captured image data generated by the imaging means, an instruction to transmit visitor image data related to the visitor to the external terminal is sent Second instruction transmitting means for transmitting to the visitor communication device,
The visitor communication device comprises:
An instruction receiving means for receiving the transmission instruction transmitted from the first instruction transmitting means and the second instruction transmitting means;
A data transmission unit configured to transmit data corresponding to the transmission instruction to the external terminal out of the visitor identification text data and the visitor image data based on reception of the transmission instruction by the instruction reception unit; Visitor contact system characterized by that.
前記呼出装置は、
前記呼出手段からの呼び出しに対して応答する応答手段と、
前記応答手段からの応答があったか否かを判定する応答判定手段と、を備え、
前記訪問者判定手段は、前記応答判定手段により応答がなかったと判定された場合に、前記訪問者の人物画像データが前記登録手段に登録されているか否かを判定することを特徴とする請求項1に記載の訪問者連絡システム。
The calling device is:
Response means for responding to a call from the calling means;
Response determination means for determining whether or not there is a response from the response means,
The visitor determination unit determines whether or not the person image data of the visitor is registered in the registration unit when the response determination unit determines that there is no response. The visitor communication system according to 1.
前記呼出装置にあっては、
前記撮像手段は、前記呼出手段からの呼び出しの際に、前記訪問者を撮像して撮像画像データを生成し、
前記応答判定手段により応答がなかったと判定されると、前記撮像手段により生成された前記撮像画像データに基づいて、人物の顔を検出する顔検出手段と、
前記顔検出手段により顔が検出されなかった場合に、顔検出不可に関連した顔検出不可テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第3指示送信手段と、を備え、
前記訪問者連絡装置にあっては、
前記指示受信手段は、前記第3指示送信手段から送信された前記送信指示を受信し、
前記データ送信手段は、
前記指示受信手段による前記送信指示の受信に基づいて、当該送信指示に応じて前記顔検出不可テキストデータを前記外部端末に送信することを特徴とする請求項2に記載の訪問者連絡システム。
In the calling device,
The imaging means, when called from the calling means, images the visitor to generate captured image data,
A face detection unit that detects a human face based on the captured image data generated by the imaging unit when the response determination unit determines that there is no response;
And a third instruction transmission means for transmitting, to the visitor communication device, an instruction to transmit face detection impossible text data related to face detection failure to the external terminal when no face is detected by the face detection means. ,
In the visitor communication device,
The instruction receiving means receives the transmission instruction transmitted from the third instruction transmitting means;
The data transmission means includes
The visitor communication system according to claim 2, wherein the face detection impossible text data is transmitted to the external terminal in response to the transmission instruction based on reception of the transmission instruction by the instruction receiving unit.
前記登録手段は、前記人物画像データとして、人物の顔に係る人物顔画像データを登録し、
前記訪問者判定手段は、
前記撮像画像データに基づいて前記顔検出手段により検出された顔と前記登録手段に登録されている前記人物顔画像データを比較照合して、前記訪問者の人物顔画像データが前記登録手段に登録されているか否かを判定することを特徴とする請求項3に記載の訪問者連絡システム。
The registration means registers person face image data relating to a person's face as the person image data,
The visitor determination means includes
Based on the captured image data, the face detected by the face detection unit and the person face image data registered in the registration unit are compared and collated, and the person face image data of the visitor is registered in the registration unit. The visitor communication system according to claim 3, wherein it is determined whether or not it has been done.
前記呼出装置は、
前記第1指示送信手段から送信された前記送信指示に関する履歴情報を記録する履歴情報記録手段を備え、
前記第1指示送信手段は、前記履歴情報記録手段に記録され、前記訪問者判定手段により登録されていると判定された訪問者に係る履歴情報に基づいて、当該訪問者の訪問回数を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信することを特徴とする請求項1〜4の何れか一項に記載の訪問者連絡システム。
The calling device is:
Comprising history information recording means for recording history information relating to the transmission instruction transmitted from the first instruction transmitting means;
The first instruction transmission means is a visit including the number of visits of the visitor based on the history information related to the visitor recorded as recorded in the history information recording means and registered by the visitor determination means. The visitor communication system according to any one of claims 1 to 4, wherein an instruction to transmit visitor identification text data to the external terminal is transmitted to the visitor communication device.
前記呼出装置は、
前記訪問者の要件を受け付ける要件受付手段を備え、
前記第1指示送信手段は、前記要件受付手段により受け付けた要件を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信することを特徴とする請求項1〜5の何れか一項に記載の訪問者連絡システム。
The calling device is:
Comprising requirements accepting means for accepting the visitor's requirements;
The said 1st instruction | indication transmission means transmits the transmission instruction | indication with respect to the said external terminal of the visitor identification text data containing the requirements received by the said requirement reception means to the said visitor communication apparatus. The visitor communication system described in any one of the items.
室外の訪問者により操作される操作部と、前記操作部の操作に基づいて室内の利用者を呼び出す呼出手段と、前記呼出手段からの呼び出しに対して応答する応答手段と、前記応答手段からの応答があったか否かを判定する応答判定手段とを有するインターホンと、前記インターホン及び利用者により使用される外部端末とそれぞれ所定の通信回線を介して接続された訪問者連絡装置とを備えるインターホンシステムであって、
前記インターホンは、
前記呼出手段からの呼び出しの際に、前記室外の訪問者を撮像して撮像画像データを生成する撮像手段と、
人物の識別に係る人物識別データと当該人物の顔に係る人物顔画像データを対応付けて登録する登録手段と、
前記応答判定手段により応答がなかったと判定されると、前記撮像手段により生成された前記撮像画像データに基づいて、人物の顔を検出する顔検出手段と、
前記撮像画像データに基づいて前記顔検出手段により検出された顔と前記登録手段に登録されている前記人物顔画像データを比較照合して、前記撮像画像データに係る訪問者の人物顔画像データが前記登録手段に登録されているか否かを判定する訪問者判定手段と、
前記訪問者判定手段により登録されていると判定された場合に、前記人物顔画像データと対応付けて前記登録手段に登録されている前記人物識別データに基づいて、前記訪問者の識別に係る訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第1指示送信手段と、
前記訪問者判定手段により登録されていないと判定された場合に、前記撮像手段により生成された前記撮像画像データに基づいて、前記訪問者に係る訪問者画像データの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第2指示送信手段と、
前記顔検出手段により顔が検出されなかった場合に、顔検出不可に関連した顔検出不可テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第3指示送信手段と、
前記第1指示送信手段から送信された前記送信指示に関する履歴情報を記録する履歴情報記録手段と、
前記訪問者の要件を受け付ける要件受付手段と、を備え、
さらに、前記第1指示送信手段は、
前記履歴情報記録手段に記録され、前記訪問者判定手段により登録されていると判定された訪問者に係る履歴情報に基づいて、当該訪問者の訪問回数を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信し、また、前記要件受付手段により受け付けた要件を含む訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信し、
前記訪問者連絡装置は、
前記第1指示送信手段、前記第2指示送信手段及び第3指示送信手段から送信された前記送信指示を受信する指示受信手段と、
前記指示受信手段による前記送信指示の受信に基づいて、前記訪問者識別テキストデータ、前記訪問者画像データ及び前記顔検出不可テキストデータのうち、前記送信指示に応じたデータを前記外部端末に送信するデータ送信手段と、を備えることを特徴とするインターホンシステム。
An operation unit operated by an outdoor visitor, a calling unit that calls a user in the room based on the operation of the operation unit, a response unit that responds to a call from the calling unit, and a response from the response unit An intercom system comprising an interphone having response determination means for determining whether or not there is a response, and a visitor communication device connected to the interphone and an external terminal used by a user via a predetermined communication line, respectively. There,
The intercom is
When calling from the calling unit, an imaging unit that images a visitor outside the room and generates captured image data;
Registration means for registering the person identification data relating to the person identification and the person face image data relating to the face of the person in association with each other;
A face detection unit that detects a human face based on the captured image data generated by the imaging unit when the response determination unit determines that there is no response;
Based on the captured image data, the face detected by the face detection unit and the human face image data registered in the registration unit are compared and collated, and the human face image data of the visitor related to the captured image data is obtained. A visitor determination means for determining whether or not it is registered in the registration means;
When it is determined by the visitor determination means that the visitor is associated with the person face image data, the visit related to the visitor identification is based on the person identification data registered in the registration means. First instruction transmission means for transmitting a transmission instruction of the person identification text data to the external terminal to the visitor communication device;
When it is determined by the visitor determination means that it is not registered, based on the captured image data generated by the imaging means, an instruction to transmit visitor image data related to the visitor to the external terminal is sent Second instruction transmission means for transmitting to the visitor communication device;
A third instruction transmitting means for transmitting, to the visitor communication device, a transmission instruction to the external terminal of face detection impossible text data related to face detection failure when no face is detected by the face detection means;
History information recording means for recording history information related to the transmission instruction transmitted from the first instruction transmitting means;
Requirements receiving means for receiving the requirements of the visitor, and
Furthermore, the first instruction transmission means includes
The external terminal of visitor identification text data including the number of visits of the visitor based on the history information relating to the visitor recorded as recorded in the history information recording means and registered by the visitor determination means A transmission instruction to the visitor communication apparatus, and a transmission instruction to the external terminal of visitor identification text data including the requirements received by the requirement reception means is transmitted to the visitor communication apparatus,
The visitor communication device comprises:
An instruction receiving means for receiving the transmission instructions transmitted from the first instruction transmitting means, the second instruction transmitting means and the third instruction transmitting means;
Based on reception of the transmission instruction by the instruction receiving means, data corresponding to the transmission instruction is transmitted to the external terminal among the visitor identification text data, the visitor image data, and the face detection impossible text data. An intercom system comprising: a data transmission unit;
室外の訪問者により操作される操作部と、前記操作部の操作に基づいて室内の利用者を呼び出す呼出手段とを備え、利用者により使用される外部端末及び訪問者連絡装置とそれぞれ所定の通信回線を介して接続された呼出装置であって、
前記室外の訪問者を撮像して撮像画像データを生成する撮像手段と、
人物の識別に係る人物識別データと当該人物に係る人物画像データを対応付けて登録する登録手段と、
前記撮像手段により生成された前記撮像画像データと前記登録手段に登録されている前記人物画像データを比較照合して、前記撮像画像データに係る訪問者の人物画像データが前記登録手段に登録されているか否かを判定する訪問者判定手段と、
前記訪問者判定手段により登録されていると判定された場合に、前記人物画像データと対応付けて前記登録手段に登録されている前記人物識別データに基づいて、前記訪問者の識別に係る訪問者識別テキストデータの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第1指示送信手段と、
前記訪問者判定手段により登録されていないと判定された場合に、前記撮像手段により生成された前記撮像画像データに基づいて、前記訪問者に係る訪問者画像データの前記外部端末に対する送信指示を前記訪問者連絡装置に送信する第2指示送信手段と、を備えることを特徴とする呼出装置。
An operation unit operated by an outdoor visitor and a calling unit that calls an indoor user based on the operation of the operation unit, and each of the predetermined communication with an external terminal and a visitor communication device used by the user A calling device connected via a line,
Imaging means for imaging the outdoor visitors and generating captured image data;
Registration means for registering the person identification data relating to the person identification and the person image data relating to the person in association with each other;
The captured image data generated by the imaging unit and the person image data registered in the registration unit are compared and collated, and the person image data of the visitor related to the captured image data is registered in the registration unit. Visitor determination means for determining whether or not,
A visitor related to the identification of the visitor based on the person identification data registered in the registration means in association with the person image data when it is determined that the visitor determination means has registered. First instruction transmitting means for transmitting an instruction to transmit the identification text data to the external terminal to the visitor communication device;
When it is determined by the visitor determination means that it is not registered, based on the captured image data generated by the imaging means, an instruction to transmit visitor image data related to the visitor to the external terminal is sent And a second instruction transmitting means for transmitting to the visitor communication device.
JP2008130490A 2008-05-19 2008-05-19 Visitor contact system, intercom system and calling device Pending JP2009278585A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008130490A JP2009278585A (en) 2008-05-19 2008-05-19 Visitor contact system, intercom system and calling device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008130490A JP2009278585A (en) 2008-05-19 2008-05-19 Visitor contact system, intercom system and calling device

Publications (1)

Publication Number Publication Date
JP2009278585A true JP2009278585A (en) 2009-11-26

Family

ID=41443553

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008130490A Pending JP2009278585A (en) 2008-05-19 2008-05-19 Visitor contact system, intercom system and calling device

Country Status (1)

Country Link
JP (1) JP2009278585A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018160864A (en) * 2017-03-24 2018-10-11 オンキヨー株式会社 intercom

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018160864A (en) * 2017-03-24 2018-10-11 オンキヨー株式会社 intercom

Similar Documents

Publication Publication Date Title
JP4844614B2 (en) Information processing apparatus, information processing method, and computer program
JP2004336267A (en) Calling reception device, intercom device and telephone system
US20180007394A1 (en) Methods and devices for live broadcasting based on live broadcasting application
JP5185570B2 (en) Personal identification communication system and program executed in personal identification communication system
JP4260591B2 (en) Terminal device, home control device, and visit notification system
JP2011010084A (en) Home network system and communication method
JP2006341938A (en) Elevator emergency communication system
JP2007104382A (en) Interphone apparatus
JP2009278585A (en) Visitor contact system, intercom system and calling device
JP2009065620A (en) Videophone apparatus and call arrival response method of videophone apparatus
JP2004056370A (en) Interphone system and information providing method
JP2005294927A (en) Video doorphone system
JP7133781B2 (en) Intercom device and intercom system
KR101776652B1 (en) Apparatus and method for changing call mode in portable terminal
JP2015115926A (en) Portable terminal device, lip-reading communication method, and program
JP5597851B2 (en) Door phone system with message function
JP2006140596A (en) Communication terminal
JP7297462B2 (en) Visitor response system
JP2007096831A (en) Interphone system
CN101185320A (en) Image display system, terminal device, image display method, and program
EP3562132B1 (en) Intercom system, control method and computer program
JP2017163249A (en) Telephone call method and telephone system using the same
JP6643681B2 (en) Communication system, video signal acquisition device, and communication device
JP6868825B2 (en) Intercom system, lobby intercom, master unit, control device, and program
WO2007072698A1 (en) Composite telephone device