JP7872016B2 - Matching device, matching system, matching terminal, matching method, and program - Google Patents
Matching device, matching system, matching terminal, matching method, and programInfo
- Publication number
- JP7872016B2 JP7872016B2 JP2022058353A JP2022058353A JP7872016B2 JP 7872016 B2 JP7872016 B2 JP 7872016B2 JP 2022058353 A JP2022058353 A JP 2022058353A JP 2022058353 A JP2022058353 A JP 2022058353A JP 7872016 B2 JP7872016 B2 JP 7872016B2
- Authority
- JP
- Japan
- Prior art keywords
- visitor
- registered
- image
- matching
- list
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Collating Specific Patterns (AREA)
- Emergency Alarm Devices (AREA)
- Alarm Systems (AREA)
- Interconnected Communication Systems, Intercoms, And Interphones (AREA)
Description
本開示は照合装置、照合システム、照合用端末、照合方法、及びプログラムに関する。 This disclosure relates to a matching device, a matching system, a matching terminal, a matching method, and a program.
訪問系詐欺被害の多くは、公的機関の人物になりすました犯人が被害者の個人情報を入手し、悪用するものである。このような被害に遭わないためには、訪問を受ける人(訪問受け者)が犯人と接触しないことが重要である。 Many door-to-door scams involve perpetrators impersonating public officials to obtain and misuse victims' personal information. To avoid becoming a victim of such scams, it is crucial that those receiving visits (the recipients of visits) do not come into contact with the perpetrators.
特許文献1は、施設の内部に位置する通知装置を含む通知システムの制御方法が開示されている。当該制御方法は、(a)配達業者サーバから、物品の配達員の顔情報を取得し、(b)施設の外部に設置されたカメラで撮影された施設への訪問者の顔のカメラ画像を取得する。さらに、当該制御方法は、(c)顔情報及びカメラ画像を比較して、訪問者が配達員であるか否かを確認する。さらに、当該制御方法は、(d)訪問者が配達員であると確認された場合、通知装置により、施設に物品の配達員が到着したことを示す配達情報を通知する。 Patent Document 1 discloses a control method for a notification system including a notification device located inside a facility. This control method involves (a) acquiring facial information of the goods delivery person from a delivery company server, and (b) acquiring camera images of visitors to the facility captured by cameras installed outside the facility. Furthermore, the control method (c) compares the facial information and camera images to confirm whether the visitor is a delivery person. Finally, if the visitor is confirmed to be a delivery person, the control method (d) notifies the facility via the notification device that the goods delivery person has arrived, indicating delivery information.
しかしながら、このような方法では、予め登録された配達員のみしか適用されず、公的機関の人物になりすました場合、対処できないという問題があった。 However, this method only applied to pre-registered delivery personnel and had the problem of being unable to deal with cases where someone impersonated a public official.
そこで本開示の目的は、公的機関、民間の警備会社及び宅配業者等の職員へのなりすましを見抜く照合装置、照合システム、照合用端末、照合方法、及びプログラムを提供することである。 Therefore, the purpose of this disclosure is to provide a verification device, verification system, verification terminal, verification method, and program for detecting impersonation of employees of public institutions, private security companies, and delivery companies.
本開示の照合装置は、
訪問を許可する人の顔画像である第1の登録画像が所属先に対応付けて登録されている登録部と、
訪問者の前記所属先と前記訪問者の顔の撮像画像を取得するデータ取得部と、
前記訪問者の前記所属先に基づいて前記第1の登録画像を検索する検索部と、
検索された前記第1の登録画像と前記撮像画像を照合する第1の照合部と、
前記第1の登録画像と前記撮像画像を照合した結果を第1の照合結果として送信する送信部と、を備える照合装置である。
The matching device of this disclosure is
The first registration image, which is a facial image of the person authorized to visit, is registered in association with the affiliated organization in the registration department,
A data acquisition unit that acquires the visitor's affiliation and an image of the visitor's face,
A search unit that searches for the first registered image based on the affiliation of the visitor,
A first matching unit that compares the retrieved first registered image with the captured image,
The matching device includes a transmission unit that transmits the result of comparing the first registered image with the captured image as a first matching result.
本開示の照合システムは、
訪問を許可する人の顔画像である第1の登録画像が所属先に対応付けて登録されている顔画像蓄積サーバと、
訪問者の前記所属先と前記訪問者の顔の撮像画像を取得するデータ取得部と、
前記訪問者の前記所属先に基づいて前記第1の登録画像を検索する検索部と、
検索された前記第1の登録画像と前記撮像画像を照合する第1の照合部と、
前記第1の登録画像と前記撮像画像を照合した結果を第1の照合結果として送信する送信部と、を備えた照合システムである。
The matching system in this disclosure is
A facial image storage server where the first registered image, which is the facial image of the person authorized to visit, is registered and associated with their affiliation,
A data acquisition unit that acquires the visitor's affiliation and an image of the visitor's face,
A search unit that searches for the first registered image based on the affiliation of the visitor,
A first matching unit that compares the retrieved first registered image with the captured image,
The matching system includes a transmission unit that transmits the result of comparing the first registered image with the captured image as a first matching result.
本開示の照合用端末は、
訪問者の顔をカメラで撮影して撮像画像を取得する撮影部と、
前記訪問者の前記撮像画像と所属先を、訪問を許可する人の顔画像である第1の登録画像が所属先に対応付けられて登録されている第1の照合装置に送信する送信部と、
前記第1の照合装置が前記撮像画像を前記第1の登録画像に照合した結果を第1の照合結果として表示する表示部と、を備える照合用端末である。
The verification terminal in this disclosure is
The camera unit captures images of visitors' faces using a camera, and
A transmission unit transmits the captured image of the visitor and their affiliation to a first matching device in which a first registered image, which is a facial image of the person authorized to visit, is registered and associated with the affiliation.
The matching terminal comprises a display unit that displays the result of the first matching device matching the captured image with the first registered image as the first matching result.
本開示の照合方法は、
訪問者の所属先と前記訪問者の顔の撮像画像を取得するステップと、
訪問を許可する人の顔画像である第1の登録画像が前記所属先に対応付けて登録されている登録部を検索するステップと、
前記検索された前記第1の登録画像を前記撮像画像と照合するステップと、
前記第1の登録画像と前記撮像画像との照合結果を第1の照合結果として送信するステップと、を備える照合方法である。
The method for verifying this disclosure is:
The steps include obtaining the visitor's affiliation and an image of the visitor's face,
A step of searching for a registration department in which a first registered image, which is a facial image of a person authorized to visit, is registered in association with the aforementioned affiliation,
The steps include comparing the retrieved first registered image with the captured image,
The matching method comprises the step of transmitting the result of matching the first registered image with the captured image as a first matching result.
本開示のプログラムは、
訪問者の所属先と前記訪問者の顔の撮像画像を取得するステップと、
訪問を許可する人の顔画像である第1の登録画像が前記所属先に対応付けて登録されている登録部を検索するステップと、
前記検索された前記第1の登録画像を前記撮像画像と照合するステップと、
前記第1の登録画像と前記撮像画像との照合結果を第1の照合結果として送信するステップと、を照合装置に実行させるプログラムである。
The program disclosed herein is
The steps include obtaining the visitor's affiliation and an image of the visitor's face,
A step of searching for a registration department in which a first registered image, which is a facial image of a person authorized to visit, is registered in association with the aforementioned affiliation,
The steps include comparing the retrieved first registered image with the captured image,
This program causes a matching device to perform the steps of: transmitting the result of matching the first registered image with the captured image as the first matching result.
本開示により、公的機関、民間の警備会社及び宅配業者等の職員へのなりすましを見抜く照合装置、照合システム、照合用端末、照合方法、及びプログラムを提供できる。 This disclosure provides a verification device, verification system, verification terminal, verification method, and program for detecting impersonation of employees of public institutions, private security companies, and delivery companies.
以下、図面を参照して本発明の実施の形態について説明する。しかしながら、特許請求の範囲にかかる発明を以下の実施の形態に限定するものではない。また、実施の形態で説明する構成の全てが課題を解決するための手段として必須であるとは限らない。説明の明確化のため、以下の記載及び図面は、適宜、省略、及び簡略化がなされている。各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。 The embodiments of the present invention will be described below with reference to the drawings. However, the invention claimed is not limited to the following embodiments. Furthermore, not all of the configurations described in the embodiments are necessarily essential for solving the problem. For clarity, the following descriptions and drawings have been omitted and simplified as appropriate. In each drawing, the same elements are denoted by the same reference numerals, and redundant explanations have been omitted where necessary.
(実施の形態1にかかるシステムの構成)
図1は、家に訪問者が来訪したときの実施の形態1にかかるシステムの構成図である。図1を参照しながら、実施の形態1にかかるシステムの構成を説明する。実施の形態1にかかるシステムは、家1に設置されたインターホン2と、宅内モニタ3と、ホームゲートウェイ5と、ネットワーク10で接続された外部の第1の照合装置20と、第2の照合装置21と、を備える。実施の形態1のシステムは、場合によっては、さらに携帯端末4と、ネットワーク10に接続された警察30と、警備会社31と、を含んでもよい。
(Configuration of the system according to Embodiment 1)
Figure 1 is a diagram showing the configuration of the system according to Embodiment 1 when a visitor arrives at the house. The configuration of the system according to Embodiment 1 will be explained with reference to Figure 1. The system according to Embodiment 1 includes an intercom 2 installed in the house 1, an in-house monitor 3, a home gateway 5, an external first verification device 20 connected to the network 10, and a second verification device 21. The system of Embodiment 1 may also include, in some cases, a mobile terminal 4, police 30 connected to the network 10, and a security company 31.
インターホン2は、家1内の宅内モニタ3に接続される。インターホン2は、訪問者7が来訪したときに顔画像を撮影するカメラ機能を備える。また、インターホン2は、訪問者7の声を集音するマイク機能を備える。さらに、インターホン2は、家人である訪問受け者6が応答するためのスピーカ機能を備える。また、インターホン2は、宅内モニタ3に訪問者7が来訪を告げるためのスイッチを備え、スイッチが押されるとチャイムが鳴り訪問受け者6を呼び出す。 Intercom 2 is connected to the in-house monitor 3 inside house 1. Intercom 2 has a camera function to capture a facial image when visitor 7 arrives. Intercom 2 also has a microphone function to collect visitor 7's voice. Furthermore, intercom 2 has a speaker function for the resident (visitor 6) to answer. Intercom 2 also has a switch on the in-house monitor 3 for visitor 7 to announce their arrival; when the switch is pressed, a chime sounds and calls visitor 6.
宅内モニタ3は、インターホン2で撮影された訪問者の顔が表示される表示機能を備える。また、宅内モニタ3は、訪問者の声を発するスピーカ機能を備える。さらに、宅内モニタ3は、訪問受け者6が応答する声を集音するマイク機能を備える。宅内モニタ3は、ホームゲートウェイを介してネットワーク10に接続される。 The in-home monitor 3 has a display function that shows the visitor's face as captured by the intercom 2. The in-home monitor 3 also has a speaker function that emits the visitor's voice. Furthermore, the in-home monitor 3 has a microphone function that collects the voice of the person receiving the visit 6. The in-home monitor 3 is connected to the network 10 via the home gateway.
携帯端末4は、Bluetooth(登録商標)接続及びWi-Fi接続などの無線LANまたは携帯電話回線を用いて宅内モニタ3に接続される。場合によっては、訪問受け者6は、携帯端末4を用いてインターホン2が受け付けている訪問者と会話することができる。 The mobile terminal 4 connects to the in-home monitor 3 using a wireless LAN such as Bluetooth® or Wi-Fi, or a mobile phone line. In some cases, the visitor 6 can use the mobile terminal 4 to communicate with the visitor received by the intercom 2.
ホームゲートウェイ5は、宅内モニタがインターネットなど外部のネットワークに接続するための機器である。 The Home Gateway 5 is a device that allows the in-home monitor to connect to an external network, such as the internet.
第1の照合装置20は、ネットワーク10を介して宅内モニタ3に接続される。第1の照合装置20は、公的機関(警察、消防署、市役所、及び医療機関等)、民間の警備会社、宅配業者等の職員の顔画像データが登録されている。すなわち第1の照合装置20は、訪問者7の顔画像をホワイトリストと照合する装置である。 The first matching device 20 is connected to the in-home monitor 3 via the network 10. The first matching device 20 has registered facial image data of employees of public institutions (police, fire departments, city halls, and medical institutions, etc.), private security companies, delivery companies, etc. In other words, the first matching device 20 is a device that compares the facial image of the visitor 7 against a whitelist.
第2の照合装置21は、ネットワーク10を介して宅内モニタ3に接続される。第2の照合装置21は、過去になりすましを実施した人物、通報対象者と通報対象候補者の顔画像データが登録されている。すなわち、第2の照合装置21は、訪問者7の顔画像をブラックリスト及びブラックリスト候補と照合する装置である。 The second matching device 21 is connected to the in-home monitor 3 via the network 10. The second matching device 21 has registered facial image data of individuals who have previously impersonated others, as well as individuals who have been reported and those who are candidates for reporting. In other words, the second matching device 21 is a device that compares the facial image of visitor 7 with the blacklist and candidates for the blacklist.
ネットワーク10は、インターネット回線または携帯電話回線のいずれでもよい。ネットワーク10は、家1と、警察30及び警備会社31との間をデータ通信できるように接続する機能を備える。 Network 10 may be either an internet connection or a mobile phone connection. Network 10 has the function of connecting home 1 to the police 30 and security company 31 for data communication.
警察30及び警備会社31は、ネットワーク10を介して宅内モニタ3に接続される。また、警察30及び警備会社31は、ネットワーク10を介して携帯端末4に接続されてもよい。このため、訪問受け者6は、訪問者7が不審人物である場合、ネットワーク10を介して警察30または警備会社31に通報することができる。 The police 30 and security company 31 are connected to the in-home monitor 3 via the network 10. The police 30 and security company 31 may also be connected to the mobile terminal 4 via the network 10. Therefore, if the visitor 6 suspects the visitor 7 is a suspicious person, they can report it to the police 30 or security company 31 via the network 10.
(実施の形態1にかかるインターホン及び宅内モニタの構成)
図2は、実施の形態1にかかるインターホン及び宅内モニタの構成図である。図2を参照しながら、実施の形態1にかかるインターホン及び宅内モニタの構成を説明する。インターホン2は、撮影部1001と、音声入出力部1002と、を備える。宅内モニタ3は、表示部2001と、音声入出力部2002と、送信部2003と、を備える。
(Configuration of the intercom and in-home monitor according to Embodiment 1)
Figure 2 is a diagram illustrating the configuration of the intercom and in-home monitor according to Embodiment 1. The configuration of the intercom and in-home monitor according to Embodiment 1 will be described with reference to Figure 2. The intercom 2 comprises a camera unit 1001 and an audio input/output unit 1002. The in-home monitor 3 comprises a display unit 2001, an audio input/output unit 2002, and a transmission unit 2003.
インターホン2の撮影部1001は、訪問者7の顔画像である撮像画像を撮影するカメラである。撮影部1001は、宅内モニタ3の表示部2001に接続される。表示部2001は、液晶表示装置またはEL(Electro Luminescence)表示装置などの表示装置である。表示部2001は、撮影部1001で撮影された訪問者7の顔画像を表示し、訪問受け者6に示す。 The camera unit 1001 of the intercom 2 is a camera that captures an image of the visitor's face 7. The camera unit 1001 is connected to the display unit 2001 of the in-house monitor 3. The display unit 2001 is a display device such as a liquid crystal display or an EL (Electro-Luminescence) display device. The display unit 2001 displays the face image of the visitor 7 captured by the camera unit 1001 and shows it to the person receiving the visit 6.
インターホン2の音声入出力部1002は、マイクとスピーカである。音声入出力部1002は、訪問者7が発する音声を集音し、訪問受け者6の音声を発する。インターホン2の音声入出力部1002は、宅内モニタ3の音声入出力部2002に接続される。宅内モニタ3の音声入出力部2002は、マイクとスピーカである。音声入出力部2002は、訪問受け者6が発する音声を集音し、訪問者7の音声を発する。インターホン2が宅内モニタ3と協働して、訪問者7と訪問受け者6のコミュニケーションが取れる。 The audio input/output unit 1002 of the intercom 2 consists of a microphone and a speaker. The audio input/output unit 1002 collects the voice emitted by visitor 7 and emits the voice of visitor 6. The audio input/output unit 1002 of the intercom 2 is connected to the audio input/output unit 2002 of the in-house monitor 3. The audio input/output unit 2002 of the in-house monitor 3 consists of a microphone and a speaker. The audio input/output unit 2002 collects the voice emitted by visitor 6 and emits the voice of visitor 7. The intercom 2 works in cooperation with the in-house monitor 3 to enable communication between visitor 7 and visitor 6.
送信部2003は、Bluetooth(登録商標)接続及びWi-Fi接続などの無線LAN、有線LAN、または携帯電話回線でネットワーク10に接続される。送信部2003は、撮影部1001に接続され、訪問者7の顔画像データを外部の第1の照合装置20及び第2の照合装置21に送信する。また、送信部2003は、音声入出力部2002に接続されてもよい。送信部2003は、訪問者7の音声を第1の照合装置20に送信してもよい。 The transmitting unit 2003 is connected to the network 10 via wireless LAN such as Bluetooth® and Wi-Fi, wired LAN, or a mobile phone line. The transmitting unit 2003 is connected to the imaging unit 1001 and transmits the visitor's 7 facial image data to the external first matching device 20 and second matching device 21. The transmitting unit 2003 may also be connected to the audio input/output unit 2002. The transmitting unit 2003 may also transmit the visitor's 7 voice to the first matching device 20.
受信部(図示せず)は、第1の照合装置20で照合された第1の照合結果及び第2の照合装置21で照合された第2の照合結果を受信する。表示部2001は、第1の照合結果及び第2の照合結果を表示する。また、送信部2003は、第2の照合結果が一致せず、第1の照合結果が一致しなかった場合、警察30に通報する機能を備える。 The receiving unit (not shown) receives the first matching result obtained by the first matching device 20 and the second matching result obtained by the second matching device 21. The display unit 2001 displays the first and second matching results. The transmitting unit 2003 also has a function to notify the police 30 if the second matching result does not match and the first matching result does not match.
(実施の形態1にかかる第1の照合装置の構成)
図3は、実施の形態1にかかる第1の照合装置の構成図である。図3を参照しながら、実施の形態1にかかる第1の照合装置の構成を説明する。実施の形態1にかかる第1の照合装置20は、第1の登録部3001と、データ取得部3002と、検索部3003と、第1の照合部3004と、送信部3005と、を備える。
(Configuration of the first verification device according to Embodiment 1)
Figure 3 is a configuration diagram of the first matching device according to Embodiment 1. The configuration of the first matching device according to Embodiment 1 will be described with reference to Figure 3. The first matching device 20 according to Embodiment 1 comprises a first registration unit 3001, a data acquisition unit 3002, a search unit 3003, a first matching unit 3004, and a transmission unit 3005.
第1の登録部3001は、顔画像蓄積サーバである。第1の登録部3001は、あらかじめ公的機関(警察、消防署、市役所、及び訪問医療等)、民間の警備会社、宅配業者等の職員の顔画像データである第1の登録画像が登録されている。第1の登録部3001は、顔画像データを所属組織ごとに分類している。これらの顔画像データは、訪問を許可する人の顔画像、いわゆるホワイトリストに該当する。 The first registration unit 3001 is a facial image storage server. The first registration unit 3001 has pre-registered facial image data of employees of public institutions (police, fire departments, city halls, and visiting medical services, etc.), private security companies, delivery companies, etc. The first registration unit 3001 classifies the facial image data by the organization to which the person belongs. These facial image data represent the facial images of people authorized to visit, a so-called whitelist.
データ取得部3002は、宅内モニタ3からネットワーク10を介して訪問者7の顔画像を取得する。また、データ取得部3002は、宅内モニタ3から訪問者7の所属先を取得する。また、データ取得部3002は、宅内モニタ3から音声データを取得してもよい。この音声データは、訪問者7の所属先を提示するものである。例えば、音声データは、「警察です。」、または「市役所のものです。」などである。データ取得部は、音声データを音声認識することにより所属先を取得してもよい。 The data acquisition unit 3002 acquires the visitor's facial image from the in-home monitor 3 via the network 10. The data acquisition unit 3002 also acquires the visitor's affiliation from the in-home monitor 3. The data acquisition unit 3002 may also acquire voice data from the in-home monitor 3. This voice data indicates the visitor's affiliation. For example, the voice data might say, "I'm from the police," or "I'm from the city hall." The data acquisition unit may also acquire the affiliation by performing voice recognition on the voice data.
検索部3003は、訪問者7の所属先に基づいて、第1の登録部3001の第1の登録画像を検索する。すなわち、第1の照合装置20は、訪問者7が所属先を提示することで、所属先に対応付けて登録されている顔画像データを検索することができる。 The search unit 3003 searches the first registered image in the first registration unit 3001 based on the visitor's affiliation. In other words, the first matching device 20 can search for face image data registered in association with an affiliation when the visitor 7 provides their affiliation.
第1の照合部3004は、訪問者7の顔画像である撮像画像が検索部3003で検索された第1の登録画像と一致するものがあるか否か照合する。撮像画像が第1の登録画像と一致する場合、訪問者7は、訪問を許可する人である。撮像画像が第1の登録画像と不一致である場合、訪問者7は、訪問を許可しない人である。 The first matching unit 3004 checks whether the captured image, which is the face image of visitor 7, matches the first registered image retrieved by the search unit 3003. If the captured image matches the first registered image, visitor 7 is authorized to visit. If the captured image does not match the first registered image, visitor 7 is not authorized to visit.
送信部3005は、ネットワーク10を介して第1の照合部3004の第1の照合結果を宅内モニタ3に送信する機能を備える部分である。 The transmission unit 3005 is a component that has the function of transmitting the first verification result of the first verification unit 3004 to the in-home monitor 3 via the network 10.
(実施の形態1にかかる第2の照合装置の構成)
図4は、実施の形態1にかかる第2の照合装置の構成図である。図4を参照しながら、実施の形態1にかかる第2の照合装置の構成を説明する。実施の形態1にかかる第2の照合装置21は、第2の登録部4001と、データ取得部4002と、第2の照合部4003と、送信部4004と、検索部4005と、第3の登録部4006と、確認部4007と、通報回数加算部4008と、を備える。
(Configuration of the second verification device according to Embodiment 1)
Figure 4 is a configuration diagram of the second matching device according to Embodiment 1. The configuration of the second matching device according to Embodiment 1 will be described with reference to Figure 4. The second matching device 21 according to Embodiment 1 includes a second registration unit 4001, a data acquisition unit 4002, a second matching unit 4003, a transmission unit 4004, a search unit 4005, a third registration unit 4006, a confirmation unit 4007, and a notification count addition unit 4008.
第2の登録部4001は、通報対象サーバである。第2の登録部4001は、通報の対象となる人物の顔画像が登録されている通報対象者リスト、いわゆるブラックリストを備える。通報対象者リストに登録されている顔画像は、第2の登録画像である。また、第2の登録部4001は、通報対象者の訪問日時及び位置情報を記録する。 The second registration unit 4001 is the server targeted for reporting. The second registration unit 4001 contains a list of individuals targeted for reporting, a so-called blacklist, in which facial images of the individuals targeted for reporting are registered. The facial images registered in the list of individuals targeted for reporting are the second registered images. Furthermore, the second registration unit 4001 records the date, time, and location information of the individuals targeted for reporting.
データ取得部4002は、宅内モニタ3からネットワーク10を介して訪問者7の顔画像を取得する。 The data acquisition unit 4002 acquires the visitor's facial image from the in-home monitor 3 via the network 10.
第2の照合部4003は、撮像画像が第2の登録画像に一致するものがあるか否か照合する。撮像画像が第2の登録画像に一致する場合、訪問者7は、通報対象者である。撮像画像が第2の登録画像と不一致であれば、訪問者7は、通報対象者でない。 The second matching unit 4003 checks whether the captured image matches any of the second registered images. If the captured image matches the second registered image, visitor 7 is the person subject to reporting. If the captured image does not match the second registered image, visitor 7 is not the person subject to reporting.
送信部4004は、ネットワーク10を介して第2の照合部4003の第2の照合結果を宅内モニタ3に送信する機能を備える。また、訪問者7が通報対象であった場合、送信部4004は、警察または警備会社に通報する機能を備える。 The transmission unit 4004 has the function of transmitting the second verification result of the second verification unit 4003 to the in-home monitor 3 via the network 10. Furthermore, if the visitor 7 is found to be a person who should be reported, the transmission unit 4004 has the function of notifying the police or security company.
検索部4005は、訪問受け者6が警察に通報した場合に、訪問者7が過去に通報された人物か否か通報対象候補者リストである第3の登録部4006を検索する機能を備える部分である。 The search unit 4005 is a part that, when the recipient 6 reports a visit to the police, has the function of searching the third registration unit 4006, which is a list of potential report targets, to determine whether the visitor 7 is a person who has been reported in the past.
第3の登録部4006は、通報対象者リストへの登録候補者となる人物の顔画像が登録されている通報対象候補者リスト、いわゆるブラックリスト候補者リストを備える。第3の登録部4006は、検索部4005で検索した後、過去に通報されていない人物であった場合は、新たに顔画像を登録する。また、第3の登録部4006は、通報対象候補者が訪問して通報された回数を記録する。 The third registration unit 4006 contains a list of potential reportable individuals, also known as a blacklist candidate list, in which facial images of individuals who may be added to the list of individuals to be reported are registered. After searching using the search unit 4005, the third registration unit 4006 registers a new facial image if the individual has not been reported in the past. The third registration unit 4006 also records the number of times a potential reportable individual has been visited and reported.
確認部4007は、検索部4005で検索した後、過去に通報された人物であった場合に、通報の回数が所定の数を超えているか否か確認する機能を備える部分である。 The verification unit 4007, after being searched by the search unit 4005, has the function of checking whether the number of reports exceeds a predetermined number if the person has been reported in the past.
通報回数加算部4008は、確認部4007で確認した後、通報の回数が所定の数を超えていない場合に通報の回数を加算する機能を備える部分である。加算された通報回数は、第3の登録部に記録される。第2の登録部4001は、確認部4007で確認した後、通報回数が所定の数を超えている場合は、訪問者を登録し、ブラックリストに加える。 The report count addition unit 4008 is a component that, after confirmation by the verification unit 4007, adds the report count if the number of reports does not exceed a predetermined number. The added report count is recorded in the third registration unit. The second registration unit 4001, after confirmation by the verification unit 4007, registers the visitor and adds them to the blacklist if the number of reports exceeds a predetermined number.
(実施の形態1にかかる訪問者が警察官の場合の処理)
図5は、実施の形態1にかかる訪問者が警察官の場合の処理のシーケンス図である。図5を参照しながら、実施の形態1にかかる訪問者が警察官の場合の処理について説明する。
(Handling of cases where the visitor in Embodiment 1 is a police officer)
Figure 5 is a sequence diagram of the process when the visitor in Embodiment 1 is a police officer. The process when the visitor in Embodiment 1 is a police officer will be explained with reference to Figure 5.
訪問者7が、家人である訪問受け者6の家を訪問し、インターホン2による呼び出し動作が行われる(S101)。インターホン2はカメラを起動し(S102)、訪問者の顔画像である撮像画像を撮影する。宅内モニタ3は、撮像画像を表示部2001で表示する(S103)とともに、撮像画像を第2の照合装置21に送信する(S104)。 Visitor 7 visits the home of the resident, recipient 6, and the intercom 2 initiates a call (S101). The intercom 2 activates its camera (S102) and captures an image of the visitor's face. The in-house monitor 3 displays the captured image on its display unit 2001 (S103) and transmits the image to the second verification device 21 (S104).
第2の照合装置21は、撮像画像が通報対象者の顔画像である第2の登録画像に一致するか否か照合する。また、訪問受け者6は、宅内モニタ3にて訪問者7に応答する(S105)。訪問受け者6が訪問者7に応答している間に、第2の照合装置21は、撮像画像が第2の登録画像と不一致であるという第2の照合結果を宅内モニタ3に送信する(S106)。S105は、S106と順番が入れ替わってもよい。 The second matching device 21 verifies whether the captured image matches the second registered image, which is the face image of the person being reported. The person receiving the visit 6 responds to the visitor 7 via the in-home monitor 3 (S105). While the person receiving the visit 6 is responding to the visitor 7, the second matching device 21 transmits the second matching result, indicating that the captured image does not match the second registered image, to the in-home monitor 3 (S106). The order of S105 and S106 may be reversed.
仮に、撮像画像が第2の登録画像と一致した場合は、第2の照合装置21は、撮像画像が第2の登録画像と一致するという第2の照合結果を宅内モニタ3に送信する。第2の照合装置21は、訪問者の訪問日時と位置情報を更新する。また、場合によっては、第2の照合装置21は、ネットワーク10を介して警察30または警備会社31に通報する。いずれにせよ宅内モニタ3は、第2の照合結果を受信すると、表示部2001に表示して訪問受け者6に通知する。 If the captured image matches the second registered image, the second matching device 21 transmits a second matching result, indicating that the captured image matches the second registered image, to the in-home monitor 3. The second matching device 21 updates the visitor's visit date, time, and location information. In some cases, the second matching device 21 also notifies the police 30 or security company 31 via the network 10. In any case, upon receiving the second matching result, the in-home monitor 3 displays it on the display unit 2001 to notify the visitor 6.
訪問者7は、訪問受け者6から応答をうけると、所属先を名乗る。ここでは訪問者7は、「警察です」と発する(S107)。インターホン2は、訪問者7の音声を集音し、宅内モニタ3に送信する(S108)。宅内モニタ3は、訪問者7の音声を認識し、所属先と撮像データを第1の照合装置20に送信する(S109)。 Upon receiving a response from the person being visited (6), visitor 7 identifies their affiliation. Here, visitor 7 says, "I'm the police" (S107). Intercom 2 collects visitor 7's voice and transmits it to the in-house monitor 3 (S108). The in-house monitor 3 recognizes visitor 7's voice and transmits the affiliation and image data to the first matching device 20 (S109).
第1の照合装置20は、顔画像蓄積サーバである第1の登録部3001の所属先テーブル、ここでは警察テーブルを検索する。第1の照合装置20は、撮像画像が所属先テーブルに登録された顔画像である第1の登録画像に一致するか否か照合する。第1の照合装置20は、撮像画像が第1の登録画像に一致するという第1の照合結果を宅内モニタ3に送信する(S110)。宅内モニタ3は、第1の照合結果を受信すると、表示部2001に表示して訪問受け者6に通知する。訪問受け者6は、訪問を許可する人であると認識でき、家の扉を開錠する(S111)。 The first matching device 20 searches the affiliation table of the first registration unit 3001, which is a face image storage server, in this case the police table. The first matching device 20 checks whether the captured image matches the first registered image, which is a face image registered in the affiliation table. The first matching device 20 transmits the first matching result, indicating that the captured image matches the first registered image, to the in-house monitor 3 (S110). Upon receiving the first matching result, the in-house monitor 3 displays it on the display unit 2001 and notifies the visitor 6. The visitor 6 recognizes the person as authorized to visit and unlocks the door to the house (S111).
(実施の形態1にかかる訪問者が警察官になりすましていた場合の処理)
図6は、実施の形態1にかかる訪問者が警察官になりすましていた場合の処理のシーケンス図である。図6を参照しながら、実施の形態1にかかる訪問者が警察官になりすましていた場合の処理を説明する。
(Handling of the case in which the visitor in Embodiment 1 is impersonating a police officer)
Figure 6 is a sequence diagram of the process when a visitor in Embodiment 1 is impersonating a police officer. The process when a visitor in Embodiment 1 is impersonating a police officer will be explained with reference to Figure 6.
撮像画像を第2の照合装置21で照合し、訪問受け者6に照合結果を宅内モニタ3で通知するまでは上記警察官である場合の処理と同じため(S101~S106)記載を省略する。 The process from the point where the captured image is compared with the second matching device 21 and the matching result is notified to the visitor 6 via the in-home monitor 3 is the same as in the case of a police officer (S101-S106), so the description is omitted.
訪問者が警察官になりすまし、警察官であると発した場合(S107)、インターホン2は、音声を集音する(S108)。宅内モニタ3は所属先を音声認識し、所属先と撮像画像を第1の照合装置20に送信する(S109)。第1の照合装置20は、顔画像蓄積サーバである第1の登録部3001の所属先テーブル、ここでは警察テーブルを検索する。第1の照合装置20は、撮像画像が所属先テーブルに登録された顔画像である第1の登録画像に一致するか否か照合する。第1の照合装置20は、撮像画像が第1の登録画像に不一致であるという第1の照合結果を宅内モニタ3に送信する(S201)。宅内モニタ3は、第1の照合結果を受信すると、表示部2001に表示して訪問受け者6に通知する。訪問受け者6は、訪問を許可する人でないと認識できる。宅内モニタ3は、警察または警備会社に通報する通報ボタンを押下するか否かの判断を訪問受け者6に求める。訪問受け者6が通報ボタンを押下した場合(S202)、訪問者7を通報対象サーバの候補者リストに登録する。また、登録回数が所定の数を超えている場合に、訪問者7をブラックリストに登録する。 If a visitor impersonates a police officer and claims to be one (S107), the intercom 2 collects the audio (S108). The in-home monitor 3 recognizes the affiliation by voice and transmits the affiliation and the captured image to the first matching device 20 (S109). The first matching device 20 searches the affiliation table, in this case the police table, of the first registration unit 3001, which is a face image storage server. The first matching device 20 checks whether the captured image matches the first registered image, which is a face image registered in the affiliation table. The first matching device 20 transmits the first matching result, indicating that the captured image does not match the first registered image, to the in-home monitor 3 (S201). Upon receiving the first matching result, the in-home monitor 3 displays it on the display unit 2001 to notify the visitor 6. The visitor 6 can then recognize that the visitor is not authorized to visit. The in-home monitor 3 prompts the visitor 6 to decide whether or not to press the call button to notify the police or security company. If the visitor 6 presses the call button (S202), visitor 7 is registered in the candidate list of the server to which the call will be made. Furthermore, if the number of registrations exceeds a predetermined number, visitor 7 is added to the blacklist.
(実施の形態1にかかる訪問受け者が通報した場合の第2の照合装置の処理)
図7は、実施の形態1にかかる訪問受け者が通報した場合の第2の照合装置の処理のフローチャートである。図7を参照しながら、訪問受け者が通報した場合の第2の照合装置の処理を説明する。
(Processing of the second verification device when the visitor in Embodiment 1 makes a report)
Figure 7 is a flowchart of the processing of the second verification device when a visitor reports a visitor in the first embodiment. The processing of the second verification device when a visitor reports a visitor will be explained with reference to Figure 7.
まず、通報対象候補者リストである第3の登録部4006を検索する(S301)。次に、通報された訪問者の顔画像である撮像画像が、第2の登録部に登録された顔画像に該当するか否か確認する(S302)。このステップは、訪問者が過去に通報された人物か否かを、通報対象候補者リストである第3の登録部4006を検索部4005で検索して確認するものである。 First, the system searches the third registration unit 4006, which is a list of potential report targets (S301). Next, it checks whether the captured image of the reported visitor's face matches any of the face images registered in the second registration unit (S302). This step confirms whether the visitor is a person who has been reported in the past by searching the third registration unit 4006, which is the list of potential report targets, using the search unit 4005.
撮像画像が該当しなければ(NOの場合)、撮像画像を候補者リストである第3の登録部4006に登録して(S303)処理を終了する。このステップは、過去に通報された人物でない場合に、訪問者の顔画像を通報対象候補者リストに登録するものである。 If the captured image does not match (resulting in NO), the image is registered in the third registration unit 4006, which is the candidate list (S303), and the process ends. This step registers the visitor's facial image in the list of potential report targets when the person has not been reported in the past.
撮像画像が該当していれば(YESの場合)、通報回数が所定以上か否か確認する(S304)。このステップは、過去に通報された人物である場合に、通報の回数が所定の数を超えているか否か確認部4007で確認するものである。 If the captured image matches (YES), the system checks whether the number of reports exceeds a predetermined number (S304). This step is performed by the verification unit 4007 to check whether the number of reports exceeds a predetermined number if the person has been reported in the past.
通報回数が所定の数未満の場合(NOの場合)、通報回数を加算して(S305)処理を終了する。このステップは、通報の回数が所定の数を超えていない場合、通報の回数を通報回数加算部4008で加算するものである。 If the number of reports is less than the predetermined number (NO), the number of reports is incremented (S305) and the process ends. This step is performed by the report count incrementing unit 4008 if the number of reports does not exceed the predetermined number.
通報回数が所定以上の場合(YESの場合)、通報対象者リストである第2の登録部4001に登録して(S306)処理を終了する。このステップは、通報の回数が所定の数を超えている場合は、訪問者7の顔画像を通報対象者リストに登録するものである。 If the number of reports exceeds a predetermined number (YES), the information is registered in the second registration unit 4001, which is the list of reported persons (S306), and the process ends. This step registers the visitor's face image in the list of reported persons if the number of reports exceeds a predetermined number.
このように第2の照合装置21がステップを実行することで、通報対象候補者を記録し、通報対象者の訪問日時と位置情報を記録することができるようになる。 By performing these steps, the second matching device 21 can record potential targets for reporting, as well as the date, time, and location information of the person being reported.
(実施の形態1にかかる宅内モニタの通知例の説明)
図8は、実施の形態1にかかる宅内モニタの通知例を示す図である。図8を参照しながら、実施の形態1にかかる宅内モニタの通知例を説明する。
(Explanation of an example of notification from the in-home monitor according to Embodiment 1)
Figure 8 shows an example of a notification from the in-home monitor according to Embodiment 1. The example of a notification from the in-home monitor according to Embodiment 1 will be explained with reference to Figure 8.
訪問者7が警察官を名乗り、警察官であった場合、認証OK画面801に示すように宅内モニタ3に第1の照合結果が示される。この場合認証OKとして訪問受け者6は、応答ボタンを押し応答することができる。 If visitor 7 claims to be a police officer and is indeed a police officer, the first verification result is displayed on the in-home monitor 3, as shown in the authentication OK screen 801. In this case, authentication is OK, and the visitor 6 can press the answer button to respond.
訪問者7が警察官を名乗り、警察官になりすましていた場合、認証NG画面802に示すように宅内モニタ3に第1の照合結果が示される。この場合、訪問受け者6は、認証NGとして通報ボタンを押すことができる。 If visitor 7 claims to be a police officer and is impersonating one, the first verification result will be displayed on the in-home monitor 3, as shown in the authentication failure screen 802. In this case, the person receiving the visitor 6 can press the report button to indicate authentication failure.
第1の照合装置20での認証にて正規の職員と判定された場合、宅内モニタ3に該当職員の所属情報を表示しているが、プライバシ保護のため該当職員により所属情報の表示可否を切り替え可能としてもよい。また、表示可否の切り替え忘れを防ぐため、一定時間経過後に所属情報が表示不可に自動遷移するようなタイマ機能を備えてもよい。 If the first verification device 20 determines that the user is a legitimate employee, the employee's affiliation information is displayed on the in-home monitor 3. However, for privacy protection, the employee may be able to toggle the display of their affiliation information. Furthermore, to prevent users from forgetting to toggle the display, a timer function may be provided that automatically switches the display of affiliation information to "disabled" after a certain period of time.
このような照合システム及び照合方法を提供することで、訪問受け者6は、訪問者7と接触することなく、公的機関、民間の警備会社及び宅配業者等の職員へのなりすましを見抜き、詐欺被害等を未然に防ぐことができる。 By providing such a matching system and method, the visitor 6 can detect impersonations of public officials, private security company employees, and delivery company employees without contacting the visitor 7, thereby preventing fraud and other related incidents.
(実施の形態2にかかるシステムの構成の説明)
図9は、企業、団体に訪問者が来訪したときの実施の形態2にかかるシステムの構成図である。図9を参照しながら、実施の形態2にかかるシステムの構成の説明をする。実施の形態1では訪問者7が家の人である訪問受け者6に訪問してすることを想定したが、実施の形態2では訪問者17が企業や団体の受付員等の訪問受け者16に訪問することを想定する。実施の形態2にかかるシステムと実施の形態1にかかるシステムとの相違点は、インターホン2と宅内モニタ3がカメラ付き情報端末12に置き換わったことである。
(Description of the system configuration according to Embodiment 2)
Figure 9 is a diagram showing the system configuration according to Embodiment 2 when a visitor comes to a company or organization. The system configuration according to Embodiment 2 will be explained with reference to Figure 9. In Embodiment 1, it was assumed that the visitor 7 visits the homeowner, the recipient 6, but in Embodiment 2, it is assumed that the visitor 17 visits the receptionist 16, such as a receptionist at a company or organization. The difference between the system according to Embodiment 2 and the system according to Embodiment 1 is that the intercom 2 and the in-house monitor 3 have been replaced with an information terminal with a camera 12.
実施の形態2にかかるシステムは、企業、団体等11に設置されたカメラ付き情報端末12と、ネットワーク10で接続された外部の第1の照合装置20と、第2の照合装置21と、を備える。実施の形態2のシステムは、場合によっては、さらに受付情報端末13と、ネットワーク10に接続された警察30と、警備会社31と、を含んでもよい。場合によっては、訪問受け者16は、受付情報端末13を用いて訪問者17と会話することができる。以後、相違点であるカメラ付き情報端末12及びシーケンスの変更点について説明する。 The system according to Embodiment 2 comprises a camera-equipped information terminal 12 installed at a company, organization, etc. 11, an external first verification device 20 connected via a network 10, and a second verification device 21. The system of Embodiment 2 may also optionally include a reception information terminal 13, police 30 connected to the network 10, and a security company 31. In some cases, the visitor 16 can converse with the visitor 17 using the reception information terminal 13. The differences, specifically the camera-equipped information terminal 12 and the changes in the sequence, will be described below.
(実施の形態2にかかるカメラ付き情報端末の構成の説明)
図10は、実施の形態2にかかるカメラ付き情報端末の構成図である。図10を参照しながら、実施の形態2にかかるカメラ付き情報端末の説明をする。カメラ付き情報端末12は、撮影部5001と、音声入力部5002と、表示部5003と、送信部5004と、を備える。
(Description of the configuration of the camera-equipped information terminal according to Embodiment 2)
Figure 10 is a diagram showing the configuration of an information terminal with a camera according to Embodiment 2. The information terminal with a camera according to Embodiment 2 will be described with reference to Figure 10. The information terminal with a camera 12 comprises a shooting unit 5001, an audio input unit 5002, a display unit 5003, and a transmission unit 5004.
カメラ付き情報端末12は、例えばスマートフォンまたはタブレット端末のようなカメラ付き情報端末である。カメラ付き情報端末12は、PC(Personal Computer)のように地面に固定されたものであってもよい。 The camera-equipped information terminal 12 is, for example, a smartphone or tablet. The camera-equipped information terminal 12 may also be fixed to the ground, like a PC (Personal Computer).
撮影部5001は、訪問者17の顔画像である撮像画像を撮影するカメラである。撮影部5001は、表示部5003に接続される。表示部5003は、液晶表示装置またはEL表示装置などの表示装置である。表示部5003は、撮影部5001で撮影された訪問者17の顔画像を表示し、訪問受け者16に示す。音声入力部5002は、マイクである。訪問者17が発する音声を集音する。 The imaging unit 5001 is a camera that captures an image of the visitor 17's face. The imaging unit 5001 is connected to the display unit 5003. The display unit 5003 is a display device such as a liquid crystal display or an EL display. The display unit 5003 displays the face image of the visitor 17 captured by the imaging unit 5001 and shows it to the recipient 16. The voice input unit 5002 is a microphone. It collects the voice emitted by the visitor 17.
送信部5004は、Bluetooth(登録商標)接続及びWi-Fi接続などの無線LAN、有線LANまたは携帯電話回線でネットワーク10に接続される。送信部5004は、表示部に接続され、訪問者17の顔画像データを外部の第1の照合装置20及び第2の照合装置21に送信する。また、送信部5004は、音声入力部5002に接続されてもよい。送信部5004は、訪問者17の音声を第1の照合装置20に送信してもよい。 The transmitting unit 5004 is connected to the network 10 via wireless LAN such as Bluetooth® and Wi-Fi, wired LAN, or a mobile phone line. The transmitting unit 5004 is connected to the display unit and transmits the visitor's 17 facial image data to the external first matching device 20 and second matching device 21. The transmitting unit 5004 may also be connected to the voice input unit 5002. The transmitting unit 5004 may also transmit the visitor's 17 voice to the first matching device 20.
受信部(図示せず)は、第1の照合装置20で照合された第1の照合結果及び第2の照合装置21で照合された第2の照合結果を受信する。表示部5003は、第1の照合結果及び第2の照合結果を表示する。また、送信部5004は、第2の照合結果が一致せず、第1の照合結果が一致しなかった場合、警察30に通報する機能を備える。 The receiving unit (not shown) receives the first matching result obtained by the first matching device 20 and the second matching result obtained by the second matching device 21. The display unit 5003 displays the first and second matching results. The transmitting unit 5004 also has a function to notify the police 30 if the second matching result does not match and the first matching result does not match.
(実施の形態2にかかる訪問者が警察の場合の処理の説明)
図11は、実施の形態2にかかる訪問者が警察の場合の処理のシーケンス図である。図11を参照しながら、実施の形態2にかかる訪問者が警察の場合の処理を説明する。
(Explanation of how to handle the case where the visitor in Embodiment 2 is the police)
Figure 11 is a sequence diagram of the process when the visitor in Embodiment 2 is a police officer. The process when the visitor in Embodiment 2 is a police officer will be explained with reference to Figure 11.
訪問者17が、企業、団体等を訪問し、受付員である訪問受け者16による受付が行われる(S401)。訪問受け者16は、訪問者17をカメラ付き情報端末12の前に誘導する(S402)。訪問者17がカメラ付き情報端末の前に移動する(S403)。カメラ付き情報端末12は、インストールされているアプリケーションソフトウェア(以下、単にアプリという)を介してカメラを起動し、訪問者17の顔画像である撮像画像を撮影する。表示部5003は、撮像画像を表示するとともに、撮像画像を第2の照合装置21に送信する(S404)。 Visitor 17 visits a company, organization, etc., and is checked in by a receptionist, visitor 16 (S401). Visitor 16 guides Visitor 17 in front of a camera-equipped information terminal 12 (S402). Visitor 17 moves in front of the camera-equipped information terminal (S403). The camera-equipped information terminal 12 activates its camera via the installed application software (hereinafter simply referred to as "app") and captures an image of Visitor 17's face. The display unit 5003 displays the captured image and transmits the captured image to the second verification device 21 (S404).
第2の照合装置21は、撮像画像が通報対象者の顔画像である第2の登録画像に一致するか否か照合する。第2の照合装置21は、撮像画像が第2の登録画像と不一致であるという第2の照合結果をカメラ付き情報端末12に送信する(S405)。 The second matching device 21 checks whether the captured image matches the second registered image, which is the face image of the person being reported. The second matching device 21 transmits the second matching result, indicating that the captured image does not match the second registered image, to the camera-equipped information terminal 12 (S405).
仮に、撮像画像が第2の登録画像と一致していた場合は、第2の照合装置21は、撮像画像が第2の登録画像と一致するという第2の照合結果をカメラ付き情報端末12に送信する。第2の照合装置21は、訪問者17の訪問日時と位置情報を更新する。また、場合によっては、第2の照合装置21は、ネットワーク10を介して警察30または警備会社31に通報する。いずれにせよ、カメラ付き情報端末12は、アプリを介して第2の照合結果を受信すると、表示部5003に表示して訪問受け者16に通知する。 If the captured image matches the second registered image, the second matching device 21 transmits the second matching result, indicating that the captured image matches the second registered image, to the camera-equipped information terminal 12. The second matching device 21 updates the visit date, time, and location information of the visitor 17. In some cases, the second matching device 21 also notifies the police 30 or security company 31 via the network 10. In any case, upon receiving the second matching result via the application, the camera-equipped information terminal 12 displays it on the display unit 5003 to notify the visitor 16.
また、訪問受け者16は、訪問者17に所属先を発声してもらうように促す(S406)。訪問者17は、所属先を名乗る。ここでは訪問者17は、「警察です」と発する(S407)。カメラ付き情報端末12は、アプリを介して訪問者17の音声を集音し、音声認識し、所属先と撮像データを第1の照合装置20に送信する(S408)。 Furthermore, the visitor 16 prompts the visitor 17 to state their affiliation (S406). The visitor 17 identifies their affiliation. Here, the visitor 17 says, "I'm from the police" (S407). The camera-equipped information terminal 12 collects the visitor 17's voice via the application, performs voice recognition, and transmits the affiliation and image data to the first matching device 20 (S408).
第1の照合装置20は、顔画像蓄積サーバである第1の登録部3001の所属先テーブル、ここでは警察テーブルを検索する。第1の照合装置20は、撮像画像が所属先テーブルに登録された顔画像である第1の登録画像に一致するか否か照合する。第1の照合装置20は、撮像画像が第1の登録画像に一致するという第1の照合結果をカメラ付き情報端末12に送信する(S409)。カメラ付き情報端末12は、第1の照合結果を受信すると、表示部5003に表示して訪問受け者16に通知する(S410)。訪問受け者16は、訪問を許可する人であると認識でき、受付処理をする。 The first matching device 20 searches the affiliation table of the first registration unit 3001, which is a face image storage server, in this case the police table. The first matching device 20 checks whether the captured image matches the first registered image, which is a face image registered in the affiliation table. The first matching device 20 transmits the first matching result, indicating that the captured image matches the first registered image, to the camera-equipped information terminal 12 (S409). Upon receiving the first matching result, the camera-equipped information terminal 12 displays it on the display unit 5003 and notifies the visitor 16 (S410). The visitor 16 recognizes the person as authorized to visit and proceeds with the reception process.
(実施の形態2にかかる訪問者が警察になりすましていた場合の説明)
図12は、実施の形態2にかかる訪問者が警察になりすましていた場合のシーケンス図である。図12を参照しながら、実施の形態2にかかる訪問者が警察になりすましていた場合の説明をする。
(Explanation of the case in Embodiment 2 where the visitor was impersonating a police officer)
Figure 12 is a sequence diagram showing the case where the visitor in Embodiment 2 is impersonating a police officer. The case where the visitor in Embodiment 2 is impersonating a police officer will be explained with reference to Figure 12.
撮像画像を第2の照合装置21で照合し、訪問受け者16に第2の照合結果をカメラ付き情報端末12で通知するまで(S401~S405)は上記警察官である場合の処理と同じため記載を省略する。 The process from the time the captured image is verified by the second verification device 21 until the visitor 16 is notified of the second verification result via the camera-equipped information terminal 12 (S401-S405) is the same as the process for the police officer described above, so the description is omitted.
訪問受け者16が所属を問い合わせる(S406)。訪問者が警察官になりすまし、警察官であると発した場合(S407)、カメラ付き情報端末12は所属先を音声認識し、所属先と撮像画像を第1の照合装置20に送信する(S408)。第1の照合装置20は、顔画像蓄積サーバである第1の登録部3001の所属先テーブル、ここでは警察テーブルを検索する。第1の照合装置20は、撮像画像が所属先テーブルに登録された顔画像である第1の登録画像に一致するか否か照合する。第1の照合装置20は、撮像画像が第1の登録画像に不一致であるという第1の照合結果をカメラ付き情報端末12に送信する(S501)。カメラ付き情報端末12は、第1の照合結果を受信すると、表示部5003に表示して訪問受け者16に通知する(S502)。訪問受け者16は、訪問を許可する人でないと認識できる。カメラ付き情報端末12は、警察30または警備会社31に通報する通報ボタンを押下するか否かの判断を訪問受け者16に求める。訪問受け者16が通報ボタンを押下した場合、訪問者17を通報対象サーバの候補者リストに登録する(S503)。また、登録回数が所定の数を超えている場合に、訪問者17をブラックリストに登録する。 The visitor 16 inquires about the visitor's affiliation (S406). If the visitor impersonates a police officer and claims to be a police officer (S407), the camera-equipped information terminal 12 uses voice recognition to identify the affiliation and transmits the affiliation and the captured image to the first matching device 20 (S408). The first matching device 20 searches the affiliation table of the first registration unit 3001, which is a face image storage server, in this case the police table. The first matching device 20 verifies whether the captured image matches the first registered image, which is a face image registered in the affiliation table. The first matching device 20 transmits the first matching result, indicating that the captured image does not match the first registered image, to the camera-equipped information terminal 12 (S501). Upon receiving the first matching result, the camera-equipped information terminal 12 displays it on the display unit 5003 to notify the visitor 16 (S502). The visitor 16 can then recognize that the visitor is not authorized to visit. The camera-equipped information terminal 12 prompts the visitor 16 to decide whether or not to press the reporting button to the police 30 or security company 31. If the visitor 16 presses the reporting button, the visitor 17 is registered in the candidate list of the reporting target server (S503). Furthermore, if the number of registrations exceeds a predetermined number, the visitor 17 is added to the blacklist.
このようにすることで、訪問受け者16は、訪問者17と接触することなく、公的機関、民間の警備会社及び宅配業者等の職員へのなりすましを見抜き、詐欺被害等を未然に防ぐことができる。 In this way, the visitor 16 can detect impersonations of public officials, private security company employees, and delivery company employees without having to come into contact with the visitor 17, thereby preventing fraud and other related incidents.
(実施の形態3にかかるシステムの構成の説明)
図13は、家に訪問者が来訪したときの実施の形態3にかかるシステムの構成図である。図13を参照しながら、実施の形態3にかかるシステムの構成の説明をする。実施の形態1ではインターホンや宅内モニタがネットワーク10に接続していることを想定したが、実施の形態3ではネットワーク10に接続していない既存のインターホンを用いることを想定する。実施の形態3にかかるシステムと実施の形態1にかかるシステムとの相違点は、カメラ付き情報端末18を用いることである。
(Description of the system configuration according to Embodiment 3)
Figure 13 is a diagram showing the system configuration according to Embodiment 3 when a visitor arrives at the house. The system configuration according to Embodiment 3 will be explained with reference to Figure 13. In Embodiment 1, it was assumed that the intercom and in-house monitor were connected to the network 10, but in Embodiment 3, it is assumed that an existing intercom that is not connected to the network 10 is used. The difference between the system according to Embodiment 3 and the system according to Embodiment 1 is the use of a camera-equipped information terminal 18.
実施の形態3にかかるシステムは、家1に設置されたインターホン2と、宅内モニタ3と、カメラ付き情報端末18と、ネットワーク10で接続された外部の第1の照合装置20と、第2の照合装置21と、を備える。実施の形態3のシステムは、場合によっては、さらにネットワーク10に接続された警察30と、警備会社31と、を含んでもよい。カメラ付き情報端末18の構成は、実施の形態2のカメラ付き情報端末12の構成と同じである。したがって、カメラ付き情報端末18の構成要素については同じ符号を参照する。また、実施の形態3の宅内モニタ3には送信部2003がないことのみが異なる。したがって、インターホン2及び宅内モニタ3については、同じ符号を参照する。以後、相違点であるシーケンスの変更点について説明する。 The system according to Embodiment 3 comprises an intercom 2 installed in a house 1, an in-house monitor 3, a camera-equipped information terminal 18, and an external first verification device 20 and a second verification device 21 connected via a network 10. The system of Embodiment 3 may also include, in some cases, a police force 30 and a security company 31 connected to the network 10. The configuration of the camera-equipped information terminal 18 is the same as that of the camera-equipped information terminal 12 in Embodiment 2. Therefore, the same reference numerals are used for the components of the camera-equipped information terminal 18. The only difference in Embodiment 3 is that the in-house monitor 3 lacks a transmission unit 2003. Therefore, the same reference numerals are used for the intercom 2 and the in-house monitor 3. The following describes the differences, specifically the changes in the sequence.
(実施の形態3にかかる訪問者が警察官の場合の処理)
図14は、実施の形態3にかかる訪問者が警察官の場合の処理のシーケンス図である。図14を参照しながら、実施の形態3にかかる訪問者が警察官の場合の処理について説明する。
(Handling of cases where the visitor in Embodiment 3 is a police officer)
Figure 14 is a sequence diagram of the process when the visitor is a police officer according to Embodiment 3. The process when the visitor is a police officer according to Embodiment 3 will be explained with reference to Figure 14.
訪問者7が、家人である訪問受け者6の家を訪問し、インターホン2による呼び出し動作が行われる(S601)。インターホン2はカメラを起動し(S602)、訪問者の顔画像である撮像画像を撮影する。宅内モニタ3は、撮像画像を表示部2001で表示する(S603)。宅内モニタ3は、送信部2003がないため、撮像画像を第1の照合装置20及び第2の照合装置21に送信することができない。そこで、訪問受け者6は、カメラ付き情報端末18のアプリを起動する(S604)。カメラ付き情報端末18は、アプリを介して撮像画像を撮影し(S605)、顔画像を取得する(S606)。カメラ付き情報端末18は、撮像画像を第2の照合装置21に送信する(S607)。 Visitor 7 visits the home of the resident, recipient 6, and the intercom 2 initiates a call (S601). The intercom 2 activates its camera (S602) and captures an image of the visitor's face. The in-home monitor 3 displays the captured image on its display unit 2001 (S603). Since the in-home monitor 3 lacks a transmission unit 2003, it cannot transmit the captured image to the first and second matching devices 20 and 21. Therefore, recipient 6 activates an application on the camera-equipped information terminal 18 (S604). The camera-equipped information terminal 18 captures an image via the application (S605) and acquires a face image (S606). The camera-equipped information terminal 18 transmits the captured image to the second matching device 21 (S607).
第2の照合装置21は、撮像画像が通報対象者の顔画像である第2の登録画像に一致するか否か照合する。また、訪問受け者6は、宅内モニタ3にて訪問者7に応答する(S608)。訪問受け者6が訪問者7に応答している間に、第2の照合装置21は、撮像画像が第2の登録画像と不一致であるという第2の照合結果をカメラ付き情報端末18に送信する(S609)。S608は、S609と順番が入れ替わってもよい。 The second matching device 21 verifies whether the captured image matches the second registered image, which is the face image of the person being reported. The visitor 6 responds to the visitor 7 via the in-home monitor 3 (S608). While the visitor 6 is responding to the visitor 7, the second matching device 21 transmits the second verification result, indicating that the captured image does not match the second registered image, to the camera-equipped information terminal 18 (S609). The order of S608 and S609 may be reversed.
仮に、撮像画像が第2の登録画像と一致していた場合は、第2の照合装置21は、撮像画像が第2の登録画像と一致するという第2の照合結果をカメラ付き情報端末18に送信する。第2の照合装置21は、訪問者7の訪問日時と位置情報を更新する。また、場合によっては、第2の照合装置21は、ネットワーク10を介して警察30または警備会社31に通報する。いずれにせよ、カメラ付き情報端末18は、第2の照合結果を受信すると、表示部5003に表示して訪問受け者6に通知する。 If the captured image matches the second registered image, the second matching device 21 transmits the second matching result, indicating that the captured image matches the second registered image, to the camera-equipped information terminal 18. The second matching device 21 updates the visitor's 7 date, time, and location information. In some cases, the second matching device 21 also notifies the police 30 or security company 31 via the network 10. In any case, upon receiving the second matching result, the camera-equipped information terminal 18 displays it on the display unit 5003 to notify the visitor 6.
訪問者7は、訪問受け者6から応答をうけると、所属先を名乗る。ここでは訪問者7は、「警察です」と発する(S610)。インターホン2は、訪問者7の音声を集音し(S611)、宅内モニタ3は、訪問者7の音声を発する。カメラ付き情報端末18は、宅内モニタ3から発せられた訪問者7の音声を集音する(S612)。カメラ付き情報端末18は、訪問者7の音声を認識し、所属先と撮像データを第1の照合装置20に送信する(S613)。 Upon receiving a response from the person being visited (6), visitor 7 identifies their affiliation. Here, visitor 7 says, "I'm the police" (S610). Intercom 2 collects visitor 7's voice (S611), and in-house monitor 3 transmits visitor 7's voice. Camera-equipped information terminal 18 collects visitor 7's voice transmitted from in-house monitor 3 (S612). Camera-equipped information terminal 18 recognizes visitor 7's voice and transmits the affiliation and image data to the first matching device 20 (S613).
第1の照合装置20は、顔画像蓄積サーバである第1の登録部3001の所属先テーブル、ここでは警察テーブルを検索する。第1の照合装置20は、撮像画像が所属先テーブルに登録された顔画像である第1の登録画像に一致するか否か照合する。第1の照合装置20は、撮像画像が第1の登録画像に一致するという第1の照合結果をカメラ付き情報端末18に送信する(S614)。カメラ付き情報端末18は、第1の照合結果を受信すると、表示部5003に表示して訪問受け者6に通知する(S615)。訪問受け者6は、訪問を許可する人であると認識でき、家の扉を開錠する。 The first matching device 20 searches the affiliation table of the first registration unit 3001, which is a face image storage server, in this case the police table. The first matching device 20 checks whether the captured image matches the first registered image, which is a face image registered in the affiliation table. The first matching device 20 transmits the first matching result, indicating that the captured image matches the first registered image, to the camera-equipped information terminal 18 (S614). Upon receiving the first matching result, the camera-equipped information terminal 18 displays it on the display unit 5003 and notifies the visitor 6 (S615). The visitor 6 recognizes the person as authorized to visit and unlocks the door to their house.
(実施の形態3にかかる訪問者が警察官になりすましていた場合の処理)
図15は、実施の形態3にかかる訪問者が警察官になりすましていた場合の処理のシーケンス図である。図15を参照しながら、実施の形態3にかかる訪問者が警察官になりすましていた場合の処理を説明する。
(Handling of the case in which the visitor in Embodiment 3 is impersonating a police officer)
Figure 15 is a sequence diagram of the process when a visitor in Embodiment 3 is impersonating a police officer. The process when a visitor in Embodiment 3 is impersonating a police officer will be explained with reference to Figure 15.
撮像画像を第2の照合装置21で照合し、訪問受け者6に第2の照合結果をカメラ付き情報端末18で通知するまで(S601~S609)は上記警察官である場合の処理と同じため記載を省略する。 The process from the time the captured image is compared with the second matching device 21 until the second matching result is notified to the visitor 6 via the camera-equipped information terminal 18 (S601-S609) is the same as the process for the police officer described above, so the description is omitted.
訪問者7が警察官になりすまし、警察官であると発した場合(S610)、インターホン2は、訪問者7の音声を集音する(S611)。宅内モニタ3は、インターホン2で集音された訪問者の音声を発する(S612)。カメラ付き情報端末18は、宅内モニタ3から発せられた所属先を音声認識し、所属先と撮像画像を第1の照合装置20に送信する(S613)。第1の照合装置20は、顔画像蓄積サーバである第1の登録部3001の所属先テーブル、ここでは警察テーブルを検索する。第1の照合装置20は、撮像画像が所属先テーブルに登録された顔画像である第1の登録画像に一致するか否か照合する。第1の照合装置20は、撮像画像が第1の登録画像に不一致であるという第1の照合結果をカメラ付き情報端末18に送信する(S701)。カメラ付き情報端末18は、第1の照合結果を受信すると、表示部5003に表示して訪問受け者6に通知する(S702)。訪問受け者6は、訪問を許可する人でないと認識できる。カメラ付き情報端末18は、警察または警備会社に通報する通報ボタンを押下するか否かの判断を訪問受け者6に求める。訪問受け者6が通報ボタンを押下した場合、訪問者7を通報対象サーバの候補者リストに登録する(S703)。また、登録回数が所定の数を超えている場合に、訪問者7をブラックリストに登録する。 If visitor 7 impersonates a police officer and claims to be a police officer (S610), the intercom 2 collects visitor 7's voice (S611). The in-house monitor 3 emits the visitor's voice collected by the intercom 2 (S612). The camera-equipped information terminal 18 recognizes the affiliation emitted from the in-house monitor 3 by voice and transmits the affiliation and the captured image to the first matching device 20 (S613). The first matching device 20 searches the affiliation table, in this case the police table, of the first registration unit 3001, which is a face image storage server. The first matching device 20 checks whether the captured image matches the first registered image, which is a face image registered in the affiliation table. The first matching device 20 transmits the first matching result, indicating that the captured image does not match the first registered image, to the camera-equipped information terminal 18 (S701). When the camera-equipped information terminal 18 receives the first verification result, it displays it on the display unit 5003 and notifies the visitor 6 (S702). The visitor 6 can then recognize that the visitor is not someone authorized to visit. The camera-equipped information terminal 18 asks the visitor 6 whether or not to press the report button to notify the police or security company. If the visitor 6 presses the report button, the visitor 7 is registered in the candidate list of the server to be reported (S703). Furthermore, if the number of registrations exceeds a predetermined number, the visitor 7 is added to the blacklist.
このようにすることで、既存のインターホンに、カメラ付き情報端末のアプリを用いることで訪問受け者6は、訪問者7と接触することなく、公的機関、民間の警備会社及び宅配業者の職員等へのなりすましを見抜き、詐欺被害等を未然に防ぐことができる。 By using this method, the recipient 6 can detect impersonations of public officials, private security company employees, and delivery company staff without having to come into contact with the visitor 7, by using a camera-equipped information terminal app with the existing intercom, thereby preventing fraud and other related incidents.
また、上述したインターホン2及び宅内モニタ3、第1の照合装置20、第2の照合装置21、カメラ付き情報端末12、カメラ付き情報端末18における処理の一部又は全部は、コンピュータプログラムとして実現可能である。このようなプログラムは、様々なタイプの非一時的なコンピュータ可読媒体を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)、CD-R、CD-R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。 Furthermore, some or all of the processing in the intercom 2 and in-home monitor 3, the first verification device 20, the second verification device 21, the camera-equipped information terminal 12, and the camera-equipped information terminal 18 described above can be implemented as computer programs. Such programs can be stored and supplied to a computer using various types of non-temporary computer-readable media. Non-temporary computer-readable media include various types of tangible recording media. Examples of non-temporary computer-readable media include magnetic recording media (e.g., flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (e.g., magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, CD-R/Ws, and semiconductor memory (e.g., mask ROMs, PROMs (Programmable ROMs), EPROMs (Erasable PROMs), flash ROMs, and RAMs (Random Access Memory)). Furthermore, programs may be supplied to a computer via various types of temporary computer-readable media. Examples of temporary computer-readable media include electrical signals, optical signals, and electromagnetic waves. Temporary computer-readable media can be supplied to a computer via wired communication channels such as electric wires and optical fibers, or via wireless communication channels.
なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、第1の照合装置及び第2の照合装置として説明したが、2つをまとめて1つの照合装置としてもよい。また、インターホン及び宅内モニタとカメラ付き情報端末は照合用端末としてもよい。また、訪問者の声を宅内モニタが音声認識したが、音声データを第1の照合装置及び第2の照合装置に送信して、第1の照合装置及び第2の照合装置が音声認識してもよい。また、図8において、宅内モニタの表示を示したが、カメラ付き情報端末も同様の表示をしてもよい。 Furthermore, the present invention is not limited to the embodiments described above, and can be modified as appropriate without departing from the spirit of the invention. For example, although described as a first and second verification device, the two may be combined into a single verification device. Also, the intercom, in-house monitor, and camera-equipped information terminal may be used as verification terminals. Furthermore, while the in-house monitor performs voice recognition of the visitor's voice, the voice data may be transmitted to the first and second verification devices for voice recognition. Also, although Figure 8 shows the display on the in-house monitor, the camera-equipped information terminal may display a similar information.
また、訪問者から警察、消防などの特定の音声を契機に第1の照合装置への問い合わせを行っていたが、カメラによる画像から訪問者が警察、消防等の制服を着用していると判断することを契機として第1の照合装置に問い合わせを行ってもよい。また、カメラによる画像が、訪問者が警察手帳のような所属を特定できる所属証明書を表示していることを契機として第1の照合装置に問い合わせを行ってもよい。 Furthermore, while the system previously initiated queries to the first verification device based on specific voices from visitors, such as those of police or firefighters, it may now also initiate queries based on camera images indicating that the visitor is wearing a police or firefighter uniform. Alternatively, the system may initiate queries to the first verification device if camera images show the visitor displaying identification such as a police ID card.
また、通報が行われることで第2の照合装置の第2の登録部になりすましを実施した人物の顔画像データを追加登録しているが、通報の有無に関係なく手動で第2の照合装置の第2の登録部に顔画像データを登録してもよい。 Furthermore, while the second registration unit of the second matching device automatically adds the facial image data of the person who committed the impersonation when a report is made, the facial image data may also be manually registered in the second registration unit of the second matching device regardless of whether a report has been made.
上記の実施の形態の一部又は全部は、以下の付記のように記載されうるが、以下には限られない。
(付記1)
訪問を許可する人の顔画像である第1の登録画像が所属先に対応付けて登録されている登録部と、
訪問者の前記所属先と前記訪問者の顔の撮像画像を取得するデータ取得部と、
前記訪問者の前記所属先に基づいて前記第1の登録画像を検索する検索部と、
検索された前記第1の登録画像と前記撮像画像を照合する第1の照合部と、
前記第1の登録画像と前記撮像画像を照合した結果を第1の照合結果として送信する送信部と、を備える照合装置。
(付記2)
前記撮像画像を、通報対象者リストに登録されている第2の登録画像と照合する第2の照合部をさらに備え、
前記第2の登録画像と撮像画像とを照合した結果を第2の照合結果として送信する、付記1に記載の照合装置。
(付記3)
前記第2の照合結果が一致した場合、前記通報対象者リストにおける前記訪問者の訪問日時及び位置情報のデータを更新する、付記2に記載の照合装置。
(付記4)
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力する付記2または3に記載の照合装置。
(付記5)
前記訪問者が通報された場合、
通報された訪問者が、通報対象候補者リストに登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録し、
通報された訪問者が、前記通報対象候補者リストに登録されている場合、通報回数が所定の数を超えているか否かを確認し、
前記通報の回数が所定の数を超えていない場合、通報の回数を加算し、
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録する、付記4に記載の照合装置。
(付記6)
訪問を許可する人の顔画像である第1の登録画像が所属先に対応付けて登録されている顔画像蓄積サーバと、
訪問者の前記所属先と前記訪問者の顔の撮像画像を取得するデータ取得部と、
前記訪問者の前記所属先に基づいて前記第1の登録画像を検索する検索部と、
検索された前記第1の登録画像と前記撮像画像を照合する第1の照合部と、
前記第1の登録画像と前記撮像画像を照合した結果を第1の照合結果として送信する送信部と、を備えた照合システム。
(付記7)
訪問者の顔をカメラで撮影して撮像画像を取得する撮影部と、
前記訪問者の前記撮像画像と所属先を、訪問を許可する人の顔画像である第1の登録画像が所属先に対応付けられて登録されている第1の照合装置に送信する送信部と、
前記第1の照合装置が前記撮像画像を前記第1の登録画像に照合した結果を第1の照合結果として表示する表示部と、を備える照合用端末。
(付記8)
前記送信部は、通報対象者の顔画像である第2の登録画像を登録した第2の照合装置に前記撮像画像を送信し、
前記表示部は、前記第2の照合装置が前記撮像画像を前記第2の登録画像に照合した結果を第2の照合結果として表示する付記7に記載の照合用端末。
(付記9)
訪問者の所属先と前記訪問者の顔の撮像画像を取得するステップと、
訪問を許可する人の顔画像である第1の登録画像が前記所属先に対応付けて登録されている登録部を検索するステップと、
前記検索された前記第1の登録画像を前記撮像画像と照合するステップと、
前記第1の登録画像と前記撮像画像との照合結果を第1の照合結果として送信するステップと、を備える照合方法。
(付記10)
訪問者の所属先と前記訪問者の顔の撮像画像を取得するステップと、
訪問を許可する人の顔画像である第1の登録画像が前記所属先に対応付けて登録されている登録部を検索するステップと、
前記検索された前記第1の登録画像を前記撮像画像と照合するステップと、
前記第1の登録画像と前記撮像画像との照合結果を第1の照合結果として送信するステップと、を照合装置に実行させるプログラム。
(付記11)
前記撮像画像を、通報対象者リストに登録されている第2の登録画像と照合する第2の照合部を有する通報対象サーバをさらに備え、
前記第2の登録画像と撮像画像とを照合した結果を第2の照合結果として送信する、付記6に記載の照合システム。
(付記12)
前記第2の照合結果が一致した場合、前記訪問者の訪問日時及び位置情報のデータを更新する、付記11に記載の照合システム。
(付記13)
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力する付記6または11に記載の照合システム。
(付記14)
前記訪問者が通報された場合、
通報された訪問者が、通報対象候補者リストを登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録し、
通報された訪問者が、前記通報対象候補者リストを登録されている場合、通報回数が所定の数を超えているか否かを確認し、
前記通報の回数が所定の数を超えていない場合、通報の回数を加算するステップと、
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録する、付記13に記載の照合システム。
(付記15)
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力する付記7に記載の照合用端末。
(付記16)
前記撮像画像を、通報対象者リストに登録されている第2の登録画像と照合するステップと、
前記第2の登録画像と撮像画像とを照合した結果を第2の照合結果として送信するステップと、を備える、付記9に記載の照合方法。
(付記17)
前記第2の照合結果が一致した場合、前記訪問者の訪問日時及び位置情報のデータを更新するステップを備える、付記16に記載の照合方法。
(付記18)
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力するステップを備える、付記9または16に記載の照合方法。
(付記19)
前記訪問者が通報された場合、
通報された訪問者が、通報対象候補者リストを登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録するステップと、
通報された訪問者が、前記通報対象候補者リストを登録されている場合、通報回数が所定の数を超えているか否かを確認するステップと、
前記通報の回数が所定の数を超えていない場合、通報の回数を加算するステップと、
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録するステップと、を備える、付記18に記載の照合方法。
(付記20)
前記撮像画像を、通報対象者リストに登録されている第2の登録画像と照合するステップと、
前記第2の登録画像と撮像画像とを照合した結果を第2の照合結果として送信するステップと、を照合装置に実行させる、付記10に記載のプログラム。
(付記21)
前記第2の照合結果が一致した場合、前記訪問者の訪問日時及び位置情報のデータを更新するステップを照合装置に実行させる、付記20に記載のプログラム。
(付記22)
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力するステップを照合装置に実行させる、付記10または20に記載のプログラム。
(付記23)
前記訪問者が通報された場合、
通報された訪問者が、通報対象候補者リストを登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録するステップと、
通報された訪問者が、前記通報対象候補者リストを登録されている場合、通報回数が所定の数を超えているか否かを確認するステップと、
前記通報の回数が所定の数を超えていない場合、通報の回数を加算するステップと、
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録するステップと、を照合装置に実行させる、付記22に記載のプログラム。
Some or all of the above embodiments may be described as follows, but are not limited to the following.
(Note 1)
The first registration image, which is a facial image of the person authorized to visit, is registered in association with the affiliated organization in the registration department,
A data acquisition unit that acquires the visitor's affiliation and an image of the visitor's face,
A search unit that searches for the first registered image based on the affiliation of the visitor,
A first matching unit that compares the retrieved first registered image with the captured image,
A matching device comprising: a transmitting unit that transmits the result of comparing the first registered image with the captured image as a first matching result.
(Note 2)
The system further includes a second matching unit that compares the captured image with a second registered image registered in the list of persons subject to reporting,
The matching device described in Appendix 1, which transmits the result of comparing the second registered image with the captured image as the second matching result.
(Note 3)
The matching device described in Appendix 2 updates the data on the date and time of visit and location information of the visitor in the list of persons subject to notification if the second matching result matches.
(Note 4)
The matching device described in Appendix 2 or 3 outputs information to ask the visitor whether or not to report to the police or security company if the first matching result is inconsistent and the second matching result is also inconsistent.
(Note 5)
If the aforementioned visitor is reported,
If the reported visitor is not registered on the list of potential report targets, the reported visitor will be newly registered on the list of potential report targets.
If the reported visitor is registered on the list of potential report targets, check whether the number of reports exceeds a predetermined number.
If the number of reports mentioned above does not exceed a predetermined number, the number of reports is added,
The verification device described in Appendix 4 registers the visitor to the list of persons subject to reporting if the number of reports exceeds a predetermined number.
(Note 6)
A facial image storage server where the first registered image, which is the facial image of the person authorized to visit, is registered and associated with their affiliation,
A data acquisition unit that acquires the visitor's affiliation and an image of the visitor's face,
A search unit that searches for the first registered image based on the affiliation of the visitor,
A first matching unit that compares the retrieved first registered image with the captured image,
A matching system comprising: a transmission unit that transmits the result of comparing the first registered image with the captured image as a first matching result.
(Note 7)
The camera unit captures images of visitors' faces using a camera, and
A transmission unit transmits the captured image of the visitor and their affiliation to a first matching device in which a first registered image, which is a facial image of the person authorized to visit, is registered and associated with the affiliation.
A matching terminal comprising: a display unit that displays the result of the first matching device matching the captured image with the first registered image as a first matching result.
(Note 8)
The transmitting unit transmits the captured image to a second matching device which has registered a second registered image, which is a facial image of the person being reported.
The display unit is a matching terminal as described in Appendix 7, which displays the result of the second matching device matching the captured image with the second registered image as the second matching result.
(Note 9)
The steps include obtaining the visitor's affiliation and an image of the visitor's face,
A step of searching for a registration department in which a first registered image, which is a facial image of a person authorized to visit, is registered in association with the aforementioned affiliation,
The steps include comparing the retrieved first registered image with the captured image,
A matching method comprising the step of transmitting the result of matching the first registered image with the captured image as a first matching result.
(Note 10)
The steps include obtaining the visitor's affiliation and an image of the visitor's face,
A step of searching for a registration department in which a first registered image, which is a facial image of a person authorized to visit, is registered in association with the aforementioned affiliation,
The steps include comparing the retrieved first registered image with the captured image,
A program that causes a matching device to perform the steps of: transmitting the result of matching the first registered image with the captured image as the first matching result.
(Note 11)
The system further includes a notification target server having a second matching unit that compares the captured image with a second registered image registered in the notification target list,
The matching system described in Appendix 6, which transmits the result of comparing the second registered image with the captured image as the second matching result.
(Note 12)
The matching system described in Appendix 11 updates the visitor's visit date and location information data when the second matching result matches.
(Note 13)
The matching system described in Appendix 6 or 11, which outputs information to ask the visitor whether or not to report to the police or security company if the first matching result is inconsistent and the second matching result is also inconsistent.
(Note 14)
If the aforementioned visitor is reported,
If the reported visitor is not registered on the list of potential reportable individuals, the reported visitor will be newly registered on the list of potential reportable individuals.
If the reported visitor is registered on the aforementioned list of potential report targets, check whether the number of reports exceeds a predetermined number.
If the number of reports does not exceed a predetermined number, the step is to add the number of reports,
The matching system described in Appendix 13 registers the visitor to the list of persons subject to reporting if the number of reports exceeds a predetermined number.
(Note 15)
If the first matching result is inconsistent and the second matching result is also inconsistent, the matching terminal described in Appendix 7 outputs information to ask the visitor whether or not to report to the police or security company.
(Note 16)
The steps include comparing the captured image with a second registered image registered in the list of persons subject to reporting,
The matching method according to Appendix 9, comprising the step of transmitting the result of comparing the second registered image with the captured image as a second matching result.
(Note 17)
The matching method according to Appendix 16, further comprising the step of updating the visitor's visit date and time and location information data if the second matching result matches.
(Note 18)
The matching method according to Appendix 9 or 16, further comprising the step of outputting information to ask the visitor to decide whether or not to report to the police or security company if the first matching result is inconsistent and the second matching result is inconsistent.
(Note 19)
If the aforementioned visitor is reported,
If the reported visitor is not registered on the list of potential reportees, the steps include: adding the reported visitor to the list of potential reportees;
If the reported visitor is registered on the aforementioned list of potential report targets, the step is to check whether the number of reports exceeds a predetermined number.
If the number of reports does not exceed a predetermined number, the step is to add the number of reports,
The matching method described in Appendix 18, further comprising the step of registering the visitor to a list of persons subject to reporting if the number of reports exceeds a predetermined number.
(Note 20)
The steps include comparing the captured image with a second registered image registered in the list of persons subject to reporting,
The program described in Appendix 10 causes a matching device to perform the steps of: transmitting the result of comparing the second registered image with the captured image as a second matching result.
(Note 21)
The program described in Appendix 20, which, if the second matching result matches, causes the matching device to perform the step of updating the visitor's visit date and time and location information data.
(Note 22)
The program described in Appendix 10 or 20, which, if the first matching result is inconsistent and the second matching result is inconsistent, causes the matching device to output information for asking the visitor to decide whether or not to report to the police or security company.
(Note 23)
If the aforementioned visitor is reported,
If the reported visitor is not registered on the list of potential reportees, the steps include: adding the reported visitor to the list of potential reportees;
If the reported visitor is registered on the aforementioned list of potential report targets, the step is to check whether the number of reports exceeds a predetermined number.
If the number of reports does not exceed a predetermined number, the step is to add the number of reports,
The program described in Appendix 22, which causes the matching device to perform the steps of registering the visitor in the list of persons subject to reporting if the number of reports exceeds a predetermined number.
1 家
2 インターホン
3 宅内モニタ
4 携帯端末
5 ホームゲートウェイ
6 訪問受け者
7 訪問者
10 ネットワーク
11 企業、団体等
12 カメラ付き情報端末
13 受付情報端末
16 訪問受け者
17 訪問者
18 カメラ付き情報端末
20 第1の照合装置
21 第2の照合装置
30 警察
31 警備会社
801 認証OK画面
802 認証NG画面
1001 撮影部
1002 音声入出力部
2001 表示部
2002 音声入出力部
2003 送信部
3001 第1の登録部
3002 データ取得部
3003 検索部
3004 第1の照合部
3005 送信部
4001 第2の登録部
4002 データ取得部
4003 第2の照合部
4004 送信部
4005 検索部
4006 第3の登録部
4007 確認部
4008 通報回数加算部
5001 撮影部
5002 音声入力部
5003 表示部
5004 送信部
1 House 2 Intercom 3 In-home monitor 4 Mobile terminal 5 Home gateway 6 Visitor receiving person 7 Visitor 10 Network 11 Company, organization, etc. 12 Camera-equipped information terminal 13 Reception information terminal 16 Visitor receiving person 17 Visitor 18 Camera-equipped information terminal 20 First verification device 21 Second verification device 30 Police 31 Security company 801 Authentication OK screen 802 Authentication NG screen 1001 Shooting unit 1002 Audio input/output unit 2001 Display unit 2002 Audio input/output unit 2003 Transmission unit 3001 First registration unit 3002 Data acquisition unit 3003 Search unit 3004 First verification unit 3005 Transmission unit 4001 Second registration unit 4002 Data acquisition unit 4003 Second verification unit 4004 Transmitting unit 4005 Searching unit 4006 Third registration unit 4007 Confirmation unit 4008 Number of reports added unit 5001 Shooting unit 5002 Voice input unit 5003 Display unit 5004 Transmitting unit
Claims (10)
訪問者の前記所属先と前記訪問者の顔の撮像画像を取得するデータ取得部と、
前記訪問者の前記所属先に基づいて前記第1の登録画像を検索する検索部と、
検索された前記第1の登録画像と前記撮像画像を照合する第1の照合部と、
前記第1の登録画像と前記撮像画像を照合した結果を第1の照合結果として送信する送信部と、を備え、
前記撮像画像を、通報対象者リストに登録されている第2の登録画像と照合し、
前記第2の登録画像と撮像画像とを照合した結果を第2の照合結果として送信し、
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力する照合装置。 The first registration image, which is a facial image of the person authorized to visit, is registered in association with the affiliated organization in the registration department,
A data acquisition unit that acquires the visitor's affiliation and an image of the visitor's face,
A search unit that searches for the first registered image based on the affiliation of the visitor,
A first matching unit that compares the retrieved first registered image with the captured image,
The system includes a transmitting unit that transmits the result of comparing the first registered image with the captured image as a first matching result,
The aforementioned captured image is compared with a second registered image registered in the list of persons subject to reporting.
The result of comparing the second registered image with the captured image is transmitted as the second matching result.
A matching device that outputs information to ask the visitor whether or not to report to the police or security company if the first matching result is inconsistent and the second matching result is also inconsistent .
通報された訪問者が、通報対象候補者リストに登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録し、
通報された訪問者が、前記通報対象候補者リストに登録されている場合、通報回数が所定の数を超えているか否かを確認し、
前記通報の回数が所定の数を超えていない場合、通報の回数を加算し、
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録する、請求項1に記載の照合装置。 If the aforementioned visitor is reported,
If the reported visitor is not registered on the list of potential report targets, the reported visitor will be newly registered on the list of potential report targets.
If the reported visitor is registered on the list of potential report targets, check whether the number of reports exceeds a predetermined number.
If the number of reports mentioned above does not exceed a predetermined number, the number of reports is added,
The matching device according to claim 1 , wherein if the number of reports exceeds a predetermined number, the visitor is registered in the list of persons subject to reporting.
訪問者の前記所属先と前記訪問者の顔の撮像画像を取得するデータ取得部と、
前記訪問者の前記所属先に基づいて前記第1の登録画像を検索する検索部と、
検索された前記第1の登録画像と前記撮像画像を照合する第1の照合部と、
前記第1の登録画像と前記撮像画像を照合した結果を第1の照合結果として送信する送信部と、を備え、
前記撮像画像を、通報対象者リストに登録されている第2の登録画像と照合し、
前記第2の登録画像と撮像画像とを照合した結果を第2の照合結果として送信し、
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力する照合システム。 A facial image storage server where the first registered image, which is the facial image of the person authorized to visit, is registered and associated with their affiliation,
A data acquisition unit that acquires the visitor's affiliation and an image of the visitor's face,
A search unit that searches for the first registered image based on the affiliation of the visitor,
A first matching unit that compares the retrieved first registered image with the captured image,
The system includes a transmitting unit that transmits the result of comparing the first registered image with the captured image as a first matching result ,
The aforementioned captured image is compared with a second registered image registered in the list of persons subject to reporting.
The result of comparing the second registered image with the captured image is transmitted as the second matching result.
A matching system that outputs information to ask the visitor whether or not to report to the police or security company if the first matching result is inconsistent and the second matching result is also inconsistent .
通報された訪問者が、通報対象候補者リストに登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録し、If the reported visitor is not registered on the list of potential report targets, the reported visitor will be newly registered on the list of potential report targets.
通報された訪問者が、前記通報対象候補者リストに登録されている場合、通報回数が所定の数を超えているか否かを確認し、If the reported visitor is registered on the list of potential report targets, check whether the number of reports exceeds a predetermined number.
前記通報の回数が所定の数を超えていない場合、通報の回数を加算し、If the number of reports mentioned above does not exceed a predetermined number, the number of reports is added,
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録する、請求項4に記載の照合システム。The matching system according to claim 4, wherein if the number of reports exceeds a predetermined number, the visitor is registered in the list of persons subject to reporting.
前記訪問者の前記撮像画像と所属先を、訪問を許可する人の顔画像である第1の登録画像が所属先に対応付けられて登録されている第1の照合装置に送信する送信部と、
前記第1の照合装置が前記撮像画像を前記第1の登録画像に照合した結果を第1の照合結果として表示する表示部と、を備え、
前記送信部は、通報対象者の顔画像である第2の登録画像を登録した第2の照合装置に前記撮像画像を送信し、
前記表示部は、前記第2の照合装置が前記撮像画像を前記第2の登録画像に照合した結果を第2の照合結果として表示し、
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力する照合用端末。 The camera unit captures images of visitors' faces using a camera, and
A transmission unit transmits the captured image of the visitor and their affiliation to a first matching device in which a first registered image, which is a facial image of the person authorized to visit, is registered and associated with the affiliation.
The system includes a display unit that displays the result of the first matching device matching the captured image with the first registered image as the first matching result ,
The transmitting unit transmits the captured image to a second matching device which has registered a second registered image, which is a facial image of the person being reported.
The display unit displays the result of the second matching device matching the captured image with the second registered image as the second matching result.
A verification terminal that outputs information to ask the visitor whether or not to report to the police or security company if the first verification result is inconsistent and the second verification result is also inconsistent .
通報された訪問者が、通報対象候補者リストに登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録し、If the reported visitor is not registered on the list of potential report targets, the reported visitor will be newly registered on the list of potential report targets.
通報された訪問者が、前記通報対象候補者リストに登録されている場合、通報回数が所定の数を超えているか否かを確認し、If the reported visitor is registered on the list of potential report targets, check whether the number of reports exceeds a predetermined number.
前記通報の回数が所定の数を超えていない場合、通報の回数を加算し、If the number of reports mentioned above does not exceed a predetermined number, the number of reports is added,
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録する、請求項6に記載の照合用端末。The verification terminal according to claim 6, which registers the visitor to the list of persons subject to reporting if the number of reports exceeds a predetermined number.
訪問を許可する人の顔画像である第1の登録画像が前記所属先に対応付けて登録されている登録部を検索するステップと、
前記検索された前記第1の登録画像を前記撮像画像と照合して第1の照合結果を取得するステップと、
前記撮像画像を通報対象者リストに登録されている第2の登録画像と照合して第2の照合結果を取得するステップと、
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力するステップと、を備える照合方法。 The steps include obtaining the visitor's affiliation and an image of the visitor's face,
A step of searching for a registration department in which a first registered image, which is a facial image of a person authorized to visit, is registered in association with the aforementioned affiliation,
The steps include obtaining a first matching result by comparing the retrieved first registered image with the captured image,
The steps include comparing the captured image with a second registered image registered in the list of persons subject to reporting to obtain a second matching result,
A matching method comprising the step of outputting information to ask the visitor to decide whether or not to report to the police or security company if the first matching result is inconsistent and the second matching result is inconsistent .
通報された訪問者が、通報対象候補者リストに登録されていない場合、前記通報された訪問者を前記通報対象候補者リストに新たに登録し、If the reported visitor is not registered on the list of potential report targets, the reported visitor will be newly registered on the list of potential report targets.
通報された訪問者が、前記通報対象候補者リストに登録されている場合、通報回数が所定の数を超えているか否かを確認し、If the reported visitor is registered on the list of potential report targets, check whether the number of reports exceeds a predetermined number.
前記通報の回数が所定の数を超えていない場合、通報の回数を加算し、If the number of reports mentioned above does not exceed a predetermined number, the number of reports is added,
前記通報の回数が所定の数を超えている場合、前記訪問者を通報対象者リストに登録する、請求項8に記載の照合方法。The matching method according to claim 8, wherein if the number of reports exceeds a predetermined number, the visitor is registered in the list of persons subject to reporting.
訪問を許可する人の顔画像である第1の登録画像が前記所属先に対応付けて登録されている登録部を検索するステップと、
前記検索された前記第1の登録画像を前記撮像画像と照合して第1の照合結果を取得するステップと、
前記撮像画像を通報対象者リストに登録されている第2の登録画像と照合して第2の照合結果を取得するステップと、
前記第1の照合結果が不一致であり、かつ第2の照合結果が不一致である場合、警察又は警備会社に通報するか否かの判断を訪問受け者に求めるための情報を出力するステップと、を照合装置に実行させるプログラム。 The steps include obtaining the visitor's affiliation and an image of the visitor's face,
A step of searching for a registration department in which a first registered image, which is a facial image of a person authorized to visit, is registered in association with the aforementioned affiliation,
The steps include obtaining a first matching result by comparing the retrieved first registered image with the captured image,
The steps include comparing the captured image with a second registered image registered in the list of persons subject to reporting to obtain a second matching result,
A program that causes a matching device to perform the following steps: outputting information to ask the visitor whether or not to report to the police or security company if the first matching result is inconsistent and the second matching result is inconsistent .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022058353A JP7872016B2 (en) | 2022-03-31 | 2022-03-31 | Matching device, matching system, matching terminal, matching method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022058353A JP7872016B2 (en) | 2022-03-31 | 2022-03-31 | Matching device, matching system, matching terminal, matching method, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023149669A JP2023149669A (en) | 2023-10-13 |
| JP7872016B2 true JP7872016B2 (en) | 2026-06-09 |
Family
ID=88288714
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022058353A Active JP7872016B2 (en) | 2022-03-31 | 2022-03-31 | Matching device, matching system, matching terminal, matching method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7872016B2 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004282675A (en) | 2003-03-19 | 2004-10-07 | Sanyo Electric Co Ltd | Monitoring system |
| JP2007241501A (en) | 2006-03-07 | 2007-09-20 | Toshiba Corp | Visitor identification system and visitor identification method |
| JP2019146082A (en) | 2018-02-22 | 2019-08-29 | アイホン株式会社 | Intercom system and doorbell system |
| JP2019149641A (en) | 2018-02-26 | 2019-09-05 | グローリー株式会社 | Monitoring system, monitoring method and monitoring program |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9542832B1 (en) * | 2013-03-14 | 2017-01-10 | Kuna Systems Corporation | eReceptionist and eNeighborhood watch system for crime prevention and/or verification |
-
2022
- 2022-03-31 JP JP2022058353A patent/JP7872016B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004282675A (en) | 2003-03-19 | 2004-10-07 | Sanyo Electric Co Ltd | Monitoring system |
| JP2007241501A (en) | 2006-03-07 | 2007-09-20 | Toshiba Corp | Visitor identification system and visitor identification method |
| JP2019146082A (en) | 2018-02-22 | 2019-08-29 | アイホン株式会社 | Intercom system and doorbell system |
| JP2019149641A (en) | 2018-02-26 | 2019-09-05 | グローリー株式会社 | Monitoring system, monitoring method and monitoring program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023149669A (en) | 2023-10-13 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20250206 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20260127 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20260203 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20260402 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20260428 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20260521 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7872016 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |