JP2021114228A - Watching target person Mobile terminal and watching system - Google Patents

Watching target person Mobile terminal and watching system Download PDF

Info

Publication number
JP2021114228A
JP2021114228A JP2020007461A JP2020007461A JP2021114228A JP 2021114228 A JP2021114228 A JP 2021114228A JP 2020007461 A JP2020007461 A JP 2020007461A JP 2020007461 A JP2020007461 A JP 2020007461A JP 2021114228 A JP2021114228 A JP 2021114228A
Authority
JP
Japan
Prior art keywords
information
unit
person
mobile terminal
image information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020007461A
Other languages
Japanese (ja)
Inventor
眞市 大熊
Shinichi Okuma
眞市 大熊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujita Corp
Original Assignee
Fujita Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujita Corp filed Critical Fujita Corp
Priority to JP2020007461A priority Critical patent/JP2021114228A/en
Publication of JP2021114228A publication Critical patent/JP2021114228A/en
Pending legal-status Critical Current

Links

Images

Abstract

To protect a watching target person by issuing a warning when a person who is likely to be a suspicious person approaches the watching target person, and to accurately grasp a situation of the watching target person by a watcher when the suspicious person approaches the watching target person.SOLUTION: A watching target person mobile terminal issues a warning to a watching target person and his/her surroundings shen a person determination unit 28B determines that face image information of a person included in peripheral image information DG generated by imaging the periphery of the watching target person by an imaging unit 22, does not match face image information Df of a person who does not need to watch out, which is registered in advance, and generates warning information Da including current position information DL of the watching target person and the peripheral image information DG so as to transmit it to a watching server 14 via a network 18.SELECTED DRAWING: Figure 1

Description

本発明は見守り対象者携帯端末および見守りシステムに関する。 The present invention relates to a mobile terminal for a person to be watched over and a watching system.

児童などの見守り対象者の位置情報をGPSによって把握しておき、見守り対象者が通常所在するエリアから離れた場合に、何らかの異常が発生したものと判定し、警告を発生する技術が提案されている。
例えば、特許文献1には、見守り対象者が携帯するGPS端末の位置情報が、予め設定された複数のエリアと時間帯からなる論理条件からなる判定条件を満たさないときに異常の可能性有りと判定し、警告を発生する見守りシステムが提案されている。
A technology has been proposed in which the position information of a person to be watched over, such as a child, is grasped by GPS, and when the person to be watched away from the area where the person to be watched is normally located, it is determined that some abnormality has occurred and a warning is issued. There is.
For example, Patent Document 1 states that there is a possibility of abnormality when the position information of the GPS terminal carried by the person to be watched does not satisfy the determination condition consisting of the logical condition consisting of a plurality of preset areas and time zones. A monitoring system has been proposed that determines and issues a warning.

特開2015−114863号公報Japanese Unexamined Patent Publication No. 2015-114863

しかしながら、上記従来技術では、見守り対象者の位置情報と判定条件に基づく異常判定ができるものの、見守り対象者に不審者が接近するといった事態には対応することができず、何らかの改善が求められている。
本発明はこのような事情に鑑みなされたものであり、その目的は、不審者の可能性が高い人物が見守り対象者に接近した場合に、警告を報知することで見守り対象者の保護を図れ、また、見守り対象者に不審者が接近した際に、見守り者が見守り対象者の状況を正確に把握する有利な見守り対象者携帯端末および見守りシステムを提供することにある。
However, in the above-mentioned prior art, although it is possible to perform an abnormality determination based on the position information of the person to be watched and the judgment conditions, it is not possible to deal with a situation where a suspicious person approaches the person to be watched, and some improvement is required. There is.
The present invention has been made in view of such circumstances, and an object of the present invention is to protect the watching target person by notifying a warning when a person who is likely to be a suspicious person approaches the watching target person. Further, it is an object of the present invention to provide an advantageous mobile terminal for the watching target person and a watching system in which the watching person accurately grasps the situation of the watching target person when a suspicious person approaches the watching target person.

上述の目的を達成するため、本発明は、見守り対象者が所持する見守り対象者携帯端末であって、測位衛星からの測位信号に基づいて現在位置情報を取得する測位部と、前記見守り対象者の周辺を撮像して周辺画像情報を生成する撮像部と、警戒する必要のない人物の顔画像情報が登録された顔画像情報記録部と、前記周辺画像情報に含まれる人物の顔の顔画像情報と前記顔画像情報記録部に登録された前記顔画像情報とを比較して一致、不一致を判定する人物判定部と、前記人物判定部により前記顔画像情報が不一致と判定された場合に前記見守り対象者および周辺に対して警告を報知する警告報知部と、ネットワークを介してサーバーと通信可能に構成された携帯端末側通信部と、前記人物判定部により前記顔画像情報が不一致と判定された場合に、前記携帯端末の携帯端末識別情報と、前記測位部で取得した前記現在位置情報と、前記周辺画像情報とを関連付けた警戒情報を生成し、前記警戒情報を前記携帯端末側通信部により前記ネットワークを介して前記サーバーに送信する警戒情報生成部と、を備えることを特徴とする。
また、本発明は、見守り対象者が所持する見守り対象者携帯端末と、前記見守り対象者携帯端末と通信可能に構成された見守りサーバーとを含む見守りシステムであって、前記見守り対象者携帯端末は、測位衛星からの測位信号に基づいて現在位置情報を取得する測位部と、前記見守り対象者の周辺を撮像して周辺画像情報を生成する撮像部と、警戒する必要のない人物の顔画像情報が登録された顔画像情報記録部と、前記周辺画像情報に含まれる人物の顔の顔画像情報と前記顔画像情報記録部に登録された前記顔画像情報とを比較して一致、不一致を判定する人物判定部と、前記人物判定部により前記顔画像情報が不一致と判定された場合に前記見守り対象者および周辺に対して警告を報知する警告報知部と、ネットワークを介して通信を行なう携帯端末側通信部と、前記人物判定部により前記顔画像情報が不一致と判定された場合に、前記携帯端末の携帯端末識別情報と、前記測位部で取得した前記現在位置情報と、前記周辺画像情報とを関連付けた警戒情報を生成し、前記警戒情報を前記携帯端末側通信部により前記ネットワークを介して前記見守りサーバーに送信する警戒情報生成部とを備え、前記見守りサーバーは、前記携帯端末識別情報と、見守り者が所持する見守り者携帯端末の識別情報である見守り者携帯端末識別情報とを関連付けて記録する識別情報記録部と、前記ネットワークを介して通信を行なう見守りサーバー側通信部と、前記携帯端末側通信部から前記見守りサーバー側通信部に送信された前記警戒情報に基づいて閲覧情報を生成する閲覧情報生成部と、前記閲覧情報を閲覧するために必要なURL情報を生成するURL情報生成部と、前記URL情報生成部で生成された前記URL情報を含む注意喚起情報を生成すると共に、前記警戒情報に含まれる前記携帯端末識別情報に関連付けられた前記見守り者携帯端末識別情報を前記識別情報記録部から特定し、前記注意喚起情報を前記特定した前記見守り者携帯端末識別情報に対応する前記見守り者端末に、前記見守りサーバー側通信部により前記ネットワークを介して送信する注意喚起情報生成部とを備えることを特徴とする。
In order to achieve the above object, the present invention is a monitoring target person mobile terminal possessed by the monitoring target person, a positioning unit that acquires current position information based on a positioning signal from a positioning satellite, and the monitoring target person. An imaging unit that captures the surroundings of the image to generate peripheral image information, a facial image information recording unit in which facial image information of a person who does not need to be wary is registered, and a facial image of a person's face included in the peripheral image information. The person determination unit that compares the information with the face image information registered in the face image information recording unit and determines a match or mismatch, and the person determination unit determines that the face image information does not match. The face image information is determined to be inconsistent by the warning notification unit that notifies the person to be watched and the surroundings, the communication unit on the mobile terminal side that is configured to be able to communicate with the server via the network, and the person determination unit. In this case, the mobile terminal identification information of the mobile terminal, the current position information acquired by the positioning unit, and the peripheral image information are associated with each other to generate warning information, and the warning information is used by the mobile terminal side communication unit. It is characterized by including a warning information generation unit that transmits to the server via the network.
Further, the present invention is a monitoring system including a monitoring target person's mobile terminal possessed by the monitoring target person and a monitoring server configured to be able to communicate with the monitoring target person's mobile terminal. , A positioning unit that acquires the current position information based on the positioning signal from the positioning satellite, an imaging unit that images the surroundings of the person to be watched and generates peripheral image information, and facial image information of a person who does not need to be vigilant. The face image information recording unit in which is registered is compared with the face image information of the face of a person included in the peripheral image information and the face image information registered in the face image information recording unit to determine match or disagreement. A mobile terminal that communicates via a network with a person determination unit that performs a warning, and a warning notification unit that notifies a person to be watched and surroundings when the face image information is determined to be inconsistent by the person determination unit. When the face image information is determined to be inconsistent by the side communication unit and the person determination unit, the mobile terminal identification information of the mobile terminal, the current position information acquired by the positioning unit, and the peripheral image information It is provided with a warning information generation unit that generates warning information associated with the above and transmits the warning information to the watching server via the network by the mobile terminal side communication unit, and the watching server is provided with the mobile terminal identification information. , The identification information recording unit that records the identification information of the watcher mobile terminal possessed by the watcher in association with the identification information of the watcher mobile terminal, the monitoring server-side communication unit that communicates via the network, and the mobile phone. A browsing information generation unit that generates browsing information based on the warning information transmitted from the terminal-side communication unit to the monitoring server-side communication unit, and a URL information generation that generates URL information necessary for browsing the browsing information. The unit and the alert information including the URL information generated by the URL information generation unit are generated, and the watcher mobile terminal identification information associated with the mobile terminal identification information included in the warning information is identified. A warning information generation unit that is specified from the information recording unit and transmits the warning information to the watching person terminal corresponding to the specified watching person mobile terminal identification information via the network by the watching server side communication unit. It is characterized by having and.

本発明の見守り対象者携帯端末によれば、見守り対象者の周辺を撮像部で撮像して生成された周辺画像情報に含まれる人物の顔画像情報が予め登録されている警戒する必要のない人物の顔画像情報と一致しないと人物判定部で判定された場合に、見守り対象者および周辺に対して警告を報知すると共に、見守り対象者の現在位置情報と周辺画像情報を含む警戒情報を生成してネットワークを介してサーバーに送信するようにした。
したがって、不審者の可能性が高い人物が見守り対象者に接近した場合に、警告を報知することで、見守り対象者および周辺に居合わせた人に注意喚起を図ることができる。そのため、見守り対象者自らが逃げる、あるいは、周辺に居合わせた人に助けを求める、あるいは、居合わせた人によって見守り対象者を保護してもらうといった対応をとることができ見守り対象者の保護を図る上で有利となる。あるいは、不審者が警告報知に気が付き自ら見守り対象者の近傍から立ち去ることも期待できる。
また、見守り対象者を見守る見守り者は、スマートフォンなどの端末を用いてサーバーから警戒情報を入手することで見守り対象者の現在位置情報や周辺画像情報を把握できるため、早期に見守り対象者の保護を図るための行動をとる上で有利となる。
また、本発明の見守りシステムでは、見守り対象者携帯端末と見守りサーバーとを備え、見守りサーバーは、見守り対象者携帯端末から送信された警戒情報に基づいて閲覧情報を生成し、閲覧情報を閲覧するために必要なURL情報を生成し、警戒情報に含まれる携帯端末識別情報に関連付けられた見守り者携帯端末識別情報を特定し、特定した見守り者携帯端末識別情報に対応する見守り者端末に、URL情報生成部で生成されたURL情報を含む注意喚起情報をネットワークを介して送信するようにした。
したがって、見守り対象者に不審者が接近した際に、見守り者は、見守り者携帯端末を用いて見守りサーバーにアクセスして閲覧情報を確認することができるので、見守り対象者の状況を正確に把握し、見守り対象者を保護するために適切な行動をとる上で有利となる。
According to the monitoring target person mobile terminal of the present invention, a person who does not need to be wary is registered in advance with the face image information of the person included in the peripheral image information generated by imaging the periphery of the monitoring target person with an imaging unit. When the person determination unit determines that the information does not match the face image information of the person, a warning is sent to the person to be watched and the surrounding area, and warning information including the current position information of the person to be watched and the surrounding image information is generated. To send to the server via the network.
Therefore, when a person who is likely to be a suspicious person approaches the person to be watched, a warning can be sent to alert the person to be watched and those who are present in the vicinity. Therefore, it is possible to take measures such as the person being watched over running away, asking for help from a person present in the vicinity, or having the person being watched over protect the person being watched over, in order to protect the person being watched over. It becomes advantageous in. Alternatively, it can be expected that the suspicious person will notice the warning notification and will watch over himself and leave the vicinity of the target person.
In addition, the watcher who watches over the person to be watched can grasp the current position information and the surrounding image information of the person to be watched by obtaining the warning information from the server using a terminal such as a smartphone, so that the person to be watched can be protected at an early stage. It will be advantageous in taking action to plan.
Further, the watching system of the present invention includes a watching target person's mobile terminal and a watching server, and the watching server generates browsing information based on the warning information transmitted from the watching target person's mobile terminal and browses the browsing information. Generate the URL information necessary for the purpose, identify the watcher mobile terminal identification information associated with the mobile terminal identification information included in the warning information, and send the URL to the watcher terminal corresponding to the specified watcher mobile terminal identification information. The alert information including the URL information generated by the information generation unit is transmitted via the network.
Therefore, when a suspicious person approaches the person to be watched, the watcher can access the watch server using the watcher's mobile terminal and check the browsing information, so that the situation of the person to be watched can be accurately grasped. However, it is advantageous in taking appropriate actions to protect the people to be watched over.

第1の実施の形態に係る見守り対象者携帯端末および見守りシステムの構成を示すブロック図である。It is a block diagram which shows the structure of the monitoring target person mobile terminal and the monitoring system which concerns on 1st Embodiment. 見守り対象者携帯端末の顔画像情報記録部に記録されている顔画像情報の説明図である。It is explanatory drawing of the face image information recorded in the face image information recording part of the person to watch over mobile terminal. 警戒情報のデータ構造を示す説明図である。It is explanatory drawing which shows the data structure of warning information. 見守りサーバーの識別情報記録部に記録されている携帯端末識別情報と見守り者携帯端末識別情報の説明図である。It is explanatory drawing of the mobile terminal identification information and the watcher mobile terminal identification information recorded in the identification information recording part of a watching server. 閲覧情報のデータ構造を示す説明図である。It is explanatory drawing which shows the data structure of browsing information. 閲覧情報に含まれる位置特定地図情報の一例を示す説明図である。It is explanatory drawing which shows an example of the position-specific map information included in browsing information. 見守り対象者携帯端末および見守りシステムの動作を説明するフローチャートである。It is a flowchart explaining the operation of the monitoring target person mobile terminal and the monitoring system. 第2の実施の形態に係る見守り対象者携帯端末の構成を示す説明図である。It is explanatory drawing which shows the structure of the monitoring target person mobile terminal which concerns on 2nd Embodiment.

(第1の実施の形態)
次に本発明の実施の形態に係る携帯端末および見守りシステムについて説明する。
初めに見守り対象者と見守り者について説明する。
見守り対象者とは、例えば、幼児や児童などの見守りの対象となる人である。
見守り者とは、見守り対象者を見守り、見守り対象者に対して不審者の接近などが生じた場合に見守り保護者を保護するための行動を行なうべき保護者、例えば、親、保育士、教師、施設の担当者などである。
なお、見守り対象者は幼児や児童に限定されるものではなく、介護施設や病院などの施設に入所している老人や病人など見守りが必要な従来公知の様々な人を含むことは無論である。
(First Embodiment)
Next, the mobile terminal and the watching system according to the embodiment of the present invention will be described.
First, the person to be watched over and the person to be watched over will be explained.
The person to be watched over is, for example, a person to be watched over, such as an infant or a child.
A watcher is a guardian who should watch over the watcher and take actions to protect the watcher when a suspicious person approaches the watcher, for example, a parent, a nursery teacher, or a teacher. , The person in charge of the facility, etc.
It should be noted that the subjects to be watched over are not limited to infants and children, and it goes without saying that they include various conventionally known people who need to be watched over, such as elderly people and sick people who are admitted to facilities such as long-term care facilities and hospitals. ..

図1に示すように見守りシステム10は、見守り対象者携帯端末12と見守りサーバー14とを含んで構成されている。
見守り対象者携帯端末12は、見守り対象者が所持する端末であり、ネットワーク18を介して見守りサーバー14と通信可能に構成されている。また、見守り者が所持する端末を見守り者携帯端末16という。
見守りサーバー14は、見守り対象者携帯端末12および見守り者携帯端末16とネットワーク18を介して通信可能に構成されている。
ここで、見守り者携帯端末16は、汎用の携帯端末、例えば、携帯電話機、スマートフォン、タブレット端末、パーソナルコンピュータなどネットワーク18を介して通信可能な端末であればよく、文字情報、動画、静止画などを含む画像情報を表示するディスプレイと、音声を発生するスピーカーと、キーボードやタッチパネルなどの操作部などを備えている。
As shown in FIG. 1, the watching system 10 includes a watching target person's mobile terminal 12 and a watching server 14.
The watch target person mobile terminal 12 is a terminal owned by the watch target person, and is configured to be able to communicate with the watch server 14 via the network 18. Further, the terminal possessed by the watcher is referred to as a watcher mobile terminal 16.
The watching server 14 is configured to be able to communicate with the watching target person's mobile terminal 12 and the watching person's mobile terminal 16 via the network 18.
Here, the watcher mobile terminal 16 may be a general-purpose mobile terminal, for example, a terminal capable of communicating via a network 18 such as a mobile phone, a smartphone, a tablet terminal, or a personal computer, and may include character information, a moving image, a still image, and the like. It is equipped with a display that displays image information including the above, a speaker that generates sound, and an operation unit such as a keyboard and a touch panel.

まず、見守り対象者携帯端末12について説明する。
見守り対象者携帯端末12は、測位部20と、撮像部22と、音声取得部24と、携帯端末側通信部26と、コンピュータ28と、スピーカー30と、バイブレータ32と、ランプ34と、操作部36などを含んで構成され、これら各部は、単一の筐体12Aに組み込まれている。
見守り対象者携帯端末12は、例えば、見守り対象者が筐体12Aをネックストラップを介して首からぶら下げたり、あるいは、見守り対象者の着衣のポケットに筐体12Aを収納することで見守り対象者が携帯、所持している。
First, the mobile terminal 12 for the person to be watched over will be described.
The monitoring target person mobile terminal 12 includes a positioning unit 20, an imaging unit 22, a voice acquisition unit 24, a mobile terminal side communication unit 26, a computer 28, a speaker 30, a vibrator 32, a lamp 34, and an operation unit. 36 and the like are included, and each of these parts is incorporated in a single housing 12A.
In the mobile terminal 12 of the person to be watched, for example, the person to be watched can hang the housing 12A from the neck via a neck strap, or the person to be watched can store the housing 12A in the pocket of the clothes of the person to be watched. I have a cell phone.

測位部20は、測位衛星からの測位信号に基づいて見守り対象者携帯端末12の現在位置情報、すなわち、緯度経度を含む現在位置情報を取得するものである、
測位衛星としてはGPS衛星など従来公知の様々な測位衛星が使用可能である。
The positioning unit 20 acquires the current position information of the watch target person mobile terminal 12, that is, the current position information including the latitude and longitude, based on the positioning signal from the positioning satellite.
As the positioning satellite, various conventionally known positioning satellites such as GPS satellites can be used.

撮像部(カメラ)22は、見守り対象者の周辺を撮像して周辺画像情報を生成し、周辺画像情報をコンピュータ28に供給するものである。
なお、周辺画像情報は動画であってもよいし、所定の時間間隔で撮影された時系列に沿った複数の静止画であってもよいが、見守り対象者の周辺の状況を正確に把握する上で周辺画像情報は動画であることが好ましい。
撮像部22は、見守り対象者の周辺の広い範囲の周辺画像情報を取得する観点から、例えば、広角レンズ、魚眼レンズなどといった画角が広い撮像光学系を備えていることが好ましい。
The imaging unit (camera) 22 captures the periphery of the person to be watched, generates peripheral image information, and supplies the peripheral image information to the computer 28.
The peripheral image information may be a moving image or a plurality of still images taken at predetermined time intervals along a time series, but the situation around the person to be watched may be accurately grasped. Above, it is preferable that the peripheral image information is a moving image.
From the viewpoint of acquiring peripheral image information in a wide range around the person to be watched, the imaging unit 22 preferably includes an imaging optical system having a wide angle of view, such as a wide-angle lens or a fisheye lens.

音声取得部(マイク)24は、見守り対象者の周辺の音声を検出して音声情報を生成し、音声情報をコンピュータ28に供給するものである。
携帯端末側通信部26は、公衆回線やインターネットなど従来公知の様々なネットワーク18を介して後述する見守りサーバー14と通信可能に構成されている。
操作部36は、手動操作を受け付けることによりコンピュータ28に対して指示を行なうものである。
The voice acquisition unit (microphone) 24 detects the voice around the person to be watched, generates voice information, and supplies the voice information to the computer 28.
The mobile terminal side communication unit 26 is configured to be able to communicate with the monitoring server 14 described later via various conventionally known networks 18 such as a public line and the Internet.
The operation unit 36 gives an instruction to the computer 28 by accepting a manual operation.

コンピュータ28は、CPU、制御プログラム等を格納・記憶するROM、制御プログラムの作動領域としてのRAM、周辺回路等とのインターフェースをとるインターフェース部などを含んで構成される。
コンピュータ28は、CPUが制御プログラムを実行することにより、顔画像情報記録部28A、人物判定部28B、時間計測部28C、周辺画像情報記録部28D、音声情報記録部28E、警告報知部28F、警戒情報生成部28Gとして機能する。
The computer 28 includes a CPU, a ROM that stores and stores a control program, a RAM as an operating area of the control program, an interface unit that interfaces with peripheral circuits, and the like.
When the CPU executes a control program, the computer 28 has a face image information recording unit 28A, a person determination unit 28B, a time measurement unit 28C, a peripheral image information recording unit 28D, a voice information recording unit 28E, a warning notification unit 28F, and a warning. It functions as an information generation unit 28G.

顔画像情報記録部28Aは、見守り対象者の保護者や家族、友人、顔見知りの人などのように、見守り対象者の近傍にいたとしても警戒する必要のない人物の顔画像情報が登録されている。言い換えると、顔画像情報記録部28Aは、顔画像情報記録部28Aは、不審人物ではない人物の顔画像情報Dfのリストであるホワイトリストが登録されている。
このような警戒する必要のない人物の顔画像情報Dfの登録は、例えば、操作部36の操作によって撮像部22を用いて警戒する必要のない人物の顔を撮像することで生成された顔画像情報を用いてなされる。
図2に顔画像情報記録部28Aに記録されている顔画像情報Dfの一例を示す。
コード番号1、2、3、4……に対応して顔画像情報Df1、Df2、Df3、Df4……が記憶されている。
The face image information recording unit 28A registers face image information of a person who does not need to be vigilant even if he / she is in the vicinity of the person to be watched, such as a guardian of the person to be watched, a family member, a friend, or a person who knows the face. There is. In other words, in the face image information recording unit 28A, the face image information recording unit 28A is registered with a white list which is a list of face image information Df of a person who is not a suspicious person.
The registration of the face image information Df of a person who does not need to be vigilant is, for example, a face image generated by capturing the face of a person who does not need to be vigilant by using the imaging unit 22 by operating the operation unit 36. It is done with information.
FIG. 2 shows an example of the face image information Df recorded in the face image information recording unit 28A.
Face image information Df1, Df2, Df3, Df4 ... Is stored corresponding to the code numbers 1, 2, 3, 4, ....

人物判定部28Bは、撮像部22によって生成された周辺画像情報に含まれる人物の顔の顔画像情報と顔画像情報記録部28Aに登録された顔画像情報Dfとを比較して一致、不一致を判定するものである。言い換えると、撮像部22で撮像された人物の顔画像情報と顔画像情報記録部28Aに登録された顔画像情報Dfとの一致、不一致を顔認証により判定するものである。なお、このような顔認証の方式として従来公知の様々な方式が採用可能である。 The person determination unit 28B compares the face image information of the person's face included in the peripheral image information generated by the imaging unit 22 with the face image information Df registered in the face image information recording unit 28A, and matches or disagrees with each other. It is a judgment. In other words, the match or mismatch between the face image information of the person captured by the imaging unit 22 and the face image information Df registered in the face image information recording unit 28A is determined by face recognition. As such a face recognition method, various conventionally known methods can be adopted.

時間計測部28Cは、人物判定部28Bにより顔画像情報が不一致と判定された人物の顔画像情報が周辺画像情報に含まれている時間を不審者近接時間ΔTとして計測するものである。
本実施の形態では、人物判定部28Bによる顔画像情報の不一致の判定は、不審者近接時間ΔTが予め定められたしきい値Ttを上回ったときに確定される。
The time measurement unit 28C measures the time when the face image information of the person whose face image information is determined to be inconsistent by the person determination unit 28B is included in the peripheral image information as the suspicious person proximity time ΔT.
In the present embodiment, the determination of the mismatch of the face image information by the person determination unit 28B is determined when the suspicious person proximity time ΔT exceeds a predetermined threshold value Tt.

周辺画像情報記録部28Dは、撮像部22で撮像された周辺画像情報を記録するものであり、周辺画像情報記録部28Dは、該周辺画像情報記録部28Dに記録された周辺画像情報が予め定められた第1上限記録容量ST1に到達したならば、周辺画像情報記録部28Dに記録された周辺画像情報を上書きしつつ記録する。
したがって、周辺画像情報記録部28Dには、常時、第1上限記録容量ST1に対応する一定時間T1の周辺画像情報が保持されている。
また、周辺画像情報記録部28Dは人物判定部28Bによる顔画像情報の不一致が判定された(あるいは確定された)第1時点でその第1時点から第1所定時間T1さかのぼった第2時点までに記録した周辺画像情報の上書きを禁止し、第1時点以降については残りの記録容量が無くなる第3時点まで周辺画像情報を記録するようにしてもよい。
これは、いわゆるドライブレコーダーのイベント記録と同様にイベント(顔画像情報の不一致判定)が発生した前後の所定時間の周辺画像情報を記録するものであり、あたかも、イベントが発生する前の時間にさかのぼって周辺画像情報の記録をするかのような機能となる。
このようにすると、周辺画像情報記録部28Dの記録容量を抑制しつつ、顔画像情報の不一致が判定された第1時点の前後の時間(第1所定時間T1+第2所定時間T2)の周辺画像情報を確実に記録する上で有利となる。
The peripheral image information recording unit 28D records the peripheral image information captured by the imaging unit 22, and the peripheral image information recording unit 28D defines the peripheral image information recorded in the peripheral image information recording unit 28D in advance. When the first upper limit recording capacity ST1 is reached, the peripheral image information recorded in the peripheral image information recording unit 28D is overwritten and recorded.
Therefore, the peripheral image information recording unit 28D always holds the peripheral image information of T1 corresponding to the first upper limit recording capacity ST1 for a certain period of time.
Further, the peripheral image information recording unit 28D is from the first time point when the mismatch of the face image information is determined (or confirmed) by the person determination unit 28B to the second time point which goes back to the first predetermined time T1. Overwriting of the recorded peripheral image information may be prohibited, and the peripheral image information may be recorded from the first time point onward until the third time point when the remaining recording capacity is exhausted.
Similar to the event recording of the so-called drive recorder, this records the peripheral image information for a predetermined time before and after the event (mismatch judgment of the face image information), as if it goes back to the time before the event occurred. It becomes a function as if recording peripheral image information.
By doing so, while suppressing the recording capacity of the peripheral image information recording unit 28D, the peripheral image of the time before and after the first time point (first predetermined time T1 + second predetermined time T2) in which the mismatch of the facial image information is determined is determined. This is advantageous for reliably recording information.

音声情報記録部28Eは、音声取得部24で生成された音声情報を記録するものであり、音声情報記録部28Eは、該音声情報記録部28Eに記録された音声情報が予め定められた第2上限記録容量ST2に到達したならば、音声情報記録部28Eに記録された音声情報を上書きしつつ記録する。
したがって、音声情報記録部28Eには、常時、第2上限記録容量ST2に対応する一定時間T2の音声情報が保持されている。
本実施の形態では、周辺画像情報記録部28Dに記録されている周辺画像情報の一定時間T1と、音声情報記録部28Eに記録されている音声情報の一定時間T2とは同一となっている。
なお、音声情報記録部28Eは人物判定部28Bによる顔画像情報の不一致が判定された(あるいは確定された)第1時点でその第1時点から第3所定時間T3さかのぼった第4時点までに記録した音声情報の上書きを禁止し、第1時点以降については残りの記録容量が無くなる第5時点まで音声情報を記録するようにしてもよい。
これは、前述した周辺画像情報記録部28Dの場合と同様に、イベント(顔画像情報の不一致判定)が発生した前後の所定時間の音声情報を記録するものであり、あたかも、イベントが発生する前の時間にさかのぼって音声情報の記録をするかのような機能となる。
このようにすると、音声情報記録部28Eの記録容量を抑制しつつ、顔画像情報の不一致が判定された第1時点の前後の時間(第3所定時間T3+第4所定時間T4)の音声情報を確実に記録する上で有利となる。
なお、音声情報の記録時間と周辺画像情報の記録時間とを同期させるために、第1所定時間T1=第3所定時間T3、第2所定時間T2=第4所定時間T4としてもよい。
The voice information recording unit 28E records the voice information generated by the voice acquisition unit 24, and the voice information recording unit 28E has a second voice information recording unit 28E in which the voice information recorded in the voice information recording unit 28E is predetermined. When the upper limit recording capacity ST2 is reached, the voice information recorded in the voice information recording unit 28E is overwritten and recorded.
Therefore, the voice information recording unit 28E always holds the voice information of T2 for a certain period of time corresponding to the second upper limit recording capacity ST2.
In the present embodiment, the peripheral image information recorded in the peripheral image information recording unit 28D for a certain period of time T1 and the audio information recorded in the audio information recording unit 28E for a certain period of time T2 are the same.
The voice information recording unit 28E records from the first time point when the mismatch of the face image information is determined (or confirmed) by the person determination unit 28B to the fourth time point which goes back to the third predetermined time T3. Overwriting of the voice information may be prohibited, and the voice information may be recorded from the first time point onward until the fifth time point when the remaining recording capacity is exhausted.
Similar to the case of the peripheral image information recording unit 28D described above, this is to record the audio information for a predetermined time before and after the event (mismatch determination of face image information) occurs, as if before the event occurred. It becomes a function as if recording voice information by going back to the time of.
In this way, while suppressing the recording capacity of the voice information recording unit 28E, the voice information of the time before and after the first time point (third predetermined time T3 + fourth predetermined time T4) in which the mismatch of the face image information is determined is obtained. It is advantageous for reliable recording.
In order to synchronize the recording time of the audio information and the recording time of the peripheral image information, the first predetermined time T1 = the third predetermined time T3 and the second predetermined time T2 = the fourth predetermined time T4 may be set.

警告報知部28Fは、人物判定部28Bにより顔画像情報が不一致と判定された場合に見守り対象者および周辺に対して警告を報知するものである。
本実施の形態では、警告報知部28Fによる警告の報知は、以下の3種類の形態でなされる。
1)警告報知部28Fによってバイブレータ32を駆動し発生する振動によって警告を見守り対象者に報知する。
2)警告報知部28Fによってスピーカー30を駆動し警告音を発生させ警告を見守り対象者、見守り対象者の周辺に所在する人物、不審者に報知する。
警告音は、市販の防犯ブザーと同様なブザー音、サイレン音など警告が見守り対象者、見守り対象者の周辺に所在する人物、不審者に明瞭に聞き取れるような音量、音色が好ましい。
また、警告音として対象者、見守り対象者の周辺に所在する人物に対して注意喚起を図る内容を言語により発声する警告音声を用いてもよい。この場合、警告音声が見守り対象者、見守り対象者の周辺に所在する人物、不審者に明瞭に聞き取れるような内容、音量であることが好ましい。
3)警告報知部28Fによってランプ34を点灯あるいは点滅させ警告を見守り対象者、見守り対象者の周辺に所在する人物、不審者に報知する。
ランプ34の発光色は例えば、赤色やオレンジ色といったように警告を報知してることが明瞭に視認できるような色と光量であることが好ましい。
バイブレータ32、スピーカー30、ランプ34の3つを同時に用いて警告を報知してもよいし、それら3つの何れか1つ、あるいは、それら3つのうちの2つを用いて警告を放置しても良いことは無論である。
The warning notification unit 28F notifies the person to be watched and the surroundings of a warning when the person determination unit 28B determines that the face image information does not match.
In the present embodiment, the warning notification by the warning notification unit 28F is performed in the following three types.
1) The vibrator 32 is driven by the warning notification unit 28F, and the warning is watched by the generated vibration and notified to the target person.
2) The warning notification unit 28F drives the speaker 30 to generate a warning sound to notify the warning target person, a person located around the watching target person, and a suspicious person.
The warning sound is preferably a buzzer sound similar to a commercially available security buzzer, a siren sound, or the like, and a volume and tone that can be clearly heard by the person to be watched over, the person located around the person to be watched over, or a suspicious person.
In addition, as a warning sound, a warning sound that utters in a language a content that calls attention to the target person and a person located in the vicinity of the watching target person may be used. In this case, it is preferable that the warning voice has a content and volume that can be clearly heard by the person to be watched, a person located around the person to be watched, or a suspicious person.
3) The warning notification unit 28F turns on or blinks the lamp 34 to notify the person who is watching the warning, the person who is in the vicinity of the person who is watching, and the suspicious person.
The emission color of the lamp 34 is preferably a color and an amount of light such as red or orange so that the warning can be clearly visually recognized.
The vibrator 32, the speaker 30, and the lamp 34 may be used at the same time to notify the warning, or any one of the three or two of the three may be used to leave the warning unattended. Of course, the good thing is.

警戒情報生成部28Gは、人物判定部28Bにより顔画像情報が不一致と判定された場合に、図3に示すように、見守り対象者携帯端末12の携帯端末識別情報IDaと、測位部20で取得した現在位置情報DLと、周辺画像情報DGと、音声情報DSを関連付けた警戒情報Daを生成すると共に、生成した警戒情報Daを携帯端末側通信部26によりネットワーク18を介して見守りサーバー14に送信するものである。
携帯端末識別情報IDaとは見守り対象者携帯端末12を一意に識別するための情報である。
また、警戒情報Daに含まれる周辺画像情報DGは周辺画像情報記録部28Dに記録された周辺画像情報DGの一部または全部である。
また、警戒情報Daに含まれる音声情報DSは音声情報記録部28Eに記録された音声情報DSの一部または全部である。
When the person determination unit 28B determines that the face image information does not match, the warning information generation unit 28G acquires the mobile terminal identification information IDa of the monitoring target person mobile terminal 12 and the positioning unit 20 as shown in FIG. The warning information Da associated with the current position information DL, the peripheral image information DG, and the voice information DS is generated, and the generated warning information Da is transmitted to the monitoring server 14 via the network 18 by the communication unit 26 on the mobile terminal side. Is what you do.
The mobile terminal identification information IDa is information for uniquely identifying the mobile terminal 12 of the person to be watched over.
Further, the peripheral image information DG included in the warning information Da is a part or all of the peripheral image information DG recorded in the peripheral image information recording unit 28D.
Further, the voice information DS included in the warning information Da is a part or all of the voice information DS recorded in the voice information recording unit 28E.

次に見守りサーバー14について説明する。
図1に示すように、見守りサーバー14は、識別情報記録部38と、見守りサーバー側通信部40と、閲覧情報生成部42と、URL情報生成部44と、注意喚起情報生成部46とを含んで構成されている。
識別情報記録部38は、図4に示すように、見守り対象者携帯端末12の携帯端末識別情報IDaと、見守り者携帯端末16の識別情報である見守り者携帯端末識別情報IDbとを関連付けて記録するものである。
見守り者携帯端末識別情報IDbとは見守り者携帯端末16を一意に識別するための情報である。
図4に例示するように、識別情報記録部38には、携帯端末識別情報IDa1、IDa2、IDa3、IDa4……と、見守り者携帯端末識別情報IDb1、IDb2、IDb3、IDb4……とが関連付けて記録されている。
Next, the watching server 14 will be described.
As shown in FIG. 1, the monitoring server 14 includes an identification information recording unit 38, a monitoring server side communication unit 40, a browsing information generation unit 42, a URL information generation unit 44, and a warning information generation unit 46. It is composed of.
As shown in FIG. 4, the identification information recording unit 38 records the mobile terminal identification information IDa of the watch target person mobile terminal 12 and the watcher mobile terminal identification information IDb, which is the identification information of the watcher mobile terminal 16, in association with each other. Is what you do.
The watcher mobile terminal identification information IDb is information for uniquely identifying the watcher mobile terminal 16.
As illustrated in FIG. 4, the identification information recording unit 38 is associated with the mobile terminal identification information IDa1, IDa2, IDa3, IDa4 ... And the watcher mobile terminal identification information IDb1, IDb2, IDb3, IDb4 ... It has been recorded.

見守りサーバー側通信部40は、ネットワーク18を介して見守り対象者携帯端末12および見守り者携帯端末16と通信を行なうものである。 The watching server side communication unit 40 communicates with the watching target person's mobile terminal 12 and the watching person's mobile terminal 16 via the network 18.

閲覧情報生成部42は、携帯端末側通信部26からネットワーク18を介して見守りサーバー側通信部40に送信された警戒情報Daに基づいて閲覧情報としてのウェブページを生成するものである。
ここで、警戒情報Daは、図3で説明したように、見守り対象者携帯端末識別情報IDaと、測位部20で取得した現在位置情報DLと、周辺画像情報DGと、音声情報DSを関連付けた情報である。
図5に示すように、本実施の形態では、閲覧情報生成部42が生成する閲覧情報Dwは以下の情報を含む。
(1)見守り対象者携帯端末12の携帯端末識別情報IDa
(2)現在位置情報DLで特定された位置を地図上に表示した位置特定地図情報DP
(3)周辺画像情報DG
(4)音声情報DS
閲覧情報Dwのうち携帯端末識別情報IDa、位置特定地図情報DP、周辺画像情報DGは、見守り者携帯端末16のディスプレイで表示可能な形態で生成される。なお、見守り対象者携帯端末12の携帯端末識別情報IDaは閲覧情報Dwから省略しても構わないが、閲覧情報Dwに携帯端末識別情報IDaが含まれていれば、見守り対象者携帯端末12から警戒情報Daが送信されたことを明確に視認できる利点がある。
また、閲覧情報Dwのうち音声情報DSは見守り者携帯端末16のスピーカーで再生可能な形態で生成される。
図6に示すように、見守り者携帯端末16のディスプレイ1602の表示画面に表示された位置特定地図情報DPを説明すると、位置特定地図情報DPは、地図上にアイコンICで特定された位置(現在位置情報DLで特定された位置)を示した画像情報によって構成されている。
The browsing information generation unit 42 generates a web page as browsing information based on the warning information Da transmitted from the mobile terminal side communication unit 26 to the monitoring server side communication unit 40 via the network 18.
Here, as described in FIG. 3, the warning information Da associates the monitoring target person mobile terminal identification information IDa, the current position information DL acquired by the positioning unit 20, the peripheral image information DG, and the voice information DS. Information.
As shown in FIG. 5, in the present embodiment, the browsing information Dw generated by the browsing information generation unit 42 includes the following information.
(1) Mobile terminal identification information IDa of the mobile terminal 12 of the person to be watched over
(2) Location-specific map information DP that displays the position specified by the current location information DL on the map.
(3) Peripheral image information DG
(4) Voice information DS
Of the browsing information Dw, the mobile terminal identification information IDa, the position identification map information DP, and the peripheral image information DG are generated in a form that can be displayed on the display of the watcher mobile terminal 16. The mobile terminal identification information IDa of the watch target person mobile terminal 12 may be omitted from the browsing information Dw, but if the browsing information Dw includes the mobile terminal identification information IDa, the watch target person mobile terminal 12 There is an advantage that it is possible to clearly see that the warning information Da has been transmitted.
Further, among the browsing information Dw, the voice information DS is generated in a form that can be reproduced by the speaker of the watcher mobile terminal 16.
As shown in FIG. 6, the position-specific map information DP displayed on the display screen of the display 1602 of the watcher mobile terminal 16 will be described. The position-specific map information DP is the position (currently) specified by the icon IC on the map. It is composed of image information indicating the position (position specified by the position information DL).

URL情報生成部44は、閲覧情報Dw(ウェブページ)を閲覧するために必要なURL情報を生成するものである。
注意喚起情報生成部46は、URL情報生成部44で生成されたURL情報を含む注意喚起情報を生成すると共に、警戒情報Daに含まれる携帯端末識別情報IDaに関連付けられた見守り者携帯端末識別情報IDbを識別情報記録部38から特定し、注意喚起情報を、特定した見守り者携帯端末識別情報IDbに対応する見守り者携帯端末16に、見守りサーバー側通信部40によりネットワーク18を介して送信するものである。
URL情報は、例えば「http://abc.def.jp/xyz」といった文字列で構成されたものである。
注意喚起情報は、URL情報に加えて、見守り対象者に不審者が接近した可能性がある旨の警告コメント情報を含むものであってもよい。
このようにすると、見守り者は見守り者携帯端末16に表示される警告コメント情報を視認することで、見守り者が閲覧情報Dwを見逃すことなく閲覧する上で有利となる。
The URL information generation unit 44 generates URL information necessary for browsing the browsing information Dw (web page).
The alert information generation unit 46 generates the alert information including the URL information generated by the URL information generation unit 44, and the watcher mobile terminal identification information associated with the mobile terminal identification information IDa included in the alert information Da. The IDb is specified from the identification information recording unit 38, and the alert information is transmitted to the watcher mobile terminal 16 corresponding to the specified watcher mobile terminal identification information IDb via the network 18 by the watching server side communication unit 40. Is.
The URL information is composed of a character string such as "http://abc.def.jp/xyz".
In addition to the URL information, the alert information may include warning comment information indicating that a suspicious person may have approached the person to be watched.
In this way, the watcher visually recognizes the warning comment information displayed on the watcher mobile terminal 16, which is advantageous for the watcher to browse the browsing information Dw without overlooking it.

次に図7のフローチャートを参照して見守りシステム10および見守り対象者携帯端末12の動作について説明する。
予め、図2に示すように、見守り者対象者携帯端末の顔画像情報記録部28Aには顔画像情報Df:Df1、Df2、Df3、Df4……が登録されている。
また、図4に示すように、見守りサーバー14の識別情報記録部38には、見守り対象者携帯端末12の携帯端末識別情報IDa:IDa1、IDa2、IDa3、IDa4……と、見守り者携帯端末識別情報IDb:IDb1、IDb2、IDb3、IDb4……とが対応付けて登録されている。
また、見守り対象者は、見守り対象者携帯端末12を所持し、見守り対象者携帯端末12は、撮像部22による周辺画像情報DGの生成および音声取得部24による音声情報DSの取得が可能な状態となっている。
図6を流用して説明すると、以下の例では、見守り対象者が児童であって学校P0と自宅P1とを結ぶ破線で示す通学経路L上に公園P2が存在しており、見守り対象者が通学経路Lに沿って徒歩で移動しており、一方、見守り者は自宅P1で見守り対象者の帰宅を待機している場合について説明する。
Next, the operation of the watching system 10 and the watching target person's mobile terminal 12 will be described with reference to the flowchart of FIG.
As shown in FIG. 2, face image information Df: Df1, Df2, Df3, Df4 ... Is registered in advance in the face image information recording unit 28A of the watcher target person mobile terminal.
Further, as shown in FIG. 4, the identification information recording unit 38 of the monitoring server 14 identifies the mobile terminal identification information IDa: IDa1, IDa2, IDa3, IDa4, etc. of the mobile terminal 12 of the monitoring target person. Information IDb: IDb1, IDb2, IDb3, IDb4 ... Are registered in association with each other.
Further, the watching target person possesses the watching target person mobile terminal 12, and the watching target person mobile terminal 12 is in a state where the imaging unit 22 can generate the peripheral image information DG and the voice acquisition unit 24 can acquire the voice information DS. It has become.
Explaining by diverting FIG. 6, in the following example, the person to be watched is a child, and the park P2 exists on the school route L shown by the broken line connecting the school P0 and the home P1, and the person to be watched is The case where the watcher is moving on foot along the school route L, while the watcher is waiting for the watcher to return home at his / her home P1 will be described.

見守り対象者が見守り対象者携帯端末12を携帯した状態で学校P0から自宅P1に向かって移動を開始する(ステップS10)。
見守り対象者携帯端末12において、撮像部22によって生成された見守り対象者の周辺画像情報DGは周辺画像情報記録部28Dに上書きされつつ記録されており、かつ、第1上限記録容量ST1に見合う時間の周辺画像情報DGが周辺画像情報記録部28Dに記録されている(ステップS12)。
また、見守り対象者携帯端末12において、音声取得部24によって取得された見守り対象者の周辺の音声情報DSは音声情報記録部28Eに上書きされつつ記録されており、かつ、第2上限記録容量ST2に見合う時間の音声情報DSが音声情報記録部28Eに記録されている(ステップS14)。
また、人物判定部28Bは、常時、撮像部22から生成される周辺画像情報DGに含まれる顔画像情報と、顔画像情報記録部28Aに登録されている警戒する必要のない人物の顔画像情報Dfとを比較して一致するか否か(一致するか不一致であるか)を判定している(ステップS16)。
ステップS16が肯定ならば、見守り対象者の近傍に位置する人物は警戒する必要のない人物(不審者でない人物)であるため、ステップS16に戻る。
ステップS16が否定ならば、時間計測部28Cは、人物判定部28Bにより顔画像情報が不一致と判定された人物の顔画像情報が周辺画像情報DGに含まれている時間を不審者近接時間ΔTとして計測し(ステップS18)、人物判定部28Bは、不審者近接時間ΔTが予め定められたしきい値Ttを上回ったか否かを判定する(ステップS20)。
ステップS20が否定ならばステップS16に戻る。
ステップS20が肯定ならば、人物判定部28Bは、撮像部22から生成される周辺画像情報DGに含まれる顔画像情報と、顔画像情報記録部28Aに登録されている警戒する必要のない人物の顔画像情報Dfとが不一致であるとの人物判定部28Bによる判定を確定する(ステップS22)。
ステップS22により不一致が確定すると、見守り対象者の近傍に位置する人物は警戒すべき人物(不審者)である可能性が高いことになる。
そのため、警告報知部28Fは見守り対象者および周辺に居合わせた人に対して警告を報知する(ステップS24)。警告の報知は、バイブレータ32の振動、スピーカー30からの警告音の発生、ランプ34の点灯、滅灯などでなされる。
The person to be watched starts moving from the school P0 to the home P1 while carrying the mobile terminal 12 of the person to be watched (step S10).
In the monitoring target person mobile terminal 12, the peripheral image information DG of the monitoring target person generated by the imaging unit 22 is recorded while being overwritten by the peripheral image information recording unit 28D, and the time corresponding to the first upper limit recording capacity ST1. Peripheral image information DG is recorded in the peripheral image information recording unit 28D (step S12).
Further, in the watch target person mobile terminal 12, the voice information DS around the watch target person acquired by the voice acquisition unit 24 is recorded while being overwritten by the voice information recording unit 28E, and the second upper limit recording capacity ST2. The voice information DS of the time corresponding to the above is recorded in the voice information recording unit 28E (step S14).
Further, the person determination unit 28B always has face image information included in the peripheral image information DG generated from the imaging unit 22 and face image information of a person who does not need to be wary and is registered in the face image information recording unit 28A. It is determined whether or not they match (whether they match or do not match) by comparing with Df (step S16).
If step S16 is affirmative, the person located in the vicinity of the person to be watched is a person who does not need to be vigilant (a person who is not a suspicious person), and therefore returns to step S16.
If step S16 is negative, the time measurement unit 28C sets the time when the face image information of the person whose face image information is determined to be inconsistent by the person determination unit 28B is included in the peripheral image information DG as the suspicious person proximity time ΔT. After measuring (step S18), the person determination unit 28B determines whether or not the suspicious person proximity time ΔT exceeds a predetermined threshold value Tt (step S20).
If step S20 is negative, the process returns to step S16.
If step S20 is affirmative, the person determination unit 28B determines the face image information included in the peripheral image information DG generated from the image pickup unit 22 and the person who does not need to be wary registered in the face image information recording unit 28A. The determination by the person determination unit 28B that the face image information Df does not match is confirmed (step S22).
When the disagreement is confirmed in step S22, it is highly possible that the person located in the vicinity of the watch target person is a person to be watched (suspicious person).
Therefore, the warning notification unit 28F notifies the person to be watched and the person present in the vicinity of the warning (step S24). The warning is notified by the vibration of the vibrator 32, the generation of the warning sound from the speaker 30, the lighting of the lamp 34, the extinguishing of the lamp, and the like.

警告報知部28Fの警告報知により、見守り対象者は不審者の接近に気がつくことで、周辺に居合わせた人の助けを求めたり、その場から逃げるといった不審者から身を守る行動をとることができる。あるいは、不審者が警告報知に気が付き自ら見守り対象者の近傍から立ち去ることも期待できる。
また、見守り対象者の周辺に居合わせた人は、見守り対象者が携帯する見守り対象者携帯端末12から警告が報知されていることを視覚的あるいは聴覚的に把握することができるため、見守り対象者とその側にいる不審者に対して注目することになり、見守り対象者の周辺に居合わせた人が見守り対象者の保護を図るための行動を促す上で有利となる。
By the warning notification on the 28th floor of the warning notification unit, the person being watched over can take actions to protect himself from the suspicious person, such as seeking the help of a person present in the vicinity or escaping from the place by noticing the approach of the suspicious person. .. Alternatively, it can be expected that the suspicious person will notice the warning notification and will watch over himself and leave the vicinity of the target person.
In addition, a person who is present in the vicinity of the person to be watched can visually or audibly grasp that the warning is notified from the mobile terminal 12 of the person to be watched, which is carried by the person to be watched. It will be advantageous to pay attention to the suspicious person on the side of the person, and to encourage the person who is present in the vicinity of the person to be watched to take action to protect the person to be watched.

さらに、警戒情報生成部28Gは、人物判定部28Bにより顔画像情報が不一致と判定された場合に、図3に示すように、見守り対象者携帯端末12の携帯端末識別情報IDaと、測位部20で取得した現在位置情報DLと、周辺画像情報DGと、音声情報DSを関連付けた警戒情報Daを生成し、警戒情報Daを携帯端末側通信部26によりネットワーク18を介して見守りサーバー14に送信する(ステップS26)。 Further, when the person determination unit 28B determines that the face image information does not match, the warning information generation unit 28G has the mobile terminal identification information IDa of the monitoring target person mobile terminal 12 and the positioning unit 20 as shown in FIG. The warning information Da that associates the current position information DL, the peripheral image information DG, and the voice information DS acquired in is generated, and the warning information Da is transmitted to the monitoring server 14 via the network 18 by the communication unit 26 on the mobile terminal side. (Step S26).

見守りサーバー14の閲覧情報生成部42は、携帯端末側通信部26から見守りサーバー側通信部40に送信された警戒情報Daに基づいて閲覧情報Dwとしてのウェブページを生成する(ステップS28)。
次いで、URL情報生成部44は、閲覧情報Dw(ウェブページ)を閲覧するために必要なURL情報を生成する(ステップS30)。
注意喚起情報生成部46は、URL情報生成部44で生成されたURL情報を含む注意喚起情報を生成すると共に、警戒情報Daに含まれる携帯端末識別情報IDaに関連付けられた見守り者携帯端末識別情報IDbを識別情報記録部38から特定し、注意喚起情報を、特定した見守り者携帯端末識別情報IDbに対応する見守り者携帯端末16に、見守りサーバー側通信部40によりネットワーク18を介して送信する(ステップS32)。
The browsing information generation unit 42 of the watching server 14 generates a web page as browsing information Dw based on the warning information Da transmitted from the mobile terminal side communication unit 26 to the watching server side communication unit 40 (step S28).
Next, the URL information generation unit 44 generates URL information necessary for browsing the browsing information Dw (web page) (step S30).
The alert information generation unit 46 generates the alert information including the URL information generated by the URL information generation unit 44, and the watcher mobile terminal identification information associated with the mobile terminal identification information IDa included in the alert information Da. The IDb is specified from the identification information recording unit 38, and the alert information is transmitted to the watcher mobile terminal 16 corresponding to the specified watcher mobile terminal identification information IDb via the network 18 by the watching server side communication unit 40 (the monitoring server side communication unit 40). Step S32).

見守り者携帯端末16が注意喚起情報を受信すると(ステップS34)、見守り者は、見守り者携帯端末16を操作して注意喚起情報に含まれるURL情報に基づいて見守りサーバー14にアクセスし(ステップS36)、閲覧情報Dwを取得する(ステップS38)。
具体的には、閲覧情報Dwは、図6に示すように現在位置情報DLで特定された位置を地図上に表示した位置特定地図情報DPと、周辺画像情報DGと、音声情報DSを含んでいる。なお、前述したように、閲覧情報Dwに携帯端末識別情報IDaが含まれていても構わない。
位置特定地図情報DPと周辺画像情報DGは見守り者携帯端末16のディスプレイで表示され、音声情報DSは見守り者携帯端末16のスピーカー30から再生される(ステップS40)。
これにより、見守り者は、見守り対象者に不審者が接近する事態が発生したことを把握すると共に、見守り対象者の所在位置、見守り対象者の周辺画像、音声を確認し、見守り対象者が置かれた状況を具体的に把握することができ、その状況如何によっては、見守り者は見守り対象者の保護を図るための行動を起こす(ステップS42)。
具体的には、現場へ駆けつける、あるいは、警察へ通報するといった行動をとる。
これにより、見守り者、あるいは、警察が見守り対象者のもとに駆けつけ、見守り対象者が不審者に連れ去られたり、何らかの危害を加えられるといった事態を回避し、見守り対象者の保護を図ることができる。
なお、本例では、説明を簡素化するため、撮像部22によって生成される周辺画像情報DGに何らかの顔画像情報が含まれることを前提として説明した。
しかしながら、実際には見守り対象者の周辺に人物がおらず、周辺画像情報DGに顔画像情報が全く含まれない場合もある。その場合は、人物判定部28Bによる判定処理をスキップしてステップS16に戻るようにすればよい。
When the watcher mobile terminal 16 receives the alert information (step S34), the watcher operates the watcher mobile terminal 16 to access the watch server 14 based on the URL information included in the alert information (step S36). ), Acquire the browsing information Dw (step S38).
Specifically, the browsing information Dw includes a position-specific map information DP in which the position specified by the current position information DL is displayed on the map as shown in FIG. 6, a peripheral image information DG, and an audio information DS. There is. As described above, the browsing information Dw may include the mobile terminal identification information IDa.
The position-specific map information DP and the peripheral image information DG are displayed on the display of the watcher mobile terminal 16, and the audio information DS is reproduced from the speaker 30 of the watcher mobile terminal 16 (step S40).
As a result, the watcher grasps that a suspicious person has approached the watch target person, confirms the location of the watch target person, the surrounding image and sound of the watch target person, and places the watch target person. The situation can be grasped concretely, and depending on the situation, the watcher takes an action to protect the watched person (step S42).
Specifically, they take actions such as rushing to the scene or calling the police.
By doing this, it is possible to prevent the watcher or the police from rushing to the watcher and the watcher being taken away by a suspicious person or causing some harm, and to protect the watcher. can.
In this example, in order to simplify the explanation, it is assumed that some face image information is included in the peripheral image information DG generated by the imaging unit 22.
However, in reality, there may be no person in the vicinity of the person to be watched over, and the peripheral image information DG may not include the face image information at all. In that case, the determination process by the person determination unit 28B may be skipped and the process may be returned to step S16.

以上説明したように本実施の形態の見守り対象者携帯端末12によれば、見守り対象者の周辺を撮像部22で撮像して生成された周辺画像情報DGに含まれる人物の顔画像情報が予め登録されている警戒する必要のない人物の顔画像情報Dfと一致しないと人物判定部28Bで判定された場合に、見守り対象者および周辺に対して警告を報知すると共に、見守り対象者の現在位置情報DLと周辺画像情報DGを含む警戒情報Daを生成してネットワーク18を介して見守りサーバー14に送信するようにした。
したがって、不審者の可能性が高い人物が見守り対象者に接近した場合に、警告を報知することで、見守り対象者および周辺に居合わせた人に注意喚起を図ることができる。そのため、見守り対象者自らが逃げる、あるいは、周辺に居合わせた人に助けを求める、あるいは、居合わせた人によって見守り対象者を保護してもらうといった対応をとることができ見守り対象者の保護を図る上で有利となる。あるいは、不審者が警告報知に気が付き自ら見守り対象者の近傍から立ち去ることも期待できる。
また、見守り対象者を見守る見守り者は、スマートフォンなどの汎用の端末を用いて見守りサーバー14から警戒情報Daを入手することで見守り対象者の現在位置情報DLや周辺画像情報DGを把握できるため、早期に見守り対象者の保護を図るための行動をとる上で有利となる。
As described above, according to the monitoring target person mobile terminal 12 of the present embodiment, the face image information of the person included in the peripheral image information DG generated by imaging the periphery of the monitoring target person with the imaging unit 22 is obtained in advance. When the person determination unit 28B determines that the face image information Df of a person who does not need to be watched does not match the registered person, a warning is sent to the person to be watched and the surrounding area, and the current position of the person to be watched is notified. Warning information Da including information DL and peripheral image information DG is generated and transmitted to the monitoring server 14 via the network 18.
Therefore, when a person who is likely to be a suspicious person approaches the person to be watched, a warning can be sent to alert the person to be watched and those who are present in the vicinity. Therefore, it is possible to take measures such as the person being watched over running away, asking for help from a person present in the vicinity, or having the person being watched over protect the person being watched over, in order to protect the person being watched over. It becomes advantageous in. Alternatively, it can be expected that the suspicious person will notice the warning notification and will watch over himself and leave the vicinity of the target person.
In addition, the watcher who watches over the person to be watched can grasp the current position information DL and the surrounding image information DG of the person to be watched by obtaining the warning information Da from the watching server 14 using a general-purpose terminal such as a smartphone. It is advantageous for taking actions to protect the target person at an early stage.

また、本実施の形態の見守り対象者携帯端末12では、人物判定部28Bにより顔画像情報が不一致と判定された人物の顔画像情報が周辺画像情報DGに含まれている時間を不審者近接時間ΔTとして計測し、人物判定部28Bによる顔画像情報の不一致の判定は、不審者近接時間ΔTが予め定められたしきい値Ttを上回ったときに確定されるようにした。
したがって、見守り対象者に対して短時間だけ接近した通りすがりの人に対して、無駄な警告を報知したり、無駄な警戒情報Daを生成することを抑制する上で有利となる。
Further, in the monitoring target person mobile terminal 12 of the present embodiment, the time when the face image information of the person whose face image information is determined to be inconsistent by the person determination unit 28B is included in the peripheral image information DG is the suspicious person proximity time. It was measured as ΔT, and the determination of the mismatch of the face image information by the person determination unit 28B was determined when the suspicious person proximity time ΔT exceeded a predetermined threshold value Tt.
Therefore, it is advantageous in notifying a person passing by who has approached the person to be watched for a short time a useless warning or suppressing the generation of useless warning information Da.

また、本実施の形態の見守り対象者携帯端末12では、撮像部22で撮像された周辺画像情報DGを記録する周辺画像情報記録部28Dを備え、周辺画像情報記録部28Dに記録された周辺画像情報DGが予め定められた第1上限記録容量ST1に到達したならば、周辺画像情報記録部28Dに記録された周辺画像情報DGを上書きしつつ記録し、警戒情報Daに含まれる周辺画像情報DGを周辺画像情報記録部28Dに記録された周辺画像情報DGの一部または全部で構成した。
したがって、第1上限記録容量ST1分の周辺画像情報DGを得ることができるので、例えば、不審者が見守り対象者に接近する前と後の状況を把握することができ、不審者の行動を正確に確認する上で有利となる。
Further, the monitoring target person mobile terminal 12 of the present embodiment includes a peripheral image information recording unit 28D for recording the peripheral image information DG imaged by the imaging unit 22, and the peripheral image recorded in the peripheral image information recording unit 28D. When the information DG reaches the predetermined first upper limit recording capacity ST1, the peripheral image information DG recorded in the peripheral image information recording unit 28D is overwritten and recorded, and the peripheral image information DG included in the warning information Da is recorded. Was composed of a part or all of the peripheral image information DG recorded in the peripheral image information recording unit 28D.
Therefore, since the peripheral image information DG for the first upper limit recording capacity ST1 can be obtained, for example, the situation before and after the suspicious person approaches the target person can be grasped, and the behavior of the suspicious person can be accurately performed. It will be advantageous to confirm with.

また、本実施の形態の見守り対象者携帯端末12では、見守り対象者の周辺の音声を検出して音声情報DSを生成する音声取得部24を備え、人物判定部28Bにより顔画像情報が不一致と判定された場合に、警戒情報生成部28Gは、警戒情報Daに音声情報DSを加えて見守りサーバー14に送信するようにした。
したがって、音声情報DSにより見守り対象者の状況をより正確に把握する上で有利となる。
Further, the monitoring target person mobile terminal 12 of the present embodiment includes a voice acquisition unit 24 that detects the voice around the monitoring target person and generates a voice information DS, and the person determination unit 28B determines that the face image information does not match. When the determination is made, the warning information generation unit 28G adds the voice information DS to the warning information Da and transmits it to the watching server 14.
Therefore, it is advantageous for the voice information DS to more accurately grasp the situation of the person to be watched over.

また、本実施の形態の見守り対象者携帯端末12では、音声取得部24で生成された音声情報DSを記録する音声情報記録部28Eを備え、音声情報記録部28Eに記録された音声情報DSが予め定められた第2上限記録容量ST2に到達したならば、音声情報記録部28Eに記録された音声情報DSを上書きしつつ記録し、警戒情報Daに含まれる音声情報DSは音声情報記録部28Eに記録された音声情報DSの一部または全部で構成した。
したがって、第2上限記録容量ST2分の音声情報DSを得ることができるので、例えば、不審者が見守り対象者に接近する前と後の状況を把握することができ、不審者の行動を正確に確認する上で有利となる。
Further, the monitoring target person mobile terminal 12 of the present embodiment includes a voice information recording unit 28E for recording the voice information DS generated by the voice acquisition unit 24, and the voice information DS recorded in the voice information recording unit 28E is provided. When the predetermined second upper limit recording capacity ST2 is reached, the voice information DS recorded in the voice information recording unit 28E is overwritten and recorded, and the voice information DS included in the warning information Da is the voice information recording unit 28E. It consisted of a part or all of the voice information DS recorded in.
Therefore, since the voice information DS for the second upper limit recording capacity ST2 can be obtained, for example, the situation before and after the suspicious person approaches the target person can be grasped, and the behavior of the suspicious person can be accurately performed. It is advantageous for confirmation.

また、本実施の形態の見守り対象者携帯端末12では、警告報知部28Fによる警告の報知は、バイブレータ32による振動の発生、スピーカー30による警告音の発生、ランプ34による光の点灯あるいは点滅の少なくとも1つによりなされるようにした。
したがって、見守り対象者およびその周辺に居合わせた人に対して警告を確実に報知でき、見守り対象者やその周辺の人に対して見守り対象者の保護を図る上で必要な行動を促す上でより有利となる。あるいは、不審者が警告報知に気が付きやすくなり、自ら見守り対象者の近傍から立ち去ることも期待できる。
Further, in the monitoring target mobile terminal 12 of the present embodiment, the warning notification by the warning notification unit 28F is at least the generation of vibration by the vibrator 32, the generation of the warning sound by the speaker 30, and the lighting or blinking of the light by the lamp 34. Made by one.
Therefore, it is possible to reliably notify the person to be watched and those who are present in the vicinity of the person to be watched, and to encourage the person to be watched and those in the vicinity to take necessary actions to protect the person to be watched. It will be advantageous. Alternatively, it can be expected that the suspicious person will be more likely to notice the warning notification and will watch over and leave the vicinity of the target person.

また、本実施の形態の見守りシステムでは、見守り対象者携帯端末12と見守りサーバー14とを備え、見守りサーバー14は、見守り対象者携帯端末12から送信された警戒情報Daに基づいて閲覧情報Dwを生成し、閲覧情報Dwを閲覧するために必要なURL情報を生成し、警戒情報Daに含まれる携帯端末識別情報IDaに関連付けられた見守り者携帯端末識別情報IDbを特定し、特定した見守り者携帯端末識別情報IDbに対応する見守り者端末に、URL情報生成部44で生成されたURL情報を含む注意喚起情報をネットワーク18を介して送信するようにした。
したがって、見守り対象者に不審者が接近した際に、見守り者は、見守り者携帯端末16を用いて見守りサーバー14にアクセスして閲覧情報Dwを確認することができるので、見守り対象者の状況を正確に把握し、見守り対象者を保護するために適切な行動をとる上で有利となる。
また、注意喚起情報がURL情報に加えて、見守り対象者に不審者が接近した可能性がある旨の警告コメント情報を含むものであると、見守り者は見守り者携帯端末16に表示される警告コメント情報を視認することで、見守り者が閲覧情報Dwを見逃すことなく確実に閲覧する上で有利となる。
Further, in the monitoring system of the present embodiment, the monitoring target person mobile terminal 12 and the monitoring server 14 are provided, and the monitoring server 14 obtains the browsing information Dw based on the warning information Da transmitted from the monitoring target person mobile terminal 12. Generate and generate the URL information necessary for browsing the browsing information Dw, identify the watcher mobile terminal identification information IDb associated with the mobile terminal identification information IDa included in the warning information Da, and identify the watcher's mobile phone. Attention information including the URL information generated by the URL information generation unit 44 is transmitted to the watcher terminal corresponding to the terminal identification information IDb via the network 18.
Therefore, when a suspicious person approaches the person to be watched, the watcher can access the watch server 14 using the watcher mobile terminal 16 and check the browsing information Dw, so that the situation of the person to be watched can be checked. It is advantageous to grasp accurately and take appropriate actions to protect the watched person.
Further, if the alert information includes warning comment information indicating that a suspicious person may have approached the person to be watched in addition to the URL information, the watcher will display the warning comment information displayed on the watcher's mobile terminal 16. By visually recognizing the information, it is advantageous for the watcher to reliably browse the browsing information Dw without overlooking it.

また、本実施の形態の見守りシステムでは、閲覧情報Dwは、現在位置情報DLによって特定された位置を地図上に表示した位置特定地図情報DPと、周辺画像情報DGとを含むので、見守り者は、見守り対象者に不審者が接近した際に、見守り対象者の所在位置を正確に把握できるため、見守り対象者を保護するために適切な行動をとる上で有利となる。 Further, in the watching system of the present embodiment, the browsing information Dw includes the position-specific map information DP in which the position specified by the current position information DL is displayed on the map and the peripheral image information DG. When a suspicious person approaches the person to be watched, the location of the person to be watched can be accurately grasped, which is advantageous in taking appropriate actions to protect the person to be watched.

また、本実施の形態の見守りシステムでは、閲覧情報Dwは、音声取得部24で生成された音声情報DSを含むので、見守り者は、見守り対象者に不審者が接近した際に、音声情報DSにより見守り対象者の状況を正確に把握できるため、見守り対象者を保護するために適切な行動をとる上で有利となる。 Further, in the watching system of the present embodiment, since the browsing information Dw includes the voice information DS generated by the voice acquisition unit 24, the watcher can use the voice information DS when a suspicious person approaches the person to be watched. This makes it possible to accurately grasp the situation of the person being watched over, which is advantageous in taking appropriate actions to protect the person being watched over.

(第2の実施の形態)
次に図8を参照して第2の実施の形態について説明する。
なお、以下の実施の形態では、第1の実施の形態と同様の部分、部材については第1の実施の形態と同一の符号を付してその説明を省略する。
第2の実施の形態は、第1の実施の形態の変形例であり、見守り対象者携帯端末12′の構成が第1の実施の形態と異なっており、見守りサーバー14は第1の実施の形態と同様である。
(Second Embodiment)
Next, a second embodiment will be described with reference to FIG.
In the following embodiments, the same parts and members as those in the first embodiment are designated by the same reference numerals as those in the first embodiment, and the description thereof will be omitted.
The second embodiment is a modification of the first embodiment, the configuration of the watch target person mobile terminal 12'is different from that of the first embodiment, and the watch server 14 is the first embodiment. Similar to form.

見守り対象者携帯端末12′は、互いに切り離された子機側筐体48と親機側筐体50との2つの筐体を備えている。
子機側筐体48は、撮像部22と、音声取得部24と、子機側通信部52とを収容している。
子機側通信部52は、撮像部22と音声取得部24に接続され無線回線Nを介して通信を行なうものである。
このような無線回線Nとして、例えばBluetooth(登録商標)など従来公知の様々な近距離無線が採用可能である。
親機側筐体50は、子機側筐体48とは別体に構成され見守り対象者携帯端末12のうち撮像部22と音声取得部24を除く残りの部分と、親機側通信部54とを収容している。
親機側通信部54は、コンピュータ28に接続され無線回線Nを介して子機側通信部52と通信を行なうものである。
そして、撮像部22および周辺画像情報記録部28Dは、子機側通信部52と無線回線Nと親機側通信部54を介して周辺画像情報DGの通信を行なうように構成されている。
また、音声取得部24および音声情報記録部28Eは、子機側通信部52と無線回線Nと親機側通信部54を介して音声情報DSの通信を行なうように構成されている。
The watch target person mobile terminal 12'includes two housings, a slave unit side housing 48 and a master unit side housing 50, which are separated from each other.
The slave unit side housing 48 houses the image pickup unit 22, the audio acquisition unit 24, and the slave unit side communication unit 52.
The slave unit side communication unit 52 is connected to the image pickup unit 22 and the voice acquisition unit 24 and communicates via the wireless line N.
As such a wireless line N, various conventionally known short-range wireless devices such as Bluetooth (registered trademark) can be adopted.
The master unit side housing 50 is configured separately from the slave unit side housing 48, and is the rest of the watch target person's mobile terminal 12 excluding the image pickup unit 22 and the voice acquisition unit 24, and the master unit side communication unit 54. And is housed.
The master unit side communication unit 54 is connected to the computer 28 and communicates with the slave unit side communication unit 52 via the wireless line N.
The imaging unit 22 and the peripheral image information recording unit 28D are configured to communicate the peripheral image information DG via the slave unit side communication unit 52, the wireless line N, and the master unit side communication unit 54.
Further, the voice acquisition unit 24 and the voice information recording unit 28E are configured to communicate the voice information DS via the slave unit side communication unit 52, the wireless line N, and the master unit side communication unit 54.

第2の実施の形態によれば、子機側筐体48は、撮像部22と、音声取得部24と、子機側通信部52とを収容すれば足りるため、第1の実施の形態の見守り対象者携帯端末12の筐体12Aに比較して子機側筐体48は小型化、軽量化を図ることができる。
したがって、子機側筐体48は、例えば、クリップ、安全ピン、面ファスナーなどの従来公知の様々な着脱可能な取付具を介して見守り対象者の衣服や帽子、あるいは、バッグなどの適宜箇所に自由に取り付けることができ、親機側筐体50は衣服のポケットやバッグなど子機側筐体48とは別の箇所に収容することができる。
このようにすることで、撮像部22の位置や姿勢が制約されにくく、撮像部22によって見守り対象者の周辺を撮像しやすくなるように子機側筐体48を取り付ける上で有利となり、撮像部22による周辺画像情報DGの生成を確実に行なう上で有利となる。
また、音声取得部24の位置や姿勢が制約されにくく、音声取得部24によって見守り対象者の周辺の音声を取得しやすくなるように子機側筐体48を取り付ける上で有利となり、音声取得部24による音声情報DSの取得を確実に行なう上で有利となる。
また、第2の実施の形態では、音声取得部24を子機側筐体48に収容したが、音声取得部24を親機側筐体50に収容するようにしてもかまわない。その場合は、子機側筐体48の小型化、軽量化を図る上でより一層有利となる。
According to the second embodiment, since it is sufficient for the slave unit side housing 48 to accommodate the image pickup unit 22, the voice acquisition unit 24, and the slave unit side communication unit 52, the slave unit side housing 48 of the first embodiment Compared to the housing 12A of the mobile terminal 12 of the person to be watched over, the slave unit side housing 48 can be made smaller and lighter.
Therefore, the slave unit side housing 48 is placed in an appropriate place such as clothes, a hat, or a bag of the person to be watched over via various conventionally known removable attachments such as clips, safety pins, and hook-and-loop fasteners. It can be freely attached, and the master unit side housing 50 can be housed in a place other than the slave unit side housing 48, such as a pocket of clothes or a bag.
By doing so, the position and posture of the image pickup unit 22 are less likely to be restricted, and it is advantageous in attaching the slave unit side housing 48 so that the image pickup unit 22 can easily take an image of the surroundings of the person to be watched over. It is advantageous in surely generating the peripheral image information DG according to 22.
In addition, the position and posture of the voice acquisition unit 24 are less likely to be restricted, which is advantageous in attaching the slave unit side housing 48 so that the voice acquisition unit 24 can easily acquire the voice around the person to be watched over. It is advantageous in surely acquiring the voice information DS by 24.
Further, in the second embodiment, the voice acquisition unit 24 is housed in the slave unit side housing 48, but the voice acquisition unit 24 may be housed in the master unit side housing 50. In that case, it is even more advantageous in reducing the size and weight of the slave unit side housing 48.

なお、第1、第2の実施の形態では、撮像部22が単一である場合について説明したが、撮像部22を複数設けてもよく、その場合は、複数の撮像部22によって見守り対象者の周辺をまんべんなく撮像できるように筐体12Aあるいは子機側筐体48を見守り対象者の衣服などに取り付けることで、広い範囲の周辺画像情報を生成することができる。
そのため、撮像部22が単一である場合に比較して死角を低減し、周辺画像情報の情報量を確保する上で有利となる。
In the first and second embodiments, the case where the image pickup unit 22 is single has been described, but a plurality of image pickup units 22 may be provided. In that case, the person to be watched over by the plurality of image pickup units 22. A wide range of peripheral image information can be generated by watching over the housing 12A or the slave unit side housing 48 and attaching it to the clothes of the target person or the like so that the surroundings of the above can be evenly imaged.
Therefore, it is advantageous in reducing the blind spot and securing the amount of peripheral image information as compared with the case where the imaging unit 22 is single.

10 見守りシステム
12、12′ 見守り対象者携帯端末
12A 筐体
14 見守りサーバー
16 見守り者携帯端末
18 ネットワーク
20 測位部
22 撮像部
24 音声取得部
26 携帯端末側通信部
28 コンピュータ
28A 顔画像情報記録部
28B 人物判定部
28C 時間計測部
28D 周辺画像情報記録部
28E 音声情報記録部
28F 警告報知部
28G 警戒情報生成部
30 スピーカー
32 バイブレータ
34 ランプ
36 操作部
38 識別情報記録部
40 見守りサーバー側通信部
42 閲覧情報生成部
44 URL情報生成部
46 注意喚起情報生成部
48 子機側筐体
50 親機側筐体
52 子機側通信部
54 親機側通信部
Df 顔画像情報
Da 警戒情報
IDa 見守り対象者の携帯端末識別情報
DL 現在位置情報
DG 周辺画像情報
DS 音声情報
IDb 見守り者携帯端末識別情報
Dw 閲覧情報
DP 位置特定地図情報
ΔT 不審者近接時間
Tt しきい値
ST1 第1上限記録容量
ST2 第2上限記録容量
10 Watching system 12, 12'Watching target person Mobile terminal 12A Housing 14 Watching server 16 Watching person mobile terminal 18 Network 20 Positioning unit 22 Imaging unit 24 Voice acquisition unit 26 Mobile terminal side communication unit 28 Computer 28A Face image information recording unit 28B Person judgment unit 28C Time measurement unit 28D Peripheral image information recording unit 28E Voice information recording unit 28F Warning notification unit 28G Warning information generation unit 30 Speaker 32 Vibrator 34 Lamp 36 Operation unit 38 Identification information recording unit 40 Watching server side communication unit 42 Browsing information Generation unit 44 URL information generation unit 46 Attention information generation unit 48 Slave unit side housing 50 Master unit side chassis 52 Slave unit side communication unit 54 Master unit side communication unit Df Face image information Da Warning information IDa Mobile phone of the person to be watched Terminal identification information DL Current position information DG Peripheral image information DS Voice information IDb Watcher mobile terminal identification information Dw Browsing information DP Position identification map information ΔT Suspicious person proximity time Tt Threshold ST1 1st upper limit recording capacity ST2 2nd upper limit recording capacity

Claims (14)

見守り対象者が所持する見守り対象者携帯端末であって、
測位衛星からの測位信号に基づいて現在位置情報を取得する測位部と、
前記見守り対象者の周辺を撮像して周辺画像情報を生成する撮像部と、
警戒する必要のない人物の顔画像情報が登録された顔画像情報記録部と、
前記周辺画像情報に含まれる人物の顔の顔画像情報と前記顔画像情報記録部に登録された前記顔画像情報とを比較して一致、不一致を判定する人物判定部と、
前記人物判定部により前記顔画像情報が不一致と判定された場合に前記見守り対象者および周辺に対して警告を報知する警告報知部と、
ネットワークを介してサーバーと通信可能に構成された携帯端末側通信部と、
前記人物判定部により前記顔画像情報が不一致と判定された場合に、前記携帯端末の携帯端末識別情報と、前記測位部で取得した前記現在位置情報と、前記周辺画像情報とを関連付けた警戒情報を生成し、前記警戒情報を前記携帯端末側通信部により前記ネットワークを介して前記サーバーに送信する警戒情報生成部と、
を備えることを特徴とする見守り対象者携帯端末。
It is a mobile terminal of the person to be watched, which is owned by the person to be watched.
A positioning unit that acquires current position information based on positioning signals from positioning satellites, and
An imaging unit that captures the surroundings of the person to be watched and generates peripheral image information,
A face image information recording unit in which face image information of a person who does not need to be vigilant is registered,
A person determination unit that compares the face image information of a person's face included in the peripheral image information with the face image information registered in the face image information recording unit and determines a match or a mismatch.
When the face image information is determined to be inconsistent by the person determination unit, a warning notification unit that notifies the monitoring target person and the surroundings of a warning, and a warning notification unit.
The communication unit on the mobile terminal side, which is configured to be able to communicate with the server via the network,
When the person determination unit determines that the face image information does not match, the warning information in which the mobile terminal identification information of the mobile terminal, the current position information acquired by the positioning unit, and the peripheral image information are associated with each other. And the warning information generation unit that generates the warning information and transmits the warning information to the server via the network by the communication unit on the mobile terminal side.
A mobile terminal for a person to be watched over, which is characterized by being equipped with.
前記人物判定部により不一致と判定された前記人物の前記顔画像情報が前記周辺画像情報に含まれている時間を不審者近接時間として計測する時間計測部をさらに備え、
前記人物判定部による前記顔画像情報の不一致の判定は、前記不審者近接時間が予め定められたしきい値を上回ったときに確定される、
ことを特徴とする請求項1記載の見守り対象者携帯端末。
A time measuring unit for measuring the time when the face image information of the person determined to be inconsistent by the person determining unit is included in the peripheral image information is further provided as a suspicious person proximity time.
The determination of the mismatch of the face image information by the person determination unit is determined when the suspicious person proximity time exceeds a predetermined threshold value.
The mobile terminal of the person subject to monitoring according to claim 1.
前記撮像部で撮像された前記周辺画像情報を記録する周辺画像情報記録部を備え、
前記周辺画像情報記録部は、該周辺画像情報記録部に記録された前記周辺画像情報が予め定められた第1上限記録容量に到達したならば、前記周辺画像情報記録部に記録された前記周辺画像情報を上書きしつつ記録し、
前記警戒情報に含まれる前記周辺画像情報は前記周辺画像情報記録部に記録された前記周辺画像情報の一部または全部である、
ことを特徴とする請求項1または2記載の見守り対象者携帯端末。
A peripheral image information recording unit for recording the peripheral image information captured by the imaging unit is provided.
When the peripheral image information recorded in the peripheral image information recording unit reaches a predetermined first upper limit recording capacity, the peripheral image information recording unit records the peripheral image in the peripheral image information recording unit. Record while overwriting the image information,
The peripheral image information included in the warning information is a part or all of the peripheral image information recorded in the peripheral image information recording unit.
The mobile terminal of the person to be watched according to claim 1 or 2.
前記周辺画像情報記録部は、前記人物判定部による前記顔画像情報の不一致の判定がなされた第1時点でその第1時点から第1所定時間T1さかのぼった第2時点までに記録した前記周辺画像情報の上書きを禁止し、前記第1時点以降については残りの記録容量が無くなる第3時点まで前記周辺画像情報を記録する、
ことを特徴とする請求項3記載の見守り対象者携帯端末。
The peripheral image information recording unit records the peripheral image recorded from the first time point to the second time point retroactive to the first predetermined time T1 at the first time point when the person determination unit determines the mismatch of the face image information. Overwriting of information is prohibited, and the peripheral image information is recorded from the first time point onward until the third time point when the remaining recording capacity is exhausted.
The mobile terminal of the person to be watched according to claim 3, characterized in that.
前記見守り対象者の周辺の音声を検出して音声情報を生成する音声取得部をさらに備え、
前記人物判定部により不一致と判定された場合に、前記警戒情報生成部は、前記警戒情報に、前記音声取得部で生成された前記音声情報を加えて前記携帯端末側通信部を介して前記サーバーに送信させる、
ことを特徴とする請求項1から4の何れか1項記載の見守り対象者携帯端末。
It is further provided with a voice acquisition unit that detects the voice around the person to be watched and generates voice information.
When the person determination unit determines that there is a mismatch, the warning information generation unit adds the voice information generated by the voice acquisition unit to the warning information and adds the voice information generated by the voice acquisition unit to the server via the mobile terminal side communication unit. To send to
The mobile terminal of the person to be watched according to any one of claims 1 to 4, characterized in that.
前記音声取得部で生成された前記音声情報を記録する音声情報記録部を備え、
前記音声情報記録部は、該音声情報記録部に記録された前記音声情報が予め定められた第2上限記録容量に到達したならば、前記音声情報記録部に記録された前記音声情報を上書きしつつ記録し、
前記警戒情報に含まれる前記音声情報は前記音声情報記録部に記録された前記音声情報の一部または全部である、
ことを特徴とする請求項5記載の見守り対象者携帯端末。
A voice information recording unit for recording the voice information generated by the voice acquisition unit is provided.
When the voice information recorded in the voice information recording unit reaches a predetermined second upper limit recording capacity, the voice information recording unit overwrites the voice information recorded in the voice information recording unit. Record while
The voice information included in the warning information is a part or all of the voice information recorded in the voice information recording unit.
The mobile terminal of the person to be watched over according to claim 5.
前記音声情報記録部は、前記人物判定部による前記顔画像情報の不一致の判定がなされた第1時点でその第1時点から第3所定時間T3さかのぼった第4時点までに記録した前記音声情報記録部の上書きを禁止し、前記第1時点以降については残りの記録容量が無くなる第5時点まで前記音声情報を記録する、
ことを特徴とする請求項6記載の見守り対象者携帯端末。
The voice information recording unit records the voice information recorded from the first time point to the fourth time point retroactive to the third predetermined time T3 at the first time point when the person determination unit determines the mismatch of the face image information. Overwriting of the unit is prohibited, and the voice information is recorded from the first time point onward until the fifth time point when the remaining recording capacity is exhausted.
The mobile terminal of the person to be watched over according to claim 6.
前記警告報知部による警告の報知は、バイブレータによる振動の発生、スピーカーによる警告音の発生、ランプによる光の点灯あるいは点滅の少なくとも1つによりなされる、
ことを特徴とする請求項1から7の何れか1項記載の見守り対象者携帯端末。
The warning is notified by the warning notification unit by at least one of vibration generation by the vibrator, warning sound generation by the speaker, and lighting or blinking of the light by the lamp.
The mobile terminal of the person to be watched according to any one of claims 1 to 7, characterized in that.
前記撮像部と、無線回線を介して通信を行なう子機側通信部とを収容する子機側筐体と、
前記子機側筐体とは別体に構成され前記見守り対象者携帯端末のうち前記撮像部を除く残りの部分と、前記無線回線を介して通信を行なう親機側通信部とを収容する親機側筐体とを備え、
前記撮像部および前記周辺画像情報記録部は、前記子機側通信部と前記無線回線と前記親機側通信部を介して前記周辺画像情報の通信を行なうように構成されている、
ことを特徴とする請求項1から8の何れか1項記載の見守り対象者携帯端末。
A slave unit-side housing that houses the imaging unit and a slave unit-side communication unit that communicates via a wireless line.
A parent that is configured separately from the slave unit side housing and accommodates the remaining portion of the monitoring target person's mobile terminal excluding the image pickup unit and the master unit side communication unit that communicates via the wireless line. Equipped with a machine-side housing
The imaging unit and the peripheral image information recording unit are configured to communicate the peripheral image information via the slave unit side communication unit, the wireless line, and the master unit side communication unit.
The mobile terminal of the person to be watched according to any one of claims 1 to 8, characterized in that.
前記親機側筐体は、前記撮像部と前記音声取得部を除く残りの部分を収容し、
前記子機側筐体は、前記音声取得部を収容し、
前記音声取得部および前記音声情報記録部は、前記子機側通信部と前記無線回線と前記親機側通信部を介して前記音声情報の通信を行なうように構成されている、
ことを特徴とする請求項5を引用する請求項6から9の何れか1項記載の見守り対象者携帯端末。
The master unit side housing accommodates the remaining parts excluding the image pickup unit and the sound acquisition unit.
The slave unit side housing accommodates the voice acquisition unit.
The voice acquisition unit and the voice information recording unit are configured to communicate the voice information via the slave unit side communication unit, the wireless line, and the master unit side communication unit.
The mobile terminal of the person to be watched according to any one of claims 6 to 9, which cites claim 5.
見守り対象者が所持する見守り対象者携帯端末と、前記見守り対象者携帯端末と通信可能に構成された見守りサーバーとを含む見守りシステムであって、
前記見守り対象者携帯端末は、
測位衛星からの測位信号に基づいて現在位置情報を取得する測位部と、
前記見守り対象者の周辺を撮像して周辺画像情報を生成する撮像部と、
警戒する必要のない人物の顔画像情報が登録された顔画像情報記録部と、
前記周辺画像情報に含まれる人物の顔の顔画像情報と前記顔画像情報記録部に登録された前記顔画像情報とを比較して一致、不一致を判定する人物判定部と、
前記人物判定部により前記顔画像情報が不一致と判定された場合に前記見守り対象者および周辺に対して警告を報知する警告報知部と、
ネットワークを介して通信を行なう携帯端末側通信部と、
前記人物判定部により前記顔画像情報が不一致と判定された場合に、前記携帯端末の携帯端末識別情報と、前記測位部で取得した前記現在位置情報と、前記周辺画像情報とを関連付けた警戒情報を生成し、前記警戒情報を前記携帯端末側通信部により前記ネットワークを介して前記見守りサーバーに送信する警戒情報生成部とを備え、
前記見守りサーバーは、
前記携帯端末識別情報と、見守り者が所持する見守り者携帯端末の識別情報である見守り者携帯端末識別情報とを関連付けて記録する識別情報記録部と、
前記ネットワークを介して通信を行なう見守りサーバー側通信部と、
前記携帯端末側通信部から前記見守りサーバー側通信部に送信された前記警戒情報に基づいて閲覧情報を生成する閲覧情報生成部と、
前記閲覧情報を閲覧するために必要なURL情報を生成するURL情報生成部と、
前記URL情報生成部で生成された前記URL情報を含む注意喚起情報を生成すると共に、前記警戒情報に含まれる前記携帯端末識別情報に関連付けられた前記見守り者携帯端末識別情報を前記識別情報記録部から特定し、前記注意喚起情報を前記特定した前記見守り者携帯端末識別情報に対応する前記見守り者端末に、前記見守りサーバー側通信部により前記ネットワークを介して送信する注意喚起情報生成部とを備える、
ことを特徴とする見守りシステム。
A monitoring system including a monitoring target mobile terminal possessed by the monitoring target and a monitoring server configured to be able to communicate with the monitoring target mobile terminal.
The mobile terminal of the person to be watched over is
A positioning unit that acquires current position information based on positioning signals from positioning satellites, and
An imaging unit that captures the surroundings of the person to be watched and generates peripheral image information,
A face image information recording unit in which face image information of a person who does not need to be vigilant is registered,
A person determination unit that compares the face image information of a person's face included in the peripheral image information with the face image information registered in the face image information recording unit and determines a match or a mismatch.
When the face image information is determined to be inconsistent by the person determination unit, a warning notification unit that notifies the monitoring target person and the surroundings of a warning, and a warning notification unit.
With the communication unit on the mobile terminal side that communicates via the network,
When the person determination unit determines that the face image information does not match, the warning information in which the mobile terminal identification information of the mobile terminal, the current position information acquired by the positioning unit, and the peripheral image information are associated with each other. Is provided, and the warning information generation unit is provided, and the warning information is transmitted to the watching server via the network by the communication unit on the mobile terminal side.
The watching server is
An identification information recording unit that records the mobile terminal identification information in association with the watcher's mobile terminal identification information, which is the identification information of the watcher's mobile terminal possessed by the watcher.
The monitoring server-side communication unit that communicates via the network,
A browsing information generation unit that generates browsing information based on the warning information transmitted from the mobile terminal side communication unit to the watching server side communication unit, and
A URL information generation unit that generates URL information necessary for viewing the browsing information, and
In addition to generating alert information including the URL information generated by the URL information generation unit, the identification information recording unit records the watcher mobile terminal identification information associated with the mobile terminal identification information included in the warning information. The watcher terminal corresponding to the identified watcher mobile terminal identification information is provided with a warning information generation unit which is specified from the above and is transmitted via the network by the watching server side communication unit. ,
A watching system that features that.
前記注意喚起情報は、前記URL情報に加えて前記見守り対象者に不審者が接近した可能性がある旨の警告コメント情報を含む、
ことを特徴とする請求項11記載の見守りシステム。
The alert information includes, in addition to the URL information, warning comment information indicating that a suspicious person may have approached the person to be watched over.
The monitoring system according to claim 11, wherein the monitoring system is characterized in that.
前記閲覧情報は、前記現在位置情報によって特定された位置を地図上に表示した位置特定地図情報と、前記周辺画像情報とを含む、
ことを特徴とする請求項11または12記載の見守りシステム。
The browsing information includes position-specific map information in which the position specified by the current position information is displayed on a map, and peripheral image information.
The monitoring system according to claim 11 or 12, wherein the monitoring system is characterized in that.
前記端末装置は、前記見守り対象者の周辺の音声を検出して音声情報を生成する音声取得部をさらに備え、
前記人物判定部により不一致であると判定された場合に、前記警戒情報生成部は、前記警戒情報に、前記音声取得部で生成された前記音声情報を加えて前記携帯端末側通信部を介して前記見守りサーバーに送信させ、
前記閲覧情報は、前記音声情報を含む、
ことを特徴とする請求項11から13の何れか1項記載の見守りシステム。
The terminal device further includes a voice acquisition unit that detects voice around the person to be watched and generates voice information.
When it is determined by the person determination unit that there is a mismatch, the warning information generation unit adds the voice information generated by the voice acquisition unit to the warning information and via the mobile terminal side communication unit. Send it to the watching server,
The browsing information includes the audio information.
The monitoring system according to any one of claims 11 to 13, characterized in that.
JP2020007461A 2020-01-21 2020-01-21 Watching target person Mobile terminal and watching system Pending JP2021114228A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020007461A JP2021114228A (en) 2020-01-21 2020-01-21 Watching target person Mobile terminal and watching system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020007461A JP2021114228A (en) 2020-01-21 2020-01-21 Watching target person Mobile terminal and watching system

Publications (1)

Publication Number Publication Date
JP2021114228A true JP2021114228A (en) 2021-08-05

Family

ID=77077047

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020007461A Pending JP2021114228A (en) 2020-01-21 2020-01-21 Watching target person Mobile terminal and watching system

Country Status (1)

Country Link
JP (1) JP2021114228A (en)

Similar Documents

Publication Publication Date Title
US10942032B2 (en) Personal monitoring apparatus and method
US7248170B2 (en) Interactive personal security system
US20180040230A1 (en) Systems and methods for managing an emergency situation
JP4891113B2 (en) Emergency call system with emergency call function and emergency response function
JP6387169B1 (en) Unit for outdoor installation device, outdoor installation device, position detection system, position detection method
JP2008203985A5 (en)
US11765547B2 (en) Personal monitoring apparatus and methods
KR101706186B1 (en) System for sensing dangerous situation based cloud
CN207558176U (en) A kind of AED seeks help case and AED help system
US20220084386A1 (en) Find Me FM
US20230385571A1 (en) Personal monitoring apparatus and methods
JP2017080382A (en) Portable information terminal and automatic imaging device equipped with the same
US20140176329A1 (en) System for emergency rescue
JP2021114228A (en) Watching target person Mobile terminal and watching system
JP6095722B2 (en) Action management device, information terminal, action management method, information processing method, computer program
JP2017130209A (en) Behavior management device, information terminal, behavior management method, information processing method, and computer program
US20230038025A1 (en) Apparatus and method for providing a wireless, portable, and/or handheld, device with safety features
JP2021165889A (en) Watching device for facility and watching system
JP2021135795A (en) Portable terminal for person to be watched and watching system
JP5982674B1 (en) Automatic imaging device
WO2017073775A1 (en) Automatic imaging device and wearable imaging device
TWI656502B (en) Method, apparatus and system for portable safety care
KR101571838B1 (en) Multi functional system utilizing beacon and method for using the same
US20240119826A1 (en) Personal monitoring apparatus and method
US20230033199A1 (en) Personal monitoring apparatus and method