KR102394509B1 - Safety Accident Preventing Method of Children by Using Camera and System thereof - Google Patents

Safety Accident Preventing Method of Children by Using Camera and System thereof Download PDF

Info

Publication number
KR102394509B1
KR102394509B1 KR1020200049015A KR20200049015A KR102394509B1 KR 102394509 B1 KR102394509 B1 KR 102394509B1 KR 1020200049015 A KR1020200049015 A KR 1020200049015A KR 20200049015 A KR20200049015 A KR 20200049015A KR 102394509 B1 KR102394509 B1 KR 102394509B1
Authority
KR
South Korea
Prior art keywords
information
child
kids
camera
recognition information
Prior art date
Application number
KR1020200049015A
Other languages
Korean (ko)
Other versions
KR20210130918A (en
Inventor
정인혜
Original Assignee
주식회사 제이토드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 제이토드 filed Critical 주식회사 제이토드
Priority to KR1020200049015A priority Critical patent/KR102394509B1/en
Publication of KR20210130918A publication Critical patent/KR20210130918A/en
Application granted granted Critical
Publication of KR102394509B1 publication Critical patent/KR102394509B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/0202—Child monitoring systems using a transmitter-receiver system carried by the parent and the child
    • G08B21/0205—Specific application combined with child monitoring using a transmitter-receiver system
    • G08B21/0208—Combination with audio or video communication, e.g. combination with "baby phone" function
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions

Abstract

본 발명 아동 동작인식을 모니터링하는 안전사고 방지 시스템은 키즈 시설을 이용하는 아동의 안면인식 정보와 부모의 스마트 단말기 고유 정보를 매칭시켜 키즈 관리 서버에 등록하는 단계와, 키즈 관리 서버에 연결되어 있는 다수의 카메라가 아동활동을 촬영하고 촬영된 영상 정보와 카메라 고유 정보를 키즈 관리 서버로 전송하는 단계와, 아동 앱을 설치하고 키즈 관리 서버 고유 정보를 저장하고 있는 부모 소유의 스마트 단말기가 아동 앱을 활성화하고, 키즈 관리 서버로 아동의 상태 정보를 요청하는 단계와, 키즈 관리 서버가 다수의 카메라로부터 전송된 영상 정보에서 안면 인식 정보를 추출하는 단계와, 아동 상태정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저정된 안면 인식 정보와 추출된 안면 인식 정보를 비교하는 단계와, 비교 결과 일치하는 경우, 카즈 관리 서버가 해당 안면인식 정보를 전송한 카메라를 선정하는 단계와, 키즈 관리 서버가 선정된 카메라가 전송하는 영상 정보를 아동 상태 정보를 요청한 부모의 스마트 단말기로 전송하여 표시부를 통하여 제공하는 단계를 포함하여 이루어지는 것을 특징으로 하는 것이다.The safety accident prevention system for monitoring children's motion recognition of the present invention matches the facial recognition information of children using the kids facility and the parent's smart terminal unique information to register it in the kids management server, and a plurality of children connected to the management server A step in which the camera shoots children's activities and transmits the captured video information and camera-specific information to the kids management server, and the parent-owned smart terminal that installs the child app and stores the child management server's unique information activates the child's app , the step of requesting the status information of the child to the kids management server, the steps of the kids management server extracting facial recognition information from the image information transmitted from a plurality of cameras, matching the parent smart terminal specific information requesting the child status information The step of comparing the pre-determined facial recognition information and the extracted facial recognition information, and if the comparison result matches, the camera management server selects the camera that transmitted the facial recognition information, and the camera that the kids management server is selected It is characterized in that it comprises the step of transmitting the transmitted image information to the smart terminal of the parent requesting the child status information and providing it through the display unit.

Description

아동의 활동을 실시간 모니터링하는 안전사고 방지 방법 및 이를 이용한 시스템{Safety Accident Preventing Method of Children by Using Camera and System thereof}Safety Accident Preventing Method of Children by Using Camera and System thereof for real-time monitoring of children's activities

본 발명은 키즈 시설에 설치하여 키즈 시설을 이용하는 아동들에게 발생하는 사고를 예방하기 위하여 키즈의 동작상태를 부모가 원하는 때에 실시간으로 모니터링하도록 제공함으로써 아동의 사고를 방지하고, 안전 사고의 우려가 있는 경우 안전요원에게 정보를 제공하도록 하는 것에 관한 것이다.The present invention is installed in a kids facility to prevent accidents that occur to children using the kids facility, and to provide real-time monitoring of the operation state of the kids when the parents want to prevent accidents of children, and there is a risk of safety accidents In this case, it is about having security personnel provide information.

본 발명과 관련된 종래 기술은 대한민국 등록특허 제10-1674897호(2016. 11. 21. 공고)에 게시되어 있는 것이다. 도 1은 종래의 아동 상태 감시 시스템 구성도이다. 상기도 1에서 종래의 아동 상태 감시 시스템은 감시 대상 아동(1)은 손목시계 형태으로 구성된 측정기(10)를 착용하고 있는데, 이 측정기(10)는 아동(10)의 손목에 착용하여 아동의 손목으로부터 맥박수와 체온을 측정한다. 측정기의 개략적인 구성을 도 2에 도시하는데, 도 2를 참조하면, 측정기(10)는 아동(1)의 맥박수를 측정하는 맥박수 센서(11), 아동(1)의 체온을 측정하는 체온 센서(12), 맥박수 센서(11)와 체온 센서(12)에서 측정한 맥박수와 체온을 디지탈 신호로 변환하는 연산부(13) 및 연산부(13)로부터 맥박수와 체온을 나타내는 데이터를 수신하여 외부로 송신하고 외부로부터 데이터를 수신하는 통신부(14) 및 이들 측정기(10)의 각 구성 요소를 제어하는 제어부(15)를 포함하고 있다. 제어부(15)는 통신부(14)를 통하여 수신한 측정 지시 신호에 기초하여 맥박수 센서(11)와 체온 센서(12)가 감시대상 아동의 맥박수 및 체온을 측정하도록 동작하게 한다. 또한, 측정기(10)의 메모리(미도시)에는 이 측정기를 착용한 아동의 고유 식별 부호가 기록되어 있으며, 측정기(20)는 아동의 체온과 맥박수를 측정하고 체온과 맥박수를 디지탈 데이터로 변환하여 아동의 고유 식별 부호와 함께 아동(1)이 수용되어 보육되는 보육 시설(100)에 마련되어 있는 통신기(110)로 전달한다. 측정기(10)의 통신부(14)는 라우터로서 구성되는 보육 시설의 통신기(110)와 와이파이 통신 방식에 의해 정보를 송수신하는데, 와이파이 외에도 블루투스(BLUETOOTH)나 'NFC'와 같은 그 밖의 근거리 무선 통신 방식에 의해 통신을 할 수 있다. 통신기(110)는 보육 시설(100)의 운영에 사용하는 컴퓨터(120)에 연결되고, 컴퓨터(120)에 마련된 모뎀(미도시) 또는 다른 라우터(미도시)를 통하여 인터넷망(200)에 접속된다. 또한, 본 실시예의 아동 상태 감시 시스템을 운영하는 시스템 서버(20)는 인터넷망(200)을 통하여 보육 시설의 컴퓨터(120)와 통신을 하는데, 이들은 인터넷망이 아닌 이동 통신망을 통하여서도 서로 통신을 할 수 있고, 본 아동 상태 감시 시스템을 보육 시설(100)이 직접 운영하는 경우, 시스템 서버(20)는 보육 시설(100) 내에 마련되어 인트라넷 등에 의해 통신기(110)와 접속될 수도 있다. 또한, 측정기(10)의 맥박수 센서(11)와 체온 센서(12)는 감시 대상 아동(1)의 맥박수와 체온을 일정 시간 주기로 측정하고 연산부(13)는 센서들이 측정한 맥박수와 체온을 디지탈 데이터로 변환하며, 이 디지탈 데이터는 아동의 고유 식별 부호와 함께 보육 시설의 통신기(110)로 전달된다. 보육 시설의 통신기(110)로 전달된 정보들은 보육 시설의 컴퓨터(120)를 거쳐 인터넷망(200)을 통하여 시스템을 운영하는 시스템 서버(20)에 전달된다. 시스템 서버(20)는 전달된 데이터로부터 감시 대상 아동(1)의 고유 식별 부호, 측정된 맥박수 및 체온에 관한 데이터를 판독하여 해당 시간 정보와 함께 저장하고, 감시 대상 아동(1)의 고유 식별 부호에 기초하여 해당 아동(1)의 보호자가 보유하는 스마트폰(30)으로 이동 통신망(300)을 통하여 감시 대상 아동의 맥박수 및 체온에 관한 데이터를 전달한다. 또한, 시스템 서버(20)는 판독한 감시 대상 아동의 맥박수 및 체온의 값을 미리 시스템 서버(20)에 저장되어 있는 해당 아동(1)의 정상 상태에서의 맥박수 및 체온과 전달된 맥박수 및 체온을 대비하고, 대비의 결과, 측정된 감시 대상 아동의 맥박수 또는 체온이 시스템 서버(20)이 저장되어 있는 감시 대상 아동(1)의 정상 상태의 맥박 수 또는 체온의 범위를 벗어나는 경우, 이를 감시 대상 아동(1)의 건강 상태에 이상 징후가 있는 것으로 판별하고, 감시 대상 아동(1)이 정상 상태가 아니라는 신호를 생성하여 감시 대상 아동의 보호자의 스마트폰(30)으로 전송한다. 이와 같은 아동의 건강 상태에의 이상 징후의 판별은 측정된 맥박수 또는 체온이 정상 상태의 맥박수 또는 체온과 대비하여 그 차이에 따라 여러 단계로 나누어 단계에 따른 신호를 생성할 수 있다. 예컨대, 368도까지의 체온을 정상 상태로 저장하여 두고, 측정된 아동의 체온이 374도 이하에서는 '주의', 384도에서는 '확인', 39도 이상은 '응급'으로 표시되는 신호를 생성함으로써, 감시 대상 아동의 보호자가 이러한 신호에 따른 대처를 할 수 있도록 한다. 다른 한편으로, 감시 대상 아동의 보호자의 스마트폰(30)에서도 감시 대상 아동의 정상 상태의 맥박수와 체온의 데이터를 저장하여 두고, 전송되어 오는 해당 아동(1)의 맥박수와 체온의 정보를 해당 시간 정보와 함께 메모리(미도시)에 저장하고, 측정된 맥박수 및 체온을 정상 상태의 맥박수 및 체온과 대비하여, 측정된 맥박수 또는 체온이 정상 상태의 맥박수 또는 체온의 범위를 벗어나는 경우에 이를 감시 대상 아동의 건강 상의 이상 징후가 있는 것으로 판별하고 이 스마트폰(30)을 보유하는 감시 대상 아동의 보호자가 인식할 수 있는 신호, 즉 알림음을 발생하거나 디스플레이에 알림 표시를 나타낸다. 시스템 서버(20) 또는 감시 대상 아동(1)의 보호자가 보유하고 있는 스마트폰(30)에는 감시 대상 아동의 연령, 체중, 성별 등에 따라 통계적으로 수집한 값에 기초하여 정해진 범위의 값이 감시 대상 아동(1)의 정상 상태의 맥박수와 체온으로서 저장되지만, 감시 대상 아동(1)의 신체상의 특징에 따라 감시 대상 아동의 주치의 등이 정해준 값을 감시 대상 아동의 보호자가 자신의 스마트폰(30)에 기록하거나 그러한 값을 시스템 서버(20)로 전송하여 시스템 서버(20)에 저장하여 둘 수도 있다. 측정기(10)에는 녹음기(16)가 마련되어 있는데, 녹음기(16)는 제어부(15)를 통하여 감시 대상 아동의 보호자가 보유하는 스마트폰(30)이 송신하는 녹음 지시 신호를 수신하여 주변의 소리를 녹음하고, 녹음된 주변 소리는 연산부(13)에서 디지털 신호로 변환되어 시스템 서버(20) 및 스마트폰(30)에 전달된다. 감시 대상 아동의 보호자는 측정된 감시 대상 아동의 맥박수 또는 체온이 감시 대상 아동의 건강 상태를 이상징후를 나타낸다고 판단하는 경우에, 시스템 서버(20)를 통하여 감시 대상 아동이 착용하고 있는 측정기(10)로 녹음 명령을 송신할 수 있으며, 측정기(10)는 녹음 명령 신호를 수신하여 녹음기(16)가 주변의 소리를 녹음하도록 하고 녹음된 소리를 디지탈 데이터로 변환하여 스마트폰(30)으로 전송할 수 있는 것이다.The prior art related to the present invention is disclosed in Korean Patent Registration No. 10-1674897 (announced on November 21, 2016). 1 is a block diagram of a conventional child condition monitoring system. In the conventional child condition monitoring system in FIG. 1 , the child 1 to be monitored wears a measuring device 10 configured in the form of a wrist watch, and the measuring device 10 is worn on the wrist of the child 10 and is worn on the child's wrist. Measure the pulse rate and body temperature from A schematic configuration of the measuring device is shown in FIG. 2 . Referring to FIG. 2 , the measuring device 10 includes a pulse rate sensor 11 for measuring the pulse rate of the child 1 and a body temperature sensor for measuring the body temperature of the child 1 ( 12), the arithmetic unit 13 that converts the pulse rate and body temperature measured by the pulse rate sensor 11 and the body temperature sensor 12 into digital signals, and receives data indicating the pulse rate and body temperature from the arithmetic unit 13 and transmits it to the outside It includes a communication unit 14 for receiving data from and a control unit 15 for controlling each component of the measuring instrument 10 . The control unit 15 causes the pulse rate sensor 11 and the body temperature sensor 12 to measure the pulse rate and body temperature of the child to be monitored based on the measurement instruction signal received through the communication unit 14 . In addition, the memory (not shown) of the measuring device 10 records the unique identification code of the child wearing the measuring device, and the measuring device 20 measures the child's body temperature and pulse rate and converts the body temperature and pulse rate into digital data. The child 1 together with the child's unique identification code is transmitted to the communicator 110 provided in the child care facility 100 where the child 1 is accommodated and cared for. The communication unit 14 of the measuring instrument 10 transmits and receives information by a Wi-Fi communication method with the communication device 110 of a child care facility configured as a router, and other short-range wireless communication methods such as Bluetooth (BLUETOOTH) or 'NFC' in addition to Wi-Fi. can communicate by The communicator 110 is connected to the computer 120 used for the operation of the childcare facility 100 , and is connected to the Internet network 200 through a modem (not shown) or another router (not shown) provided in the computer 120 . do. In addition, the system server 20 operating the child condition monitoring system of this embodiment communicates with the computer 120 of the child care facility through the Internet network 200, and they communicate with each other through a mobile communication network rather than the Internet network. Also, when the child care facility 100 directly operates the child condition monitoring system, the system server 20 may be provided in the child care facility 100 and connected to the communicator 110 through an intranet or the like. In addition, the pulse rate sensor 11 and the body temperature sensor 12 of the measuring device 10 measure the pulse rate and body temperature of the child 1 to be monitored at a predetermined period of time, and the calculating unit 13 digitally data the pulse rate and body temperature measured by the sensors. , and this digital data is transmitted to the communicator 110 of the child care facility together with the child's unique identification code. Information transmitted to the communicator 110 of the childcare facility is transmitted to the system server 20 operating the system through the Internet network 200 through the computer 120 of the childcare facility. The system server 20 reads and stores the data on the unique identification code, measured pulse rate and body temperature of the monitored child 1 from the transmitted data, and stores it together with the corresponding time information, and the unique identification code of the monitored child 1 Based on this, data on the pulse rate and body temperature of the child to be monitored is transmitted through the mobile communication network 300 to the smart phone 30 possessed by the guardian of the child 1 . In addition, the system server 20 reads the values of the pulse rate and body temperature of the child to be monitored, and the pulse rate and body temperature in the normal state of the child 1 stored in the system server 20 in advance, and the transmitted pulse rate and body temperature. As a result of preparation, if the measured pulse rate or body temperature of the monitored child is out of the range of the normal pulse rate or body temperature of the monitored child 1 stored in the system server 20, this It is determined that there are abnormal symptoms in the health state of (1), and a signal is generated that the monitored child (1) is not in a normal state and transmitted to the smart phone 30 of the guardian of the monitored child. In the determination of such an abnormality in the health condition of the child, the measured pulse rate or body temperature may be divided into several stages according to the difference in comparison with the normal pulse rate or body temperature to generate a signal according to the stage. For example, by storing the body temperature up to 368 degrees Celsius in a normal state, and generating a signal displayed as 'Caution' if the measured child's body temperature is 374 degrees or less, 'Confirm' if it is 384 degrees Celsius, and 'Emergency' if it is 39 degrees or more. , so that the guardians of the children being monitored can respond according to these signals. On the other hand, the smart phone 30 of the guardian of the child to be monitored also stores the data of the normal state of the pulse rate and body temperature of the child to be monitored, and transmits the transmitted information on the pulse rate and body temperature of the child 1 at the corresponding time. Information is stored in memory (not shown) and the measured pulse rate and body temperature are compared with the normal pulse rate and body temperature, and when the measured pulse rate or body temperature is outside the range of the normal pulse rate or body temperature, it is monitored It is determined that there is an abnormality in the health of the child, and the guardian of the child to be monitored who holds the smartphone 30 generates a signal that can be recognized, that is, a notification sound or a notification indication on the display. The system server 20 or the smart phone 30 owned by the guardian of the child 1 to be monitored has a value within a predetermined range based on the values statistically collected according to the age, weight, gender, etc. of the child to be monitored. It is stored as the normal pulse rate and body temperature of the child (1), but according to the physical characteristics of the child (1) to be monitored, the value set by the child's doctor, etc. It may be recorded in , or such a value may be transmitted to the system server 20 and stored in the system server 20 . The measuring instrument 10 is provided with a recorder 16, the recorder 16 receives a recording instruction signal transmitted by the smart phone 30 possessed by the guardian of the child to be monitored through the control unit 15 to record the surrounding sounds. After recording, the recorded ambient sound is converted into a digital signal in the calculating unit 13 and transmitted to the system server 20 and the smart phone 30 . When the guardian of the child to be monitored determines that the measured pulse rate or body temperature of the child to be monitored indicates an abnormal symptom in the health condition of the child to be monitored, the measurement device 10 worn by the child to be monitored through the system server 20 to transmit a recording command, and the measuring instrument 10 receives the recording command signal so that the recorder 16 records the surrounding sound, converts the recorded sound into digital data, and transmits it to the smartphone 30 will be.

상기와 같이 구성된 종래 기술은 아동의 체온과 맥박수와 같은 정적인 것은 모니터링할 수 있으나, 동작 상태를 모니터링하여 넘어졌는지, 뛰는지 등과 같은 동적인 상태를 모니터링할 수 없는 문제점이 있는 것이다. 또한, 상기와 같은 종래 기술은 단순한 모니터링으로 에러 가능성이 높을 수 있는 것이다. 따라서 본 발명의 목적은 수집되는 데이터를 기초로 신경망회로를 이용하여 딥러닝을 적용 보안성을 높이기 위한 것이다. 또한, 본발명의 다른 목적은 아동과 관련된 정보를 부모가 요청한 경우 요청한 부모 스마트 단말기로 자동으로 카메라와 연동하여 해당 아동 활동 상황을 실시간으로 전송하여 부모가 안심하고 키드 시설에 아동을 보낼 수 있도록 하기 위한 것이다.The prior art configured as described above can monitor static things such as a child's body temperature and pulse rate, but there is a problem in that it is not possible to monitor a dynamic state such as whether a child falls or jumps by monitoring an operating state. In addition, in the prior art as described above, the possibility of errors may be high through simple monitoring. Therefore, an object of the present invention is to increase the security of applying deep learning using a neural network circuit based on collected data. In addition, another object of the present invention is to transmit the child's activity status in real time by automatically linking the camera to the requested parent's smart terminal when the parent requests information related to the child, so that the parent can send the child to the kid facility with confidence. it is for

상기와 같은 목적을 가진 본 발명 아동 동작인식을 모니터링하는 안전사고 방지 시스템은 키즈 시설을 이용하는 아동의 안면인식 정보와 부모의 스마트 단말기 고유 정보를 매칭시켜 키즈 관리 서버에 등록하는 단계와, 키즈 관리 서버에 연결되어 있는 다수의 카메라가 아동활동을 촬영하고 촬영된 영상 정보와 카메라 고유 정보를 키즈 관리 서버로 전송하는 단계와, 아동 앱을 설치하고 키즈 관리 서버 고유 정보를 저장하고 있는 부모 소유의 스마트 단말기가 아동 앱을 활성화하고, 키즈 관리 서버로 아동의 상태 정보를 요청하는 단계와, 키즈 관리 서버가 다수의 카메라로부터 전송된 영상 정보에서 안면 인식 정보를 추출하는 단계와, 아동 상태정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저정된 안면 인식 정보와 추출된 안면 인식 정보를 비교하는 단계와, 비교 결과 일치하는 경우, 카즈 관리 서버가 해당 안면인식 정보를 전송한 카메라를 선정하는 단계와, 키즈 관리 서버가 선정된 카메라가 전송하는 영상 정보를 아동 상태 정보를 요청한 부모의 스마트 단말기로 전송하여 표시부를 통하여 제공하는 단계를 포함하여 이루어지는 것을 특징으로 하는 것이다.The present invention safety accident prevention system for monitoring children's motion recognition having the above purpose matches the facial recognition information of the children using the kids facility and the parent's smart terminal unique information to register it in the kids management server, and the kids management server A step in which a plurality of cameras connected to a child's activity are filmed, and the captured video information and camera-specific information are transmitted to the kids management server, and a parent-owned smart terminal that installs the child app and stores the child management server-specific information Activates the child app, requests the status information of the child to the kids management server, the kids management server extracts facial recognition information from the image information transmitted from a plurality of cameras, and the parent smart who requested the child status information Comparing the extracted facial recognition information with the pre-set facial recognition information matching the terminal unique information, and if the comparison result matches, selecting the camera that the carz management server transmitted the face recognition information to, Kids management The server transmits the image information transmitted by the selected camera to the smart terminal of the parent who requested the child status information, and provides the image information through the display unit.

상기와 같이 구성된 본 발명 아동 동작인식을 모니터링하는 안전사고 방지 시스템은 키즈 관리 서버에서 부모 스마트 단말기와 해당 아동이 촬영된 카메라를 자동으로 접속하여 해당 아동 활동 상황을 전송하도록 함으로써 해당 아동을 철저하게 관리할 수 있는 효과가 있는 것이다. 또한, 키즈 시설에서는 서버 관리자 외에는 타아동의 생활 상태를 파악할수 없으므로 프라이버시를 보호할 수 있으며, 안면 인식 정보를 기초로 하므로 보안도 확실하게 하여 해킹을 방지할 수 있는 효과가 있는 것이다. The safety accident prevention system for monitoring the child's motion recognition configured as described above automatically connects the parent smart terminal and the camera photographed by the child in the kids management server to transmit the child's activity situation, thereby thoroughly managing the child that can be effective. In addition, the kids facility can protect the privacy of children other than the server administrator because it is not possible to grasp the living conditions of other children, and since it is based on facial recognition information, it is effective to prevent hacking by ensuring security.

도 1은 종래의 아동 상태 감시 시스템 구성도,
도 2는 본 발명 아동 동작을 실시간 모니터링하는 안전사고 방지 방법 제어 흐름도,
도 3은 본 발명 아동 동작을 실시간 모니터링하는 안전사고 방지 시스템 구성도,
도 4는 본 발명에 적용되는 키즈 관리 서버 상세 구성도이다.1 is a configuration diagram of a conventional child condition monitoring system;
2 is a control flow diagram of a safety accident prevention method for real-time monitoring of children's motions according to the present invention;
3 is a configuration diagram of a safety accident prevention system for real-time monitoring of children's movements of the present invention;
4 is a detailed configuration diagram of the kids management server applied to the present invention.

상기와 같은 목적을 가진 본 발명 아동 동작을 실시간 모니터링하는 안전사고 방지 방법 및 이를 이용한 시스템을 도 2 내지 도 4를 기초로 하여 설명하면 다음과 같다.The safety accident prevention method and system using the same for real-time monitoring of children's movements of the present invention having the above object will be described based on FIGS. 2 to 4 as follows.

도 2는 본 발명 아동 동작을 실시간 모니터링하는 안전사고 방지 방법 제어 흐름도이다. 상기도 2에서 본 발명 아동 동작을 실시간 모니터링하는 안전사고 방지 방법은 키즈 시설을 이용하는 아동의 안면인식 정보와 부모의 스마트 단말기 고유 정보를 매칭시켜 키즈 관리 서버에 등록 저장하는 단계(S11)와, 키즈 관리 서버에 연결되어 있는 다수의 카메라가 아동을 촬영하고 촬영된 영상 정보와 카메라 고유 정보를 키즈 관리 서버로 전송하는 단계(S12)와, 아동 앱을 설치하고 키즈 관리 서버 고유 정보를 저장하고 있는 부모 소유의 스마트 단말기가 아동 앱을 활성화하고, 키즈 관리 서버로 아동의 상태 정보를 요청하는 단계(S13)와, 상태 정보 요청을 수신한 키즈 관리 서버가 다수의 카메라로부터 전송된 영상 정보에서 안면 인식 정보를 추출하는 단계(S14)와, 키즈 관리 서버가 아동 상태 정보를 요청한 스마트 단말기 고유 정보에 매칭하는 기저정된 안면 인식 정보와 상기 추출된 안면 인식 정보를 비교하는 단계(S15)와, 비교 결과 일치하는 경우, 키즈 관리 서버가 해당 안면인식 정보를 전송한 카메라를 선정하는 단계(S16)와, 키즈 관리 서버가 선정한 카메라의 영상 정보를 아동 상태 정보를 요청한 부모의 스마트 단말기로 전송하여 표시부를 통하여 제공하도록 하는 단계(S17)와, 키즈 관리 서버가 카메라 고유정보, 카메라 영상정보, 부모의 스마트 단말기 고유정보, 사전 등록한 아동의 안면인식 정보, 카메라가 전송한 영상정보에서 추출한 아동 안면인식 정보, 카메라 선정부에서 선정한 카메라 고유정보와 영상정보, 안면인식 정보 비교부가 비교한 비교 결과정보, 부모의 스마트 단말기로 전송한 카메라 영상 정보를 DB화하여 저장하는 단계(S18)와, 키즈 관리 서버가 상기 DB와 신경망 회로를 기초로 기저장된 안면인식 정보와 추출된 안면인식 정보를 비교하여 판단하는 학습을 하는 단계(S19)를 포함하여 이루어지는 것을 특징으로 하는 것이다.Figure 2 is a control flow chart of the safety accident prevention method for real-time monitoring of the child's behavior of the present invention. The safety accident prevention method for real-time monitoring of children's behavior of the present invention in Figure 2 above is to match the facial recognition information of the children using the kids facility and the parent's smart terminal unique information to register and store in the kids management server (S11), A step (S12) of a plurality of cameras connected to the management server taking a picture of a child and transmitting the captured video information and camera-specific information to the kids management server (S12), and a parent who installs the child app and stores the kids management server-specific information A smart terminal owned by the smart terminal activates the children's app, and requests the state information of the child to the kids management server (S13), and the kids management server that receives the status information request facial recognition information from the image information transmitted from a plurality of cameras Extracting (S14) and comparing the extracted facial recognition information with preset facial recognition information matching the smart terminal unique information that the kids management server requested for child status information (S15), the comparison result matches In this case, the kids management server selects a camera that transmits the facial recognition information (S16), and the kids management server transmits the video information of the selected camera to the smart terminal of the parent who requested the child status information and provides it through the display unit step (S17) and the kids management server camera unique information, camera image information, parent's smart terminal unique information, pre-registered child's face recognition information, child's face recognition information extracted from the image information transmitted by the camera, camera line The government-selected camera specific information and image information, the comparison result information compared by the facial recognition information comparison unit, and the step of storing the camera image information transmitted to the parent's smart terminal into a DB (S18), and the kids management server with the DB It is characterized in that it comprises a step (S19) of learning to compare and determine the facial recognition information stored in advance and the extracted facial recognition information based on the neural network circuit.

도 3은 본 발명 아동 동작을 실시간 모니터링하는 안전사고 방지 시스템 구성도이다. 상기도 3에서 본 발명 아동 동작을 실시간 모니터링하는 안전사고 방지 시스템은 키즈 시설을 이용하는 아동의 안면인식 정보와 해당 부모의 스마트 단말기 고유 정보를 등록받아 저장하고 있는 것으로 다수의 카메라로부터 아동의 활동 영상 정보를 수신하여 저장하고, 보모의 스마트 단말기로부터 자기 아동의 상태 정보를 요청받으며, 아동의 상태 정보를 요청한 부모의 스마트 단말기 고유 정보에 매칭하는 기저장된 안면인식 정보와 다수의 카메라가 전송하는 영상 정보에서 추출한 안면인식 정보를 비교하여 일치하는 경우에 해당 안면 인식 정보를 전송한 카메라 영상정보만을 선택하여 상태 정보를 요청한 부모 스마트 단말기로 전송하는 키즈 관리 서버(100)와, 키즈 시설에 설치되어 아동의 활동 상황을 촬영하고 촬영된 영상 정보를 키즈 관리 서버로 전송하는 다수의 카메라(200)와, 아동 앱이 설치되어 있는 것으로 키즈 관리 서버에 아동의 상태 정보를 요청하고 키즈 관리 서버로부터 해당 아동과 관련된 카메라 영상 정보를 실시간으로 수신하여 표시부로 제공하는 부모 스마트 단말기(300) 및 키즈 관리 서버, 다수의 카메라와 부모 스마트 단말기를 네트워크로 연결하는 인터넷망 또는 무선통신망(400)으로 구성된 것을 특징으로 하는 것이다. 상기에서 키즈 관리 서버(100)는 상기 카메라 고유정보, 부모의 스마트 단말기 고유정보, 사전 등록 저장한 아동의 안면인식 정보, 카메라가 전송한 영상정보에서 추출한 아동 안면인식 정보, 안면인식 정보 비교부가 비교한 비교 결과정보, 카메라 선정부가 선정한 카메라 고유정보와 해당 영상정보, 아동 상태 정보를 요청한 부모의 스마트 단말기로 전송한 카메라 영상 정보를 DB화하여 저장하고 상기 DB를 기초로 신경망회로를 이용하여 학습을 하는 것을 더 포함하여 구성할 수 있는 것이다.3 is a configuration diagram of a safety accident prevention system for real-time monitoring of children's motions according to the present invention. 3, the safety accident prevention system for real-time monitoring of children's behavior of the present invention registers and stores the facial recognition information of children using the kids facility and the smart terminal-specific information of the corresponding parents, and the child's activity image information from a plurality of cameras receives and stores, receives a request for the child's status information from the nanny's smart terminal, and receives the child's status information from pre-stored facial recognition information matching the unique information of the parent's smart terminal and image information transmitted by multiple cameras The kids management server 100 that selects only the camera image information that has transmitted the facial recognition information and transmits the status information to the parent smart terminal requesting the status information if they match by comparing the extracted facial recognition information A plurality of cameras 200 that photograph the situation and transmit the captured video information to the kids management server, and a child app are installed, so that the child's status information is requested from the kids management server and the camera related to the child from the kids management server It is characterized in that it is composed of a parent smart terminal 300 and a kids management server that receives image information in real time and provides it to the display unit, an Internet network or a wireless communication network 400 that connects a plurality of cameras and the parent smart terminal through a network. In the above, kids management server 100 compares the camera-specific information, parent's smart terminal-specific information, pre-registered and stored child's face recognition information, child's face recognition information extracted from the image information transmitted by the camera, and a face recognition information comparison unit The comparison result information, camera specific information selected by the camera selection unit, the corresponding image information, and the camera image information transmitted to the smart terminal of the parent who requested the child status information are converted into a DB and stored, and learning is performed using a neural network circuit based on the DB. It can be configured to include more to do.

도 4는 본 발명에 적용되는 키즈 관리 서버 상세 구성도이다. 상기도 4에서 본 발명에 적용되는 키즈 관리 서버는 카메라 고유정보, 부모 스마트 단말기 고유정보, 사전 등록한 아동의 안면인식 정보, 카메라가 전송한 영상정보에서 추출한 아동 안면인식 정보, 안면인식 정보 비교부가 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 아동 안면인식 정보와 관리서버가 추출된 안면인식 정보를 비교한 비교 결과정보, 카메라 선정부가 선정한 카메라 고유정보와 해당 영상정보, 부모의 스마트 단말기로 전송한 카메라 영상 정보를 저장하고 있는 키즈DB(110)와, 다수의 카메라가 전송하는 영상정보에서 안면인식 정보를 추출하는 안면인식 정보 추출부(120)와, 다수의 카메라와 데이터 송수신을 하기 위한 송수신 모듈 1(130)과, 부모의 스마트 단말기와 송수신하기 위한 송수신 모듈 2(140)와, 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저장된 안면인식 정보와 안면인식 정보에서 추출된 안면 인식 정보를 비교하는 안면인식 정보 비교부(150)와, 안면인식 정보 비교부의 비교 결과에 기초하여 해당 안면 인식 정보를 전송한 카메라를 선택하는 카메라 선정부(160)와, 카메라 고유정보, 카메라 영상정보, 부모 스마트 단말기 고유정보, 부모 스마트 단말기에 매칭하는 아동 안면인식정보, 안면인식 정보 추출부(120)에서 추출된 안면인식정보, 안면인식 정보 비교부(150)가 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저장된 안면인식 정보와 추출된 안면인식 정보를 비교한 비교 결과정보, 카메라 선정부(160)가 선정한 카메라 고유정보와 선정된 카메라가 전송하는 해당 영상정보, 부모 스마트 단말기로 전송한 해당 아동 안면인식 정보를 키즈 DB에 저장하도록하고, 부모의 스마트 단말기로부터 아동의 상태 정보를 송수신 모듈 2(140)를 통하여 수신하고, 다수의 카메라가 송수신 모듈 1(130)을 통하여 전송하는 키즈 활동 영상에서 안면인식 정보 추출부(120)로 하여금 각 아동의 안면인식 정보를 추출하도록 하며, 아동 상태 정보를 요청한 부모의 스마트 단말기로부터 수신된 스마트 단말기 고유 정보에 매칭하는 기저장된 아동 안면 인식 정보와 안면 인식 정보 추출부(120)에서 추출한 안면 인식 정보를 안면인식 정보 비교부(150)로 하여금 비교하도록 하고, 일치하는 경우에 카메라 선정부(160)로 하여금 카메라 고유 정보를 기초로 하여 추출한 안면인식 정보를 전송한 카메라를 선정하도록 하며, 선정된 카메라의 영상 정보를 아동의 상태 정보를 요청한 해당 부모 스마트 단말기로 전송하도록 제어하는 메인 제어부(180)와 필요한 경우 키즈 DB에 저장된 정보를 제공하는 표시부(190)로 구성된 것을 특징으로 하는 것이다.4 is a detailed configuration diagram of the kids management server applied to the present invention. In Figure 4 above, the kids management server applied to the present invention includes camera specific information, parent smart terminal specific information, face recognition information of pre-registered children, child face recognition information extracted from image information transmitted by the camera, face recognition information comparison unit for children The comparison result information comparing the facial recognition information extracted by the management server with the child's face recognition information matching the parent smart terminal's unique information that requested the status information, the camera's unique information and the corresponding image information selected by the camera selection unit, and transmitted to the parent's smart terminal Kids DB 110 that stores one camera image information, a face recognition information extraction unit 120 that extracts face recognition information from image information transmitted by a plurality of cameras, and transmission and reception for data transmission and reception with a plurality of cameras Module 1 130, transmission/reception module 2 140 for transmitting and receiving with the parent's smart terminal, and facial recognition extracted from pre-stored face recognition information matching the parent smart terminal's unique information requesting child status information and face recognition information A face recognition information comparison unit 150 that compares information, a camera selection unit 160 that selects a camera that has transmitted the corresponding face recognition information based on the comparison result of the face recognition information comparison unit, camera specific information, and camera image information , parent smart terminal unique information, child face recognition information matching the parent smart terminal, facial recognition information extracted from the facial recognition information extraction unit 120, the parent smart terminal for which the face recognition information comparison unit 150 requested the child status information Comparison result information comparing the extracted facial recognition information with the pre-stored facial recognition information matching the unique information, the camera specific information selected by the camera selector 160 and the corresponding image information transmitted by the selected camera, transmitted to the parent smart terminal Kids who store the child's face recognition information in the kids DB, receive the child's status information from the parent's smart terminal through the transmission/reception module 2 (140), and a plurality of cameras transmit it through the transmission/reception module 1 (130) Let the facial recognition information extraction unit 120 extract the face recognition information of each child from the activity image Face recognition information comparison unit 150 with pre-stored child face recognition information matching the smart terminal unique information received from the parent's smart terminal requesting the child status information and the face recognition information extracted from the face recognition information extraction unit 120 ) to compare, and if they match, the camera selection unit 160 selects a camera that has transmitted the extracted facial recognition information based on the camera unique information, and sets the image information of the selected camera to the child's state information It is characterized in that it consists of a main control unit 180 that controls to transmit the request to the corresponding parent smart terminal and a display unit 190 that provides information stored in the Kids DB if necessary.

100 : 키즈 관리 서버, 110 : 키즈 DB,
120 : 안면인식정보 추출부, 130 : 송수신 모듈 1,
140 : 송수신 모듈 2, 150 : 안면인식 정보 비교부,
160 : 카메라 선정부, 180 : 메인 제어부,
190 : 표시부, 200 : 카메라,
300 : 부모 스마트 단말기100: Kids management server, 110: Kids DB,
120: facial recognition information extraction unit, 130: transmit/receive module 1,
140: transceiver module 2, 150: face recognition information comparison unit,
160: camera selection unit, 180: main control unit,
190: display unit, 200: camera,
300: parent smart terminal

Claims (3)

키즈의 프라이버시를 보호하고 키즈 시설을 이용하는 아동들에게 발생하는 사고를 예방하기 위하여 부모가 원하는 때에 실시간으로 아동의 활동 상황을 실시간 모니터링하여 제공하는 안전사고 방지 방법에 있어서,
상기 키즈의 프라이버시를 보호하면서 부모가 원하는 때에 실시간으로 아동의 활동 상황을 실시간 모니터링하여 제공하는 안전사고 방지 방법은,
키즈 시설을 이용하는 아동의 안면인식 정보와 부모의 스마트 단말기 고유 정보를 매칭시켜 키즈 관리 서버에 등록 저장하는 단계(S11)와;
카메라 고유정보, 부모 스마트 단말기 고유정보, 사전 등록한 아동의 안면인식 정보, 카메라가 전송한 영상정보에서 추출한 아동 안면인식 정보, 안면인식 정보 비교부가 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 아동 안면인식 정보와 관리서버가 추출된 안면인식 정보를 비교한 비교 결과정보, 카메라 선정부가 선정한 카메라 고유정보와 해당 영상정보, 부모의 스마트 단말기로 전송한 카메라 영상 정보를 저장하고 있는 키즈DB(110)와, 다수의 카메라가 전송하는 영상정보에서 안면인식 정보를 추출하는 안면인식 정보 추출부(120)와, 다수의 카메라와 데이터 송수신을 하기 위한 송수신 모듈 1(130)과, 부모의 스마트 단말기와 송수신하기 위한 송수신 모듈 2(140)와, 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저장된 안면인식 정보와 안면인식 정보에서 추출된 안면 인식 정보를 비교하는 안면인식 정보 비교부(150)와, 안면인식 정보 비교부의 비교 결과에 기초하여 해당 안면 인식 정보를 전송한 카메라를 선택하는 카메라 선정부(160)와, 카메라 고유정보, 카메라 영상정보, 부모 스마트 단말기 고유정보, 부모 스마트 단말기에 매칭하는 아동 안면인식정보, 안면인식 정보 추출부(120)에서 추출된 안면인식정보, 안면인식 정보 비교부(150)가 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저장된 안면인식 정보와 추출된 안면인식 정보를 비교한 비교 결과정보, 카메라 선정부(160)가 선정한 카메라 고유정보와 선정된 카메라가 전송하는 해당 영상정보, 부모 스마트 단말기로 전송한 해당 아동 안면인식 정보를 키즈 DB에 저장하도록하고, 부모의 스마트 단말기로부터 아동의 상태 정보를 송수신 모듈 2(140)를 통하여 수신하고, 다수의 카메라가 송수신 모듈 1(130)을 통하여 전송하는 키즈 활동 영상에서 안면인식 정보 추출부(120)로 하여금 각 아동의 안면인식 정보를 추출하도록 하며, 아동 상태 정보를 요청한 부모의 스마트 단말기로부터 수신된 스마트 단말기 고유 정보에 매칭하는 기저장된 아동 안면 인식 정보와 안면 인식 정보 추출부(120)에서 추출한 안면 인식 정보를 안면인식 정보 비교부(150)로 하여금 비교하도록 하고, 일치하는 경우에 카메라 선정부(160)로 하여금 카메라 고유 정보를 기초로 하여 추출한 안면인식 정보를 전송한 카메라를 선정하도록 하며, 선정된 카메라의 영상 정보를 아동의 상태 정보를 요청한 해당 부모 스마트 단말기로 전송하도록 제어하는 메인 제어부(180)와 필요한 경우 키즈 DB에 저장된 정보를 제공하는 표시부(190)로 구성된 키즈 관리 서버에 연결되어 있는 다수의 카메라가 아동활동을 촬영하고 촬영된 영상 정보와 카메라 고유 정보를 키즈 관리 서버로 전송하는 단계(S12)와;
아동 앱을 설치하고 키즈 관리 서버 고유 정보를 저장하고 있는 부모 소유의 스마트 단말기가 아동 앱을 활성화하고, 키즈 관리 서버로 아동의 상태 정보를 요청하는 단계(S13)와;
상태 정보 요청을 수신한 키즈 관리 서버가 다수의 카메라로부터 전송된 영상 정보에서 안면 인식 정보를 추출하는 단계(S14)와;
키즈 관리 서버가 아동 상태 정보를 요청한 스마트 단말기 고유 정보에 매칭하는 기저정된 안면 인식 정보와 상기 추출된 안면 인식 정보를 비교하는 단계(S15)와;
비교 결과 일치하는 경우, 키즈 관리 서버가 해당 안면인식 정보를 전송한 카메라를 선정하는 단계(S16)와;
키즈 관리 서버가 선정한 해당 카메라의 영상 정보만을 아동 상태 정보를 요청한 부모의 스마트 단말기로 전송하여 표시부를 통하여 제공하도록 하는 단계(S17)와;
키즈 관리 서버가 카메라 고유정보, 카메라 영상정보, 부모의 스마트 단말기 고유정보, 사전 등록한 아동의 안면인식 정보, 카메라가 전송한 영상정보에서 추출한 아동 안면인식 정보, 카메라 선정부에서 선정한 카메라 고유정보와 영상정보, 안면인식 정보 비교부가 비교한 비교 결과정보, 부모의 스마트 단말기로 전송한 카메라 영상 정보를 DB화하여 저장하는 단계(S18);
및 키즈 관리 서버가 상기 DB와 신경망 회로를 기초로 기저장된 안면인식 정보와 추출된 안면인식 정보를 비교하여 판단하는 학습을 하는 단계(S19)를 포함하여 이루어지는 것을 특징으로 하는 키즈의 프라이버시를 보호하면서 부모가 원하는 때에 실시간으로 아동의 활동 상황을 실시간 모니터링하여 제공하는 안전사고 방지 방법.
In a safety accident prevention method that provides real-time monitoring of children's activities at a time parents want in order to protect the privacy of kids and prevent accidents that occur to children using kids facilities,
A safety accident prevention method that provides real-time monitoring of the child's activity situation in real time when parents want, while protecting the privacy of the kids,
Matching the facial recognition information of the child using the kids facility and the parent's smart terminal unique information to register and store in the kids management server (S11) and;
A child who matches the unique information of the parent smart terminal that requested the child status information by the camera-specific information, parent smart terminal-specific information, pre-registered child's face recognition information, child's face recognition information extracted from the image information transmitted by the camera, and the facial recognition information comparison unit Kids DB 110 that stores comparison result information comparing facial recognition information and facial recognition information extracted by the management server, camera specific information and corresponding image information selected by the camera selection unit, and camera image information transmitted to the parent's smart terminal And, a facial recognition information extraction unit 120 for extracting facial recognition information from image information transmitted by a plurality of cameras, a transmission/reception module 1 130 for data transmission/reception with a plurality of cameras, and transmission/reception with a parent's smart terminal The transmission/reception module 2 140 for doing this, and the face recognition information comparison unit 150 that compares the facial recognition information extracted from the facial recognition information with the pre-stored face recognition information matching the parent smart terminal specific information that has requested the child status information , A camera selection unit 160 that selects a camera that has transmitted the corresponding face recognition information based on the comparison result of the face recognition information comparison unit, camera specific information, camera image information, parent smart terminal specific information, matching the parent smart terminal Child face recognition information, facial recognition information extracted from the facial recognition information extraction unit 120, facial recognition information comparison unit 150 is extracted with pre-stored facial recognition information matching the parent smart terminal specific information that requested the child status information The comparison result information comparing the face recognition information, the camera specific information selected by the camera selection unit 160, the image information transmitted by the selected camera, and the child face recognition information transmitted to the parent smart terminal are stored in the Kids DB , receives the child's status information from the parent's smart terminal through the transmission/reception module 2 (140), and allows the facial recognition information extraction unit 120 from the kids activity image transmitted by a plurality of cameras through the transmission/reception module 1 (130) Each child's facial recognition information is extracted, and the parent's smart Let the facial recognition information comparison unit 150 compare the pre-stored child face recognition information matching the smart terminal unique information received from the terminal and the facial recognition information extracted by the facial recognition information extraction unit 120, and if they match Controlling the camera selection unit 160 to select a camera that has transmitted the extracted facial recognition information based on the camera unique information, and to transmit the image information of the selected camera to the corresponding parent smart terminal requesting the child's status information A plurality of cameras connected to the kids management server consisting of the main control unit 180 and the display unit 190 that provides information stored in the kids DB if necessary take children's activities, and the captured video information and camera-specific information are sent to the kids management server Transmitting to (S12) and;
A parent-owned smart terminal that installs a children's app and stores unique information of the kids management server, activates the children's app, and requests the status information of the child from the kids management server (S13);
Step (S14) and extracting facial recognition information from the image information transmitted from a plurality of cameras by the kids management server receiving the status information request;
Comparing the extracted facial recognition information with pre-set facial recognition information matching the smart terminal unique information that the kids management server requested for child status information (S15);
If the comparison result matches, the kids management server selecting a camera that transmits the face recognition information (S16) and;
Step (S17) of transmitting only the video information of the corresponding camera selected by the kids management server to the smart terminal of the parent who requested the child status information and providing it through the display unit;
Kids management server unique camera information, camera image information, parent's smart terminal unique information, pre-registered child's face recognition information, child's face recognition information extracted from the image information transmitted by the camera, camera specific information and images selected by the camera selection unit information, the comparison result information compared by the face recognition information comparison unit, and the camera image information transmitted to the parent's smart terminal into a DB and storing the information (S18);
And while protecting the privacy of kids, characterized in that the kids management server comprises a step (S19) of learning to compare and determine the facial recognition information and the extracted facial recognition information based on the DB and the neural network circuit. A safety accident prevention method that provides real-time monitoring of children's activities in real time when parents want.
 삭제delete 키즈의 프라이버시를 보호하고 키즈 시설을 이용하는 아동들에게 발생하는 사고를 예방하기 위하여 부모가 원하는 때에 실시간으로 아동의 활동 상황을 실시간 모니터링하여 제공하는 안전사고 방지 시스템에 있어서,
상기 키즈의 프리이버시를 보호하면서 부모가 원하는 때에 실시간으로 아동의 활동 상황을 실시간 모니터링하여 제공하는 안전사고 방지 시스템은,
키즈 시설을 이용하는 아동의 안면인식 정보와 해당 부모의 스마트 단말기 고유 정보를 등록받아 저장하고 있으며, 다수의 카메라로부터 아동의 활동 영상 정보를 수신하여 저장하고, 보모의 스마트 단말기로부터 자기 아동의 상태 정보를 요청받으며, 아동의 상태 정보를 요청한 부모의 스마트 단말기 고유 정보에 매칭하는 기저장된 안면인식 정보와 다수의 카메라가 전송하는 영상 정보에서 추출한 안면인식 정보를 비교하여 일치하는 경우에 해당 안면 인식 정보를 전송한 카메라 영상정보만을 선택하여 상태 정보를 요청한 부모 스마트 단말기로 전송하는 것으로 카메라 고유정보, 부모 스마트 단말기 고유정보, 사전 등록한 아동의 안면인식 정보, 카메라가 전송한 영상정보에서 추출한 아동 안면인식 정보, 안면인식 정보 비교부가 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 아동 안면인식 정보와 관리서버가 추출된 안면인식 정보를 비교한 비교 결과정보, 카메라 선정부가 선정한 카메라 고유정보와 해당 영상정보, 부모의 스마트 단말기로 전송한 카메라 영상 정보를 저장하고 있는 키즈DB(110)와, 다수의 카메라가 전송하는 영상정보에서 안면인식 정보를 추출하는 안면인식 정보 추출부(120)와, 다수의 카메라와 데이터 송수신을 하기 위한 송수신 모듈 1(130)과, 부모의 스마트 단말기와 송수신하기 위한 송수신 모듈 2(140)와, 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저장된 안면인식 정보와 안면인식 정보에서 추출된 안면 인식 정보를 비교하는 안면인식 정보 비교부(150)와, 안면인식 정보 비교부의 비교 결과에 기초하여 해당 안면 인식 정보를 전송한 카메라를 선택하는 카메라 선정부(160)와, 카메라 고유정보, 카메라 영상정보, 부모 스마트 단말기 고유정보, 부모 스마트 단말기에 매칭하는 아동 안면인식정보, 안면인식 정보 추출부(120)에서 추출된 안면인식정보, 안면인식 정보 비교부(150)가 아동 상태 정보를 요청한 부모 스마트 단말기 고유정보에 매칭하는 기저장된 안면인식 정보와 추출된 안면인식 정보를 비교한 비교 결과정보, 카메라 선정부(160)가 선정한 카메라 고유정보와 선정된 카메라가 전송하는 해당 영상정보, 부모 스마트 단말기로 전송한 해당 아동 안면인식 정보를 키즈 DB에 저장하도록하고, 부모의 스마트 단말기로부터 아동의 상태 정보를 송수신 모듈 2(140)를 통하여 수신하고, 다수의 카메라가 송수신 모듈 1(130)을 통하여 전송하는 키즈 활동 영상에서 안면인식 정보 추출부(120)로 하여금 각 아동의 안면인식 정보를 추출하도록 하며, 아동 상태 정보를 요청한 부모의 스마트 단말기로부터 수신된 스마트 단말기 고유 정보에 매칭하는 기저장된 아동 안면 인식 정보와 안면 인식 정보 추출부(120)에서 추출한 안면 인식 정보를 안면인식 정보 비교부(150)로 하여금 비교하도록 하고, 일치하는 경우에 카메라 선정부(160)로 하여금 카메라 고유 정보를 기초로 하여 추출한 안면인식 정보를 전송한 카메라를 선정하도록 하며, 선정된 카메라의 영상 정보를 아동의 상태 정보를 요청한 해당 부모 스마트 단말기로 전송하도록 제어하는 메인 제어부(180)와 필요한 경우 키즈 DB에 저장된 정보를 제공하는 표시부(190)로 구성된 키즈 관리 서버(100)와;
키즈 시설에 설치되어 아동의 활동 상황을 촬영하고 촬영된 영상 정보를 키즈 관리 서버로 전송하는 다수의 카메라(200)와;
아동 앱이 설치되어 있는 것으로 키즈 관리 서버에 아동의 상태 정보를 요청하고 키즈 관리 서버로부터 해당 아동과 관련된 카메라 영상 정보를 실시간으로 수신하여 표시부로 제공하는 부모 스마트 단말기(300);
및 키즈 관리 서버, 다수의 카메라와 부모 스마트 단말기를 네트워크로 연결하는 인터넷망 또는 무선통신망(400)으로 구성된 것을 특징으로 하는 키즈의 프리이버시를 보호하면서 부모가 원하는 때에 실시간으로 아동의 활동 상황을 실시간 모니터링하여 제공하는 안전사고 방지 시스템.





In a safety accident prevention system that provides real-time monitoring of children's activities when parents want to protect the privacy of kids and prevent accidents that occur to children using kids facilities,
A safety accident prevention system that provides real-time monitoring of the child's activity situation in real time when parents want, while protecting the children's privacy,
It registers and stores the facial recognition information of children using the kids facility and the smart terminal-specific information of the parent, receives and stores the child's activity image information from multiple cameras, and collects the child's status information from the nanny's smart terminal. When requested, facial recognition information extracted from image information transmitted by multiple cameras is compared with pre-stored facial recognition information that matches the unique information of the parent's smart terminal who requested the child's status information, and the corresponding face recognition information is transmitted Camera-specific information, parent smart terminal-specific information, pre-registered child's face recognition information, child's face recognition information extracted from the image information transmitted by the camera, facial Comparison result information comparing the face recognition information extracted by the management server with the child face recognition information matching the parent smart terminal specific information that the recognition information comparison unit requested the child status information, the camera specific information and the image information selected by the camera selection unit, and the parent Kids DB 110 that stores the camera image information transmitted to the smart terminal of, and a facial recognition information extraction unit 120 that extracts facial recognition information from image information transmitted by a plurality of cameras, and a plurality of cameras and data Transceiver module 1 130 for transmitting/receiving, transmitting/receiving module 2 140 for transmitting/receiving with the parent's smart terminal, pre-stored face recognition information and facial recognition information matching the parent smart terminal's unique information requesting child status information A face recognition information comparison unit 150 that compares the facial recognition information extracted in Information, camera image information, parent smart terminal unique information, child face recognition information matching the parent smart terminal, face recognition information extracted from the face recognition information extraction unit 120, and the face recognition information comparison unit 150 child status information matching the unique information of the parent smart device that requested Comparison result information comparing the pre-stored facial recognition information and the extracted facial recognition information, camera specific information selected by the camera selector 160 and the corresponding image information transmitted by the selected camera, and the child's face recognition transmitted to the parent smart terminal To store the information in Kids DB, receive the state information of the child from the parent's smart terminal through the transmission/reception module 2 (140), and facial recognition in the kids activity image transmitted by a plurality of cameras through the transmission/reception module 1 (130) Let the information extraction unit 120 extract the facial recognition information of each child, and the pre-stored child face recognition information and facial recognition information extraction unit matching the smart terminal-specific information received from the smart terminal of the parent who requested the child status information The facial recognition information comparison unit 150 compares the facial recognition information extracted in 120, and when they match, the camera selector 160 sends the extracted facial recognition information based on camera-specific information. Kids consisting of a main control unit 180 that controls to transmit the selected camera's image information to the smart terminal of the parent who requested the child's status information and a display unit 190 that provides information stored in the Kids DB if necessary a management server 100;
A plurality of cameras 200 installed in the kids facility to photograph the activity situation of children and transmit the captured image information to the kids management server;
Parent smart terminal 300 that requests the status information of the child from the kids management server as the children's app is installed, and receives camera image information related to the child from the kids management server in real time and provides it to the display unit;
And kids management server, protecting the privacy of kids, characterized in that it consists of an Internet network or wireless communication network 400 that connects a number of cameras and parent smart terminals as a network, while protecting the children's activity situation in real time when parents want A safety accident prevention system that provides real-time monitoring.
KR1020200049015A 2020-04-23 2020-04-23 Safety Accident Preventing Method of Children by Using Camera and System thereof KR102394509B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200049015A KR102394509B1 (en) 2020-04-23 2020-04-23 Safety Accident Preventing Method of Children by Using Camera and System thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200049015A KR102394509B1 (en) 2020-04-23 2020-04-23 Safety Accident Preventing Method of Children by Using Camera and System thereof

Publications (2)

Publication Number Publication Date
KR20210130918A KR20210130918A (en) 2021-11-02
KR102394509B1 true KR102394509B1 (en) 2022-06-07

Family

ID=78476207

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200049015A KR102394509B1 (en) 2020-04-23 2020-04-23 Safety Accident Preventing Method of Children by Using Camera and System thereof

Country Status (1)

Country Link
KR (1) KR102394509B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240000310A (en) 2022-06-23 2024-01-02 조인서 Child Status Monitoring Systems for Special Educators

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101617342B1 (en) * 2015-06-26 2016-05-02 배상윤 Application for caring children and method for operating the same

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190010984A (en) * 2017-07-24 2019-02-01 디투이모션 주식회사 A module for detecting abnormal activity and system including the same
KR20190113367A (en) * 2018-03-28 2019-10-08 최필관 Allday childcare system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101617342B1 (en) * 2015-06-26 2016-05-02 배상윤 Application for caring children and method for operating the same

Also Published As

Publication number Publication date
KR20210130918A (en) 2021-11-02

Similar Documents

Publication Publication Date Title
KR101932379B1 (en) Disease risk detection system for infant and child facilities and disease risk detection method using the same
KR101990803B1 (en) PROTECTION SYSTEM FOR VULNERABLE CLASSES USING Internet Of Things AND METHOD THEREFOR
KR101633713B1 (en) Kids care system and the method thereof
CN110197732B (en) Remote health monitoring system, method and equipment based on multiple sensors
KR102165513B1 (en) System for managing patient based on information of biometrics
KR102394509B1 (en) Safety Accident Preventing Method of Children by Using Camera and System thereof
KR101617342B1 (en) Application for caring children and method for operating the same
CN113205661A (en) Anti-cheating implementation method and system, intelligent wearable device and storage medium
KR101675529B1 (en) system for monitoring abnormal situation using biometric data and
KR101822091B1 (en) system for deciding and watching abnormal situation using biometric data and image data
JP6989932B2 (en) Emergency contact device and emergency contact system using this
KR101825134B1 (en) System for crime prevention of drone using emotion recognition device
JP7236626B2 (en) Reporting mobile terminal, reporting system and reporting method
KR20190058618A (en) Alarm system
KR101766438B1 (en) A mobile device for detecting abnormal activity and system including the same for supporting management of members in a group
TWI656502B (en) Method, apparatus and system for portable safety care
KR20160136631A (en) A surveillance system
JP6777470B2 (en) Action recording system, terminal device and action recording method
KR100675780B1 (en) A remote monitering system equipped with private life protection function and method thereof
JP2019096276A (en) Watching system
JP6860813B2 (en) Information processing systems, mobile terminals, server devices, information processing methods and programs
KR100751030B1 (en) System for protecting privacy and method therefor
KR20210066453A (en) Data acquisition and situation recognition system based on smart clothes station for those who have physical weakness
KR20190010984A (en) A module for detecting abnormal activity and system including the same
KR102294978B1 (en) Systems and methods for protecting against danger and monitoring groups

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right