KR102251931B1 - System for user security using home communication device and method therefor - Google Patents

System for user security using home communication device and method therefor Download PDF

Info

Publication number
KR102251931B1
KR102251931B1 KR1020190093943A KR20190093943A KR102251931B1 KR 102251931 B1 KR102251931 B1 KR 102251931B1 KR 1020190093943 A KR1020190093943 A KR 1020190093943A KR 20190093943 A KR20190093943 A KR 20190093943A KR 102251931 B1 KR102251931 B1 KR 102251931B1
Authority
KR
South Korea
Prior art keywords
intrusion detection
communication device
user
home communication
person
Prior art date
Application number
KR1020190093943A
Other languages
Korean (ko)
Other versions
KR20210015304A (en
Inventor
이남일
Original Assignee
(주)엔티플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)엔티플러스 filed Critical (주)엔티플러스
Priority to KR1020190093943A priority Critical patent/KR102251931B1/en
Publication of KR20210015304A publication Critical patent/KR20210015304A/en
Application granted granted Critical
Publication of KR102251931B1 publication Critical patent/KR102251931B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • G06K9/00221—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/02—Mechanical actuation
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/14—Central alarm receiver or annunciator arrangements
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B7/00—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
    • G08B7/06—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/283—Processing of data at an internetworking point of a home automation network
    • H04L12/2834—Switching of information between an external network and a home network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information

Abstract

본 발명은 가정용 통신 장치를 이용한 사용자 보안 시스템 및 방법에 관한 것이다. 본 사용자 보안 시스템은, 사용자 댁의 창문 또는 현관문에 설치되어 외부인의 침입을 감지하여 침입 감지 신호를 발생시키는 침입 감지 장치와, 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면 원격의 위치 정보 제공 서버에 접속하여 미리 저장된 가족/지인을 포함한 출입 가능자의 이동 단말의 GPS 위치 정보를 요청 및 수신하고, 상기 출입 가능자의 이동 단말이 모두 사용자의 집 외부에 위치하면, 위험 상황으로 판단하고 위험 상황 메시지를 형성하여 원격의 보안 센터에 전송하는 가정용 통신 장치와, 네트워크를 통해 상기 가정용 통신 장치와 연결되는 보안 센터와, 상기 네트워크를 통한 상기 가정용 통신 장치의 요청에 따라 적어도 하나의 이동 단말의 위치 정보를 제공하는 위치 정보 제공 서버를 포함하는 것을 특징으로 한다. 이에 의하여, 사용자가 외출한 상태일 때 또는 취침을 취하고 있을때 또는 집에서 활동하고 있을 때, 집으로 침입한 사람이 출입가능자인지 확인하여 출입가능자가 아니면 도둑이나 강도로 판단하여 위험 상황을 즉각 외부의 사용자 이동 단말에 알리거나 직접 외부의 보안 센터에 알려서 위기 상황에 대처할 수 있다. The present invention relates to a user security system and method using a home communication device. The user security system includes an intrusion detection device installed on a window or front door of a user's house to detect an intrusion of an outsider to generate an intrusion detection signal, and a remote location information providing server upon receiving an intrusion detection signal from the intrusion detection device. Access to and request and receive GPS location information of the mobile terminal of the accessible person including the family/acquaintances stored in advance, and if all mobile terminals of the accessible person are located outside the user's house, it is determined as a dangerous situation and a dangerous situation message is displayed. Provides a home communication device formed and transmitted to a remote security center, a security center connected to the home communication device through a network, and location information of at least one mobile terminal at the request of the home communication device through the network It characterized in that it comprises a location information providing server. Accordingly, when the user is out, sleeping, or active at home, it is checked whether the person who has intruded into the house is an accessible person, and if not, it is judged as a thief or a robber, and the dangerous situation is immediately detected. It is possible to cope with a crisis situation by notifying the user's mobile terminal or directly to an external security center.

Description

가정용 통신 장치를 이용한 사용자 보안 시스템 및 그 방법{SYSTEM FOR USER SECURITY USING HOME COMMUNICATION DEVICE AND METHOD THEREFOR}A user security system and its method using a home communication device {SYSTEM FOR USER SECURITY USING HOME COMMUNICATION DEVICE AND METHOD THEREFOR}

본 발명은 가정용 통신 장치를 이용한 사용자 보안 시스템 및 방법에 관한 것으로서, 보다 상세하게는 인공지능 스피커를 포함한 가정용 통신 장치를 이용한 사용자 보안 시스템 및 그 방법에 관한 것이다. The present invention relates to a user security system and method using a home communication device, and more particularly, to a user security system and method using a home communication device including an artificial intelligence speaker.

AI 비서 기능을 하는 스피커가 한국공개특허 제10-2015-0047803호에 공개되어 있다. 이러한 종래의 기술은 사람과 교감할 수 있는 인공지능 오디오 장치에 관한 것으로, 보다 상세하게는, 사람의 존재를 판단하여 현재 시간과 주위 환경에 맞는 인사말을 건네고, 음악재생 여부를 물어보고 음악재생 요청이 있을 경우 현재시간, 주위 환경 및 분위기에 맞는 음악을 선곡하여 들려주고 특정 음악의 청취 시 청취 음악의 성향에 맞는 조명을 조정하여 분위기를 만들어 줄 수 있게 한다.A speaker that functions as an AI secretary is disclosed in Korean Patent Laid-Open No. 10-2015-0047803. Such a conventional technology relates to an artificial intelligence audio device capable of communicating with a person, and more specifically, by judging the existence of a person, sending a greeting appropriate to the current time and surroundings, asking whether to play music, and requesting music playback. In this case, music suitable for the current time, surrounding environment and atmosphere is selected and played, and when listening to specific music, the lighting suitable for the tendency of the listening music can be adjusted to create an atmosphere.

또한, 근래, 인공지능 분야, 특히 자연어 이해 분야의 기술 발전에 따라, 전통적인 기계 중심의 명령 입출력 방식에 따른 기계 조작에서 벗어나, 사용자로 하여금, 보다 사람 친화적인 방식, 예컨대 음성 및/또는 텍스트 형태의 자연어를 매개로 한 대화 방식으로 기계를 조작하고 기계로부터 원하는 서비스를 얻을 수 있도록 하는 대화형 AI 에이전트 시스템의 개발 및 활용이 점차 늘어나고 있다. 그에 따라, 온라인 상담 센터나 온라인 쇼핑몰 등을 비롯한 다양한 분야에서, 사용자는 음성 및/또는 텍스트 형태의 자연어 대화를 통해, 대화형 AI 에이전트 시스템에게 원하는 서비스를 요청하고 그로부터 원하는 결과를 얻을 수 있게 되었다.In addition, in recent years, with the advancement of technology in the field of artificial intelligence, especially in the field of natural language understanding, it is possible to move away from machine operation according to the traditional machine-centered command input/output method, allowing users to use a more human-friendly method such as voice and/or text format. The development and use of an interactive AI agent system that enables users to operate machines in a conversational manner through natural language and obtain desired services from machines is gradually increasing. Accordingly, in various fields, including online counseling centers and online shopping malls, users can request a desired service from an interactive AI agent system through natural language conversation in the form of voice and/or text and obtain a desired result therefrom.

대화형 AI 에이전트 시스템은, 각 사용자에 관한 정보(예컨대, 사용자의 개인 정보, 이력 정보 등)를 수집 및/또는 관리하고, 수집 및 관리되는 각 사용자에 관한 정보에 기초하여 각 사용자에 맞는 적합한 서비스를 제공하고 있다. The interactive AI agent system collects and/or manages information about each user (e.g., user's personal information, history information, etc.), and provides an appropriate service for each user based on the collected and managed information about each user. Has been provided.

한편, 단독주택이나 아파트 등 공공주택에서 장시간 외출이나 휴가로 집을 비워 놓아 집안에 아무도 없는 경우, 택배 회사직원이나 전기검침원을 가장한 절도범이 문밖의 초인종을 눌러 집안에 사람이 있는지 여부를 확인한 후 인기척이 없다고 판단되면 창문이나 현관문을 통하여 집안으로 침입하여 도둑질하는 경우가 빈번하게 발생하고 있다. On the other hand, if no one is in the house due to a long time out or vacation in public housing such as a detached house or apartment, a courier company employee or a thief pretending to be an electric meter reader presses the doorbell outside the door to check whether there are people in the house. If it is determined that there is no such thing, there are frequent cases of stealing by breaking into the house through a window or front door.

이와 같이 집안에 아무도 없는 상태에서 절도행위가 진행되면 집주인이 집으로 돌아온 후에야 범행이 이루어진 상태를 확인할 수 있기 때문에 예방과 경찰에의 신고 등 즉각적인 대처가 불가능하다는 문제가 있다.In this way, if the theft is in progress while no one is in the house, there is a problem that immediate countermeasures such as prevention and reporting to the police are impossible because the status of the crime can be confirmed only after the landlord returns home.

또한, 맞벌이 부부의 집이나, 혼자 거주하는 여성 직장인의 집은 오전부터 저녁까지 오랜시간 동안 비어있는 경우가 많아 도둑이 침입할 수 있고, 밤에 취침하는 동안에 도둑이나 강도가 침입하는 경우 및 집에 사람이 있는 상태에서 강도가 드는 경우와 같은 다양한 위험한 상황이 발생할 수 있다.In addition, the homes of double-income couples or female office workers living alone are often vacant for a long time from morning to evening, and thieves can invade. A variety of dangerous situations can arise, such as a robbery in the presence of a person.

따라서, 창문이나 현관문을 통해 침입자가 있는 경우, 상술한 AI스피커를 이용하여, 위급 상황에 즉각적으로 대처할 수 있도록 AI 스피커가 자동으로 외부 경찰서나 구조센터에 알릴 수 있는 방법이 필요하다.Therefore, when there is an intruder through a window or a front door, there is a need for a method in which the AI speaker can automatically notify an external police station or rescue center so that the above-described AI speaker can be used to immediately respond to an emergency situation.

따라서, 본 발명은 상기한 문제점을 해결하기 위해 창안된 것으로, 사용자가외출하여 집이 비워져 있을 때 출입가능자인지 확인하여 출입가능자가 아니면 도둑이나 강도로 판단하여 즉각 외부의 사용자 이동 단말에 알리거나 직접 외부의 보안센터에 알릴 수 있는 가정용 통신 장치를 이용한 사용자 보안 시스템 및 그 방법을 제공하는 것이다. Therefore, the present invention was devised to solve the above problem, and when the user goes out and the house is vacant, it is determined that the user is allowed to enter, and if not, it is determined as a thief or a robber, and immediately notified to the external user's mobile terminal or directly It is to provide a user security system and method using a home communication device that can be notified to an external security center.

또한, 본 발명은 사용자가 집안에서 취침을 취하고 있을 때 출입가능자인지 확인하여 출입가능자가 아니면 즉각 위험 상황을 외부 보안 센터에 알릴 수 있는 가정용 통신 장치를 이용한 사용자 보안 시스템 및 그 방법을 제공하는 것이다.In addition, the present invention provides a user security system and method using a home communication device capable of immediately notifying an external security center of a dangerous situation by checking whether a user is an accessible person while sleeping in the house, and if the user is not allowed to enter.

상기의 목적을 달성하기 위한 본 발명의 제1양태에 따른 구성은, 가정용 통신 장치를 이용한 사용자 보안 시스템으로서, 사용자 댁의 창문 또는 현관문에 설치되어 외부인의 침입을 감지하여 침입 감지 신호를 발생시키는 침입 감지 장치와, 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면 원격의 위치 정보 제공 서버에 접속하여 미리 저장된 가족/지인을 포함한 출입 가능자의 이동 단말의 GPS 위치 정보를 요청 및 수신하고, 상기 출입 가능자의 이동 단말이 모두 사용자의 집 외부에 위치하면, 위험 상황으로 판단하고 위험 상황 메시지를 형성하여 원격의 보안 센터에 전송하는 가정용 통신 장치와, 네트워크를 통해 상기 가정용 통신 장치와 연결되어 위험 상황 메시지를 전송한 가정용 통신 장치가 위치하는 주소를 파악하여 경찰 출동을 요청하는 보안 센터와, 상기 네트워크를 통한 상기 가정용 통신 장치의 요청에 따라 적어도 하나의 이동 단말의 위치 정보를 제공하는 위치 정보 제공 서버를 포함하는 것을 특징으로 한다.The configuration according to the first aspect of the present invention for achieving the above object is a user security system using a home communication device, which is installed on a window or front door of a user's house to detect an intrusion of an outsider to generate an intrusion detection signal. Upon receiving an intrusion detection device and an intrusion detection signal from the intrusion detection device, it accesses a remote location information providing server to request and receive GPS location information of a mobile terminal of a person who can access, including a previously stored family/acquaintance, and When all of the mobile terminals of the user are located outside the user's home, a home communication device that determines it as a dangerous situation and forms a risk situation message and transmits it to a remote security center, and the home communication device is connected to the home communication device through a network to receive a risk situation message. A security center that requests police dispatch by identifying the address where the transmitted home communication device is located, and a location information providing server that provides location information of at least one mobile terminal according to the request of the home communication device through the network. Characterized in that.

여기서, 상기 침입 감지 장치는 사용자 댁의 창문 또는 현관문에 설치되어 외부인의 침입을 감지하는 침입 감지 센서, 상기 침입 감지 센서의 침입 감지 신호를 전송하는 근거리부 통신부를 포함하고, 상기 가정용 통신 장치는 AI 스피커를 포함하고, 상기 AI 스피커는, 인체감지 센서, 마이크, 키입력부, 저장부, 상기 침입 감지 장치와 통신을 위한 근거리 통신부, 원격의 보안 센터와 통신을 위한 무선 통신부 및, 이들 장치들을 제어하는 제어부를 포함하는 것이 바람직하다. 그리고, 상기 저장부에는 사용자가 등록한 출입가능자의 이동 단말의 전화번호와, 출입가능자의 얼굴 사진 이미지와, 지도 데이터베이스와, 상기 마이크로 입력되는 음성을 인식하는 음성 인식 처리 모듈, 상기 출입가능자의 이동 단말의 위치를 요청 및 수신하여 처리하는 위치 추적 처리 모듈이 저장되는 것이 바람직하다.Here, the intrusion detection device includes an intrusion detection sensor installed at a window or front door of a user's house to detect an intrusion of an outsider, and a short-range communication unit transmitting an intrusion detection signal of the intrusion detection sensor, and the home communication device Including an AI speaker, wherein the AI speaker includes a human body detection sensor, a microphone, a key input unit, a storage unit, a short-range communication unit for communication with the intrusion detection device, a wireless communication unit for communication with a remote security center, and controls these devices. It is preferable to include a control unit. In the storage unit, the phone number of the mobile terminal of the accessible person registered by the user, the face photo image of the accessible person, a map database, a voice recognition processing module for recognizing the voice input to the microphone, and the mobile terminal of the accessible person It is preferable that a location tracking processing module that requests and receives and processes the location of is stored.

또한, 상기 제어부는 침입 감지 센서의 감지신호에 기초하여 침입으로 판단되면, 상기 위치추적 처리 모듈을 동작시켜, 상기 저장부에 저장된 출입가능자 이동 단말의 현재 위치에 대해 상기 위치 정보 제공 서버에 요청 및 수신하여 상기 저장부에 저장하고, 상기 위치 정보 제공 서버로부터 전송된 위치 정보에 기초하여 출입가능자 이동 단말의 위치가 모두 사용자 집 외부인 경우 침입으로 판단하고, 위험상황 메시지를 형성하여 원격의 보안센터로 전송하는 것이 바람직하다.In addition, when it is determined that the intrusion is intrusion based on the detection signal of the intrusion detection sensor, the control unit operates the location tracking module to request the location information providing server for the current location of the mobile terminal of the accessible person stored in the storage unit, and It is received and stored in the storage unit, and based on the location information transmitted from the location information providing server, if the location of the accessible mobile terminal is all outside the user's house, it is judged as an intrusion, and a dangerous situation message is formed to a remote security center. It is desirable to transmit.

상기 가정용 통신 장치는 카메라부와 인체 감지 센서를 더 포함하고, 상기 저장부는 상기 카메라부가 촬영한 촬영 이미지에서 얼굴을 추출하여 얼굴을 인식하는 얼굴 인식 처리 모듈을 더 포함하며, 상기 가정용 통신 장치는 외출 모드 또는 취침 모드로 설정되며, 상기 외출 모드시 상기 제어부는 상기 침입 감지 장치로부터 침입 감지 신호를 수신하고 상기 가정용 통신 장치의 주변에서 상기 인체 감지 센서가 인체를 감지하면 상기 카메라부를 동작시켜서 인체를 촬영하여 얼굴 이미지를 추출하여 상기 저장부에 저장하고, 추출한 얼굴 이미지를 미리 저장된 가족/지인을 포함한 출입가능자의 이미지와 비교하며, 출입가능자가 아닌 경우 위험 상황 메시지를 형성하여 원격의 보안센터에 전송하는 것이 바람직하다. 이에 의해, 원격의 보안센터가 가정에 침입자가 있는 것을 신속하게 알게 되어 대처할 수 있게 된다. The home communication device further includes a camera unit and a human body detection sensor, and the storage unit further includes a face recognition processing module for recognizing a face by extracting a face from a photographed image captured by the camera unit, and the home communication device goes out Mode or sleep mode is set, and in the going out mode, the control unit receives an intrusion detection signal from the intrusion detection device, and when the human body detection sensor detects a human body in the vicinity of the home communication device, the camera unit operates to capture a human body. Then, the face image is extracted and stored in the storage unit, and the extracted face image is compared with the image of the person who can access, including the family/acquaintances previously stored, and if the person is not allowed to enter, a dangerous situation message is formed and transmitted to a remote security center. It is desirable. Thereby, the remote security center can quickly find out that there is an intruder in the home and respond to it.

상기 가정용 통신 장치는 상기 외출 모드시 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면, 추출한 침입자 얼굴 이미지를 포함한 위험 상황 메시지를 형성하여 사용자 이동 단말에 전송하는 것이 바람직하다. 이에 의해, 사용자 이동 단말이 위험 상황 메시지를 통해, 침입자가 있는 것을 파악하여 경찰 등 보안센터에 연락하여 신속하게 대처할 수 있게 된다. When the home communication device receives an intrusion detection signal from the intrusion detection device in the out-of-way mode, it is preferable to form a dangerous situation message including the extracted face image of the intruder and transmit it to the user mobile terminal. Thereby, the user's mobile terminal can detect that there is an intruder through the danger situation message and contact a security center such as the police to quickly respond.

상기 침입 감지 센서는, 일정 거리 이내로 접근시 침입 감지 신호를 발생하는 근접 센서, 일정 이상의 중량을 감지시 침입 감지 신호를 발생하는 중량 센서, 적외선 센서 중 어느 하나를 포함하는 것이 바람직하다. The intrusion detection sensor preferably includes any one of a proximity sensor that generates an intrusion detection signal when approaching within a certain distance, a weight sensor that generates an intrusion detection signal when a certain or more weight is detected, and an infrared sensor.

상기 가정용 통신 장치와 네트워크를 통해 연결되는 보안 서비스 제공 서버를 더 포함하며, 상기 보안 서비스 제공 서버는 가족/지인을 포함한 출입 가능자의 이동 단말 번호 또는 출입 가능자의 사진 이미지를 서버에 등록하기 위한 웹서비스 또는 앱서비스를 제공하고; 상기 보안 서비스 제공 서버는, 웹서비스 또는 앱서비스를 통해 등록한 출입 가능자의 이동 단말 번호와 출입 가능자의 사진 이미지를 상기 가정용 통신 장치에 전송하여 저장하게 하고, 상기 가정용 통신 장치가 상기 카메라부로 촬영한 영상 데이터와, 침입 감지 발생시 촬영한 영상 데이터에서 추출한 얼굴 이미지를 전송받아 저장하는 것이 바람직하다. Further comprising a security service providing server connected to the home communication device through a network, wherein the security service providing server is a web service for registering the mobile terminal number of the accessible person including family/acquaintances or the photo image of the accessible person to the server Or providing an app service; The security service providing server transmits and stores the mobile terminal number of the accessible person and the photo image of the accessible person registered through a web service or an app service to the home communication device, and the image taken by the home communication device with the camera unit. It is preferable to receive and store data and a face image extracted from image data captured when an intrusion is detected.

상기의 목적을 달성하기 위한 본 발명의 제2양태에 따른 구성은, 가정용 통신 장치를 이용한 사용자 보안 방법으로서, 사용자 댁의 창문 또는 현관문에 설치된 침입 감지 장치가 외부인의 침입을 감지하면 침입 감지 신호를 전송하는 제1단계; 가정용 통신 장치가 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면, 위치 정보 제공 서버에 접속하여 미리 저장된 가족/지인을 포함한 출입 가능자의 이동 단말의 위치 정보를 요청 및 수신하는 제2단계; 상기 가정용 통신 장치가, 상기 출입 가능자 이동 단말의 위치가 모두 사용자의 집 외부에 위치하면, 위험 상황으로 판단하고 위험 상황 메시지를 형성하여 보안 센터에 전송하는 제3단계를 포함하는 것을 특징으로 한다.The configuration according to the second aspect of the present invention for achieving the above object is a user security method using a home communication device, when an intrusion detection device installed in a window or front door of a user's house detects an intrusion of an outsider, an intrusion detection signal A first step of transmitting; A second step of, when the home communication device receives the intrusion detection signal from the intrusion detection device, accessing a location information providing server and requesting and receiving location information of a mobile terminal of a person who can access, including a family/acquaintance previously stored; And a third step of determining, by the home communication device, as a dangerous situation, forming a dangerous situation message, and transmitting it to a security center, if all the locations of the accessible mobile terminals are located outside the user's house.

여기서, 상기 제2단계는 상기 가정용 통신 장치가 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면, 상기 가정용 통신 장치의 주변에서 인체 감지 센서를 통해 인체를 감지하는 단계, 인체를 감지하면, 상기 가정용 통신 장치가 카메라부를 동작시켜서 인체를 촬영하여 저장하는 단계를 포함하는 것이 바람직하다. Here, the second step is, when the home communication device receives an intrusion detection signal from the intrusion detection device, detecting a human body through a human body detection sensor in the vicinity of the home communication device, and when detecting a human body, the home communication It is preferable that the apparatus includes a step of photographing and storing the human body by operating the camera unit.

또한, 상기 촬영한 인체 이미지에서 얼굴 이미지를 추출하는 단계; 추출한 얼굴 이미지를 미리 저장된 가족/지인을 포함한 출입가능자의 이미지와 비교하여 출입가능자인지 판단하는 단계; 및 상기 판단결과 출입가능자가 아닌 경우 추출한 얼굴 이미지를 포함한 위험 상황 메시지를 형성하여 원격의 보안센터에 전송하는 단계를 더 포함하는 것이 바람직하다. 이에 의해, 원격의 보안센터가 가정에 침입자가 있는 것을 신속하게 알게 되어 대처할 수 있게 된다. In addition, extracting a face image from the photographed human body image; Comparing the extracted face image with an image of an accessible person including a family member/acquaintance previously stored to determine whether the person is permitted to enter; And forming a risk situation message including the extracted face image when the person is not allowed to enter as a result of the determination, and transmitting the message to a remote security center. Thereby, the remote security center can quickly find out that there is an intruder in the home and respond to it.

또한, 상기 가정용 통신 장치가 상기 촬영한 인체의 이미지에서 얼굴 이미지를 추출하는 단계; 상기 가정용 통신 장치가 추출한 얼굴 이미지를 포함한 위험 상황 메시지를 형성하여 사용자 이동 단말에 전송하는 단계를 더 포함하는 것이 바람직하다. 이에 의해, 사용자 이동 단말이 위험 상황 메시지를 통해, 침입자가 있는 것을 파악하여 경찰 등 보안센터에 연락하여 신속하게 대처할 수 있게 된다.Further, the step of extracting a face image from the photographed human body image by the home communication device; It is preferable to further include the step of forming a danger situation message including the face image extracted by the home communication device and transmitting it to the user mobile terminal. Thereby, the user's mobile terminal can detect that there is an intruder through the danger situation message and contact a security center such as the police to quickly respond.

상기의 구성으로 이루어진 가정용 통신 장치를 이용한 사용자 보안 시스템 및 방법에 따르면, 사용자가 외출한 상태일 때 집으로 침입한 사람이 출입가능자인지 확인하여 출입가능자가 아니면 도둑이나 강도로 판단하여 즉각 외부의 사용자 이동 단말에 알리거나 직접 외부의 보안 센터에 알려서 위기 상황에 대처할 수 있다.According to the user security system and method using a home communication device composed of the above configuration, when the user is out of the house, it checks whether the person who intrudes into the house is an accessible person, and if not, the outside user is immediately determined as a thief or a robber. It is possible to cope with a crisis situation by notifying the mobile terminal or by notifying the external security center directly.

또한, 사용자가 집안에서 취침을 취하고 있을 때, 집으로 침입한 사람이 출입가능자인지 확인하여 출입가능자가 아니면 즉각 위험 상황을 외부 보안 센터에 알려서 위기 상황에 대처할 수 있다.In addition, when the user is sleeping in the house, it is possible to cope with the crisis situation by checking whether the person who has intruded into the house is an accessible person, and if not, immediately informs an external security center of a dangerous situation.

도 1은 본 발명의 일실시예에 따른 가정용 통신 장치로서 AI 스피커를 이용한 사용자 보안 시스템의 구성도,
도 2는 도 1의 AI 스피커 및 침입 감지 장치의 내부 구성도,
도 3은 본 발명의 제1실시예에 따른 AI 스피커를 이용한 사용자 보안 방법의 순서도,
도 4는 본 발명의 제2실시예에 따른 AI 스피커를 이용한 사용자 보안 방법의 순서도,
도 5는 본 발명의 제3실시예에 따른 AI 스피커를 이용한 사용자 보안 방법의 순서도이다.1 is a configuration diagram of a user security system using an AI speaker as a home communication device according to an embodiment of the present invention,
2 is an internal configuration diagram of the AI speaker and intrusion detection device of FIG. 1;
3 is a flow chart of a user security method using an AI speaker according to the first embodiment of the present invention;
4 is a flow chart of a user security method using an AI speaker according to a second embodiment of the present invention;
5 is a flowchart of a user security method using an AI speaker according to a third embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 통해 설명될 것이다. 그러나 본 발명은 여기에서 설명되는 실시예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 단지, 본 실시예들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여 제공되는 것이다.Advantages and features of the present invention, and a method of achieving the same will be described through embodiments to be described later in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments described herein and may be embodied in other forms. However, these embodiments are provided to explain in detail enough to be able to easily implement the technical idea of the present invention to those of ordinary skill in the art to which the present invention pertains.

도면들에 있어서, 본 발명의 실시예들은 도시된 특정 형태로 제한되는 것이 아니며 명확성을 기하기 위하여 과장된 것이다. 또한, 명세서 전체에 걸쳐서 동일한 참조번호로 표시된 부분들은 동일한 구성요소를 나타낸다. 본 명세서에서 "및/또는"이란 표현은 전후에 나열된 구성요소들 중 적어도 하나를 포함하는 의미로 사용된다. 또한, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 또한, 명세서에서 사용되는 "포함한다" 또는 "포함하는"으로 언급된 구성요소, 단계, 동작 및 소자는 하나 이상의 다른 구성요소, 단계, 동작, 소자 및 장치의 존재 또는 추가를 의미한다.In the drawings, embodiments of the present invention are not limited to the specific form shown, but are exaggerated for clarity. In addition, parts denoted by the same reference numerals throughout the specification represent the same components. In the present specification, the expression "and/or" is used as a meaning including at least one of the elements listed before and after. In addition, the singular form includes the plural form unless specifically stated in the text. In addition, components, steps, actions, and elements referred to as “comprising” or “comprising” as used in the specification mean the presence or addition of one or more other components, steps, actions, elements and devices.

본 발명은 거주자가 집을 비운 외출 중일 때 또는 거주자가 취침중일 때 도둑 등의 침입자가 들어온 것을 가정용 통신 장치인 AI스피커가 감지하여 위험 상황을 보안 센터에 알리는 것이다.In the present invention, an AI speaker, a home communication device, detects that an intruder such as a thief has entered when the resident is out of the house or when the resident is sleeping, and notifies the security center of a dangerous situation.

이를 위해, 본 발명에 따른 가정용 통신 장치로서 AI 스피커는 외출 모드와 취침 모드로 설정된다. 외출 모드 또는 취침 모드시에 AI 스피커는 창문 또는 현관문에 설치된 침입 감지 센서로부터 침입 감지 신호가 수신되면, 출입가능자인지 확인하여 출입가능자가 아니면 위험 상황 메시지를 형성하여 외부의 보안 센터 또는 사용자 이동 단말에 전송한다. To this end, the AI speaker as a home communication device according to the present invention is set to an outing mode and a sleeping mode. When the AI speaker receives an intrusion detection signal from an intrusion detection sensor installed in a window or front door during the going out mode or sleeping mode, it checks whether the person is allowed to enter, and if not, forms a dangerous situation message to the outside security center or the user's mobile terminal. Transfer to.

이하에서, 본 발명의 바람직한 실시 예가 첨부된 도면들을 참조하여 본 발명을 구체적으로 설명한다. 본 발명을 설명함에 있어서 관련된 공지기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In describing the present invention, when it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the subject matter of the present invention, a detailed description thereof will be omitted.

도 1은 본 발명의 일실시예에 따른 가정용 통신 장치인 AI스피커를 이용한 사용자 보안 시스템의 구성도이다. 도 1에 보인 바와 같이, AI스피커를 이용한 사용자 보안 시스템은 창문 또는 현관문에 설치되어 외부에서의 침입을 감지하여 침입 감지 신호를 발생시키는 침입 감지 장치(10), 침입 감지 장치(10)와 근거리 통신하는 AI스피커(20), AI스피커(20)가 네트워크(30)를 통해 접속하는 보안서비스 제공 서버(50), AI스피커(20)의 요청에 따라 이동 단말의 위치정보를 제공하는 위치 정보 제공 서버로서 LBS위치 서버(60), AI스피커(20)가 네트워크(30)를 통해 송신하는 위험상황 메시지를 수신하는 사용자 이동 단말(40), AI스피커(30)가 네트워크(30)를 통해 송신하는 위험상황 메시지를 수신하여 보안 또는 위험 상황에 조치를 취하는 보안 센터(70)를 포함한다.1 is a block diagram of a user security system using an AI speaker, which is a home communication device according to an embodiment of the present invention. As shown in Fig. 1, a user security system using an AI speaker is installed at a window or a front door to detect an intrusion from the outside and generate an intrusion detection signal. Provides location information that provides location information of the mobile terminal at the request of the AI speaker 20 that communicates, the security service providing server 50 that the AI speaker 20 accesses through the network 30, and the AI speaker 20 As a server, the LBS location server 60, the user mobile terminal 40 receiving the risk situation message transmitted by the AI speaker 20 through the network 30, the AI speaker 30 transmitted through the network 30 It includes a security center 70 that receives a risk situation message and takes action on a security or risk situation.

AI 스피커(20)는 창문 또는 현관문에 설치된 침입 감지 장치(10)로부터 침입 감지 신호가 수신되면, 출입가능자의 이동 단말의 LBS위치 정보를 이용하여, 출입가능자인지 여부를 확인하여 출입가능자가 아니면 위험 상황 메시지를 형성하여 외부의 보안 센터(70) 또는 사용자 이동 단말(40)에 전송한다. When the AI speaker 20 receives an intrusion detection signal from the intrusion detection device 10 installed on the window or the front door, it uses the LBS location information of the mobile terminal of the person who can enter to check whether the person is allowed to enter. A dangerous situation message is formed and transmitted to the external security center 70 or the user mobile terminal 40.

AI 스피커(20)는 외출 모드 또는 취침 모드로 설정될 수 있다. AI 스피커(20)는 외출 모드시 침입 감지 장치로부터 침입 감지 신호를 수신하고 AI 스피커의 주변에서 인체를 감지하면 인체를 촬영하여 얼굴 이미지를 추출하고, 추출한 얼굴 이미지를 미리 저장된 가족/지인을 포함한 출입가능자의 이미지와 비교하며, 출입가능자가 아닌 경우, 추출한 얼굴 이미지가 포함된 위험 상황 메시지를 형성하여 외부의 보안 센터(70) 또는 사용자 이동 단말(40)에 전송한다. The AI speaker 20 may be set to an outing mode or a sleeping mode. The AI speaker 20 receives an intrusion detection signal from the intrusion detection device in the outing mode, and when a human body is detected in the vicinity of the AI speaker, the human body is photographed to extract a face image, and the extracted face image is pre-stored, including family/acquaintances. The image of the possible person is compared, and if the person is not allowed to enter, a danger situation message including the extracted face image is formed and transmitted to the external security center 70 or the user mobile terminal 40.

AI 스피커(20)는 주변의 인체를 촬영하여 추출한 인체의 얼굴 이미지가 마스크 등으로 가려져 얼굴을 확인할 수 없는 경우, 출입가능자의 이동 단말의 LBS위치 정보를 이용하여, 출입가능자인지 여부를 확인하여 출입가능자가 아니면 위험 상황 메시지를 형성하여 외부의 보안 센터(70) 또는 사용자 이동 단말(40)에 전송할 수도 있다.When the face image of the human body extracted by photographing the surrounding human body is covered with a mask, etc., and the face cannot be identified, the AI speaker 20 uses the LBS location information of the mobile terminal of the accessible person to check whether the person is allowed to enter. If not possible, a risk situation message may be formed and transmitted to the external security center 70 or the user mobile terminal 40.

여기서, 위험 상황 메시지에는 AI스피커가 위치한 집의 식별정보(예를 들어, 집주소), AI 스피커(20)가 추출한 얼굴 이미지 등이 포함될 수 있다.Here, the danger situation message may include identification information (eg, home address) of a house in which the AI speaker is located, a face image extracted by the AI speaker 20, and the like.

사용자 이동 단말(40)과, 보안 센터(70)는 위험 상황 메시지를 수신하면, 경찰서 등에 요청하여 대처한다.When the user mobile terminal 40 and the security center 70 receive the dangerous situation message, the user mobile terminal 40 and the security center 70 respond to the request by requesting a police station.

한편, 사용자 이동 단말(40)은 AI스피커(20)로부터 전송된 위험 상황 메시지에 포함된 침입자의 얼굴 이미지를 보고 사용자가 직접 확인한 결과에 따라 침입자가 아닌 경우, 사용자의 입력에 의해 위험 상황 해제 메시지를 형성하여, AI 스피커(20)로 전송할 수도 있다. On the other hand, the user mobile terminal 40 sees the face image of the intruder included in the danger situation message transmitted from the AI speaker 20, and according to the result of the user's direct confirmation, if the user is not an intruder, the danger situation cancellation message is received by the user's input. By forming, it may be transmitted to the AI speaker 20.

도 2는 도 1의 AI스피커(20)와 침입 감지 장치(10)의 내부 구성도이다. 도 2에 보인 바와 같이, 침입 감지 장치(10)는 창문 또는 현관문에 설치되어 침입 여부를 감지하는 침입 감지 센서(11)와, 침입 감지 센서(11)가 감지한 감지신호를 무선 통신을 통해 AI스피커로 전송하는 근거리 통신부(12)를 포함한다. 2 is an internal configuration diagram of the AI speaker 20 and the intrusion detection device 10 of FIG. 1. As shown in Figure 2, the intrusion detection device 10 is installed in a window or front door to detect an intrusion detection sensor 11, and a detection signal detected by the intrusion detection sensor 11 through wireless communication. It includes a short-range communication unit 12 for transmitting to the AI speaker.

침입 감지 센서(11)는, 근접 센서, 중량 센서, 적외선 센서를 포함할 수 있다. The intrusion detection sensor 11 may include a proximity sensor, a weight sensor, and an infrared sensor.

근접 센서는, 창틀(또는 현관문 틀)에 설치되며, 창문(또는 현관문)이 배치되는 영역으로 외부 침입자가 일정 거리 이내로 접근하면, 침입 감지 신호를 발생시킨다. The proximity sensor is installed on a window frame (or front door frame), and generates an intrusion detection signal when an external intruder approaches within a certain distance to an area where a window (or front door) is disposed.

중량 센서는 창틀(또는 현관문 틀)에서 일정 이상의 중량을 감지하면, 침입 감지 신호를 발생시킨다. When the weight sensor detects a certain weight or more in the window frame (or the front door frame), it generates an intrusion detection signal.

적외선 센서는, 창문이 배치되는 영역과, 창틀(또는 현관문 틀)에서 인체에 대한 적외선 신호를 일정 이상의 시간 동안 감지되면, 침입 감지 신호를 발생시킨다.The infrared sensor generates an intrusion detection signal when an infrared signal for a human body is sensed for a predetermined time or longer in an area in which a window is disposed and a window frame (or a front door frame).

또한, 침입 감지 센서(11)는, 창문(또는 현관문)의 이동에 따른 자성변화를 감지하여 창문(또는 현관문)의 움직임을 감지할 수 있다. 이를 위해, 닫힘 및 열림상태의 전환에 따라 자성변화를 일으키는 적어도 하나의 자석이 부착되는 창문(또는 현관문), 창문틀(또는 현관문틀)에 자석과 대응되도록 배치되어 자성변화를 감지하도록 형성되는 센서부를 포함할 수 있다.In addition, the intrusion detection sensor 11 may detect the movement of the window (or front door) by detecting a magnetic change according to the movement of the window (or front door). To this end, it is disposed so as to correspond with the magnet to a window (or front door), a window frame (or front door frame) to which at least one magnet that causes a magnetic change in accordance with the switching of the closed and open state to be attached, and is formed to detect the magnetic change. It may include a sensor unit.

AI 스피커(20)는 도 2에 보인 바와 같이, 인체를 감지하는 인체 감지 센서(21), 카메라부(22), 마이크(23), 키입력부(24), 스피커부(25), 침입 감지 장치(10)로부터 전송된 감지신호를 수신하는 근거리 통신부(26), 원격의 서버와 통신을 위한 유무선통신부(27), 저장부(28), 본 발명에 따른 기능을 수행하기 위해 각 구성요소의 동작을 제어하는 제어부(29)를 포함한다. As shown in FIG. 2, the AI speaker 20 includes a human body detection sensor 21, a camera unit 22, a microphone 23, a key input unit 24, a speaker unit 25, and an intrusion detection device for detecting a human body. (10) The short-range communication unit 26 for receiving the detection signal transmitted from the remote, wired/wireless communication unit 27 for communication with a remote server, the storage unit 28, the operation of each component to perform the function according to the present invention It includes a control unit 29 for controlling.

인체 감지 센서(21)는 인체를 감지하는 적외선 센서 또는 열센서로 구현될 수 있다. 적외선 센서는 초전체 센서(Pyroelectric Sensor)로 구현될 수 있다. 초전체 센서는 적외선을 방출하는 사람과 동물을 센싱하며, 움직임이 발생하는 순간 출력을 발생한다.The human body detection sensor 21 may be implemented as an infrared sensor or a thermal sensor that detects a human body. The infrared sensor may be implemented as a pyroelectric sensor. The pyroelectric sensor senses humans and animals that emit infrared rays, and generates output as soon as movement occurs.

한편, 인체 감지 센서(21)는 카메라부(22)로도 구현될 수 있다. 카메라부(22)는 광신호를 비디오 신호를 변환하여 영상을 촬영하는 것으로, 카메라 모듈로 구성된다. 카메라 모듈은 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리하여 제어부(29)로 전송한다. 제어부(29)는 전송된 화상 프레임을 저장부에 미리 저장된 사람 유무 감지를 위한 기준영상, 예컨대, 배경화면과 비교하여 상이한 부분을 추출한 다음 상이한 부분을 미리 저장된 인물영상과 비교하는 것 등과 같은 공지의 방법으로 사람의 유무를 판단할 수 있다.Meanwhile, the human body detection sensor 21 may also be implemented as the camera unit 22. The camera unit 22 captures an image by converting an optical signal to a video signal, and is configured as a camera module. The camera module processes an image frame such as a still image or a moving picture obtained by the image sensor and transmits it to the control unit 29. The control unit 29 compares the transmitted image frame with a reference image for detecting the presence or absence of a person previously stored in the storage unit, for example, a background image, extracts a different part, and then compares the different part with a pre-stored person image. You can judge the presence or absence of a person in a way

키입력부(24)는 일반적인 AI 기능을 수행시키기 위한 기능 버튼(미도시)과, 본 발명에 따라, 출입가능자의 전화번호를 입력하거나 스피커 음량을 조절하기 위한 조작 버튼(미도시)을 포함한다. 또한, 키입력부(24)는 사용자가 외출할 때 선택하는 외출 모드, 수면에 취할 때 선택하는 취침 모드로 설정하기 위한 설정 버튼(미도시)을 포함한다.The key input unit 24 includes a function button (not shown) for performing a general AI function, and an operation button (not shown) for inputting a phone number of a person with access or adjusting a speaker volume according to the present invention. In addition, the key input unit 24 includes a setting button (not shown) for setting the going out mode to be selected when the user goes out and a sleep mode to be selected when sleeping.

저장부(28)에는 본 발명에 따라, 사용자의 가족 또는 지인을 포함한 출입가능자의 이동단말의 전화번호가 저장된다. 또한, 저장부(28)에는 사용자의 가족 또는 지인을 포함한 출입가능자의 얼굴 이미지와, 카메라부(22)가 작동되어 촬영한 이미지가 저장될 수 있다. According to the present invention, the storage unit 28 stores the phone number of the mobile terminal of the accessible person including the user's family or acquaintance. In addition, the storage unit 28 may store an image of a face of an accessible person, including a family member or acquaintance of the user, and an image photographed by the camera unit 22 being operated.

또한, 본 발명의 부가적인 기능으로서, 저장부(28)에는 외부에 위치한 사용자 이동 단말이 보안 서버에 등록한 택배 배송 정보가 AI스피커로 전송되어 제어부에 의해 저장될 수 있다. In addition, as an additional function of the present invention, in the storage unit 28, courier delivery information registered in a security server by a user mobile terminal located outside may be transmitted to the AI speaker and stored by the control unit.

저장부(28)는, 제어부(29)의 처리 및 제어를 위한 프로그램을 저장할 수도 있고, 입/출력되는 데이터들(예컨대, 정지 영상, 동영상 등)을 저장할 수도 있다. 저장부에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있다. The storage unit 28 may store a program for processing and control of the controller 29 or may store input/output data (eg, still images, moving pictures, etc.). Programs stored in the storage unit can be classified into a plurality of modules according to their functions.

본 발명에 따라, 저장부(28)에는 상술한 제어부(29)의 제어기능을 수행하기 위해, 음성 인식 처리 모듈(28a), 얼굴 인식 처리 모듈(28b), 출입가능자 이동 단말의 위치를 추적하는 위치추적 처리 모듈(28c)이 저장된다. According to the present invention, the storage unit 28 includes a voice recognition processing module 28a, a face recognition processing module 28b, and tracking the location of the mobile terminal of the accessible person in order to perform the control function of the control unit 29 described above. The location tracking module 28c is stored.

위치추적 처리 모듈(28c)은 도 1의 원격의 LBS 서버(60)에 접속하여, 저장부(28)에 미리 저장된 출입 가능자(가족 또는 지인)의 이동 단말 번호에 기초하여, 이동 단말의 위치 추적을 요청하여 위치 정보를 제공받는 처리를 수행한다. 이 위치 정보는 외출 모드 또는 취침 모드시에 집안에서 인체가 감지된 경우, 집안에 침입한 사람이 출입가능자인지 침입자인지 판단하기 위한 정보로 이용된다.The location tracking module 28c accesses the remote LBS server 60 of FIG. 1 and tracks the location of the mobile terminal based on the mobile terminal number of a person who can access (family or acquaintance) previously stored in the storage unit 28. Requests for and receives location information. This location information is used as information for determining whether a person who has entered the house is an accessible person or an intruder when a human body is detected in the house during the going out mode or the sleeping mode.

음성 인식 처리 모듈(28a)은 마이크(23)로 입력되는 사용자 음성을 입력받아 인식하는 기능을 한다. 도 2의 사용자의 음성을 인식하여 각종 기능을 수행하기 위한 음성 인식 처리 모듈은, 일반적인 AI스피커 기술분야에서 일반적인 공지 기술이므로 상세한 설명은 생략한다. The voice recognition processing module 28a functions to receive and recognize a user's voice input through the microphone 23. The voice recognition processing module for performing various functions by recognizing a user's voice of FIG. 2 is a general known technique in the field of general AI speaker technology, and thus a detailed description thereof will be omitted.

따라서, 본 발명의 부가적인 기능으로서, 음성 인식 처리 모듈(28a)은 응급 상황 또는 구조 요청을 표시하는 음성을 인식하도록 할 수 있다. 또한, 구조요청을 표시하는 음성을 인식하여 외부의 구조 센터에 위험 상황을 알리는 기술은 공지 기술이므로 상세한 설명은 생략한다. Accordingly, as an additional function of the present invention, the speech recognition processing module 28a may recognize speech indicating an emergency situation or a rescue request. In addition, since a technique for notifying a danger situation to an external rescue center by recognizing a voice indicating a rescue request is a known technique, a detailed description will be omitted.

얼굴 인식 처리 모듈(28b)은 카메라부(22)에서 촬영된 영상 이미지에서 얼굴 부분을 인식하여 추출한다. The face recognition processing module 28b recognizes and extracts a face part from an image image captured by the camera unit 22.

저장부(28)는 예를 들면, 내장 메모리 또는 외장 메모리를 포함할 수 있다. 내장 메모리는, 예를 들면, 휘발성 메모리(예: DRAM(dynamic RAM), SRAM(static RAM), 또는 SDRAM(synchronous dynamic RAM) 등), 비휘발성 메모리(non-volatile Memory)(예: OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, 플래시 메모리(예: NAND flash 또는 NOR flash 등), 하드 드라이브, 또는 솔리드 스테이트 드라이브(solid state drive(SSD)) 중 적어도 하나를 포함할 수 있다.The storage unit 28 may include, for example, an internal memory or an external memory. The internal memory includes, for example, volatile memory (e.g., dynamic RAM (DRAM), static RAM (SRAM), synchronous dynamic RAM (SDRAM), etc.)), non-volatile memory (e.g., OTPROM (one time programmable ROM), programmable ROM (PROM), erasable and programmable ROM (EPROM), electrically erasable and programmable ROM (EEPROM), mask ROM, flash ROM, flash memory (such as NAND flash or NOR flash), hard drive, Alternatively, it may include at least one of a solid state drive (SSD).

외장 메모리는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital), MMC(multi-media card) 또는 메모리 스틱(memory stick) 등을 포함할 수 있다. 외장 메모리는 다양한 인터페이스를 통하여 AI스피커와 기능적으로 및/또는 물리적으로 연결될 수 있다.External memory is a flash drive, for example, compact flash (CF), secure digital (SD), micro secure digital (Micro-SD), mini secure digital (Mini-SD), extreme digital (xD), It may include a multi-media card (MMC) or a memory stick. The external memory can be functionally and/or physically connected to the AI speaker through various interfaces.

AI 스피커(20)가 취침 모드로 또는 외출 모드로 설정되어 있는 경우, 제어부(29)는 침입 감지 센서(11)의 감지신호에 기초하여 침입으로 판단되면, 저장부(28)의 위치추적 처리 모듈(28c)을 동작시켜, 저장부(28)에 저장된 출입가능자 이동 단말을 위치추적하여 저장부(28)에 임시 저장하고, 출입가능자 이동 단말의 위치가 모두 사용자 집이 아닌 경우 침입으로 판단하고, 위험상황 메시지를 형성하여 유무선통신부(27)를 통해 원격의 보안 센터(70)로 전송한다.When the AI speaker 20 is set to the sleeping mode or the going out mode, the control unit 29 determines the intrusion based on the detection signal of the intrusion detection sensor 11, the location tracking processing module of the storage unit 28 By operating (28c), the location of the mobile terminal of the accessible person stored in the storage unit 28 is tracked and temporarily stored in the storage unit 28, and if all locations of the mobile terminal of the accessible person are not the user's home, it is determined as an intrusion, A dangerous situation message is formed and transmitted to the remote security center 70 through the wired/wireless communication unit 27.

또한, 다른 실시예에 따라, AI 스피커(20)가 외출 모드로 설정되어 있는 경우, 제어부(29)는 침입 감지 장치(10)로부터 침입 감지 신호를 수신하고, 인체감지 센서(21)가 인체를 감지하면, 카메라부(22)를 동작시켜 침입자를 촬영하게 한다. 그리고, 제어부(29)는 저장부(28)의 얼굴 인식 처리 모듈(28b)을 동작시켜 카메라부(22)가 촬영한 영상에서 침입자의 얼굴을 추출하고 저장부(28)에 미리 저장된 출입가능자의 사진 이미지와 비교한다. 그리고, 제어부(29)는 비교결과 인식한 얼굴이 출입가능자가 아닌 것으로 판단되면 위험상황 메시지를 형성하여 유무선통신부(27)를 통해 원격의 보안 센터(70)로 전송하거나 외부에 있는 집주인의 이동 단말(40)로 전송하여 알린다. In addition, according to another embodiment, when the AI speaker 20 is set to the going out mode, the controller 29 receives an intrusion detection signal from the intrusion detection device 10, and the human body detection sensor 21 Upon detection, the camera unit 22 is operated to photograph an intruder. In addition, the control unit 29 operates the face recognition processing module 28b of the storage unit 28 to extract the face of the intruder from the image captured by the camera unit 22, and Compare the photographic image. And, if it is determined that the face recognized as a result of the comparison is not an accessible person, the control unit 29 forms a dangerous situation message and transmits it to the remote security center 70 through the wired/wireless communication unit 27, or an external homeowner's mobile terminal. Notify by sending it to (40).

제어부(29)는 근거리 통신부(26)를 통해 사용자 이동 단말(40)과 블루투스 통신과 같은 근거리 통신을 수행하여 출입가능자의 사진 이미지를 송수신하여 저장부(28)에 저장할 수 있다. 또한, 제어부(29)는 유무선 통신부(27)를 통해 원격의 보안 서비스 제공 서버(50)로부터 출입 가능자의 사진 이미지를 다운로드 받아 저장할 수 있다.The controller 29 may perform short-range communication such as Bluetooth communication with the user mobile terminal 40 through the short-range communication unit 26 to transmit/receive a photographic image of an accessible person and store it in the storage unit 28. In addition, the control unit 29 may download and store a photo image of an accessible person from the remote security service providing server 50 through the wired/wireless communication unit 27.

이를 위해, 보안 서비스 제공 서버(50)는, 사용자 이동 단말(40)이 접속하여 출입가능자의 이동 단말의 전화번호와 출입가능자의 사진 이미지를 등록할 수 있는 웹서비스 또는 앱서비스를 사용자 이동 단말(40)에 제공할 수 있다. To this end, the security service providing server 50 provides a web service or an app service that allows the user mobile terminal 40 to access and register the phone number of the mobile terminal of the accessible person and the photo image of the accessible person. 40) can be provided.

또한, 보안 서비스 제공 서버(50)는, AI 스피커(20)가 외출 모드 또는 취침 모드인 경우 인체 감지 센서(21)가 인체를 감지한 경우, 카메라부(22)로 촬영한 촬영 이미지 또는 동영상 데이터를 AI 스피커(20)로부터 전송받아 저장할 수 있다. In addition, the security service providing server 50, when the AI speaker 20 is in the going out mode or the sleeping mode, when the human body detection sensor 21 detects the human body, the photographed image or video data taken by the camera unit 22 May be transmitted from the AI speaker 20 and stored.

한편, 보안 서비스 제공 서버(50)는 사용자 이동 단말(40)이 웹서비스 또는 앱서비스를 통해 당일 택배가 배송될 거라는 택배 배송 정보를 등록하면, 이 택배 배송 정보를 AI스피커(20)에 전송하여 저장하게 함으로써, 택배배송 기사의 방문시 택배배송 기사의 음성(예를 들어, 택배 왔습니다)에 자동 응답하도록 할 수 있다.On the other hand, the security service providing server 50, when the user mobile terminal 40 registers the courier delivery information that the same-day courier will be delivered through a web service or an app service, and transmits the courier delivery information to the AI speaker 20. By storing, it is possible to automatically respond to the voice of the courier delivery driver (for example, the courier has arrived) when the courier delivery driver visits.

음성 내용을 인식하여 대응하는 AI 스피커의 구체적인 기술 구성은, 공지된 기술이므로 상세한 설명을 생략한다.The detailed description of the AI speaker that recognizes and responds to voice content is a known technology, and thus a detailed description thereof will be omitted.

위치추적 처리 모듈(28c)은 유무선 통신부(27)를 통해 외부의 LBS 위치서버(60)에 미리 저장된 출입가능자의 이동 단말의 위치 정보를 요청 및 수신하는 기능을 한다. 여기서, LBS 위치서버(60)가 이동 단말을 위치추적하여 위치 정보를 제공하는 것은 공지된 기술이므로 상세한 설명은 생략한다.The location tracking module 28c functions to request and receive location information of the mobile terminal of the accessible person previously stored in the external LBS location server 60 through the wired/wireless communication unit 27. Here, since the LBS location server 60 provides location information by tracking the location of the mobile terminal, a detailed description will be omitted.

도 3은 본 발명의 일실시예에 따른 AI스피커를 이용한 사용자 보안 방법의 순서도이다. 도 3에 보인 바와 같이, 침입 감지 장치(10)가 창문 또는 현관문을 통한 침입을 감지한다(S1). AI 스피커(20)가 침입 감지 장치(10)로부터 제공되는 감지 신호를 수신한다(S2). 3 is a flow chart of a user security method using an AI speaker according to an embodiment of the present invention. As shown in FIG. 3, the intrusion detection device 10 detects intrusion through a window or a front door (S1). The AI speaker 20 receives a detection signal provided from the intrusion detection device 10 (S2).

AI 스피커(20)의 인체 감지 센서(22)가 인체를 감지한 경우(S3), AI 스피커(20)의 제어부(29)는 LBS위치 서버(60)에 접속하여, 미리 저장된 출입가능자의 이동 단말의 번호에 대해 이동 단말의 위치를 요청하여 수신한다(S4). When the human body detection sensor 22 of the AI speaker 20 detects a human body (S3), the control unit 29 of the AI speaker 20 connects to the LBS location server 60, and the mobile terminal of the person who can enter in advance is stored. Request and receive the location of the mobile terminal for the number of (S4).

그리고, AI 스피커(20)는 수신한 이동 단말의 위치 정보에 기초하여, 출입가능자의 이동 단말의 위치가 모두 집 외부에 있는지 판단한다(S5). Then, the AI speaker 20 determines whether all the locations of the mobile terminals of the accessible person are outside the house based on the received location information of the mobile terminal (S5).

이때, AI 스피커(20)가 외출 모드로 설정되어 있으면(S6), AI 스피커의 제어부(29)는 출입가능자의 이동 단말의 위치가 모두 집 외부라고 판단되면, 집주인 이동 단말로 침입 감지 메시지를 전송한다(S8). 그리고, AI 스피커의 제어부(29)는 위험 상황 메시지를 형성하여 유무선 통신부(27)를 통해 원격의 보안 센터(70)에 전송한다(S9). At this time, if the AI speaker 20 is set to the outing mode (S6), the controller 29 of the AI speaker transmits an intrusion detection message to the homeowner's mobile terminal when it is determined that the location of all mobile terminals of the accessible person is outside the house. Do (S8). Then, the control unit 29 of the AI speaker forms a dangerous situation message and transmits it to the remote security center 70 through the wired/wireless communication unit 27 (S9).

한편, AI 스피커(20)가 취침 모드로 설정되어 있으면(S7), AI 스피커의 제어부(29)는 위험 상황 메시지를 형성하여 유무선 통신부(27)를 통해 원격의 보안 센터(70)에 전송한다(S9). On the other hand, if the AI speaker 20 is set to the sleep mode (S7), the controller 29 of the AI speaker forms a danger situation message and transmits it to the remote security center 70 through the wired/wireless communication unit 27 ( S9).

이때, 보안 센터(70)는 위험 상황 메시지에 대해 경찰서 등에 연락하여 출동을 요청한다.At this time, the security center 70 requests a dispatch by contacting a police station or the like for a dangerous situation message.

상술한 실시예는, 사용자가 외출한 상태일 경우 또는, 집안에서 취침하거나 활동하고 있는 상태일 때를 포함한 어떤 상황에서도 출입가능자가 아닌 침입자가 있는 경우에, 이를 감지하여 보안 센터(70)에 위험 상황을 알릴 수 있다.In the above-described embodiment, when there is an intruder who is not allowed to enter under any circumstances, including when the user is out or when a user is sleeping or active in the house, it is detected and dangerous to the security center 70. You can inform the situation.

도 4는 본 발명의 제2실시예에 따른 AI스피커를 이용한 사용자 보안 방법의 순서도이다. 도 4에 보인 바와 같이, AI 스피커가 외출 모드로 설정되어 있는 경우(T1), 침입 감지 장치(10)가 창문 또는 현관문의 침입을 감지하고(T2), 침입 감지 센서가 침입 감지 신호를 형성하여 AI 스피커(20)로 전송한다. 4 is a flow chart of a user security method using an AI speaker according to a second embodiment of the present invention. As shown in FIG. 4, when the AI speaker is set to the outside mode (T1), the intrusion detection device 10 detects the intrusion of a window or front door (T2), and the intrusion detection sensor forms an intrusion detection signal. It transmits to the AI speaker 20.

AI 스피커(20)가 침입 감지 장치(10)로부터 제공되는 감지 신호를 수신하고(T3), AI 스피커의 인체 감지 센서가 인체를 감지한 경우(T4), 카메라부(22)를 동작시켜 인체를 촬영하여 저장부(28)에 저장한다. When the AI speaker 20 receives the detection signal provided from the intrusion detection device 10 (T3) and the human body detection sensor of the AI speaker detects the human body (T4), the camera unit 22 is operated to detect the human body. Take a picture and store it in the storage unit 28.

AI 스피커(20)의 제어부(29)가 촬영한 인체에서 얼굴이 인식가능한지 판단한다(T6). 판단결과 얼굴이 인식가능하면, AI스피커의 제어부(29)가 촬영 이미지에서 얼굴을 추출하여(T7), 저장부(28)에 미리 저장된 출입가능자의 얼굴 이미지와 비교한다(T8). AI 스피커의 제어부(29))는 비교결과 출입가능자가 아닌 경우 위험상황 메시지를 형성하여 유무선 통신부(27)를 통해 원격의 보안 센터(70)에 전송한다. The controller 29 of the AI speaker 20 determines whether a face can be recognized in the photographed human body (T6). If the face is recognizable as a result of the determination, the controller 29 of the AI speaker extracts the face from the photographed image (T7), and compares the face image of the person with accessibility previously stored in the storage unit 28 (T8). The control unit 29 of the AI speaker forms a dangerous situation message when the person is not allowed to enter as a result of the comparison, and transmits it to the remote security center 70 through the wired/wireless communication unit 27.

이때, 제어부(29)가 위험 상황 메시지를 전송시 추출한 침입자의 얼굴 이미지를 첨부하여 전송하는 것이 바람직하다. 보안 센터(70)는 위험 상황 메시지에 대해 경찰서 등에 연락하여 출동을 요청한다.At this time, it is preferable that the control unit 29 attaches and transmits the face image of the intruder extracted when transmitting the danger situation message. The security center 70 contacts a police station or the like for a dangerous situation message and requests a dispatch.

한편, AI 스피커의 제어부(29)는 얼굴의 인식이 불가능하면, 촬영한 인체 사진이 첨부된 침입 감지 메시지를 유무선 통신부(27)를 통해 집주인의 이동 단말(40)로 전송한다(T11). On the other hand, the controller 29 of the AI speaker transmits an intrusion detection message to which the photographed human body photograph is attached to the mobile terminal 40 of the landlord through the wired/wireless communication unit 27 when face recognition is not possible (T11).

집주인 이동 단말(40)이 침입 감지 메시지를 수신하여, 인체 사진의 얼굴을 직접 확인하여(T12), 출입 가능자인지 판단하다(T13), 판단결과 출입 가능자이면, 위험상황 해제 신호를 AI스피커(20)로 전송한다(T14). The landlord's mobile terminal 40 receives the intrusion detection message, directly checks the face of the human body (T12), determines whether the person is allowed to enter (T13). ) To (T14).

상기 판단결과, 출입 가능자가 아니라 침입자로 판단되면 위험 상황 메시지를 보안 센터(70)에 전송한다. As a result of the determination, if it is determined that it is an intruder rather than an accessible person, a dangerous situation message is transmitted to the security center 70.

한편, 도 5는 본 발명의 제3실시예에 따른 AI 스피커를 이용한 보안 방법의 순서도이다. 도 5의 제3실시예에 대한 설명에서, 도 4의 구성과 중복되는 설명은 생략한다. Meanwhile, FIG. 5 is a flowchart of a security method using an AI speaker according to a third embodiment of the present invention. In the description of the third embodiment of FIG. 5, a description overlapping with the configuration of FIG. 4 will be omitted.

T6단계에서, 얼굴의 인식이 불가능하면, 도 5에 보인 바와 같이, AI 스피커의 제어부(29)는 LBS위치 서버(60)에 접속하여, 미리 저장된 출입가능자의 이동 단말의 위치를 요청하여 수신한다(T16). AI 스피커(20)는 출입가능자의 이동 단말의 위치 정보에 기초하여, 출입가능자가 모두 집 외부에 있는지 판단한다(T17). In step T6, if face recognition is not possible, as shown in FIG. 5, the controller 29 of the AI speaker connects to the LBS location server 60, and requests and receives the location of the mobile terminal of the person who can enter in advance. (T16). The AI speaker 20 determines whether all of the accessible people are outside the house based on the location information of the mobile terminal of the accessible person (T17).

판단결과 출입가능자의 이동 단말의 위치가 모두 집 외부에 있는 경우 AI 스피커의 제어부(29)는 위험 상황으로 판단하고, 위험 상황 메시지를 형성하여 무선 통신부를 통해 원격의 보안 센터에 전송한다(T18). As a result of the determination, if the positions of the mobile terminals of the accessible person are all outside the house, the controller 29 of the AI speaker determines that it is a dangerous situation, forms a dangerous situation message, and transmits it to a remote security center through the wireless communication unit (T18). .

이러한 구성에 의하여, AI스피커를 외출 모드로 설정하거나, AI스피커를 취침 모드로 설정한 경우, 창문 또는 현관문을 통해 침입자가 침입하면 이를 감지하여 외부의 보안 센터에 위험 상황 메시지를 전송하여, 도둑이나 강도가 침입했을 때 위험 상황에 즉각 대처할 수 있다.With this configuration, when the AI speaker is set to go out mode or the AI speaker is set to sleep mode, when an intruder intrudes through a window or front door, it detects it and transmits a dangerous situation message to an external security center, and the thief In the event of an intrusion or a robber, you can immediately respond to a dangerous situation.

또한, 사용자가 집안에 위치하고 있는, 일반 모드인 경우에도 AI스피커가 침입자가 침입한 경우, 침입자인지 판단하여 외부의 구조 센터에 연락하도록 구현할 수 있음은 물론이다.In addition, even when the user is located in the house or in the normal mode, when the AI speaker intrudes, it can be implemented to determine whether an intruder is an intruder and contact an external rescue center.

또한, 외출시 집안에 긴급 상황 또는 이상 상태가 발생했을 때 집안의 상황을 카메라 영상으로 전송받아 집안의 긴급 상황 및 이상 상태를 이동 단말을 통해서 확인할 수 있어 즉각적인 대처가 가능하게 된다.In addition, when an emergency or abnormal condition occurs in the house when going out, the condition of the house is transmitted as a camera image, and the emergency condition and the abnormal condition in the house can be checked through a mobile terminal, so that immediate response is possible.

상술한 실시예에서는, AI스피커를 외출 모드와 취침 모드로 구분하여, 침입 감지 신호에 대해 대응하는 구성으로 설명하였으나, 집주인이 집안에 있는 동안에도 본 발명을 적용할 수 있음은 물론이다. In the above-described embodiment, the AI speaker is divided into an outing mode and a sleeping mode, and described as a configuration corresponding to an intrusion detection signal, but it goes without saying that the present invention can be applied even while the homeowner is in the house.

상술한 실시예에서는 가정용 통신 장치가 AI스피커인 것으로 서술하였으나, 카메라 촬영이 가능하고 근거리 및 원거리 통신이 가능하고, 가정용으로 사용할 수 있도록 제작된 보안 통신 장치로 구현할 수도 있음은 물론이다.In the above-described embodiment, it has been described that the home communication device is an AI speaker, but it is a matter of course that it may be implemented as a security communication device manufactured to be used for home use, which enables camera shooting, enables short-range and long-distance communication, and is used for home use.

상기는 본 발명의 예시로서, 한정적으로 해석되어야 하는 것은 아니다. 본 발명의 몇 가지 예시적인 실시 형태에 대해 설명했지만, 본 발명의 신규 교시 및 이점으로부터 현저하게 일탈하지 않고, 많은 변경이 예시적인 실시 형태에 있어서 가능한 것을 당업자라면 용이하게 이해할 것이다. 따라서 모든 그러한 변경은 특허청구의 범위에서 정의되는 본 발명의 범위 내에 포함되는 것이 의도된다. 따라서 상기가 본 발명의 예시이며, 공개된, 또는 본 명세서에 공개되는 발명에 있어서 특정의 실시 형태에 한정되는 것으로서 해석되어서는 안 되며, 개시된 실시 형태로의 변경 및 다른 실시 형태가 본 명세서에 개시되는 발명의 범위 내에 포함되는 것이 의도되는 것을 이해해야 한다.The above is an illustration of the present invention, and should not be interpreted limitedly. Although several exemplary embodiments of the present invention have been described, those skilled in the art will readily understand that many modifications are possible in the exemplary embodiments without significantly departing from the novel teachings and advantages of the present invention. Accordingly, all such changes are intended to be included within the scope of the invention as defined in the claims. Therefore, the above is an illustration of the present invention, and should not be construed as being limited to specific embodiments in the disclosed or disclosed invention, and changes to the disclosed embodiments and other embodiments are disclosed in the present specification. It is to be understood that it is intended to be included within the scope of the invention being made.

1 : AI 스피커를 이용한 보안 시스템
10 : 침입 감지 장치 11 : 침임 감지 센서
12 : 근거리 통신부 20 : AI 스피커
21 : 인체감지센서 22 : 카메라부
23 : 마이크 24 : 키입력부
25 : 스피커부 26 : 근거리통신부
27 : 무선통신부 28 : 저장부
28a : 음성 인식 처리 모듈
28b : 얼굴 인식 처리 모듈
28c: 위치 추적 처리 모듈
28d : 지도 데이터베이스
29 : 제어부 30 : 네트워크
40: 이동 단말 50 : 보안서비스 제공 서버
60 : LBS위치서버 70 : 보안 센터 1: Security system using AI speaker
10: intrusion detection device 11: intrusion detection sensor
12: near field communication unit 20: AI speaker
21: human body detection sensor 22: camera unit
23: microphone 24: key input unit
25: speaker unit 26: short-range communication unit
27: wireless communication unit 28: storage unit
28a: speech recognition processing module
28b: face recognition processing module
28c: location tracking processing module
28d: map database
29: control unit 30: network
40: mobile terminal 50: security service providing server
60: LBS location server 70: Security center

Claims (11)

가정용 통신 장치를 이용한 사용자 보안 시스템으로서,
사용자 댁의 창문 또는 현관문에 설치되어 외부인의 침입을 감지하여 침입 감지 신호를 발생시키는 침입 감지 장치와,
상기 침입 감지 장치로부터 침입 감지 신호를 수신하면 원격의 위치 정보 제공 서버에 접속하여 미리 저장된 가족/지인을 포함한 출입 가능자의 이동 단말의 위치 정보를 요청 및 수신하고, 상기 출입 가능자의 이동 단말이 모두 사용자의 집 외부에 위치하면, 위험 상황으로 판단하고 위험 상황 메시지를 형성하여 원격의 보안 센터에 전송하는 가정용 통신 장치와,
네트워크를 통해 위험 상황 메시지를 전송한 가정용 통신 장치가 위치하는 주소를 파악하여 경찰 출동을 요청하는 보안 센터와,
상기 네트워크를 통한 상기 가정용 통신 장치의 요청에 따라 적어도 하나의 이동 단말의 위치 정보를 제공하는 위치 정보 제공 서버를 포함하는 것을 특징으로 하는 가정용 통신 장치를 이용한 사용자 보안 시스템.As a user security system using a home communication device,
An intrusion detection device installed on a window or front door of a user's house to detect an intrusion of an outsider and generate an intrusion detection signal;
Upon receiving an intrusion detection signal from the intrusion detection device, access to a remote location information providing server to request and receive the location information of the mobile terminal of the accessible person including the family/acquaintances stored in advance, and the mobile terminals of the accessible person are all users. A home communication device that determines it as a dangerous situation, forms a dangerous situation message, and transmits it to a remote security center, if it is located outside the house of
A security center that requests a police dispatch by identifying the address where the home communication device that transmitted the danger situation message through the network is located;
And a location information providing server that provides location information of at least one mobile terminal according to a request of the home communication device through the network. 제1항에 있어서,
상기 침입 감지 장치는 사용자 댁의 창문 또는 현관문에 설치되어 외부인의 침입을 감지하는 침입 감지 센서, 상기 침입 감지 센서의 침입 감지 신호를 전송하는 근거리부 통신부를 포함하고,
상기 가정용 통신 장치는 AI 스피커이며,
상기 AI 스피커는, 인체감지 센서, 마이크, 키입력부, 저장부, 상기 침입 감지 장치와 통신을 위한 근거리 통신부, 원격의 보안 센터와 통신을 위한 무선 통신부 및, 이들 장치들을 제어하는 제어부를 포함하고,
상기 저장부에는 사용자가 등록한 출입가능자의 이동 단말의 전화번호와, 출입가능자의 얼굴 사진 이미지와, 지도 데이터베이스와, 상기 마이크로 입력되는 음성을 인식하는 음성 인식 처리 모듈, 상기 출입가능자의 이동 단말의 위치를 요청 및 수신하여 처리하는 위치 추적 처리 모듈이 저장되는 것인, 가정용 통신 장치를 이용한 사용자 보안 시스템.The method of claim 1,
The intrusion detection device includes an intrusion detection sensor installed on a window or front door of a user's house to detect an intrusion of an outsider, and a short-range communication unit transmitting an intrusion detection signal of the intrusion detection sensor,
The home communication device is an AI speaker,
The AI speaker includes a human body detection sensor, a microphone, a key input unit, a storage unit, a short-range communication unit for communication with the intrusion detection device, a wireless communication unit for communication with a remote security center, and a control unit for controlling these devices,
The storage unit includes the phone number of the mobile terminal of the accessible person registered by the user, the image of the face of the accessible person, a map database, a voice recognition processing module for recognizing the voice input from the microphone, and the location of the mobile terminal of the accessible person. A user security system using a home communication device that stores a location tracking processing module that requests and receives and processes it. 제2항에 있어서,
상기 제어부는 침입 감지 센서의 감지신호에 기초하여 침입으로 판단되면, 상기 위치추적 처리 모듈을 동작시켜, 상기 저장부에 저장된 출입가능자 이동 단말의 현재 위치에 대해 상기 위치 정보 제공 서버에 요청 및 수신하여 상기 저장부에 저장하고, 상기 위치 정보 제공 서버로부터 전송된 위치 정보에 기초하여 출입가능자 이동 단말의 위치가 모두 사용자 집 외부인 경우 침입으로 판단하고, 위험상황 메시지를 형성하여 원격의 보안센터로 전송하는 것인, 가정용 통신 장치를 이용한 사용자 보안 시스템.The method of claim 2,
When it is determined that the intrusion is intrusion based on the detection signal of the intrusion detection sensor, the control unit operates the location tracking module to request and receive the location information providing server for the current location of the accessible person mobile terminal stored in the storage unit. It is stored in the storage unit, and based on the location information transmitted from the location information providing server, if the locations of the accessible mobile terminals are all outside the user's house, it is determined as an intrusion, and a dangerous situation message is formed and transmitted to a remote security center. That, a user security system using a home communication device. 제3항에 있어서,
상기 AI 스피커는 카메라부와 인체 감지 센서를 더 포함하고,
상기 저장부는 상기 카메라부가 촬영한 촬영 이미지에서 얼굴을 추출하여 얼굴을 인식하는 얼굴 인식 처리 모듈을 더 포함하며,
상기 AI 스피커는 외출 모드 또는 취침 모드로 설정되며, 상기 외출 모드시 상기 제어부는 상기 침입 감지 장치로부터 침입 감지 신호를 수신하고 상기 AI 스피커의 주변에서 상기 인체 감지 센서가 인체를 감지하면 상기 카메라부를 동작시켜서 인체를 촬영하여 얼굴 이미지를 추출하여 상기 저장부에 저장하고, 추출한 얼굴 이미지를 미리 저장된 가족/지인을 포함한 출입가능자의 이미지와 비교하며, 출입가능자가 아닌 경우 위험 상황 메시지를 형성하여 원격의 보안센터에 전송하는 것을 특징으로 하는 가정용 통신 장치를 이용한 사용자 보안 시스템.The method of claim 3,
The AI speaker further includes a camera unit and a human body detection sensor,
The storage unit further includes a face recognition processing module for recognizing a face by extracting a face from a photographed image captured by the camera unit,
The AI speaker is set to a going out mode or a sleeping mode, and in the going out mode, the control unit receives an intrusion detection signal from the intrusion detection device and operates the camera unit when the human body detection sensor detects a human body in the vicinity of the AI speaker. The human body is photographed, and the face image is extracted and stored in the storage unit, and the extracted face image is compared with the image of the person who can access, including the family/acquaintances previously stored, and if the person is not allowed to enter, a risk situation message is formed to secure remotely. User security system using a home communication device, characterized in that the transmission to the center. 제4항에 있어서,
상기 AI 스피커는 상기 외출 모드시 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면, 추출한 침입자 얼굴 이미지를 포함한 위험 상황 메시지를 형성하여 사용자 이동 단말에 전송하는 것을 특징으로 하는 가정용 통신 장치를 이용한 사용자 보안 시스템.The method of claim 4,
When the AI speaker receives an intrusion detection signal from the intrusion detection device in the going out mode, a risk situation message including the extracted intruder face image is formed and transmitted to the user's mobile terminal. . 제2항에 있어서,
상기 침입 감지 센서는, 일정 거리 이내로 접근시 침입 감지 신호를 발생하는 근접 센서, 일정 이상의 중량을 감지시 침입 감지 신호를 발생하는 중량 센서, 적외선 센서 중 어느 하나를 포함하는 것인, 가정용 통신 장치를 이용한 사용자 보안 시스템.The method of claim 2,
The intrusion detection sensor includes any one of a proximity sensor that generates an intrusion detection signal when approaching within a certain distance, a weight sensor that generates an intrusion detection signal when a certain weight is detected, and an infrared sensor. User security system used. 제4항에 있어서,
상기 AI 스피커와 네트워크를 통해 연결되는 보안 서비스 제공 서버를 더 포함하며,
상기 보안 서비스 제공 서버는 가족/지인을 포함한 출입 가능자의 이동 단말 번호 또는 출입 가능자의 사진 이미지를 서버에 등록하기 위한 웹서비스 또는 앱서비스를 제공하고;
상기 보안 서비스 제공 서버는, 웹서비스 또는 앱서비스를 통해 등록한 출입 가능자의 이동 단말 번호와 출입 가능자의 사진 이미지를 상기 AI 스피커에 전송하여 저장하게 하고,
상기 AI 스피커가 상기 카메라부로 촬영한 영상 데이터와, 침입 감지 발생시 촬영한 영상 데이터에서 추출한 얼굴 이미지를 전송받아 저장하는 것인, 가정용 통신 장치를 이용한 사용자 보안 시스템.The method of claim 4,
Further comprising a security service providing server connected through the AI speaker and the network,
The security service providing server provides a web service or an app service for registering the mobile terminal number of the accessible person including the family/acquaintances or the photo image of the accessible person in the server;
The security service providing server transmits and stores the mobile terminal number of the accessible person and the photo image of the accessible person registered through a web service or an app service to the AI speaker,
A user security system using a home communication device to receive and store the image data captured by the AI speaker by the camera unit and a face image extracted from the image data captured when an intrusion is detected. 가정용 통신 장치를 이용한 사용자 보안 방법으로서,
사용자 댁의 창문 또는 현관문에 설치된 침입 감지 장치가 외부인의 침입을 감지하면 침입 감지 신호를 전송하는 제1단계;
가정용 통신 장치가 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면, 위치 정보 제공 서버에 접속하여 미리 저장된 가족/지인을 포함한 출입 가능자의 이동 단말의 위치 정보를 요청 및 수신하는 제2단계;
상기 가정용 통신 장치는, 상기 출입 가능자 이동 단말이 모두 사용자의 집 외부에 위치하면, 위험 상황으로 판단하고 위험 상황 메시지를 형성하여 보안 센터에 전송하는 제3단계를 포함하는 것을 특징으로 하는 가정용 통신 장치를 이용한 사용자 보안 방법.As a user security method using a home communication device,
A first step of transmitting an intrusion detection signal when an intrusion detection device installed on a window or front door of a user's house detects an intrusion of an outsider;
A second step of, when the home communication device receives the intrusion detection signal from the intrusion detection device, accessing a location information providing server and requesting and receiving location information of a mobile terminal of a person who can access, including a family/acquaintance previously stored;
The home communication device comprises a third step of determining a risk situation, forming a risk situation message, and transmitting the message to a security center when all the mobile terminals of the accessible person are located outside the user's house. User security method using. 제8항에 있어서,
상기 제2단계는 상기 가정용 통신 장치가 상기 침입 감지 장치로부터 침입 감지 신호를 수신하면, 상기 가정용 통신 장치의 주변에서 인체 감지 센서를 통해 인체를 감지하는 단계;
상기 가정용 통신 장치가 인체를 감지하면, 카메라부를 동작시켜서 인체를 촬영하여 저장하는 단계를 포함하는 것을 특징으로 하는 가정용 통신 장치를 이용한 사용자 보안 방법.The method of claim 8,
The second step includes: when the home communication device receives an intrusion detection signal from the intrusion detection device, detecting a human body in the vicinity of the home communication device through a human body detection sensor;
And when the home communication device detects a human body, operating a camera unit to photograph and store the human body. 제9항에 있어서,
상기 가정용 통신 장치가 상기 촬영한 인체의 이미지에서 얼굴 이미지를 추출하는 단계;
상기 가정용 통신 장치가 추출한 얼굴 이미지를 미리 저장된 가족/지인을 포함한 출입가능자의 이미지와 비교하여 출입가능자인지 판단하는 단계; 및
상기 판단결과 출입가능자가 아닌 경우 추출한 얼굴 이미지를 포함한 위험 상황 메시지를 형성하여 원격의 보안센터에 전송하는 단계를 더 포함하는 것을 특징으로 하는 가정용 통신 장치를 이용한 사용자 보안 방법.The method of claim 9,
Extracting, by the home communication device, a face image from the captured human body image;
Comparing the face image extracted by the home communication device with an image of a person who can access, including a family member/acquaintance previously stored, to determine whether the person is allowed to enter; And
And generating a risk situation message including the extracted face image when the person is not allowed to enter as a result of the determination, and transmitting the message to a remote security center. 제9항에 있어서,
상기 가정용 통신 장치가 상기 촬영한 인체의 이미지에서 얼굴 이미지를 추출하는 단계;
상기 가정용 통신 장치가 추출한 얼굴 이미지를 포함한 위험 상황 메시지를 형성하여 사용자 이동 단말에 전송하는 단계를 더 포함하는 것을 특징으로 하는 가정용 통신 장치를 이용한 사용자 보안 방법.
The method of claim 9,
Extracting, by the home communication device, a face image from the captured human body image;
And forming a risk situation message including a face image extracted by the home communication device and transmitting it to a user mobile terminal.
KR1020190093943A 2019-08-01 2019-08-01 System for user security using home communication device and method therefor KR102251931B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190093943A KR102251931B1 (en) 2019-08-01 2019-08-01 System for user security using home communication device and method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190093943A KR102251931B1 (en) 2019-08-01 2019-08-01 System for user security using home communication device and method therefor

Publications (2)

Publication Number Publication Date
KR20210015304A KR20210015304A (en) 2021-02-10
KR102251931B1 true KR102251931B1 (en) 2021-05-14

Family

ID=74561595

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190093943A KR102251931B1 (en) 2019-08-01 2019-08-01 System for user security using home communication device and method therefor

Country Status (1)

Country Link
KR (1) KR102251931B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114474085A (en) * 2022-01-06 2022-05-13 合肥综合性国家科学中心人工智能研究院(安徽省人工智能实验室) Household monitoring robot
CN114812052A (en) * 2022-04-24 2022-07-29 逸励实业(上海)有限公司 Energy-saving refrigeration house control method, refrigeration house control system and refrigeration house

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180330589A1 (en) 2017-05-12 2018-11-15 Google Llc Systems, Methods, and Devices for Activity Monitoring via a Home Assistant

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100819028B1 (en) * 2005-12-08 2008-04-02 한국전자통신연구원 Security Robot and Method for security using robot
KR20100093816A (en) * 2009-02-17 2010-08-26 권선민 System and method for generating alarm as invading using local wireless communication
KR101431627B1 (en) * 2012-12-31 2014-08-21 동의대학교 산학협력단 Home security method using smart devices

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180330589A1 (en) 2017-05-12 2018-11-15 Google Llc Systems, Methods, and Devices for Activity Monitoring via a Home Assistant

Also Published As

Publication number Publication date
KR20210015304A (en) 2021-02-10

Similar Documents

Publication Publication Date Title
US8120459B2 (en) Access authentication system and method using smart communicator
KR101187342B1 (en) visitors monitoring system in apartment house and monitoring method thereof
US11373494B2 (en) Control access utilizing video analytics
TWI596270B (en) Remote entry control system
US20170132888A1 (en) Intruder detection devices, methods and systems
KR102390405B1 (en) Doorbell
KR102237086B1 (en) Apparatus and method for controlling a lobby phone that enables video surveillance through a communication terminal that can use a 5G mobile communication network based on facial recognition technology
KR101801200B1 (en) Smart doorbell system
KR102251931B1 (en) System for user security using home communication device and method therefor
JP4772509B2 (en) Doorphone and ringing tone control method for doorphone
KR20190141068A (en) Smart door bell system with face recognition function
KR20150041939A (en) A door monitoring system using real-time event detection and a method thereof
KR101182986B1 (en) Monitoring system and method using image coupler
KR101446416B1 (en) Home black-box device and system capable of automatic record and video communication
KR101977263B1 (en) Intelligent call system using beacons
KR101412793B1 (en) A doll having security function
KR101914813B1 (en) Door lock controlling apparatus using mobile terminal and method thereof
KR20170121934A (en) Smart doorbell and home security system
KR101778863B1 (en) Household security system using home network
KR102237852B1 (en) Method for security using video phone
KR102071185B1 (en) Calling system for controlling peripheral device acording to the type of emergency
KR20210153252A (en) Door security device and system using smart devices
KR102142032B1 (en) Intelligent Communications Server
KR101704466B1 (en) Crime prevention controlling system using blackbox
KR20190114717A (en) Doorbell, security system including doorbell apparatus, and method of operating the same

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant