KR20170084842A - 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법 - Google Patents

얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법 Download PDF

Info

Publication number
KR20170084842A
KR20170084842A KR1020160004192A KR20160004192A KR20170084842A KR 20170084842 A KR20170084842 A KR 20170084842A KR 1020160004192 A KR1020160004192 A KR 1020160004192A KR 20160004192 A KR20160004192 A KR 20160004192A KR 20170084842 A KR20170084842 A KR 20170084842A
Authority
KR
South Korea
Prior art keywords
user
home
electronic device
face recognition
control unit
Prior art date
Application number
KR1020160004192A
Other languages
English (en)
Other versions
KR101784990B1 (ko
Inventor
정규택
Original Assignee
주식회사 파이브지티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=59311316&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20170084842(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 주식회사 파이브지티 filed Critical 주식회사 파이브지티
Priority to KR1020160004192A priority Critical patent/KR101784990B1/ko
Priority to PCT/KR2017/000249 priority patent/WO2017122973A1/ko
Priority to US16/068,969 priority patent/US20190028290A1/en
Publication of KR20170084842A publication Critical patent/KR20170084842A/ko
Application granted granted Critical
Publication of KR101784990B1 publication Critical patent/KR101784990B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • G06K9/00221—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G07C9/00071—
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
    • G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
    • G07C9/257—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition electronically
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • H04L67/24—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06—Authentication
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/30—Individual registration on entry or exit not involving the use of a pass
    • G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/285—Generic home appliances, e.g. refrigerators

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법에 관한 것으로, 구체적으로는 얼굴인식을 이용하여 사용자의 출입 여부를 확인하고, 출입한 사용자의 예약 정보에 맞게 가정용 전자기기들을 동작시킬 수 있는 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법에 관한 것이다.
또한, 본 발명은 실내 출입을 위한 인증을 수행하는 얼굴인식 장치와, 인증을 완료한 사용자의 사용자 단말로 출입 정보를 전송하는 얼굴인식 서버와, 사용자 단말에 설치되고 사용자의 실내 출입이 확인되면 가정용 전자기기 제어부를 실시간으로 활성화하는 홈 오토메이션 활성화부 및 홈 오토메이션 활성화부에 의해 활성화되면 사용자로부터 사전에 설정된 예약 정보에 따라 가정용 전자기기를 제어하는 가정용 전자기기 제어부를 구비하므로, 사용자의 출입 여부에 따라 해당 사용자가 사전에 설정한 예약 정보에 맞게 가정용 전자기기들을 동작시킬 수 있다.

Description

얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법{Home automation control system and method using the face recognition}
본 발명은 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법에 관한 것으로, 구체적으로는 얼굴인식을 이용하여 사용자의 출입 여부를 확인하고, 출입한 사용자의 예약 정보에 맞게 가정용 전자기기들을 동작시킬 수 있는 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법에 관한 것이다.
최근, 홈 오토메이션 기술의 발달로 인해 전등, 보일러, 에어컨, 오디오 및 TV를 포함하는 가정용 전자기기를 인터넷 또는 스마트폰을 이용하여 원격 제어할 수 있게 됨에 따라 사용자들은 보다 편리하게 생활할 수 있게 되었다.
특히, 종래의 홈 오토메이션 시스템은 사용자가 집에 도착하는 시간에 맞춰서 전등을 켜거나, 보일러 및 에어컨을 동작시켜 사용자가 도착하기 전에 실내의 온도를 조절하는 등의 예약 기능을 지원함으로써, 사용자의 편의성을 보다 향상시킬 수 있었다.
한편, 종래의 홈 오토메이션 시스템의 경우 사용자에 의해 예약된 시간 만을 기준으로 각각의 가정용 전자기기를 동작시키므로, 사용자의 귀가 시간이 평소보다 늦어져 집에 도착하지 않더라도 사용자의 출입 여부와는 무관하게 가정용 전자기기가 동작하여 전기를 낭비하는 문제점이 있었다.
또한, 종래의 홈 오토메이션 시스템은 실내에 존재하거나 출입하는 사용자를 식별할 수 없으므로, 복수의 가족 구성원이 각각의 취향에 맞게 예약 설정을 하거나 가정용 전자기기를 제어하기가 매우 곤란한 문제점도 있었다.
본 발명은 상기와 같은 문제점을 감안하여 안출된 것으로, 얼굴인식을 이용하여 출입한 사용자를 식별하고, 해당 사용자의 예약 정보에 맞게 가정용 전자기기들을 동작시킬 수 있는 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법을 제공하는데 그 목적이 있다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기와 같은 목적을 달성하기 위한 본 발명은 사용자의 얼굴을 촬영한 인증용 영상을 기저장된 복수의 얼굴 영상과 비교하여, 실내 출입을 위한 인증을 수행하는 얼굴인식 장치; 상기 얼굴인식 장치로부터 인증을 완료한 사용자 정보를 수신하고, 사용자 정보와 연동된 사용자 단말로 사용자의 실내 출입 여부를 알리는 출입 정보를 전송하는 얼굴인식 서버; 및 상기 얼굴인식 서버로부터 출입 정보를 수신하여 사용자의 실내 출입을 확인하면, 기설정된 예약 정보에 따라 가정용 전자기기를 제어하는 사용자 단말;을 포함하는 얼굴인식을 이용한 홈 오토메이션 제어 시스템을 제공한다.
바람직한 실시예에 있어서, 상기 사용자 단말은 상기 얼굴인식 서버로부터 출입 정보를 수신하며, 사용자의 실내 출입이 확인되면 가정용 전자기기 제어부를 실시간으로 활성화하는 홈 오토메이션 활성화부; 및 상기 홈 오토메이션 활성화부에 의해 활성화되면, 사용자로부터 사전에 설정된 예약 정보에 따라 가정용 전자기기를 제어하는 가정용 전자기기 제어부;를 포함한다.
바람직한 실시예에 있어서, 상기 가정용 전자기기 제어부는 가정용 전자기기 별로 각각 구비되어 사용자 단말에 설치되고, 상기 예약 정보에 따라 가정용 전자기기를 온-오프하거나 예약된 동작을 수행하도록 원격으로 제어한다.
바람직한 실시예에 있어서, 상기 가정용 전자기기는 전등, 보일러, 오디오, TV, 에어컨, 수도 제어장치, 가스 제어장치 및 보안 장치 중 적어도 하나를 포함한다.
바람직한 실시예에 있어서, 상기 홈 오토메이션 활성화부에는 사용자의 실내 출입이 확인될 때, 실시간으로 활성화하고자 하는 가정용 전자기기 제어부가 사전에 설정되어 저장된다.
또한, 본 발명은 얼굴인식을 이용한 홈 오토메이션 제어 시스템에서 수행되는 홈 오토메이션 제어 방법으로서, (1) 얼굴인식 장치가, 사용자의 얼굴을 촬영한 인증용 영상을 기저장된 복수의 얼굴 영상과 비교하여 사용자의 실내 출입을 위한 인증을 수행하는 단계; (2) 얼굴인식 서버가, 상기 얼굴인식 장치로부터 인증을 완료한 사용자 정보를 수신하고 사용자 정보와 연동된 사용자 단말로 사용자의 실내 출입 여부를 알리는 출입 정보를 전송하는 단계; 및 (3) 사용자 단말이, 상기 얼굴인식 서버로부터 출입 정보를 수신하고 기설정된 예약 정보에 따라 가정용 전자기기를 제어하는 단계;를 포함하는 홈 오토메이션 제어 방법을 제공한다.
바람직한 실시예에 있어서, 상기 제 (3)단계의 사용자 단말에는 얼굴인식 서버로부터 출입 정보를 수신하는 홈 오토메이션 활성화부 및 상기 홈 오토메이션 활성화부에 의해 활성화되는 가정용 전자기기 제어부가 구비되고, 상기 제 (3)단계는, (3-1) 상기 홈 오토메이션 활성화부가, 상기 얼굴인식 서버로부터 출입 정보를 수신하여 사용자의 실내 출입을 확인한 후 상기 가정용 전자기기 제어부를 실시간으로 활성화하는 단계; 및 (3-2) 상기 가정용 전자기기 제어부가, 사용자로부터 사전에 설정된 예약 정보에 따라 가정용 전자기기를 제어하는 단계;를 포함한다.
바람직한 실시예에 있어서, 상기 제 (3-2)단계에서 상기 가정용 전자기기 제어부는, 가정용 전자기기 별로 각각 구비되어 상기 예약 정보에 따라 가정용 전자기기를 온-오프하거나 예약된 동작을 수행하도록 원격으로 제어한다.
바람직한 실시예에 있어서, 상기 제 (3-2)단계에서 상기 가정용 전자기기는 전등, 보일러, 오디오, TV, 에어컨, 수도 제어장치, 가스 제어장치 및 보안 장치 중 적어도 하나를 포함한다.
바람직한 실시예에 있어서, 상기 제 (1)단계 이전에, (A) 상기 홈 오토메이션 활성화부에, 사용자의 실내 출입이 확인될 때 실시간으로 활성화하고자 하는 가정용 전자기기 제어부를 설정하여 저장하는 단계;를 더 포함한다.
전술한 과제해결 수단에 의해 본 발명은 실내 출입을 위한 인증을 수행하는 얼굴인식 장치와, 인증을 완료한 사용자의 사용자 단말로 출입 정보를 전송하는 얼굴인식 서버와, 사용자 단말에 설치되고 사용자의 실내 출입이 확인되면 가정용 전자기기 제어부를 실시간으로 활성화하는 홈 오토메이션 활성화부 및 홈 오토메이션 활성화부에 의해 활성화되면 사용자로부터 사전에 설정된 예약 정보에 따라 가정용 전자기기를 제어하는 가정용 전자기기 제어부를 구비하므로, 사용자의 출입 여부에 따라 해당 사용자가 사전에 설정한 예약 정보에 맞게 가정용 전자기기들을 동작시킬 수 있는 효과가 있다.
또한, 본 발명은 사용자의 실내 출입이 확인될 때 가정용 전자기기들이 동작하게 하므로, 불필요하게 가정용 전자기기가 동작하여 전기를 낭비하지 않도록 방지할 수 있다.
또한, 본 발명은 가족 구성원들이 각각의 취향에 맞게 예약 설정을 하면, 각각의 가족 구성원의 출입 여부에 따라 예약된 가정용 전자기기를 동작시킬 수 있다.
도 1은 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템을 설명하기 위한 도면.
도 2는 홈 오토메이션 제어 시스템을 이용하여 가정용 전자기기를 동작시키는 과정을 설명하기 위한 도면.
도 3은 본 발명의 일실시예에 따른 홈 오토메이션 제어 방법을 설명하기 위한 도면.
하기의 설명에서 본 발명의 특정 상세들이 본 발명의 보다 전반적인 이해를 제공하기 위해 나타나 있는데, 이들 특정 상세들 없이 또한 이들의 변형에 의해서도 본 발명이 용이하게 실시될 수 있다는 것은 이 기술분야에서 통상의 지식을 가진 자에게 자명할 것이다.
먼저, 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템을 구성하는 홈 오토메이션 활성화부 및 가정용 전자기기 제어부는 하드웨어적으로 구현될 수도 있으나, 바람직하게는, 하드웨어와 함께 동작하는 소프트웨어로 구현될 수 있다.
여기서, 상기 소프트웨어는 사용자 단말에 설치되어 동작하도록 구비되거나, 상기 사용자 단말이 유,무선 통신망 또는 인터넷 망을 통해 접속가능한 서버 장치에 설치되어 동작하도록 구비될 수 있다.
한편, 상기 사용자 단말은 퍼스널 컴퓨터, 스마트폰 및 태블릿 PC뿐만 아니라 용도에 따라 특이하게 제작된 산업용 및 개인용 컴퓨터 장치를 포함할 수 있으며, 바람직하게는 스마트폰으로 구비될 수 있다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도 1 내지 도 3을 참조하여 상세히 설명하되, 본 발명에 따른 동작 및 작용을 이해하는데 필요한 부분을 중심으로 설명한다.
도 1은 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템을 설명하기 위한 도면이고, 도 2는 홈 오토메이션 제어 시스템을 이용하여 가정용 전자기기를 동작시키는 과정을 설명하기 위한 도면이다.
도 1 및 도 2를 참조하면, 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템은 얼굴인식 장치(110), 얼굴인식 서버(120), 홈 오토메이션 활성화부(130) 및 가정용 전자기기 제어부(140)를 포함하여 구성된다.
여기서, 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템은 가족 구성원의 실내 출입을 위한 인증을 수행하여 해당 가족 구성원을 식별한 후, 상기 식별된 가족 구성원이 사전에 예약한 예약 정보에 맞게 홈 오토메이션을 구성하는 가정용 전자기기(10)를 동작시키는 형태로 구현된다.
이때, 전술한 가정용 전자기기(10)는 전등, 보일러, 오디오, TV, 에어컨, 수도 제어장치, 가스 제어장치 및 보안 장치와 같이 가정 내에 존재하거나 설치될 수 있는 각종 전자기기를 포함할 수 있다.
상기 얼굴인식 장치(110)는 사용자를 인식하고 해당 사용자에 대한 인증을 수행하기 위한 것으로, 사용자의 얼굴을 촬영한 인증용 영상을 기저장된 복수의 얼굴 영상과 비교하여 실내 출입을 위한 인증을 수행하도록 구비된다.
즉, 상기 얼굴인식 장치(110)는 각각의 가정마다 개별적으로 구비되어 해당 가정의 가족 구성원이 실내로 출입하고자 할 때, 해당 가족 구성원의 얼굴을 인식하여 인증을 수행하고 그 인증 결과에 따라 도어락의 잠금 상태를 해제할 수 있다.
또한, 상기 얼굴인식 장치(110)는 가족 구성원 또는 사용자의 인증이 완료되면, 인증을 완료한 대상의 사용자 정보를 유선 통신망 또는 인터넷망을 통해 후술할 얼굴인식 서버(120)로 전송한다. 이로 인해, 후술할 얼굴인식 서버(120)는 실내로 출입하는 사용자를 확인하고 해당 사용자의 사용자 단말(20)로 출입 정보를 전송할 수 있게 된다.
한편, 상기 얼굴인식 장치(110)는 소정의 단어, 블루투스 신호, NFC 태그 및 RFID 태그 중 적어도 하나로 구성된 식별정보를 포함하는 음성 또는 무선 신호를 감지하여 사용자의 접근 여부를 인식하고, 기저장된 얼굴 영상들 중에서 상기 식별정보와 매칭되는 얼굴 영상을 선별하거나 상기 식별정보를 이용하여 사용자의 키에 맞게 카메라의 각도를 조절하는 기능을 더 구비할 수도 있다.
상기 얼굴인식 서버(120)는 상기 얼굴인식 장치(110)와 사용자 단말(20)을 중계하기 위한 것으로, 상기 얼굴인식 장치(110)로부터 인증을 완료한 사용자 정보를 송신한 후, 해당 사용자 정보와 연동된 사용자 단말(20)로 사용자의 실내 출입 여부를 알리는 출입 정보를 전송하는 기능을 수행하게 된다.
예컨대, 상기 얼굴인식 서버(120)는 유선 통신망 또는 인터넷망을 통해 복수의 가정에 각각 설치된 얼굴인식 장치(110)로부터 사용자 정보를 송신하고, 무선 통신망 또는 이동 통신망을 통해 각 사용자의 사용자 단말(20)로 출입 정보를 전송하는 형태로 구현될 수 있다.
한편, 상기 얼굴인식 서버(120)에는 상기 얼굴인식 장치(110)에 저장된 사용자들에 대한 정보와, 각 사용자가 소지한 사용자 단말(20)에 대한 정보가 서로 매칭되어 사전에 저장되게 된다.
상기 홈 오토메이션 활성화부(130)는 사용자 단말(20)에 설치된 것으로, 상기 얼굴인식 서버(120)로부터 출입 정보를 수신하고, 상기 수신한 출입 정보를 이용하여 사용자의 실내 출입 여부를 확인하면 후술할 가정용 전자기기 제어부(140)를 실시간으로 활성화하는 기능을 수행한다.
이를 위해서, 상기 홈 오토메이션 활성화부(130)에는 사용자가 귀가하여 실내로 출입할 때 실시간으로 활성화시키고자 하는 가정용 전자기기 제어부(140)가 사용자 입력에 의해 사전에 설정 및 저장된다.
예컨대, 사용자의 사용자 단말(20)에 전등 제어부(141), TV 제어부(142) 및 보일러 제어부(143)를 포함하는 가정용 전자기기 제어부(140)가 설치되어 있을 경우, 사용자는 상기 홈 오토메이션 활성화부(130)를 통해 외출 후 귀가할 때 모든 제어부(141, 142, 143)가 활성화되도록 설정하거나 모든 제어부(141, 142, 143) 중에서 전등 제어부(141) 및 TV 제어부(142)를 선택하여 설정할 수 있다.
또한, 가정용 전자기기 제어부(140)는 슬립 모드로 대기하다가 상기 홈 오토메이션 활성화부(130)에 의해 활성화되면, 동작 모드로 전환되어 가정용 전자기기(10)를 제어할 수 있게 된다.
한편, 상기 홈 오토메이션 활성화부(130)는 사용자 단말(20), 예컨대, 스마트폰에 설치되어 동작하는 앱(Application, APP)으로 구현될 수 있다.
상기 가정용 전자기기 제어부(140)는 사용자의 가정 내에 존재하거나 설치된 가정용 전자기기(10)를 원격으로 제어하기 위한 것으로, 사용자 단말(20)에 설치되고 상기 홈 오토메이션 활성화부(130)에 의해 슬립 모드에서 동작 모드로 전환되면, 실시간으로 입력된 사용자 입력 또는 사전에 설정된 예약 정보에 따라 가정용 전자기기(10)를 온-오프하거나 예약된 동작을 수행하게 한다.
바람직하게, 상기 가정용 전자기기 제어부(140)는 가정용 전자기기(10)의 제조사 또는 판매사로부터 제공되어 가정용 전자기기(10)를 원격 제어할 수 있는 상용 앱으로 구현될 수 있다.
또한, 상기 가정용 전자기기 제어부(140)는 사용자 단말(20)이 RF 통신, 적외선 통신 및 블루투스를 포함하는 무선 통신을 통해 사용자 입력 또는 예약 정보에 대응하는 제어 명령이 탑재된 무선 신호를 송출하게 하고, 이를 가정용 전자기기(10)에서 수신하여 해당 제어 명령에 대응하는 동작을 수행하게 함으로써, 가정용 전자기기(10)를 원격으로 제어할 수 있다.
한편, 상기 가정용 전자기기 제어부(140)는 인터넷 망을 이용하여 가정용 전자기기(10)로 제어 명령을 전송하는 형태로 구현되거나, 가정용 전자기기(10)를 통합 관리하는 별도의 컨트롤러가 존재할 경우에는 해당 컨트롤러로 제어 명령을 전송할 수도 있다.
또한, 상기 가정용 전자기기 제어부(140)는 가정용 전자기기(10)의 종류 별로 각각 구비되며, 예컨대, 전등(11)의 제어 및 예약 정보를 설정하는 전등 제어부(141)와, TV(television, 텔레비전)(12)의 제어 및 예약 정보를 설정하는 TV 제어부(142) 및 보일러(13)의 제어 및 예약 정보를 설정하는 보일러 제어부(143)를 포함할 수 있다. 이외에도, 오디오, 에어컨, 수도 제어장치, 가스 제어장치 및 보안 장치를 각각 제어하는 가정용 전자기기 제어부(140)가 더 구비될 수도 있다.
이하에서는, 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템을 이용하여, 사용자의 출입 여부에 따라 가정용 전자기기를 동작시키는 과정을 설명한다.
도 2에서 도시된 바와 같이, 사용자는 사용자 단말(20)을 이용하여 외출 후 귀가하였을 때 동작시키고자 하는 가정용 전자기기(10)를 예약할 수 있다(a).
이때, 도 1을 참조하여 설명한 바와 같이, 사용자는 사용자 단말(20)에 설치된 전등 제어부(141) 및 TV 제어부(142)를 동작시켜, 전등 제어부(141)에는 전등(11)을 켜도록 예약 정보를 설정하고 TV 제어부(142)는 특정 채널로 TV(12)를 켜도록 예약 정보를 설정한 후 종료한다. 또한, 사용자는 홈 오토메이션 활성화부(130)를 동작시켜, 사용자의 귀가 시 전등 제어부(141) 및 TV 제어부(142)를 활성화시키도록 설정하는 과정이 이루어질 수 있다.
다시 도 2를 참조하여, 사용자가 실내에서 벗어나거나 외출을 한 후(b), 해당 사용자가 귀가하여 실내로 진입하고자 하면(c), 상기 얼굴인식 장치(110)가 사용자의 얼굴을 인식하여 인증을 수행하고 그 인증 결과에 따라 도어락의 잠금 상태를 해제하며 인증을 완료한 대상의 사용자 정보를 상기 얼굴인식 서버(120)로 전송하며, 상기 얼굴인식 서버(120)는 사용자 정보를 송신하여 해당 사용자 정보와 매칭되는 사용자 단말(20)로 출입 정보를 전송하는 과정이 이루어진다.
더불어, 사용자 단말(20)에 설치된 홈 오토메이션 활성화부(130)는 상기 얼굴인식 서버(120)로부터 출입 정보를 수신하여 사용자의 실내 출입을 확인하고, 사전에 설정된 전등 제어부(141) 및 TV 제어부(142)를 활성화한다.
이로 인해, 사용자가 실내로 진입하는 시점에는(d), 사용자 단말(20)에 설치된 전등 제어부(141) 및 TV 제어부(142)가 동작하면서, 각각의 예약 정보에 따라 전등(11)을 켜고 사전에 예약된 특정 채널로 TV(12)를 켜도록 제어하는 과정이 이루어지게 된다.
따라서, 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템은 사용자의 출입 여부에 따라 가정용 전자기기(10)를 동작시킬 수 있으므로, 사용자의 실내 출입이 이루어지지 않은 상황에서 불필요하게 가정용 전자기기(10)가 동작하여 발생하는 전기 낭비를 방지할 수 있다.
또한, 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템은 사용자 또는 가족 구성원이 외출 후 귀가하면, 각각의 취향에 맞게 설정한 예약 정보에 맞게 가정용 전자기기(10)를 켜거나 예약된 동작을 수행하게 할 수 있다.
도 3은 본 발명의 일실시예에 따른 홈 오토메이션 제어 방법을 설명하기 위한 도면이다.
도 3을 참조하여, 본 발명의 일실시예에 따른 홈 오토메이션 제어 시스템에서 수행되는 홈 오토메이션 제어 방법을 설명한다.
다만, 도 3에 도시된 홈 오토메이션 제어 방법에서 수행되는 기능은 모두 도 1 및 도 2를 참조하여 설명한 홈 오토메이션 제어 시스템에서 수행되므로, 명시적인 설명이 없어도, 도 1 및 도 2를 참조하여 설명한 모든 기능은 본 발명의 바람직한 실시예에 따른 홈 오토메이션 제어 방법에서 수행되고, 도 3을 참조하여 설명하는 모든 기능은 본 발명의 바람직한 실시예에 따른 홈 오토메이션 제어 시스템에서 그대로 수행됨을 주의해야 한다.
먼저, 사용자는 홈 오토메이션 활성화부를 통해, 사용자의 실내 출입이 확인될 때 실시간으로 활성화하고자 하는 가정용 전자기기 제어부를 설정하여 저장한다(S110).
이때, 상기 홈 오토메이션 활성화부는 사용자가 소지한 사용자 단말에 설치되어 사용자 입력에 따라 상기 가정용 전자기기 제어부의 설정 및 관리가 가능하도록 구비될 수 있다.
또한, 가정용 전자기기는 전등, 보일러, 오디오, TV, 에어컨, 수도 제어장치, 가스 제어장치 및 보안 장치를 포함할 수 있으며, 상기 가정용 전자기기 제어부는 상기 전등, 상기 보일러, 상기 오디오, 상기 TV, 상기 에어컨, 상기 수도 제어장치, 상기 가스 제어장치 및 상기 보안 장치 별로 각각 구비되고 온-오프 또는 특정 동작의 수행을 위한 예약 정보를 설정할 수 있도록 구비된다.
즉, 사용자는 상기 가정용 전자기기 제어부를 통해 각각의 가정용 전자기기에 대한 예약 정보를 설정하고, 상기 홈 오토메이션 활성화부를 통해 사용자가 귀가하거나 실내에 존재하고 있을 때 활성화하고자 하는 특정 가정용 전자기기 제어부를 설정할 수 있다.
다음, 사용자가 외출한 후 귀가하여 실내로 진입하고자 할 때, 얼굴인식 장치가 사용자의 인증을 수행한다(S120).
이때, 상기 얼굴인식 장치는 사용자의 얼굴을 촬영한 인증용 영상을 기저장된 복수의 얼굴 영상과 비교하여 사용자의 실내 출입을 위한 인증을 수행하고, 인증 결과에 따라 도어락을 해제하거나 인증을 완료한 사용자 정보를 얼굴인식 서버로 전송하게 된다.
그 다음, 상기 얼굴인식 서버는 상기 얼굴인식 장치로부터 인증을 완료한 사용자 정보를 전송받은 후, 해당 사용자 정보와 연동된 사용자 단말로 사용자의 실내 출입 여부를 알리는 출입 정보를 전송한다(S130).
그 다음에는, 사용자 단말에 설치된 홈 오토메이션 활성화부가 상기 얼굴인식 서버로부터 출입 정보를 수신하고, 상기 출입 정보를 통해 사용자의 실내 출입이 확인되면 상기 가정용 전자기기 제어부를 실시간으로 활성화한다(S140).
이때, 상기 홈 오토메이션 활성화부는 상기 제 110단계에서 설정된 가정용 전자기기 제어부를 활성화시킬 수 있다.
그 다음에는, 상기 가정용 전자기기 제어부가 동작하여, 사용자로부터 사전에 설정된 예약 정보에 따라 가정용 전자기기를 제어한다(S150).
이때, 상기 가정용 전자기기 제어부는 기설정된 예약 정보에 따라 가정용 전자기기를 온-오프하거나 예약 동작을 수행하도록 원격으로 제어하게 되는데, 예컨대, 특정 위치의 전등을 켜거나 기설정된 온도로 에어컨을 동작시키고 사전에 설정된 채널로 TV를 켜게 된다.
즉, 사용자의 출입 여부에 따라 해당 사용자가 사전에 설정한 예약 정보에 맞게 가정용 전자기기의 예약 동작이 이루어지게 함으로써, 사용자의 편의성을 향상시키고 불필요하게 전기를 낭비하지 않도록 방지할 수 있다.
이상에서는 본 발명의 바람직한 실시예를 예시적으로 설명하였으나, 본 발명의 범위는 이와 같은 특정 실시예에만 한정되는 것은 아니며, 특허청구범위에 기재된 범주 내에서 적절하게 변경 가능한 것이다.
110 : 얼굴인식 장치
120 : 얼굴인식 서버
130 : 홈 오토메이션 활성화부
140 : 가정용 전자기기 제어부

Claims (10)

  1. 사용자의 얼굴을 촬영한 인증용 영상을 기저장된 복수의 얼굴 영상과 비교하여, 실내 출입을 위한 인증을 수행하는 얼굴인식 장치;
    상기 얼굴인식 장치로부터 인증을 완료한 사용자 정보를 수신하고, 사용자 정보와 연동된 사용자 단말로 사용자의 실내 출입 여부를 알리는 출입 정보를 전송하는 얼굴인식 서버; 및
    상기 얼굴인식 서버로부터 출입 정보를 수신하여 사용자의 실내 출입을 확인하면, 기설정된 예약 정보에 따라 가정용 전자기기를 제어하는 사용자 단말;을 포함하는 얼굴인식을 이용한 홈 오토메이션 제어 시스템.
  2. 제 1항에 있어서,
    상기 사용자 단말은
    상기 얼굴인식 서버로부터 출입 정보를 수신하며, 사용자의 실내 출입이 확인되면 가정용 전자기기 제어부를 실시간으로 활성화하는 홈 오토메이션 활성화부; 및
    상기 홈 오토메이션 활성화부에 의해 활성화되면, 사용자로부터 사전에 설정된 예약 정보에 따라 가정용 전자기기를 제어하는 가정용 전자기기 제어부;를 포함하는 얼굴인식을 이용한 홈 오토메이션 제어 시스템.
  3. 제 2항에 있어서,
    상기 가정용 전자기기 제어부는 가정용 전자기기 별로 각각 구비되어 사용자 단말에 설치되고, 상기 예약 정보에 따라 가정용 전자기기를 온-오프하거나 예약된 동작을 수행하도록 원격으로 제어하는 것을 특징으로 하는 얼굴인식을 이용한 홈 오토메이션 제어 시스템.
  4. 제 2항에 있어서,
    상기 가정용 전자기기는 전등, 보일러, 오디오, TV, 에어컨, 수도 제어장치, 가스 제어장치 및 보안 장치 중 적어도 하나를 포함하는 것을 특징으로 하는 얼굴인식을 이용한 홈 오토메이션 제어 시스템.
  5. 제 2항에 있어서,
    상기 홈 오토메이션 활성화부에는 사용자의 실내 출입이 확인될 때, 실시간으로 활성화하고자 하는 가정용 전자기기 제어부가 사전에 설정되어 저장되는 것을 특징으로 하는 얼굴인식을 이용한 홈 오토메이션 제어 시스템.
  6. 얼굴인식을 이용한 홈 오토메이션 제어 시스템에서 수행되는 홈 오토메이션 제어 방법으로서,
    (1) 얼굴인식 장치가, 사용자의 얼굴을 촬영한 인증용 영상을 기저장된 복수의 얼굴 영상과 비교하여 사용자의 실내 출입을 위한 인증을 수행하는 단계;
    (2) 얼굴인식 서버가, 상기 얼굴인식 장치로부터 인증을 완료한 사용자 정보를 수신하고 사용자 정보와 연동된 사용자 단말로 사용자의 실내 출입 여부를 알리는 출입 정보를 전송하는 단계; 및
    (3) 사용자 단말이, 상기 얼굴인식 서버로부터 출입 정보를 수신하고 기설정된 예약 정보에 따라 가정용 전자기기를 제어하는 단계;를 포함하는 홈 오토메이션 제어 방법.
  7. 제 6항에 있어서,
    상기 제 (3)단계의 사용자 단말에는 얼굴인식 서버로부터 출입 정보를 수신하는 홈 오토메이션 활성화부 및 상기 홈 오토메이션 활성화부에 의해 활성화되는 가정용 전자기기 제어부가 구비되고,
    상기 제 (3)단계는,
    (3-1) 상기 홈 오토메이션 활성화부가, 상기 얼굴인식 서버로부터 출입 정보를 수신하여 사용자의 실내 출입을 확인한 후 상기 가정용 전자기기 제어부를 실시간으로 활성화하는 단계; 및
    (3-2) 상기 가정용 전자기기 제어부가, 사용자로부터 사전에 설정된 예약 정보에 따라 가정용 전자기기를 제어하는 단계;를 포함하는 홈 오토메이션 제어 방법.
  8. 제 7항에 있어서,
    상기 제 (3-2)단계에서 상기 가정용 전자기기 제어부는, 가정용 전자기기 별로 각각 구비되어 상기 예약 정보에 따라 가정용 전자기기를 온-오프하거나 예약된 동작을 수행하도록 원격으로 제어하는 것을 특징으로 하는 얼굴인식을 이용한 홈 오토메이션 제어 방법.
  9. 제 7항에 있어서,
    상기 제 (3-2)단계에서 상기 가정용 전자기기는 전등, 보일러, 오디오, TV, 에어컨, 수도 제어장치, 가스 제어장치 및 보안 장치 중 적어도 하나를 포함하는 것을 특징으로 하는 얼굴인식을 이용한 홈 오토메이션 제어 방법.
  10. 제 7항에 있어서,
    상기 제 (1)단계 이전에,
    (A) 상기 홈 오토메이션 활성화부에, 사용자의 실내 출입이 확인될 때 실시간으로 활성화하고자 하는 가정용 전자기기 제어부를 설정하여 저장하는 단계;를 더 포함하는 것을 특징으로 하는 얼굴인식을 이용한 홈 오토메이션 제어 방법.
KR1020160004192A 2016-01-13 2016-01-13 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법 KR101784990B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160004192A KR101784990B1 (ko) 2016-01-13 2016-01-13 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법
PCT/KR2017/000249 WO2017122973A1 (ko) 2016-01-13 2017-01-09 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법
US16/068,969 US20190028290A1 (en) 2016-01-13 2017-01-09 Home automation control system using face recognition, and method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160004192A KR101784990B1 (ko) 2016-01-13 2016-01-13 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20170084842A true KR20170084842A (ko) 2017-07-21
KR101784990B1 KR101784990B1 (ko) 2017-10-12

Family

ID=59311316

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160004192A KR101784990B1 (ko) 2016-01-13 2016-01-13 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법

Country Status (3)

Country Link
US (1) US20190028290A1 (ko)
KR (1) KR101784990B1 (ko)
WO (1) WO2017122973A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108388141A (zh) * 2018-03-21 2018-08-10 特斯联（北京）科技有限公司 一种基于人脸识别的智慧家庭控制系统和方法
CN109064597A (zh) * 2018-07-25 2018-12-21 安徽新华学院 一种校园宿舍用门禁控制系统

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109326016A (zh) * 2018-07-18 2019-02-12 广东工业大学 一种基于云服务器的远程智能门禁控制装置和控制方法
CN109615757B (zh) * 2019-02-27 2021-08-03 西安艾润物联网技术服务有限责任公司 访客门禁管理方法、系统及存储介质
US11137770B2 (en) 2019-04-30 2021-10-05 Pixart Imaging Inc. Sensor registering method and event identifying method of smart detection system
US11172297B2 (en) 2019-04-30 2021-11-09 Pixart Imaging Inc. Operating method of smart audio system
US11334042B2 (en) * 2019-04-30 2022-05-17 Pixart Imaging Inc. Smart home control system for monitoring leaving and abnormal of family members
US11381418B2 (en) * 2019-11-14 2022-07-05 Pixart Imaging Inc. Smart home control system
US11411762B2 (en) * 2019-04-30 2022-08-09 Pixart Imaging Inc. Smart home control system
US11817194B2 (en) 2019-04-30 2023-11-14 Pixart Imaging Inc. Smart control system
US10776613B1 (en) * 2019-09-13 2020-09-15 Royal Caribbean Cruises Ltd. Facial recognition system and methods for identity credentialing and personalized services
US11170593B1 (en) 2020-05-05 2021-11-09 Royal Caribbean Cruises Ltd. Multifunction smart door device
CN113820963B (zh) * 2021-10-14 2023-10-03 深圳守正出奇科技有限公司 一种基于物联网的智能家居控制方法及系统

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100682485B1 (ko) * 2003-05-02 2007-02-15 (주)니트 젠 생체인증 출입통제 시스템 및 그 제어방법
KR100419957B1 (ko) * 2003-06-30 2004-02-25 주식회사 가드텍 출입 통제 시스템과 연동하는 정보 보안 시스템 및 그제어 방법
KR100980807B1 (ko) * 2008-03-07 2010-09-10 주식회사 베스트엔지니어링앤드컨설팅솔루션 모바일 장치를 이용하여 획득한 생체정보를 이용하여출입문의 개폐관리를 하는 시스템 및 그 방법
CN103204838B (zh) * 2012-01-13 2017-06-09 北京盛诺基医药科技有限公司 多羟基苯并吡喃酮类化合物的合成及其抗肿瘤作用
US9378601B2 (en) * 2012-03-14 2016-06-28 Autoconnect Holdings Llc Providing home automation information via communication with a vehicle
US9978238B2 (en) * 2012-09-21 2018-05-22 Google Llc Visitor options at an entryway to a smart-home
KR101552887B1 (ko) * 2013-12-10 2015-09-14 동부대우전자 주식회사 사용자 인증 기반의 조리 제어 방법 및 그 장치
KR101476259B1 (ko) * 2014-03-26 2014-12-24 엠넥스텍 주식회사 휴대용복합카드를 이용한 빌딩 에너지 관리 서비스 제공 시스템 및 방법
US10274909B2 (en) * 2014-04-25 2019-04-30 Vivint, Inc. Managing barrier and occupancy based home automation system
US10073428B2 (en) * 2015-12-31 2018-09-11 Echostar Technologies International Corporation Methods and systems for control of home automation activity based on user characteristics

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108388141A (zh) * 2018-03-21 2018-08-10 特斯联（北京）科技有限公司 一种基于人脸识别的智慧家庭控制系统和方法
CN109064597A (zh) * 2018-07-25 2018-12-21 安徽新华学院 一种校园宿舍用门禁控制系统

Also Published As

Publication number Publication date
WO2017122973A1 (ko) 2017-07-20
KR101784990B1 (ko) 2017-10-12
US20190028290A1 (en) 2019-01-24

Similar Documents

Publication Publication Date Title
KR101784990B1 (ko) 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법
US9866892B2 (en) IR pairing for RF4CE remote controls
EP2932650B1 (en) Apparatus for controlling devices in home network system
US20100321151A1 (en) Home automation security system and method
US8942694B2 (en) Digital device control system using smart phone
RU2620992C2 (ru) Дистанционное управление и системы дистанционного управления
US20140192197A1 (en) Method and apparatus for controlling access to a home using visual cues
WO2016110003A1 (zh) 一种无线遥控的控制方法及系统
EP2892244B1 (en) Equipment control device, equipment control method, and program
CN108141637A (zh) 用于在智能媒体显示环境中控制媒体显示的方法和系统
US20170208363A1 (en) Methods and Systems for Automatic Media Output Based on User Proximity
US11671650B2 (en) Set-top box with enhanced behavioral controls and system and method for use of same
KR102004221B1 (ko) 멀티미디어 채팅을 통한 IoT 기반의 전원 릴레이 제어시스템 및 그 방법
US20190103116A1 (en) Interactive electronic device control system, interactive electronic device, and interactive electronic device controlling method
US9847017B2 (en) Remote control apparatus commanded wirelessly by a user device for controlling a target device
GB2563749A (en) Home automation control system using face recognition, and method therefor
KR102145812B1 (ko) 블록체인을 이용한 가정의 전자제품 원격 제어 시스템
KR20200093827A (ko) 챗봇을 이용한 홈 오토메이션 시스템
KR102145813B1 (ko) 블록체인을 이용한 가정의 전자제품 원격 제어 방법
KR101702963B1 (ko) 사물 인터넷 통합제어장치
CN113687605A (zh) 家电设备的控制方法
CN116974209A (zh) IoT设备的控制方法、设备、IoT系统以及存储介质
KR20160062958A (ko) 대기전력 차단을 위한 스마트 전원 제어 시스템 및 이의 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant