KR20060010225A - 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법 - Google Patents

얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법 Download PDF

Info

Publication number
KR20060010225A
KR20060010225A KR1020040058852A KR20040058852A KR20060010225A KR 20060010225 A KR20060010225 A KR 20060010225A KR 1020040058852 A KR1020040058852 A KR 1020040058852A KR 20040058852 A KR20040058852 A KR 20040058852A KR 20060010225 A KR20060010225 A KR 20060010225A
Authority
KR
South Korea
Prior art keywords
visitor
home
emotional state
facial expression
camera
Prior art date
Application number
KR1020040058852A
Other languages
English (en)
Inventor
박점배
Original Assignee
(주)바로텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)바로텍 filed Critical (주)바로텍
Priority to KR1020040058852A priority Critical patent/KR20060010225A/ko
Publication of KR20060010225A publication Critical patent/KR20060010225A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2827—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/285—Generic home appliances, e.g. refrigerators

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 출입문에 설치된 카메라를 통해 인식한 방문객의 얼굴표정과 미리 입력된 방문객의 바이오리듬을 기초로 하여 방문객의 감정 상태를 파악한 후, 방문객의 감정 상태에 따라 실내의 가전 기기들을 자동으로 조절하는 기능을 갖춘 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법에 관한 것으로, 상기 시스템은, 방문자의 얼굴을 촬영하기 위해 출입문 근방에 설치된 카메라와, 상기 카메라에서 촬영된 방문자 얼굴표정과 방문자의 바이오리듬을 바탕으로 방문자의 감정 상태를 판단하는 홈 서버와, 방문자의 감정 상태에 따라 가전 기기들을 제어하기 위한 가전기기 제어기와, 상기 가전기기 제어기에 의해 자동 제어되는 가전 기기들을 포함하는 것을 특징으로 한다. 따라서, 실내의 가전 기기들의 작동 상태를 방문자의 감정 상태에 맞춰 최적 상태로 제어할 수 있으므로 방문자는 자신의 감정 상태에 따라 최적의 조건으로 조절된 실내로 진입할 수 있다.
홈 네트워크, 얼굴표정, 바이오리듬, 가전 기기, 감정, 방문자, 카메라

Description

얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법{Home network system by using a face expression recognition and control method of it}
도 1은 본 발명에 의한 얼굴표정 인식 홈 네트워크 시스템을 개략적으로 도시한 구성도이다.
도 2는 본 발명에 의한 얼굴표정 인식 홈 네트워트 시스템의 제어 방법을 설명하기 위한 흐름도이다.
*도면의 주요부분에 대한 부호의 설명*
100 : 카메라 110 : 얼굴표정 송신장치
200 : 얼굴표정 수신장치 210 : 바이오리듬 입력부
220 : 홈 서버 230 : 가전기기 제어기
240 : 스피커
본 발명은 홈 네트워크 시스템 및 그 제어 방법에 관한 것으로, 특히 출입문에 설치된 카메라를 통해 인식한 방문객의 얼굴표정과 미리 입력된 방문객의 바이오리듬을 기초로 하여 방문객의 감정 상태를 파악한 후, 방문객의 감정 상태에 따 라 실내의 가전 기기들을 자동으로 조절하는 기능을 갖춘 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법에 관한 것이다.
일반적으로, 텔레비젼 수상기, 브이씨알, 오디오 기기, 보일러와 에어컨 등과 같은 냉난방 시스템, 전자레인지와 전기밥솥, 식기 건조기, 식기 세척기와 같은 주방용 기기 및 세탁기 등과 같은 가정용 기기는 단독 제어 방식으로 동작될 수 있도록 되어 있다.
그러나, 최근에는 가정용 기기를 통합하여 제어하고자 하는 시도들이 있으며, 또한, 가전 기기와 홈 오토메이션 기기와의 연계를 통해 가정 내 모든 전자 기기들을 원격으로 제어하도록 하는 기술이 다각도로 모색되고 있다.
텔레비전, 비디오, 오디오, 냉장고, 세탁기, 전자레인지, 컴퓨터, 휴대용 단말기, 전화기 등 가정에서 사용하는 모든 전기, 전자 제품들을 전화선이나 무선으로 연결해 서로 정보를 주고받으면서 작동시키는 기술을 홈 네트워크(home network)라 한다. 이는, 모든 가전 기기들이 본래의 고유 기능은 물론, 인터넷을 통한 정보활용, 원격제어, 모니터링, 보안에 이르는 첨단 기능까지 중앙의 홈서버를 통해 자동으로 조절되고 통제되며 상호교류하는 시스템이다. 사물과 사물이 통신하여 스스로 제어하는 것을 가능하게 하는 것으로, 예를 들어, 잠을 잘때 홈 네트워크를 취침 모드로 바꾸면 홈서버가 알아서 텔레비젼, 비디오, 전등 등을 모두 끄고 보일러의 온도도 적절히 맞추며 알람도 자동으로 맞추는 등과 같은 기능이다.
한편, 음성인식을 이용한 홈 네트워크 시스템은 전화기나 휴대폰 등을 이용하여 실내의 가정용 기기들의 상태를 확인하거나 원격 조절하는 것으로, 사용자가 가정을 벗어나 외부에서 가정용 기기들의 상태를 확인할 수 있으므로 안전 사고를 미연에 방지할 수 있을 뿐만 아니라, 귀가 전에 냉난방 기기나 전기밥솥 등의 가정용 기기들을 미리 작동시킬 수 있어 귀가 시 안락한 실내환경을 접할 수 있도록 한다.
상기한 바와 같은 홈 네트워크 시스템은 가정용 전기, 전자 기기들을 제어하기 위해서 사용자가 홈 네트워크 시스템에 음성을 입력하거나 등의 수동적인 조처를 취해야 한다는 특징이 있다. 생활이 편리해질 수록 소비자는 더욱 편리한 전자 기기들을 선호하고, 이와 같은 추세는 소비자가 수동적으로 홈 네트워크 시스템을 작동시키지 않더라도 홈 네트워크 시스템이 자동으로 모든 상황을 판단하여 가정용 전자 기기들을 제어하는 수준으로까지 홈 네트워크 시스템의 진보를 촉진하고 있다.
본 발명의 목적은 출입문에 장착된 카메라에서 인식한 방문자의 얼굴 표정과 미리 입력된 방문자의 바이오리듬을 기초로 하여 방문자의 감정 상태를 파악한 후, 이 감정 상태에 맞도록 실내의 전자 기기들을 자동으로 제어하는 얼굴표정 인식 홈 네트워크 시스템을 제공하는데 있다.
본 발명의 다른 목적은 상기한 얼굴표정 인식 홈 네트워크 시스템을 제어하는데 있어서 가장 적합한 방법을 제공하는데 있다.
상기 목적을 달성하기 위한, 본 발명에 의한 얼굴표정 인식 홈 네트워크 시 스템은, 방문자의 얼굴을 촬영하기 위해 출입문 근방에 설치된 카메라와, 상기 카메라에서 촬영된 방문자 얼굴표정과 방문자의 바이오리듬을 바탕으로 방문자의 감정 상태를 판단하는 홈 서버와, 방문자의 감정 상태에 따라 가전 기기들을 제어하기 위한 가전기기 제어기와, 상기 가전기기 제어기에 의해 자동 제어되는 가전 기기들을 포함하는 것을 특징으로 한다.
본 발명에 의한 일 실시예에 의하면, 방문자의 감정 상태를 실내의 대기자에게 알려주기 위한 방송용 스피커가 상기 홈 서버에 설치되어 있는 것이 바람직하다.
또한, 상기 홈 서버에 방문자의 바이오리듬을 산출하기 위한 바이오리듬 입력부를 더 구비하는 것이 바람직하다.
본 발명에 의한 일 실시예에 의하면, 상기 카메라는 출입문의 초인종이나 출입키 삽입구 근방에 설치되어 있는 것이 바람직하며, 상기 카메라는 방문자가 초인종을 누르거나 출입키 삽입구로 키를 삽입할 때 자동으로 방문자의 얼굴에 촛점이 맞춰지도록 설계되어 설치되어 있는 것이 바람직하다.
상기 다른 목적을 달성하기 위한, 본 발명에 의한 얼굴표정 인식 홈 네트워크 시스템의 제어 방법은, 방문자가 출입문의 초인종을 누르거나 출입키 삽입구로 키를 삽입하는 순간 방문자의 얼굴을 촬영하는 단계와, 촬영된 방문자의 얼굴표정과 방문자의 바이오리듬을 바탕으로 방문자의 감정 상태를 판단하는 단계와, 방문자의 감정 상태에 맞춰 가전 기기들을 자동으로 제어하는 단계를 포함하는 것을 특징으로 한다.
이때, 방문자의 감정 상태를 판단하여 가전 기기들을 자동으로 제어함과 동시에, 스피커를 통해 방문자의 감정 상태를 방송하는 단계를 더 포함하는 것이 바람직하다.
따라서, 본 발명에 의하면, 실내의 가전 기기들의 작동 상태를 방문자의 감정 상태에 맞춰 최적 상태로 제어할 수 있으므로 방문자는 자신의 감정 상태에 따라 최적의 조건으로 조절된 실내로 진입할 수 있다.
이하, 첨부한 도면을 참조하여, 본 발명에 의한 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법에 대해 더욱 상세하게 설명하고자 한다.
도 1은 본 발명에 의한 얼굴표정 인식 홈 네트워크 시스템을 개략적으로 도시한 구성도이다.
본 발명에 의한 얼굴표정 인식 홈 네트워크 시스템은, 크게, 방문자를 촬영하기 위해 메인 현관, 즉 출입문에 장착된 카메라(100), 카메라에서 촬영된 방문자의 얼굴표정을 홈 서버(220)로 전송하기 위한 얼굴표정 송신장치(110), 상기 얼굴표정 송신장치에서 전송된 얼굴표정을 수신하기 위한 얼굴표정 수신장치(200), 방문 예정자들의 바이오리듬을 입력할 수 있는 바이오리듬 입력부(210), 상기 얼굴표정 수신장치(200)와 바이오리듬 입력부(210)로 부터 각종 데이터를 입력받아 이를 토대로 방문자의 감정 상태를 파악한 후 가전 기기들을 제어하기 위한 홈 서버(220), 상기 홈 서버(220)의 명령에 따라 가전 기기들을 제어하기 위한 가전 기기 제어기(230), 상기 가전 기기 제어기(230)에 의해 제어되는 각종 가전 기기들(231 내지 237), 상기 홈 서버(220)에서 판단한 방문자의 감정 상태를 실내의 대기자에 게 방송하여 알려주기 위한 스피커(240)로 구성되어 있다.
상기 가전 기기 제어기(230)에 의해 제어되는 가전 기기로는, 예컨대 후각을 자극하여 사람의 기분을 조절할 수 있는 향기 분출기(231), 실외의 밝은 햇살을 실내로 들이거나 실외의 우울한 분위기가 실내로 유입되는 것을 차단할 수 있는 브라인더(232), 실내의 조명의 밝기를 조절할 수 있는 전등(233), 방문자의 평소 음악 취향에 따라 자동으로 음악을 선택할 수 있는 오디오(234), 실내의 온도를 쾌적하게 유지할 수 있는 냉,난방기(235), 상황에 따라 표시되는 그림이 바뀔 수 있는 액자(236), 실내의 공기를 청정하게 유지하는 공기청정기(237) 등이 있다.
언급한 가전 기기들(231 내지 237)은 그 사용에 따라 사람의 기분에 영향을 미칠 수 있는 것들로, 본 발명의 일 실시예서는 언급한 바와 같은 기기들을 예를 들어 설명하였으나, 가전 기기 제어기(230)에 의해 제어가 가능하고 사람의 기분에 영향을 미칠 수 있는 다른 가전 기기들을 추가적으로 사용하여 시스템을 구성할 수도 있음은 물론이다.
카메라(100)는 건물의 출입문 근방, 예컨대 초인종이나 출입키 삽입구 근방에 설치되며, 건물을 방문하는 방문자가 출입문 앞에 서서 초인종을 누르거나 출입키 삽입구에 키(key)를 삽입할 때 카메라의 촛점이 자동으로 방문자의 얼굴에 맞춰지도록 설계되어 있다.
상기 카메라(100)를 통해 촬영된 방문자의 얼굴은 여러 장치를 거치며 데이타화된 후 얼굴표정 송신장치(110)를 통해 건물 내에 설치되어 있는 얼굴표정 수신장치(200)로 전송된다. 이때, 상기 얼굴표정 송신장치(110)와 얼굴표정 수신장치 (200)는 무선으로 연결되어 있음이 바람직하나, 건물의 구조에 따라 유선으로 연결되도록 설계할 수도 있음은 물론이다.
홈 서버(220)에는 평소 집을 오고가는 가족, 친지 또는 지인들의 사진들이 입력되어 있어, 상기 얼굴표정 수신장치(200)를 통해 방문자의 얼굴에 대한 데이타가 수신되면 수신된 데이타와 미리 입력/ 저장되어 있는 사진들을 비교하여 방문자가 누구인지를 판단한다. 또한, 홈 서버(220)는 상기 카메라(100)에서 촬영된 방문자의 얼굴의 찡그러짐 정도, 주름의 위치 등을 분석하여, 예컨대 "굳은 표정", "밝은 표정" 등과 같이 방문자의 표정 상태를 판단한다.
한편, 바이오리듬 입력부(210)는 평소 자주 집을 오고가는 가족, 친지 또는 지인들의 바이오리듬을 입력하기 위한 것으로, 통상 방문자의 생년월일을 입력하면 홈 서버(220)에서 자동으로 바이오리듬이 산출되도록 되어 있다. 상기 바이오리듬 입력부(210)를 통해 평소 자주 집을 오고가는 방문자의 바이오리듬을 입력해 놓으면 홈 서버(220)는 이 데이타를 저장해 놓는다.
건물의 출입문, 예컨대 가정집의 주현관이나 대문 앞에 방문자가 도달하면, 출입문 근방에 설치되어 있는 카메라(100)는 방문자를 촬영한다. 이때, 상기 카메라(100)는 무인 감시 카메라로써 평소에도 출입문 앞의 상황을 촬영하고 있음은 물론이다. 상기 방문자가 출입문을 열기 위해 시도하거나(출입키 삽입구에 키(key) 삽입) 출입문의 초인종을 누르면, 카메라(100)는 방문자의 얼굴을 찾아 촛점을 맞춘 후 이를 촬영하기 시작한다. 이때, 방문자의 정확한 감정 상태를 얻기 위해, 짧은 시간 안에 여러 컷(cut)의 사진을 촬영한다.
카메라(100)에서 촬영된 여러 컷의 사진은 다양한 전자 장치를 거치며 데이타화 된 후, 상기 카메라(100)에 내장되어 있는 얼굴표정 송신장치(110)를 통해 건물 내에 설치되어 있는 얼굴표정 수신장치(200)로 전송된다.
건물 내, 예컨대 가정집의 실내에 설치되어 있는 얼굴표정 수신장치(200)는 방문자의 얼굴 데이타를 전송받은 후 이를 홈 서버(220)로 전달하고, 홈 서버(220)는 얼굴표정 수신장치(200)에서 전송한 데이타와 미리 입력되어 있는 사진들을 비교하여 방문자가 누군인지를 판단함과 동시에, 방문자 얼굴의 찡그러짐 정도, 주름의 위치 등으로 방문자의 표정 상태를 판단한다. 한편, 이와 동시에 홈 서버(220)에 방문자의 생년월일이 저장되어 있는 경우, 상기 홈 서버(220)는 방문자의 바이오리듬을 산출한다.
홈 서버(220)는 카메라(100)에서 촬영된 방문자의 얼굴 표정과 방문자의 바이오리듬을 기초로 하여 방문자의 감정 상태를 판단하는데, 예컨대 카메라(100)에서 촬영된 방문자의 얼굴 표정이 굳은 상태인데다 방문자의 바이오리듬의 감정 상태가 최저점인 경우엔 상기 방문자의 감정 상태를 "좋지 않음"으로 판단하고, 카메라(100)에서 촬영된 방문자의 얼굴 표정은 굳은 상태인데 방문자의 바이오리듬의 감정 상태는 최고점인 경우엔 상기 방문자의 감정 상태를 "보통"으로 판단하며, 카메라(100)에서 촬영된 방문자의 얼굴 표정이 밝은 상태인데다 방문자의 바이오리듬의 감정 상태가 최고점인 경우엔 방문자의 감정 상태를 "아주 좋음"으로 판단한다.
한편, 홈 서버(220)는 방문자의 얼굴 표정과 바이오리듬에 의해 판단된 방문자의 감정 상태를 바탕으로 가전 기기들(231 내지 237) 제어를 위한 제어 신호를 가전 기기 제어기(230)로 전달한다. 상기 가전 기기 제어기(230)는 홈 서버(220)에서 전달된 명령에 따라 실내의 여러 가전 기기들(231 내지 237)의 작동을 제어하는데, 예컨대 방문자의 감정 상태가 "좋지 않음"으로 판단되면 홈 서버(220)는 가전 기기 제어기(230)에 "좋지 않음"에 해당하는 프로그램에 따라 가전 기기들을 제어하도록 제어 신호를 보내고, 가전 기기 제어기(230)는 이 제어 신호에 따라 각 가전 기기들(231 내지 237)의 작동을 제어한다.
가전 기기 제어기(230)에는 각 감정 모드에 따른 가전 기기들의 제어 프로그램이 입력되어 있다. 예컨대, "좋지 않음" 감정 모드의 경우, 향기 분출기(231)는 방문자의 감정이 편안해지도록 강하게 향기를 분출시키고, 브라인더(232)는 낮의 경우 활짝 열리도록 조절되고, 전등(233)은 밤의 경우 밝게 조명되도록 제어되고, 오디오(234)는 방문자의 평소 취향에 따라 경괘한 노래를 틀도록 하며, 냉,난방기(235)는 실내 온도를 적절하게 유지하도록 제어되고, 액자(236)는 평소 좋아하는 그림이 나타나도록 변경되며, 공기 청정기(237)는 공기 청정 기능이 최강으로 운전되도록 하는 등으로 각 가전 기기들은 미리 설정되어 있는 프로그램에 따라 제어된다.
한편, 상기 홈 서버(220)에는 스피커(240)가 장착되어 있는데, 상기 스피커(240)는 방문자의 감정 상태를 실내의 대기자에게 방송하여 방문자의 상태에 대해 사전 지식을 갖도록 한다. 예컨대, 방문자의 감정 상태가 "좋지 않음"으로 판단되는 경우, "○○○씨가 방문하였습니다. 감정 상태가 좋지 않습니다. 실내의 분위기를 밝게하여 맞이해 주십시오" 와 같은 내용을 방송함으로써 방문자가 출입문에서 현관으로까지 오는 시간동안 실내의 대기자가 방문자의 기분에 대한 사전 지식을 갖도록 한다.
따라서, 본 발명에 의한 얼굴표정 인식 홈 네트워크 시스템에 의하면, 카메라에 촬영된 방문자의 얼굴표정과 홈 서버에 입력되어 있는 방문자의 바이오리듬을 기초로 하여 방문자의 감정 상태를 판단한 후, 이를 실내의 대기자에게 스피커로 방송함으로써 실내의 대기자가 방문자의 기분에 맞춰 사전 준비를 할 수 있도록 함과 동시에, 실내의 가전 기기들의 작동 상태를 방문자의 감정 상태에 맞춰 최적 상태로 제어할 수 있으므로, 방문자는 자신의 감정 상태에 따라 최적의 조건으로 조절된 실내로 진입할 수 있다.
도 1에 있어서, 가전기기 제어기(230)에 의해 제어되는 가전기기들은 홈 네트워크 환경에 의해 제어될 수 있는 여러 가지 가전기기들 중 일부를 예를 들어 도시한 것에 불과하므로 상기 도 1에 도시된 바에 의해 본 발명에 의한 기술적 사상이 제한됨을 의미하지는 않는다. 즉, 상기 도 1에 도시된 가전 기기들(231 내지 237)은 적절한 제어에 의해 사람의 기분에 영향을 미칠 수 있는 것들을 예로 들어 도시하였으므로, 필요에 따라 다른 가전기기들을 더하거나 도시된 것들 중 일부를 제거하여 시스템을 구성할 수 있음은 물론이다.
도 2는 본 발명에 의한 얼굴표정 인식 홈 네트워트 시스템의 제어 방법을 설명하기 위한 흐름도이다.
건물의 출입문 근방, 즉 건물을 방문하는 방문자의 얼굴을 가장 잘 촬영할 수 있는 위치, 예컨대 초인종이나 출입키 삽입구 근방에 설치된 무인 카메라(도 1 의 100)는 통상 출입문 근방을 오고가는 행인들 또는 그 주변 상황을 촬영한다(S100 단계).
방문자가 출입문으로 다가서서 초인종을 누르거나 출입키 삽입구로 키(key)를 삽입하면(S110 단계), 무인 카메라의 촛점은 자동으로 방문자의 얼굴로 맞춰진 후 방문자의 얼굴을 연속적으로 수 컷(cut) 촬영한다(S120 단계).
이어, 상기 카메라에서 촬영된 방문자의 얼굴은 카메라에 내장된 여러 전자 장치를 거치며 데이타화 되고, 이 데이타는 얼굴표정 송신장치(도 1의 110)를 통해 실내의 얼굴표정 수신장치(도 1의 200)로 전송된다(S130 단계).
얼굴표정 수신장치로 수신된 방문자의 얼굴표정에 대한 데이타는 홈 서버(도 1의 220)에 전송되고, 홈 서버는 상기 데이타를 이용하여 방문자의 신원을 확인함과 동시에 얼굴표정의 찡그러짐 정도, 주름의 위치등으로 방문자의 표정 상태를 판단한다(S140 단계).
한편, 홈 서버는 기 입력되어 있는 방문자의 생년월일을 기초로 방문자의 바이오리듬을 산출하고(S150 단계), 산출된 바이오리듬과 얼굴표정 판단 결과를 검토하여 최종적으로 방문자의 감정 상태를 판단한다(S160 단계).
이어, 상기 홈 서버에 장착되어 있는 스피커(도 1의 240)를 통해 방문자의 감정 상태를 방송하여 실내의 대기자에게 방문자의 기분에 대한 사전 지식을 갖도록 함과 동시에(S170 단계), 상기 홈 서버에 장착되어 있는 가전기기 제어기(도 1의 230)로 방문자의 감정 상태에 대응하는 가전 기기 제어 명령을 송신함으로써 상기 가전기기 제어기가 실내의 가전 기기들(도 1의 231 내지 237)을 방문자의 감정 상태에 맞춰 제어하도록 한다(S180 단계).
마지막으로, 방문자가 출입문을 거쳐 홈 서버가 장착되어 있는 실내로 들어서는 것을 감지하는 순간 (S190 단계) 상기 스피커를 통한 방송은 중단되고(S200), 방문자의 감정 상태에 따라 제어된 각종 가전 기기들은 사용자가 리셋(reset) 버튼을 입력하는 순간(S210 단계) 원상태로 복원된다(S220 단계).
본 발명에 의한 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법에 의하면, 카메라에 촬영된 방문자의 얼굴표정과 홈 서버에 입력되어 있는 방문자의 바이오리듬을 기초로 하여 방문자의 감정 상태를 판단한 후, 실내의 가전 기기들의 작동 상태를 방문자의 감정 상태에 맞춰 최적 상태로 제어할 수 있으므로 방문자는 자신의 감정 상태에 따라 최적의 조건으로 조절된 실내로 진입할 수 있다.
또한, 홈 서버에서 판단된 방문자의 감정 상태를 실내의 대기자에게 스피커를 통해 방송함으로써 실내의 대기자가 방문자의 기분에 맞춰 사전에 영접준비를 할 수 있도록 할 수 있다.

Claims (7)

  1. 방문자의 얼굴을 촬영하기 위해 출입문 근방에 설치된 카메라;
    상기 카메라에서 촬영된 방문자 얼굴표정과 방문자의 바이오리듬을 바탕으로 방문자의 감정 상태를 판단하는 홈 서버;
    방문자의 감정 상태에 따라 가전 기기들을 제어하기 위한 가전기기 제어기; 및
    상기 가전기기 제어기에 의해 자동 제어되는 가전 기기들을 포함하는 것을 특징으로 하는 얼굴표정 인식 홈 네트워크 시스템.
  2. 제 1 항에 있어서,
    방문자의 감정 상태를 실내의 대기자에게 알려주기 위한 방송용 스피커가 상기 홈 서버에 설치되어 있는 것을 특징으로 하는 얼굴표정 인식 홈 네트워크 시스템.
  3. 제 1 항에 있어서,
    상기 홈 서버에 방문자의 바이오리듬을 산출하기 위한 바이오리듬 입력부를 더 구비하는 것을 특징으로 하는 얼굴표정 인식 홈 네트워크 시스템.
  4. 제 1 항에 있어서,
    상기 카메라는 출입문의 초인종이나 출입키 삽입구 근방에 설치되어 있는 것을 특징으로 하는 얼굴표정 인식 홈 네트워크 시스템.
  5. 제 4 항에 있어서,
    상기 카메라는 방문자가 초인종을 누르거나 출입키 삽입구로 키를 삽입할 때 자동으로 방문자의 얼굴에 촛점이 맞춰지도록 설계되어 설치되어 있는 것을 특징으로 하는 얼굴표정 인식 홈 네트워크 시스템.
  6. 방문자가 출입문의 초인종을 누르거나 출입키 삽입구로 키를 삽입하는 순간 방문자의 얼굴을 촬영하는 단계;
    촬영된 방문자의 얼굴표정과 방문자의 바이오리듬을 바탕으로 방문자의 감정 상태를 판단하는 단계; 및
    방문자의 감정 상태에 맞춰 가전 기기들을 자동으로 제어하는 단계를 포함하는 것을 특징으로 하는 얼굴표정 인식 홈 네트워크 시스템의 제어 방법.
  7. 제 6 항에 있어서,
    방문자의 감정 상태를 판단하여 가전 기기들을 자동으로 제어함과 동시에, 스피커를 통해 방문자의 감정 상태를 방송하는 단계를 더 포함하는 것을 특징으로 하는 얼굴표정 인식 홈 네트워크 시스템의 제어 방법.
KR1020040058852A 2004-07-27 2004-07-27 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법 KR20060010225A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040058852A KR20060010225A (ko) 2004-07-27 2004-07-27 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040058852A KR20060010225A (ko) 2004-07-27 2004-07-27 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20060010225A true KR20060010225A (ko) 2006-02-02

Family

ID=37120575

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040058852A KR20060010225A (ko) 2004-07-27 2004-07-27 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법

Country Status (1)

Country Link
KR (1) KR20060010225A (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100646868B1 (ko) * 2004-12-29 2006-11-23 삼성전자주식회사 피부전도도와 심박 정보를 이용한 홈 제어시스템 및 그 방법
KR20150117372A (ko) * 2014-04-09 2015-10-20 주식회사 도브투래빗 다중 디지털 교감 시스템 및 방법
JP2018112831A (ja) * 2017-01-10 2018-07-19 日本電気株式会社 情報処理装置、いじめ発見方法、情報処理システム、および、コンピュータプログラム
KR101896216B1 (ko) * 2018-05-28 2018-09-06 노진호 스마트 홈 네트워크 시스템
CN109891362A (zh) * 2016-10-07 2019-06-14 索尼公司 信息处理装置、信息处理方法及程序
KR20190069925A (ko) 2017-12-12 2019-06-20 이우균 출입문 원격 제어 시스템과 방법 및 장치
KR20200018989A (ko) * 2018-08-13 2020-02-21 현대자동차주식회사 멀티 디바이스 시스템 및 그 제어방법
CN112652100A (zh) * 2020-12-29 2021-04-13 深圳市欧瑞博科技股份有限公司 用户的智能引导方法、控制面板及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020069697A (ko) * 2001-02-27 2002-09-05 한국전자통신연구원 생체신호를 이용한 전자기기 제어 장치 및 그 방법
KR20020081220A (ko) * 2000-10-10 2002-10-26 코닌클리케 필립스 일렉트로닉스 엔.브이. 이미지 기반 인식을 통한 장치 제어
KR20030017980A (ko) * 2001-03-30 2003-03-04 코닌클리케 필립스 일렉트로닉스 엔.브이. 개인화된 네트워크 환경을 자동적으로 제어하기 위한 방법및 시스템
KR20030033266A (ko) * 2001-10-19 2003-05-01 (주)인터루션 사용자의 영상정보 분석을 통한 사이버 비서 시스템 및 그방법
WO2003101045A1 (en) * 2002-05-23 2003-12-04 Koninklijke Philips Electronics N.V. Reproduction of particular information using devices connected to a home network

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020081220A (ko) * 2000-10-10 2002-10-26 코닌클리케 필립스 일렉트로닉스 엔.브이. 이미지 기반 인식을 통한 장치 제어
KR20020069697A (ko) * 2001-02-27 2002-09-05 한국전자통신연구원 생체신호를 이용한 전자기기 제어 장치 및 그 방법
KR20030017980A (ko) * 2001-03-30 2003-03-04 코닌클리케 필립스 일렉트로닉스 엔.브이. 개인화된 네트워크 환경을 자동적으로 제어하기 위한 방법및 시스템
KR20030033266A (ko) * 2001-10-19 2003-05-01 (주)인터루션 사용자의 영상정보 분석을 통한 사이버 비서 시스템 및 그방법
WO2003101045A1 (en) * 2002-05-23 2003-12-04 Koninklijke Philips Electronics N.V. Reproduction of particular information using devices connected to a home network

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100646868B1 (ko) * 2004-12-29 2006-11-23 삼성전자주식회사 피부전도도와 심박 정보를 이용한 홈 제어시스템 및 그 방법
KR20150117372A (ko) * 2014-04-09 2015-10-20 주식회사 도브투래빗 다중 디지털 교감 시스템 및 방법
CN109891362A (zh) * 2016-10-07 2019-06-14 索尼公司 信息处理装置、信息处理方法及程序
US11212882B2 (en) 2016-10-07 2021-12-28 Sony Corporation Information processing apparatus and information processing method for presentation of a cooking situation based on emotion of a user
CN109891362B (zh) * 2016-10-07 2022-05-27 索尼公司 信息处理装置、信息处理方法及程序
JP2018112831A (ja) * 2017-01-10 2018-07-19 日本電気株式会社 情報処理装置、いじめ発見方法、情報処理システム、および、コンピュータプログラム
KR20190069925A (ko) 2017-12-12 2019-06-20 이우균 출입문 원격 제어 시스템과 방법 및 장치
KR101896216B1 (ko) * 2018-05-28 2018-09-06 노진호 스마트 홈 네트워크 시스템
KR20200018989A (ko) * 2018-08-13 2020-02-21 현대자동차주식회사 멀티 디바이스 시스템 및 그 제어방법
CN112652100A (zh) * 2020-12-29 2021-04-13 深圳市欧瑞博科技股份有限公司 用户的智能引导方法、控制面板及计算机可读存储介质
CN112652100B (zh) * 2020-12-29 2023-04-25 深圳市欧瑞博科技股份有限公司 用户的智能引导方法、控制面板及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN110709785B (zh) 设备控制系统
CN107950080B (zh) 响应于占用者和/或移动设备的位置的负载控制系统
CN106842968B (zh) 一种控制方法、装置及系统
US6713975B2 (en) Lighting apparatus, lighting control system and home electric appliance
KR101784990B1 (ko) 얼굴인식을 이용한 홈 오토메이션 제어 시스템 및 그 방법
CN115019455A (zh) 智能门铃中的热管理
KR101272653B1 (ko) 댁내 기기 원격 제어 및 감시 시스템
US11303955B2 (en) Video integration with home assistant
CN109799716B (zh) 一种场景推送的方法、装置以及智能家居系统
JP4852449B2 (ja) 住宅内機器制御システム
KR100506168B1 (ko) 원격에서 음성인식을 이용한 홈오토메이션/홈네트웍 상태감시 장치 및 그방법
CN105022275A (zh) 基于云平台的智能家电联动控制系统
CN111936981A (zh) 设备控制系统和设备控制方法
CN105094063A (zh) 智能家居的控制方法及装置
CN109188926A (zh) 一种控制智能家居的方法和设备
JP5016968B2 (ja) 機器制御システム
KR20060010225A (ko) 얼굴표정 인식 홈 네트워크 시스템 및 그 제어 방법
CN109814395B (zh) 电器的控制方法、装置和门锁
CN108919666B (zh) 楼宇自动化控制系统
US11259076B2 (en) Tactile launching of an asymmetric visual communication session
CN111025932A (zh) 基于边缘计算的多住宅情景共享方法和系统
WO2023286458A1 (ja) 電子機器制御装置、通信端末および電子機器
CN210839618U (zh) 一种基于远程信息传输的智能家居系统
US20200326735A1 (en) Thermostat system
TWI539411B (zh) Personalized Family Situation Control System and Method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application