KR20150028191A - 사용자 컨텍스트를 이용한 디바이스 동작의 설정 및 추천 방법 및 장치 - Google Patents

사용자 컨텍스트를 이용한 디바이스 동작의 설정 및 추천 방법 및 장치 Download PDF

Info

Publication number
KR20150028191A
KR20150028191A KR20140109015A KR20140109015A KR20150028191A KR 20150028191 A KR20150028191 A KR 20150028191A KR 20140109015 A KR20140109015 A KR 20140109015A KR 20140109015 A KR20140109015 A KR 20140109015A KR 20150028191 A KR20150028191 A KR 20150028191A
Authority
KR
South Korea
Prior art keywords
information
user
status information
user operation
common
Prior art date
Application number
KR20140109015A
Other languages
English (en)
Other versions
KR102233602B1 (ko
Inventor
김경재
이근철
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP14842097.9A priority Critical patent/EP3042280A4/en
Priority to US14/477,364 priority patent/US10181960B2/en
Priority to CN201480042185.0A priority patent/CN105431820A/zh
Priority to PCT/KR2014/008336 priority patent/WO2015034295A1/en
Publication of KR20150028191A publication Critical patent/KR20150028191A/ko
Application granted granted Critical
Publication of KR102233602B1 publication Critical patent/KR102233602B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/283—Processing of data at an internetworking point of a home automation network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00—Systems controlled by a computer
    • G05B15/02—Systems controlled by a computer electric
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2827—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality
    • H04L12/2829—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality involving user profiles according to which the execution of a home appliance functionality is automatically triggered
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2642—Domotique, domestic, home control, automation, smart house

Abstract

스마트 홈 시스템이 사용자 상황(user context)을 인지하고, 인지한 사용자 상황에 기초하여 스마트 홈 시스템 내의 각 디바이스의 동작을 설정하거나 추천하는 절차를 자동화하는 방법을 제공한다. 사용자가 모드 서비스를 새롭게 추가 또는 정의하거나 모드 서비스가 포함하는 디바이스의 동작을 관리 또는 수정하는 방법을 제공한다. 또한 룰을 정의할 때 각 디바이스를 통해 제공할 수 있는 기능을 추천하는 방법을 제공한다.

Description

사용자 컨텍스트를 이용한 디바이스 동작의 설정 및 추천 방법 및 장치 {METHOD AND DEVICE FOR SETTING AND RECOMMENDING DEVICE ACTION USING USER CONTEXT}
스마트 홈 서비스는 가전기기, 센서, 서버 등 다양한 디바이스가 서로 연동(link)되어 사용자가 원하는 동작을 실행한다. 스마트 홈 시스템에 포함되는 가전기기, 센서, 서버 등은 게이트웨이 장치를 통해 상호간에 정보를 송수신할 수 있다. 한편, 스마트 홈 시스템 내에서 연동되는 디바이스의 수가 늘어날수록 스마트 홈 서비스를 이용하기 위한 설정 및 제어의 복잡성(complexity)도 함께 증가한다.
스마트 홈 서비스는, 제조사가 미리 정의해 제공하는 특정 모드를 사용자가 선택하면, 상기 특정 모드에 대응되는 디바이스들의 동작(action)이 일괄적으로 실행되는 모드 서비스를 포함할 수 있다. 모드 서비스를 이용함으로써, 사용자는 한번의 입력으로 한꺼번에 여러 디바이스들이 실행되도록 제어할 수 있다.
본 발명의 일 실시예는 스마트 홈 시스템이 사용자 상황(user context)을 인지하고, 인지한 사용자 상황에 기초하여 스마트 홈 시스템 내의 각 디바이스의 동작을 설정하거나 추천하는 절차를 자동화하는 방법을 제공한다.
본 발명의 일 실시예는 사용자가 모드 서비스(룰;rule)를 새롭게 추가 또는 정의(define)하거나 모드 서비스가 포함하는 디바이스의 동작을 관리 또는 수정하는 방법을 제공한다. 또한 룰을 정의할 때 각 디바이스를 통해 제공할 수 있는 기능을 추천하거나, 사용자의 기기 사용 패턴을 감지하여 자동으로 룰을 생성하는 기능을 제공한다.
본 발명의 일 실시예는 사용자의 실행 입력에 의존하지 않고 스마트 홈 서비스가 제공되도록 한다.
본 발명의 일 실시 예에 따른 게이트웨이 장치가 다른 장치를 제어하는 방법은, 제1 장치 그룹으로부터 사용자 동작(user operation) 정보를 수신하면, 제2 장치 그룹으로부터 수신하는 장치 상태(device state) 정보를 기록 구간(recording period) 동안 기록하는 단계; 상기 기록한 장치 상태 정보 및 이전에 기록한 적어도 하나의 장치 상태 정보에 기초하여, 공통(common) 장치 상태 정보를 추출하는 단계; 및 상기 추출된 공통 장치 상태 정보에 상응하는 장치 상태 정보를 상기 제2 장치 그룹으로부터 수신하면, 상기 제1 장치 그룹이 상기 사용자 동작 정보에 상응하는 사용자 동작을 실행하도록 제1 장치 그룹에 요청하는 단계를 포함하는 것을 특징으로 한다.
본 발명의 일 실시 예에 따른 다른 장치를 제어하는 게이트웨이 장치는, 다른 장치와 정보를 송수신(communicate)하는 통신부; 상기 정보를 기록하거나 또는 저장하는 저장부; 및 제1 장치 그룹으로부터 사용자 동작(user operation) 정보를 수신하면 제2 장치 그룹으로부터 수신하는 장치 상태(device state) 정보를 기록 구간(recording period) 동안 기록하고, 상기 기록한 장치 상태 정보 및 이전에 기록한 적어도 하나의 장치 상태 정보에 기초하여 공통(common) 장치 상태 정보를 추출하고, 상기 추출된 공통 장치 상태 정보에 상응하는 장치 상태 정보를 상기 제2 장치 그룹으로부터 수신하면 상기 제1 장치 그룹이 상기 사용자 동작 정보에 상응하는 사용자 동작을 실행하도록 제1 장치 그룹에 요청하도록 제어하는 제어부를 포함하는 것을 특징으로 한다.
스마트 홈 시스템의 각 디바이스가 실행될 때의 사용자 컨텍스트의 패턴을 학습하므로, 디바이스 실행을 위한 사용자 동작 없이도 디바이스를 실행시킴으로서, 사용자에게 편의성 및 최적화된 서비스를 제공할 수 있다. 또한 룰의 자동 생성 및 추천을 통해 사용자가 룰을 편리하고 효율적으로 관리할 수 있다.
도 1은 본 발명의 일 실시예에 따른 스마트 홈 시스템의 구성을 도시한다.
도 2는 본 발명의 다른 일 실시예에 따른 스마트 홈 시스템의 구성을 도시한다.
도 3은 본 발명의 일 실시예에 따라 조건 및 동작을 입력받아 룰을 생성하는 프로세스를 나타낸다.
도 4는 본 발명의 일 실시예에 따라, 룰을 편집하고 룰 적용에 따라 동작을 수행하는 프로세스를 나타낸다.
도 5는 본 발명의 일 실시예에 따른 사용자의 장치 사용 및 컨텍스트의 패턴에 기반하여 룰을 생성하고 생성한 룰을 적용하는 프로세스를 나타낸다.
도 6은 본 발명의 일 실시예에 따른 동작 구간을 나타낸다.
도 7은 본 발명의 일 실시예에 따라 동작 구간에서 이벤트를 추출하는 프로세스를 나타낸다.
도 8은 본 발명의 일 실시예에 따른 명칭 및 아이콘을 나타낸다.
도 9는 본 발명의 일 실시예에 따른 게이트웨이 장치의 구성을 도시한다.
도 10은 본 발명의 일 실시예에 따라 룰을 생성하고 생성된 룰을 실행하는 흐름도를 나타낸다.
도 11은 본 발명의 다른 일 실시예에 따라 룰을 생성하고 생성된 룰을 실행하는 흐름도를 나타낸다.
도 12는 본 발명의 일 실시예에 따라 게이트웨이가 다른 장치를 제어하는 흐름도를 나타낸다.
도 13은 본 발명의 다른 일 실시예에 따른 컨텍스트를 이용한 디바이스 동작을 위한 흐름도를 나타낸다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 안되며, 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 한다. 하기의 설명에서는 본 발명의 각 실시예에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 간략화되거나 생략될 수 있다. 본 발명의 특징이 본 명세서에서 개시하는 예시들로 한정되는 것은 아니며, 각 구성들의 형태 변경이나, 추가적인 기능들까지도 포함하는 형태로 해석될 수 있다. 도면들에서, 일부 요소들의 크기는 예시를 위해 확대될 수 있으며, 크기에 비례하여 도시한 것이 아니다.
본 명세서 및 청구범위에 있어서 "포함하는"은 다른 요소들 또는 동작들을 배제한다는 의미가 아니다. 단수 명사는 달리 특별히 언급되지 않는다면 복수 명사를 포함할 수 있다. 예를 들어 "사용자 동작" 또는 "상태"는 복수의 사용자 동작 또는 복수의 상태를 의미할 수 있다. 구성요소에 대한 접미사 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 본 명세서 및 청구범위에 있어서 "제1, 제2, 제3"는 유사한 요소들을 구별하기 위해 사용되었으며, 반드시 순차적 또는 연대순으로 기술하기 위해 사용된 것은 아니다. 본 명세서 및 청구범위에 있어서 "제1, 제2, 제3"는 상호 배타적인 의미로 사용된 것은 아니다. 예를 들어 "제1 장치 그룹"에 포함되는 장치가 "제3 장치 그룹"에 포함될 수도 있다.
본 명세서 및 청구범위에 있어서 룰(Rule)은, 조건(Condition)과 상기 조건에 의해 트리거되는 동작(Action)의 대응관계(relationship)를 의미하고, 상황 정보의 히스토리를 고려하여 결정되는 것을 특징으로 한다. 상기 룰은 모드 서비스와 같은 의미로 사용될 수 있다. 본 명세서 및 청구범위에 있어서 조건(condition)은 스마트 홈 시스템에 포함된 장치(들)의 특정 상태(specific state) 또는 상태 변화(state change)를 의미할 수 있다. 본 명세서 및 청구범위에 있어서 동작(action)은 스마트 홈 시스템에 포함된 장치(들)에 대한 사용자 동작(user operation)을 의미할 수 있다.
룰(Rule)은 표 1과 같이 표현될 수 있다. 표 1에서 나타난 것과 같이, 조건은 하나 또는 하나 이상의 장치의 상태를 포함할 수 있고, 동작은 하나 또는 하나 이상의 장치에 대한 동작을 포함할 수 있다.
룰(rule) 조건(condition) 동작(action)
이름 장치1 장치2 … 장치1 장치2 …
아이콘 상태 상태 … 동작 동작 …
룰은, 사용자에 의해 정의되거나 스마트 홈 시스템에 의해 추천되는, 고유의 이름과 아이콘을 가질 수 있다. 룰이 조건 및 동작을 포함하는 경우 각각의 조건 및 동작 역시 고유의 이름과 아이콘을 가질 수 있다. 룰의 이름은, 예를 들어, 마켓(Market), 비(Rainy), 외출(Away) 또는 수면(Sleep)에 해당할 수 있다. 조건의 이름은 예를 들어 NFC, 문(door), 날짜 및 시간(Date & Time), 날씨(Weather), 기온(Temperature), 습도(Humidity) 또는 거실의 전등(Light in living room)에 해당할 수 있다. 동작의 이름은 예를 들어 전등(light), 보안(security), 에어컨(Air Conditioner) 중의 하나에 해당할 수 있다. 장치(device)는 디바이스 타입에 따라, 예를 들어, 가전/조명 장치 및 기타 장치로 분류될 수 있다. 룰은 디바이스 타입에 대한 정보를 함께 포함할 수 있다.
다음의 문장들은 조건(if 절) 및 동작(then 절)을 포함하는 룰을 문장으로 표현한 것이다.
만약 현재 시간이 10:00~21:00 이고 비가 오면, 거실의 전등을 켠다. 만약 Tom이 외출하고 Tom의 방에서 5분간 움직임이 감지되지 않으면, Tom의 방의 전등을 끈다. 만약 Jane이 있을 때 30도 이상이면, 에어컨을 켠다. 만약 9시 이후 외출이 감지되면, 카메라와 센서를 활성화(activate)시킨다. 만약 세탁기의 세탁이 완료되면, 팝업 및 LED 조명을 이용하여 알린다. 만약 Alice가 소지한 NFC tag의 접근을 감지하면, Alice의 방의 컴퓨터를 켜고 워드 프로그램을 실행시킨다. 만약 어제의 전기 사용량이 이틀전의 전기 사용량보다 2배이상 많으면, Margie의 단말에 경고 메시지를 표시한다.
게이트웨이가 조건 및 동작을 감지하는 것은, 게이트웨이가 포함하는 센서 또는 입력부의 감지를 의미할 수도 있고, 다른 장치의 센싱 정보 또는 입력 정보 등을 게이트웨이가 수신하는 것을 의미할 수도 있다.
조건을 구체적으로 살펴보면, 조건은 스마트 홈 시스템의 센서에 의해 측정되는 외부 환경 정보나 스마트 홈 시스템에 포함된 디바이스(들)의 상태 또는 상태 변화를 나타낼 수 있다. 본 명세서 및 청구범위에 있어서 "조건"은 "사용자 상황" 또는 "장치 상태"와 같은 의미로 사용될 수 있다. 표 2에서 조건의 예시를 기재하고 있다.
외부조건 가전/조명장치 기타 장치
온도 날씨 전기가격 시간 냉장고 에어컨 세탁기 건조기 오븐 TV LED 스위치 도어락 움직임 감지기 IP 카메라 온도조절장치
따뜻함 맑음 비쌈 새벽 켜짐 켜짐 켜짐 켜짐 켜짐 켜짐 켜짐 켜짐 문열림 켜짐 켜짐 켜짐
보통 흐림 보통 오전 꺼짐 꺼짐 꺼짐 꺼짐 꺼짐 꺼짐 꺼짐 꺼짐 문잠김 꺼짐 꺼짐 꺼짐
추움 비 쌈 점심 냉장실열림 온도높음 세탁완료 건조완료 조리완료 채널1 밝음 동작감지 동작감지 온도높음
눈 오후 냉장실닫힘 온도보통 채널2 보통 소리감지 온도보통
저녁 냉동고열림 온도낮음 어두움 온도낮음
밤 냉동고닫힘
표2의 외부조건에서, 시간은 새벽, 오전, 점심, 오후, 저녁, 밤 중의 하나의 상태에 해당할 수 있다. 표2의 가전/조명장치에서, TV는 켜짐, 꺼짐, 채널1표시, 채널2표시 중의 하나 이상의 상태에 해당할 수 있다. 표2의 기타 장치에서, 온도조절장치(Thermostat)는 온도높음, 온도보통, 온도낮음 중 하나의 상태에 해당할 수 있다. 각각의 장치에서 감지된 조건에 대한 정보는 게이트웨이 장치에 전달될 수 있다.
동작(Action)을 구체적으로 살펴보면, 동작은 스마트 홈 시스템에 포함된 디바이스(들)의 동작을 나타낸다. 본 명세서 및 청구범위에 있어서 "동작(action)"은 "사용자 동작(User Operation)"과 같은 의미로 사용될 수 있다. 표 3에서 동작의 예시를 기재하고 있다.
가전/조명 장치 기타 디바이스
냉장고 에어컨 세탁기 건조기 오븐 TV LED 스위치 도어락 움직임감지기 IP 카메라 온도조절장치
냉장실열림 전원켬 전원켬 전원켬 전원켬 전원켬 켬 켬 문열림 움직임감지 동작감지 전원켬
냉장실닫힘 전원끔 전원끔 전원끔 전원끔 전원끔 끔 끔 문잠김 움직임무감지 소리감지 전원끔
냉동고열림 온도올림 밝게 영상전달 온도올림
냉동고닫힘 온도내림 어둡게 온도내림
온도내림
온도올림
가전/조명장치에서, LED는 켬 동작, 끔 동작, 밝게 하는 동작, 어둡게 하는 동작 중의 하나에 해당하는 동작을 감지할 수 있다. 기타 장치에서, 움직임감지기(Motion Detector)는 움직임 감지, 움직임 무감지 중 하나에 해당하는 동작을 감지할 수 있다. 각각의 장치에서 감지된 동작에 대한 정보는 게이트웨이 장치에 전달될 수 있다. 표 3은 동작의 일 예일 뿐이며, 사용자는 동작을 편집하여 동작의 반복 여부, 반복 횟수 및 반복 간격 시간을 정할 수 있다. 각각의 장치에서 감지된 동작에 대한 정보는 게이트웨이 장치에 전달될 수 있다.
이하, 본 발명의 다양한 실시예를 첨부한 도면을 참조하여 설명한다.
도 1은 본 발명의 일 실시예에 따른 스마트 홈 시스템의 구성을 도시한다.
본 발명의 일 실시예에 따르면 스마트 홈 시스템은 게이트웨이(110), 사용자 단말(User Equipment)(120), 연관 디바이스(associated device)(130), 스마트 가전(Smart Appliance)(140) 또는 리모트 서버(150)를 포함할 수 있다.
게이트웨이(110)는, 게이트웨이 장치로 호칭될 수도 있으며, 사용자 단말(120), 연관 디바이스(130), 스마트 가전(140) 또는 리모트 서버(150)와 통신할 수 있다. 게이트웨이(110)는 사용자 단말(120), 연관 디바이스(130), 스마트 가전(140) 또는 리모트 서버(150)로부터 수신한 데이터 또는 사용자 단말(120), 연관 디바이스(130), 스마트 가전(140) 또는 리모트 서버(150)를 컨트롤하는데 필요한 데이터를 저장할 수 있다. 게이트웨이(110)는 유저 인터페이스(UI)를 표시할 수 있는 디스플레이(터치 스크린)을 하나 이상 포함할 수 있다. 본 발명의 일 실시예에 따르면 게이트웨이(110)는 사용자 단말(120), 연관 디바이스(130) 또는 스마트 가전(140)의 기능의 전부 또는 일부를 수행할 수 있다. 다시 말해, 스마트폰, 웨어러블 디바이스, 태블릿 pc, 청소기, 냉장고, TV, Thermostat 등이 게이트웨이(110)의 역할을 수행할 수도 있다.
사용자 단말(120)은 운영체제(Operating System)에서 구동되는 어플리케이션을 실행하거나 컨텐츠를 표시 가능하도록 구성되는 전자 장치이다. 사용자 단말(120)은 UI를 표시할 수 있는 디스플레이(터치스크린), 외부 장치와 통신하는 통신부, 데이터를 저장하는 저장부, 사용자의 입력을 수신하는 입력부 또는 각 동작 수행을 제어하는 제어부를 구비할 수 있다. 사용자 단말(120)은 예를 들면, 태블릿(Tablet) 개인 컴퓨터(Personal Computer: PC), 휴대용 멀티미디어 재생 장치(Portable Multimedia Player: PMP), 개인용 휴대 단말기(Personal Digital Assistant: PDA), 스마트 폰(Smart Phone), 휴대폰, 디지털 액자, 웨어러블 디바이스(Wearable Device) 등을 포함할 수 있다. 상기 웨어러블 디바이스는 몸에 걸칠 수 있는 전자 장치로서, 예를 들어 안경(glasses), 워치(watch), 팔찌(bracelet), 의류(clothing), 스포츠 기기, 의료 기기 등의 형태를 가질 수 있다. 상기 웨어러블 디바이스는 피부에 부착하거나 인체에 이식하는 형태를 가질 수도 있다.
연관 디바이스(130)는 PV, ESS, 도어락, IP 카메라, 도어캠 등을 포함할 수 있다. 연관 디바이스(130)는 지자기, 기압, 사용자의 모션, 사용자의 근접, 사용자의 위치, 윈도우, 온도, 습도, 조도, 중력 등을 감지하는 센서를 포함할 수 있다.
스마트 가전(140)은 텔레비전, 냉장고, 세탁기, 에어컨, 오븐, 식기세척기 또는 로봇 청소기를 포함할 수 있다.
도 1에서 사용자 단말(120), 연관 디바이스(130) 및 스마트 가전(140)를 통합하여 "장치(디바이스)"로 호칭할 수 있다. 다시 말해, 본 명세서 및 청구범위에 있어서, 디바이스는 사용자가 게이트웨이(GW), 단말 또는 서버을 통해 상기 디바이스의 상태를 모니터링하거나 상기 디바이스의 동작을 제어할 수 있는 장치로 정의할 수 있다. 한편, 사용자 단말(120), 연관 디바이스(130) 및 스마트 가전(140)에서 예로 들지 않은 경우에도 장치(device)에 해당할 수 있다.
리모트 서버(150)는 원격 접속에 의해 디바이스 동작 제어를 수행할 수 있다. 본 명세서에서는 게이트웨이 또는 디바이스에 의한 디바이스 동작 제어를 설명하고 있으나, 리모트 서버(150) 역시 디바이스 동작 제어를 수행할 수 있다. 리모트 서버(150)는 UI를 표시할 수 있는 디스플레이(터치 스크린), 외부 장치와 통신하는 통신부, 데이터를 저장하는 저장부, 사용자의 입력을 수신하는 입력부, 다른 부(유닛)의 동작 수행을 제어하는 제어부를 구비할 수 있다.
도 2는 본 발명의 다른 일 실시예에 따른 스마트 홈 시스템의 구성을 도시한다.
스마트 홈 플랫홈(210)은 룰 데이터베이스(Rule DB)(211)를 포함할 수 있다. 스마트 홈 플랫홈(210)은 스마트 홈 플랫홈(210)이 모니터링하는 디바이스의 상태정보와 Rule DB에 정의되어 있는 사용자 상황(Context) 정보를 대조하여, 적합한 Rule을 실행하는 Context Checker 모듈(212)을 포함할 수 있다. 스마트 홈 플랫홈(210)은 도 1의 게이트웨이(110)에 해당할 수 있다. 스마트 홈 플랫홈(210)은 다른 장치들(220,230), 제조사 서버(240) 또는 소셜 네트워크(250)와 연결될 수 있다. 제조사 서버(240) 또는 소셜 네트워크(250)는 도면 1의 리모트 서버(150)를 포함할 수 있다.
도 3은 본 발명의 일 실시예에 따라 조건 및 동작을 입력받아 룰을 생성하는 프로세스를 나타낸다.
스마트 홈 시스템의 게이트웨이는 룰(Rule) 생성 절차가 시작되면, 디폴트로 제공되는 조건을 사용자가 선택하는지 여부를 판단한다(310). 사용자가 디폴트로 제공되는 조건을 선택하지 않는 경우, 게이트웨이는 조건을 새로 생성한다(315). 게이트웨이는 조건을 생성하기 위하여 필요한 정보를 사용자로부터 입력받을 수 있다. 상기 필요한 정보를 입력받는 과정은, 예를 들어, 센싱의 대상 인물에 대한 선택을 입력받는 과정(320), 센싱 디바이스에 대한 선택을 입력받는 과정(325), 센싱 항목에 대한 선택을 입력받는 과정(330), 센싱을 트리거링 하는 조건의 명칭 또는 아이콘의 생성 또는 추가를 입력받는 과정(335)을 포함할 수 있다. 센싱의 대상 인물에 대한 선택을 입력받는 과정은, 센싱의 대상 인물에 대응하는 NFC 태그에 대한 선택을 입력받는 과정을 포함할 수 있다. 본 발명의 일 실시예에 따르면 디폴트로 제공되는 조건을 선택하는 경우 센싱의 대상 인물을 선택하는 입력만으로 조건 입력이 완성될 수 있다. 조건 입력이 완성되면, 새로운 조건 추가에 대한 입력이 있는지 판단한다(340).
새로운 조건 추가에 대한 입력이 없으면, 사용자가 선택하거나 생성한 조건에 대응하는 동작을 사용자로부터 입력받는다. 조건에 대응하는 동작을 입력받는 과정은 조건에 대응하는 동작을 수행하는 디바이스를 선택하는 과정(345)과 선택된 디바이스의 동작을 선택하는 과정(350)을 포함할 수 있다. 355 단계에서 동작 입력을 완성한 후에 새로운 동작 추가에 대한 입력이 없다고 판단하면, 사용자에 의해 입력된 조건 및 동작을 매칭하여 룰(rule)을 생성하고, 생성된 룰을 저장한다(360). 상기 생성된 룰을 저장하는 과정은 룰의 이름과 아이콘을 사용자로부터 입력받아 저장하는 과정을 포함할 수 있다.
도 4는 본 발명의 일 실시예에 따라, 룰을 편집하고 룰 적용에 따라 동작을 수행하는 프로세스를 나타낸다.
스마트 홈 서비스가 활성화된(activated) 상태에서, 게이트웨이(GW)는 디바이스가 스마트 홈 시스템에 추가 또는 연동(link)되는지 판단할 수 있다(410). 게이트웨이는, 디바이스와 룰을 연관시킨 룰 목록(Rule List)을 매핑 테이블의 형태로 기록할 수 있다. 상기 매핑 테이블은 디바이스의 타입에 대한 정보를 더 포함할 수 있다. 게이트웨이는 410 단계에서 디바이스가 추가되었다고 판단하면, 추가된 디바이스와 매핑되는 디바이스 또는 디바이스의 타입에 대한 정보를 포함하는 룰(Rule)을 매핑 테이블이 보유하고(contain) 있는지 쿼리(Query)할 수 있다(420). 상기 매핑 테이블은 게이트웨이, 다른 장치 또는 서버에 저장되어 있을 수 있다. 쿼리에 대한 응답에 의해, 상기 추가 또는 연동된 디바이스와 룰 목록 내의 특정 룰에 포함된 디바이스 간에, 디바이스 또는 디바이스의 타입이 매핑된다고 판단하면, 게이트웨이는 해당 특정 룰에 대한 추천을 사용자에게 표시할 수 있다(430). 표시된 특정 룰을 사용자가 선택하면, 선택된 룰이 추가된 디바이스에 대응되는 새로운 룰로서 등록된다.
룰이 등록된 상태에서, 게이트웨이(GW)는 등록된 룰에 포함된 사용자 상황(User Context)이 발생하는지 판단할 수 있다(440). 상기 사용자 상황이 발생하였다고 판단하는 것은, 표 2에 예시한 상태 중에서 적어도 하나 이상의 상태를 감지하는 것 또는 표 2에 예시한 상태 중에서 적어도 하나 이상의 상태로의 상태 변화를 감지하는 것에 해당할 수 있다. 게이트웨이는 사용자 상황이 발생하였다고 판단하면 rule DB에 저장된 rule list에 포함된 정보를 쿼리할 수 있다. 예를 들어 Context Checker 모듈(212)은 디바이스의 상태 정보를 Rule DB(211)에 정의되어 있는 Condition 정보와 비교할 수 있다. 상기 condition 정보는 사용자에 의해 정의된 특정 시간 또는 날짜를 포함할 수 있다.
게이트웨이는, 사용자 상황이 발생하였다고 판단한 경우, 상기 사용자 상황에 대응되는 동작이 스마트 홈 시스템 내의 장치(들)에 의해 수행되도록 제어할 수 있다(460).
사용자는 rule DB에 저장된 Rule list를 조회(inquire)할 수 있다. Rule list가 디스플레이되어 있는 상태에서 사용자는 각각의 rule을 활성화(activate) 또는 비활성화(deactivate) (on/off) 시킬 수 있다. 사용자의 비활성화 입력이 없더라도, Rule 리스트의 조회 시에 디바이스와의 연동에 문제가 있는 Rule은 비활성화 상태가 될 수 있다. Rule 리스트의 조회 시에 활성화 또는 비활성화 (on/off) 여부는 구분하여 표시할 수 있다. 상기 구분하여 표시하는 것은, 예를 들어, 색깔을 다르게 표시하는 것에 해당할 수 있다. Rule 리스트의 조회 시에 사용자는 각각의 Rule에 대하여 condition(user context), action(User Operation), name 또는 icon을 추가, 편집 또는 삭제할 수 있다.
사용자는, 게이트웨이 또는 게이트웨이에 연결된 디바이스에 포함된 툴(tool)을 통하여 조건 및 동작을 입력함에 의해, 룰을 새로 생성할 수 있다. 이와 달리, 게이트웨이가 사용자의 디바이스 사용 및 컨텍스트의 패턴의 연관관계(relation)을 분석하고 상기 분석 결과를 통해 조건 및 동작을 추출해 자동으로 룰을 생성할 수 있다.
도 5는 본 발명의 일 실시예에 따른 사용자의 장치 사용 및 컨텍스트의 패턴에 기반하여 룰을 생성하고 생성한 룰을 적용하는 프로세스를 나타낸다.
도 5에서 이벤트는 디바이스에 의해 감지되는 사용자 상황 및 디바이스에 대한 사용자 동작을 의미하는 것으로 정의한다. 스마트 홈 시스템은 이벤트를 저장하는 이벤트 히스토리 저장소(Event History Repository)(505)를 포함할 수 있다. 이벤트 히스토리 저장소(505)에 저장된 사용자 상황 및 사용자 동작에 대한 정보는 저장후 일정 시간 이후 자동으로 폐기될 수 있다.
스마트 홈 시스템은, 사용자에 의한 디바이스의 동작이 감지되면(510), 동작이 감지된 시점 전후의 일정한 시간 구간(time period) 동안 스마트 홈 시스템이 모니터링한 정보를 이벤트 히스토리 저장소(505)에 저장할 수 있다(515). 상기 디바이스의 동작은, 예를 들어 사용자가 현관문을 열고 밖에서 들어오는 움직임에 해당할 수 있다. 상기 감지된 시점 전후의 일정한 시간 구간은, 예를 들어 상기 움직임이 감지된 때로부터 2분간에 해당할 수 있다. 상기 스마트 홈 시스템이 모니터링한 정보는 스마트 홈 시스템이 포함하는 센서/기기(sensor/device)로부터 획득한 정보이다. 상기 스마트 홈 시스템이 모니터링한 정보는, 예를 들어 불을 켜는 사용자 동작, TV를 켜는 사용자 동작 및 부엌에 들어가는 사용자 상황을 포함할 수 있다.
스마트 홈 시스템은 주기적으로, 사용자 입력에 의해 또는 이벤트 감지시마다 룰을 생성하기 위해서 이벤트 히스토리 저장소(505)에 저장된 센서/기기 정보(이벤트 정보)를 검색(retrieve)하고(520), 검색된 이벤트 정보에 기초하여 시간 구간별로 반복되는 이벤트가 존재하는지 판단할 수 있다(525). 반복되는 이벤트가 존재하면 이벤트에 포함된 사용자 상황 및 사용자 동작을 추출하고, 추출된 사용자 상황 및 사용자 동작을 이벤트 히스토리 저장소(505)에 저장할 수 있다(530). 상기 저장에 의해, 특정 사용자 상황에 의해 트리거되는 특정 사용자 동작이 포함된 룰 생성 절차가 완료된다(535).
본 발명의 다른 실시예에 따르면 이벤트 히스토리 저장소(505)는 반복적인 이벤트 정보의 저장 과정에서 특정 동작(들)에 대하여 일정 횟수 이상으로 반복되는 조건(들)이 있는 경우, 상기 반복되는 조건(들) 및 특정 동작(들)을 포함하는 룰을 생성하여 사용자에게 추천할 수 있다.
스마트 홈 시스템은 디바이스의 센서/기기 상태 변화를 감지하면(540), 상기 센서/기기 상태 변화의 감지 전에 이벤트 히스토리 저장소(505)에 저장된 센서/기기 정보(이벤트 정보)를 검색할 수 있다(545). 스마트 홈 시스템은 상기 검색에 의해 획득한 이벤트 정보에 포함된 사용자 상황을 감지된 상태 변화와 일치하는지 판단하고(550), 상기 사용자 상황이 감지한 상태 변화와 일치하면 상기 사용자 상황에 대응되는 동작을 실행한다(555).
도 6은 본 발명의 일 실시예에 따른 동작 구간을 나타낸다.
(a)와 (b)는 각각 k7(조건)이 감지된 경우의 동작 구간(Action Period) 및 동작 구간 동안 감지된 이벤트(사용자 상황 및 사용자 동작)을 나타내고 있다. 본 명세서 및 청구범위에 있어서 동작 구간은 기록 구간(Recording Period)과 동일한 의미로 사용된다. 도 6에서 알 수 있듯이 k7(조건)에 대응하는 동작 구간은 k7의 감지 시점 이전에 시작하여 k7의 감지 시점 이후에 종료된다. 이와 달리 조건이 감지되는 시점에 동작 구간이 시작하거나 종료되는 것으로 구현할 수 있다. 상기 동작 구간은 미리 설정된 시간 구간으로서, 예를 들어, 30초, 2분, 30분 또는 2시간, 48시간 중의 하나에 해당할 수 있다. 상기 동작 구간(기록 구간)은 사용자의 특정 행위(예를 들어, 외부에서 집의 입구의 문을 여는 동작) 전후에 사용자가 관련 동작(예를 들어, 집의 입구에서 가장 먼방까지 이동하는데 걸리는 시간)을 수행하는데 통상적으로 걸리는 시간을 고려하여 결정될 수 있다.
도 6에서 k2, k3, k7는 디바이스의 상태 변화(사용자 상황)을 의미하고, a,b,c,d,…는 디바이스에 대한 사용자 동작을 의미한다. 도 6에서 (a)에서의 동작 구간 동안 감지된 이벤트 E1={a, b, c, d, m, n, u, w, k2, k3, k7}라 둘 수 있다. 도 6에서 (b)에서의 동작 구간 동안 감지된 이벤트 E2={a, b, c, d, e, m, r, t, y, k3, k7}라 둘 수 있다. 상기 E1 및 E2는 각각의 사용자 상황 및 사용자 동작이 발생한 시점을 고려하지 않고 표시하였다. 이와 달리, 발생한 순서를 고려하여 사용자 상황 및 사용자 동작을 특정할 수도 있다.
도 7은 본 발명의 일 실시예에 따라 동작 구간에서 이벤트를 추출하는 프로세스를 나타낸다.
스마트 홈 시스템은, 디바이스(예를 들어 센서)의 상태 변화가 감지되면(710), 상태 변화가 감지된 시점 전후의 일정한 시간 구간 동안 스마트 홈 시스템이 모니터링한 정보를 이벤트 히스토리 저장소(720)에 저장할 수 있다. 도 5에서는 사용자 동작 감지에 기초하여 저장하는 반면, 도 7에서는 상태 변화 감지에 기초하여 저장하는 것을 도시하고 있다. 상기 디바이스의 상태 변화는, 예를 들어 현재 시간이 새벽(05:00~08:00)에서 오전(08:00~12:00)으로 변경하는 것에 해당할 수 있다. 상기 새벽 또는 오전에 대응하는 구체적인 시간은 사용자가 임의로 변경할 수 있다. 상기 스마트 홈 시스템이 모니터링한 정보는, 예를 들어 침실에서의 사용자의 움직임 감지, 거실에서의 사용자의 움직임 감지 및 거실의 전등을 켜는 사용자 동작을 포함할 수 있다.
스마트 홈 시스템은 주기적으로, 사용자 입력에 의해 또는 이벤트 감지시마다 룰을 생성하기 위해서 이벤트 히스토리 저장소(720)에 저장된 이벤트 정보들을 검색(retrieve)한다. 스마트 홈 시스템은 검색된 이벤트 정보들에 기초하여 동작 구간별로 반복되는 패턴의 이벤트가 존재하는지 판단할 수 있다(730).
검색된 이벤트 정보들에 기초하여 동작 구간별로 반복되는 패턴의 이벤트가 존재하는지 판단하는 과정을 도 6을 참고하여 설명한다. 도 6에 나타난 바와 같이, 과거의 이벤트는 시간 차원에서 각각의 동작 구간으로 나눌 수 있다.
각각의 동작 구간에 대해 우선 사용자 동작을 추출하는 과정을 설명하면, (a)의 사용자 동작 S1={a, b, c, d, m, n, u, w} 이며, (b)의 사용자 동작 S2={a, b, c, d, e, m, r, t, y} 이라 가정할 수 있다. 이 경우 S1과 S2의 교집합(intersection) S={a, b, c, d, m}이 추출된 사용자 동작인 것으로 결정할 수 있다. 상기 추출된 사용자 동작은 공통 사용자 동작(common user operation)으로 호칭할 수 있다.
각각의 동작 구간에 대해 사용자 상황(장치 상태)을 추출하는 과정을 설명하면, (a)의 사용자 상황 K1={k2, k3, K7} 이며, (b)의 사용자 상황 K2={k3, k2} 이라 가정할 수 있다. 이 경우 K1과 K2의 교집합 K={k2, k3}이 추출된 사용자 상황을 나타낸다. 상기 추출된 사용자 상황은 공통 사용자 상황(common user context) 또는 공통 장치 상태(common device state)로 호칭할 수 있다.
도 6에서는 두 개의 동작 구간을 비교하는 것에 대해서만 나타나있으나 이에 한정되는 것은 아니고 두 개 보다 많은 동작 구간을 비교하여 공통되는 이벤트(사용자 동작 및 사용자 상황)를 추출하는 것도 가능하다.
스마트 홈 시스템은 반복되는 패턴의 이벤트가 존재하는지 판단한다(730). 스마트 홈 시스템은 반복되는 패턴의 이벤트가 존재한다고 판단하면 이벤트에 포함된 사용자 상황 및 사용자 동작을 추출하고, 추출된 사용자 상황 및 사용자 동작을 이벤트 히스토리 저장소(720)에 저장할 수 있다(740).
상기 실시예들에서는 장치가 감지한 사용자 상황(user context)인지 아니면 장치에 대한 사용자 동작(user operation)인지에 따라 조건(condition)과 동작(action)을 구별하였다. 조건과 동작을 구별하는 기준이 이에 한정되는 것은 아니다. 예를 들어, 특정 사용자 상황 또는 특정 사용자 동작을 감지한 경우, 특정 사용자 상황 또는 특정 사용자 동작을 감지하기 전에 감지한 다른 사용자 상황 또는 사용자 동작은 조건이고, 특정 사용자 상황 또는 특정 사용자 동작을 감지한 이후에 감지한 다른 사용자 상황 또는 사용자 동작은 동작인 것으로 정의할 수도 있다.
도 8은 본 발명의 일 실시예에 따른 명칭 및 아이콘을 나타낸다.
사용자는 스마트 홈 시스템의 디바이스 또는 게이트웨이를 통해 룰 목록(rule list)을 조회할 수 있다. 이 때 룰이 이름 또는 아이콘을 포함하는 경우 상기 이름 또는 아이콘을 상기 디바이스 또는 게이트웨이에 표시할 수 있다. 룰의 명칭(810) 및 아이콘(820)의 예시를 도 8에서 도시하고 있다. 한편, 룰이 포함하는 조건 및 동작도 각각 명칭 및 아이콘을 가질 수 있다. 동작의 명칭(830), 동작의 아이콘(840), 조건의 명칭(850) 및 조건의 아이콘(860)의 예시를 도 8에서 도시하고 있다.
도 9는 본 발명의 일 실시예에 따른 게이트웨이 장치의 구성을 도시한다.
도 9를 참조하면, 게이트웨이 장치(게이트웨이)는 감지부(910), 입력부(920), 저장부(930), 통신부(940) 및 표시부(950)의 구성을 포함할 수 있다.
감지부(910)는 사용자 상황 또는 사용자 동작을 감지하기 위하여 하나 이상의 센서를 포함할 수 있다. 예를 들어, 지자기 센서, 온도 센서, 기압 센서, 근접 센서, 조도 센서, GPS(Global Positioning System), 가속도 센서, 각속도 센서, 속도 센서, 중력 센서, 기울기 센서, 자이로 센서, 가스 센서, 카메라 또는 마이크 등이 포함될 수 있다.
입력부(920)는 게이트웨이의 기능 제어 및 각종 기능들의 설정과 관련되어 사용자에 의해 입력되는 신호를 제어부(960)로 전달한다. 그리고 입력부(920)는 표시부(950)와 결합되어 터치 스크린으로 형성되거나, 일반적인 키패드로 형성될 수 있다. 또한 입력부(920)는 기능키, 소프트키 등으로 구성될 수 있다.
저장부(930)는 게이트웨이가 수집한 모니터링 정보 또는 사용자가 입력한 정보를 기록(record) 또는 저장할 수 있다. 상기 모니터링 정보는 스마트 홈 시스템의 디바이스들(게이트웨이 포함)이 감지한 사용자 상황에 대한 정보 또는 상기 디바이스들에 대한 사용자 동작에 대한 정보를 포함할 수 있다. 본 발명의 다른 실시예에 따르면, 저장부(930)는 별도의 서버에 포함되는 형태로 구현할 수도 있다.
통신부(940)는 다른 장치 또는 서버와 통신을 수행하여 모니터링 정보 또는 다른 장치의 제어에 필요한 정보를 송수신할 수 있다. 표시부(950)는 사용자 인터페이스를 통해 룰 목록 또는 추천 룰 등의 정보를 표시할 수 있다.
제어부(960)는 게이트웨이를 구성하는 구성들의 전반적인 상태 및 동작을 제어한다. 제어부(960)는 감지부(910) 또는 통신부(940)를 통해 전달받은 모니터링 정보를 저장부(930)에 저장하도록 제어한다. 제어부(960)는 표시부(950)가 정보를 표시하도록 제어하고, 입력부(920)를 통해 전달받은 사용자 입력에 대응되는 기능을 수행하도록 다른 부를 제어하여, 본 발명에서 설명하고 있는 다양한 실시예에 따른 프로세스가 실행되도록 한다.
도 9에서 감지부(910), 입력부(920), 저장부(930), 통신부(940), 표시부(950) 및 제어부(960)가 별도의 블록으로 구성되고, 각 블록이 상이한 기능을 수행하는 것으로 기술하였지만 이는 기술상의 편의를 위한 것일 뿐, 반드시 이와 같이 각 기능이 구분되어지는 것은 아니다.
도 10은 본 발명의 일 실시예에 따라 룰을 생성하고 생성된 룰을 실행하는 흐름도를 나타낸다.
스마트 홈 시스템의 게이트웨이 장치는 스마트 홈 시스템에 포함된 장치들 중에서, 사용자에 의해 기록 구간이 할당된(assigned) 제1 장치 그룹에 대한 커스터마이징된(customized) 사용자 동작을 감지할 수 있다(1005). 장치 그룹은 장치를 하나만 가지는 경우도 포함할 수 있다. 상기 커스터마이징된 사용자 동작은 표 3에서 예시된 하나 이상의 동작을 포함할 수 있다. 상기 커스터마이징된 사용자 동작은, 예를 들어 TV를 켜고 에어컨을 켜는 동작에 해당할 수 있다. 상기 기록 구간은 자동 룰 생성을 위해 모니터링 정보를 기록하는 시간 구간이다. 게이트웨이 장치는 상기 기록 구간 동안 스마트 홈 시스템에 포함된 장치들의 상태 변화를 기록할 수 있다(1010).
게이트웨이 장치는, 자동으로 룰을 생성하기 위하여, 주기적으로, 사용자 입력을 감지하면 또는 이벤트 감지시마다, 현재까지 기록한 모니터링 정보(상태 변화)를 검색(retrieve)할 수 있다(1015). 주기적으로 모니터링 정보를 검색하는 것은, 예를 들어 12시간마다 수행될 수 있다. 이벤트 감지는 예를 들어, 집 안에서 30분 이상 움직임이 감지되지 않는 것에 해당할 수 있다.
게이트웨이 장치는 검색된 모니터링 정보(상태 변화)들에 대하여 반복되는 패턴을 가지는 상태 변화가 있는 경우 해당 상태 변화를 후보(candidate) 상태 변화로 결정하고 후보 상태 변화를 사용자가 열람할 수 있도록 표시한다(1020). 상기 후보 상태 변화는, 예를 들어 토요일 오전 10시의 도래를 포함할 수 있다.
공통(common) 상태 변화는, 룰(rule)의 등록 후에 커스터마이징된 사용자 동작을 트리거하는 상태 변화이다. 후보 상태 변화를 공통 상태 변화로 설정하는 사용자 입력이 있으면, 게이트웨이 장치는 후보 상태 변화를 공통 상태 변화로 설정한다(1025). 다른 실시예에 따르면 일정 시간 동안 사용자 입력이 없는 경우에도 후보 상태 변화를 공통 상태 변화로 설정할 수 있다. 이와 달리, 일정 시간 동안 사용자 입력이 없으면 공통 상태 변화의 설정 없이 후보 상태 변화의 표시를 종료할 수도 있다.
게이트웨이 장치는 상기 설정된 공통 상태 변화 및 커스터마이징된 사용자 동작을 매핑하여 저장한다(1030). 상기 과정을 통해 룰이 생성된다.
룰이 생성된 후 게이트웨이 장치는 상기 설정된 공통 상태 변화와 매칭되는 상태 변화가 감지되는지 판단할 수 있다(1035). 게이트웨이 장치는 상기 설정된 공통 상태 변화와 매칭되는 상태 변화가 감지된 것으로 판단하면 상기 커스터마이징된 사용자 동작을 사용자 입력없이 수행하도록 제1장치 그룹에 요청할 수 있다(1040).
도 10의 과정을 통해, 게이트웨이 장치는 사용자가 일상적으로(routinely) 입력하는 동작이 수행될 때의 상황 정보를 수집하여, 수집한 상황 정보와 동일한 상황인 경우 상기 사용자 입력에 의해 수행되던 동작이 사용자 입력 없이 수행되도록 한다. 예를 들어, 토요일 오전 10시마다 사용자가 TV 및 에어컨을 켜는 패턴을 학습한 게이트웨이 장치는, 토요일 오전 10시마다 사용자가 입력하지 않더라도 자동으로 TV 및 에어컨을 켜는 제어를 수행할 수 있다.
도 11은 본 발명의 다른 일 실시예에 따라 룰을 생성하고 생성된 룰을 실행하는 흐름도를 나타낸다.
스마트 홈 시스템의 게이트웨이 장치는 스마트 홈 시스템에 포함된 장치들에 대한 사용자 동작 또는 상기 장치들의 상태를 감지할 수 있다(1105). 상기 사용자 동작은 표 3에서 예시된 하나 이상의 동작을 포함할 수 있다. 상기 상태는 표 2에서 예시된 하나 이상의 상태를 포함할 수 있다. 게이트웨이 장치는 상기 감지한 사용자 동작 또는 상태를 기록할 수 있다(1110). 여기서 상태를 기록하는 것은 스마트 홈 시스템의 모든 장치의 상태를 기록하는 것이 아니라, 미리 정해진 장치(들)의 상태를 기록하는 것에 해당할 수 있다.
게이트웨이 장치는, 자동으로 룰을 생성하기 위하여, 주기적으로, 사용자 입력을 감지하면 또는 이벤트 감지시마다, 현재까지 기록한 사용자 동작 및 상태를 검색(retrieve)할 수 있다(1115).
게이트웨이 장치는 검색된 사용자 동작 및 상태 중에서 제1장치 그룹에 대한 사용자 동작 및 제1장치 그룹의 상태를 추출할 수 있다(1120). 제1장치 그룹은 스마트 홈 시스템에 포함된 장치들 중 사용자에 의해 기록 구간이 할당된(assigned) 하나 이상의 장치를 의미한다. 상기 기록 구간은 사용자 동작 및 상태를 그룹화하기 위하여 각 제1장치 그룹에 대하여 할당된 시간 구간이다. 상기 기록 구간은 제1장치 그룹이 사용자 동작 또는 상태를 감지한 시점 또는 그 이전에 시작하여 제1장치 그룹이 사용자 동작 또는 상태를 감지한 시점 또는 그 이후에 종료될 수 있다.
게이트웨이 장치는 각각의 추출한 사용자 동작 또는 추출한 상태에 대하여 기록 구간 별로 사용자 동작 및 상태를 각각 그룹화할 수 있다(1125). 게이트웨이 장치는 반복되는 패턴을 가지는 그룹화된 사용자 동작 또는 그룹화된 상태가 있는 경우, 해당 사용자 동작 또는 상태를 공통 사용자 동작 및 공통 상태로 결정할 수 있다(1130). 상기 반복되는 패턴을 가지는 것은 미리 정해진 횟수(예를 들어 5회) 반복되는 것으로 정의될 수 있다. 상기 미리 정해진 횟수는 그룹화된 사용자 동작 또는 그룹화된 상태에 따라 다르게 정의될 수 있다. 다른 실시예에 따르면, 도 10의 1020 단계와 마찬가지로, 공통 사용자 동작 및 공통 상태로 결정되기 위해 후보 사용자 동작 및 후보 상태를 표시하여 사용자의 선택 입력을 받도록 할 수 있다.
게이트웨이 장치는 결정된 공통 사용자 동작 및 공통 상태를 매핑하여 저장한다(1135). 상기 과정을 통해 룰이 생성된다.
룰이 생성된 후 게이트웨이 장치는 스마트 홈 시스템에 포함된 디바이스들 중에서 미리 정해진 장치(들)의 현재 상태가 상기 저장된 공통 상태와 일치하는지 판단할 수 있다(1140). 상기 미리 정해진 장치(들)은 1105단계에서 사용자 동작 또는 상태가 감지된 장치(들)과 동일하거나 이에 포함될 수 있다. 게이트웨이 장치는 미리 정해진 장치(들)의 현재 상태가 상기 저장된 공통 상태와 일치하는 것으로 판단하면 상기 공통 사용자 동작을 사용자 입력 없이 수행하도록 제1장치 그룹에 요청할 수 있다(1145).
도 11의 같은 과정을 통해, 게이트웨이 장치는 사용자가 일상적으로 반복하는 동작이 수행될 때의 상황 정보(조건)를 수집하여, 수집한 상황 정보와 동일한 상황이 감지되면 상기 반복되는 동작이 사용자 입력 없이 수행되도록 한다.
도 12는 본 발명의 일 실시예에 따라 게이트웨이가 다른 장치를 제어하는 흐름도를 나타낸다.
스마트 홈 시스템의 게이트웨이 장치는 제1 장치 그룹으로부터 사용자 동작(user operation) 정보를 수신하면, 제2 장치 그룹으로부터 수신하는 장치 상태(device state) 정보를 기록 구간(recording period) 동안 기록한다(1205). 상기 제1 장치 그룹과 제2 장치 그룹은 각각 적어도 하나의 장치를 포함할 수 있다. 상기 제1 장치 그룹이 포함하는 적어도 하나의 장치와 상기 제2 장치 그룹이 포함하는 적어도 하나의 장치는 동일할 수 있다.
상기 사용자 동작 정보는 제1 장치 그룹에 대한 사용자의 동작을 포함할 수 있다. 상기 사용자 동작 정보는, 사용자에 의해 커스터마이징된(customized) 하나 이상의 사용자 동작을 포함할 수 있다. 상기 커스터마이징된 사용자 동작은, 예를 들어, 세탁기에서 사용자가 설정한 세탁 모드 버튼을 누르는 동작에 해당할 수 있다.
상기 장치 상태 정보는 제2 장치 그룹이 감지한 상황 정보 또는 제2 장치 그룹에 포함된 적어도 하나의 장치의 상태 정보를 포함할 수 있다. 상기 장치 상태 정보는 시간 정보 또는 특정인의 접근 정보를 포함할 수 있다. 상기 시간 정보는 특정 날짜, 요일, 시간 또는 이들의 조합을 포함할 수 있다. 상기 특정인의 접근 접근 정보는 상기 특정인이 소지하는 NFC 태그의 접근 알림에 대한 정보를 포함할 수 있다. 상기 장치 상태 정보는, 제1 장치 그룹에 포함된 하나 이상의 장치의 상태 변화를 포함할 수 있다. 상기 장치의 상태 변화는 상기 장치(예를 들어 온도 조절 장치)가 하나의 상태(예를 들어 온도 높음)에서 다른 상태(예를 들어 온도 보통)로 변화한 것을 감지하는 것을 의미한다. 즉, 상기 장치 상태 정보가 장치의 상태 변화를 포함하는 경우에는, 상기 장치 상태 정보가 장치의 과거의 상태 및 현재의 상태를 모두 포함할 수 있다.
상기 기록 구간은 상기 제1 장치 그룹 및 상기 사용자 동작 정보에 기초하여 결정될 수 있다. 예를 들면, 제1 장치 그룹이 냉장고이고 사용자 동작 정보가 온도 올림인 경우에 기록 구간이 3분인 반면, 제1 장치 그룹이 냉장고이고 사용자 동작 정보가 온도 내림인 경우에는 기록 구간이 4분인 것으로 결정될 수 있다. 다른 예를 들면, 제1 장치 그룹이 TV 및 에어컨인 경우 사용자 동작 정보에 관계없이 기록 구간이 30분인 반면, 제1 장치 그룹이 TV인 경우 사용자 동작 정보에 관계없이 기록 구간이 10분인 것으로 결정될 수 있다. 위의 예는 예시일 뿐이며, 다른 형태로 구현될 수 있다.
상기 기록 구간은, 상기 제1 장치 그룹으로부터 상기 사용자 동작 정보를 수신한 시점 또는 그 이전에 시작하고, 상기 제1 장치 그룹으로부터 상기 사용자 동작 정보를 수신한 시점 또는 그 이후에 종료될 수 있다. 예를 들어, 10:00에 상기 사용자 동작 정보를 수신(감지)한 경우, 상기 기록 구간은 09:50~10:00, 09:55~10:05 또는 10:00~10:10 중의 어느 하나에 해당할 수 있다.
게이트웨이 장치는 기록한 장치 상태 정보 및 이전에 기록한 적어도 하나의 장치 상태 정보에 기초하여, 공통(common) 장치 상태 정보를 추출한다(1210). 상기 추출은 주기적으로 또는 미리 정해진 이벤트가 발생되면 수행될 수 있다. 상기 미리 정해진 이벤트는 사용자 입력 감지 또는 특정 정보의 수신을 포함할 수 있다.
게이트웨이 장치는, 미리 정해진 시간(예를 들어 7일) 동안 미리 정해진 횟수(예를 들어 5회) 이상 기록된 장치 상태 정보를 공통 장치 상태 정보로 결정할 수 있다. 상기 미리 정해진 시간은 상기 기록 구간의 3배 이상의 시간에 해당할 수 있다. 다른 형태로서, 표시부에서 미리 정해진 횟수(예를 들어 7회) 이상 기록된 장치 상태 정보를 표시하고, 상기 입력부에서 미리 정해진 사용자 입력(예를 들어 상기 표시된 장치 상태 정보에 대한 선택 입력)을 감지하면 상기 표시한 장치 상태 정보를 공통 장치 상태 정보로 결정할 수 있다. 상기 미리 정해진 횟수 이상 기록된 장치 상태 정보는 명칭 또는 아이콘의 형태로 표시할 수 있다.
게이트웨이 장치는, 상기 추출된 공통 장치 상태 정보를 상기 사용자 동작 정보와 매칭하여 저장할 수 있다(1215). 게이트웨이 장치는, 정보의 편집 요청 입력을 감지하면, 저장된 공통 장치 상태 정보 및 사용자 동작 정보를 편집할 수 있는 사용자 인터페이스를 표시할 수 있다. 사용자 인터페이스를 통한 장치의 선택 입력을 감지하면, 상기 선택된 장치에 대응되는 저장된 공통 장치 상태 정보 및 사용자 동작 정보를 명칭 또는 아이콘의 형태로 표시할 수 있다. 사용자는 표시된 공통 장치 상태 정보 및 사용자 동작 정보 중에서 편집할 정보를 선택할 수 있다.
게이트웨이 장치는, 상기 추출된 공통 장치 상태 정보에 상응하는 장치 상태 정보를 상기 제2 장치 그룹으로부터 수신하면, 상기 제1 장치 그룹이 상기 사용자 동작 정보에 상응하는 사용자 동작을 실행하도록 제1 장치 그룹에 요청할 수 있다(1220). 이에 따라 제1 장치 그룹이 요청받은 사용자 동작을 실행한다.
도 13은 본 발명의 다른 일 실시예에 따른 컨텍스트를 이용한 디바이스 동작을 위한 흐름도를 나타낸다.
컨텍스트를 이용한 디바이스 동작을 위해, 게이트웨이는 과거의 동작을 시간 차원에서 각각의 동작 구간(기록 구간)으로 나누고(1310), 각각의 동작 구간에 대해 액션을 추출하고(1320), 각각의 액션에 대해 조건을 추출할 수 있다(1330).
110 : 게이트웨이 120 : 사용자 단말
130 : 연관 디바이스 140 : 스마트 가전
150 : 리모트 서버

Claims (22)

  1. 게이트웨이 장치가 다른 장치를 제어하는 방법에 있어서,
    제1 장치 그룹으로부터 사용자 동작(user operation) 정보를 수신하면, 제2 장치 그룹으로부터 수신하는 장치 상태(device state) 정보를 기록 구간(recording period) 동안 기록하는 단계;
    상기 기록한 장치 상태 정보 및 이전에 기록한 적어도 하나의 장치 상태 정보에 기초하여, 공통(common) 장치 상태 정보를 추출하는 단계; 및
    상기 추출된 공통 장치 상태 정보에 상응하는 장치 상태 정보를 상기 제2 장치 그룹으로부터 수신하면, 상기 제1 장치 그룹이 상기 사용자 동작 정보에 상응하는 사용자 동작을 실행하도록 제1 장치 그룹에 요청하는 단계를 포함하는 것을 특징으로 하는 장치 제어 방법.
  2. 제1항에 있어서, 상기 기록 구간은,
    상기 제1 장치 그룹 및 상기 사용자 동작 정보에 기초하여 결정되는 것을 특징으로 하는 장치 제어 방법.
  3. 제1항에 있어서, 상기 기록 구간은,
    상기 제1 장치 그룹으로부터 상기 사용자 동작 정보를 수신한 시점 또는 그 이전에 시작하고, 상기 제1 장치 그룹으로부터 상기 사용자 동작 정보를 수신한 시점 또는 그 이후에 종료하는 것을 특징으로 하는 장치 제어 방법.
  4. 제1항에 있어서,
    상기 추출된 공통 장치 상태 정보를 상기 사용자 동작 정보와 매칭하여 저장하는 단계; 및
    사용자 입력에 의해, 상기 저장된 공통 장치 상태 정보 및 사용자 동작 정보를 편집하는 단계를 더 포함하는 것을 특징으로 하는 장치 제어 방법.
  5. 제4항에 있어서, 상기 저장된 공통 장치 상태 정보 및 사용자 동작 정보를 편집하는 단계는,
    사용자에 의한 장치의 선택 입력을 감지하면, 상기 선택된 장치에 대응되는 저장된 공통 장치 상태 정보 및 사용자 동작 정보를 명칭 또는 아이콘의 형태로 표시하는 단계를 포함하는 것을 특징으로 하는 장치 제어 방법.
  6. 제1항에 있어서, 상기 공통 장치 상태 정보를 추출하는 단계는,
    미리 정해진 시간 동안 미리 정해진 횟수 이상 기록된 장치 상태 정보를 공통 장치 상태 정보로 결정하는 단계를 포함하는 것을 특징으로 하는 장치 제어 방법.
  7. 제1항에 있어서, 상기 공통 장치 상태 정보를 추출하는 단계는,
    미리 정해진 횟수 이상 기록된 장치 상태 정보를 표시하는 단계;
    미리 정해진 사용자 입력을 감지하면 상기 표시한 장치 상태 정보를 공통 장치 상태 정보로 결정하는 단계를 포함하는 것을 특징으로 하는 장치 제어 방법.
  8. 제1항에 있어서, 상기 장치 상태 정보는,
    시간 정보 또는 특정인의 접근 알림 정보를 포함하는 것을 특징으로 하는 장치 제어 방법.
  9. 제1항에 있어서, 상기 장치 상태 정보는,
    제1 장치 그룹에 포함된 하나 이상의 장치의 상태 변화를 포함하는 것을 특징으로 하는 장치 제어 방법.
  10. 제1항에 있어서, 상기 사용자 동작 정보는,
    사용자에 의해 커스터마이징된 하나 이상의 사용자 동작을 포함하는 것을 특징으로 하는 장치 제어 방법.
  11. 제1항에 있어서, 상기 공통 장치 상태 정보를 추출하는 단계는,
    주기적으로 또는 미리 정해진 이벤트가 발생하면 상기 공통 장치 상태 정보를 추출하는 것을 특징으로 하는 장치 제어 방법.
  12. 다른 장치를 제어하는 게이트웨이 장치에 있어서,
    다른 장치와 정보를 송수신(communicate)하는 통신부;
    상기 정보를 기록하거나 또는 저장하는 저장부; 및
    제1 장치 그룹으로부터 사용자 동작(user operation) 정보를 수신하면 제2 장치 그룹으로부터 수신하는 장치 상태(device state) 정보를 기록 구간(recording period) 동안 기록하고, 상기 기록한 장치 상태 정보 및 이전에 기록한 적어도 하나의 장치 상태 정보에 기초하여 공통(common) 장치 상태 정보를 추출하고, 상기 추출된 공통 장치 상태 정보에 상응하는 장치 상태 정보를 상기 제2 장치 그룹으로부터 수신하면 상기 제1 장치 그룹이 상기 사용자 동작 정보에 상응하는 사용자 동작을 실행하도록 제1 장치 그룹에 요청하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 게이트웨이 장치.
  13. 제12항에 있어서, 상기 기록 구간은,
    상기 제1 장치 그룹 및 상기 사용자 동작 정보에 기초하여 결정되는 것을 특징으로 하는 게이트웨이 장치.
  14. 제12항에 있어서, 상기 기록 구간은,
    상기 제1 장치 그룹으로부터 상기 사용자 동작 정보를 수신한 시점 또는 그 이전에 시작하고, 상기 제1 장치 그룹으로부터 상기 사용자 동작 정보를 수신한 시점 또는 그 이후에 종료하는 것을 특징으로 하는 게이트웨이 장치.
  15. 제12항에 있어서,
    상기 게이트웨이 장치는 사용자에 의한 입력을 감지하는 입력부 및 정보를 표시하는 표시부를 더 포함하고,
    상기 제어부는, 상기 저장부에서 상기 추출된 공통 장치 상태 정보를 상기 사용자 동작 정보와 매칭하여 저장하고, 상기 입력부에서 정보의 편집 요청 입력을 감지하면, 상기 표시부에서 상기 저장된 공통 장치 상태 정보 및 사용자 동작 정보를 편집할 수 있는 사용자 인터페이스를 표시하도록 제어하는 것을 특징으로 하는 게이트웨이 장치.
  16. 제15항에 있어서,
    상기 제어부는, 상기 입력부에서 장치의 선택 입력을 감지하면, 상기 선택된 장치에 대응되는 저장된 공통 장치 상태 정보 및 사용자 동작 정보를 명칭 또는 아이콘의 형태로 표시하도록 상기 표시부를 제어하는 것을 특징으로 하는 게이트웨이 장치.
  17. 제12항에 있어서, 상기 제어부는,
    미리 정해진 시간 동안 미리 정해진 횟수 이상 기록된 장치 상태 정보를 공통 장치 상태 정보로 결정하는 것을 특징으로 하는 게이트웨이 장치.
  18. 제12항에 있어서,
    상기 게이트웨이 장치는 사용자에 의한 입력을 감지하는 입력부 및 정보를 표시하는 표시부를 더 포함하고,
    상기 제어부는, 상기 표시부에서 미리 정해진 횟수 이상 기록된 장치 상태 정보를 표시하고, 상기 입력부에서 미리 정해진 사용자 입력을 감지하면 상기 표시한 장치 상태 정보를 공통 장치 상태 정보로 결정하도록 제어하는 것을 특징으로 하는 게이트웨이 장치.
  19. 제12항에 있어서, 상기 장치 상태 정보는,
    시간 정보 또는 특정인의 접근 알림 정보를 포함하는 것을 특징으로 하는 게이트웨이 장치.
  20. 제12항에 있어서, 상기 장치 상태 정보는,
    제1 장치 그룹에 포함된 하나 이상의 장치의 상태 변화를 포함하는 것을 특징으로 하는 게이트웨이 장치.
  21. 제12항에 있어서, 상기 사용자 동작 정보는,
    사용자에 의해 커스터마이징된 하나 이상의 사용자 동작을 포함하는 것을 특징으로 하는 게이트웨이 장치.
  22. 제12항에 있어서, 상기 제어부는,
    주기적으로 또는 미리 정해진 이벤트가 발생하면 상기 공통 장치 상태 정보를 추출하는 것을 특징으로 하는 게이트웨이 장치.
KR1020140109015A 2013-09-05 2014-08-21 사용자 컨텍스트를 이용한 디바이스 동작의 설정 및 추천 방법 및 장치 KR102233602B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP14842097.9A EP3042280A4 (en) 2013-09-05 2014-09-04 Method and apparatus for configuring and recommending device action using user context
US14/477,364 US10181960B2 (en) 2013-09-05 2014-09-04 Method and apparatus for configuring and recommending device action using user context
CN201480042185.0A CN105431820A (zh) 2013-09-05 2014-09-04 用于使用用户情境来配置和推荐设备动作的方法和装置
PCT/KR2014/008336 WO2015034295A1 (en) 2013-09-05 2014-09-04 Method and apparatus for configuring and recommending device action using user context

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20130106579 2013-09-05
KR1020130106579 2013-09-05

Publications (2)

Publication Number Publication Date
KR20150028191A true KR20150028191A (ko) 2015-03-13
KR102233602B1 KR102233602B1 (ko) 2021-03-30

Family

ID=53023227

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140109015A KR102233602B1 (ko) 2013-09-05 2014-08-21 사용자 컨텍스트를 이용한 디바이스 동작의 설정 및 추천 방법 및 장치

Country Status (3)

Country Link
EP (1) EP3042280A4 (ko)
KR (1) KR102233602B1 (ko)
CN (1) CN105431820A (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017111532A1 (ko) * 2015-12-23 2017-06-29 삼성전자 주식회사 전자기기를 제어하는 방법 및 장치
US10110394B2 (en) 2015-05-11 2018-10-23 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling the same
WO2020080803A1 (ko) * 2018-10-16 2020-04-23 삼성전자주식회사 로봇 청소기 및 그의 제어 방법
US11330320B2 (en) 2016-08-31 2022-05-10 Samsung Electronics Co., Ltd. Display device and method for controlling display device
WO2022239952A1 (ko) * 2021-05-13 2022-11-17 삼성전자주식회사 그래픽 객체를 표시하는 방법 및 장치

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10764153B2 (en) * 2016-09-24 2020-09-01 Apple Inc. Generating suggestions for scenes and triggers
CN106227059A (zh) * 2016-10-08 2016-12-14 三星电子（中国）研发中心 基于室内三维模型的智能家居控制方法和设备
CN106557179A (zh) * 2016-10-10 2017-04-05 上海斐讯数据通信技术有限公司 移动终端的灯的控制方法、系统及移动终端
CN107991897B (zh) * 2017-12-29 2020-11-03 深圳市欧瑞博科技股份有限公司 控制方法及装置
KR20190088128A (ko) * 2018-01-05 2019-07-26 삼성전자주식회사 전자 장치 및 그의 제어 방법
US11032604B2 (en) * 2018-08-31 2021-06-08 Apple Inc. Management of devices in ad hoc rendering networks
CN109600309A (zh) * 2018-10-15 2019-04-09 深圳市欧瑞博科技有限公司 智能网关的交互方法、装置、智能网关及存储介质
CN109902461A (zh) * 2019-03-01 2019-06-18 珠海格力电器股份有限公司 一种电器控制方法、装置、存储介质及电器
CN111367220B (zh) * 2020-03-23 2021-07-23 中国建设银行股份有限公司 物联网设备控制方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06319183A (ja) * 1993-05-07 1994-11-15 Matsushita Electric Ind Co Ltd 端末機器集中制御システム及び該端末機器集中制御システムを構成する集中管理装置、端末機器制御装置、端末機器インターフェイス並びに端末機器の集中制御方法
KR20060066980A (ko) * 2004-12-14 2006-06-19 삼성전자주식회사 사용자의 생활패턴 인식 방법 및 상기 방법에 따른 홈네트워크 시스템
US20070011195A1 (en) * 2003-05-26 2007-01-11 Hiroshi Kutsumi Operation history utilization system
US20070073870A1 (en) * 2005-09-23 2007-03-29 Jun-Hee Park User interface apparatus for context-aware environments, device controlling apparatus and method thereof

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6763371B1 (en) * 1999-05-10 2004-07-13 Telefonaktiebolaget Lm Ericsson (Publ) Method and apparatus for collaborative communication in a communication network
US6924727B2 (en) * 2000-09-27 2005-08-02 Ntt Docomo, Inc. Method for remote control of home-located electronic devices and a management facility
KR101517083B1 (ko) * 2009-05-11 2015-05-15 엘지전자 주식회사 냉장고를 제어하는 휴대 단말기 및 그 동작 방법
KR20110020146A (ko) * 2009-08-21 2011-03-02 삼성전자주식회사 네트워크를 통해 작동 상태 변경 알림이 가능한 디바이스 및 그 통신 방법
KR20110047764A (ko) * 2009-10-30 2011-05-09 삼성전자주식회사 이동 단말을 이용하여 홈 네트워크 시스템을 제어하기 위한 방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06319183A (ja) * 1993-05-07 1994-11-15 Matsushita Electric Ind Co Ltd 端末機器集中制御システム及び該端末機器集中制御システムを構成する集中管理装置、端末機器制御装置、端末機器インターフェイス並びに端末機器の集中制御方法
US20070011195A1 (en) * 2003-05-26 2007-01-11 Hiroshi Kutsumi Operation history utilization system
KR20060066980A (ko) * 2004-12-14 2006-06-19 삼성전자주식회사 사용자의 생활패턴 인식 방법 및 상기 방법에 따른 홈네트워크 시스템
US20070073870A1 (en) * 2005-09-23 2007-03-29 Jun-Hee Park User interface apparatus for context-aware environments, device controlling apparatus and method thereof

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10110394B2 (en) 2015-05-11 2018-10-23 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling the same
WO2017111532A1 (ko) * 2015-12-23 2017-06-29 삼성전자 주식회사 전자기기를 제어하는 방법 및 장치
US11374782B2 (en) 2015-12-23 2022-06-28 Samsung Electronics Co., Ltd. Method and apparatus for controlling electronic device
US11330320B2 (en) 2016-08-31 2022-05-10 Samsung Electronics Co., Ltd. Display device and method for controlling display device
WO2020080803A1 (ko) * 2018-10-16 2020-04-23 삼성전자주식회사 로봇 청소기 및 그의 제어 방법
KR20200046158A (ko) * 2018-10-16 2020-05-07 삼성전자주식회사 로봇 청소기 및 그의 제어 방법
WO2022239952A1 (ko) * 2021-05-13 2022-11-17 삼성전자주식회사 그래픽 객체를 표시하는 방법 및 장치

Also Published As

Publication number Publication date
EP3042280A1 (en) 2016-07-13
EP3042280A4 (en) 2017-04-05
KR102233602B1 (ko) 2021-03-30
CN105431820A (zh) 2016-03-23

Similar Documents

Publication Publication Date Title
KR102233602B1 (ko) 사용자 컨텍스트를 이용한 디바이스 동작의 설정 및 추천 방법 및 장치
US10181960B2 (en) Method and apparatus for configuring and recommending device action using user context
US11595781B2 (en) Electronic apparatus and IoT device controlling method thereof
US20210350279A1 (en) Situation forecast mechanisms for internet of things integration platform
US10171586B2 (en) Physical environment profiling through Internet of Things integration platform
CN108205282A (zh) 智能控制面板及其控制方法和控制装置
EP3019970B1 (en) Interoperability mechanisms for internet of things integration platform
JP5803249B2 (ja) 情報処理装置、情報処理方法、及びプログラム
CN109564579B (zh) 用于物联网集成平台的情况预测机制
CN105573465A (zh) 电子设备和控制电子设备的功率的方法
US20150057808A1 (en) Systems and Methods for Adaptive Smart Environment Automation
US20180164970A1 (en) Automated optimization of user interfaces based on user habits
JP2018514835A (ja) 建物内の環境管理システムを制御するための方法および装置
US10171949B2 (en) Electronic apparatus and operating method thereof
JP2012234421A (ja) 情報処理装置、情報処理方法、及びプログラム
CN109450745A (zh) 信息处理方法、装置、智能控制系统以及智能网关
US20170329865A1 (en) Electronic device and method for providing content
KR20200042178A (ko) IoT 기반 스마트 홈 제어를 위한 멀티모달 인터페이스 시스템의 시각화장치 제어방법
EP3360286B1 (en) Electronic apparatus and iot device controlling method thereof
JP2016021249A (ja) 情報処理装置、情報処理方法、及びプログラム
US11082248B2 (en) Home automation system including changed current usage notification and related methods
EP2950562A1 (en) Portable terminal
Corno et al. Interacting with Smart Environments

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant