CN104885406B - 用于在家庭网络系统中远程控制家庭设备的方法和设备 - Google Patents

用于在家庭网络系统中远程控制家庭设备的方法和设备 Download PDF

Info

Publication number
CN104885406B
CN104885406B CN201380066448.7A CN201380066448A CN104885406B CN 104885406 B CN104885406 B CN 104885406B CN 201380066448 A CN201380066448 A CN 201380066448A CN 104885406 B CN104885406 B CN 104885406B
Authority
CN
China
Prior art keywords
user
household equipment
control
equipment
specific
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380066448.7A
Other languages
English (en)
Other versions
CN104885406A (zh
Inventor
李根哲
权志泫
金京哉
崔宰源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN201910447408.6A priority Critical patent/CN110223495A/zh
Publication of CN104885406A publication Critical patent/CN104885406A/zh
Application granted granted Critical
Publication of CN104885406B publication Critical patent/CN104885406B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/2818—Controlling appliance services of a home automation network by calling their functionalities from a device located outside both the home and the home network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2827—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality
    • H04L12/2829—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality involving user profiles according to which the execution of a home appliance functionality is automatically triggered
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/31—Voice input
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/40—Remote control systems using repeaters, converters, gateways
    • G08C2201/41—Remote control of gateways
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/40—Remote control systems using repeaters, converters, gateways
    • G08C2201/42—Transmitting or receiving remote control signals via a network
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/93—Remote control using other portable devices, e.g. mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Telephonic Communication Services (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明涉及一种包括多个家庭设备的家庭网络系统中的远程控制方法和设备，其中该方法包括：从所述多个家庭设备中的每一个接收操作状态信息；从用户设备接收用于控制所述多个家庭设备中的至少一个的操作的控制命令；基于控制命令确定要控制的家庭设备；向确定要控制的家庭设备发送控制命令；从要控制的家庭设备接收通过执行控制命令而伴随的处理结果信息；以及向用户设备发送处理结果信息。

Description

用于在家庭网络系统中远程控制家庭设备的方法和设备
技术领域
本公开概括而言涉及家庭网络系统，并且更具体地，涉及用于远程控制家庭设备的操作的方法和装置。
背景技术
家庭网络系统是指安装在家庭中的各种家庭设备通过有线或无线网络连接以使能家庭设备之间的通信的系统。高级家庭网络系统通过家庭网关(HGW或H-GW)整合家庭设备以将它们连接到例如互联网协议(IP)网络(也就是说，互联网)的外部公用数据网上，从而提供与互联网相关联的更广泛的各种服务。家庭网络系统可以根据用户的需求控制家庭设备来提供用户所期望的服务。
随着家庭设备的类型已经多样化并且用户的需求也已相应地多样化，已出现对于接受各种用户需求并提供最佳服务的大量努力的需要。
发明内容
技术问题
因此，本公开的一方面将提供用于在家庭网络系统中远程控制家庭设备的操作的方法和装置。
本公开的另一方面将提供用于在家庭网络系统中通过使用语音命令来远程控制家庭设备的操作的方法和装置。
本公开的又一方面将提供用于在家庭网络系统中以房间为基础来远程控制家庭设备的操作的方法和装置。
本公开的又一方面将提供用于在家庭网络系统中基于用户简档来控制家庭设备的操作的方法和装置。
依照本公开的一方面，提供一种包括多个家庭设备的家庭网络系统中的远程控制方法，该远程控制方法包括：从多个家庭设备的各个接收操作状态信息，从用户设备接收用于多个家庭设备中的至少一个的操作控制的控制命令，基于控制命令确定控制目标家庭设备，向所确定的控制目标家庭设备发送控制命令，从控制目标家庭设备接收与控制命令的运行相对应的处理结果信息，以及向用户设备发送处理结果信息。
依照本公开的另一方面，提供一种用于在包括多个家庭设备的家庭网络系统中的远程控制的网关装置，该网关装置包括：至少一个通信模块，被配置为以有线/无线方式与多个家庭设备和用户设备通信；以及控制器，被配置为控制如下操作：从多个家庭设备的各个接收操作状态信息，从用户设备接收用于多个家庭设备中的至少一个的操作控制的控制命令，基于控制命令确定控制目标家庭设备，向所确定的控制目标家庭设备发送控制命令，从控制目标家庭设备接收与控制命令的运行相对应的处理结果信息，并且向用户设备发送处理结果信息。
依照本公开的又一方面，提供一种包括多个家庭设备的家庭网络系统中的远程控制方法，该远程控制方法包括向收集多个家庭设备的操作状态信息并控制多个家庭设备的操作的家庭网关(HGW)发送用于多个家庭设备中的至少一个的操作控制的控制命令，并且响应于控制命令的发送从HGW接收与控制命令的运行相对应的处理结果信息，其中通过识别用户的语音命令来生成控制命令。
技术方案
依照本公开的又一方面，提供一种用于在包括多个家庭设备的家庭网络系统中的远程控制的用户设备，该用户设备包括：至少一个通信模块，被配置为与控制多个家庭设备的操作的网络实体通信；以及控制器，被配置为控制如下操作：向收集多个家庭设备的操作状态信息并控制多个家庭设备的操作的家庭网关(HGW)发送用于多个家庭设备中的至少一个的操作控制的控制命令，并且响应于控制命令的发送从HGW接收与控制命令的运行相对应的处理结果信息，其中通过识别用户的语音命令来生成控制命令。
附图说明
图1是图示根据本公开的实施例的家庭网络系统的结构的示意图；
图2A是图示根据本公开的实施例的可与移动终端连接的家庭网络系统的结构的示意图；
图2B是图示根据本公开的实施例的通过识别语音命令的移动终端远程控制的家庭网络系统的结构的示意图；
图3是图示根据本公开的实施例的家庭网关(HGW)的结构的框图；
图4是图示根据本公开的实施例的移动终端的结构的框图；
图5是图示根据本公开的实施例的远程控制家庭设备的操作的家庭网络系统的结构的框图；
图6是图示根据本公开的实施例的识别语音命令以远程控制家庭设备的操作的家庭网络系统的结构的框图；
图7是图示根据本公开的实施例的用于登记家庭设备的过程的梯形图；
图8是图示根据本公开的实施例的用于登记移动终端的过程的梯形图；
图9是图示根据本公开的实施例确定在家庭网络系统中运行的远程控制过程的示意图；
图10A到图12是图示根据本公开的实施例的在运行远程控制时在移动终端上显示的用户界面(UI)屏幕的各种示例的示图；
图13是图示根据本公开的实施例的在家庭网络系统中运行的远程控制过程的梯形图；
图14是图示根据本公开的实施例的用于在家庭网络系统中在运行远程控制时以视频信息形式提供家庭设备的操作状态的过程的梯形图；
图15是图示根据本公开的实施例的在家庭网络系统中运行的远程控制过程的梯形图；以及
图16是图示根据本公开的实施例的在家庭网络系统中基于用户简档的远程控制过程的梯形图。
具体实施方式
在本公开的下列描述中，当合并于此的已知功能和配置的详细描述可能模糊本公开的主题内容时，将省略它。在下文中，本公开的各种实施例将参考附图来进行描述。
图1是图示根据本公开的实施例的家庭网络系统的结构的示意图。
参照图1，家庭网络系统可以包括家庭设备110和具有控制和通信功能的家庭网关(HGW)120。家庭设备110可以包括位于家中的智能用具112、安全设备114、照明设备116和能量设备118。例如，智能器具112可以包括冰箱、洗衣机、机器人真空吸尘器等等。安全设备114可以包括门禁系统、安全摄像头、安全传感器等等。照明设备116可以包括荧光灯、发光二极管(LED)照明设备等。能量设备118可以包括电表、电源插座、电源引出线(outlet)、多插头等等。家庭设备110还可以包括个人计算机(PC)、互联网协议(IP)摄像头、互联网电话、有线/无线电话和移动电话。
家庭设备110可以按有线或无线方式与HGW 120通信，并且可以从HGW120接收控制命令并且向HGW 120发送请求信息。HGW 120可以包括用于基于有线通信或无线通信与家庭设备110通信的通信模块、用于登记和存储家庭设备110的信息的存储单元以及控制器，该控制器用于控制家庭设备110的操作和状态，从家庭设备110收集需要的信息，并且管理所收集的信息。尤其，HGW 120允许通过通信网络130的来自外部通信终端(未图示)的连接，并且通过HGW 120向相应家庭设备发送从外部通信终端接收到的控制信号。通信网络130可以包括诸如互联网的互联网协议(IP)网络和移动终端可连接到的无线网络中的至少一个。
如图1中所图示的家庭网络系统可以提供家庭娱乐服务，诸如使用通信网络130的互联网TV(IPTV)和视频点播(VoD)；家庭数据通信服务，诸如数据共享、IP语音(VoIP)和视频通信；以及家庭自动化服务，诸如电子用具的远程控制和远程仪表检查、犯罪预防和灾难预防。也就是说，图1中图示的家庭网络系统通过单个网络连接用在家庭内部和外部的大部分家庭设备110以控制它们。因此，在说明书中，表述“家庭中”可以被理解为“在家庭内部/外部”。
用户可以在远程地区通过使用例如像移动终端那样的无线通信装备的外部通信终端来连接到包括在家庭网络系统中的HGW 120并且通过HGW 120连接到每个家庭设备110。例如，移动终端可以是具有通信功能的个人数字助理(PDA)、智能电话、蜂窝式电话、平板计算机、膝上型计算机等等，并且可以通过公共载波网和互联网连接到家庭网络系统。
图2A是图示根据本公开的实施例的可与移动终端连接的家庭网络系统的结构的示意图。
参照图2A，家庭网络系统中的家庭设备110-1到110-n(110)基于有线或无线通信连接到HGW 120。HGW 120连接到诸如互联网的有线网络130a。
登记的移动终端200连接到包括无线接入网络和载波核心网的无线网络130b，并且通过与无线网络130b连接的有线网络130a接入HGW 120。无线网络130b可以遵循第2代(2G)或第3代(3G)蜂窝式通信系统、第3代合作伙伴计划(3GPP)、第4代(4G)通信系统、长期演进(LTE)和全球微波接入互操作性(WiMAX)等等。在移动终端200中，安装远程控制应用来个别地或共同地控制与HGW 120连接的家庭设备140的操作，并指定和控制家庭设备140的一些操作。一旦远程控制应用被运行，用于根据用户的按键输入、触摸输入或手势输入控制相应家庭设备140的操作的控制命令被从移动终端200经由无线网络130b和有线网络130a传递给HGW 120，并且HGW 120根据该控制命令控制相应家庭设备140的操作。
图2B是图示根据本公开的实施例的通过识别声音命令的移动终端远程控制的家庭网络系统的结构的示意图。
参照图2B，识别用户的语音命令用于通过语音控制家庭设备110的操作的至少一个语音识别传感器115-1到115-m(115)以无线或有线方式连接到图2A中图示的HGW 120。
语音识别传感器115可以被安装在家中以耦合到家庭设备110(其中语音识别传感器115被装配在家庭设备110上)或与家庭设备110分离。在另一实施例中，语音识别传感器115可以以房间为基础被安装在家中。通过语音识别传感器115识别的用户的语音命令被传递给HGW 120，HGW 120随后使用语音识别算法识别该语音命令以控制相应家庭设备110的操作。语音识别算法可以使用各种公知的语音识别算法。
移动终端200可以通过如图2A中所图示的无线网络130b和有线网络130a接入HGW120。移动终端200识别通过麦克风(未图示)输入的用户10的语音命令，将该语音命令转换成HGW 120可识别的控制命令，并且向HGW 120传递该控制命令。该控制命令可以按包括家庭设备110的标识信息和控制细节的分组的形式来配置。控制细节可以包括用于详细操作以及通电/断电的控制命令。携带该控制命令的分组可以包括移动终端200的用户验证信息。
图3是图示根据本公开的实施例的HGW的结构的框图。图3中图示的HGW 120可以包括所图示的组件中的至少一个。
参照图3，HGW 120通过使用至少一个通信模块122到126和132与多个家庭设备110-1到110-n连接。通信模块122到126和132包括各种基于无线或有线通信协议的模块中的至少一个，所述模块诸如无线局域网(WLAN)模块122(诸如WiFi、紫蜂模块123、蓝牙模块124、近场通信(NFC)模块125、Z-WAVE模块132)以及有线通信模块126。Z-WAVE模块132采用广泛用于像家庭自动化那样的设备控制的射频(RF)技术之一。HGW 120可以包括控制器121、网络接口模块127、用户接口(UI)128和存储装置129。
控制器121可以包括中央处理单元(CPU)121-1、已经在其中存储有用于控制HGW120的控制程序的只读存储器(ROM)121-2和用作用于在HGW120中执行的任务的存储区域的随机存取存储器(RAM)121-3。控制器121通过运行存储在ROM 121-2或RAM 121-3中的程序或可存储在存储装置129中的应用程序经由通信模块122到126与家庭设备110-1到110-n通信，并且生成控制命令以向家庭设备110-1到110-n发送该控制命令，或者将从家庭设备110-1到110-n收集的信息存储在存储装置129中。
UI 128可以包括输出模块，诸如显示器、扬声器、指示灯等等；以及输入模块(未图示)，诸如触摸屏、键盘、麦克风等等。UI 128可以被用户用来直接控制HGW 120，在HGW 120中登记家庭设备110-1到110-n或从HGW120中删除家庭设备110-1到110-n，或者通过HGW120控制家庭设备110-1到110-n。
网络接口127可以例如是互联网通信模块并且将HGW 120连接到外部网络。
存储装置129被配置为在控制器121的控制下存储HGW 120的操作所需要的程序代码、数据或信息，并且必要时还可以存储从外部设备或家庭设备110-1到110-n传递的大量数据。
HGW 120可以包括语音识别模块131，该语音识别模块131解释从图2B中图示的语音识别传感器115传递的语音命令并且将该语音命令传递给控制器121。例如，如果语音命令是“清扫起居室”，则语音识别模块131识别出“清扫”和“起居室”，并且将“清扫”解释为要传递到家庭设备110当中的真空吸尘器(未图示)的命令以及将“起居室”解释为清扫位置。控制器121通过通信模块122到126向家庭设备110当中的真空吸尘器发送指令真空吸尘器“清扫”“起居室”的控制命令。
在另一实施例中，如果用户的语音命令被通过移动终端200而非在家中的语音识别传感器115传递给HGW 120，则移动终端200生成以图2B的实施例中所述的分组的形式配置的控制命令，并且向HGW 120传递所生成的控制命令，以使得可以省略图3的语音识别模块131。
在又一实施例中，如果存在多个用户，则HGW 120可以存储关于多个用户的用户简档并且通过语音识别模块131执行用户特定的语音识别以基于相应的识别出的用户的用户简档来控制家庭设备110-1到110-n。用户简档可以包括用于识别每个用户的语音的用户特定的语音信息以及用于在每个用户的预定权限范围内执行控制的权限信息。可以通过具有语音识别功能的移动终端200或包括语音识别模块131的HGW 120来登记或存储用户特定的语音信息以识别每个用户。
就用户简档而言，假定用户A和B具有不同权限，则用户简档可以被登记并存储以使得用户A可具有对于家中的家庭设备110-1到110-n中的全部的控制权限，而用户B可具有对于家中家庭设备110-1到110-n中的一些的控制权限。用户简档可以通过HGW 120或移动终端200来登记和存储。具有管理员权限的用户可以调整另一用户的控制权限。用户简档特定的控制可以通过HGW 120或移动终端200来执行。在移动终端200中，可以安装用于登记和存储用户简档的管理程序。
图4是图示根据本公开的实施例的移动终端的结构的框图。移动终端可以包括图4中所图示的组件中的至少一个。
参照图4，移动终端200可以包括控制器210、蜂窝式移动通信模块220、子通信模块222、多媒体模块228、摄像头模块236、全球定位系统(GPS)模块238、输入/输出模块244、传感器模块242、存储装置258、电源单元240和至少一个显示模块260。摄像头模块236和GPS模块238被选择性地包括。子通信模块130可以包括WLAN模块224和短距离通信模块226中的至少一个，并且多媒体模块228可以包括广播通信模块230、音频重放模块232和视频重放模块234中的至少一个。摄像头模块236可以包括至少一个摄像头，并且输入/输出模块244可以包括按钮组246、麦克风248、扬声器250、振动电机252、连接器254和键盘256中的至少一个。
控制器210可以包括CPU 210-1、已经在其中存储有用于控制移动终端200的控制程序的ROM 210-2和记忆从移动终端200的外部输入的信号或数据或者被用作用于在移动终端200中执行的任务的存储区域的RAM 210-3，并且控制器210控制移动终端200的其它组件。
蜂窝式通信模块220在控制器210的控制之下使用基于蜂窝式通信协议的无线接入技术，以允许移动终端200经由至少一个或多个天线(未图示)连接到外部设备(尤其是蜂窝式系统的基站)。蜂窝式通信模块220向/从能够执行通信的其它设备发送/接收无线信号，包括语音通信、视频通信、短消息服务(SMS)消息或者多媒体信使服务(MMS)消息。蜂窝式通信模块220发送/接收包括用于控制应用的短数据等等的无线信号。WLAN模块224在控制器210的控制之下在安装了无线接入点(AP，未图示)的地方连接到互联网。短距离通信模块226在控制器210的控制之下无线地执行移动终端200和外部设备之间的短距离通信。短距离通信可以包括蓝牙、紫蜂、红外线数据协会(IrDA)、Z-WAVE等等。
显示模块260可以包括触摸屏，该触摸屏显示控制器210可运行的各种应用(例如，呼叫、数据传输、广播、摄像头等等)的信息并且提供相应配置的UI。控制器210允许在触摸屏260上显示的软键被选择或者响应于在触摸屏上感测到的用户手势来运行与软键相对应的应用或功能。用户手势可以包括通过手指或工具的触摸，对人体动作的识别等等。
在图4中所图示的移动终端中，图2A中所图示的实施例中描述的远程控制应用被安装在ROM 210-2或存储装置258中，并且在运行远程控制应用后，生成用于根据用户的按键输入或触摸输入或者使用加速度传感器或陀螺传感器的用户的手势输入控制相应家庭设备140的操作的控制命令，并将其传递给HGW 120。控制命令可以通过通信网络130或诸如电力线通信(PLC)、WiFi、紫蜂等等之类的通信手段发送给HGW 120。
存储装置258存储供用户设备使用的各种应用、内容和数据，并且存储根据本发明的远程控制从HGW 120提供的家庭设备140的操作状态信息和与该操作状态信息相关联的处理结果信息。
当如在图2B中所图示的实施例中使用语音识别时，远程控制应用包括语音识别功能，并且在运行远程控制应用之后通过麦克风250输入的用户的语音命令被发送给控制器210。控制器210随后执行远程控制应用的功能，将语音命令转换成HGW 120可识别的控制命令，并且向HGW 120发送该控制命令。控制命令可以按包括相应家庭设备110的标识信息和内容数据的分组的形式配置。
在图2A和图2B中所图示的实施例中，在运行与控制命令相对应的操作之后，家庭设备140将指示处理结果的信息反馈到HGW 120。随后，HGW 120向移动终端200发送指示处理结果的信息(在下文中，称为处理结果信息)，并且移动终端200的远程控制应用提供示出处理结果的UI。UI可以以诸如音频效果、语音消息、文本消息、图标指示、动画等等之类的各种形式提供。
在如前述实施例中那样实施的家庭网络系统中，处于外部的用户可以通过移动终端200监视家中的家庭设备110的情形。在此情况下，用户通过使用用户所携带的移动终端200或计算设备来连接到HGW 120，并且通过HGW120控制登记的家庭设备110-1到110-n中的至少一个以监视家中情形。为此，家庭设备110-1到110-n中的至少一个包括能够捕捉静止或动作图像形式的家中情形的数字摄像头。
在前述示例中，用于控制家庭设备140的用户的控制命令被通过移动终端200发送给HGW 120，但是相同功能也可以使用其中可安装远程控制应用的各种智能设备(在下文中，称为“用户设备”)来执行，诸如用户的平板PC、基于IP的有线/无线电话、多功能远程控制器、智能TV等等以及移动终端200。如果远程控制应用以例如窗口小部件的形式来提供，则可以通过窗口小部件以实时为基础、周期性地或以请求为基础来指示家庭设备140的操作状态。
图5是图示根据本公开的实施例的远程控制家庭设备的操作的家庭网络系统的结构的示意图。将不详细描述已在图1和图4中描述的同样的组件。
在图5中所图示的实施例中，HGW 120登记多个设备140的信息并且周期性地或以请求为基础收集与家庭设备140的操作相对应的操作状态信息以识别每个家庭设备140的操作状态。多个家庭设备140的位置以家中房间为基础来登记。在图5中，参考标记140-1到140-n表示与所指示的房间相对应的至少一个家庭设备。图5的多个家庭设备140对应于图1的家庭设备110。
HGW 120与诸如移动终端200、平板PC或智能TV之类的用户设备通信以向用户设备提供家庭设备140的操作状态信息。在本公开的以下实施例中，为了方便，假设移动终端200被用作用户设备。
被从每个家庭设备140发送到HGW 120的操作状态信息以及与控制命令的运行相对应的处理结果信息可以通过使用例如PLC、WiFi、紫蜂等等的通信手段被从家庭设备140发送到HGW 120。HGW 120可变地设定收集从家庭设备140发送的操作状态信息的间隔。HGW120存储示出家中房间特定的位置的楼层平面图信息，并且以房间为基础登记和管理家庭设备140的位置。这里，楼层平面图信息可以从建立家庭网络系统的经营者的服务器(未示出)提供给HGW 120或者可以由用户使用PC 210直接输入到HGW 120。如果通过经营者所提供的门户网站输入用户的家庭地址，则楼层平面图信息可以被提供为包括楼层平面图的可选或可编辑的各种设计。在此情况下，用户可以依据用户的品味来选择或编辑楼层平面图设计。例如，移动终端200提供用于根据用户的需求来修改室内楼层平面图(例如，移除房间之间的墙壁或增加房间的尺寸)的UI。用户所期望的楼层平面图设计可以使用门户网站或通过与HGW 120通信连接的诸如移动终端200之类的各种用户设备来选择。
每个家庭设备140的当前位置可以在HGW 120中直接登记或者可以使用在每个家庭设备140中所提供的RF标签、传感器来检测。每个家庭设备140的位置信息被映射到放置家庭设备140的房间的名称，例如，对于冰箱是厨房，对于TV是起居室等等。位置信息可以将其中通常安装每个家庭设备140的位置作为缺省值。通过使用在移动终端200上显示的关于家中楼层平面图的UI，用户还可以使用像触摸那样的手势或语音命令来在楼层平面图上将每个家庭设备140的图标从一个房间拖放到另一房间或者改变家庭设备140的房间特定的或房间中的位置。
移动终端200可以从HGW 120接收家庭设备140的房间特定的位置信息和楼层平面图信息，并且提供如下UI：其视觉上显示家庭楼层平面图上的家庭设备140的家中操作状态或控制命令处理结果、房间特定的操作状态或控制命令处理结果或者家庭设备特定的操作状态或控制命令处理结果。操作状态或控制命令处理结果可以由UI上随操作状态变化的图标来指示。
图5中的语音识别传感器115可以被安装为对应于例如每个房间的家庭设备140。安装在特定房间中的语音识别传感器115所识别的用户的语音命令可以被限制为作为用于通过HGW 120控制在房间内的家庭设备140的操作的控制命令来施加。在另一实施例中，当语音识别传感器115和家庭设备140位于不同的房间时，与语音命令相对应的控制命令可以被施加到家庭设备140。
HGW 120基于家庭设备140的电力消耗和电力单位价格信息来计算消耗费用以提供消耗费用信息。HGW 120在从移动终端200接收到消耗费用信息请求后向移动终端200发送所计算的消耗费用信息。在接收到消耗费用信息后，移动终端200配置例如帐单布局(layout)，并以所配置的帐单布局显示消耗费用。
在图5中所图示的家庭网络系统中，HGW 120登记在家中安装的家庭设备140的信息，并且控制和管理所登记的家庭设备140。例如，如果安装了新的家庭设备，则HGW 120收集和存储关于新的家庭设备的信息，例如，家庭设备的标识符、能力信息和操作状态信息。关于家庭设备的信息可以通过HGW 120和家庭设备之间的服务发现过程直接从家庭设备获得，可以基于从家庭设备提供的标识信息由HGW 120从互联网上的服务器接收，或者可以由用户或系统管理员直接输入到HGW 120。如果用户购买并安装新的家庭设备，并且将从家庭设备或其手册提供的标识信息(例如，序号、型号或者快速响应(QR)码)输入到HGW 120中，则HGW 120可以基于家庭设备的标识信息连接到互联网上的制造商服务器，并且获得关于家庭设备的信息。
图6是图示根据本公开的实施例的识别语音命令并远程控制家庭设备的操作的家庭网络系统的结构的框图，其中语音命令通过移动终端200输入来控制位于房间(例如，洗衣间)的洗衣机的操作并且控制位于另一房间(例如，起居室)的机器人真空吸尘器的操作。
在图6中，假定洗衣机141、闭路TV(CCTV)143和电灯145作为固定家庭设备140a被安装在房间(例如，洗衣间)内。固定家庭设备140a可以通过有线接口与HGW 120连接或者可以通过无线接口与HGW 120连接。还假定具有移动功能的机器人真空吸尘器147作为移动家庭设备位于另一房间(例如，起居室)中。机器人真空吸尘器147可以通过无线接口与HGW120连接。
在图6的示例中，用于控制洗衣机141的操作的用户10的语音命令被生成为控制命令并被通过移动终端200传递到HGW 120，并且HGW 120根据该控制命令控制洗衣机141的操作。同样地，机器人真空机器147的操作也可以被控制。
在图6的示例中，如果用户10期望通过移动终端200检查洗衣机141的操作状态，则用户10可以按相同方式一起开启CCTV 143和灯145，并且可以通过移动终端200接收通过CCTV 143输出的包括洗衣机141的操作状态的图像信息。
图7是图示根据本公开的实施例的用于登记家庭设备的过程的梯形图。
参照图7，在步骤701中，安装家庭设备140并供应操作电力。用户确定在HGW 120中登记已安装的家庭设备140。在步骤703中，HGW 120执行针对家庭设备140的发现过程。例如，如果家庭设备140通过WiFi连接到HGW 120，则HGW 120周期性地或应用户的请求执行针对邻近的新的家庭设备的发现过程。如果通过发现过程发现家庭设备140，则HGW 120从家庭设备140接收家庭设备信息。家庭设备信息可以包括家庭设备140的标识信息和能力信息中的至少一个。在可选实施例中，标识信息可以包括指示家庭设备140的产品类型(空调、冰箱、发光二极管(LED)灯等等)的产品码。
在可选实施例中，在步骤705中，HGW 120通过HGW 120的UI、由外部接口连接的控制台或互联网上的计算机从用户接收对于要登记的家庭设备140的登记请求，并且从用户接收关于家庭设备140的信息。在另一实施例中，HGW 120从家庭设备140或用户获得家庭设备140的标识信息，并且基于标识信息连接到家庭设备140的制造商服务器以获得家庭设备140的能力信息。
在步骤707中，HGW 120存储关于该家庭设备140的信息并且管理作为登记的家庭设备140的家庭设备140。在可选实施例中，HGW 120可以通过互联网或WiFi从远程终端或从用户接收关于家庭设备140的附加信息。附加信息可以包括例如家庭设备140的名称或别名以及家庭设备140被安装的位置中的至少一个。
在可选实施例中，HGW 120可以直接从用户或通过互联网或WiFi从远程终端接收关于家庭设备140的操作模式和/或权限的附加信息。附加信息可以包括例如对于家庭设备140的访问权限的级别。访问权限的级别可以包括例如许可通过HGW 120访问，许可通过登记的远程终端访问，或者许可通过登记的远程终端访问HGW 120。
在步骤709中，HGW 120设定与家庭设备140的连接。取决于HGW 120和家庭设备140之间的通信方法，用基于WiFi、紫蜂、蓝牙、NFC或有线通信所确定的过程来执行设定连接。一旦在HGW 120和家庭设备140之间设定连接，家庭设备140就在步骤711中通过所设定的连接向HGW 120发送数据。在实施例中，家庭设备140周期性地或应HGW 120的请求向HGW120发送操作状态信息。
在步骤713中，HGW 120向家庭设备140发送控制命令。该控制命令可以像本公开的实施例中那样被从移动终端200通过HGW 120传递给家庭设备140。在可选实施例中，考虑到家庭设备140的产品类型，控制命令可以被设定为适合于每个产品的特性。控制命令可以设定要保持当前操作状况或逐步改变操作状况。控制命令可以对多个家庭设备140共同设定，或者对于多个家庭设备140可以设定不同的控制命令。控制命令从用户设备通过用户的按键输入或像手势那样的触摸输入或者用户的语音命令被发送到HGW 120，并且HGW 120向家庭设备140发送所接收到的控制命令。
图8是图示根据本公开的实施例的用于登记移动终端的过程的梯形图。
参照图8，在步骤801中，移动终端200安装支持对HGW 120的远程控制的远程控制应用。在可选实施例中，远程控制应用可以仅安装在已通过预定验证程序的用户的移动终端200中。在实施例中，HGW 120提供验证数字，并且HGW 120、管理HGW 120的制造商的服务器或提供远程控制应用的外部服务器仅许可通过输入该验证数字的用户的移动终端200下载远程控制应用。
在可选实施例中，远程控制应用可以根据移动终端200的被许可的权限级别来提供受限的功能。例如，远程控制应用可以依据被许可的权限级别来选择性地提供通过HGW120的信息查询、对来自HGW 120的警报信息的接收以及对家庭设备140的部分或全部控制中的至少一个。被许可的权限级别可以通过HGW 120、管理HGW 120的制造商的服务器或提供远程控制应用的外部服务器来设定。
在步骤803中，移动终端200运行远程控制应用并且通过远程控制应用向HGW 120发送登记请求消息。远程控制应用可以被通过互联网传递给HGW 120，或者通过WiFi传递给HGW 120。登记请求消息可以包括移动终端200的标识符(例如，MS标识符(MSID)或国际移动用户身份(IMSI))、登陆ID和密码、权限信息和操作模式信息中的至少一个。
在可选实施例中，在步骤805中，HGW 120通过HGW 120的UI、由外部接口连接的控制台或互联网上的计算机从用户接收对于要登记的移动终端200的登记请求，并且从用户接收关于该移动终端200的信息，例如权限信息和/或操作模式信息。
在可选实施例中，在步骤809中，HGW 120基于从移动终端200获得的标识信息或从用户获得的移动终端200的标识信息来连接到管理移动通信系统的用户信息的服务器以验证移动终端200。如果移动终端200的权限信息未被输入到HGW 120，则HGW 120可以基于验证的结果来生成移动终端200的权限信息。
在步骤811中，HGW 120存储关于移动终端200的信息，并且管理作为登记的移动终端200的移动终端200。在步骤813中，HGW 120向移动终端200发送指示已成功登记关于移动终端200的信息的登记确认消息。在步骤813中，HGW 120还可以向移动终端200发送对家庭设备140的远程控制所需的数据。所需的数据可以包括例如家庭设备140的操作状态信息。
在步骤815中，已接收到操作状态信息的移动终端200的用户可以通过使用通过远程控制应用提供的UI向HGW 120发送用于控制家庭设备140的操作的控制命令。与节能模式相对应的控制命令被从图4中所图示的移动终端200通过用户的按键输入或诸如手势之类的触摸输入或者用户的语音命令发送给HGW 120，并且HGW 120向家庭设备140传递所接收到的控制命令。虽然未示出，但已根据控制命令执行相应操作的家庭设备140的处理结果信息可以作为反馈信息提供给移动终端200。
图9是图示根据本公开的实施例的在家庭网络系统中运行的远程控制过程的示图。
在图9中所图示的实施例中，假设移动终端200被用作用户设备并且家庭设备当中位于洗衣间的家庭设备140a的操作和位于起居室的机器人真空吸尘器147的操作像在图6的示例中那样通过语音命令来控制。
参照图9，在步骤901中，如果用户10期望从远程地方操作家中洗衣机141，则在移动终端200中运行用于家庭设备的远程控制的远程控制应用。为此，如图10A中所图示的，移动终端200提供用于运行所安装的远程控制应用的图标1001，并且如果感测到用户手势1003，例如，图标1001上的触摸，则运行远程控制应用。在另一示例中，远程控制应用还可以通过语音来运行。
在运行远程控制应用后，移动终端200提供引导消息1005和用于语音命令的输入的图标1007，如图10B中所图示，并且如果输入了例如“操作洗衣机”或“开始洗衣”的用户的语音命令，则用户10的语音命令通过移动终端200被生成为分组形式的控制命令，并被通过通信网络130传递到HGW 120，所述分组包括洗衣机141的标识信息、与洗衣机操作命令相对应的控制细节以及用户验证信息。
在步骤903中，已接收到控制命令的HGW 120基于用户验证信息确定用户10是被授权的用户，并且基于标识信息确定控制目标家庭设备是洗衣机141。HGW 120随后向洗衣机141发送用于开始洗衣的控制命令。如果洗衣机141处于断电状态，则HGW 120发送用于首先开启洗衣机141并随后开始洗衣的控制命令。洗衣机141的操作状态信息可以周期性地或应请求被传递给HGW 120，并且在步骤909中，操作状态信息可以被提供给移动终端200。因此，洗衣过程，诸如开始洗衣＝>洗衣周期期间＝>脱水周期期间＝>干燥周期期间等等，可以通过移动终端200实时检查。如上，已接收到控制命令的HGW120可以检查相应家庭设备的通电/断电状态和操作状态。
在另一实施例中，如果确定家庭设备处于不能执行用户的控制命令的状态或者处于故障状态，则HGW 120停止控制命令的运行并且向移动终端200发送指示家庭设备的不能状态或故障状态的消息。
如果用户10在步骤901中在洗衣机141的操作期间通过远程控制应用输入语音命令，例如，“操作洗衣机”或“清扫”，则用户10的语音命令通过移动终端200被生成为分组形式的控制命令，并且被通过通信网络130传递给HGW 120，所述分组包括机器人真空吸尘器147的标识、与吸尘器操作命令相对应的控制细节和用户验证信息。
在步骤905中，HGW 120发送用于以与步骤903的洗衣机操作的控制相同的方式指令位于另一房间(例如，起居室)的机器人真空吸尘器147开始清扫的控制命令。同样地，机器人真空吸尘器147的操作状态信息可以周期性地或应请求被传递给HGW 120，并且在步骤909中，操作状态信息可以被提供给移动终端200。在完成控制命令的运行后，洗衣机141和机器人真空吸尘器147向HGW 120发送各自的处理结果信息，HGW 120随后向移动终端200发送所接收的处理结果信息。
在另一实施例中，当在步骤901中期望选择控制目标家庭设备或检查在家中的家庭设备的整体操作状态时，用户10可以请求HGW 120发送包括家庭设备的操作状态信息的家中楼层平面图信息。
图11是图示根据本公开的实施例的在家庭网络系统中被发送到移动终端的楼层平面图信息的示例的示图，并且在图11中，假定家中家庭设备当中的机器人真空吸尘器根据图9中所图示的过程操作。
参照图11，在移动终端200上显示的家中楼层平面图1100可以包括以房间为基础指示家庭设备是否处于操作中的图标1101a和1101b。如在图11中所图示的示例中，如果机器人真空吸尘器111处于操作中，则用不同形式或不同颜色指示相应房间(起居室)中的图标1101b和其它房间(房间1、房间2、房间3、厨房等等)中的图标1101a。如果用户触摸该房间(起居室)的区域或输入诸如“向我展示起居室的操作状态”之类的语音命令，则位于相应房间(起居室)的多个家庭设备(例如，真空吸尘器、灯、空调和TV)的操作状态被用不同形式或不同颜色显示，如在显示窗口1110上所示的。在图11中，机器人真空吸尘器1111处于操作中，以使得“真空吸尘器”在显示窗口1110上被与其它家庭设备(灯、空调和TV)不同地显示。在另一显示窗口1130上，显示从HGW 120接收到的机器人真空吸尘器1111的操作状态信息。虽然在前述实施例中，为了方便已作为示例描述家庭设备的操作，但是也可以通过对控制命令的详细指定来进行详细/逐步的操作控制或移动(对于移动家庭设备)。
在另一实施例中，用户的移动终端200可以向HGW 120发送请求以通过安装在家中的至少一个CCTV(在下文中，称为摄像头)例如以房间为基础接收视频或静止图像形式的家庭设备的操作状态。在此情况下，移动终端200向HGW 120发送家庭监视请求消息。响应于该请求消息，HGW 120控制包括摄像头的至少一个家庭设备以收集图像数据并且向移动终端200发送以房间为基础收集的视频信息。在图12的示例中，假设摄像头被安装在每个房间中。以房间为基础的图像示出房间名称1201和房间内捕捉的图像1203，如图12中所图示的。
在下文中，将参照图13到图15来描述根据本公开的实施例的用于远程控制家庭设备的过程。
在图13到图16中，为了方便，图示一个家庭设备140，但是实际上，多个家庭设备140与HGW 120连接。另外，将使用作为用于远程控制的智能设备的用户设备的移动终端200的示例来进行描述。
图13是图示根据本公开的实施例确定在家庭网络系统中运行的远程控制过程的梯形图。虽然未图示，但是HGW 120可以周期性地或应请求地从家中的家庭设备140接收操作状态信息，并且HGW 120被假定为基于接收到的操作状态信息来确认家庭设备140的操作状态。
在图13中所图示的步骤1301中，当用户期望从远程地方操作家庭设备140时，用户通过触摸输入、手势或语音命令在移动终端200中运行用于家庭设备的远程控制的远程控制应用。一旦远程控制应用被运行，在步骤1303中，移动终端200就以图10A和图10B中所图示的实施例中所述的方式向HGW 120发送控制命令。在步骤1303中的控制命令可以是例如用于控制家庭设备140的操作的控制命令或用于请求楼层平面图信息的传输的控制命令。
在步骤1305中，HGW 120确定从移动终端200接收到的控制命令是用于请求楼层平面图信息的控制命令还是用于控制家庭设备140的操作的控制命令。如果确定接收到的控制命令是用于请求楼层平面图信息的控制命令，则HGW 120在步骤1307中向移动终端200发送如图11中所示的用于以房间为基础控制家庭设备的楼层平面图信息。在步骤1309中，如果已确认楼层平面图信息的用户通过移动终端200输入/选择控制目标家庭设备140和控制细节，则移动终端200生成包括控制细节、控制目标家庭设备140的标识信息和用户验证信息的控制命令，并且向HGW 120发送该控制命令。
如果在步骤1305中确定接收到的控制命令是用于控制家庭设备140的操作的控制命令，则HGW 120跳过步骤1307。接收到的控制命令的信息配置与在步骤1309中接收到的控制命令相同。在步骤1311中，HGW 120识别包括在控制命令中的标识信息以确定目标控制家庭设备140，并且HGW 120在步骤1313中向家庭设备140发送包括控制细节的控制命令。当选择了控制目标家庭设备140时，处于不能状态或故障状态的家庭设备(例如，因为使用超过参考值的额定功率或具有超过参考值的操作温度而具有故障可能性的家庭设备，即，具有超过参考值的指示操作状态的值的家庭设备)可以被从目标控制家庭设备140中排除，即使从移动终端200接收到用于控制操作的控制命令。已接收到控制命令的家庭设备140运行与控制细节相对应的操作，并且在步骤1315中向HGW 120发送与操作的运行相对应的处理结果信息。
在步骤1317中，HGW 120向移动终端200发送处理结果信息，移动终端200随后通过在远程控制应用中提供的UI提供处理结果。
<表1>和<表2>示出根据本公开的实施例的通过控制命令可在HGW 120中运行的各种控制模式和控制方案的示例。
[表1]
[表2]
在步骤1315中从家庭设备140传递到HGW 120的处理结果信息的信息配置如<表3>中所示。
[表3]
在步骤1317中从HGW 120发送到移动终端200的信息配置可以与<表3>中所示的相同，或者标识信息可以被用作例如HGW 120所确定的唯一标识信息。唯一标识信息可以包括识别HGW 120和家庭设备140中的至少一个的信息。移动终端200可以例如以<表4>中所示的方式显示步骤1317中的处理结果信息。
[表4]
图14是图示根据本公开的实施例的用于在家庭网络系统中在运行远程控制时以视频信息形式提供家庭设备的操作状态的过程的梯形图。
在图14中，假定在步骤1401中的操作与图13的远程控制过程相同。然而，在图14的实施例中，图13的步骤1317的处理结果信息传输可以选择性地执行。
参照图14，在步骤1403中，移动终端200向HGW 120发送请求对控制目标家庭设备140或相应的家庭设备140位于的房间的图像信息的传输的消息。随后，HGW 120在步骤1405中响应于该请求消息发送用于控制包括摄像头的至少一个家庭设备140的摄像头操作命令，在步骤1407中收集目标家庭设备140或相应的家庭设备140位于的房间的图像数据，并且在步骤1409中发送包括以家庭设备为基础或以房间为基础收集的图像数据的图像信息。
在步骤1411中，移动终端200显示接收到的图像信息，例如，如在图12的示例中那样。
图15是图示根据本公开的实施例的在家庭网络系统中运行的远程控制过程的梯形图，其中使用如在图2B和图5的实施例中的在家中安装的语音识别传感器115运行远程控制过程。
参照图15，家中语音识别传感器115在步骤1501中识别用户的语音命令并且在步骤1503中将语音命令传递到HGW 120。HGW 120在步骤1505中使用语音识别算法解释语音命令，并且在步骤1507中基于经解释的语音命令确定控制目标家庭设备。例如，如果语音命令是“开始洗衣”，则HGW 120识别出词语“洗衣”并确定控制目标家庭设备是洗衣机，并且将词语“开始”识别为控制细节并且确定开启洗衣机并开始洗衣机的操作。
在步骤1509中，HGW 120基于步骤1507的确定将控制命令传递到家庭设备140，并且已运行控制命令的家庭设备140将处理结果信息反馈到HGW120。随后，在步骤1513中，HGW120将处理结果信息发送给预设的用户设备(例如，智能TV、移动终端、平板PC等等)。步骤1513可以被选择性地执行。
图16是图示根据本公开的实施例的家庭网络系统中基于用户简档的远程控制过程的梯形图，其中使用如在图2B和图5的实施例中的在家中安装的语音识别传感器115运行远程控制过程。
参照图16，在步骤1601中，HGW 120接收、登记和存储用于每个用户的语音识别的用户特定的语音信息以及在用于每个用户的预定权限范围内对家庭设备的操作控制的权限信息。对用户简档的输入可以通过每个用户的移动终端200或HGW 120来执行。用户特定的语音信息可以通过使用语音识别传感器115来被登记或存储在HGW 120中。当登记用户特定的语音信息时，HGW 120运行登记的用户的语音命令(也就是说，控制命令)，而不运行未登记的用户的语音命令。
在步骤1601中登记并存储用于至少一个用户的用户简档之后，家中语音识别传感器115如果在步骤1603中识别出用户的语音命令则在步骤1605中向HGW 120传递所识别的语音命令。HGW 120在步骤1607中使用语音识别算法解释语音命令，并且HGW 120在步骤1609中基于用户简档来确定输入语音命令的用户是否是登记的用户。如果HGW 120在步骤1609中确定用户不是登记的用户，则HGW 120在步骤1611中指示/发送指示用户不是登记的用户的通知消息。通知消息可以是通过HGW 120的UI 128输出的文本或语音信息的形式。通知消息可以被发送给登记用户的移动终端200以指示未登记的用户尝试使用语音命令控制。
如果在步骤1609中确定用户是登记用户，则HGW 120在步骤1613中基于用户简档确定相应(语音)命令是否在用户权限的范围内，也就是说，对于相应(语音)命令是否给予用户权限。如果确定未给予用户权限，则HGW120去到步骤1611以指示/发送指示对于相应(语音)命令未给予用户权限的通知消息。在此情况下，同样地，通知消息可以是通过HGW120的UI 128输出的文本或语音消息的形式。如果用户通过移动终端200发送语音命令，则通知消息可以被发送给移动终端200。如果在步骤1613中确定对于相应(语音)命令给予了用户权限，则在步骤1615中基于经解释的语音命令确定控制目标家庭设备。例如，如果语音命令是“开始洗衣”，则识别词语“洗衣”来确定控制目标家庭设备是洗衣机并且词语“开始”被识别为开启洗衣机并开始洗衣机的操作的控制细节。步骤1613和1615可以一起执行。
在步骤1619中，HGW 120基于步骤1615的确定将控制命令传递到相应家庭设备140，并且已运行控制命令的家庭设备140将处理结果信息反馈到HGW 120。在步骤1621中，HGW 120将处理结果信息发送给预设的用户设备(例如，智能TV、移动终端、平板PC等等)。步骤1621可以被选择性地执行。

Claims (21)

1.一种包括至少一个家庭设备的家庭网络系统中的远程控制方法，该远程控制方法包括：
从所述至少一个家庭设备接收所述至少一个家庭设备的操作状态信息；
从用户设备接收用于所述至少一个家庭设备的操作控制的语音命令；
基于包括在用户简档中的用户特定的语音信息通过用户特定的语音识别来识别语音命令，所述用户特定的语音信息用于识别特定用户的语音；
基于所识别的语音命令和包括在所述用户简档中的用户特定的权限信息来生成控制命令，所述用户特定的权限信息用于在用于特定用户的预定权限范围内执行控制，该控制命令包括指示控制目标家庭设备和控制目标家庭设备的特定操作的信息；
基于所述控制命令和所述操作状态信息，确定所述至少一个家庭设备当中的控制目标家庭设备；以及
向所确定的控制目标家庭设备发送控制命令用于所确定的控制目标家庭设备执行所述特定操作。
2.如权利要求1所述的远程控制方法，还包括：
从控制目标家庭设备接收与控制命令的运行对应的处理结果信息；以及
向用户设备发送处理结果信息，
其中，通过识别所述语音命令来生成从用户设备接收的控制命令。
3.如权利要求1所述的远程控制方法，其中，所述控制命令包括相应家庭设备的标识信息、用于操作控制的控制细节和用户设备的验证信息中的至少一个。
4.如权利要求1所述的远程控制方法，其中，确定所述控制目标家庭设备的步骤包括从所述至少一个家庭设备当中的控制目标家庭设备排除因为指示操作状态的值超过参考值而具有故障可能性的家庭设备。
5.如权利要求1所述的远程控制方法，还包括：
如果从用户设备接收到的控制命令包括对于提供指示所述至少一个家庭设备的房间特定的布置和所述至少一个家庭设备的操作状态的楼层平面图信息的请求，则向用户设备提供楼层平面图信息。
6.如权利要求1所述的远程控制方法，还包括：
如果从所述用户设备接收到对于所述控制目标家庭设备的图像信息请求，则向所述用户设备发送包括图像数据的图像信息，所述图像信息通过控制所述至少一个家庭设备当中装备有摄像头的至少一个家庭设备来获取。
7.如权利要求1所述的远程控制方法，还包括：
如果接收到通过至少一个语音识别传感器所识别的语音命令，则解释该语音命令并生成用于至少一个家庭设备的操作控制的控制命令。
8.如权利要求7所述的远程控制方法，其中，所述语音识别传感器被装配在所述至少一个家庭设备中的至少一个上。
9.如权利要求1所述的远程控制方法，还包括：
登记所述用户简档，所述用户简档包括用于语音识别的用户特定的语音信息以及用于对所述至少一个家庭设备的操作控制的用户特定的权限信息。
10.如权利要求9所述的远程控制方法，还包括：
如果接收到所述控制命令，则基于所述用户简档来确定是否运行所述控制命令。
11.如权利要求1所述的远程控制方法，其中，所述用户设备包括智能电视、移动终端、平板个人计算机、远程控制器以及基于互联网协议的有线/无线电话中的至少一个。
12.一种用于在包括至少一个家庭设备的家庭网络系统中的远程控制的网关装置，该网关装置包括：
至少一个通信模块，被配置为：
以有线/无线方式与所述至少一个家庭设备和用户设备通信；以及
控制器，被配置为：
从所述至少一个家庭设备接收所述至少一个家庭设备的操作状态信息，
从所述用户设备接收用于所述至少一个家庭设备中的至少一个的操作控制的语音命令，
基于包括在用户简档中的用户特定的语音信息通过用户特定的语音识别来识别语音命令，所述用户特定的语音信息用于识别特定用户的语音；
基于所识别的语音命令和包括在所述用户简档中的用户特定的权限信息来生成控制命令，所述用户特定的权限信息用于在用于特定用户的预定权限范围内执行控制，该控制命令包括指示控制目标家庭设备和控制目标家庭设备的特定操作的信息；
基于所述控制命令和所述操作状态信息，确定所述至少一个家庭设备当中的控制目标家庭设备，
向所确定的控制目标家庭设备发送控制命令用于所确定的控制目标家庭设备执行所述特定操作。
13.如权利要求12所述的网关装置，其中的控制器还被适配为根据权利要求2到权利要求11中的任何一个进行操作。
14.一种在包括至少一个家庭设备的家庭网络系统中的远程控制方法，该远程控制方法包括：
向获取所述至少一个家庭设备的操作状态信息的家庭网关HGW发送用于所述至少一个家庭设备的操作控制的语音命令，其中HGW被配置为：
基于包括在用户简档中的用户特定的语音信息通过用户特定的语音识别来识别语音命令，所述用户特定的语音信息用于识别特定用户的语音，
基于所识别的语音命令和包括在所述用户简档中的用户特定的权限信息来生成控制命令，所述用户特定的权限信息用于在用于特定用户的预定权限范围内执行控制，该控制命令包括指示控制目标家庭设备和控制目标家庭设备的特定操作的信息，以及
基于所述控制命令和所述操作状态信息，来确定所述至少一个家庭设备当中的控制目标家庭设备；以及
向所确定的控制目标家庭设备发送控制命令用于所确定的控制目标家庭设备执行所述特定操作。
15.如权利要求14所述的远程控制方法，
其中，所述控制命令包括相应家庭设备的标识信息、用于操作控制的控制细节和所述用户设备的验证信息中的至少一个。
16.如权利要求14所述的远程控制方法，还包括如果从所述用户设备接收到的控制命令包括对于提供指示所述至少一个家庭设备的房间特定的布置和所述至少一个家庭设备的操作状态的楼层平面图信息的请求，则从所述HGW接收楼层平面图信息。
17.如权利要求14所述的远程控制方法，还包括在所述HGW中登记用户简档，所述用户简档包括所述用户特定的语音信息以及用于所述至少一个家庭设备的操作控制的用户特定的权限信息。
18.如权利要求17所述的远程控制方法，还包括从所述HGW接收基于所述用户简档指示所述用户是否是登记的用户的通知消息。
19.如权利要求17所述的远程控制方法，还包括从所述HGW接收基于所述用户简档指示对于所述控制命令是否给予所述用户的权限的通知消息。
20.一种用于在包括至少一个家庭设备的家庭网络系统中的远程控制的用户设备，该用户设备包括：
至少一个通信模块；以及
控制器，被配置为：
经由所述至少一个家庭设备向获取所述至少一个家庭设备的操作状态信息的家庭网关HGW发送用于所述至少一个家庭设备的操作控制的语音命令，其中HGW被配置为：
基于包括在用户简档中的用户特定的语音信息通过用户特定的语音识别来识别语音命令，所述用户特定的语音信息用于识别特定用户的语音，
基于所识别的语音命令的识别和包括在所述用户简档中的用户特定的权限信息生成控制命令，所述用户特定的权限信息用于在用于特定用户的预定权限范围内执行控制，该控制命令包括指示控制目标家庭设备和控制目标家庭设备的特定操作的信息，以及
基于所述控制命令和所述操作状态信息，确定所述至少一个家庭设备当中的控制目标家庭设备，以及
向所确定的控制目标家庭设备发送控制命令用于所确定的控制目标家庭设备执行所述特定操作。
21.如权利要求12所述的网关装置，其中的控制器还被适配为根据权利要求15到权利要求19中的任何一个进行操作。
CN201380066448.7A 2012-12-18 2013-12-18 用于在家庭网络系统中远程控制家庭设备的方法和设备 Active CN104885406B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910447408.6A CN110223495A (zh) 2012-12-18 2013-12-18 用于在家庭网络系统中远程控制家庭设备的方法和设备

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2012-0148738 2012-12-18
KR20120148738 2012-12-18
PCT/KR2013/011821 WO2014098477A1 (ko) 2012-12-18 2013-12-18 홈 네트워크 시스템에서 홈 디바이스를 원격으로 제어하는 방법 및 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910447408.6A Division CN110223495A (zh) 2012-12-18 2013-12-18 用于在家庭网络系统中远程控制家庭设备的方法和设备

Publications (2)

Publication Number Publication Date
CN104885406A CN104885406A (zh) 2015-09-02
CN104885406B true CN104885406B (zh) 2019-06-21

Family

ID=50930220

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201380066448.7A Active CN104885406B (zh) 2012-12-18 2013-12-18 用于在家庭网络系统中远程控制家庭设备的方法和设备
CN201910447408.6A Pending CN110223495A (zh) 2012-12-18 2013-12-18 用于在家庭网络系统中远程控制家庭设备的方法和设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201910447408.6A Pending CN110223495A (zh) 2012-12-18 2013-12-18 用于在家庭网络系统中远程控制家庭设备的方法和设备

Country Status (5)

Country Link
US (2) US9978260B2 (zh)
EP (2) EP3691179A1 (zh)
KR (2) KR102102246B1 (zh)
CN (2) CN104885406B (zh)
WO (1) WO2014098477A1 (zh)

Families Citing this family (441)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10149005B2 (en) * 2011-06-20 2018-12-04 Enseo, Inc. Set-top box with enhanced content and system and method for use of same
CN102411840B (zh) * 2011-12-15 2013-06-05 鸿富锦精密工业（深圳）有限公司 遥控装置
JP2013169122A (ja) 2012-02-17 2013-08-29 Panasonic Corp 非接触充電モジュール及びそれを備えた携帯端末
US9531174B2 (en) 2012-02-28 2016-12-27 Centurylink Intellectual Property Llc Apical conduit and methods of using same
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
WO2014033055A1 (en) 2012-08-27 2014-03-06 Aktiebolaget Electrolux Robot positioning system
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
KR20140088449A (ko) * 2013-01-02 2014-07-10 엘지전자 주식회사 중앙 제어 장치 및 그것의 제어 방법
US9640174B2 (en) * 2013-01-02 2017-05-02 Lg Electronics Inc. Home appliance and operation method thereof
US9375847B2 (en) * 2013-01-18 2016-06-28 Irobot Corporation Environmental management systems including mobile robots and methods using same
CN109965778B (zh) 2013-01-18 2022-08-16 艾罗伯特公司 包括移动机器人的环境管理系统以及其使用方法
US9233472B2 (en) 2013-01-18 2016-01-12 Irobot Corporation Mobile robot providing environmental mapping for household environmental control
EP3809407A1 (en) 2013-02-07 2021-04-21 Apple Inc. Voice trigger for a digital assistant
SG11201404877QA (en) * 2013-02-20 2014-10-30 Panasonic Ip Corp America Method for controlling information apparatus and program
WO2014128768A1 (ja) 2013-02-20 2014-08-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 携帯情報端末の制御方法及びプログラム
MY181880A (en) 2013-02-20 2021-01-12 Panasonic Ip Corp America Method for controlling information apparatus and program
WO2014128771A1 (ja) 2013-02-20 2014-08-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 携帯情報端末の制御方法及びプログラム
JP5529358B1 (ja) 2013-02-20 2014-06-25 パナソニック株式会社 携帯情報端末の制御方法及びプログラム
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
CN110286818B (zh) * 2013-03-29 2022-10-28 松下电器（美国）知识产权公司 记录介质、控制方法、信息提供方法以及信息终端
CN110448222A (zh) 2013-04-15 2019-11-15 伊莱克斯公司 机器人真空吸尘器
KR20150141979A (ko) 2013-04-15 2015-12-21 악티에볼라겟 엘렉트로룩스 돌출 측부 브러시를 구비하는 로봇 진공 청소기
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
KR101922663B1 (ko) 2013-06-09 2018-11-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US11651665B2 (en) 2013-07-26 2023-05-16 Skybell Technologies Ip, Llc Doorbell communities
US10733823B2 (en) 2013-07-26 2020-08-04 Skybell Technologies Ip, Llc Garage door communication systems and methods
US10440165B2 (en) 2013-07-26 2019-10-08 SkyBell Technologies, Inc. Doorbell communication and electrical systems
US11004312B2 (en) 2015-06-23 2021-05-11 Skybell Technologies Ip, Llc Doorbell communities
US20180343141A1 (en) 2015-09-22 2018-11-29 SkyBell Technologies, Inc. Doorbell communication systems and methods
US10708404B2 (en) 2014-09-01 2020-07-07 Skybell Technologies Ip, Llc Doorbell communication and electrical systems
US20170263067A1 (en) 2014-08-27 2017-09-14 SkyBell Technologies, Inc. Smart lock systems and methods
US10672238B2 (en) 2015-06-23 2020-06-02 SkyBell Technologies, Inc. Doorbell communities
US11889009B2 (en) 2013-07-26 2024-01-30 Skybell Technologies Ip, Llc Doorbell communication and electrical systems
US9786997B2 (en) 2013-08-01 2017-10-10 Centurylink Intellectual Property Llc Wireless access point in pedestal or hand hole
KR102229356B1 (ko) 2013-09-05 2021-03-19 삼성전자주식회사 제어 장치
US10276921B2 (en) 2013-09-06 2019-04-30 Centurylink Intellectual Property Llc Radiating closures
US9780433B2 (en) 2013-09-06 2017-10-03 Centurylink Intellectual Property Llc Wireless distribution using cabinets, pedestals, and hand holes
US10154325B2 (en) 2014-02-12 2018-12-11 Centurylink Intellectual Property Llc Point-to-point fiber insertion
WO2015078778A1 (en) * 2013-11-29 2015-06-04 Koninklijke Philips N.V. Zigbee light link network commissioning
CA2932273C (en) 2013-12-06 2022-08-30 Adt Us Holdings, Inc. Voice activated application for mobile devices
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
JP6638987B2 (ja) 2013-12-19 2020-02-05 アクチエボラゲット エレクトロルックス 回転側面ブラシの適応速度制御
US9811089B2 (en) 2013-12-19 2017-11-07 Aktiebolaget Electrolux Robotic cleaning device with perimeter recording function
WO2015090399A1 (en) 2013-12-19 2015-06-25 Aktiebolaget Electrolux Robotic cleaning device and method for landmark recognition
EP3084540B1 (en) 2013-12-19 2021-04-14 Aktiebolaget Electrolux Robotic cleaning device and operating method
US10045675B2 (en) 2013-12-19 2018-08-14 Aktiebolaget Electrolux Robotic vacuum cleaner with side brush moving in spiral pattern
US9946263B2 (en) 2013-12-19 2018-04-17 Aktiebolaget Electrolux Prioritizing cleaning areas
KR102099495B1 (ko) 2013-12-19 2020-04-09 에이비 엘렉트로룩스 로봇 청소 장치가 장애물에 올라가는 것의 감지
CN105848545B (zh) 2013-12-20 2019-02-19 伊莱克斯公司 灰尘容器
US10225347B2 (en) * 2013-12-24 2019-03-05 Verizon Patent And Licensing Inc. Message controlled appliances
KR20150079106A (ko) * 2013-12-31 2015-07-08 삼성전자주식회사 디스플레이 장치, 단말 장치 및 그 제어 방법
USD754172S1 (en) * 2014-01-03 2016-04-19 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9814084B2 (en) * 2014-08-07 2017-11-07 Belkin International Inc. Location and pairing of devices on a local area network using a unique identifier
US9918351B2 (en) 2014-04-01 2018-03-13 Belkin International Inc. Setup of multiple IOT networks devices
US20150283703A1 (en) * 2014-04-03 2015-10-08 Brain Corporation Apparatus and methods for remotely controlling robotic devices
US9641885B2 (en) * 2014-05-07 2017-05-02 Vivint, Inc. Voice control component installation
US9633547B2 (en) 2014-05-20 2017-04-25 Ooma, Inc. Security monitoring and control
US10553098B2 (en) 2014-05-20 2020-02-04 Ooma, Inc. Appliance device integration with alarm systems
JP6225073B2 (ja) * 2014-05-26 2017-11-01 株式会社マキタ 無線通信装置及び電動工具用装置
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US10687029B2 (en) 2015-09-22 2020-06-16 SkyBell Technologies, Inc. Doorbell communication systems and methods
US20170085843A1 (en) 2015-09-22 2017-03-23 SkyBell Technologies, Inc. Doorbell communication systems and methods
US11184589B2 (en) 2014-06-23 2021-11-23 Skybell Technologies Ip, Llc Doorbell communication systems and methods
US9888216B2 (en) 2015-09-22 2018-02-06 SkyBell Technologies, Inc. Doorbell communication systems and methods
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US11330100B2 (en) * 2014-07-09 2022-05-10 Ooma, Inc. Server based intelligent personal assistant services
ES2681802T3 (es) 2014-07-10 2018-09-17 Aktiebolaget Electrolux Método para detectar un error de medición en un dispositivo de limpieza robotizado
US9629227B2 (en) * 2014-07-11 2017-04-18 Ideal Industries, Inc. Systems and methods for pre-commissioning a wireless lighting control system
KR20160010785A (ko) * 2014-07-18 2016-01-28 삼성전자주식회사 가전기기 및 그 제어 방법
KR101575597B1 (ko) * 2014-07-30 2015-12-08 엘지전자 주식회사 로봇 청소 시스템 및 로봇 청소기의 제어방법
US9389831B2 (en) * 2014-08-06 2016-07-12 Toyota Jidosha Kabushiki Kaisha Sharing speech dialog capabilities of a vehicle
KR101631435B1 (ko) 2014-09-05 2016-06-24 엘지전자 주식회사 이동 단말기, 홈 어플라이언스, 및 그 동작 방법
CN106659345B (zh) 2014-09-08 2019-09-03 伊莱克斯公司 机器人真空吸尘器
CN106659344B (zh) 2014-09-08 2019-10-25 伊莱克斯公司 机器人真空吸尘器
US10073990B1 (en) * 2014-09-10 2018-09-11 Maxim Integrated Products, Inc. System and method for monitoring network devices incorporating authentication capable power supply modules
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
CN104301857A (zh) * 2014-09-24 2015-01-21 广州三星通信技术研究有限公司 用于通信终端之间的无线通信的方法和设备
CN104301526B (zh) * 2014-09-26 2017-04-12 小米科技有限责任公司 终端遥控方法、装置及设备
WO2016052888A1 (en) * 2014-09-29 2016-04-07 Lg Electronics Inc. Mobile terminal and method of controlling the same
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9942229B2 (en) * 2014-10-03 2018-04-10 Gopro, Inc. Authenticating a limited input device via an authenticated application
WO2016058044A1 (en) * 2014-10-13 2016-04-21 Automatic Technology (Australia) Pty Ltd Remote monitoring and control system for a barrier operator
PT108027A (pt) * 2014-11-11 2016-05-11 Pinheiro Pedro José De Araújo Comando universal controlado remotamente
CN104407592B (zh) * 2014-11-27 2018-11-23 小米科技有限责任公司 一种调整智能家居设备运行状态的方法及装置
KR102302686B1 (ko) 2014-12-05 2021-09-16 삼성전자주식회사 전자 장치 및 그 제어 방법
US10877484B2 (en) 2014-12-10 2020-12-29 Aktiebolaget Electrolux Using laser sensor for floor type detection
KR101573785B1 (ko) * 2014-12-12 2015-12-14 주식회사 경동원 Z-Wave 네트워크를 이용한 홈네트워크 시스템 및 그 시스템을 이용한 홈오토메이션 기기 연결 방법
CN107072454A (zh) 2014-12-12 2017-08-18 伊莱克斯公司 侧刷和机器人吸尘器
WO2016095965A2 (en) 2014-12-16 2016-06-23 Aktiebolaget Electrolux Experience-based roadmap for a robotic cleaning device
KR101634295B1 (ko) 2014-12-16 2016-06-30 주식회사 윈스 IoT 보안을 위한 인증 서비스 제공 시스템 및 방법
CN106998984B (zh) 2014-12-16 2021-07-27 伊莱克斯公司 用于机器人清洁设备的清洁方法
CN104504887B (zh) * 2015-01-06 2018-09-04 连宁 一种无线遥控的控制方法及系统
US20170048495A1 (en) * 2015-02-17 2017-02-16 SkyBell Technologies, Inc. Power outlet cameras
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10742938B2 (en) 2015-03-07 2020-08-11 Skybell Technologies Ip, Llc Garage door communication systems and methods
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
KR102342117B1 (ko) * 2015-03-13 2021-12-21 엘지전자 주식회사 단말기, 및 이를 구비하는 홈 어플라이언스 시스템
FR3034217B1 (fr) * 2015-03-27 2017-03-24 Delta Dore Procede et systeme de commande de dispositifs domotiques d'une habitation
US11575537B2 (en) 2015-03-27 2023-02-07 Skybell Technologies Ip, Llc Doorbell communication systems and methods
US11381686B2 (en) 2015-04-13 2022-07-05 Skybell Technologies Ip, Llc Power outlet cameras
WO2016165772A1 (en) 2015-04-17 2016-10-20 Aktiebolaget Electrolux Robotic cleaning device and a method of controlling the robotic cleaning device
US10009286B2 (en) 2015-05-08 2018-06-26 Ooma, Inc. Communications hub
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US9451388B1 (en) * 2015-06-10 2016-09-20 Hong Fu Jin Precision Industry (Wuhan) Co., Ltd. Framework and method for processing commands for controlling electronic devices
KR102410903B1 (ko) * 2015-06-12 2022-06-21 삼성전자 주식회사 객실 관리 시스템 및 서비스 설정 방법
KR101678606B1 (ko) * 2015-06-15 2016-12-06 (주)엔텔스 IoT 디바이스를 이용한 서비스 제공 방법 및 IoT 디바이스를 이용한 서비스 제공 시스템
US20180047269A1 (en) 2015-06-23 2018-02-15 SkyBell Technologies, Inc. Doorbell communities
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
KR102373719B1 (ko) * 2015-06-29 2022-03-14 삼성전자 주식회사 복수의 구역들 중 일 구역의 기기를 제어하는 방법 및 이를 위한 장치
EP3113138A1 (en) * 2015-06-30 2017-01-04 Orange Remote control of an electronic device with a selectable element
EP3113140A1 (en) * 2015-06-30 2017-01-04 Orange User input processing for controlling remote devices
US10492060B2 (en) 2015-07-13 2019-11-26 Lg Electronics Inc. Method and device for transmitting/receiving data in wireless communication system
US10375172B2 (en) 2015-07-23 2019-08-06 Centurylink Intellectual Property Llc Customer based internet of things (IOT)—transparent privacy functionality
US10623162B2 (en) 2015-07-23 2020-04-14 Centurylink Intellectual Property Llc Customer based internet of things (IoT)
US10706702B2 (en) 2015-07-30 2020-07-07 Skybell Technologies Ip, Llc Doorbell package detection systems and methods
JP6736831B2 (ja) 2015-09-03 2020-08-05 アクチエボラゲット エレクトロルックス ロボット清掃デバイスのシステム、清掃デバイスを制御する方法、コンピュータプログラム及びコンピュータプログラム製品
US9734138B2 (en) 2015-09-07 2017-08-15 Voicebox Technologies Corporation System and method of annotating utterances based on tags assigned by unmanaged crowds
US9401142B1 (en) 2015-09-07 2016-07-26 Voicebox Technologies Corporation System and method for validating natural language content using crowdsourced validation jobs
US9448993B1 (en) 2015-09-07 2016-09-20 Voicebox Technologies Corporation System and method of recording utterances using unmanaged crowds for natural language processing
WO2017044415A1 (en) * 2015-09-07 2017-03-16 Voicebox Technologies Corporation System and method for eliciting open-ended natural language responses to questions to train natural language processors
US9519766B1 (en) 2015-09-07 2016-12-13 Voicebox Technologies Corporation System and method of providing and validating enhanced CAPTCHAs
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
CN105204354A (zh) * 2015-09-09 2015-12-30 北京百度网讯科技有限公司 智能家居设备的控制方法及装置
FR3041198B1 (fr) * 2015-09-16 2018-08-17 Overkiz Procede de configuration et procede de controle d’une installation domotique
WO2017060138A1 (en) * 2015-10-06 2017-04-13 Philips Lighting Holding B.V. Control application for automatized maintenance device
CN106653008B (zh) * 2015-10-28 2021-02-02 中兴通讯股份有限公司 一种语音控制方法、装置及系统
CN105405442B (zh) * 2015-10-28 2019-12-13 小米科技有限责任公司 语音的识别方法、装置和设备
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
FR3043828A1 (fr) * 2015-11-12 2017-05-19 Orange Procede de gestion d'acces a des equipements domotiques par un terminal de controle distant
CN105487389B (zh) 2015-11-17 2020-02-07 小米科技有限责任公司 控制智能设备的方法和装置
CN106782522A (zh) * 2015-11-23 2017-05-31 宏碁股份有限公司 语音控制方法及语音控制系统
KR20170060598A (ko) 2015-11-24 2017-06-01 삼성전자주식회사 스마트 홈 서비스 서버 및 그 제어방법
AU2016361086B2 (en) * 2015-11-24 2020-10-08 Samsung Electronics Co., Ltd. Smart home service server and control method therefor
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
KR102433533B1 (ko) * 2015-12-09 2022-08-18 한국전자기술연구원 모션 학습을 통한 인지 기반 제어 방법 및 시스템
US10331155B1 (en) * 2015-12-11 2019-06-25 Amazon Technologies, Inc. Network addressable power socket automation
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10026401B1 (en) * 2015-12-28 2018-07-17 Amazon Technologies, Inc. Naming devices via voice commands
KR101786290B1 (ko) * 2016-01-08 2017-10-18 디노플러스 (주) 스마트 홈 구현을 위한 통합 게이트웨이장치
US9633659B1 (en) * 2016-01-20 2017-04-25 Motorola Mobility Llc Method and apparatus for voice enrolling an electronic computing device
WO2017126740A1 (ko) * 2016-01-22 2017-07-27 삼성전자 주식회사 단말 장치, 원격 제어 시스템 및 제어 방법
US9965247B2 (en) * 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US9772817B2 (en) 2016-02-22 2017-09-26 Sonos, Inc. Room-corrected voice detection
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US10142754B2 (en) 2016-02-22 2018-11-27 Sonos, Inc. Sensor on moving component of transducer
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US10509626B2 (en) 2016-02-22 2019-12-17 Sonos, Inc Handling of loss of pairing between networked devices
TWM523925U (zh) * 2016-02-25 2016-06-11 蕭如宣 物聯網整合平台
US20190057703A1 (en) * 2016-02-29 2019-02-21 Faraday&Future Inc. Voice assistance system for devices of an ecosystem
KR101668289B1 (ko) * 2016-03-10 2016-10-21 주식회사 삼진엘앤디 이동 통신 단말기를 이용한 무선 메쉬 네트워크 기반의 조명 장치 제어 방법 및 이를 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
EP3430424B1 (en) 2016-03-15 2021-07-21 Aktiebolaget Electrolux Robotic cleaning device and a method at the robotic cleaning device of performing cliff detection
CN105975540A (zh) 2016-04-29 2016-09-28 北京小米移动软件有限公司 信息显示方法及装置
TWI571748B (zh) * 2016-05-05 2017-02-21 群暉科技股份有限公司 遠端控制伺服器的方法及相關的電腦程式產品
CN109068908B (zh) 2016-05-11 2021-05-11 伊莱克斯公司 机器人清洁设备
US10832665B2 (en) * 2016-05-27 2020-11-10 Centurylink Intellectual Property Llc Internet of things (IoT) human interface apparatus, system, and method
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US9978390B2 (en) 2016-06-09 2018-05-22 Sonos, Inc. Dynamic player selection for audio signal processing
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
AU2017285019B2 (en) * 2016-06-15 2022-11-10 Irobot Corporation Systems and methods to control an autonomous mobile robot
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US10152969B2 (en) 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
DE102016213174A1 (de) * 2016-07-19 2018-01-25 BSH Hausgeräte GmbH Erstellung einer semantischen Karte
JP6707414B2 (ja) * 2016-07-26 2020-06-10 サン電子株式会社 サーバ、及び、サーバのためのコンピュータプログラム
US10249103B2 (en) 2016-08-02 2019-04-02 Centurylink Intellectual Property Llc System and method for implementing added services for OBD2 smart vehicle connection
US9693164B1 (en) 2016-08-05 2017-06-27 Sonos, Inc. Determining direction of networked microphone device relative to audio playback device
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10798548B2 (en) 2016-08-22 2020-10-06 Lg Electronics Inc. Method for controlling device by using Bluetooth technology, and apparatus
US10110272B2 (en) 2016-08-24 2018-10-23 Centurylink Intellectual Property Llc Wearable gesture control device and method
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10687377B2 (en) 2016-09-20 2020-06-16 Centurylink Intellectual Property Llc Universal wireless station for multiple simultaneous wireless services
US9794720B1 (en) 2016-09-22 2017-10-17 Sonos, Inc. Acoustic position measurement
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10955838B2 (en) * 2016-09-26 2021-03-23 Dji Technology, Inc. System and method for movable object control
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
KR20180036169A (ko) * 2016-09-30 2018-04-09 엘지전자 주식회사 디지털 디바이스 및 그 데이터 처리 방법
JP2018063537A (ja) * 2016-10-12 2018-04-19 株式会社東芝 ホームネットワーク、電子機器、処理装置および表示方法
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
CN108063701B (zh) * 2016-11-08 2020-12-08 华为技术有限公司 一种控制智能设备的方法及装置
US9867112B1 (en) 2016-11-23 2018-01-09 Centurylink Intellectual Property Llc System and method for implementing combined broadband and wireless self-organizing network (SON)
DE102016014479A1 (de) * 2016-12-06 2018-06-07 Tobias Rückert Verfahren zur Kommunikation eines Users mit einem ersten und einem zweiten Zielgerät
KR102496793B1 (ko) * 2016-12-13 2023-02-06 현대자동차 주식회사 통합 원격 제어 시스템 및 이를 이용한 원격 제어 방법이 구현된 컴퓨터로 판독 가능한 기록매체
KR102661645B1 (ko) * 2016-12-15 2024-05-02 삼성전자주식회사 전자 장치 및 그의 제어 방법
US10426358B2 (en) 2016-12-20 2019-10-01 Centurylink Intellectual Property Llc Internet of things (IoT) personal tracking apparatus, system, and method
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10735220B2 (en) 2016-12-23 2020-08-04 Centurylink Intellectual Property Llc Shared devices with private and public instances
US10637683B2 (en) 2016-12-23 2020-04-28 Centurylink Intellectual Property Llc Smart city apparatus, system, and method
US10193981B2 (en) 2016-12-23 2019-01-29 Centurylink Intellectual Property Llc Internet of things (IoT) self-organizing network
US10150471B2 (en) 2016-12-23 2018-12-11 Centurylink Intellectual Property Llc Smart vehicle apparatus, system, and method
US10222773B2 (en) 2016-12-23 2019-03-05 Centurylink Intellectual Property Llc System, apparatus, and method for implementing one or more internet of things (IoT) capable devices embedded within a roadway structure for performing various tasks
JP6848426B2 (ja) * 2016-12-27 2021-03-24 富士通株式会社 通信装置，通信システム，プログラム及び通信制御方法
US10580405B1 (en) * 2016-12-27 2020-03-03 Amazon Technologies, Inc. Voice control of remote device
US10593328B1 (en) * 2016-12-27 2020-03-17 Amazon Technologies, Inc. Voice control of remote device
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10146024B2 (en) 2017-01-10 2018-12-04 Centurylink Intellectual Property Llc Apical conduit method and system
KR102004221B1 (ko) * 2017-02-07 2019-07-29 남서울대학교 산학협력단 멀티미디어 채팅을 통한 IoT 기반의 전원 릴레이 제어시스템 및 그 방법
CN110574389B (zh) * 2017-02-22 2022-05-27 圣思实验室公司 使用功率数据和网络数据来识别设备状态改变
US10750252B2 (en) 2017-02-22 2020-08-18 Sense Labs, Inc. Identifying device state changes using power data and network data
CN106843179A (zh) * 2017-02-28 2017-06-13 绵阳职业技术学院 家电控制系统及方法
DE102017204569A1 (de) * 2017-03-20 2018-09-20 Audi Ag Verfahren und Vorrichtung zum Steuern eines Endgeräts
KR102398390B1 (ko) 2017-03-22 2022-05-16 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
DE102017106290A1 (de) * 2017-03-23 2018-09-27 Miele & Cie. Kg Verfahren zur Auswahl wenigstens einer ersten Slave-Einheit innerhalb einer vorbestimmten räumlichen Nähe zu einer Master-Einheit
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
CN107015781B (zh) * 2017-03-28 2021-02-19 联想(北京)有限公司 语音识别方法和系统
CN108667773B (zh) * 2017-03-30 2021-03-12 阿里巴巴集团控股有限公司 网络防护系统、方法、装置及服务器
KR20180110974A (ko) * 2017-03-30 2018-10-11 엘지전자 주식회사 음성 서버, 음성 인식 서버 시스템 및 그 동작 방법
KR20180110979A (ko) * 2017-03-30 2018-10-11 엘지전자 주식회사 음성 서버, 음성 인식 서버 시스템 및 그 동작 방법
CN106963288A (zh) * 2017-04-29 2017-07-21 杭州扮家网络科技有限公司 一种基于物联网控制的智能吸尘器及其远程控制方法
FR3066037A1 (fr) * 2017-05-03 2018-11-09 Pilotme Procede de commande d'une zone d'affichage d'un client web par un terminal portable distant de ladite zone d'affichage
US10742940B2 (en) 2017-05-05 2020-08-11 VergeSense, Inc. Method for monitoring occupancy in a work area
US11044445B2 (en) 2017-05-05 2021-06-22 VergeSense, Inc. Method for monitoring occupancy in a work area
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
KR20220025250A (ko) 2017-06-02 2022-03-03 에이비 엘렉트로룩스 로봇 청소 장치 전방의 표면의 레벨차를 검출하는 방법
CN107146616B (zh) * 2017-06-13 2020-05-08 Oppo广东移动通信有限公司 设备控制方法及相关产品
CN107293101A (zh) * 2017-06-23 2017-10-24 珠海优特物联科技有限公司 热水回水系统的控制系统和方法
CN107393528B (zh) * 2017-06-30 2021-01-15 北京小米移动软件有限公司 语音控制方法及装置
KR102546643B1 (ko) * 2017-07-06 2023-06-21 주식회사 케이티 지능형 단말 관리 시스템 및 방법
KR102419374B1 (ko) * 2017-07-21 2022-07-11 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 전자 장치의 제어 방법
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
KR102426123B1 (ko) * 2017-08-17 2022-07-28 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 서버
KR102396147B1 (ko) * 2017-08-22 2022-05-10 삼성전자 주식회사 음성 명령을 이용한 동작을 수행하는 전자 장치 및 전자 장치의 동작 방법
KR102347208B1 (ko) 2017-09-07 2022-01-05 삼성전자주식회사 외부 장치를 이용한 태스크 수행 방법 및 이를 지원하는 전자 장치, 서버 및 저장 매체
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
US10438594B2 (en) 2017-09-08 2019-10-08 Amazon Technologies, Inc. Administration of privileges by speech for voice assistant system
KR102087202B1 (ko) * 2017-09-13 2020-03-10 (주)파워보이스 인공 지능 비서 서비스 제공 방법, 및 이에 사용되는 음성 인식 장비
US10909825B2 (en) 2017-09-18 2021-02-02 Skybell Technologies Ip, Llc Outdoor security systems and methods
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
CN111093447B (zh) 2017-09-26 2022-09-02 伊莱克斯公司 机器人清洁设备的移动控制
US10446165B2 (en) 2017-09-27 2019-10-15 Sonos, Inc. Robust short-time fourier transform acoustic echo cancellation during audio playback
US10885077B2 (en) * 2017-09-28 2021-01-05 Google Llc Subquery generation from a query
US10621981B2 (en) 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
US10482868B2 (en) 2017-09-28 2019-11-19 Sonos, Inc. Multi-channel acoustic echo cancellation
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
CN107622771A (zh) * 2017-09-30 2018-01-23 广东美的制冷设备有限公司 家电设备及其控制方法、系统及计算机可读存储介质
CN109658937A (zh) * 2017-10-10 2019-04-19 苏州宝时得电动工具有限公司 智能割草机的语音控制方法、装置、系统和智能割草机
US11133000B2 (en) * 2017-10-13 2021-09-28 Johnson Controls Tyco IP Holdings LLP Systems and methods for voice control of BMS devices
CN111279291A (zh) 2017-10-31 2020-06-12 惠普发展公司，有限责任合伙企业 用于控制感测模块何时对事件响应的致动模块
US10748533B2 (en) * 2017-11-08 2020-08-18 Harman International Industries, Incorporated Proximity aware voice agent
US11039084B2 (en) 2017-11-14 2021-06-15 VergeSense, Inc. Method for commissioning a network of optical sensors across a floor space
EP3488751B1 (en) * 2017-11-22 2023-06-07 Guido Valentini Vacuum cleaner
CN107995279A (zh) * 2017-11-28 2018-05-04 宁波高新区锦众信息科技有限公司 一种远程遥控打扫卫生的智能机器人及遥控方法
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10880650B2 (en) 2017-12-10 2020-12-29 Sonos, Inc. Network microphone devices with automatic do not disturb actuation capabilities
US10818290B2 (en) 2017-12-11 2020-10-27 Sonos, Inc. Home graph
US10627794B2 (en) 2017-12-19 2020-04-21 Centurylink Intellectual Property Llc Controlling IOT devices via public safety answering point
KR102451348B1 (ko) * 2017-12-27 2022-10-06 로비 가이드스, 인크. 음성 데이터 및 미디어 소비 데이터에 기초하여 사용자들을 식별하기 위한 시스템들 및 방법들
KR102385263B1 (ko) * 2018-01-04 2022-04-12 삼성전자주식회사 이동형 홈 로봇 및 이동형 홈 로봇의 제어 방법
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
CN108197304A (zh) * 2018-01-30 2018-06-22 深圳绿米联创科技有限公司 实现智能门锁语音自定义的方法及装置
US10778674B2 (en) 2018-01-30 2020-09-15 D&M Holdings, Inc. Voice authentication and setup for wireless media rendering system
US11343614B2 (en) 2018-01-31 2022-05-24 Sonos, Inc. Device designation of playback and network microphone device arrangements
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
KR20190111624A (ko) 2018-03-23 2019-10-02 삼성전자주식회사 전자 장치 및 전자 장치의 음성 인식 제어 방법
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
CN111433755A (zh) * 2018-04-11 2020-07-17 海信视像科技股份有限公司 家庭网络、电子机器、处理装置及显示方法
JP6918215B2 (ja) * 2018-04-17 2021-08-11 三菱電機株式会社 機器制御システム及び機器制御方法
KR101960740B1 (ko) * 2018-04-26 2019-03-21 (주)에이투유정보통신 무선 네트워크를 이용하는 원격 에어컨 제어기 및 원격 에어컨 제어 시스템
DE102018110423A1 (de) * 2018-05-01 2019-11-07 Tobias Rückert Verfahren zum Anmelden eines Zielgeräts an ein Netzwerk
JP7155294B2 (ja) * 2018-05-07 2022-10-18 グーグル エルエルシー 接続デバイスを制御するための合成グラフィカルアシスタントインターフェースを提供するための方法、システムおよび装置
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
EP3583770B1 (en) 2018-05-07 2020-10-28 Google LLC Providing composite graphical assistant interfaces for controlling various connected devices
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
KR102458336B1 (ko) * 2018-05-18 2022-10-25 삼성전자주식회사 공기 조화 장치 및 이의 제어 방법
US10847178B2 (en) 2018-05-18 2020-11-24 Sonos, Inc. Linear filtering for noise-suppressed speech detection
CN108806680A (zh) * 2018-05-21 2018-11-13 济南聪啸信息科技发展有限公司 一种多区域全覆盖语音通讯控制系统与方法
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
US11185207B2 (en) * 2018-07-24 2021-11-30 Qualcomm Incorporated Managing cleaning robot behavior
CN109040220B (zh) * 2018-07-26 2021-09-21 北京小米移动软件有限公司 智能设备的远程控制方法、装置和可读存储介质
JP6621506B2 (ja) * 2018-08-23 2019-12-18 京セラ株式会社 操作端末、プログラム、及び方法
US10461710B1 (en) 2018-08-28 2019-10-29 Sonos, Inc. Media playback system with maximum volume setting
US11076035B2 (en) 2018-08-28 2021-07-27 Sonos, Inc. Do not disturb feature for audio notifications
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
US10587430B1 (en) 2018-09-14 2020-03-10 Sonos, Inc. Networked devices, systems, and methods for associating playback devices based on sound codes
WO2020060267A1 (en) * 2018-09-20 2020-03-26 Samsung Electronics Co., Ltd. Cleaning robot and method for performing task thereof
CN110944028A (zh) * 2018-09-21 2020-03-31 阿里巴巴集团控股有限公司 一种客房管理方法、服务器、系统及存储介质
US11024331B2 (en) 2018-09-21 2021-06-01 Sonos, Inc. Voice detection optimization using sound metadata
CN109388603A (zh) * 2018-09-25 2019-02-26 珠海格力电器股份有限公司 状态信息获取和反馈方法、装置、介质、终端及示教器
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10692518B2 (en) 2018-09-29 2020-06-23 Sonos, Inc. Linear filtering for noise-suppressed speech detection via multiple network microphone devices
US10586177B1 (en) 2018-10-02 2020-03-10 Sense Labs, Inc. Training a mathematical model for a device using a smart plug
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
KR102250421B1 (ko) * 2018-11-09 2021-05-11 주식회사 포스코아이씨티 Ai 음성인식 스피커 및 세대 내 설치된 네트워크 장치를 이용한 홈 네트워킹 방법, 이를 운용하기 위한 장치 및 시스템
EP3654249A1 (en) 2018-11-15 2020-05-20 Snips Dilated convolutions and gating for efficient keyword spotting
KR102478631B1 (ko) * 2018-11-19 2022-12-19 주식회사 케이티 기기 원격 제어 시스템
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
KR102590914B1 (ko) 2018-12-14 2023-10-19 삼성전자주식회사 전자 장치 및 이의 제어 방법
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
KR20200094843A (ko) 2019-01-23 2020-08-10 삼성전자주식회사 외부 전자 장치를 제어하는 방법 및 이를 지원하는 전자 장치
CN111508483B (zh) 2019-01-31 2023-04-18 北京小米智能科技有限公司 设备控制方法及装置
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
US10867604B2 (en) 2019-02-08 2020-12-15 Sonos, Inc. Devices, systems, and methods for distributed voice processing
AU2020241843B2 (en) 2019-03-15 2023-09-28 VergeSense, Inc. Arrival detection for battery-powered optical sensors
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11120794B2 (en) 2019-05-03 2021-09-14 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
JP2020188404A (ja) * 2019-05-16 2020-11-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 表示制御方法及び表示制御装置
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
WO2021002493A1 (ko) * 2019-07-01 2021-01-07 엘지전자 주식회사 지능형 게이트웨이 장치 및 그를 포함하는 제어 시스템
US11536747B2 (en) 2019-07-11 2022-12-27 Sense Labs, Inc. Current transformer with self-adjusting cores
US10871943B1 (en) 2019-07-31 2020-12-22 Sonos, Inc. Noise classification for event detection
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
WO2021041354A1 (en) 2019-08-24 2021-03-04 Skybell Technologies Ip, Llc Doorbell communication systems and methods
KR20190109337A (ko) * 2019-09-06 2019-09-25 엘지전자 주식회사 증강현실 기반의 기기 제어 장치 및 그 방법
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11620808B2 (en) 2019-09-25 2023-04-04 VergeSense, Inc. Method for detecting human occupancy and activity in a work area
JP7472461B2 (ja) * 2019-10-08 2024-04-23 株式会社リコー 情報処理システム及び情報処理方法
US11176928B2 (en) 2019-10-15 2021-11-16 Google Llc Efficient and low latency automated assistant control of smart devices
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
JP7401269B2 (ja) * 2019-11-19 2023-12-19 ファナック株式会社 制御装置
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
CN110912789B (zh) * 2019-12-27 2021-06-25 无锡青起长升智能科技有限公司 一种基于阿里云IoT Hub平台的智能家居物联网通信方法
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
CN111240217B (zh) * 2020-01-08 2024-02-23 深圳绿米联创科技有限公司 状态检测方法、装置、电子设备及存储介质
CN111240222A (zh) * 2020-01-23 2020-06-05 珠海荣邦电子科技有限公司 一种智能家居控制系统、方法及装置
US11556307B2 (en) 2020-01-31 2023-01-17 Sonos, Inc. Local voice data processing
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
CN111312250A (zh) * 2020-02-21 2020-06-19 珠海荣邦电子科技有限公司 基于语音的多设备适配控制方法、装置及系统
CN113495487A (zh) * 2020-03-18 2021-10-12 海信集团有限公司 一种调节目标设备运行参数的终端和方法
JP2021162696A (ja) * 2020-03-31 2021-10-11 ブラザー工業株式会社 情報処理装置、情報処理方法、電子機器及び情報処理システム
KR102378908B1 (ko) * 2020-04-28 2022-03-24 동명대학교산학협력단 인공지능 홈오토메이션 시스템
WO2021221215A1 (ko) * 2020-04-29 2021-11-04 엘지전자 주식회사 영상표시장치, 시스템 및 그의 동작방법
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
CN111654420A (zh) * 2020-05-18 2020-09-11 珠海格力电器股份有限公司 一种控制家居设备的方法、装置、计算机设备及存储介质
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
US11727919B2 (en) 2020-05-20 2023-08-15 Sonos, Inc. Memory allocation for keyword spotting engines
US11308962B2 (en) 2020-05-20 2022-04-19 Sonos, Inc. Input detection windowing
CN111739532B (zh) * 2020-07-16 2021-02-19 展讯通信（上海）有限公司 语音控制方法及装置、存储介质、智能终端、语音控制系统
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11615795B2 (en) 2020-08-03 2023-03-28 HCL America Inc. Method and system for providing secured access to services rendered by a digital voice assistant
KR102190190B1 (ko) 2020-08-19 2020-12-14 탑이앤지 주식회사 인공지능을 활용한 공동주택 정보통신 통합 관리 시스템
KR102226476B1 (ko) 2020-08-24 2021-03-11 (주)구방엔지니어링건축사사무소 공동주택의 초고속 인터넷과 연결한 정보통신 작동 시스템
US11698771B2 (en) 2020-08-25 2023-07-11 Sonos, Inc. Vocal guidance engines for playback devices
US11984123B2 (en) 2020-11-12 2024-05-14 Sonos, Inc. Network device interaction by range
TWI759065B (zh) * 2021-01-11 2022-03-21 禾聯碩股份有限公司 物聯網的語音控制系統及其方法
US11551700B2 (en) 2021-01-25 2023-01-10 Sonos, Inc. Systems and methods for power-efficient keyword detection
CN112992139A (zh) * 2021-02-07 2021-06-18 北京紫光展锐通信技术有限公司 设备控制方法、装置和设备
CN113851124A (zh) * 2021-09-09 2021-12-28 青岛海尔空调器有限总公司 用于控制家电设备的方法及装置、存储介质
KR102542623B1 (ko) * 2021-09-13 2023-06-14 주식회사 동영엠텍 비접촉 비대면 자동출입 IoT 제어용 푸시풀 개폐문락 및 그 제어 방법
CN115942282A (zh) * 2021-11-25 2023-04-07 中兴通讯股份有限公司 通信方法、节点、设备、通信系统及存储介质
KR102528165B1 (ko) 2022-01-19 2023-05-04 (주)한동엔지니어링 인공지능을 활용한 공동주택 정보통신 통합관리 시스템
WO2023163254A1 (ko) * 2022-02-28 2023-08-31 엘지전자 주식회사 Tv와 리모컨을 포함하는 시스템 및 그 제어 방법
WO2023249359A1 (ko) * 2022-06-22 2023-12-28 삼성전자주식회사 전자 장치 및 오프라인 장치 등록 방법
KR20240062475A (ko) * 2022-11-01 2024-05-09 삼성전자주식회사 가구에 포함되는 장치의 사용 및 관리를 위한 사용자 인터페이스를 표시하기 위한 전자 장치 및 그 동작 방법

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020002039A1 (en) * 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
US7831930B2 (en) 2001-11-20 2010-11-09 Universal Electronics Inc. System and method for displaying a user interface for a remote control application
US20040006477A1 (en) 2002-07-05 2004-01-08 Craner Michael L. Voice-controllable communication gateway for controlling multiple electronic and information appliances
US7415410B2 (en) 2002-12-26 2008-08-19 Motorola, Inc. Identification apparatus and method for receiving and processing audible commands
US20050071879A1 (en) * 2003-07-10 2005-03-31 University Of Florida Research Foundation, Inc. Smart space appliance control using a mobile communications device
US7155305B2 (en) * 2003-11-04 2006-12-26 Universal Electronics Inc. System and methods for home appliance identification and control in a networked environment
KR20070089119A (ko) * 2004-07-23 2007-08-30 와이어리스 밸리 커뮤니케이션 인크 무선 네트워크 향상을 위해 무선 장치 또는 기반 구조의 위치를 결정하고 이용하는 방법
CN100446469C (zh) * 2005-09-09 2008-12-24 广东省电信有限公司研究院 一种对软交换网实现分权分域管理的网管系统和方法
ES2349049T3 (es) * 2005-11-15 2010-12-22 Alcatel Lucent Acceso a red, pasarela y servidor de gestión para un sistema celular de comunicación inalambrica.
US8207936B2 (en) 2006-06-30 2012-06-26 Sony Ericsson Mobile Communications Ab Voice remote control
KR20080011581A (ko) * 2006-07-31 2008-02-05 삼성전자주식회사 원격제어를 위한 중계 장치 및 상기 장치를 이용한원격제어방법
KR100769156B1 (ko) * 2007-04-20 2007-10-22 주식회사 서비전자 홈 네트워크 시스템 및 그것의 제어방법
KR20080096239A (ko) * 2007-04-27 2008-10-30 정장오 주방tv 및 홈네트워크시스템 및 가전기기를 음성으로제어하는 음성인식 네트워크주방tv시스템.
US20110066942A1 (en) * 2009-09-14 2011-03-17 Barton James M Multifunction Multimedia Device
KR20110047764A (ko) * 2009-10-30 2011-05-09 삼성전자주식회사 이동 단말을 이용하여 홈 네트워크 시스템을 제어하기 위한 방법 및 장치
CN101848173A (zh) * 2010-03-17 2010-09-29 南京理工大学 家庭网关
CN101827327A (zh) * 2010-03-22 2010-09-08 中兴通讯股份有限公司 一种基于ussd的智能家电远程控制方法、装置及系统
US8792419B2 (en) * 2010-04-08 2014-07-29 At&T Intellectual Property I, L.P. Presence-based communication routing service and regulation of same
CN101917530B (zh) 2010-06-30 2013-04-24 浙江工业大学 电话远程按键语音双模式控制器
WO2012036475A2 (ko) 2010-09-17 2012-03-22 주식회사 디지엔스 스마트폰을 이용한 디지털기기 제어 시스템
US8825020B2 (en) * 2012-01-12 2014-09-02 Sensory, Incorporated Information access and device control using mobile phones and audio in the home environment
CN102760433A (zh) * 2012-07-06 2012-10-31 广东美的制冷设备有限公司 联网家电用声控遥控器及其控制方法

Also Published As

Publication number Publication date
WO2014098477A1 (ko) 2014-06-26
KR20140079328A (ko) 2014-06-26
KR102102246B1 (ko) 2020-04-22
US20140167931A1 (en) 2014-06-19
CN104885406A (zh) 2015-09-02
CN110223495A (zh) 2019-09-10
KR20200042449A (ko) 2020-04-23
EP2938022A1 (en) 2015-10-28
US20180240331A1 (en) 2018-08-23
US10943470B2 (en) 2021-03-09
US9978260B2 (en) 2018-05-22
EP3691179A1 (en) 2020-08-05
KR102146738B1 (ko) 2020-08-28
EP2938022A4 (en) 2016-08-24

Similar Documents

Publication Publication Date Title
CN104885406B (zh) 用于在家庭网络系统中远程控制家庭设备的方法和设备
US10819958B2 (en) Home monitoring method and apparatus
US11019130B2 (en) Method and apparatus for remotely controlling home device in home network system
CN102984039B (zh) 智能网关、智能家居系统及家电设备的智能控制方法
KR102252258B1 (ko) 홈 네트워크 시스템에서 홈 디바이스들의 그룹 제어 방법 및 장치
CN102945029B (zh) 智能网关、智能家居系统及家电设备的智能控制方法
US9930519B2 (en) Method and apparatus for controlling home devices on group basis based upon history of the home devices
US10002524B2 (en) Method and apparatus for controlling devices in home network system
EP2937832A1 (en) Method and device for managing energy consumption in home network system
US20140121786A1 (en) Smart gateway, smart home system and smart remote control method thereof
CN107204903A (zh) 智能家居系统及其控制方法
CN111757281B (zh) 用于家庭网络系统中的事件通知的方法和设备
KR102206824B1 (ko) 홈 네트워크 시스템에서 홈 디바이스를 원격으로 제어하는 방법 및 장치
US8958788B2 (en) Home electronic apparatus control system, home electronic control apparatus, and wireless home electronic apparatus control terminal

Legal Events

Date Code Title Description
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant