CN105706395B - 控制设备及其控制方法 - Google Patents

控制设备及其控制方法 Download PDF

Info

Publication number
CN105706395B
CN105706395B CN201580002411.7A CN201580002411A CN105706395B CN 105706395 B CN105706395 B CN 105706395B CN 201580002411 A CN201580002411 A CN 201580002411A CN 105706395 B CN105706395 B CN 105706395B
Authority
CN
China
Prior art keywords
control
page
electronic device
icon
touched
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580002411.7A
Other languages
English (en)
Other versions
CN105706395A (zh
Inventor
田智贤
张惠祯
申荣宣
姜光锡
吴贤哲
徐善英
尹祉允
洪银卿
尹傃玲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020140001555A external-priority patent/KR102231105B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105706395A publication Critical patent/CN105706395A/zh
Application granted granted Critical
Publication of CN105706395B publication Critical patent/CN105706395B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/12Arrangements for remote connection or disconnection of substations or of equipment thereof

Abstract

公开了用于控制一个或多个电子设备的控制设备,该控制设备包括用户接口单元和控制单元。用户接口单元用于:显示第一页面,该第一页面具有与至少一个电子设备对应的图标以及至少一个电子设备的状态页面;以及接收针对至少一个电子设备的操作命令的输入。控制单元用于控制以使得:当电子设备的任何一个图标被选择时用于控制所选择的电子设备的控制页面显示在用户接口单元上;以及当任何一个电子设备的状态窗口被选择时切换该任何一个电子设备的当前操作。本发明通过利用图标来显示多个家用电子设备从而便于简单的识别,并且通过利用在图标附近的对话框来显示电子设备的操作状态从而允许容易地检查家用电子设备的操作状态。

Description

控制设备及其控制方法
技术领域
本发明涉及用于监测和控制家用电器的控制设备及其控制方法。
背景技术
近来,随着有线/无线数据通信技术的快速发展和通信网络的广泛分布,诸如互联网的高速通信服务已得以广泛推广。特别地,随着高速互联网服务进入家庭,传统的基于PC的网络技术已经发展为针对远程控制数字家用电器的家庭网络技术。
家庭网络系统是用于在有线或无线局域网上连接数字家用电器、传感器、照明灯具、加热和冷却设备、气体设备等从而随时随地控制用户期望的设备的系统。
这样的家庭网络系统一般包括家庭服务器(或家庭监测网关)、多个家庭网络设备(下文称为控制目标设备)以及控制器,其中,家庭服务器用作主机,多个家庭网络设备由家庭服务器监测和控制,控制器通过仅与家庭服务器连接来本地或远程地监测和控制多个控制目标设备。
在这种情况下,家庭服务器通常实现于住宅网关(RG)或室内控制终端(wall pad)上,并且控制器通常实现于室内控制终端、TV、手机、计算机等中。家庭服务器和控制器可集成和实现为一个设备。例如,除了用作家庭服务器外,TV还可用作控制设备。
在家庭网络系统中,家庭服务器可自动识别通过多种物理媒介(例如,电力线、诸如RS-232的串行通信、以太网等)连接至家庭网络的控制目标设备,例如,TV、冰箱、灯、微波炉、传感器、热水器以及洗衣机,并可在屏幕上显示识别的家庭网络设备以控制用户期望控制的设备。
控制器通过与家庭服务器通信来监测和控制多个控制目标设备。
在家庭网络系统中,家庭服务器将数据发送至外部网络或从外部网络接收数据,其中,外部网络主要以互联网网络的形式实现。
用户使用控制设备(例如,PC、笔记本、智能手机、平板PC、TV、可穿戴设备以及多种遥控器)来访问位于家庭内部或外部的家庭服务器,然后访问与家庭内部的家庭网络连接的多个家用电器。
此外,在多个电子设备在外部服务器中注册的情况下,用户通过外部服务器访问在外部服务器中注册的多个电子设备,而不使用家庭服务器。
当用户使用控制设备监测和控制家庭内部的控制目标设备时,该用户应选择控制目标设备中的一个、在网络上访问所选择的控制目标设备、执行验证、然后监测或控制控制目标设备。因此,对于用户而言,控制设备难于使用。
例如,通常一起使用诸如用于调节空气的空调或空气净化器以及用于调节湿度的加湿器的家用电器。在这种情况下,用户会不方便且低率地向每个电子设备发出操作控制命令。
发明内容
技术问题
一方面提供了控制设备及其控制方法,其中,控制设备配置为:当用于家庭网络的应用运行时显示家用电子设备的图标以及状态窗口,该状态窗口显示家用电子设备的操作状态;当图标被触摸时显示控制页面;以及当状态窗口被触摸时将打开/关闭控制命令发送至电子设备。
另一方面提供了控制设备及其控制方法,其中,控制设备包括总览单元、对话框以及移动按钮,其中,当用于家庭网络的应用运行时,总览单元具有家用电子设备的图标,对话框配置为显示家用电子设备的操作状态,以及移动按钮用于横向移动显示有图标的页面。
又一方面提供了控制设备及其控制方法,其中,控制设备包括具有多个按钮的主键,该多个按钮用于当在家庭网络中使用的应用运行时基于预定操作命令整体控制家用电子设备。
再一方面提供了控制设备及其控制方法,其中,控制设备包括聊天单元,该聊天单元配置为当在家庭网络中使用的应用运行时使用快捷按钮与家用电子设备聊天,其中,聊天语句针对快捷按钮预先确定。
技术方案
根据一方面,用于控制至少一个电子设备的操作的控制设备包括:用户接口单元,配置为显示具有与至少一个电子设备对应的图标和至少一个电子设备的状态窗口的第一页面,以及接收至少一个电子设备的操作命令;以及控制单元,配置为在任何一个电子设备的图标被选择时执行控制使得用于控制所选择的电子设备的控制页面显示在用户接口单元上,以及在任何一个电子设备的状态窗口被选择时执行控制使得任何一个电子设备的当前操作被切换。
状态窗口可包括对话框,任何一个电子设备的操作状态响应于对该对话框的点击触摸输入而改变。
状态窗口可包括滑动开关,任何一个电子设备的操作状态响应于对该滑动开关的滑动触摸输入而改变。
控制设备还可包括存储单元,配置为存储至少一个电子设备的信息和用于监测和控制至少一个电子设备的应用。
控制设备还可包括通信单元,配置为与至少一个电子设备通信。
控制设备还可包括通信单元,配置为与另一控制设备通信,其中,控制单元基于由另一控制设备发送的操作命令控制至少一个电子设备的操作。
控制单元可从通过相机获得的图像识别电子设备,并执行控制使得用于控制所识别的电子设备的控制页面得以显示。
控制单元可执行控制使得控制页面显示为与所获得的图像重叠。
第一页面可包括总览单元,至少一个电子设备的图标和状态窗口显示在总览单元上,并且当图标被选择时,控制单元可执行控制使得微型控制窗口显示为与总览单元重叠。
根据另一方面,控制设备的控制方法包括在显示于用户接口单元中的第一页面中显示至少一个电子设备的图标和状态窗口,当任何一个电子设备的状态窗口被选择时,执行简单控制以切换所选择的任何一个电子设备的操作,而当任何一个电子设备的图标被选择时,在用户接口单元上显示控制页面以用于执行所选择的任何一个电子设备的详细控制。
控制方法还可包括,当电子设备的状态窗口在处于第一显示状态的情况下被选择时,将所选择的状态窗口切换至第二显示状态。
执行任何一个电子设备的简单控制可包括,当任何一个电子设备的状态窗口在处于第一显示状态的情况下被触摸时,将与第二显示状态对应的操作命令发送至该任何一个电子设备。
控制方法还可包括,当从外部设备发送至少一个电子设备的操作命令时,确定操作命令是简单控制信号还是详细控制信号,当操作命令是简单控制信号时,改变至少一个电子设备的状态窗口并将与改变的状态窗口对应的操作切换信号发送至该至少一个电子设备;以及当操作命令是详细控制信号时,显示用于控制至少一个电子设备的控制页面并将选择的操作控制信号发送至该至少一个电子设备。
控制方法还可包括:当输入相机取景器模式时获得家图像;从获得的家图像识别电子设备;显示用于控制识别的电子设备的控制页面;以及在获得的家图像之上显示控制页面。
有益效果
根据实施方式,通过显示家用电子设备的图标以及状态窗口(显示有电子设备的操作状态)以及通过使用该图标和状态窗口来控制电子设备的操作,能够容易地控制电子设备的操作。
通过利用图标来显示多个家用电子设备还能够易于识别,以及通过利用对话框来在图标附近显示电子设备的操作状态也能够检查家用电子设备的操作状态。即,能够为用户提供便利。
此外,因为电子设备的操作状态可通过仅触摸图标来改变,所以能够容易地控制电子设备的操作以及使用主键的多个按钮同时整体控制电子设备,从而提高电子设备的便利性和控制效率。通过利用弹窗输出电子设备的状态被改变的事件,也能够快速和容易地检查电子设备的状态信息。
此外,通过使用聊天单元的快捷按钮,也能够将操作命令简单容易地发送到至少一个电子设备。
附图说明
图1是示出了根据实施方式与控制设备通信的家庭网络系统的示例性图示。
图2是根据实施方式与控制设备通信的家庭网络系统的框图。
图3是示出了根据实施方式的控制设备仪表板页面和插件页面的示意性图示。
图4至图6是示出了根据实施方式的控制设备仪表板页面中总览单元的运行的示例性图示。
图7是示出了根据实施方式的控制设备仪表板页面中主键的示例性图示。
图8是示出了根据实施方式的控制设备仪表板页面中主键的运行的示例性图示。
图9是根据实施方式的控制设备第二插件页面中主键设定窗口318的示例性图示。
图10和图11是示出了根据实施方式的控制设备第二插件页面中主键的设置的示例性图示。
图12A至图18是根据实施方式的控制设备的仪表板页面中聊天单元的运行的示例性图示。
图19和图20是示出了根据实施方式在控制设备主页面上显示的快速面板窗口的示例性图示。
图21是示出了根据另一实施方式的控制设备的控制框图。
图22是根据另一实施方式设置在控制设备中的用户接口单元的状态窗口的示例性图示。
图23至图27是示出了根据另一实施方式设置在控制设备中的用户接口单元的输入/输出的示例性图示。
图28是根据另一实施方式的控制设备的控制流程图。
具体实施方式
在下文中,将参照附图详细描述本发明的实施方式。
图1是示出了根据实施方式与控制设备通信的家庭网络系统的示例性图示,以及图2是示出了根据实施方式与控制设备通信的家庭网络系统的框图。与控制设备通信的家庭网络系统包括多个电子设备100a至100h以及网络。
电子设备100a至110h(它们中的每个均执行预定独特功能)通过执行经由网络与控制设备通信的附加功能来发送与操作状态对应的操作信息,并执行与控制设备发送的操作命令对应的操作。这里,控制设备300包括移动设备。
电子设备包括非便携式家用电器,诸如,机器人清洁器100a、照明灯具100b、洗衣机100c、空调100d、电视100e、烹饪电器100f、冰箱100g以及洗碗机100h,以及电子设备还可包括在家中使用的终端,例如,笔记本、PC以及平板。此外,电子设备还可包括设置有相机和麦克风的安全设备。
网络200是通过将家中使用的全部电子或电气设备连接至一个系统来允许双向通信的家庭网络。
具体地,网络200可允许信息通过有线/无线互联网在多个电子设备与控制设备300之间共享。
家庭信息传输方法可分为有线方案和无线方案。有线方案的示例包括使用现有电话线的家庭电话线网络联盟(PNA)、IEEE 1394、电力线等。无线方案的示例包括家庭射频(RF)、蓝牙、红外数据通讯(IrDA)和无线局域网(例如,WiFi)、无线个域网(Zigbee)、Z波以及短程通信(例如,NFC等)。
网络200包括管理和控制多个电子设备的家庭服务器。
家庭服务器可实现于住宅网关(RG)、室内控制终端或TV上。
家庭服务器可以以软件实现并设置在家中的多种电子设备或多种移动设备中。此外,家庭服务器可以以硬件实现并与家中的多种电子设备或多种移动设备组合。
即,家庭服务器显示家中的多个电子设备的操作状态、从用户接收针对多个电子设备中的至少一个的操作命令、然后将操作命令发送到该至少一个电子设备。
控制设备300通过有线或无线通信与多个电子设备中的至少一个通信。
此外,控制设备300可与家中的多个电子设备中的每个通信,并可通过与家庭服务器通信来发送或接收多个电子设备的信息。
控制设备300包括用于与家庭网络通信以监测和控制家中的多个电子设备的应用。当用户运行应用时,控制设备300输出家中的多个电子设备中的至少一个的操作状态、从用户接收操作命令以及基于接收的操作命令控制该至少一个电子设备的操作。
控制设备300(可以是可移动至家外的终端设备,诸如,智能手机、平板PC、笔记本等,或固定在家内的设备,诸如,TV、多种遥控器等)可以是可安装有内容供应商提供的应用的终端设备,也可以是具有在制造商制造设备时即安装在设备中的应用、软件或固件的设备。
如图2中所示,控制设备300包括用户接口单元310、控制单元320、存储单元330以及通信单元340。
用户接口单元310输出布置在家中的多个电子设备中的预注册电子设备的操作状态,以及接收预注册电子设备中的至少一个的操作命令。
用户接口单元310包括用于显示预注册电子设备的操作状态的显示单元,以及用于从用户接收操作命令的输入单元。
这里,输入单元是用于接收操作命令的触摸板,以及用户接口单元310可实现为触摸屏,在该触摸屏中整体形成显示单元的显示面板以及输入单元的触摸板。
此外,除通过触摸板外,输入单元还可通过电子笔、定位设备(鼠标等)以及键盘来接收输入。在这种情况下,输入单元可与显示单元的显示面板分别形成。但是,当输入单元为触摸式电子笔时,输入单元可与显示单元的显示面板整体形成。
用户接口单元310包括供各种应用图标显示于其上的主页面。
用户接口单元310在主页面上显示用于监测和控制电子设备的应用的图标、在用户选择应用图标时将应用选择信号发送至控制单元320以及基于控制单元320的命令显示与应用运行对应的页面。下文将描述用户接口单元的页面显示配置。
当应用运行时,控制单元320控制用户接口单元310以输出预注册电子设备的操作状态,以及基于输入至用户接口单元310的操作命令控制发送与至少一个电子设备的操作命令对应的信号。
下文将结合用户接口单元的页面显示配置来描述控制单元320的控制配置。
存储单元330存储由用户注册的家用电子设备的识别信息以及用于监测和控制预注册电子设备的应用。
存储单元330存储针对主键每个按钮的用于预注册电子设备的操作命令,以及存储针对聊天单元每个快捷按钮的针对电子设备的操作命令。
通信单元340与预注册电子设备通信。
此外,通信单元340也可与家庭服务器通信。
将参照图3至图20来详细描述用户接口单元310。此外,也将描述控制单元320的控制操作。
图3是示出了根据实施方式的控制设备仪表板页面和插件页面的示例性图示。
当应用运行时,用户接口单元310将仪表板页面310a显示为初始页面。
这里,仪表板页面310a为供与通过家庭网络连接的多个电子设备有关的基本信息、用于控制操作的信息等显示于其上的页面。
当滑动触摸输入至仪表板页面310a时,用户接口单元310将页面从仪表板页面310a切换至插件页面310b或310c。
即,当从左至右施加的滑动触摸输入至仪表板页面310a时,用户接口单元310显示第一插件页面310b,其中,用于注册电子设备的设备注册项显示在第一插件页面310b上。当从右至左施加的滑动触摸输入至仪表板页面310a时,用户接口单元310显示第二插件页面310c,其中,用于服务和设定电子设备的服务项显示在第二插件页面310c上。
此外,在显示第一插件页面310b的情况下输入从右至左施加的滑动触摸时,用户接口单元310显示仪表板页面310a。
根据实施方式,插件页面的数量是2,但是可以是1或3或更多。
控制单元320检测正在显示的页面,当输入从右至左施加的滑动触摸时执行切换控制以显示位于当前页面右侧的页面,以及当输入从左至右施加的滑动触摸时执行切换控制以显示位于当前页面左侧的页面。
例如,在显示仪表板页面310a的情况下输入滑动触摸时,控制单元320检测滑动触摸方向。控制单元320在检测到的滑动触摸方向是从左至右的情况下控制向第一插件页面310b的切换,以及在检测到的滑动触摸方向是从右至左的情况下控制向第二插件页面310c的切换。
仪表板页面310a包括用于显示预注册电子设备的列表信息和操作信息的总览单元311以及用于显示运行命令信息和监测信息的控件单元312、313和314,其中运行命令信息和监测信息用于快速和容易地控制预注册电子设备的操作。
此外,仪表板页面310a还包括页面切换单元315,该页面切换单元315配置为从仪表板页面直接切换至插件页面、从插件页面直接切换至仪表板页面或从一个插件页面直接切换到另一插件页面。
用语“直接切换”包括通过单次触摸而不是滑动触摸来切换页面。
即,页面切换单元315包括在数量上等于多个页面的页按钮。多个页按钮的排列与多个页面的排列对应。与当前显示的页面的位置对应的页按钮显示为与其余页按钮不同。从而,用户可识别当前显示的页面的位置。
此外,可预置多个页面的排列信息,并且用户可改变页面的排列。
例如,根据实施方式的用户接口单元一共包括三个页面,即,仪表板页面、第一插件页面和第二插件页面。对于三个页面的排列,第一插件页面布置在仪表板页面的左侧,而第二插件页面布置在仪表板页面的右侧。
因此,页面切换单元315总共具有三个页按钮。在这三个页按钮中,左页按钮与第一插件页面310b链接,中间页按钮与仪表板页面310a链接,以及右页按钮与第二插件页面310c链接。
当左页按钮被触摸时,第一插件页面310b显示在用户接口单元上。在这种情况下,左页按钮具有与其它按钮不同的颜色。
当中间页按钮被触摸时,仪表板页面310a显示在用户接口单元上。在这种情况下,中间页按钮具有与其它按钮不同的颜色。
当右页按钮被触摸时,第二插件页面310c显示在用户接口单元上。在这种情况下,右页按钮具有与其它按钮不同的颜色。
即,控制单元320执行控制以检测页面切换单元315的多个页按钮中被触摸的页按钮、检测与检测到的页按钮对应的页面以及在用户接口单元310上显示检测到的页面。
第一插件页面310b和第二插件页面310c每个均是用于改变主功能的设定信息、设定附加功能或接收服务的页面。
具体地,第一插件页面310b包括设备检测按钮以及注册设定按钮316,其中,设备检测按钮具有与预注册电子设备有关的注册信息,注册设定按钮316用于注册新设备。
第二插件页面310c包括设定改变按钮、服务按钮以及针对每个预注册电子设备的管理按钮317,其中,设定改变按钮用于改变主键、聊天单元以及控件单元主视图的设定,服务按钮用于接收对预注册电子设备的服务。
图4至图6是示出了根据实施方式的控制设备仪表板页面中总览单元的运行的示例性图示。将参照图4至图6来详细描述总览单元311。
如图4中所示,总览单元311显示预注册电子设备的列表以及显示预注册电子设备的图标A1。
此外,总览单元311还包括用于移动页面的移动按钮A2,其中,在该页面上排列有预注册电子设备的图标。
即,移动按钮A2是这样的按钮,其用于移动当前显示的图标以改变图标的显示位置从而显示被隐藏并且未显示在总览单元中的一个页面上的其它电子设备的图标。
在这种情况下,当预注册电子设备的图标的数量小于一个页面上可显示的图标的预定数量时,移动按钮A2处于隐藏状态。当预注册电子设备的图标的数量大于一个页面上可显示的图标的预定数量时,移动按钮A2处于显示状态。
移动按钮A2包括第一方向按钮“<”以及第二方向按钮“>”,其中,第一方向按钮“<”指示从当前显示的页面移动至在第一方向上延伸的页面,第二方向按钮“>”指示从当前显示的页面移动至在第二方向上延伸的页面。这里,第二方向是与第一方向相反的方向。
当第一方向按钮“<”被选择时,总览单元311将当前页面中预定数量的电子设备的图标在第二方向上移动一列以重新排列图标。当第二方向按钮“>”被选择时,总览单元311将当前页面中的预定数量的电子设备的图标在第一方向上移动一列以重新排列图标。
在这种情况下,当第一方向按钮“<”被选择时,总览单元311在页面的最左列重新排列新的电子设备的图标,并移除已经位于最右列的电子设备的图标。当第二方向按钮“>”被选择时,总览单元311在最右列重新排列新的电子设备的图标,并移除已经位于最左列的电子设备的图标。
此外,当第一方向按钮“<”被选择时,总览单元311显示位于当前页面左侧的页面并显示排列在左侧页面上的电子设备的图标。当第二方向按钮“>”被选择时,总览单元311显示位于当前页面右侧的页面并显示排列在右侧页面上的电子设备的图标。
如图4中所示,当清洁器、照明灯具、洗衣机以及空调的图标排列在总览单元311的当前页面上的情况下第二方向按钮“>”被触摸时,位于当前页面的右侧页面上的空调2、机器人清洁器2以及电视的图标被显示。
当显示有空调2、机器人清洁器2以及电视的图标的情况下第一方向按钮“<”被触摸时,总览单元311将当前显示的页面移至左侧页面并再次显示位于左侧页面上的清洁器、照明灯具、洗衣机以及空调的图标。
虽然总览单元311的移动按钮被触摸,但是控制单元320控制用户接口单元310使得控件单元312、313以及314的页面维持在当前状态。
此外,总览单元311还包括对话框A3,其中,对话框A3通知预注册电子设备的表示当前操作状态的打开/关闭状态或进度状态。对话框A3位于图标A1附近以使得对话框A3容易被用户识别。
对话框A3基于控制单元320的命令改变表示电子设备操作状态的通知。
即,当显示在总览单元311中的图标中的任一个被触摸时,控制单元320改变与被触摸的图标对应的电子设备的操作状态,并控制用户接口单元310以使得改变的操作状态显示在对话框中。
例如,当空调处于打开状态的情况下空调的图标被触摸时,控制单元320控制空调关机并控制用户接口单元310使得空调的关闭状态显示在对话框中。当空调处于关闭状态的情况下空调的图标被触摸时,控制单元320控制空调开机并控制用户接口单元310使得空调的打开状态显示在对话框中。
如图5中所示,在显示有机器人清洁器、照明灯具、洗衣机以及空调的图标的情况下,当开机的空调的图标被触摸时,总览单元311使用对话框通知空调关机的操作,以及当关机的机器人清洁器的图标被触摸时,使用对话框通知机器人清洁器进行清洁的操作。
此外,当洗衣机处于打开状态的情况下洗衣机的图标被触摸时,控制单元320检测到洗衣机正在工作的状态并控制用户接口单元310使得检测到的洗衣机正在工作的状态显示在对话框中。
如图6中所示,当显示有机器人清洁器、照明灯具、洗衣机以及空调的图标的情况下处于打开状态的洗衣机的图标被触摸时,总览单元311使用对话框通知洗衣机的进度状态为“已过去一小时十分钟”。
此外,控制单元320可检测预注册电子设备的更新状态、错误状态以及预定状态中的至少一个,并可控制用户接口单元使得检测的状态信息显示在对话框中。
即,对话框A3通知电子设备的更新信息、错误信息以及预定信息中的任一个。
此外,当至少一个电子设备的操作状态响应于输入至控件单元的主键312的触摸输入以及聊天单元313的聊天指令输入而改变时,控制单元320控制用户接口单元310使得改变的操作状态显示在对话框中。
用户接口单元310的控件单元包括用于基于预置操作命令操作预注册电子设备的主键312、用于与预注册电子设备中的至少一个聊天的聊天单元313以及输出家内部图像的家视图单元314。这将参照图7和图8描述。
图7为示出了根据实施方式的控制设备仪表板页面中的主键的示例性图示。
主键312包括用于整体控制多个电子设备的操作的按钮。该按钮预先包括针对每个电子设备的操作命令。
主键312的按钮可基于用户的计划来设定。
如图7中所示,主键312包括外出(going-out)按钮B1、回家(coming-home)按钮B2以及晚安(good-night)按钮B3。
当用户接口单元的主键312被触摸时,控制单元320检测被触摸的按钮以将针对与检测到的按钮对应的每个电子设备的预置操作命令发送至预注册电子设备,从而允许预注册电子设备基于预置操作命令操作。在这种情况下,用户接口单元310通过对话框通知预注册电子设备的操作状态。
可额外添加用于整体控制主键312的按钮。可通过第二插件页面的“主键设定按钮”来执行添加。
此外,“主键设定按钮”可排列在主键中。
此外,可改变针对主键312的每个按钮的针对电子设备的操作命令。也可通过第二插件页面的“主键设定按钮”来执行该改变。
此外,可删除设定有主键312的按钮。也可通过第二插件页面的“主键设定按钮”来执行该删除。
图8是示出了根据实施方式的控制设备仪表板页面中的主键的运行的示例性图示。
如图8中所示,总览单元311显示机器人清洁器、照明灯具、洗衣机以及空调的图标,并在图标中的每个附近显示通知每个电子设备的操作状态的对话框。
假设针对每个电子设备的与外出按钮对应的操作命令包括关闭照明灯具的电源和关闭空调的电源,并且针对每个电子设备的与回家按钮对应的操作命令包括打开照明灯具的电源和打开空调的电源。
当机器人清洁器的操作状态为关闭、照明灯具的操作状态的为关闭、洗衣机的操作状态为打开以及空调的操作状态为打开的情况下主键312的外出按钮B1被触摸(T)时,用户接口单元310将机器人清洁器以及照明灯具的操作状态保持在关闭状态、将洗衣机的操作状态保持在打开状态以避免洗衣机在工作时被停止、关闭空调的操作状态,以及通过对话框通知每个电子设备的操作状态。
当机器人清洁器的操作状态为关闭、照明灯具的操作状态的为关闭、洗衣机的操作状态为关闭以及空调的操作状态为关闭的情况下主键312的回家按钮B2被触摸(T)时,用户接口单元310将机器人清洁器以及洗衣机的操作状态保持在关闭状态、打开照明灯具和空调的电源、并通过对话框通知每个电子设备的操作状态。在这种情况下,当用户触摸(T)空调的图标时,用户接口单元310关闭空调的电源并通过对话框通知关闭电源。
图9是根据实施方式的控制设备第二插件页面中主键设定页面318的示例性图示,以及图10和图11是示出了根据实施方式的控制设备第二插件页面中的主键设置的示例性图示。
当第二插件页面中的主键设定按钮被触摸时,用户接口单元310将仪表板页面切换为主键设定页面318。
如图9中所示,主键设定页面318包括预注册电子设备的图标D1、用于移动电子设备的图标列表的移动按钮D2、通知为每个电子设备预置的操作命令的对话框D3、以及多个预注册按钮D4、多个按钮中的每个的编辑按钮D5以及用于添加整体控制按钮的添加按钮D6。
如图10中所示,在照明灯具开机、电视关机、空调被预置为25℃的目标室内温度以及清洁器被预置为正在操作的情况下,当外出按钮被选择并且照明灯具的图标被触摸时,主键设定页面318将针对照明灯具的操作命令改变至关闭状态,然后通过对话框通知改变。当空调的图标被触摸时,主键设定页面318将针对空调的操作命令改变为关闭状态,然后通过对话框通知改变。
因此,针对每个电子设备的与主键的外出按钮对应的预置命令包括关闭照明灯具的电源、关闭电视的电源、关闭空调的电源以及操作清洁器。
如图11中所示,在外出按钮、回家按钮、晚安按钮以及早安按钮被设定为整体控制按钮的情况下,当早安按钮的编辑按钮被触摸时,主键设定页面318显示针对每个电子设备的与早安按钮对应的预置操作命令信息。在这种情况下,当选项菜单的删除按钮被触摸时,主键设定页面318显示用于通知删除与早安按钮关联的全部信息的窗口。当“OK”按钮被触摸时,主键设定页面318显示已移除了早安按钮的多个按钮。
图12A至图12D是根据实施方式当控制设备仪表板页面中的聊天单元运行时聊天页面的示例性图示以及示出了与会话输入方法对应的聊天页面中的变化的示例性图示。
当聊天单元313被触摸时,用户接口单元310将仪表板页面切换至聊天页面319。聊天页面319与图12A中所示的一样。
如图12A中所示,聊天页面319包括用于显示与至少一个电子设备的会话的会话显示窗口E1、用于选择至少一个电子设备的图标或全部电子设备的图标的图标选择窗口E2、以及用于选择与预注册电子设备中的至少一个会话的输入方法和用于输入会话的会话输入窗口E3。
这里,会话输入窗口E3包括文本窗口E31、发送按钮E32、列表按钮E33、麦克风按钮E34以及目标窗口E35,其中,文本窗口E31用于选择消息输入方法,发送按钮E32用于指示发送文本语句,列表按钮E33用于指示显示隐含聊天指令的快捷按钮的列表,麦克风按钮E34用于指示输入语音,以及目标窗口E35用于显示与用户聊天的电子设备的图标。
当触摸被输入时,文本窗口E31显示QWER类型小键盘E36。
此外,小键盘E36包括用于切换至韩语字符或数字的按钮。当切换按钮被触摸时,可显示韩语字符或数字。
图12B、图12C和图12D为示出了与会话输入方法对应的聊天页面的变化的示例性图示。将参照图13至图18描述这部分内容。
如图12B中所示,当文本窗口被触摸时,显示小键盘E36从而执行为用户聊天而预备的程序。
如图13中所示,当洗衣机的图标被触摸时,聊天页面319在目标窗口上显示洗衣机的图标。当文本窗口被触摸时,聊天页面319显示小键盘E36从而执行允许用户聊天的预备程序。
当查问洗衣机的进度状态的消息被输入并且随后发送按钮被触摸时,聊天页面319在代表性显示窗口上显示输入的消息、从洗衣机接收与当前进度状态有关的信息、并在进度条等上显示接收的进度状态。
此外,聊天页面同时显示聊天语句输入至会话显示窗口的时间。
此外,如图14中所示,当空调的图标被触摸时,聊天页面319在目标窗口上显示空调的图标。当文本窗口被触摸时,聊天页面319显示小键盘E36从而执行允许用户聊天的预备程序。
当操作命令通过消息被输入并且随后发送按钮被触摸时,聊天页面319在会话显示窗口上显示输入的打开操作命令,并显示由空调提供的当前室内温度。当目标室内温度通过消息被输入并且随后发送按钮被触摸时,聊天页面319在会话显示窗口上显示输入的目标室内温度,从空调接收命令将被执行的回复,并在会话显示窗口上显示接收的回复。
如图15中所示,当用于选择全部设备的图标被选择时,聊天页面319在目标窗口上显示用于选择全部设备的图标。当文本窗口被触摸时,聊天页面319显示小键盘E36从而执行允许用户聊天的预备程序。
当用于监测全部设备的聊天语句通过小键盘被输入时,聊天页面319在会话显示窗口上显示输入的聊天语句。当监测信息从预注册电子设备被接收时,聊天页面319在会话显示窗口上显示接收的针对每个电子设备的监测信息。
当显示有针对每个电子设备的监测信息的情况下会话显示窗口被触摸时,聊天页面319隐藏小键盘。
如图16中所示,当用于选择全部设备的图标被选择时,聊天页面319在目标窗口上显示用于选择全部设备的图标。当文本窗口被触摸时,聊天页面319显示小键盘E36从而执行允许用户聊天的预备程序。
当用于通知全部设备外出的聊天语句通过小键盘被输入时,聊天页面319在会话显示窗口上显示输入的聊天语句。当与外出对应的操作状态信息从预注册电子设备接收时,聊天页面319在会话显示窗口上显示接收的针对每个电子设备的操作状态信息。
当显示有针对每个电子设备的操作状态信息的情况下会话显示窗口被触摸时,聊天页面319隐藏小键盘。
当空调的图标被触摸时,聊天页面319在目标窗口上显示空调的图标。当文本窗口被触摸时,聊天页面319显示小键盘E36从而执行允许用户聊天的预备程序。
当操作命令通过消息被输入并且随后发送按钮被触摸时,聊天页面319在会话显示窗口上显示输入的打开操作命令,并显示由空调提供的当前室内温度。当目标室内温度通过消息被输入并且随后发送按钮被触摸时,聊天页面319在会话显示窗口上显示输入的目标室内温度、从空调接收命令将被执行的回复、并在会话显示窗口上显示接收的回复。
如图12C中所示,当列表按钮E33被触摸时,聊天页面319显示多个快捷按钮E37并从而执行允许用户聊天的预备程序,其中,在该多个快捷按钮E37上显示相应的聊天指令。
图17示出了针对每个预注册电子设备的快捷按钮的示例。
图17的部分(a)是与用于选择全部设备的图标对应的快捷按钮列表的示例性图示。当用于选择全部设备的图标被选择时,多个快捷按钮具有用于整体地控制全部预注册电子设备的相应操作命令。此外,用于将控制命令发送至全部设备的多个快捷按钮与主键的按钮对应。
图17的部分(b)是与空调的操作控制对应的快捷按钮列表的示例性图示,图17的部分(c)是与机器人清洁器的操作控制对应的快捷按钮列表的示例性图示,图17的部分(d)是与洗衣机的操作控制对应的快捷按钮列表的示例性图示,图17的部分(e)是与烹饪电器的操作控制对应的快捷按钮列表的示例性图示,以及图17的部分(f)是与冰箱的操作控制对应的快捷按钮列表的示例性图示。
如图18中所示,当空调的图标被触摸时,聊天页面319在目标窗口上显示空调的图标。当从空调接收与当前室内温度有关的信息时,聊天页面319在会话显示窗口上显示接收的当前室内温度。
当列表按钮被触摸时,聊天页面319显示多个快捷按钮E37,其中,用于与空调关联的操作控制的聊天指令显示在该多个快捷按钮E37上。
当在多个快捷按钮中触摸指示空调的快捷按钮时,聊天页面319在会话显示窗口上显示与触摸的快捷按钮对应的会话、从空调接收操作状态、以及显示“将执行空气调节操作”的会话。当列表按钮在已经过去预定时间段后被触摸时,聊天页面319隐藏列表按钮。接着,当会话输入窗口中的列表按钮被触摸时,聊天页面319显示图标选择窗口和快捷按钮列表。
当显示有图标选择窗口和快捷按钮列表的情况下用于选择全部设备的图标被触摸时,聊天页面319在目标窗口上显示用于选择全部设备的图标,并显示与用于选择全部设备的图标对应的快捷按钮的列表。
接着,当在多个快捷按钮中触摸外出按钮时,聊天页面319在会话显示窗口上显示用于通知外出按钮已经被触摸的会话,并将针对每个电子设备的与外出按钮对应的预置操作命令发送至每个电子设备。
此外,聊天页面同时显示聊天语句输入至会话显示窗口的时间。
如图12D中所示,当麦克风按钮E34被触摸时,聊天页面319显示用于接收语音命令的语音输入窗口E38从而执行允许用户聊天的预备程序。
如图12D中所示,当洗衣机的图标被触摸时,聊天页面319在目标窗口上显示洗衣机的图标。当麦克风按钮E34被触摸时,聊天页面319显示用于输入语音命令的语音输入窗口E38从而执行允许用户聊天的预备程序。
此外,语音输入窗口包括用于设定语音命令反馈的按钮、用于输入语音的按钮以及用于执行切换至小键盘的小键盘切换按钮。
当用于输入语音的按钮被触摸的情况下说出语句时,聊天页面319通过麦克风收集并随后识别语音,以及在会话显示窗口上显示识别的语音。当与识别的语音对应的询问是关于洗衣机的进度状态时,聊天页面319从洗衣机接收与当前进度状态有关的信息,并使用进度条等显示接收的进度状态。
此外,聊天页面同时显示聊天语句输入至会话显示窗口的时间。
家视图单元314可以以预定间隔输出用户家的内部图像。当触摸命令被输入时,家视图单元314可放大家视图图像并将放大的图像输出至仪表板页面。
此外,家视图单元314可响应于用户命令输出先前的图像。
图19和图20是示出了根据实施方式显示在控制设备主页面上的快速面板窗口的示例性图示。
如图19中所示,控制设备确定在未运行应用时是否至少一个电子设备的操作状态已经改变。当确定电子设备中的至少一个的操作状态已经改变时,控制设备通过快速面板窗口在用户接口单元310的主页面上显示与操作状态的改变对应的通知信息。
此外,在未运行应用时,控制设备通过快速面板窗口在主页面上显示与至少一个电子设备的更新、错误以及管理周期有关的通知信息。
当快速面板窗口中的通知信息被触摸时,用户接口单元310详细显示与对应的电子设备有关的信息。
如图20中所示,用户接口单元可显示与对应的电子设备有关的教程并执行与管理洗衣机有关的操作。
例如,当显示诸如“清洁洗衣机的洗衣滚筒”的消息的情况下触摸用于指示清洁洗衣滚筒的按钮时,用户接口单元将洗衣滚筒清洁命令发送至洗衣机并在用户接口单元上显示洗衣滚筒的正在进行清洁的状态。
图21是示出了根据另一实施方式的控制设备的控制框图。
如图21中所示,控制设备300a与另一控制设备300b通信,并基于操作命令或与另一控制设备300b发送的操作命令关联的信息将控制命令发送至多个电子设备中的至少一个。
这里,另一控制设备300b是可安装在人体中并且可作为穿戴设备(例如以腕表、带或眼镜的形式提供)的信息技术(IT)设备。可穿戴设备能够输入/输出和通信。
例如,控制设备300a可以是与腕表型设备通信的智能手机,而另一控制设备300b可以是腕表型设备。
可选地,控制设备300a可以是与TV遥控器关联的TV,而另一控制设备300b可以是单独的TV遥控器。
即,另一控制设备300b从用户接收针对多个电子设备中的至少一个的操作命令,并将接收的操作命令发送至预注册控制设备300a。用于控制家中电子设备的应用可安装在另一控制设备300b中。
虽然未示出,但是另一控制设备300b可包括输入单元。
通过另一控制设备输入单元的输入的示例可包括触摸输入、电子笔、定位设备(例如,鼠标等)、键盘、语音以及操作。
此外,另一控制设备300b可包括输出单元。
通过另一控制设备输出单元的输出的示例可包括通过诸如触摸板等显示单元的输出、声音输出、振动输出以及光输出。
控制设备300a与另一控制设备300b可有线地或无线地连接。有线连接方案可包括移动高清链接(MHL)以及通用串行总线(USB),而无线连接方案可包括蓝牙、WiFi、无线个域网(Zigbee)、IrDA以及短程通信。
虽然未示出,但是使用控制设备300a和另一控制设备300b控制电子设备的方法例如将被如下描述。
通过另一控制设备300b的输入可以是语音输入。当另一控制设备300b具有触摸板时,该输入可以是触摸输入。
在控制命令通过语音输入而输入至另一控制设备300b的情况下,当另一控制设备300b将语音信息传输至控制设备300a时,控制设备300a分析语音、获得对应的指令并执行与指令对应的控制操作。
可选地,当另一控制设备300b数字化或编码语音信息并将数字化的或编码的语音信息传输至控制设备300a时,控制设备300a分析数字化的或编码的信息,获得对应的指令,并执行与指令对应的控制操作。
可选地,当另一控制设备300b分析语音信息并将表示分析结果的特定信息传输至控制设备300a时,控制设备300a获得与该特定信息关联的指令并执行与该指令对应的控制操作。
可选地,当另一控制设备300b分析语音信息、获得与语音信息对应的指令并将获得的指令发送至控制设备300a时,控制设备300a执行与该指令对应的控制操作。
在控制命令通过触摸输入而输入至另一控制设备300b的情况下,当另一控制设备300b将与触摸的图标对应的信息传输至控制设备300a时,控制设备300a获得与信息对应的指令,并执行与指令对应的控制操作。
可选地,当另一控制设备300b通过与触摸的图标对应的信息获得对应的指令并将获得的指令发送至控制设备300a时,控制设备300a执行与指令对应的控制操作。
这里,控制命令可以是用于控制多个电子设备的命令。
当用于控制多个电子设备的命令输入至另一控制设备300b时,另一控制设备300b确定输入的命令是否是用于控制该多个电子设备的命令,并将确定的结果发送至控制设备300a。
确定结果可与输入的命令同时发送或与输入的命令分开发送。
可选地,另一控制设备300b确定输入的命令是否是用于控制多个电子设备的命令。当输入的命令是用于控制多个电子设备的命令时,另一控制设备300b可直接将控制命令发送至待控制的电子设备,而不通过控制设备300a发送。
可选地,当用于控制多个电子设备的命令输入至另一控制设备300b时,控制设备300a可确定用于控制多个电子设备的命令是否有效,并可执行对应的控制操作。
当使用如上所述的另一控制设备300b时,用户可简单地通过腕表型设备或TV遥控器控制家用电子设备。
例如,用户可以通过对腕表型设备说“晚安”来一起关闭家用电器的电源。
控制设备300a包括用户接口单元400、控制单元350、存储单元330以及通信单元340。
用户接口单元400输出布置在家中的多个电子设备中的预注册电子设备的操作状态,并接收用于预注册电子设备中的至少一个的操作命令。
已经描述了可穿戴设备300b通过控制设备300a控制家用电子设备,其中,可穿戴设备300b是实施方式中的另一控制设备。然而,电子设备可由作为另一控制设备的可穿戴设备300b经由网络直接控制,而无需控制设备300a。
用户接口单元400包括用于显示预注册电子设备的操作状态的显示单元以及用于从用户接收操作命令的输入单元。
这里,输入单元是用于接收操作命令的触摸板,以及用户接口单元400可以以显示单元的显示面板与输入单元的触摸板整体形成的触摸屏的形式实现。
此外,除了触摸板外,输入单元的输入可通过电子笔、定位设备(例如,鼠标等)、键盘、语音识别以及姿势识别来接收。
在这种情况下,输入单元可与显示单元的显示面板分开形成。但是,当输入单元为触摸式电子笔时,输入单元可与显示单元的显示面板整体形成。
用户接口单元400包括供多种应用的图标显示于其上的主页面。
用户接口单元400在主页面上显示用于监测和控制电子设备的应用的图标,在应用的图标被用户选择时将应用选择信号发送至控制单元350,并基于控制单元350的命令显示与应用的运行对应的页面。
当应用运行时,控制单元350控制用户接口单元400以使得预注册电子设备的操作状态被输出,并基于通过触摸输入至用户接口单元400的操作命令来控制发送与至少一个电子设备的操作命令对应的信号。
控制单元350确定从另一控制设备300b发送的针对电子设备的操作命令,并基于确定的针对该电子设备的操作命令控制该电子设备的操作。
当如图22所示的图标411被触摸时,控制单元350执行控制以将仪表板页面切换为控制页面。当状态窗口412被触摸时,控制单元350执行控制以将当前状态切换为另一状态。
此外,当图标411被触摸时,控制单元350可执行控制以使得微型控制窗口被显示为覆盖仪表板页面的总览单元。
这里,状态窗口412是供打开命令或关闭命令显示于其上的窗口。当状态窗口处于打开状态期间被触摸时,控制单元350执行控制以将状态窗口切换为关闭状态。当状态窗口处于关闭状态期间被触摸时,控制单元350执行控制以将状态窗口切换至打开状态。
当相机的取景器运行时,控制单元350执行控制以在仪表板页面上显示相机取景器的运行、从获得的图像识别电子设备、检测与识别的电子设备对应的控制页面并执行控制以将仪表板页面切换为控制页面。
存储单元330存储由用户注册的家用电子设备的识别信息以及用于监测和控制预注册电子设备的应用。
存储单元330存储主键420的每个按钮的针对预注册电子设备的操作命令,以及存储聊天单元430的针对电子设备的操作命令。
通信单元340与预注册电子设备以及另一控制设备300b通信。
此外,通信单元340也可与家庭服务器通信。
将参照图23至图26来描述根据另一实施方式的控制设备的用户接口单元400的实现。
图22是根据另一实施方式在控制设备用户接口单元400上显示的仪表板页面400a的示例性图示。将参照图23、图24、图25、图26以及图27来描述仪表板页面400a。
控制设备的仪表板页面400a包括总览单元410、主键420以及聊天单元430,其中,总览单元410用于显示预注册电子设备的图标和操作状态,主键420用于基于预置操作命令操作预注册电子设备,聊天单元430用于显示在总览单元410中显示的每个电子设备的当前操作状态或最后操作状态并与在显示于总览单元410中的电子设备中选择的至少一个电子设备聊天。将详细描述在这些单元中的总览单元410。
总览单元410显示预注册电子设备的列表并且也显示预注册电子设备中的每个的图标411以及通知预注册电子设备的当前操作状态的状态窗口412。
通常,状态窗口412位于图标411附近从而可以容易地被用户识别。但是,只要用户能够知道状态窗口412与图标411的关联(例如,仅包括被放置在一起的状态窗口的区域,并且每个状态窗口额外显示与状态窗口关联的电子设备),则状态窗口412在位置或形状方面不受限制。
图标411和状态窗口412用作用于设定电子设备的操作的按钮。
具体地,图标411是用于指示将页面切换至控制页面的按钮以用于控制电子设备的详细操作,而状态窗口412为用于控制诸如电子设备的打开/关闭的简单操作的按钮。
这里,详细操作可理解为除了包括简单操作之外还包括一个或多个控制操作。
即,控制详细操作除了包括控制简单操作之外还包括控制附加操作。
例如,控制详细操作可理解为控制电子设备的全部可控制的操作,而控制简单操作可理解为除了控制电子设备的打开/关闭之外还控制另一操作。
此外,简单操作可包括可由一个操纵即改变的操作(例如,打开/关闭操作),而详细操作可包括需要多步来操纵或改变的操作(例如,温度调节、洗涤过程控制等)。
简单操作和详细操作可在生成应用时针对每个电子设备预先设定或可在生产电子设备时针对每个电子设备预先设定。此外,用户可任意设定和修改简单操作和详细操作。
可通过对话框或滑动开关来显示状态窗口412。
如图23的部分(a)中所示,对话框显示通过点击进行的打开或关闭操作。如图23的部分(b)中所示,滑动开关显示通过触摸滑动进行的打开或关闭操作。
在显示有冰箱、洗衣机和空调的图标的情况下,当开机的洗衣机的对话框被触摸(T)时,总览单元410在执行控制使得冰箱关机的同时利用对话框通知冰箱被关机。在这种情况下,当被关机的空调的对话框被触摸(T)时,总览单元410在执行控制以使得空调开机的同时利用对话框通知空调被开机。
此外,聊天单元430显示洗衣机的完成信息、空调的设定温度等。即,难以通过状态窗口(例如,对话框等)显示的信息可通过聊天单元分开显示。
如图24中所示,当图标411被点击时,控制设备的仪表板页面400a切换至控制页面400b以详细控制被点击的图标的电子设备。
这里,当仪表板页面400a切换至控制页面时,可通过摇动操作或长按操作来执行切换而不是通过点击操作来执行切换。
这里,如图24中所示,切换至控制页面可包括将整个页面移动至另一控制页面并在仪表板页面的区域中显示弹窗。
对于机器人清洁器,详细控制可包括清洁时间、清洁预约、清洁模式等。对于洗衣机,详细控制可包括操作过程、操作预约等。对于空调,详细控制可包括操作模式、目标温度、操作预约等。
例如,当仪表板页面400a上的机器人清洁器的图标411被点击时,控制设备显示用于详细控制机器人清洁器的控制页面400b。
此外,控制设备显示当前操作模式(清洁)、可改变的操作模式的按钮(摄像、充电)、移动方向按钮以及开始按钮等。
如图25中所示,控制设备可响应于控制设备的旋转将控制页面显示为横向模式控制页面400b'。
此外,当操作命令的输入完成时,控制设备显示仪表板页面并可将页面模式切换至纵向模式并显示纵向模式仪表板页面。
此外,不论控制设备旋转与否,控制设备都可在显示控制页面时将页面模式显示为横向模式控制页面400b'。
如图26中所示,控制设备可在仪表板页面的总览单元410上显示微型控制窗口440,该微型控制窗口440通过缩小控制页面形成。
例如,当仪表板页面400a上的机器人清洁器的图标411被点击时,控制设备在总览单元410上显示用于详细控制机器人清洁器的微型控制窗口440。
此外,控制设备在微型控制窗口440中显示当前操作模式(清洁)、移动方向按钮和开始按钮等。
图27是根据另一实施方式的控制设备的仪表板页面400的示例性图示。
当设置在控制设备中的相机的取景器运行时,控制设备在仪表板页面上显示相机取景器运行窗口400c、获得家庭图像、从获得的图像识别电子设备并且将控制设备的仪表板页面切换至用于识别的电子设备的控制页面400b。
获得的图像450被共同显示在控制设备的控制页面400b上。在这种情况下,操作命令按钮等在控制页面400b上被显示为与获得的图像450重叠。
例如,控制设备在仪表板页面上显示相机取景器运行窗口400c。当家中的机器人清洁器的图像被获得时,控制设备将相机取景器运行窗口400c切换至控制页面400b并且除了显示获得的家图像之外还在控制页面400b上显示用于控制机器人清洁器的操作命令按钮。
可选地,在控制设备的控制页面400b上仅显示控制页面,而不是将控制页面与获得的图像450一起显示在控制设备的控制页面400b上。
例如,当洗衣机通过控制设备的取景器被识别时,仅显示用于洗衣机的控制页面。
可选地,当特定的电子设备通过控制设备的取景器被识别时,用于控制相关电子设备的应用可显示在控制设备上以代替控制控制页面400b。具体地,可显示应用的初始页面,或可类似于图26中所示的页面来显示包括用于控制识别的设备的弹窗的页面。
当多个设备通过控制设备的取景器被识别时,控制设备可允许用户选择待控制的设备。
可通过执行与存储在控制设备、家庭服务器或外部服务器中的数据的比较来实现通过图像的设备识别。
图28是根据另一实施方式的控制设备的控制流程图。
控制设备300a确定控制信号是否从作为外部设备的另一控制设备接收(461)。
此外,在仅使用控制设备300a而不是另一控制设备300b执行控制时,可省略对于控制信号是否从另一控制设备300b接收的确定。
当确定控制信号从作为外部设备的另一控制设备300b接收时,控制设备确定接收的控制信号是否是简单控制信号(462)。
当确定接收的控制信号是简单控制信号时,控制设备将简单控制信号发送至电子设备(463)。当确定接收的控制信号不是简单控制信号时,控制设备显示用于执行详细控制的控制页面(464)。
这里,简单控制信号是打开/关闭信号,而详细控制信号是除了打开/关闭信号外的操作控制信号。
当显示控制页面时,控制设备可将用户接口单元的页面模式改变至横向模式并随后显示控制页面。
控制设备确定简单控制区域是否已经由用户触摸(465)。
确定简单控制区域是否已经被触摸包括确定触摸区域是否是电子设备的状态窗口的区域。
当状态窗口被触摸时,控制设备改变状态窗口的操作文本。
即,当任何电子设备的状态窗口在打开状态期间被触摸时,状态窗口显示关闭状态。当电子设备的状态窗口在关闭状态期间被触摸时,状态窗口显示打开状态。
另一方面,当确定触摸区域是电子设备的图标的区域时,控制设备确定详细控制区域已经被触摸。
当确定简单控制区域已经被触摸时,控制设备将简单控制信号发送至电子设备(466)。当确定简单控制区域没有被触摸时,控制设备显示用于执行详细控制的控制页面(467)。
这里,简单控制信号为操作打开/关闭信号,而详细控制信号为除了操作打开/关闭信号外的操作控制信号。
发送简单控制信号包括在当前状态为打开状态时发送关闭控制信号,以及在当前状态为关闭状态时发送打开控制信号。
此外,当相机取景器模式被输入时,控制设备获得家图像、从获得的图像识别电子设备并且在用户接口单元上显示用于控制识别的电子设备的控制页面,并可在获得的家图像之上显示控制页面。

Claims (11)

1.控制设备,包括:
用户接口单元;以及
控制单元,配置为:
控制所述用户接口单元以显示第一页面,所述第一页面包括与至少一个电子设备对应的至少一个图标以及用于所述至少一个图标中的每个的状态窗口;
控制所述用户接口单元以接收针对所述至少一个电子设备的操作命令;
在显示于所述第一页面上的所述至少一个图标中的图标以第一触摸类型被触摸的情况下,控制所述用户接口单元以将所述第一页面改变为用于控制与所述图标对应的电子设备的控制页面;
在显示于所述第一页面上的所述至少一个图标中的图标以第二触摸类型被触摸的情况下,控制所述用户接口单元使得与该图标对应的用于控制所述电子设备的微型控制窗口在所述第一页面上重叠显示;以及
在与所述图标相关联的状态窗口被触摸的情况下,执行控制以将所述电子设备的当前操作切换至另一操作。
2.根据权利要求1所述的控制设备,其中,与所述图标相关联的所述状态窗口包括对话框,所述电子设备的操作状态响应于对所述对话框的点击触摸输入而改变。
3.根据权利要求1所述的控制设备,其中,与所述图标相关联的所述状态窗口包括滑动开关,所述电子设备的操作状态响应于对所述滑动开关的滑动触摸输入而改变。
4.根据权利要求1所述的控制设备,还包括存储器,所述存储器配置为存储所述至少一个电子设备的信息以及用于监测和控制所述至少一个电子设备的应用。
5.根据权利要求1所述的控制设备,还包括通信单元,所述通信单元配置为与所述至少一个电子设备通信。
6.根据权利要求1所述的控制设备,还包括通信单元,所述通信单元配置为与另一控制设备通信,
其中,所述控制单元还配置为基于由所述另一控制设备发送的操作命令来控制所述至少一个电子设备的操作。
7.根据权利要求1所述的控制设备,其中,所述控制单元还配置为从通过相机获得的图像中识别至少一个电子设备,以及执行控制使用于控制所识别的至少一个电子设备的控制页面得以显示。
8.根据权利要求7所述的控制设备,其中,所述控制单元还配置为执行控制使得用于控制所识别的至少一个电子设备的所述控制页面显示为与所述图像重叠。
9.控制设备的控制方法,所述控制方法包括:
在所述控制设备的用户接口单元上显示第一页面,所述第一页面包括与至少一个电子设备对应的至少一个图标以及用于所述至少一个图标中的每个的状态窗口;
如果与显示在所述第一页面上的所述至少一个图标中的图标相关联的状态窗口被触摸,则执行简单控制以将与所述图标对应的电子设备的当前操作切换至另一操作;以及
如果所述图标被触摸,则在所述用户接口单元上显示控制页面从而对所述电子设备执行详细控制,
其中所述状态窗口显示与第一操作状态和第二操作状态之一对应的操作文本,
其中,执行所述简单控制包括:
响应于在所述电子设备处于所述第二操作状态下所述状态窗口被触摸,将对应于所述第一操作状态的第一操作控制信号发送到所述电子设备,
响应于在所述电子设备处于所述第一操作状态下所述状态窗口被触摸,将对应于所述第二操作状态的第二操作控制信号发送到所述电子设备,以及
响应于对所述状态窗口的触摸,切换显示在所述状态窗口上的所述操作文本。
10.根据权利要求9所述的控制方法,还包括:
如果从外部设备发送用于所述至少一个电子设备中的一个电子设备的操作命令,则确定所述操作命令是否包括简单控制信号或详细控制信号;
如果所述操作命令包括简单控制信号,则改变与所述至少一个电子设备中的所述一个电子设备相关联的状态窗口并将与所改变的状态窗口对应的操作切换信号发送至所述至少一个电子设备中的所述一个电子设备;以及
如果所述操作命令包括详细控制信号时,则显示用于控制所述至少一个电子设备中的所述一个电子设备的控制页面并将触摸的操作控制信号发送至所述至少一个电子设备中的所述一个电子设备。
11.如权利要求9所述的控制方法,还包括:
如果相机取景器模式被输入至所述控制设备,获得家图像;
从所述家图像识别所述至少一个电子设备中的一个电子设备;
显示用于控制所识别的、所述至少一个电子设备中的一个电子设备的控制页面,以及
在所述家图像之上显示所述控制页面。
CN201580002411.7A 2014-01-06 2015-01-06 控制设备及其控制方法 Active CN105706395B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2014-0001555 2014-01-06
KR1020140001555A KR102231105B1 (ko) 2013-09-05 2014-01-06 제어 장치 및 그 제어 방법
PCT/KR2015/000109 WO2015102469A1 (ko) 2014-01-06 2015-01-06 제어 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
CN105706395A CN105706395A (zh) 2016-06-22
CN105706395B true CN105706395B (zh) 2020-01-14

Family

ID=53498708

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580002411.7A Active CN105706395B (zh) 2014-01-06 2015-01-06 控制设备及其控制方法

Country Status (3)

Country Link
US (1) US10608837B2 (zh)
CN (1) CN105706395B (zh)
WO (1) WO2015102469A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6764117B2 (ja) * 2016-03-28 2020-09-30 株式会社ソシオネクスト 通信装置、通信方法及び通信プログラム
US9911417B2 (en) * 2016-04-01 2018-03-06 Tai-An Lu Internet of things system with voice-controlled functions and method for processing information of the same
CN106527954B (zh) * 2016-11-28 2020-07-03 北京小米移动软件有限公司 设备控制方法及装置和移动终端
JP6789871B2 (ja) * 2017-03-31 2020-11-25 株式会社荏原製作所 半導体製造装置の動作に関する表示を制御する方法を実行するプログラム、当該方法及び半導体製造装置の動作に関する表示を行うシステム
CN107315355B (zh) * 2017-06-30 2021-05-18 京东方科技集团股份有限公司 一种电器控制设备及方法
USD861723S1 (en) * 2017-07-05 2019-10-01 Lg Electronics Inc. Oven display screen with graphical user interface
CN108710307B (zh) * 2018-05-28 2021-11-30 北京小米移动软件有限公司 智能设备的控制方法、装置及计算机可读存储介质
US10706810B2 (en) * 2018-09-26 2020-07-07 Rosemount Inc. Software-rotatable display layout for labelling buttons
USD916781S1 (en) * 2018-11-06 2021-04-20 Honeywell International Inc. Display screen with graphical user interface
USD928174S1 (en) 2018-11-06 2021-08-17 Honeywell International Inc. Display screen with graphical user interface
CN111339222A (zh) * 2018-12-18 2020-06-26 上海擎感智能科技有限公司 视图的生成方法/可视化控制方法、系统、介质及终端
CN110083407B (zh) * 2019-04-16 2023-08-08 北京字节跳动网络技术有限公司 小程序中步骤条的实现方法、装置、电子设备及存储介质
US11297504B2 (en) * 2020-05-04 2022-04-05 Lennox Industries Inc. Provisioning and servicing mesh networks
JP2022092831A (ja) * 2020-12-11 2022-06-23 セイコーエプソン株式会社 ソフトウェアスイッチプログラム、選択肢の選択方法および情報処理装置
CN113362174B (zh) * 2021-06-17 2023-01-24 富途网络科技(深圳)有限公司 数据对比方法、装置、设备以及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7653212B2 (en) * 2006-05-19 2010-01-26 Universal Electronics Inc. System and method for using image data in connection with configuring a universal controlling device
KR20120005315A (ko) * 2010-07-08 2012-01-16 (주)리눅스아이티 가전기기 통합 제어시스템
KR20120014076A (ko) * 2012-01-05 2012-02-15 김호영 스마트 홈 솔루션
CN102710473A (zh) * 2012-05-21 2012-10-03 深圳市无线开锋科技有限公司 一种基于移动终端的智能家居遥控系统
CN103139371A (zh) * 2011-11-29 2013-06-05 Lg电子株式会社 移动终端及其控制方法
EP2703974A1 (en) * 2012-09-04 2014-03-05 LG Electronics Inc. Mobile terminal and application icon moving method thereof
CN104020733A (zh) * 2014-05-13 2014-09-03 生迪光电科技股份有限公司 Led照明装置、智能家居控制系统及控制方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140098247A1 (en) * 1999-06-04 2014-04-10 Ip Holdings, Inc. Home Automation And Smart Home Control Using Mobile Devices And Wireless Enabled Electrical Switches
JP2001319045A (ja) * 2000-05-11 2001-11-16 Matsushita Electric Works Ltd 音声マンマシンインタフェースを用いたホームエージェントシステム、及びプログラム記録媒体
US7155305B2 (en) 2003-11-04 2006-12-26 Universal Electronics Inc. System and methods for home appliance identification and control in a networked environment
US7761800B2 (en) * 2004-06-25 2010-07-20 Apple Inc. Unified interest layer for user interface
US8543931B2 (en) * 2005-06-07 2013-09-24 Apple Inc. Preview including theme based installation of user interface elements in a display environment
EP2137712A4 (en) * 2007-03-19 2014-02-26 Semantic Compaction Sys VISUAL SCENE DISPLAYS, USES THEREFOR, AND APPARATUSES THEREOF
US8167216B2 (en) * 2007-11-30 2012-05-01 Honeywell International Inc. User setup for an HVAC remote control unit
WO2011074800A2 (en) 2009-12-17 2011-06-23 Lg Electronics Inc. Network system and method of controlling network system
US9519356B2 (en) * 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
JP2011244400A (ja) * 2010-05-21 2011-12-01 Hitachi Ltd 遠隔操作システム及び方法、遠隔制御装置
US8661466B2 (en) * 2010-05-27 2014-02-25 Eldon Technology Limited Representation of online discussion in conjunction with primary visual content
KR101688153B1 (ko) * 2010-08-11 2016-12-20 엘지전자 주식회사 3차원 영상의 편집 방법 및 이를 이용하는 이동 단말기
US9953278B2 (en) * 2011-05-02 2018-04-24 Sears Brands, L.L.C. System and methods for interacting with networked home appliances
US9222693B2 (en) * 2013-04-26 2015-12-29 Google Inc. Touchscreen device user interface for remote control of a thermostat
US9164660B2 (en) * 2012-01-06 2015-10-20 Lg Electronics Inc. Method of controlling mobile terminal
CN103916299B (zh) * 2013-01-02 2018-04-13 Lg电子株式会社 家用电器及其操作方法
KR20140109020A (ko) * 2013-03-05 2014-09-15 한국전자통신연구원 스마트 가전기기의 제어를 위한 디바이스 정보 구축 장치 및 그 방법
US9698999B2 (en) * 2013-12-02 2017-07-04 Amazon Technologies, Inc. Natural language control of secondary device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7653212B2 (en) * 2006-05-19 2010-01-26 Universal Electronics Inc. System and method for using image data in connection with configuring a universal controlling device
KR20120005315A (ko) * 2010-07-08 2012-01-16 (주)리눅스아이티 가전기기 통합 제어시스템
CN103139371A (zh) * 2011-11-29 2013-06-05 Lg电子株式会社 移动终端及其控制方法
KR20120014076A (ko) * 2012-01-05 2012-02-15 김호영 스마트 홈 솔루션
CN102710473A (zh) * 2012-05-21 2012-10-03 深圳市无线开锋科技有限公司 一种基于移动终端的智能家居遥控系统
EP2703974A1 (en) * 2012-09-04 2014-03-05 LG Electronics Inc. Mobile terminal and application icon moving method thereof
CN104020733A (zh) * 2014-05-13 2014-09-03 生迪光电科技股份有限公司 Led照明装置、智能家居控制系统及控制方法

Also Published As

Publication number Publication date
US10608837B2 (en) 2020-03-31
CN105706395A (zh) 2016-06-22
US20160330040A1 (en) 2016-11-10
WO2015102469A1 (ko) 2015-07-09

Similar Documents

Publication Publication Date Title
CN105706395B (zh) 控制设备及其控制方法
US20200351177A1 (en) Control apparatus for controlling an operation of at least one electronic device
CN105765514B (zh) 控制设备及其控制方法
US11334208B2 (en) Control apparatus
KR20200042449A (ko) 홈 네트워크 시스템에서 홈 디바이스를 원격으로 제어하는 방법 및 장치
JP5739002B2 (ja) 通信装置、及び通信システム
KR101588595B1 (ko) 사물인터넷을 지원하는 통합리모컨 및 그 제어방법
WO2016179891A1 (zh) 通过第三方终端配置无线遥控终端的方法和装置
JP6425000B2 (ja) 遠隔制御システム
WO2013128527A1 (ja) 通信システム、通信装置及び通信方法
JP6765071B2 (ja) 制御システム、制御方法、及び制御プログラム
JP2011124665A (ja) リモートコントロール装置及び設備機器システム
JP2014220805A (ja) インターフェース画面、ハードウェアリモコン装置、電子デバイス用カバーおよびリモコンシステム
JP6049494B2 (ja) 携帯端末
JP2016010047A (ja) 機器制御システム、宅内装置及び遠隔操作端末
US11782523B2 (en) Method for controlling Internet of Things device, and terminal device
CN109219794A (zh) 操作装置
KR20160050963A (ko) 지능형 홈 에코 시스템의 제어기기 등록용 스마트 단말장치와 그 등록 방법
TW201604845A (zh) 無線環境控制系統
WO2017212614A1 (ja) 空調機用コントローラ及び空調制御管理システム
JP2020057965A (ja) 制御システム、及びプログラム
JP2004163064A (ja) 空気調和機
JP2014027533A (ja) 遠隔操作装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant