CN104115078A - 用于控制家庭装置的装置、方法以及时间线用户界面 - Google Patents

用于控制家庭装置的装置、方法以及时间线用户界面 Download PDF

Info

Publication number
CN104115078A
CN104115078A CN201280069863.3A CN201280069863A CN104115078A CN 104115078 A CN104115078 A CN 104115078A CN 201280069863 A CN201280069863 A CN 201280069863A CN 104115078 A CN104115078 A CN 104115078A
Authority
CN
China
Prior art keywords
time
home devices
indicator
control device
virtual track
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280069863.3A
Other languages
English (en)
Other versions
CN104115078B (zh
Inventor
金志桓
朴孝琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN104115078A publication Critical patent/CN104115078A/zh
Application granted granted Critical
Publication of CN104115078B publication Critical patent/CN104115078B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00—Systems controlled by a computer
    • G05B15/02—Systems controlled by a computer electric
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4131—Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/23—Pc programming
    • G05B2219/23067—Control, human or man machine interface, interactive, HMI, MMI
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2642—Domotique, domestic, home control, automation, smart house
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals

Abstract

提供用于控制家庭装置的装置、方法以及时间线用户界面。用于控制家庭装置的方法包括：在控制装置的显示单元上显示虚拟轨迹；沿着虚拟轨迹显示指示通过网络被连接到控制装置的家庭装置的操作信息的指示器；基于用户输入沿着虚拟轨迹移动指示器；以及基于指示器沿着虚拟轨迹的位置控制家庭装置的操作时间。

Description

用于控制家庭装置的装置、方法以及时间线用户界面
技术领域
本发明涉及用于控制家庭装置的装置、方法以及时间线用户界面(UI)，并且更加具体地，涉及用于控制经由网络连接的家庭装置的装置、方法以及时间线UI。
背景技术
随着最近网络技术的发展，在家庭和办公室中使用的电气/电子装置通过有线/无线网络被连接，使得通过其它装置能够操作装置。特别地，构造为远程地控制诸如家用电器的装置的网络被称为家庭网络。用户能够在房子中使用此家庭网络或者远程地使用遥控器或者便携式终端控制家用电器。
尽管家庭网络技术的发展，用于控制家庭装置的传统装置没有向用户提供直观的控制手段。因此，用户需要能够更加直观和方便地控制家庭装置的手段。
发明内容
技术问题
因此，本公开针对用于更加直观地和方便地控制家庭装置的装置和方法。特别地，本发明提供装置和方法，该装置和方法用于通过将家庭装置的操作时间或者操作模式与通过控制装置正在执行的操作的进度状态进行比较，来控制家庭装置以允许用户直观地控制被连接到控制装置的家庭装置的操作时间或者操作模式，即使当控制装置正在执行操作时。
问题的解决方案
通过提供一种用于控制通过网络连接的家庭装置的方法能够实现本发明的目的，该方法包括：在控制装置的显示单元上显示虚拟轨迹，该虚拟轨迹对应于包括通过控制装置正在执行或者要执行的操作的开始时间和结束时间中的至少一个的时间线；沿着虚拟轨迹显示指示通过网络被连接到控制装置的家庭装置的操作信息的指示器，该操作信息包括家庭装置的操作开始时间和操作结束时间中的至少一个；基于用户输入沿着虚拟轨迹移动指示器；以及基于指示器沿着虚拟轨迹的位置控制家庭装置的操作时间，该操作时间包括家庭装置的操作开始时间和操作结束时间中的至少一个。
在本发明的另一方面中，一种用于控制被连接到网络的家庭装置的操作的控制装置，包括：通信单元，该通信单元将数据传送到被连接到网络的家庭装置/从被连接到网络的家庭装置接收数据；处理器，该处理器用于控制家庭装置的操作；以及显示单元，该显示单元用于基于处理器的命令显示图像，其中处理器被配置为在显示单元上显示产生包括通过控制装置正在执行或者要执行的操作的开始时间和结束时间中的至少一个的时间线的虚拟轨迹，沿着虚拟轨迹显示指示包括通过网络被连接到控制装置的家庭装置的操作开始时间和操作结束时间中的至少一个的操作信息的指示器，并且基于通过用户输入调节的指示器沿着虚拟轨迹的位置来控制包括家庭装置的操作开始时间和操作结束时间中的至少一个的操作时间。
在本发明的另一方面中，一种被显示在控制装置上以控制被连接到网络的家庭装置的操作的时间线用户界面(UI)，该时间线UI包括：虚拟轨迹，该虚拟轨迹被显示在控制装置的显示单元上并且产生包括通过控制装置正在执行或者要执行的操作的开始时间和结束时间中的至少一个的时间线；和指示器，该指示器被显示在虚拟轨迹上并且指示包括通过网络被连接到控制装置的家庭装置的操作开始时间和操作结束时间中的至少一个的操作信息，其中基于根据用户输入调节的指示器在虚拟轨迹上的位置来控制包括家庭装置的操作开始时间和操作结束时间中的至少一个的操作时间。
本发明的有益效果
根据本发明的实施例，用户能够通过控制装置的时间线UI容易地检查关于经由网络连接的家庭装置的操作信息，并且通过控制装置容易地控制家庭装置的操作。
根据本发明的实施例，用户能够直观地识别在通过控制装置正在执行的操作的操作时间与家庭装置的操作时间之间的关系，并且基于该关系控制家庭装置或者控制装置的操作。
根据本发明的实施例，用户能够通过控制装置的时间线UI方便地控制家庭装置的操作开始时间、操作结束时间以及操作模式。另外，用户能够通过直接将家庭装置的操作开始时间、操作结束时间以及操作模式与通过控制装置正在执行的操作的操作时间和进度进行比较来控制家庭装置。
根据本发明的另一实施例，控制装置能够通过网络接收诸如火车到达时间、公交车到达时间等等的交通信息并且在时间线UI上显示交通信息，并且用户能够结合控制装置的操作时间和家庭装置的操作时间检查交通信息。
根据本发明的另一实施例，当指示控制装置的操作时间、家庭装置的操作时间以及特定事件的发生期待时间的指示器基于指示器的重叠部分分别被划分为多个区域时，时间线UI能够将不同的显示属性应用于指示器的区域。因此，用户能够直观地识别在各个装置的操作时间和事件的发生期待时间之间的关系。
附图说明
附图被包括以提供本发明的进一步理解并且被合并且组成本申请的一部分，图示本发明的实施例并且连同描述用作解释本发明的原理。在附图中：
图1图示根据本发明的实施例的家庭网络系统；
图2是根据本发明的实施例的控制装置的框图；
图3是图示根据本发明的实施例的用于控制家庭装置的方法的流程图；
图4图示根据本发明的实施例的被显示在控制装置上的时间线用户界面(UI)；
图5至图11图示根据本发明的实施例的时间线UI的指示器和用于操作指示器的方法；
图12至图14图示根据本发明的实施例的用于控制家庭装置的操作模式的方法；
图15图示根据本发明的实施例的用于选择要被控制的特定家庭装置和用于选择所选择的家庭装置的操作模式的菜单按钮界面；
图16图示根据本发明的实施例的用于根据被施加到虚拟轨迹上的特定点的用户输入控制家庭装置的方法；
图17图示根据本发明的实施例的用于在时间线UI上显示诸如交通信息的附加事件信息的方法；
图18图示根据本发明的实施例的根据家庭装置的操作状态的报警的操作；
图19至图21图示根据本发明的实施例的用于操作时间线UI的例外方法；
图22图示根据本发明的使用时间UI控制家庭装置的实施例；以及
图23图示根据本发明的实施例的时间线UI的完整操作。
具体实施方式
尽管从通常已知和使用的术语中选择在本发明中使用的术语，但是根据操作员的意图、习惯、以及新技术的到来可以更改术语。申请人通过他的或者她的判断已经选择在本发明的描述中提及的一些术语，其详细意义在本文描述的相关部分中描述。因此，必须理解本发明不是简单地通过实际使用的术语而是通过每个术语其中的意义来理解。
图1图示根据本发明的实施例的家庭网络系统。如在图1中所示，家庭网络系统可以包括各种家庭装置200；控制装置100，该控制装置100用于控制家庭装置200；以及网络300，该网络300用于以有线和/或无线方式将控制装置100与家庭装置200连接。
根据本发明的实施例的家庭装置可以包括能够经由网络300将数据传送到控制装置100/从控制装置100接收数据的各种电子装置，例如，洗衣机220、微波波段240、机器人真空清洁器260、以及电烤炉280，如在图1中所示或者诸如洗碗机、冰箱、空调等等的其它装置。家庭装置200能够通过网络300与控制装置100交换数据或者从控制装置100接收单向控制命令。
网络300可以包括允许控制装置100与家庭装置200通信的各种有线和/或无线网络。能够被用于网络300的无线网络方案包括近场通信(NFC)、紫蜂、红外通信、蓝牙、WiFi等等。然而，本发明不限于此。
根据本发明的实施例的控制装置100可以使用包括显示器和通信单元的各种电子装置。例如，控制装置100包括能够显示图像并且执行数据通信的各种电子装置，诸如电视接收器、蜂窝电话、个人数字助理(PDA)、笔记本计算机、平板PC、MP3播放器、CD播放器、以及DVD播放器。此外，控制装置100能够包括诸如机顶盒和路由器的装置，其能够通过网络或者电缆被连接到附加的显示装置以控制显示装置的图像显示。根据本发明的实施例，控制装置100能够是便携式装置，或者被连接到网络300的特定家庭装置能够被用作控制装置。
图2是根据本发明的实施例的控制装置100的框图。
参考图2，控制装置100包括处理器112、控制器114、存储单元120、通信单元130、传感器单元140、音频输入/输出单元150、相机单元160、显示单元170、以及电力单元180。
存储单元120能够存储诸如视频、音频、图片、移动图像、应用等等的数字数据。存储单元120可以是诸如闪存、硬盘驱动(HDD)、固态驱动(SSD)等等的数字数据存储空间。
通信单元130能够通过使用各种协议与家庭装置通信来传送/接收数据。通信单元130能够通过以有线或者无线方式被连接到网络传送/接收数字数据。
传感器单元140能够使用在控制装置100中设置的多个传感器将关于通过控制装置100识别的环境的信息或者用户输入递送给控制器114。在此，传感器单元140能够包括多个感测部件。在实施例中，多个感测部件可以包括重力传感器、地磁传感器、运动传感器、陀螺仪传感器、加速传感器、倾斜传感器、亮度传感器、高度传感器、气味传感器、温度传感器、深度传感器、压力传感器、弯曲传感器、音频传感器、视频传感器、全球定位系统(GPS)传感器、触摸传感器等等。传感器单元140指的是这些各种感测部件并且能够感测各种用户输入和用户环境，并且将感测结果传送到控制装置100，使得控制装置100能够基于感测结果执行操作。前述的传感器可以被包括为控制装置100中的单独的元件，或者被集成在一个或者多个元件中并且被包括在控制装置100中。可替选地，传感器单元140能够被可选择地包括在根据本发明的实施例的控制装置中。
音频输入/输出单元150包括诸如扬声器的音频输出部件和诸如麦克风的音频输入部件并且可以被可选择性地包括在根据本发明的实施例的控制装置100中。音频输入/输出单元150能够执行来自于控制装置100的音频输出和到控制装置100的音频输入并且能够被用作音频传感器。
相机单元160能够拍摄图片或者移动图像，并且被可选择性地包括在根据本发明的实施例的控制装置100中。相机单元160可以被用作前述的运动传感器或者视觉传感器。
显示单元170在显示屏幕上显示图像。显示单元170能够基于在处理器112中执行的应用或者处理器112的控制命令输出图像。如果显示单元170是根据本发明的实施例的触摸灵敏显示器，则显示单元170能够被用作在上面提及的触摸传感器。根据本发明的另一实施例的控制装置100可以包括显示控制单元(未示出)，该显示控制单元(未示出)能够控制被连接到控制装置100的单独的显示单元以显示图像。
电力单元180是被连接到控制装置100的内部电池的电力源或者外部电源并且能够将电力供应给控制装置100。
处理器112能够执行被存储在存储单元120中的各种应用并且处理控制装置100中的数据。此外，处理器112能够通过控制在上面提及的单元来控制在这些单元之间的数据传输/接收。
处理器112和控制器114可以被集成在一个芯片上并且一起执行前述的操作。在本发明中定义的处理器包括以芯片的形式配置的处理器110，其包括如上所述的处理器112和控制器114。
图2是根据本发明的示例性实施例的控制装置100的框图，并且单独地示出的块表示在逻辑上划分的元件。因此，根据控制装置100的设计，控制装置100的元件能够被集成在一个芯片上或者被安装在多个芯片中。
图3是图示根据本发明的实施例的用于控制被连接到网络的家庭装置的方法的流程图。
根据本发明的实施例，控制装置(例如，控制装置100)能够在诸如控制装置的显示单元的显示单元上显示虚拟轨迹(S310)。虚拟轨迹形成包括通过控制装置正在执行或者要执行的操作的开始时间和结束时间中的至少一个的时间线。虚拟轨迹能够显示相对时间信息并且可以进一步包括实时信息。
根据本发明的实施例，控制装置能够沿着虚拟轨迹显示指示通过网络被连接到控制装置的(或者与控制装置通信的)家庭装置的操作信息的指示器(S320)。操作信息包括家庭装置的操作开始时间和操作结束时间中的至少一个。指示器能够包括指示家庭装置的操作开始时间或者操作结束时间的图标。另外，指示器可以进一步包括具有与在家庭装置的操作开始时间和操作结束时间之间的总时间相对应的长度的虚拟滑动条。
根据本发明的实施例，控制装置能够根据用户输入沿着虚拟轨迹移动指示器(S330)。根据各种方法，基于用户输入沿着虚拟轨迹能够移动指示器。例如，当指示器包括用于指示家庭装置的操作开始时间或者操作结束时间的图标时，控制装置能够基于被施加到指示器的用户输入移动指示器。如果指示器包括虚拟滑动条，则控制装置能够基于被施加到虚拟滑动条的第一端、第二端或者主体部分的用户输入移动指示器。稍后将会详细地描述移动指示器的实施例。
当已经根据用户输入移动指示器时，控制装置基于虚拟轨迹上的指示器的位置控制家庭装置的操作时间(S340)。操作时间可以包括家庭装置的操作开始时间和操作结束时间中的至少一个。另外，控制装置能够根据被施加到指示器的用户输入或者被施加到诸如菜单按钮界面的附加界面的用户输入控制家庭装置的操作模式。此外，控制装置能够调用想要控制其操作的新家庭装置。根据本发明的实施例，当基于在虚拟轨迹上的指示器的位置控制装置能够将控制命令传送到家庭装置时，控制装置可以仅将关于虚拟轨迹上的指示器的位置的信息传送到家庭装置。在这样的情况下，家庭装置能够基于在虚拟轨迹上的指示器的位置控制其操作。
通过控制装置的控制命令能够控制根据本发明的实施例的家庭装置的操作。具体地，能够从控制装置接收关于家庭装置的操作开始时间、操作结束时间以及操作模式的操作信息，并且基于操作信息能够调节家庭装置的详细操作。根据本发明的另一实施例，家庭装置能够仅接收关于通过控制装置显示的虚拟轨迹上的指示器的位置的信息，并且基于指示器的位置控制其操作。在这样的情况下，家庭装置能够控制其操作时间，或者基于指示器的位置添加或者删除其一些操作。此外，当基于指示器的位置的操作控制不可用时，家庭装置不执行操作控制并且能够将关于操作控制的不可用性的错误或者警告消息传送到控制装置。
图4示出根据本发明的实施例的被显示在控制装置100的显示单元170上的时间线用户界面(UI)。根据本发明的实施例的时间线UI被用于通过控制装置100控制家庭装置的操作并且包括虚拟轨迹10和指示器20。
虚拟轨迹10以时间线的形式指示关于通过控制装置10正在执行的操作的时间信息。更加具体地，虚拟轨迹10对应于包括通过控制装置10正在执行的操作的开始时间14和接收时间16中的至少一个的时间线。可以从虚拟轨迹10的开始时间14或者结束时间16延伸时间线。虚拟轨迹10能够显示指示由控制装置正在执行的操作的进度程度的进度条或者进度指示器20。根据本发明的实施例，分别对应于通过控制装置正在执行的操作的开始时间14和接收时间16的相对时间信息可以被指示为在对应于开始时间14和结束时间16的位置处的文本，并且可以在任意位置处附加地指示位置的相对时间信息。另外，也能够在虚拟轨迹10的相对应的位置处指示实时信息。在此，当虚拟轨迹10的开始时间14被设置为0时相对时间信息表示相对应的位置的相对时间，并且实时信息表示在虚拟轨迹10上的相对应的位置处本地时间。
指示通过网络被连接到控制装置100的家庭装置200的操作信息的指示器20能够被显示在虚拟轨迹10上。操作信息能够包括家庭装置200的操作开始时间和操作结束时间中的至少一个，并且可以进一步包括家庭装置200的操作模式信息。家庭装置200的操作信息能够通过网络被接收并且可以根据被施加到控制装置100的用户输入被设置。即，通过指示器20能够显示通过网络连接并且正在操作的家庭装置的操作信息，并且通过控制装置根据施加的用户输入操作或者保留的家庭装置的操作信息能够通过指示器20来指示。基于操作信息能够在虚拟轨迹10上显示指示器20。更加具体地，指示器20能够被显示在虚拟轨迹10上与操作信息当中的操作时间信息相对应的位置处。
在本发明的实施例中，用户能够操作被显示在虚拟轨迹10上的指示器20以控制通过指示器20指示的家庭装置200的操作。
例如，当用户通过TV接收器观看视频时，如在图4中所示，用户可能想要控制家庭装置200，例如，洗衣机，使得在视频被播放的同时洗衣机操作。如果用户正在观看的视频的运行时间是2个半小时并且通过网络被连接的洗衣机200的驱动时间是55分钟，则用户可能想要将洗衣机的洗涤操作结束时间设置为视频的结束时间。为了实现这一点，用户能够使用TV接收器作为控制装置100并且控制经由网络被连接到控制装置100的家庭装置200的操作。
具体地，控制装置100在虚拟轨迹10上显示指示经由网络被连接的家庭装置200的操作信息的指示器20。基于用户输入能够在虚拟轨迹10上移动指示器20。通过在显示单元170上的附加的指针30能够施加用户输入。通过控制装置100的输入单元或者被连接到控制装置100的附加的输入单元能够操作指针30。如果显示单元170是触摸灵敏显示器，则通过显示单元170的触摸能够施加用户输入。
控制装置100的处理器基于用户输入在虚拟轨迹10上移动被显示在显示单元170上的指示器20。在改变指示器20的位置之后，通过指示器20指示的家庭装置200的操作时间被调节。控制装置100的处理器基于在虚拟轨迹10上的指示器的位置控制家庭装置200的操作时间。被控制的操作时间可以指示家庭装置200的操作开始时间和操作结束时间中的至少一个。稍后将会描述基于指示器20的位置的家庭装置200的操作时间控制的实施例。
图5至图11图示根据本发明的实施例的时间线UI指示器20和用于操作其的方法。
参考图5，指示器20能够指示家庭装置的操作结束时间。如在图5(a)中所示，指示器20能够包括位于与家庭装置的总操作时间(通过虚线指示)中的结束时间相对应的点处的图标22。控制装置能够基于用于移动图标22的用户输入控制家庭装置的操作时间。例如，控制装置能够基于用户输入在虚拟轨迹10上移动图标22，如在图5(b)中所示，并且基于虚拟轨迹10上的图标22的位置调节家庭装置的操作结束时间。可替选地，当家庭装置的总操作时间被设置为恒定时间时，能够基于图标22的位置一起调节家庭装置的操作开始时间和操作结束时间，如在图5(c)中所示。指示器20可以进一步包括指示时间信息的时间窗口26。根据预定的模式，时间窗口26能够指示下述中的至少一个：i)从相对应的家庭装置的操作结束或者开始时间到进度指示器12的时间范围；ii)家庭装置的操作结束的相对时间；以及iii)完成家庭装置的操作的实际时间。
根据在图5中示出的本发明的实施例，用户能够通过将家庭装置的操作结束时间与通过控制装置当前正在执行的操作的结束时间进行比较来直观地控制家庭装置的操作结束时间。即，因为根据在图5中图示的实施例的指示器20指示家庭装置的操作结束时间，所以用户能够通过操作指示器20来方便地使得家庭装置的操作结束时间对应于通过控制装置当前正在执行的操作的结束时间。
根据本发明的另一实施例，指示器20能够指示家庭装置的操作开始时间，如在图6中所示。参考图6(a)，指示器20能够包括位于在家庭装置的总操作时间(通过虚线指示)中与开始时间相对应的点处的图标22。控制装置能够基于用于移动图标22的用户输入控制家庭装置的操作时间。例如，控制装置能够基于用户输入在虚拟轨迹10上移动图标22，如在图6(b)中所示，并且基于虚拟轨迹10上的图标22的位置调节家庭装置的操作开始时间。可替选地，当家庭装置的总操作时间被设置为恒定时间时，能够基于图标22的位置一起调节家庭装置的操作开始时间和操作结束时间，如在图6(c)中所示。指示器20可以进一步包括指示时间信息的时间窗口26。根据预定的模式，时间窗口26能够指示下述中的至少一个：i)从相对应的家庭装置的操作结束或者开始时间到进度指示器12的时间范围；ii)家庭装置的操作开始的相对时间；以及iii)家庭装置的操作开始的实际时间。
在图5和图6中示出的本发明的实施例中，能够防止指示器20进入其中指示器20的移动不可用的部分。可替选地，当指示器20根据用户输入进入不可用部分时，可以指示关于指示器20的进入的警告。例如，如果根据用户输入移动指示器20使得在虚拟轨迹10上与相对应的家庭装置的操作开始时间相对应的点在进度指示器12的位置前面，则指示器20的位置可以对应于不可用的部分。为了防止这样，能够抑制指示器20进入其中家庭装置的操作开始时间在虚拟轨迹12的进度指示器12的前面的部分，或者当指示器20进入相对应的部分时指示警告。
根据本发明的另一实施例，当指示其总操作时间被设置为恒定时间的家庭装置的指示器20在家庭装置正在操作的同时被移动时，控制装置能够基于指示器20的位置调节家庭装置的总操作时间。图7图示如在图5的上述实施例中一样当指示器20指示家庭装置的操作结束时间时根据指示器20的移动调节家庭装置的总操作时间的示例。
参考图7，用于移动指示器20的用户输入可以在具有恒定的操作时间的家庭装置正在操作时被施加。这时，进度指示器12可以位于与家庭装置的总操作时间相对应的部分中。在这样的情况下，可能无法根据被施加到指示器20的用户输入调节家庭装置的操作开始时间而同时保持家庭装置的总操作时间恒定。因此，根据本发明的实施例的控制装置能够仅控制家庭装置的操作结束时间对应于指示器20的位置而不改变家庭装置的操作开始时间，以便调节家庭装置的总操作时间。如果家庭装置的总操作时间增加，则控制装置能够添加家庭装置的一些可执行操作或者暂停家庭装置的操作。如果家庭装置的总操作时间减少，则控制装置能够删除家庭装置的一些操作使得家庭装置的操作对应于减少的时间。根据本发明的另一实施例，控制装置能够仅传送关于在虚拟轨迹10上的指示器20的位置的信息，使得相对应的家庭装置能够基于指示器20的位置直接地添加一些操作、暂时中断操作，或者删除一些操作。
在本发明的其它实施例中，指示器20能够指示包括家庭装置的操作开始时间和操作结束时间的总操作时间，如在图8至图11中所示。如在图8(a)中所示，指示器20能够包括具有与家庭装置的操作开始时间和操作结束时间之间的总时间相对应的长度的虚拟滑动条24。虚拟滑动条24能够包括分别与家庭装置的操作开始时间和操作结束时间相对应的第一端24a和第二端24b。第一端24a和第二端24b能够分别位于在虚拟轨迹10上分别对应于家庭装置的操作开始时间和操作结束时间的点。控制装置能够基于用于操作虚拟滑动条24的用户输入控制家庭装置的操作时间。例如，控制装置能够基于第一端24a已经被移到的点调节家庭装置的操作开始时间，如在图8(b)中所示，并且/或者基于第二端24b已经被移到的点独立地调节家庭装置的操作结束时间，如在图8(c)中所示。
当用于移动虚拟滑动条24的主体部分的用户输入被施加到虚拟滑动条24时，如在图9(a)中所示，第一端24a和第二端24b与虚拟滑动条24的主体部分被一起移动，并且从而能够一起调节家庭装置的操作开始时间和操作结束时间。当家庭装置的总操作时间被设置为恒定时，甚至利用用于移动第一端24a和第二端24b中的一个的用户输入能够移动整个虚拟滑动条24，并且从而能够一起调节家庭装置的操作开始时间和操作结束时间，如在图9(b)中所示。
尽管在本发明的实施例中虚拟滑动条24能够包括所有的第一端24a、第二端24b以及主体部分，但是能够仅显示第一端24a和第二端24b，如在图10(a)中所示。可替选地，能够以下述方式显示虚拟滑动条24，即基本上仅显示其主体部分，并且仅当指针或者用户的触摸输入接近虚拟滑动条24的第一端24a或第二端24b的预定距离内时才显示第一端24a或者第二端24b，如在图10(b)中所示。
根据本发明的实施例，即使当指示器20包括虚拟滑动条20时指示器20可以进一步包括图标22，如在图11中所示。在这样的情况下，图标22能够与虚拟滑动条24一起指示家庭装置的操作信息。特别地，图标22能够指示如下所述的家庭装置的操作模式信息。当指示器20包括图标22和虚拟滑动条24时，根据用于移动图标22的输入虚拟滑动条24能够与图标22一起被移动，并且从而能够一起调节家庭装置的操作开始时间和操作结束时间。
参考图11，指示器20可以进一步包括用于指示如上所述的时间信息的时间窗口26。根据预定的模式，时间窗口26能够指示下述中的至少一个：i)从相对应的家庭装置的操作开始时间到进度指示器12的时间范围，ii)家庭装置的操作开始的相对时间，iii)家庭装置的操作开始的实际时间，iv)从相对应的家庭装置的操作结束时间到进度指示器12的时间范围，v)家庭装置的操作结束的相对时间，vi)家庭装置的操作完成的实际时间，以及vii)家庭装置的总操作时间。
在图8至图11图示的本发明的实施例中，能够防止虚拟进度条24的第一端24a或者第二端24b进入其中虚拟滑动条24的第一端24a和第二端24b中的至少一个不可用的部分。可替选地，当虚拟滑动条24的第一端24a和第二端24b中的至少一个根据用户输入进入不可用的部分时，能够指示关于进入的警告。例如，当基于用户输入根据指示器20的操作虚拟滑动条24的第一端24a的位置在进度指示器12的前面时，第一端24a的位置可以对应于不可用部分。此外，当根据被施加到虚拟滑动条24的第一端24a或者第二端24b的用户输入虚拟滑动条24的第二端24b的位置在第一端24a的位置前面时，第一端24a或者第二端24b的位置可以对应于不可用部分。为了防止这样，能够抑制虚拟滑动条24的第一端24a或者第二端24b进入不可用部分，或者当虚拟滑动条24的第一端24a和第二端24b中的至少一个进入不可用部分时，指示警告符号。
在本发明的实施例中，通过被施加到控制装置的显示单元的用户触摸输入(例如，触摸和拖动)能够操作指示器。触摸输入可以是单触摸、双触摸、长触摸、拖动、以及其各种组合。此外，通过控制装置的输入单元或者使用被连接到控制装置的输入单元的指针操作能够操作指示器，如上所述。指针操作对应于触摸输入并且能够包括单击、双击、长击、拖动、以及其各种组合。在下面的描述中，通过根据指针操作的用户输入能够替换通过触摸输入的用户输入。另外，根据用户手势和用户语音输入能够操作指示器，并且本发明不限于此。
通过指示器20指示的家庭装置200的操作信息可以包括操作模式信息以及操作时间信息。操作模式信息表示在通过家庭装置200能够执行的工作当中的当前执行的工作。例如，当家庭装置200是空调时操作模式可以包括“制冷”、“吹风”以及“除湿”，并且当家庭装置200是洗衣机时其包括“洗涤”、“漂洗”以及“甩干”。
根据本发明的实施例，基于被施加到指示器20的用户输入能够控制家庭装置20的操作模式。例如，如在图12中所示，能够基于被施加到指示器20的用户触摸输入(例如，单触摸、双触摸、或者长触摸)激活用于选择操作模式的模式选择窗口27，该指示器20指示器当前操作模式是“制冷”的空调。当从被显示在模式选择窗口27中的模式(例如，制冷、吹风以及除湿)中通过用户触摸输入选择特定模式，例如，“吹风”时，空调的操作模式变成“吹风”。根据本发明的另一实施例，如在图13中所示，无论何时用户触摸输入被施加到指示器20，都能够改变空调的操作模式。在这样的情况下，对于被施加到指示器20的用户触摸输入，不可以激活附加的模式选择窗口。
根据本发明的另一实施例，能够基于被施加到指示器20的用户输入控制家庭装置100的详细操作。例如，如在图14中所示，指示正在工作或者被安排工作的家庭装置，例如，洗衣机的指示器20，能够被显示在虚拟轨迹10上。在这样的情况下，在用户触摸输入(例如，单触摸、双触摸、或者长触摸)被施加到指示器20之后，能够激活用于控制通过指示器20指示的洗衣机的详细操作的控制输入窗口28。控制输入窗口28能够显示当前正在执行或者被安排执行的洗衣机的操作的操作设置状态(例如，洗涤温度：40，漂洗周期的数目：3，甩干水平：中间)。当对控制输入窗口28中显示的操作设置状态施加用户输入时，能够调节对应于操作设置状态的家庭装置的详细操作。例如，当通过控制输入窗口28施加用于增加漂洗周期的数目的用户输入时，洗衣机的漂洗周期的数目从3增加到4。
图15图示根据本发明的另一示例性实施例的时间线UI，其示出用于选择要被控制的特定家庭装置和特定家庭装置的操作模式的菜单按钮界面40。能够在控制装置的显示单元170上显示菜单按钮界面40，并且在显示单元170上能够激活指示通过被施加到菜单按钮界面40的输入选择的特定家庭装置的指示器20。例如，当用户触摸输入被施加到菜单按钮界面40时，显示单元170能够显示通过控制装置当前能够控制的家庭装置(例如，空调、洗衣机、灯等等)的列表。在根据用户输入选择特定家庭装置(例如，空调)之后，能够显示用于选择家庭装置的操作模式(“制冷”、“除湿”、或者“吹风”)的列表。当根据用户触摸输入从用于选择家庭装置的操作模式的列表中选择特定操作模式(“例如，吹风”)时，能够激活指示家庭装置的操作模式的指示器20。
在这样的情况下，指示器20指示包括家庭装置的操作开始时间和操作结束时间中的至少一个的操作信息，并且操作信息可以包括家庭装置的操作模式信息。指示器20可以包括图标或者虚拟滑动条，如上所述。指示器20能够被激活并且被显示在显示单元170上。指示器20能够被显示在最后的用户触摸输入被施加到的点或者在虚拟轨迹10的任意点处。根据用户触摸输入，例如，触摸和拖动输入，被激活的指示器20能够移向虚拟轨迹10上的特定点。能够基于虚拟轨迹10上的指示器20的位置控制通过指示器20指示的家庭装置的操作开始时间和操作结束时间。
根据本发明的另一实施例，在图6中所图示，能够响应于被施加到虚拟轨迹55上的特定点的用户触摸输入(例如，长触摸)激活家庭装置控制窗口55。根据被施加到家庭装置控制窗口55的触摸输入，i)能够调用通过控制装置当前可控制的家庭装置，如使用参考图15描述的菜单按钮界面40那样；ii)基于当前触摸输入点能够控制在虚拟轨迹10上的当前激活的特定家庭装置的操作时间(操作开始时间或者操作结束时间)；或者iii)基于当前触摸输入点能够控制在虚拟轨迹10上的当前激活的所有家庭装置的操作时间。
图17示出本发明的附加的实施例，其涉及除了家庭装置的操作信息在控制装置的显示单元170上还显示附加的事件信息的方法。根据本实施例，能够接收关于特定事件发生的时间或者期待特定时间发生的时间的信息，并且在虚拟轨迹10上能够显示指示特定事件发生的时间或者期待特定事件发生的时间的一个或者多个事件图标50。特定事件可以包括诸如公交车或者火车的到达时间的运输信息。例如，控制装置100的通信单元130，在图2中所示，能够通过网络接收关于具有特定路线编号的公交车将会到达特定公交车站的时间的信息。关于特定路线编号或者特定公交车站的信息能够通过用户直接输入或者基于使用控制装置的传感器获得的感测值来选择。作为使用控制装置的传感器的示例，使用GPS传感器能够指示接近控制装置的当前位置的公交车站的信息。否则，使用增强现实技术能够指示关于通过控制装置的相机传感器当前识别的公交车站的信息。可替选地，通过扫描公交车表或者火车表能够识别关于路线编号的信息或者公交车站的信息。
事件图标指示所选择的事件发生的时间或者所选择的事件期待发生的时间，并且能够被显示在对应于时间的在虚拟轨迹10上的点处。事件图标50能够在虚拟轨迹10上的相对应位置附加地指示相对时间信息或者实时信息。当事件图标50被显示在虚拟轨迹10上时，用户能够直观地识别在事件发生的时间(或者期待事件发生的时间)和家庭装置的操作时间之间的关系，并且从而用户能够通过操作指示器20控制家庭装置的操作时间。
图18图示根据本发明的实施例的其中根据家庭装置的操作状态设置报警的情况。在本实施例中，在通过指示器20指示的家庭装置的操作开始时间和操作结束时间中的一个或者两个处，可以产生用于发信号通知家庭装置的操作开始时间和操作结束时间中的一个或两者的报警。
例如，如在图18(a)中所示，在家庭装置的操作开始时间，虚拟轨迹10上的进度指示器12能够对应于指示家庭装置的指示器20的虚拟滑动条24的第一端24a。这时，发信号通知家庭装置的操作开始时间的报警(或者警报通知)能够被显示在显示单元170上，如在图18(b)中所示。为了实现这一点，指示器20的颜色或者形状能够从第一状态变成第二状态，或者能够将诸如闪烁或者渐变的效果提供给指示器20。可替选地，表示家庭装置的操作的消息能够被显示在显示单元170上。另外或者可替选地，音频声音可以作为报警被产生。
类似地，如在图18(c)中所示，在家庭装置的操作结束时间，在虚拟轨迹10上的进度指示器12能够对应于指示家庭装置的指示器20的虚拟滑动条24的第二端24b。这时，发信号通知家庭装置的操作结束时间的报警能够被显示在显示单元170上。为了实现这一点，指示器20的颜色或者形状能够从第二状态返回到第一状态，或者从第二状态变成第三状态。否则，诸如闪烁或者渐变的效果能够被提供给指示器20。可替选地，表示家庭装置的操作结束的消息能够被显示在显示单元170上。另外或者可替选地，音频声音可以作为报警被产生。
当在图17的实施例中所描述的特定事件发生时，以及在家庭装置的操作时间，能够产生根据本发明的实施例的报警。
图19至图21图示根据本发明的实施例的用于处理时间线UI的方法。
图19和图20示出用于根据指示器20的相对位置直观地表示在相对应的家庭装置的操作时间和另一装置的操作时间或者事件发生时间之间的相关性的实施例。参考图19，当根据用户输入移动指示器20时虚拟滑动条24可以经过与虚拟轨迹10的开始时间14或者结束时间16相对应的点。因此，虚拟滑动条24能够被划分为叠加在虚拟轨迹10上的第一区域24c和没有叠加在虚拟轨迹10上的第二区域24d。参考图20，在家庭装置的操作开始时间，进度指示器12可以位于虚拟滑动条24的第一端24a和第二端24b之间。因此，基于进度指示器12的位置，虚拟滑动条24能够被划分为两个或者更多个区域，即，第一区域24c和第二区域24d。另外，基于被显示在虚拟轨迹10上的一个或者多个事件图标的位置和另一家庭装置的指示器的位置，虚拟滑动条24能够被划分为两个或者更多个区域。当虚拟滑动条24被划分为两个或者更多个区域时，相应的区域的显示属性可以是不同的。显示属性可以包括能够表示显示特性，诸如颜色、形状、图案、透明度等等的效果。因此，用户能够直观地识别在通过指示器20指示的家庭装置的操作时间和另一家庭装置的操作时间、特定事件发生时间、以及控制装置正在执行的操作的工作时间之间的相关性。
图21示出其中根据用户输入指示器20的位置与虚拟轨迹10分离超过预定距离的情况。根据用户触摸和拖动输入，指示器20能够被移到离虚拟轨迹10预定距离的点。在这样的情况下，通过指示器20指示的家庭装置的操作能够被中断。否则，能够结束控制装置控制家庭装置的操作，并且家庭装置能够在控制操作结束之前设置的操作模式中操作。
根据本发明的另一实施例，当指示器20的位置离虚拟轨迹10比特定距离更长时，能够在显示单元170上激活指示器垃圾箱图标60。当根据用户输入指示器20到达指示器垃圾箱图标60同时指示器垃圾箱图标60是处于激活状态时，家庭装置的操作能够被中断或者家庭装置的操作的控制能够结束，如上所述。
图22图示根据本发明的使用时间线UI控制家庭装置的实施例。如在图22中所示，使用控制装置100，用户能够控制通过网络300被连接到控制装置100的家庭装置200，例如，自行车测功计的工作时间。即，用户能够通过在虚拟轨迹10上移动指示自行车测功计的指示器20来控制自行车测功计的工作时间。因此，考虑到在控制装置10上显示的视频的回放时间，用户能够控制自行车测功计的工作时间。此外，用户能够参考通过网络300接收到的自行车测功计的操作时间选择要被显示在控制装置100上的视频。指示器20可以进一步指示自行车测功计的附加操作信息。例如，操作信息能够包括自行车测功计的当前工作模式、总工作时间、工作距离等等。根据本发明，用户能够通过控制装置100方便地获得家庭装置200的操作信息，并且通过直观地识别在控制装置100的操作时间和家庭装置200的操作时间之间的关系控制家庭装置200或者控制装置100的操作。
图23示出根据本发明的实施例的集成的时间线UI。
时间线UI被显示在控制装置的显示单元170上并且指示如上所述的虚拟轨迹10和一个或者多个指示器20a和20b。指示器20a和20b能够包括如上所述的图标、虚拟滑动条或者其组合，并且指示包括相对应的家庭装置的操作时间信息的操作信息。另外，一个或者多个事件图标50可以被附加地显示在虚拟轨迹10上。事件图标50指示特定事件发生的时间或者期待特定事件发生的时间。根据本实施例，当基于另一家庭装置的指示器20a、事件图标50的进度指示器12的位置在虚拟轨迹10上的指示器20b被划分为两个或者更多个区域时，能够以不同的颜色或者形状表达指示器20b的相应的区域。能够在虚拟轨迹10上对应于通过控制装置正在执行的操作的开始时间或者结束时间，或者任意时间的点处指示相对时间信息17，并且能够与相对时间信息17分离地指示实时信息18。
时间线UI能够显示用于选择要被控制的家庭装置和家庭装置的操作模式的菜单按钮界面40，如上所述，并且能够在时间线UI上激活指示通过菜单按钮界面40选择的家庭装置的指示器。根据本发明的另一实施例，时间线UI能够进一步包括用于单独地确定当前操作的家庭装置的指示器是否被显示在虚拟轨迹10上的指示器显示控制窗口70。因此，用户能够通过时间线UI仅检查当前操作的家庭装置当中的期望的家庭装置的操作信息。例如，参考图23，在指示器显示控制窗口70中，其显示状态被设置为“打开(On)”的、指示洗衣机、空调以及运输信息的指示器能够被显示在虚拟轨迹10上。然而，当在显示控制窗口70中其显示状态被设置为“关闭(Off)”的灯实际操作时，与灯相对应的指示器不可以被显示在虚拟轨迹10上。
在本发明的实施例中，可控制的家庭装置表示通过网络连接并且在家庭中可控制的装置，并且不仅可以包括诸如洗衣机、冰箱、电烤炉等等的家用电器而且包括诸如灯、门锁等等的各种装置。当在本发明的实施例中根据触摸输入或者指针输入控制时间线UI时，诸如语音、手势等等的各种方法能够被用于控制时间线UI。
除了家庭装置的打开/关闭和开始/结束时间，控制可控制的家庭装置的功能能够还包括在家庭装置中可执行的各种功能。例如，如果家庭装置是TV接收器则控制功能能够包括回放/记录功能，如果控制装置是计算机则能够包括登录和注销，并且当家庭装置是音频输出装置时包括音频控制、无线电预订调谐和记录。
本发明的模式
在用于执行本发明的最佳模式中已经描述了各种实施例。
工业实用性
如上所述，本发明可完全地或者部分地应用于电子装置。

Claims (27)

1.一种用于控制通过网络连接的家庭装置的方法，所述方法包括：
在控制装置的显示单元上显示虚拟轨迹，所述虚拟轨迹对应于包括通过所述控制装置正在执行或者要执行的操作的开始时间和结束时间中的至少一个的时间线；
沿着所述虚拟轨迹显示指示器，所述指示器指示通过所述网络被连接到所述控制装置的家庭装置的操作信息，所述操作信息包括所述家庭装置的操作开始时间和操作结束时间中的至少一个，其中，基于至少一个用户输入所述指示器是沿着所述虚拟轨迹可移动的；以及
基于所述指示器沿着所述虚拟轨迹的位置控制所述家庭装置的操作时间，所述操作时间包括所述家庭装置的所述操作开始时间和所述操作结束时间中的至少一个。
2.根据权利要求1所述的方法，进一步包括沿着所述虚拟轨迹显示实时信息。
3.根据权利要求1所述的方法，其中，所述指示器包括指示所述家庭装置的所述操作结束时间的图标。
4.根据权利要求1所述的方法，其中，所述指示器包括虚拟滑动条，所述虚拟滑动条具有与在所述家庭装置的所述操作开始时间和所述操作结束时间之间的总时间相对应的长度。
5.根据权利要求4所述的方法，其中，所述虚拟滑动条的第一端和第二端分别对应于所述家庭装置的所述操作开始时间和所述操作结束时间，并且其中，所述操作时间的控制包括基于被施加到所述第一端和所述第二端中的至少一个的用户输入调节所述家庭装置的所述操作开始时间和所述操作结束时间中的至少一个。
6.根据权利要求1所述的方法，其中，当根据用户输入所述指示器的位置与所述虚拟轨迹分离超过预定的距离时，所述家庭装置的操作被中断。
7.根据权利要求1所述的方法，其中，当根据用户输入所述指示器的位置与所述虚拟轨迹分离超过预定的距离时，所述家庭装置的操作的控制结束。
8.根据权利要求1所述的方法，进一步包括：
通过所述网络接收关于特定事件的期待发生时间的信息；和
沿着所述虚拟轨迹显示指示所述特定事件的所述期待发生时间的至少一个图标。
9.根据权利要求4所述的方法，其中，当所述虚拟滑动条被分割成叠加在所述虚拟轨迹上的第一区域和没有叠加在所述虚拟轨迹上的第二区域时，调节所述第二区域的显示属性以不同于所述第一区域的显示属性。
10.根据权利要求9所述的方法，其中，所述第一区域和所述第二区域中的每个的显示属性包括颜色、形状、图案、以及透明度中的至少一个。
11.根据权利要求1所述的方法，进一步包括：
在所述显示单元上显示菜单按钮界面，所述菜单按钮界面用于选择要通过所述控制装置控制的特定家庭装置和所述特定家庭装置的操作模式；以及
当使用所述菜单按钮界面选择所述特定家庭装置时，在所述显示单元上显示与所选择的特定家庭装置相对应的指示器。
12.根据权利要求1所述的方法，其中，所述家庭装置的所述操作信息进一步包括所述家庭装置的操作模式信息，并且
其中，所述方法进一步包括基于用户输入通过位于沿着所述虚拟轨迹的所述指示器控制所述家庭装置的操作模式。
13.根据权利要求1所述的方法，进一步包括通过所述网络接收所述家庭装置的所述操作信息，其中，基于接收到的所述家庭装置的操作信息沿着所述虚拟轨迹显示所述指示器。
14.一种用于控制被连接到网络的家庭装置的操作的控制装置，所述控制装置包括：
通信单元，所述通信单元被配置为将数据传送到被连接到所述网络的所述家庭装置或者从被连接到所述网络的所述家庭装置接收数据；
处理器，所述处理器被配置为控制所述控制装置的操作；以及
显示单元，所述显示单元被配置为基于所述处理器的命令显示图像，
其中，所述处理器被配置为：
在所述显示单元上显示虚拟轨迹，所述虚拟轨迹与包括通过所述控制装置正在执行或者要执行的操作的开始时间和结束时间中的至少一个的时间线相对应，
沿着所述虚拟轨迹显示指示器，所述指示器指示包括通过所述网络被连接到所述控制装置的家庭装置的操作开始时间和操作结束时间中的至少一个的操作信息，基于至少一个用户输入所述指示器是沿着所述虚拟轨迹可移动的，并且
基于所述指示器沿着所述虚拟轨迹的位置控制包括所述家庭装置的所述操作开始时间和所述操作结束时间中的至少一个的操作时间。
15.根据权利要求14所述的控制装置，其中，所述处理器进一步被配置为沿着所述虚拟轨迹显示实时信息。
16.根据权利要求14所述的控制装置，其中，所述指示器包括指示所述家庭装置的所述操作结束时间的图标。
17.根据权利要求14所述的控制装置，其中，所述指示器包括虚拟滑动条，所述虚拟滑动条具有与在所述家庭装置的所述操作开始时间和所述操作结束时间之间的总时间相对应的长度。
18.根据权利要求17所述的控制装置，其中，所述虚拟滑动条的第一端和第二端分别对应于所述家庭装置的所述操作开始时间和所述操作结束时间，并且
其中，基于被施加到所述第一端和所述第二端中的至少一个的用户输入调节所述家庭装置的所述操作开始时间和所述操作结束时间中的至少一个。
19.根据权利要求14所述的控制装置，其中，当根据用户输入所述指示器的位置与所述虚拟轨迹分离超过预定的距离时，所述处理器中断所述家庭装置的操作。
20.根据权利要求14所述的控制装置，其中，当根据用户输入所述指示器的位置与所述虚拟轨迹分离超过预定的距离时，所述处理器结束所述家庭装置的操作的控制。
21.根据权利要求14所述的控制装置，其中，所述通信单元被配置为通过所述网络接收关于特定事件的期待发生时间的信息，并且
其中，所述处理器被进一步配置为沿着所述虚拟轨迹显示指示所述特定事件的所述期待发生时间的至少一个事件图标。
22.根据权利要求17所述的控制装置，其中，当所述虚拟滑动条被分割成叠加在所述虚拟轨迹上的第一区域和没有叠加在所述虚拟轨迹上的第二区域时，所述处理器被进一步配置为调节所述第二区域的显示属性以不同于所述第一区域的显示属性。
23.根据权利要求22所述的控制装置，其中，所述第一区域和第二区域中的每个的显示属性包括颜色、形状、图案、以及透明度中的至少一个。
24.根据权利要求1所述的控制装置，其中，所述处理器进一步被配置为在所述显示单元上显示菜单按钮界面，所述菜单按钮界面用于选择要通过所述控制装置控制的特定家庭装置和所述特定家庭装置的操作模式，并且
其中，当使用所述菜单按钮界面选择所述特定家庭装置时，所述处理器进一步被配置为在所述显示单元上显示与所选择的特定家庭装置相对应的指示器。
25.根据权利要求17所述的控制装置，其中，所述家庭装置的所述操作信息进一步包括所述家庭装置的操作模式信息，并且
其中，所述处理器进一步被配置为基于用户输入通过位于沿着所述虚拟轨迹的所述指示器控制所述家庭装置的操作模式。
26.根据权利要求17所述的控制装置，其中，所述通信单元通过所述网络接收所述家庭装置的所述操作信息，并且
其中，所述处理器基于接收到的所述家庭装置的操作信息沿着所述虚拟轨迹显示所述指示器。
27.一种被显示在控制装置上以控制通过网络被连接到所述控制装置的家庭装置的操作的时间线用户界面(UI)，所述时间线UI包括：
虚拟轨迹，所述虚拟轨迹被显示在所述控制装置的显示单元上，所述虚拟轨迹对应于包括通过所述控制装置正在执行或者要执行的操作的开始时间和结束时间中的至少一个的时间线；和
指示器，所述指示器被显示在所述虚拟轨迹上并且指示包括通过所述网络被连接到所述控制装置的家庭装置的操作开始时间和操作结束时间中的至少一个的操作信息，基于至少一个用户输入所述指示器是沿着所述虚拟轨迹可移动的，
其中，基于在所述虚拟轨迹上的所述指示器的位置控制包括所述家庭装置的所述操作开始时间和所述操作结束时间中的至少一个的操作时间。
CN201280069863.3A 2012-03-04 2012-06-28 用于控制家庭装置的装置、方法以及时间线用户界面 Active CN104115078B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261606469P 2012-03-04 2012-03-04
US61/606,469 2012-03-04
KR10-2012-0039730 2012-04-17
KR1020120039730A KR101901930B1 (ko) 2012-03-04 2012-04-17 홈 디바이스의 제어 장치, 제어 방법 및 제어를 위한 타임라인 ｕｉ
PCT/KR2012/005103 WO2013133486A1 (en) 2012-03-04 2012-06-28 Device, method and timeline user interface for controlling home devices

Publications (2)

Publication Number Publication Date
CN104115078A true CN104115078A (zh) 2014-10-22
CN104115078B CN104115078B (zh) 2018-02-02

Family

ID=49451401

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280069863.3A Active CN104115078B (zh) 2012-03-04 2012-06-28 用于控制家庭装置的装置、方法以及时间线用户界面

Country Status (5)

Country Link
US (2) US8666523B2 (zh)
EP (1) EP2823647B1 (zh)
KR (1) KR101901930B1 (zh)
CN (1) CN104115078B (zh)
WO (1) WO2013133486A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105549398A (zh) * 2014-11-03 2016-05-04 友讯科技股份有限公司 根据触发策略定时驱动对应装置的控制系统及其方法
CN105592339A (zh) * 2014-11-10 2016-05-18 恩智浦有限公司 媒体播放器
CN108301166A (zh) * 2017-01-13 2018-07-20 Bsh家用电器有限公司 具有改善的操作性的家用器具，用于运行该家用器具的方法和包括该家用器具的系统
CN109031963A (zh) * 2018-07-10 2018-12-18 珠海格力电器股份有限公司 智能设备的控制方法和装置
CN109947347A (zh) * 2019-03-19 2019-06-28 深圳市火王燃器具有限公司 基于智能厨电触摸屏的虚拟按键的拓展方法及装置
CN109976635A (zh) * 2019-03-19 2019-07-05 深圳市火王燃器具有限公司 基于智能厨电触摸屏的定时控制方法及装置
CN110753899A (zh) * 2017-06-15 2020-02-04 微软技术许可有限责任公司 计算机介导现实中的位移取向交互

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130249811A1 (en) * 2012-03-23 2013-09-26 Microsoft Corporation Controlling a device with visible light
JP6202544B2 (ja) 2012-08-27 2017-09-27 アクティエボラゲット エレクトロラックス ロボット位置決めシステム
US10448794B2 (en) 2013-04-15 2019-10-22 Aktiebolaget Electrolux Robotic vacuum cleaner
CN105101855A (zh) 2013-04-15 2015-11-25 伊莱克斯公司 具有伸出的侧刷的机器人真空吸尘器
JP6308728B2 (ja) * 2013-06-18 2018-04-11 キヤノン株式会社 放射線撮影システム及び放射線撮影システムの作動方法
USD813252S1 (en) * 2013-10-16 2018-03-20 Tomtom International B.V. Display panel of an electronic navigation device with a computer generated icon
US10149589B2 (en) 2013-12-19 2018-12-11 Aktiebolaget Electrolux Sensing climb of obstacle of a robotic cleaning device
US10045675B2 (en) 2013-12-19 2018-08-14 Aktiebolaget Electrolux Robotic vacuum cleaner with side brush moving in spiral pattern
WO2015090397A1 (en) 2013-12-19 2015-06-25 Aktiebolaget Electrolux Robotic cleaning device
KR102124235B1 (ko) 2013-12-19 2020-06-24 에이비 엘렉트로룩스 주변 기록 기능을 갖는 로봇 청소 디바이스
US10433697B2 (en) 2013-12-19 2019-10-08 Aktiebolaget Electrolux Adaptive speed control of rotating side brush
KR102137857B1 (ko) 2013-12-19 2020-07-24 에이비 엘렉트로룩스 로봇 청소 장치 및 랜드마크 인식 방법
US9946263B2 (en) 2013-12-19 2018-04-17 Aktiebolaget Electrolux Prioritizing cleaning areas
EP3082539B1 (en) 2013-12-20 2019-02-20 Aktiebolaget Electrolux Dust container
USD760737S1 (en) * 2014-01-03 2016-07-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US20150193127A1 (en) * 2014-01-07 2015-07-09 Opentv Inc. Systems and methods of displaying integrated home automation modules
USD758410S1 (en) * 2014-02-12 2016-06-07 Samsung Electroncs Co., Ltd. Display screen or portion thereof with graphical user interface
US9779613B2 (en) 2014-07-01 2017-10-03 Sonos, Inc. Display and control of pre-determined audio content playback
KR102217562B1 (ko) 2014-07-01 2021-02-19 엘지전자 주식회사 전자기기 및 그것의 제어방법
EP3167341B1 (en) 2014-07-10 2018-05-09 Aktiebolaget Electrolux Method for detecting a measurement error in a robotic cleaning device
KR101595958B1 (ko) * 2014-08-27 2016-02-18 엘지전자 주식회사 영상표시장치 및 영상표시장치 동작방법
US10499778B2 (en) 2014-09-08 2019-12-10 Aktiebolaget Electrolux Robotic vacuum cleaner
EP3190938A1 (en) 2014-09-08 2017-07-19 Aktiebolaget Electrolux Robotic vacuum cleaner
KR102236583B1 (ko) 2014-12-05 2021-04-06 삼성전자주식회사 전자기기용 조그 다이얼 및 이를 구비한 전자기기
US10877484B2 (en) 2014-12-10 2020-12-29 Aktiebolaget Electrolux Using laser sensor for floor type detection
WO2016091320A1 (en) 2014-12-12 2016-06-16 Aktiebolaget Electrolux Side brush and robotic cleaner
JP6532530B2 (ja) 2014-12-16 2019-06-19 アクチエボラゲット エレクトロルックス ロボット掃除機の掃除方法
CN107003669B (zh) 2014-12-16 2023-01-31 伊莱克斯公司 用于机器人清洁设备的基于经验的路标
CN104754496A (zh) * 2015-03-18 2015-07-01 联想(北京)有限公司 一种智能家居设备的连接方法及智能终端
JP6743828B2 (ja) 2015-04-17 2020-08-19 アクチエボラゲット エレクトロルックス ロボット掃除機およびロボット掃除機を制御する方法
KR102445064B1 (ko) 2015-09-03 2022-09-19 에이비 엘렉트로룩스 로봇 청소 장치의 시스템
KR102491543B1 (ko) * 2015-11-06 2023-01-26 삼성전자주식회사 전자 장치의 날짜 및 시간 설정 방법 및 그 전자 장치
JP7035300B2 (ja) 2016-03-15 2022-03-15 アクチエボラゲット エレクトロルックス ロボット清掃デバイス、ロボット清掃デバイスにおける、断崖検出を遂行する方法、コンピュータプログラム、およびコンピュータプログラム製品
CN105843054A (zh) * 2016-03-22 2016-08-10 美的集团股份有限公司 控制家居设备的方法、智能家居系统及移动设备
WO2017194102A1 (en) 2016-05-11 2017-11-16 Aktiebolaget Electrolux Robotic cleaning device
US10617276B2 (en) * 2016-10-24 2020-04-14 TCD Parts, Inc. Appliance control and monitoring systems and methods for making and using same
US10691334B2 (en) 2016-12-29 2020-06-23 Whirlpool Corporation Cooking device with interactive display
TWI601057B (zh) * 2017-01-18 2017-10-01 華碩電腦股份有限公司 電子裝置與其功能選項選定執行的操作方法
US20180284704A1 (en) * 2017-03-31 2018-10-04 Otis Elevator Company Multi-target dynamic ui action element
US10895971B2 (en) * 2017-05-12 2021-01-19 Irobot Corporation Methods, systems, and devices for mapping, controlling, and displaying device status
WO2018219473A1 (en) 2017-06-02 2018-12-06 Aktiebolaget Electrolux Method of detecting a difference in level of a surface in front of a robotic cleaning device
WO2019063066A1 (en) 2017-09-26 2019-04-04 Aktiebolaget Electrolux CONTROL FOR MOVING A ROBOTIC CLEANING DEVICE
CN109361578B (zh) * 2017-12-29 2021-11-23 深圳Tcl新技术有限公司 一种洗衣机共享方法、系统及存储介质
USD916720S1 (en) * 2018-02-22 2021-04-20 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
KR102010300B1 (ko) * 2018-03-07 2019-08-13 엘지전자 주식회사 영상표시장치 및 그 제어방법
CN111176500B (zh) * 2018-11-13 2022-06-17 青岛海尔洗衣机有限公司 触摸屏中滑块的显示控制方法
KR20200071786A (ko) * 2018-11-29 2020-06-22 현대자동차주식회사 차량 및 차량의 제어방법
KR102066671B1 (ko) * 2019-03-21 2020-01-15 김용서 건물 제어 시스템 및 그 동작 방법
US20210358294A1 (en) * 2020-05-15 2021-11-18 Microsoft Technology Licensing, Llc Holographic device control
US20220221297A1 (en) * 2020-06-02 2022-07-14 FLIR Belgium BVBA Waypoint timeline user interface systems and methods
CN112782994B (zh) * 2020-12-31 2022-10-04 重庆房慧科技有限公司 基于用户数据分析的智能家居控制系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040025179A1 (en) * 2002-08-02 2004-02-05 Russ Samuel H. Locally-updated interactive program guide
CN1483281A (zh) * 2000-10-31 2004-03-17 数字层面公司 联网装置的可适应节目安排指南
CN100489748C (zh) * 2000-06-14 2009-05-20 皇家菲利浦电子有限公司 用于具有动态菜单选项组织的用户接口的数据处理系统，装置，方法和遥控装置
CN101547253A (zh) * 2008-03-25 2009-09-30 Lg电子株式会社 移动终端及显示其中信息的方法
CN101640721A (zh) * 2008-08-01 2010-02-03 Lg电子株式会社 能够管理时间表的移动终端以及控制该移动终端的方法
US20100039400A1 (en) * 2008-08-12 2010-02-18 Samsung Electronics Co., Ltd. Method and apparatus for controlling information scrolling on touch-screen
CN102117178A (zh) * 2009-12-30 2011-07-06 Lg电子株式会社 移动终端的显示装置和控制该显示装置的方法
US20110167382A1 (en) * 2010-01-06 2011-07-07 Van Os Marcel Device, Method, and Graphical User Interface for Manipulating Selectable User Interface Objects

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6828992B1 (en) * 1999-11-04 2004-12-07 Koninklijke Philips Electronics N.V. User interface with dynamic menu option organization
WO2001042865A1 (en) * 1999-12-10 2001-06-14 Gentech Investment Group Ag. Man-machine interface having relative position sensor
US20020053081A1 (en) * 2000-10-31 2002-05-02 Digitaldeck, Inc. Adaptable programming guide for networked devices
EP1662402A1 (en) 2003-09-02 2006-05-31 Nikon Corporation Information processing apparatus and electronic device
US10156959B2 (en) * 2005-03-16 2018-12-18 Icontrol Networks, Inc. Cross-client sensor user interface in an integrated security network
US8001219B2 (en) 2006-03-16 2011-08-16 Exceptional Innovation, Llc User control interface for convergence and automation system
US20070279389A1 (en) * 2006-05-31 2007-12-06 Samsung Electronics Co., Ltd. Method of task-oriented universal remote control user interface
US7827490B2 (en) 2006-11-30 2010-11-02 Microsoft Corporation Media state user interface
US20080276284A1 (en) * 2007-05-04 2008-11-06 United Video Properties, Inc. Systems and methods for recording overlapping media content during scheduling conflicts
US7886166B2 (en) 2007-09-13 2011-02-08 Gridpoint, Inc. User interface for demand side energy management
US20110062143A1 (en) 2009-09-16 2011-03-17 Whirlpool Corporation Sliding control system for a cooking appliance

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100489748C (zh) * 2000-06-14 2009-05-20 皇家菲利浦电子有限公司 用于具有动态菜单选项组织的用户接口的数据处理系统，装置，方法和遥控装置
CN1483281A (zh) * 2000-10-31 2004-03-17 数字层面公司 联网装置的可适应节目安排指南
US20040025179A1 (en) * 2002-08-02 2004-02-05 Russ Samuel H. Locally-updated interactive program guide
CN101547253A (zh) * 2008-03-25 2009-09-30 Lg电子株式会社 移动终端及显示其中信息的方法
CN101640721A (zh) * 2008-08-01 2010-02-03 Lg电子株式会社 能够管理时间表的移动终端以及控制该移动终端的方法
US20100039400A1 (en) * 2008-08-12 2010-02-18 Samsung Electronics Co., Ltd. Method and apparatus for controlling information scrolling on touch-screen
CN102117178A (zh) * 2009-12-30 2011-07-06 Lg电子株式会社 移动终端的显示装置和控制该显示装置的方法
US20110167382A1 (en) * 2010-01-06 2011-07-07 Van Os Marcel Device, Method, and Graphical User Interface for Manipulating Selectable User Interface Objects

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105549398A (zh) * 2014-11-03 2016-05-04 友讯科技股份有限公司 根据触发策略定时驱动对应装置的控制系统及其方法
CN105549398B (zh) * 2014-11-03 2018-09-18 友讯科技股份有限公司 根据触发策略定时驱动对应装置的控制系统及其方法
CN105592339A (zh) * 2014-11-10 2016-05-18 恩智浦有限公司 媒体播放器
CN105592339B (zh) * 2014-11-10 2019-12-10 恩智浦有限公司 媒体播放器
CN108301166A (zh) * 2017-01-13 2018-07-20 Bsh家用电器有限公司 具有改善的操作性的家用器具，用于运行该家用器具的方法和包括该家用器具的系统
CN108301166B (zh) * 2017-01-13 2021-07-27 Bsh家用电器有限公司 具有改善的操作性的家用器具，用于运行该家用器具的方法和包括该家用器具的系统
CN110753899A (zh) * 2017-06-15 2020-02-04 微软技术许可有限责任公司 计算机介导现实中的位移取向交互
CN110753899B (zh) * 2017-06-15 2021-12-10 微软技术许可有限责任公司 计算机介导现实中的位移取向交互
CN109031963A (zh) * 2018-07-10 2018-12-18 珠海格力电器股份有限公司 智能设备的控制方法和装置
CN109947347A (zh) * 2019-03-19 2019-06-28 深圳市火王燃器具有限公司 基于智能厨电触摸屏的虚拟按键的拓展方法及装置
CN109976635A (zh) * 2019-03-19 2019-07-05 深圳市火王燃器具有限公司 基于智能厨电触摸屏的定时控制方法及装置
CN109947347B (zh) * 2019-03-19 2021-07-30 深圳市火王燃器具有限公司 基于智能厨电触摸屏的虚拟按键的拓展方法及装置

Also Published As

Publication number Publication date
US20130231758A1 (en) 2013-09-05
EP2823647B1 (en) 2022-02-09
CN104115078B (zh) 2018-02-02
EP2823647A4 (en) 2015-11-11
KR101901930B1 (ko) 2018-09-27
EP2823647A1 (en) 2015-01-14
WO2013133486A1 (en) 2013-09-12
US20140059435A1 (en) 2014-02-27
US8887049B2 (en) 2014-11-11
US8666523B2 (en) 2014-03-04
KR20130100881A (ko) 2013-09-12

Similar Documents

Publication Publication Date Title
CN104115078A (zh) 用于控制家庭装置的装置、方法以及时间线用户界面
KR102229356B1 (ko) 제어 장치
US11334208B2 (en) Control apparatus
KR102269035B1 (ko) 서버 및 서버의 그룹 액션 제어방법
EP3000013B1 (en) Interactive multi-touch remote control
US20150193036A1 (en) User terminal apparatus and control method thereof
US10608837B2 (en) Control apparatus and method for controlling the same
US20140172123A1 (en) User terminal apparatus, network apparatus, and control method thereof
US9311167B2 (en) APP operating method and device and APP output device supporting the same
KR20170112556A (ko) 단말장치 및 그 제어방법
US10956012B2 (en) Display apparatus with a user interface to control electronic devices in internet of things (IoT) environment and method thereof
US20140160353A1 (en) Control apparatus, remote control apparatus, and method capable of controlling tv interface
KR20120092485A (ko) 휴대 단말기의 ｇｕｉ 제공 방법 및 장치
US10644896B2 (en) Control device, storage medium, control method for control device, control system, terminal device, and controlled device
CN108932116A (zh) 音量的调节方法及装置
WO2017008574A2 (zh) 一种显示控制方法及装置
EP3098796B1 (en) Remote control apparatus, method of providing vibration feedback thereof, and display system
TW201351350A (zh) 電器控制裝置及方法
CN112041803A (zh) 电子设备及其操作方法
CN107014481A (zh) 动作识别方法及装置
JP6049494B2 (ja) 携帯端末
CN109408119A (zh) 一种应用程序的标记方法和终端设备
TW201423560A (zh) 手持裝置及其遙控方法
KR20170075590A (ko) 이동 단말기
KR20160072753A (ko) 전자 장치 및 전자 장치의 그룹 액션 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant