CN108139850A - 电子设备及其用户界面提供方法 - Google Patents

电子设备及其用户界面提供方法 Download PDF

Info

Publication number
CN108139850A
CN108139850A CN201680055257.4A CN201680055257A CN108139850A CN 108139850 A CN108139850 A CN 108139850A CN 201680055257 A CN201680055257 A CN 201680055257A CN 108139850 A CN108139850 A CN 108139850A
Authority
CN
China
Prior art keywords
equipment
processor
information
response
multiple equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680055257.4A
Other languages
English (en)
Other versions
CN108139850B (zh
Inventor
崔侑利
朴喜圣
高世潾
金东锡
李晶杓
曹承铉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108139850A publication Critical patent/CN108139850A/zh
Application granted granted Critical
Publication of CN108139850B publication Critical patent/CN108139850B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
    • G05B19/409—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by using manual data input [MDI] or by using control panel, e.g. controlling functions with the panel; characterised by control panel details or by setting parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Manufacturing & Machinery (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

公开了一种电子设备。本电子设备包括显示器和处理器，所述处理器被配置为基于连接到相同网络的多个设备的使用模式通过显示器显示UI，其中UI包括设备轴和时间轴，并且提供与设备轴和时间轴彼此交叉的区域中的至少一个设备的使用有关的信息。

Description

电子设备及其用户界面提供方法
技术领域
本公开涉及电子设备及其用户界面(User Interface，UI)提供方法，并且更具体地，涉及提供其他设备的使用模式的电子设备及其UI提供方法。
背景技术
由于电子技术的发展，各种类型的设备正在发展和分布，并且拥有各种通信功能的设备越来越多地在普通家庭中使用。此外，不具有通信功能的相关技术设备拥有通信功能，从而建立IoT环境。
IoT是物联网(Intent of Things)的缩写，并且指的是生活中的事物经由有线或无线网络彼此连接、并且彼此共享信息的环境。在诸如智能家居等的各个领域，信息可以通过连接事物而共享。另外，用户能够使用通信功能远程控制各种设备。
然而，随着拥有通信功能的各种设备被分布，连接到网络的设备的数量增加，并且因此在单独控制多个设备方面存在不便。
因此，需要更直观地监测和控制IoT设备的方法。
技术目标
已经开发了本公开以便满足上述需求，并且本公开的一个目的是提供一种电子设备，其通过提供与连接到相同网络的多个设备的使用模式有关的UI来控制多个设备，及其UI提供方法。
技术方案
根据用于实现上述目标的本公开的示例性实施例，一种电子设备包括：显示器；以及处理器，被配置为基于连接到相同网络的多个设备的使用模式、通过显示器显示UI，其中该UI包括设备轴和时间轴，并且提供与在设备轴和时间轴彼此交叉的区域中的至少一个设备的使用有关的信息。
另外，与至少一个设备的使用有关的信息可以包括指示至少一个设备的操作状态是否改变的信息和关于至少一个设备的操作状态的详细信息中的至少一个。
另外，处理器可以被配置为基于多个设备的操作状态在UI上将属于时间轴的第一时间段的多个设备分组，并且提供组，并且响应于第一时间段到来，处理器可以被配置为同时控制分组的多个设备。
另外，处理器可以被配置为显示用于在视觉上反馈指示分组的多个设备被分组的信息的GUI，并且响应于拖动GUI并且将GUI放入第二时间段的用户交互被输入，处理器可以被配置为控制分组的多个设备在第二时间段中以与第一时间段中的操作状态相同的操作状态进行操作。
另外，设备轴可以被划分成多个设备的识别信息和与多个设备的功能有关的环境信息，并且处理器可以被配置为提供与在设备轴和时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细的环境信息。
另外，处理器可以被配置为基于多个设备的操作状态在UI上将属于时间轴的第三时间段的多个设备和详细环境信息分组，并且提供组，并且响应于其中周围环境与详细环境相同的第三时间段到来，处理器可以被配置为控制分组的多个设备以与第三时间段中的操作状态相同的操作状态进行操作。
另外，环境信息可以包括天气、室内温度、室外温度、湿度和照度中的至少一个。
响应于在设备轴和时间轴彼此交叉的区域中的任何一个上输入捏合(pinch-in)交互，处理器可以被配置为根据关于与设备轴相对应的设备的详细信息和时间轴中包括的环境信息来显示引导消息。
另外，响应于在设备轴方向上输入捏合交互，处理器可以被配置为根据设备的类型对多个设备进行分组，并根据类型对分组的组进行分类并显示该组，并且响应于在设备轴方向上输入挤出(pinch-out)交互，处理器可以被配置为显示多个设备的详细信息。
另外，响应于在时间轴方向上输入捏合或挤出交互，处理器可以被配置为改变时间轴的时间单位，并且将与显示的至少一个设备的使用有关的信息改变为与改变的时间单位相对应的信息。
根据用于实现上述目标的本公开的示例性实施例，一种提供电子设备的UI的方法，该方法包括：基于连接到相同网络的多个设备的使用模式来生成UI，其中，该UI包括设备轴和时间轴，并且提供与设备轴和时间轴彼此交叉的区域中的至少一个设备的使用有关的信息；并且显示生成的UI。
另外，与至少一个设备的使用有关的信息可以包括指示至少一个设备的操作状态是否改变的信息和关于至少一个设备的操作状态的详细信息中的至少一个。
该方法还可以包括：基于多个设备的操作状态，在UI上将属于时间轴的第一时间段的多个设备分组，并提供组；并且响应于第一时间段到来，同时控制分组的多个设备。
分组和提供可以还包括显示用于在视觉上反馈指示分组的多个设备被分组的信息的GUI，并且响应于拖动GUI并且将GUI放入第二时间段的用户交互被输入，控制分组的多个设备在第二时间段中以与第一时间段中的操作状态相同的操作状态进行操作。
另外，设备轴可以被划分为多个设备的识别信息和与多个设备的功能有关的环境信息，并且该方法可以还包括提供与在设备轴和时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细的环境信息。
另外，该方法还可以包括：基于多个设备的操作状态在UI上将属于时间轴的多个设备和第三时间段的详细环境信息分组，并且提供组；并且响应于其中周围环境与详细环境相同的第三时间段到来，控制分组的多个设备以与第三时间段中的操作状态相同的操作状态进行操作。
另外，环境信息可以包括天气、室内温度、室外温度、湿度和照度中的至少一个。
另外，该方法还可以包括，响应于在设备轴和时间轴彼此交叉的区域中的任何一个上输入捏合交互，根据关于与设备轴相对应的设备的详细信息和时间轴中包括的环境信息来显示引导消息。
另外，响应于在设备轴方向上输入捏合交互，显示可以根据设备的类型对多个设备进行分组，并且根据类型对分组的组进行分类并且显示组，并且响应于在设备轴方向上输入挤出交互，显示可以显示多个设备的详细信息。
另外，显示可以包括：响应于在时间轴方向上输入捏合或挤出交互，改变时间轴的时间单位；以及将与显示的至少一个设备的使用有关的信息改变为与改变的时间单位相对应的信息。
有益效果
根据如上所述的本公开的各种实施例，可以提供关于连接到相同网络的多个设备的使用模式的UI，并且可以通过UI来控制多个设备，使得可以增强用户的方便。
附图说明
图1是示出根据本公开的示例性实施例的IoT系统的视图；
图2a和图2b是示出电子设备的配置的示例的框图；
图3a和图3b是示出用于在电子设备中提供UI的方法的示例的视图；
图4是示出根据本公开的示例性实施例的用于控制多个设备的方法的视图；
图5是示出根据本公开的示例性实施例的根据分组的操作的视图；
图6是示出根据本公开的另一示例性实施例的根据分组的操作的视图；
图7是示出根据本公开的示例性的实施例的使用环境信息的方法的视图；
图8是示出根据本公开的示例性实施例的条件操作的视图；
图9是示出根据本公开的示例性实施例的用于在特定时间控制特定设备的操作的方法的视图；
图10是示出根据本公开的示例性实施例的用于提供详细信息等的方法的视图。
图11是示出根据本公开的示例性实施例的使用多个组的方法的视图；
图12是示出根据本公开的示例性实施例的用于使用睡眠模式信息和环境信息来控制设备的方法的视图；
图13是示出根据本公开的示例性实施例的与设备轴方向上的捏合或挤出交互有关的操作的视图；
图14是示出根据本公开的示例性实施例的与时间轴方向上的捏合或挤出交互有关的操作的视图；以及
图15是示出根据本公开的示例性实施例的电子设备的UI提供方法的流程图。
具体实施方式
这里将参照附图描述本公开的示例性实施例。然而，本公开的各种示例性实施例不限于特定实施例，并且应该被解释为包括本公开的示例性实施例的修改、等同物和/或替代方案。在附图的说明中，对于相似的元件使用相同或相似的附图标记。
不管元件的顺序和/或重要性如何，本公开中使用的诸如“第一”和“第二”的术语可用于区分各种元件。因此，对应元件的顺序或重要性不受这些表达的限制。例如，在不脱离本公开的权利范围的情况下，第一元件可以被命名为第二元件，并且类似地，第二元件可以被命名为第一元件。
将理解的是，当元件(例如，第一元件)与另一元件(例如，第二元件)“(可操作地或可通信地)耦合”或“连接”时，元件可以与另一元件直接耦合，并且在该元件与另一元件之间可以存在中间元件(例如，第三元件)。相反，将理解的是，当元件(例如，第一元件)与另一元件(例如，第二元件)“直接耦合”或“直接连接”时，在该元件与另一元件之间不存在中间元件(例如，第三元件)。
本公开中使用的术语仅仅是为了描述特定的示例性实施例的目的，而不旨在限制本公开。如本文所使用的，除非上下文另有明确指示，否则单数形式也旨在包括复数形式。除非另外定义，否则本文所用的所有术语(包括技术或科学术语)具有与相关领域的普通技术人员通常理解的相同的含义。在通用字典中定义的术语应该被解释为具有与相关技术的上下文含义相同的含义，并且不应该被解释为具有理想的或夸大的含义，除非它们在各种示例性实施例中被清楚地定义。根据情况，即使在示例性实施例中定义的术语也不应被解释为排除本公开的实施例。
在下文中，将参照附图详细描述本公开的各种实施例。
图1是示出根据本公开的示例性实施例的IoT系统10的视图。参考图1，IoT系统10包括电子设备100、多个设备200-1、200-2、200-3、200-4和网络设备300。
IoT系统10可以通过使用家庭网络系统来实现，该家庭网络系统以有线或无线的方式将家庭中的所有电气和电子设备彼此连接，从而使能其中的双向通信，但是经由网络将多个设备200-1、200-2、200-3、200-4彼此连接并对其进行控制的任何系统都是可应用的，而不限于此。例如，IoT系统10可以包括经由网络将办公室中的设备彼此连接并对其进行控制的系统。
如图所示，电子设备100可以通过使用诸如智能电话的移动电话来实现，但是不限于此。电子设备100可以通过使用诸如平板个人计算机(PC)、便携式多媒体播放器(PMP)、个人数字助理(PDA)、导航设备等的便携式的并拥有显示功能的各种类型的设备来实现。另外，电子设备100可以具有嵌入其中的触摸屏，并且可以被实现为通过使用手指或者笔(例如，手写笔)来运行应用。
电子设备100可以访问网络设备300并且接收多个设备200-1、200-2、200-3、200-4的使用模式。例如，电子设备100可以从网络设备300接收指示智能TV在工作日从下午6点到下午10点被打开的信息。
电子设备100可以显示从网络设备300接收的多个设备200-1、200-2、200-3、200-4的使用模式。例如，电子设备100可以通过使用表格或图表来显示关于已经使用一周的多个设备200-1、200-2、200-3、200-4的信息。
电子设备100可以将用于控制多个设备200-1、200-2、200-3、200-4的控制命令发送到网络设备300。例如，响应于打开智能TV的用户命令被输入，电子设备100可以向网络设备300发送对应的控制命令，并控制智能TV打开。
多个设备200-1、200-2、200-3、200-4可以是连接到网络的电子设备。例如，多个设备200-1、200-2、200-3、200-4可以是智能TV、冰箱、清洁器、洗衣机、灯、恒温器、计算机、烤箱、数码相框等。然而，这不应被视为限制，并且多个设备200-1、200-2、200-3、200-4不限于特定设备，只要它们拥有通信功能即可。
响应于操作状态被改变，多个设备200-1、200-2、200-3、200-4可以向网络设备300发送对应的信息。例如，响应于智能TV被打开，智能TV可以将智能TV被打开的时间、关于观看频道的信息等发送给网络设备300。
多个设备200-1、200-2、200-3、200-4可以从网络设备300接收控制命令，并且可以执行对应的操作。例如，响应于接收到打开智能TV的控制命令，智能TV可以被打开并且将智能TV被打开的时间、关于观看频道的信息等发送到网络设备300。
网络设备300可以通过使用网关设备、网络服务器、外部云服务器等来实现，并且可以控制IoT系统10中多个设备200-1、200-2、200-3、200-4的整体操作。也就是说，网络设备300可以控制与其通信的多个设备200-1、200-2、200-3、200-4的操作。例如，网络设备300可以通过使用家庭服务器、网络服务器等来实现。
网络设备300可以接收关于多个设备200-1、200-2、200-3、200-4的使用模式的信息，并且可以将该信息发送给电子设备100。例如，网络设备300可以向电子设备100发送智能TV打开的时间、关于观看频道的信息、关于冰箱打开的时间的信息、关于使用清洁器的时间的信息等等。
网络设备300可以基于从电子设备100接收到的控制命令来发送控制命令以控制多个设备200-1、200-2、200-3、200-4。可替换地，网络设备300可以转换所接收的控制命令并且可以将控制命令发送到多个设备200-1、200-2、200-3、200-4。例如，当如图1所示建立IoT系统10时，网络设备300可以存储控制命令以控制由智能TV、冰箱、清洁器和洗衣机提供的各种功能，并且可以将从电子设备100接收到的控制命令转换为与设备中的每一个相对应的控制命令，并且可以发送控制命令。
在上述示例中，电子设备100和多个设备200-1、200-2、200-3、200-4通过使用网络设备300彼此通信。然而，这不应该被视为限制。例如，在电子设备100和多个设备200-1、200-2、200-3、200-4最初通过使用网络设备300彼此连接之后，电子设备100和多个设备200-1、200-2、200-3、200-4可以在没有网络设备300的情况下彼此直接通信。可替换地，电子设备100和多个设备200-1、200-2、200-3、200-4可以被配置为从一开始就彼此直接通信。可替换地，电子设备100可以被配置为通过使用与网络设备300通信的外部服务器来与多个设备200-1、200-2、200-3、200-4通信。在这种情况下，电子设备100可以通过经由互联网等与外部服务器通信来接收多个设备200-1、200-2、200-3、200-4的使用模式，并且可以发送控制命令。
图2a是示出根据本公开的示例性实施例的电子设备100的配置的框图。
参考图2a，电子设备100包括显示器110和处理器120。
显示器110可以在处理器120的控制下显示关于多个设备的使用模式的信息。另外，显示器110可以显示指示多个设备被分组的图形用户界面(Graphic User Interface，GUI)。另外，显示器110可以显示UI以接收用户交互。
另外，显示器110可以通过使用液晶显示器(Liquid Crystal Display，LCD)面板、有机发光二极管(Organic Light Emitting Diode，OLED)等来实现，但是不限于此。另外，显示器110可以根据情况通过使用柔性显示器、透明显示器等来实现。
处理器120控制电子设备100的整体操作。
特别地，处理器120可以通过显示器110显示包括设备轴和时间轴的UI，并且基于连接到相同网络的多个设备的使用模式，提供与在设备轴和时间轴彼此交叉的区域中的至少一个设备的用户有关的信息。
处理器120可以通过对多个设备进行分类来设置设备轴。例如，处理器120可以将空调、风扇等分类为冷却和制热设备，并且可以将冰箱、微波炉等分类为厨房设备。处理器120可以连续地安排包括在相同类别中的设备。另外，处理器120可以将连续排列的设备分组。这样的类别信息可以被存储在电子设备100中，或者电子设备100可以根据使用模式来生成类别信息。
处理器120可以将时间轴设置为预定时间，并且可以显示UI。例如，处理器120可以显示指示在一周的不同日子的多个设备的使用模式的UI，或者可以显示指示在一天中的每个时间的多个设备的使用模式的UI。预定时间可以由用户选择。
涉及至少一个设备的使用的信息可以包括指示至少一个设备的操作状态是否改变的信息和关于至少一个设备的操作状态的详细信息中的至少一个。例如，当关闭的智能TV打开时，确定设备的操作状态被改变。另外，智能TV的观看频道、音量等级、亮度等可以参考关于设备的操作状态的详细信息。
指示设备的操作状态是否改变的信息以及关于设备的操作状态的详细信息可以根据设备的类型而变化。例如，在关闭的智能TV打开或频道改变时可以确定智能TV的操作状态被改变，或者当冰箱的温度改变时可以确定冰箱的操作状态被改变。另外，智能TV的详细信息可以是观看频道、音量等级、亮度等，并且冰箱的详细信息可以是冰箱的温度、或者冷冻库的温度。
处理器120可以基于多个设备的操作状态在UI上将属于时间轴的第一时间段的多个设备分组，并且可以提供分组的设备，并且响应于第一时间段到来，处理器120可以同时控制分组的多个设备。例如，处理器120可以基于指示主房间灯和咖啡壶星期一上午7点被打开的两个设备的操作状态来将两个设备的操作状态分组，并且可以控制在星期二早上7点打开这两个设备的控制命令。然而，这不应被视为限制，并且处理器120可以根据重复的操作状态对设备进行分组。例如，当指示主房间灯和咖啡壶在星期一上午7点打开的操作状态持续数周时，处理器120可以将两个设备的操作状态分组。处理器120可以对两个设备的操作状态进行分组，并且可以在下周一的上午7点而不是在周二的上午7点发送控制命令以打开这两个设备。可替换地，处理器120可以根据用户的对于分组的交互对用户选择的多个设备进行分组。
处理器120可以显示用于在视觉上反馈多个设备被分组的信息的GUI，并且响应于在第二时间段中输入拖动和放下GUI的用户交互，处理器120可以控制分组的多个设备以与第一时间段的操作状态相同的方式，在第二时间段中操作。可替换地，响应于GUI被触摸，处理器120可以显示GUI被选择，并且响应于再次触摸GUI，处理器120可以使与GUI相对应的分组的多个设备不活动。
设备轴可以被划分为多个设备的识别信息和与多个设备的功能有关的环境信息，并且处理器120可以提供与在设备轴和时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细的环境信息。
处理器130可以基于多个设备的操作状态，在UI上将属于时间轴的第三时间段的多个设备和详细环境信息分组，并且可以提供分组的设备，并且，响应于周围环境与详细环境相匹配的第三时间段到来，处理器120可以控制分组的多个设备以与第三时间段的操作状态中相同的方式操作。
这里，环境信息可以包括天气、室内温度、室外温度、湿度和照度中的至少一个。
响应于在设备轴和时间轴彼此交叉的区域中的任何一个上输入捏合交互，处理器120可以显示关于与设备轴相对应的设备的详细信息，以及根据时间轴中包括的环境信息的引导消息。例如，处理器120可以将设备的使用小时、功率量、功率比等显示为设备的详细信息。可替换地，处理器120可以根据指示降雨概率高的环境信息来显示要用户带伞的引导消息。
响应于在设备轴方向上输入捏合交互，处理器120可以根据设备的类型对多个设备分组，并且可以根据类型对分组的设备分类并显示设备，并且响应于在设备轴方向上输入挤出交互，处理器120可以显示多个设备的详细信息。例如，处理器120可以将风扇和空调器分组为冷却设备，并且可以显示冷却设备的通常使用模式。在这种情况下，处理器120可以将设备轴呈现为冷却设备、厨房设备、多媒体设备、清洁设备等。这里，响应于再次输入捏合交互，处理器120可以再次将上述组进行分组。例如，处理器120可将冷却设备、厨房设备和清洁设备分组为家用电器。
响应于在时间轴方向上输入捏合或挤出交互，处理器120可以改变时间轴的时间单位，并且可以将与所显示的至少一个设备的使用有关的信息改变为与改变的时间单位相对应的信息，并且可以显示该信息。时间单位可以是点钟(o’clock)、日、星期、月、年等，也可以是用户指定的特定时段。
图2b是示出电子设备100的详细配置的示例的框图。参考图2b，电子设备100可以包括显示器110、处理器120、储存器130、用户界面140、通信单元150、音频处理器160、视频处理器170、扬声器180、按钮181、相机182和麦克风183。从图2b所示的元件当中，将不详细描述与图2a中的元件相同的元件。
处理器120可以通过使用存储在储存器130中的各种程序来控制电子设备100的整体操作。
具体而言，处理器120包括随机存取存储器(Random Access Memory，RAM)121、只读存储器(Read Only Memory，ROM)122、主中央处理单元(Central Processing Unit，CPU)123、图形处理器124、第一至第n接口125-1至125-n和总线126。
RAM 121、ROM 122、主CPU 123、图形处理器124以及第一至第n接口125-1至125-n可以经由总线126彼此连接。
第一至第n接口125-1至125-n可以与上述元件连接。接口中的一个可以是经由网络连接到外部设备的网络接口。
主CPU 123可访问储存器130并使用存储在储存器130中的操作系统(O/S)来执行启动。另外，主CPU 123通过使用存储在储存器130中的各种程序来执行各种操作。
ROM 122存储用于启动系统的一组指令。响应于输入打开命令和供应电力，主CPU123根据存储在ROM 122中的指令将存储在储存器130中的O/S复制到RAM 121上，运行O/S并启动系统。响应于完成启动，主CPU 123将存储在储存器130中的各种应用程序复制到RAM121上，运行复制到RAM121上的程序，并执行各种操作。
图形处理器124可以通过使用计算器(未示出)和渲染器(未示出)来生成包括诸如图标、图像、文本等的各种对象的屏幕。计算器(未示出)基于接收到的控制命令，根据屏幕的布局来计算要显示的对象的属性值，诸如坐标值、形状、尺寸、颜色等。渲染器(未示出)基于由计算器计算的属性值来生成包括对象的各种布局的屏幕。由渲染器(未示出)生成的屏幕可以被显示在显示器110的显示区域上。
处理器120的上述操作可以由存储在储存器130中的程序来执行。
储存器130可以存储各种数据，诸如用于驱动电子设备100的O/S软件模块、UI模块、关于多个设备的使用模式的信息等。具体地，储存器130可以存储关于根据多个设备的类型而分类的组的信息。这样的信息可以从外部设备接收，或者可以由用户设置。
在这种情况下，处理器120可以基于存储在储存器130中的信息来处理并显示输入的图像。
用户界面140可以接收各种用户交互。当通过使用基于触摸的便携式终端来实现电子设备100时，可以通过使用形成具有触摸板的层间结构的触摸屏来实现用户界面140。在这种情况下，用户界面140可以用作上述显示器110。
通信单元150被配置为以各种通信方法与各种类型的外部设备进行通信。通信单元150包括WiFi芯片151、蓝牙芯片152、无线通信芯片153、近场通信(Near FieldCommunication，NFC)芯片154等。处理器120可以使用通信单元150与各种类型的外部设备进行通信。
WiFi芯片151和蓝牙芯片152分别以WiFi方法和蓝牙方法进行通信。当使用WiFi芯片151或蓝牙芯片152时，可以首先交换诸如SSID和会话密钥的各种连接信息，并且可以使用连接信息建立通信，然后可以交换各种信息。无线通信芯片153是指根据诸如IEEE、Zigbee、第三代(3rd generation，3G)、第三代合作伙伴计划(3rd generationpartnership project，3GPP)、长期演进(Long Term Evolution，LTE)等的各种通信标准进行通信的芯片。NFC芯片154指的是使用诸如135kHz、13.56MHz、433MHz、860-960MHz、和2.45GHz的各种RF-ID频带当中的13.56MHz的频段以NFC方法操作的芯片。
通信单元150可以执行与外部设备的单向通信或双向通信。当执行单向通信时，通信单元150可以从外部设备接收信号。当执行双向通信时，通信单元150可以从外部设备接收信号并且可以将信号发送到外部设备。
音频处理器160是用于处理音频数据的元件。音频处理器160可以对音频数据执行各种处理操作，诸如解码、放大、噪声过滤等。
视频处理器170是用于处理视频数据的元件。视频处理器170可以对视频数据执行各种图像处理操作，诸如解码、缩放、噪声过滤、帧频转换、分辨率转换等。
扬声器180是输出各种通知声音或语音消息以及在音频处理器160中处理的各种音频数据的元件。
按钮181可以是形成在电子设备100的主体的外部的某区域(诸如前表面、侧表面、后表面等)上的各种类型的按钮，例如，机械按钮、触摸板、轮等。
相机182被配置为在用户的控制下捕捉静止图像或移动图像。相机182可以被实现为多个，包括前表面相机和后表面相机。
麦克风183被配置为接收用户语音或其他声音并将其转换为音频数据。
另外，根据示例性实施例，电子设备100可以还包括与USB连接器连接的USB端口、用于与各种外部终端(诸如耳机、鼠标、局域网(Local Area Network，LAN)等)连接的各种外部输入端口、用于接收和处理DMB信号的数字多媒体广播(Digital MultimediaBroadcasting，DMB)芯片、各种传感器等，尽管它们在图2b中未被示出。
在下文中，将描述用于容易理解本公开和各种示例性实施例的基本配置。
图3a和图3b是示出用于在电子设备100中提供UI的方法的示例的视图。
如图3a所示，处理器120可以通过显示器110显示包括设备轴和时间轴的UI，并且基于连接到相同网络的多个设备的使用模式，提供与设备轴和时间轴彼此交叉的区域中的至少一个设备的使用有关的信息。例如，处理器120可以根据每个时间段来显示多个设备的使用模式。
这里，与至少一个设备的使用有关的信息可以是关于至少一个设备的操作状态的详细信息。例如，处理器120可以显示洗衣机的使用小时、使用模式(正常模式、寝具模式、轻柔模式等)等作为详细信息。
可替换地，与至少一个设备的使用有关的信息可以是指示至少一个设备的操作状态是否改变的信息，如图3b所示。例如，根据设备1(事物1)在7点打开(310)并且在8点关闭(320)的使用模式，处理器120可以指示操作状态在对应的时间改变。设备1在10点不改变操作状态，并且处理器120可以在10点钟处不显示设备1的任何东西。在上述示例中，仅仅基于打开和关闭操作来确定操作状态是否被改变，但是这不应该被认为是限制的。例如，在空调的情况下，处理器120可以基于温度的变化确定操作状态是否改变，并且在智能TV的情况下，处理器120可以基于频道或音量的变化确定操作状态被改变。
可替换地，处理器120可以显示包括指示至少一个设备的操作状态是否改变的信息和关于至少一个设备的操作状态的详细信息两者的UI。
响应于检测到新设备，处理器120可以基于存储在储存器130中的信息来确定用于显示新设备的位置。处理器120可以基于新设备的产品名称、制造编号、序列号等来确定新设备的类型。例如，当新设备的类型是冰箱时，处理器120可以在所显示的其他厨房设备附近显示冰箱的使用模式。
可替换地，响应于检测到新设备，处理器120可以基于现有使用模式和新设备的使用模式对新设备进行分类。例如，响应于存在指示厨房灯和烤箱在上午7点被打开的使用模式信息，并且检测到的新设备在早上7点被重复使用，处理器120可以将新设备放置在厨房灯和烤箱附近，并且可以显示新设备的使用模式信息。
处理器120可以基于多个设备的操作状态，在UI上将属于时间轴的相同时间段的多个设备分组，并且可以提供组。特别地，处理器120可以显示用于在视觉上反馈指示多个设备被分组的信息的GUI。例如，处理器120可以基于设备1(事物1)、设备3(事物3)和设备4(事物4)的操作状态在9点钟被改变而将它们分组，并且可以显示用于在视觉上反馈指示对应设备被分组的信息的GUI 330。可替换地，处理器120可以仅响应于9点钟处的设备1(事物1)、设备3(事物3)和设备4(事物4)的操作状态的改变被重复超过预定的次数，而将对应设备分组。可替换地，处理器120可以响应于存在用于分组的用户输入而将对应的设备分组。
处理器120可以将设备轴划分为多个设备的识别信息和与多个设备的功能有关的环境信息，并且可以将其显示。处理器120可以提供与设备轴和时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细环境信息。
这里，环境信息可以包括天气、室内温度、室外温度、湿度和照度中的至少一个。例如，处理器120可以根据每个时间段显示温度、湿度信息等。处理器120可以从多个设备、连接到IoT系统10的传感器和外部服务器中的至少一个接收环境信息。可替换地，处理器120可以直接测量环境信息。
可替换地，处理器120可以根据每个时间段显示温度、湿度等被改变。例如，响应于温度从20度增加到21度，处理器120可以显示在对应的时间段中温度被改变。可替换地，处理器120可以为每个环境信息设置特定部分，并且可以确定环境信息是否改变。例如，处理器120可以基于5度设置多个温度段，并且可以响应于温度从21度改变到25度而确定温度没有改变。
根据触摸所显示的UI的某个点的用户交互，处理器120可以改变与对应点相对应的设备的控制命令。例如，处理器120可以通过触摸与下午7点的智能TV相对应的点来生成控制命令。下面将提供对此的详细描述。
处理器120可以基于多个设备的操作状态，在UI上将属于时间轴的相同时间段的多个设备和详细环境信息分组，并提供组。特别地，处理器120可以显示用于在视觉上反馈指示多个设备和详细环境信息被分组的信息的GUI。例如，处理器120可以基于设备2(事物2)、设备3(事物3)的操作状态和详细环境信息2(数据2)在10点时被改变而将对应设备和详细环境信息2(数据2)分组，并且可以显示用于在视觉上反馈指示对应设备和详细环境信息被分组的信息的GUI 340。可替换地，处理器120可以仅响应于设备1(事物1)、设备3(事物3)、设备4(事物4)的操作状态和详细环境信息在9点钟处的改变被重复超过预定次数而将对应设备和详细环境信息2(数据2)分组。可替换地，处理器120可以响应于存在用于分组的用户输入而将对应的设备和详细的环境信息分组。下面将描述通过使用GUI来控制分组的多个设备的方法。
图4是示出根据本公开的示例性实施例的用于控制多个设备的方法的视图。
如图4所示，处理器120可以基于多个设备的操作状态，在UI上将属于时间轴的第一时间段的多个设备分组，并且可以提供组，并且响应于第一时间段到来，处理器120可以同时控制分组的多个设备。例如，处理器120可以控制，使得基于指示在上午7点主房间灯、主房间时钟和咖啡壶被打开并且在30度的温度下使用水的使用模式410，在第二天上午7点主房间灯、主房间时钟和咖啡壶被打开并且水的温度被调节到30度。
可替换地，处理器120可以控制，以使得多个设备在一个星期之后的相同天或者在一个月之后的相同日期的上午7点以相同的方式操作。用户可以设置处理器120控制多个设备的时间。
响应于其中在上午7点主房间灯、主房间时钟和咖啡壶被打开并且的水温为30度的使用模式被重复多次，处理器120可以使用对应的使用模式控制多个设备。例如，响应于在上午7点相同模式被重复三次以上，处理器120可以使用对应的使用模式来控制多个设备。
用于确定使用模式是否被重复的时间段可以是一个小时的基础。例如，处理器120可以将从上午7点到上午7点59分的设备的使用确定为7点钟时间段的使用模式。因此，处理器120可以将在上午7点主房间灯打开的情况和在上午7点30分主房间灯打开的情况两者确定为相同时间段的使用模式。时间段可以由用户设置。
图5是示出根据本公开的示例性实施例的根据分组的操作的视图。
如图5所示，处理器120可以显示用于在视觉上反馈指示多个设备被分组的信息的GUI 510，并且响应于拖动GUI 510并将其放入第二时间段的用户交互被输入，处理器120可以控制，使得分组的多个设备在与第一时间段中相同的操作状态下在第二时间段中操作。例如，响应于拖动对在上午7点的多个设备的使用模式分组的GUI 510并且将GUI 510放入下午8点段的交互被输入，处理器120可以控制，使得在上午7点的多个设备的操作以相同的方式在下午8点执行。
处理器120可以将第一时间段的操作状态改变为第二时间段，并且根据拖动和放入交互来存储操作状态。响应于第二时间段到来，处理器120可以基于所存储的信息发送控制命令。
处理器120可以将第一时间段的操作状态改变为第二时间段并且根据拖动和放入交互来将其存储，并且可以控制以使得多个设备的操作状态在第一时间段中不改变。但是，这不应被视为限制。处理器120可以将第一时间段的操作状态复制到第二时间段中，并且可以控制多个设备根据第一时间段中的使用模式操作。因此，多个设备的操作状态可以在另一时间段中被同样地使用。
图6是示出根据本公开的另一示例性实施例的根据分组的操作的视图。
参考图6，处理器120可以显示用于在视觉上反馈指示多个设备被分组的信息的GUI 610，并且响应于触摸GUI 610的时间段620的用户交互被输入，处理器120可以指示对应的GUI 610被选择。例如，处理器120可以改变对应的GUI 610的边界的颜色，或者可以使对应的GUI 610的内部变暗(shade)。
响应于触摸选择的GUI 610的点630的用户交互被输入，处理器120可以在选择的GUI 610的时间段期间不改变多个设备的操作状态。处理器120可以不一次性改变多个设备的操作状态。例如，处理器120可以在第二周期间不改变多个设备的操作状态，但是可以在下个月的第二周期间改变多个设备的操作状态。可替换地，处理器120可以删除对应时间段中的多个设备的操作状态，并且可以不永久地改变操作状态。然而，响应于新的使用模式被重复，处理器120可以在对应的时间段中显示新的使用模式。
可替换地，处理器120可以在选择的GUI 610的时间段期间使多个设备不活动。例如，处理器120可以关闭所有多个设备，而不是改变多个设备的操作状态。在这种情况下，在打开的设备被关闭的操作状态和打开的设备的设置被改变的操作状态之间可能存在差异。
图7是示出根据本公开的示例性实施例的使用环境信息的方法的视图。
参考图7，设备轴可以划分为多个设备的识别信息和与多个设备的功能有关的环境信息，并且处理器120可以提供与在设备轴与时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细环境信息。这里，环境信息可以包括天气、室内温度、室外温度、湿度和照度中的至少一个。
处理器120可以基于多个设备的操作状态，在UI上将属于时间轴的第三时间段的多个设备和详细环境信息分组，并且可以提供组。处理器120可以显示用于在视觉上反馈指示多个设备和详细环境信息被分组的信息的GUI710。例如，处理器120可以将指示在上午7点主房间灯、主房间时钟和咖啡壶被打开并且水温是30度以及晴朗的天气和24度的室内温度的使用模式410分组。
响应于其中周围环境与详细环境相同的第三时间段到来，处理器120可控制分组的多个设备以与第三时间段中相同的操作状态操作。例如，响应于第二天早上7点的晴朗的天气以及室内温度为24度，处理器120可以进行控制，使得主房间灯、主房间时钟和咖啡壶被打开，并且水温调整到30度。然而，这不应该被认为是限制性的，并且处理器120可以仅基于环境信息来控制多个设备。例如，响应于天气晴朗并且室内温度为24度，虽然不是早晨7点，但是处理器120可以控制，使得主房间灯、主房间时钟和咖啡壶被打开，并且水温调整到30度。
处理器120可以仅将与特定环境信息有关的一些设备分组。例如，处理器120可以将环境信息的温度信息以及空调和风扇分组。可替代地，处理器120可以将环境信息的细尘浓度和清洁器分组。
用于通过使用GUI 710来控制多个设备的操作的配置与上述相同，并且省略其描述。
图8是示出根据本公开的示例性实施例的条件操作的视图。
如图8所示，响应于设备的操作状态被改变，处理器120可以依次改变其他设备的操作状态。例如，响应于上午12点奶壶被使用，处理器120可打开护理灯并控制空调达到24度。另外，响应于护理灯被打开，处理器120可使门铃和智能TV取消静音。
响应于停止奶壶的使用，处理器120可以控制护理灯和空调被关闭。另外，响应于护理灯被关闭，处理器120可以使门铃和智能TV静音。处理器120可以基于重复的使用模式运行这样的条件操作。可替换地，该条件操作可以由用户存储。
处理器120可以通过在执行条件操作的多个设备上显示箭头(未示出)来指示条件操作被执行。例如，处理器120可以显示从奶壶到指示上午12点的护理灯和空调的区域830的箭头。另外，处理器120可以显示从指示上午12点的护理灯和空调的区域830到指示上午12点的门铃和智能TV的区域840的箭头。
处理器120可以区分夜间区域810和日间区域820，并且可以使得夜间区域810和日间区域820不同地操作。例如，响应于上午9点使用奶壶，处理器120可以关闭护理灯。这里，夜间区域810和日间区域820之间的时间划分可以由用户设置。
图9是示出根据本公开的示例性实施例的用于在特定时间控制特定设备的操作的方法的视图。
如上所述，处理器120可以基于多个设备的使用模式信息来控制多个设备。可替换地，处理器120可以通过用户的设置来控制多个设备。
如图9所示，响应于在显示的UI上触摸区域并保持触摸的交互被输入，处理器120可以首先确定是否在对应的区域上设置了使用模式。
响应于没有在对应的区域上设置使用模式，处理器120可以提供用于设置新的使用模式的菜单。例如，响应于触摸与下午3点的智能TV相对应的区域910并且保持触摸的交互被输入，处理器120可以显示新任务生成菜单(新任务)920。另外，响应于新任务生成菜单(新任务)920被选择，处理器120可以显示包括频道设置、音量设置和服务设置的菜单930。响应于服务设置被选择，处理器120可以显示包括新闻、电影和戏剧的子菜单940。另外，响应于新闻被选择，处理器120可以最终显示指示新的使用模式被设置的GUI 950。在上述示例中，已经通过示例描述了智能TV，但是菜单类型和内容可以根据设备而改变。
响应于在对应区域上设置使用模式，处理器120可以显示用于改变使用模式以引起用户命令的菜单。例如，处理器120可以根据触摸输入打开或关闭简单地打开或关闭的设备。可替换地，响应于存在各种选择选项，诸如用于设置特定数值的操作，处理器120可以显示对应的菜单。另外，如上所述，可以显示分级菜单。
图10是示出根据本公开的示例性实施例的用于提供详细信息等的方法的视图。
如图10所示，响应于在显示的UI上在设备轴和时间轴彼此交叉的区域中的一个上输入捏合交互，处理器120可以根据关于与设备轴相对应的设备的详细信息和包括在时间轴中的环境信息来显示引导消息。
处理器120可以在设备上显示操作状态、设置状态、功率量、功率比等作为详细信息。例如，响应于在与下午6点的奶壶相对应的区域上输入捏合交互，处理器120可以显示必要的奶、必需的奶粉、功率量、功率比等作为关于下午6点的奶壶的详细信息。这里，处理器120可以存储关于必要的奶、必要的奶粉等的信息。可替换地，用户可以初始设置关于必要的奶、必要的奶粉等的信息。
处理器120可以根据时间轴中包括的环境信息来显示引导消息。例如，处理器120可以基于下午6点的外部温度来显示表明“需要雨伞”的消息。可替换地，处理器120可以基于下午6点的室内温度显示表明“需要驱动空调”或“需要通风”的消息。
图11是示出根据本公开的示例性实施例的使用多个组的方法的视图。
如图11所示，处理器120可以基于多个设备的使用模式来显示多个组。响应于选择多个组的用户交互被输入，处理器120可以将选择的多个组1110、1120、1130显示为与其他组区分开。例如，处理器120可以改变所选择的多个组1110、1120、1130的边界的颜色，或者可以使所选择的多个组1110、1120、1130的内部变暗。
响应于拖动所选择的多个组1110、1120、1130并将其放入另一时间段中的用户交互被输入，处理器120可以控制包括在所选择的多个组1110、1120、1130中的多个设备以在另一时间段中相同的方式操作。用于使用所选择的多个组1110、1120、1130的方法与上述使用GUI的方法类似，因此省略其详细描述。
图12是示出根据本公开的示例性实施例的用于使用睡眠模式信息和环境信息来控制设备的方法的视图。
如图12所示，处理器120可以通过传感器接收关于用户的睡眠状态的信息，并且可以显示信息。例如，处理器120可以显示用户的睡眠小时等。
响应于在指示睡眠小时的区域的任何一个上输入捏合交互1210，处理器120可以基于环境信息来分析用户的睡眠小时，并且可以显示分析的结果。例如，处理器120可以基于温度和湿度信息来分析睡眠不足，并且可以确定问题是温度。另外，处理器120可以显示表明“你需要多睡两个小时。你需要适当地控制温度。”的消息1220。
响应于拖动上述消息1220并将消息1220放入与冷却设备相对应的区域中的用户交互被输入，处理器120可自动控冷却却设备。例如，响应于拖动上述消息1220并将消息1220放入与空调相对应的区域的用户交互被输入，处理器120可以生成用于驱动空调的控制命令或用于降低空调的温度的控制命令，并且可以显示对应的GUI 1230。响应于输入触摸对应的GUI 1230的用户交互，处理器120可以显示空调的操作状态。
可以基于存储在电子设备100中的日程信息来执行这种操作。例如，响应于在电子设备100中存储学校考试日程，处理器120可以在考试期间减少与智能TV、互联网有关的使用小时，并可以显示使用小时。
图13是示出根据本公开的示例性实施例的与设备轴方向上的捏合或挤出交互有关的操作的视图。
如图13所示，响应于在设备轴方向上输入捏合交互，处理器120可以根据设备的类型对多个设备进行分组，并通过类型对分组的组分类并显示组。例如，处理器120可以将空调、风扇、加热器等分类为冷却和制热设备，并且可以将冰箱、微波炉等分类为厨房设备。
储存器130可以存储指示多个设备被分成大组、中组、小组和单个设备的信息。处理器120可以基于存储在储存器130中的信息来显示与设备轴方向上的捏合交互相对应的UI屏幕。
响应于在设备轴方向上输入挤出交互，处理器120可以显示多个设备的详细信息。例如，处理器120可以显示设备的使用小时、功率量、功率比作为详细信息。
另外，处理器120可以显示每个设备的特定设置值。例如，处理器120可以显示智能TV的频道或音量信息、风扇的风力强度或旋转信息等。
在图13中，处理器120可以显示被分组为两组的电子设备以及详细信息。然而，这只是一个示例，并且其他设置是可能的。响应于在显示多个组的情况下在设备轴方向上输入挤出交互，可以将多个组划分为单独的设备，并且可以显示设备。
图14是示出根据本公开的示例性实施例的与在时间轴方向上的捏合或挤出交互有关的操作的视图。
如图14所示，响应于在时间轴方向上输入捏合或挤出交互，处理器120可以改变时间轴的时间单位。例如，处理器120可将一周的天或一天的点钟设置为时间单位。时间单位可以由用户选择。
处理器120可以将与显示的至少一个设备的使用有关的信息改变为与改变的时间单位相对应的信息。例如，处理器120可以将以点钟为基础显示的信息改变为以每年为基础的信息，并且可以显示使用模式的平均。可替换地，处理器120可以采样一些使用模式并显示采样的使用模式。
图15是示出根据本公开的示例性实施例的用于提供电子设备的UI的方法的流程图。
首先，该方法可以基于连接到相同网络的多个设备的使用模式来生成UI(S1510)，其中UI包括设备轴和时间轴，并且提供与设备轴和时间轴彼此交叉的区域中的至少一个设备的使用有关的信息。另外，该方法可以显示生成的UI(S1520)。
这里，与至少一个设备的使用有关的信息可以包括指示至少一个设备的操作状态是否改变的信息和有关至少一个设备的操作状态的详细信息中的至少一个。
该方法可以还包括：基于多个设备的操作状态，在UI上将属于时间轴的第一时间段的多个设备分组，并提供组；并且响应于第一时间段到来，同时控制分组的多个设备。
分组和提供可以还包括显示用于在视觉上反馈指示分组的多个设备被分组的信息的GUI，并且响应于拖动GUI并将GUI放入第二时间段的用户交互被输入，控制分组的多个设备在第二时间段中以与第一时间段中的操作状态相同的操作状态操作。
设备轴可以被划分为多个设备的识别信息和与多个设备的功能有关的环境信息，并且该方法可以还包括提供与在设备轴和时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细的环境信息。
另外，该方法可以还包括：基于多个设备的操作状态，在UI上将属于时间轴的第三时间段的多个设备和详细环境信息分组，并且提供组；并且响应于其中周围环境与详细环境相同的第三时间段到来，控制分组的多个设备以与第三时间段中的操作状态相同的操作状态操作。
这里，环境信息可以包括天气、室内温度、室外温度、湿度和照度中的至少一个。
该方法可以还包括：响应于在设备轴和时间轴彼此交叉的区域中的任何一个上输入捏合交互，根据关于与设备轴相对应的设备的详细信息和包括在时间轴中的环境信息来显示引导消息。
响应于在设备轴方向上输入捏合交互，显示(S1520)可以根据设备的类型对多个设备分组，并且根据类型对分组的组分类并且显示组，并且响应于在设备轴方向上输入挤出交互，显示可以显示多个设备的详细信息。
另外，显示(S1520)可以包括：响应于在时间轴方向上输入捏合或挤出交互，改变时间轴的时间单位、以及将与显示的至少一个设备的使用有关的信息改变为与改变的时间单位相对应的信息。
根据如上所述的本公开的各种实施例，可以提供有关连接到相同网络的多个设备的使用模式的UI，并且可以通过UI来控制多个设备，使得可以增强用户的方便。
在上述示例中，原样使用多个设备的使用模式，并且使用重复的使用模式。但是，这不应被视为限制。例如，电子设备可以使用聚类、分类、频繁模式挖掘等以便从多个设备的使用模式中提取有意义的使用模式。电子设备可以允许多个设备的使用模式的类似使用模式聚类，并且响应于新的使用模式被输入，电子设备可以基于聚类使用模式对新使用模式进行分类，并且可以从多个设备的使用模式中挖掘经常使用的模式。电子设备可以通过使用提取的有意义的使用模式来控制多个设备。
在上述示例中，电子设备基于使用模式操作。但是，特定的设备可能会发生故障。例如，响应于虽然主房间灯在上午7点应该打开，但是未被打开，电子设备可以发送控制命令来打开主房间灯。响应于即使在控制命令被发送了预定次数之后，主房间灯未打开，电子设备可以显示错误消息。另外，电子设备可以以预定方法通知用户故障发生。例如，用户可以设置电子设备响应于故障发生而向用户的智能电话发送消息。
上述根据本公开的各种示例性实施例的电子设备的UI提供方法可以被实现为可在计算机中运行的程序代码，并且可以被存储在各种非暂时性计算机可读介质中，并且可以提供给每个服务器或设备以由处理器运行。
例如，提供了一种存储程序的非暂时性计算机可读介质，该程序顺序地执行以下步骤：基于连接到相同网络的多个设备的使用模式来生成UI，其中UI包括设备轴和时间轴，并且提供与设备轴和时间轴彼此交叉的区域中的至少一个设备的使用有关的信息；并显示生成的UI。
非暂时性计算机可读介质指的是半永久性地存储数据而不是在非常短的时间内存储数据的介质，诸如寄存器、高速缓存、存储器等，并且可由装置读取。具体而言，上述各种应用或程序可以存储在诸如光盘(Compact Disc，CD)、数字多用盘(Digital VersatileDisk，DVD)、硬盘、蓝光盘、通用串行总线(Universal Serial Bus，USB)、存储器卡、ROM等的非暂时性计算机可读介质中，并且可以被提供。
虽然已经示出和描述了本公开的优选实施例，但是本公开不限于上述特定实施例。本领域的技术人员能够在不脱离权利要求所声称的本发明的范围的情况下进行各种改变，而且，改变后的实施例不应该被理解为与本公开的技术思想或预期分离。

Claims (15)

1.一种电子设备，包括：
显示器；和
处理器，被配置为基于连接到相同网络的多个设备的使用模式通过所述显示器显示UI，其中所述UI包括设备轴和时间轴，并且提供与在设备轴和时间轴彼此交叉的区域中的至少一个设备的使用有关的信息。
2.如权利要求1所述的电子设备，其中与所述至少一个设备的使用有关的信息包括指示所述至少一个设备的操作状态是否改变的信息、和有关所述至少一个设备的操作状态的详细信息中的至少一个。
3.如权利要求1所述的电子设备，其中，所述处理器被配置为基于所述多个设备的操作状态，在所述UI上将属于所述时间轴的第一时间段的多个设备分组，并且提供组，并且响应于第一时间段到来，处理器被配置为同时控制分组的多个设备。
4.如权利要求3所述的电子设备，其中所述处理器被配置为显示用于在视觉上反馈指示分组的多个设备被分组的信息的GUI，以及
其中，响应于拖动所述GUI并将所述GUI放入第二时间段的用户交互被输入，所述处理器被配置为控制所述分组的多个设备在所述第二时间段中以与所述第一时间段中的操作状态相同的操作状态操作。
5.如权利要求1所述的电子设备，其中，所述设备轴被划分为所述多个设备的识别信息和与所述多个设备的功能有关的环境信息，并且
其中所述处理器被配置为提供与在所述设备轴和所述时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细环境信息。
6.如权利要求5所述的电子设备，其中，所述处理器被配置为基于所述多个设备的操作状态，在UI上将属于所述时间轴的第三时间段的多个设备和详细环境信息分组，并且提供组，并且响应于其中周围环境与详细环境相同的第三时间段到来，处理器被配置为控制分组的多个设备以与在第三时间段的操作状态相同的操作状态操作。
7.如权利要求5所述的电子设备，其中所述环境信息包括天气、室内温度、室外温度、湿度和照度中的至少一个。
8.如权利要求5所述的电子设备，其中，响应于在所述设备轴和所述时间轴彼此交叉的区域中的任何一个区域上输入捏合交互，所述处理器被配置为根据关于与设备轴相对应的设备的详细信息以及包括在时间轴中的环境信息显示引导消息。
9.如权利要求1所述的电子设备，其中，响应于在设备轴方向上输入捏合交互，所述处理器被配置为根据所述设备的类型对所述多个设备进行分组，并且根据类型将所分组的组分类并且显示所述组，以及
其中，响应于在设备轴方向上输入挤出交互，处理器被配置为显示所述多个设备的详细信息。
10.如权利要求1所述的电子设备，其中，响应于在时间轴方向上输入捏合或挤出交互，所述处理器被配置为改变所述时间轴的时间单位，并且将与所显示的至少一个设备的使用有关的信息改变为与所改变的时间单位相对应的信息。
11.一种用于提供电子设备的UI的方法，所述方法包括：
基于连接到相同网络的多个设备的使用模式生成UI，其中，所述UI包括设备轴和时间轴，并且提供与在所述设备轴和所述时间轴彼此交叉的区域中的至少一个设备的使用有关的信息；以及
显示所生成的UI。
12.如权利要求11所述的方法，其中与所述至少一个设备的使用有关的信息包括指示所述至少一个设备的操作状态是否改变的信息和有关所述至少一个设备的操作状态的详细信息中的至少一个。
13.如权利要求11所述的方法，还包括：
基于多个设备的操作状态，在所述UI上将属于所述时间轴的第一时间段的多个设备分组，并提供组；以及
响应于第一时间段到来，同时控制所分组的多个设备。
14.如权利要求13所述的方法，其中，所述分组和提供还包括显示用于在视觉上反馈指示所分组的多个设备被分组的信息的GUI，并且响应于拖动所述GUI并将所述GUI放入第二时间段的用户交互被输入，控制所分组的多个设备在第二时间段中以与第一时间段中的操作状态相同的操作状态操作。
15.如权利要求11所述的方法，其中，所述设备轴被划分为所述多个设备的识别信息和与所述多个设备的功能有关的环境信息，以及
其中所述方法还包括提供与在所述设备轴和所述时间轴的环境信息彼此交叉的区域中的环境信息相对应的详细环境信息。
CN201680055257.4A 2015-09-25 2016-09-21 电子设备及其用户界面提供方法 Active CN108139850B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020150136989A KR20170037409A (ko) 2015-09-25 2015-09-25 전자 장치 및 그 ui 제공 방법
KR10-2015-0136989 2015-09-25
PCT/KR2016/010495 WO2017052168A1 (ko) 2015-09-25 2016-09-21 전자 장치 및 그 ui 제공 방법

Publications (2)

Publication Number Publication Date
CN108139850A true CN108139850A (zh) 2018-06-08
CN108139850B CN108139850B (zh) 2021-04-30

Family

ID=58386424

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680055257.4A Active CN108139850B (zh) 2015-09-25 2016-09-21 电子设备及其用户界面提供方法

Country Status (5)

Country Link
US (1) US10678420B2 (zh)
EP (1) EP3355172B1 (zh)
KR (1) KR20170037409A (zh)
CN (1) CN108139850B (zh)
WO (1) WO2017052168A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109918273A (zh) * 2019-01-25 2019-06-21 深圳绿米联创科技有限公司 一种数据显示方法、装置、终端设备及存储介质

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11057238B2 (en) 2018-01-08 2021-07-06 Brilliant Home Technology, Inc. Automatic scene creation using home device control
KR102366699B1 (ko) * 2018-02-02 2022-02-23 삼성전자주식회사 사용자 단말 장치 및 그를 제어하는 제어 방법
JP7268410B2 (ja) * 2019-03-11 2023-05-08 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
KR102189716B1 (ko) * 2019-05-29 2020-12-11 주식회사 테크앤 시나리오 보드를 이용한 IoT 디바이스 제어 방법
US11528028B2 (en) 2020-01-05 2022-12-13 Brilliant Home Technology, Inc. Touch-based control device to detect touch input without blind spots
US11755136B2 (en) 2020-01-05 2023-09-12 Brilliant Home Technology, Inc. Touch-based control device for scene invocation
CN112035720B (zh) * 2020-08-13 2024-08-23 海尔优家智能科技（北京）有限公司 事件提醒的触发方法和装置、存储介质及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102508848A (zh) * 2011-09-30 2012-06-20 靳鑫 一种人机智能交互方法及系统
CN102855052A (zh) * 2012-08-24 2013-01-02 鸿富锦精密工业（深圳）有限公司 文件显示装置及显示方法
KR20140147059A (ko) * 2013-06-18 2014-12-29 삼성전자주식회사 사용자 단말 장치 및 그 홈 네트워크 관리 방법
US20150019714A1 (en) * 2013-07-11 2015-01-15 Neura, Inc. Physical environment profiling through internet of things integration platform
WO2015076609A1 (en) * 2013-11-21 2015-05-28 Samsung Electronics Co., Ltd. Method and apparatus for controlling home devices on group basis in a home network system

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101740440B1 (ko) * 2010-12-24 2017-05-26 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR101718894B1 (ko) 2011-11-29 2017-03-23 삼성전자주식회사 기기 제어를 위한 유저 인터페이스 제공 시스템 및 방법
CN103179650B (zh) 2011-12-23 2015-11-25 国际商业机器公司 物联网中的高效的面向服务实例的能量管理系统和方法
KR102062580B1 (ko) 2012-12-13 2020-02-11 삼성전자주식회사 홈 네트워크 시스템에서 디바이스 제어 방법 및 장치
KR20140076954A (ko) 2012-12-13 2014-06-23 한국전자통신연구원 사람과 사물간 소통 서비스 방법 및 시스템
KR20140118925A (ko) 2013-03-29 2014-10-08 이순호 사물 인터넷 클라우드 서비스를 위한 애플리케이션의 개발 시스템 및 사물 인터넷 클라우드 서비스 방법과 그 시스템.
US10564813B2 (en) 2013-06-18 2020-02-18 Samsung Electronics Co., Ltd. User terminal apparatus and management method of home network thereof
US10181960B2 (en) 2013-09-05 2019-01-15 Samsung Electronics Co., Ltd. Method and apparatus for configuring and recommending device action using user context
KR20150032151A (ko) 2013-09-17 2015-03-25 한국전자통신연구원 사물 웹 환경의 프로세스 기반 사물협업 장치 및 방법
KR102252258B1 (ko) * 2013-11-21 2021-05-14 삼성전자주식회사 홈 네트워크 시스템에서 홈 디바이스들의 그룹 제어 방법 및 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102508848A (zh) * 2011-09-30 2012-06-20 靳鑫 一种人机智能交互方法及系统
CN102855052A (zh) * 2012-08-24 2013-01-02 鸿富锦精密工业（深圳）有限公司 文件显示装置及显示方法
KR20140147059A (ko) * 2013-06-18 2014-12-29 삼성전자주식회사 사용자 단말 장치 및 그 홈 네트워크 관리 방법
US20150019714A1 (en) * 2013-07-11 2015-01-15 Neura, Inc. Physical environment profiling through internet of things integration platform
WO2015076609A1 (en) * 2013-11-21 2015-05-28 Samsung Electronics Co., Ltd. Method and apparatus for controlling home devices on group basis in a home network system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109918273A (zh) * 2019-01-25 2019-06-21 深圳绿米联创科技有限公司 一种数据显示方法、装置、终端设备及存储介质

Also Published As

Publication number Publication date
CN108139850B (zh) 2021-04-30
KR20170037409A (ko) 2017-04-04
EP3355172B1 (en) 2020-12-02
EP3355172A1 (en) 2018-08-01
US20180292962A1 (en) 2018-10-11
EP3355172A4 (en) 2018-10-10
US10678420B2 (en) 2020-06-09
WO2017052168A1 (ko) 2017-03-30

Similar Documents

Publication Publication Date Title
CN108139850A (zh) 电子设备及其用户界面提供方法
AU2019204080B2 (en) Touchscreen device user interface for remote control of a thermostat
US10459606B2 (en) User terminal and driving method thereof, control device and driving method thereof, and control system of controlled device
CN104854821B (zh) 用户终端设备、网络设备及其控制方法
CN108476232B (zh) 用于控制电子装置的方法和装置
CN103914272B (zh) 家用电器和移动设备
CN105451412A (zh) 灯控制设备和该灯控制设备的控制灯的方法
US20150128050A1 (en) User interface for internet of everything environment
WO2022022121A1 (zh) 用于建立设备联动场景的交互方法、存储介质及电子设备
CN105094314B (zh) 用于利用显示器来处理输入的方法和装置
CN108710306A (zh) 智能设备的控制方法、装置及计算机可读存储介质
KR102498714B1 (ko) 콘텐트 제공을 위한 전자 장치 및 방법
CN110196557A (zh) 设备控制方法、装置、移动终端及存储介质
JP5882391B2 (ja) エネルギーマネジメントコントローラ、エネルギーマネジメントシステム、エネルギーマネジメント方法、及び、プログラム
CN108919658A (zh) 智能设备控制方法及装置
CN113110093A (zh) 智能家居控制面板的控制方法、装置、设备及存储介质
CN108282388B (zh) 用于向家居设备传递数据信息的装置与方法
KR101624087B1 (ko) 원격 장치의 운전조건 설정 장치 및 방법
CN108710307A (zh) 智能设备的控制方法、装置及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant