CN113810542B - 一种应用于电子设备的控制方法、电子设备及计算机存储介质 - Google Patents
一种应用于电子设备的控制方法、电子设备及计算机存储介质 Download PDFInfo
- Publication number
- CN113810542B CN113810542B CN202011174741.3A CN202011174741A CN113810542B CN 113810542 B CN113810542 B CN 113810542B CN 202011174741 A CN202011174741 A CN 202011174741A CN 113810542 B CN113810542 B CN 113810542B
- Authority
- CN
- China
- Prior art keywords
- user
- target
- electronic device
- intelligent
- interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
本申请公开了一种应用于电子设备的控制方法,包括:电子设备可以检测到用户操作,电子设备根据用户操作确定目标设备,当用户操作是用户将电子设备向目标设备的方向推时,电子设备向目标设备发送电子设备中显示的内容。当用户操作是用户将电子设备向远离目标设备的方向拉时,电子设备向目标设备发送请求。目标设备收到请求后向电子设备发送目标设备当前正在执行任务的相关信息或者正在执行任务的控制指令。这样,用户通过推或拉电子设备,电子设备和目标设备就可以进行数据交互。这样,用户操作简单,提升用户体验。
Description
技术领域
本申请涉及电子技术领域,尤其涉及一种应用于电子设备的控制方法及电子设备。
背景技术
随着互联网技术的不断发展,越来越多的电子设备可以和其他电子设备之间可以进行交互(例如,数据传输,控制、投屏等等)。例如,手机上的内容可以投屏到智能电视上。手机中的音频可以发送到智能音响上播放。手机上的文件可以传输到另一个手机或者平板电脑、电脑等其他电子设备中。一般地,在电子设备A与电子设备B进行交互时,用户需要在电子设备A中进行操作,将电子设备A与电子设备B建立连接。然后,用户在电子设备A中找到需要发送的数据发送给电子设备B。在这一过程中,用户操作较为繁琐。
由此,电子设备之间如何更为便捷地进行交互是亟待解决的问题。
发明内容
本申请实施例提供了一种应用于电子设备的控制方法,按照该方法用户通过将电子设备向目标推的操作就可以控制电子设备向目标设备发送第一内容。或者用户通过向远离目标设备的方向拉电子设备的操作获取目标设备正在执行任务的第一信息和/或第一控制指令。这样,通过简单的用户操作,电子设备和目标设备之间就可以便捷的进行交互。
第一方面,提供一种应用于电子设备的控制方法,该方法可以包括:电子设备显示第一内容,检测到用户的第一操作,响应于第一操作,获取第一操作的方向和电子设备的第一姿态;根据第一操作的方向和/或第一姿态确定目标设备;检测到电子设备和目标设备登录相同的账号,电子设备向所述目标设备发送第一内容。
其中,第一内容可以包括图片、视频、音频、文本、食物制作参数、运动参数中的任一项。
其中,第一操作为将处于第一姿态的电子设备向靠近目标设备的方向运动;第一姿态为电子设备的顶部向上,电子设备的显示屏朝向目标设备。第一操作的方向为第一操作时电子设备的重心运动的方向,或第一操作时用户手势运动的方向。
通过本申请实施例提供的方法,用户通过第一操作就可以控制电子设备向目标设备发送数据。例如,用户可以通过向手机向电视机推的操作,将手机中播放的视频发送给电视机。这样,用户可以通过电视机观看视频。用户操作简单,可以提升用户体验。
结合第一方面,在一种可能的实现方式中,根据第一操作的方向和/或第一姿态确定目标设备的步骤之后,该方法还包括:检测到电子设备和目标设备未登录相同的账号,电子设备向目标设备发送第一请求,第一请求用于请求目标设备接收第一内容;接收第一响应,第一响应用于指示电子设备发送第一内容;电子设备向目标设备发送第一内容。当电子设备和目标设备未登录相同账号时,需要先向目标设备发送请求。这样,可以避免影响目标设备正常执行任务。
结合第一方面,在一种可能的实现方式中,根据第一操作的方向和/或第一姿态确定目标设备,具体包括:向一个或多个智能设备发送第二请求,第二请求用于指示一个或多个智能设备向电子设备发送位置信息;根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第一操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。这样,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
可选地,根据第一操作的方向和/或第一姿态确定目标设备,具体包括:向定位服务器发送第三请求,第三请求用于指示定位服务器发送一个或多个智能设备的位置信息;定位服务器用于保存一个或多个智能设备的位置信息;根据一个或多个智能设备的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第一操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。这样,当智能设备不具有定位功能时,电子设备也能获取到该智能设备的位置信息。并且,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
结合第一方面,在一种可能的实现方式中,根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:当第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,第一列表用于显示多个智能设备的图标;响应于用户的第二操作,确定第一智能设备中被第二操作在第一列表中选中图标的智能设备为目标设备。这样,电子设备可以通过用户的操作确认目标设备。
可选地,根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:当第一智能设备中包含多个智能设备时,电子设备将第一智能设备中距离电子设备最近的智能设备作为目标设备。
结合第一方面,在一种可能的实现方式中,第一列表中显示的多个智能设备的图标的排列顺序根据多个智能设备与电子设备的距离确定。
结合第一方面,在一种可能的实现方式中,确定第一智能设备中被第二操作在第一列表中选中图标的智能设备为目标设备的之后,方法还包括:执行第一预设动作;第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。这样,用户通过提示就可以知道电子设备已经确定了目标设备了。
第二方面,提供一种应用与电子设备的控制方法,该方法包括:检测到第五操作;响应于第五操作,获取第五操作的方向和电子设备的第三姿态;根据第五操作的方向和/或第三姿态确定目标设备;向目标设备发送第四请求,第四请求用于请求目标设备发送第二内容;检测到电子设备和目标设备登录相同的账号,电子设备显示目标设备发送的第二内容。
其中,第五操作为将第三姿态的电子设备向远离目标设备的方向移动;第五操作的方向为远离目标设备的方向。
通过本申请实施例提供的方法,用户可以通过第五操作,就可以控制电子设备获取目标设备的第二内容。例如,用户可以将手机向远离电视机的方向拉。然后响应于用户的操作,手机检测到手机与电视机登录相同的账号。手机就可以获取到电视机发送的第二内容。若电视机正在播放电视机,第二内容可以是电视机播放的电视剧名称,演员表,下载地址,控制电视剧停止播放、暂停播放、开始播放、调节音量等等的指令。这样,用户操作简单,可以提升用户体验。
结合第二方面,在一种可能的实现方式中,向目标设备发送第四请求的步骤之后,方法还包括:检测到电子设备和目标设备未登录相同的账号,电子设备显示目标设备发送的第三内容,第三内容与第二内容不同。
其中,第二内容包括目标设备当前正在执行的第一任务的第一信息和/或第一任务的第一控制指令;第三内容用于表明目标设备当前的工作状态。
这样,当电子设备和目标设备未登录相同的账号时,用户只可以获取到目标设备的工作状态,例如忙碌或空闲。
结合第二方面,在一种可能的实现方式中,当第一任务为播放第一音频时,第一信息包括第一音频的名称、演唱者信息、下载链接、歌词中的一项或多项,第一控制指令包括暂停指令、停止指令,播放指令、下一首指令中的一项或多项。
可选地,当第一任务为制作第一食物时,第一信息包括第一食物的制作过程、制作时长、制作温度、制作湿度中的一项或多项,第一控制指令包括暂停指令、停止指令、启动指令、调整制作时长指令、调整制作温度指令、调整制作湿度指令中的一项或多项。
可选地,当第一任务为播放第一视频时,第一信息包括第一视频的名称、演员信息、下载链接、第一视频的集数中的一项或多项,第一控制指令包括暂停指令、停止指令,播放指令、下一集指令中的一项或多项。
结合第二方面,在一种可能的实现方式中,根据第五操作的方向和/或第三姿态确定目标设备,具体包括:向一个或多个智能设备发送第五请求,第五请求用于指示一个或多个智能设备向电子设备发送位置信息;根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第五操作的方向上,第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。这样,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
结合第二方面,在一种可能的实现方式中,根据第五操作的方向和/或第三姿态确定目标设备,具体包括:向定位服务器发送第六请求,第六请求用于指示定位服务器发送一个或多个智能设备的位置信息;定位服务器用于保存一个或多个智能设备的位置信息;根据一个或多个智能设备的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第五操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。这样,当智能设备不具有定位功能时,电子设备也能获取到该智能设备的位置信息。并且,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
结合第二方面,在一种可能的实现方式中,根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:当第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,第一列表用于显示多个智能设备的图标;响应于用户的第六操作,确定第一智能设备中被第六操作在第一列表中选中图标的智能设备为目标设备。这样,电子设备可以通过用户的操作确认目标设备。
可选地,根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:当第一智能设备中包含多个智能设备时,电子设备将第一智能设备中距离电子设备最近的智能设备作为目标设备。
结合第二方面,在一种可能的实现方式中,第一列表中显示的多个智能设备的图标的排列顺序根据多个智能设备与电子设备的距离确定。
结合第二方面,在一种可能的实现方式中,确定第一智能设备中被第六操作在第一列表中选中图标的智能设备为目标设备的之后,方法还包括:执行第一预设动作;述第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
第三方面,提供一种电子设备,包括:存储器和一个或多个处理器;存储器用于存储计算机指令,当计算机指令被一个或多个处理器执行时,以使得电子设备执行:显示第一内容,检测到用户的第一操作;响应于第一操作,获取第一操作的方向和电子设备的第一姿态;根据第一操作的方向和/或第一姿态确定目标设备;检测到电子设备和目标设备登录相同的账号,向目标设备发送所述第一内容。
结合第三方面,在一种可能的实现方式中,根据第一操作的方向和/或第一姿态确定目标设备的步骤之后,电子设备还执行:检测到电子设备和目标设备未登录相同的账号,向目标设备发送第一请求,第一请求用于请求目标设备接收第一内容;接收第一响应,第一响应用于指示电子设备发送第一内容;向目标设备发送第一内容。
结合第三方面,在一种可能的实现方式中,第一操作的方向为第一操作时电子设备的重心运动的方向,或第一操作时用户手势运动的方向。
结合第三方面,在一种可能的实现方式中,根据第一操作的方向和/或第一姿态确定目标设备,电子设备具体执行:向一个或多个智能设备发送第二请求,第二请求用于指示一个或多个智能设备向电子设备发送位置信息;根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第一操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。
结合第三方面,在一种可能的实现方式中,根据第一操作的方向和/或第一姿态确定目标设备,电子设备具体执行:向定位服务器发送第三请求,第三请求用于指示定位服务器发送一个或多个智能设备的位置信息;定位服务器用于保存一个或多个智能设备的位置信息;根据一个或多个智能设备的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第一操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。
结合第三方面,在一种可能的实现方式中,根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述电子设备具体执行:当第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,第一列表用于显示多个智能设备的图标;响应于用户的第二操作,确定第一智能设备中被第二操作在第一列表中选中图标的智能设备为目标设备。
结合第三方面,在一种可能的实现方式中,第一列表中显示的多个智能设备的图标的排列顺序根据多个智能设备与电子设备的距离确定。
结合第三方面,在一种可能的实现方式中,确定第一智能设备中被第二操作在第一列表中选中图标的智能设备为目标设备的之后,电子设备还执行第一预设动作;第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
结合第三方面,在一种可能的实现方式中,第一操作为将处于第一姿态的电子设备向靠近目标设备的方向运动;第一姿态为电子设备的顶部向上,电子设备的显示屏朝向目标设备。
结合第三方面,在一种可能的实现方式中,第一操作包括第三操作和第四操作;检测到用户的第一操作,电子设备具体执行:检测到用户的第三操作;响应于所述第一操作,获取第一操作的方向和电子设备的第一姿态,电子设备具体执行:响应于第三操作,获取第三操作的方向和电子设备的第一姿态;根据第一操作的方向和/或第一姿态确定目标设备,电子设备具体执行:根据第三操作的方向和/或第一姿态确定目标设备;检测到电子设备和目标设备登录相同的账号,向目标设备发送第一内容,电子设备具体执行:获取到第四操作,第四操作为将电子设备从第一姿态改变成第二姿态;响应于第四操作,检测到电子设备和目标设备登录相同的账号,向目标设备发送第一内容。
结合第三方面,在一种可能的实现方式中,第三操作为将处于第一姿态的电子设备向靠近目标设备的方向运动;第一姿态为电子设备的顶部朝向目标设备;第四操作为将电子设备的第一姿态改变为第二姿态,第二姿态为电子设备的顶部向上,电子设备的显示屏朝向目标设备。
第三方面中的有益效果与上述第一方面中叙述的有益效果相同,不再赘述。
第四方面,提供一种电子设备,包括:存储器和一个或多个处理器;存储器用于存储计算机指令,当计算机指令被一个或多个处理器执行时,以使得电子设备执行:检测到第五操作;响应于第五操作,获取第五操作的方向和电子设备的第三姿态;根据第五操作的方向和/ 或第三姿态确定目标设备;向目标设备发送第四请求,第四请求用于请求目标设备发送第二内容;检测到电子设备和目标设备登录相同的账号,显示目标设备发送的第二内容。
结合第四方面,在一种可能的实现方式中,向目标设备发送第四请求的步骤之后,电子设备还执行:检测到电子设备和目标设备未登录相同的账号,显示目标设备发送的第三内容,第三内容与第二内容不同。
结合第四方面,在一种可能的实现方式中,第二内容包括目标设备当前正在执行的第一任务的第一信息和/或第一任务的第一控制指令;第三内容用于表明目标设备当前的工作状态。
结合第四方面,在一种可能的实现方式中,当第一任务为播放第一音频时,第一信息包括第一音频的名称、演唱者信息、下载链接、歌词中的一项或多项,第一控制指令包括暂停指令、停止指令,播放指令、下一首指令中的一项或多项;当第一任务为制作第一食物时,第一信息包括第一食物的制作过程、制作时长、制作温度、制作湿度中的一项或多项,第一控制指令包括暂停指令、停止指令、启动指令、调整制作时长指令、调整制作温度指令、调整制作湿度指令中的一项或多项。
结合第四方面,在一种可能的实现方式中,第五操作为将第三姿态的电子设备向远离目标设备的方向移动;第五操作的方向为远离目标设备的方向。
结合第四方面,在一种可能的实现方式中,根据第五操作的方向和/或第三姿态确定目标设备,电子设备具体执行:向一个或多个智能设备发送第五请求,第五请求用于指示一个或多个智能设备向电子设备发送位置信息;根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第五操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。
结合第四方面,在一种可能的实现方式中,根据第五操作的方向和/或第三姿态确定目标设备,电子设备具体执行:向定位服务器发送第六请求,第六请求用于指示定位服务器发送一个或多个智能设备的位置信息;定位服务器用于保存一个或多个智能设备的位置信息;根据一个或多个智能设备的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第五操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。
结合第四方面,在一种可能的实现方式中,根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述电子设备具体执行:当第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,第一列表用于显示多个智能设备的图标;响应于用户的第六操作,确定第一智能设备中被第六操作在第一列表中选中图标的智能设备为目标设备。
结合第四方面,在一种可能的实现方式中,第一列表中显示的多个智能设备的图标的排列顺序根据多个智能设备与电子设备的距离确定。
结合第四方面,在一种可能的实现方式中,确定第一智能设备中被第六操作在第一列表中选中图标的智能设备为目标设备的之后,电子设备还执行第一预设动作;第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
第四方面中的有益效果与上述第二方面中叙述的有益效果相同,不再赘述。
第五方面,提供一种计算机可读存储介质,包括指令,其特征在于,当上述指令在电子设备上运行时,以使得电子设备执行如第一方面中任一种可能和第二方面中任一种可能的实现方式。
第六方面,提供一种计算机产品当所述计算机程序产品在计算机上运行时,使得所述计算机执行如第一方面中任一种可能的实现方式和第二方面中任一种可能的实现方式。
第七方面,本发明实施例提供了一种目标文件分享方法,包括:
检测到对选取的目标文件的第一操作,且判断出第一操作满足设置的触发条件时,定位出电子设备头部朝向的至少一个可分享设备并显示目标文件的分享界面,其中,分享界面包括电子设备头部朝向的至少一个可分享设备的图标;
检测到第二操作,从至少一个可分享设备中选择至少一个目标设备;
按照确定的目标类型,将目标文件分享至至少一个目标设备。在一种可能的实现方式中,第一操作包括第一滑动操作和第一按压操作,触发条件包括第一滑动操作对应的第一触发条件和第一按压操作对应的第二触发条件;
第一触发条件包括在指定显示区域内滑动且滑动方向包括第一指定方向;
第二触发条件包括按压时长大于或等于第一设定时长。
在一种可能的实现方式中,第一操作包括第二滑动操作,触发条件包括第二滑动操作对应的第三触发条件;
第三触发条件包括在指定显示区域内滑动且滑动方向包括第二指定方向且滑动距离大于或等于指定距离。
在一种可能的实现方式中,第一操作包括第二按压操作,触发条件包括第二按压操作对应的第四触发条件;
第四触发条件包括多指按压操作,且按压时长大于或等于第二设定时长。
在一种可能的实现方式中,在检测到对选取的目标文件的第一操作,且判断出第一操作满足设置的触发条件时,定位出电子设备头部朝向的至少一个可分享设备之前,还包括:
检测到选取操作,选取目标文件,选取操作包括点击目标文件的操作。
在一种可能的实现方式中,第二操作包括将目标文件拖动至目标设备的图标上的操作。
在一种可能的实现方式中,第二操作包括将目标文件向目标设备的图标所在方向拖动后释放目标文件的操作以使目标文件移动至目标设备的图标上。
在一种可能的实现方式中,第二操作包括释放第一操作并点击一个或多个可分享设备的图标的操作。
在一种可能的实现方式中,第二操作包括将目标文件向目标设备的图标所在方向拖动后释放目标文件并从多个可分享设备的设备名和/或图标中点击至少一个可分享设备的设备名和/或图标的操作;
检测到第二操作,从至少一个可分享设备中选择至少一个目标设备,包括:
当至少一个可分享设备的数量为多个时,检测到将目标文件向目标设备的图标所在方向拖动后释放目标文件的操作,显示第一弹窗,第一弹窗包括多个可分享设备的设备名和/或图标;
检测到从多个可分享设备的设备名中点击至少一个可分享设备的设备名和/或图标的操作,将点击的至少一个可分享设备的设备名和/或图标所标识的至少一个可分享设备确定为至少一个目标设备。
在一种可能的实现方式中,第二操作包括释放第一操作并点击一个或多个可分享设备的图标的操作;
检测到第二操作,从至少一个可分享设备中选择至少一个目标设备,包括:
检测到释放第一操作的操作,显示电子设备头部朝向的可分享设备的图标;
检测到点击一个或多个可分享设备的图标的操作,将点击的可分享设备的图标所标识的可分享设备确定为目标设备。
在一种可能的实现方式中,在按照确定的目标类型,将目标文件分享至至少一个目标设备之前,还包括:
判断目标设备是否具备显示目标文件所属的应用程序的能力;
若判断出目标设备具备显示目标文件所属的应用程序的能力,显示第二弹窗,第二弹窗包括多个分享类型;
检测到点击一个分享类型的操作,将点击的分享类型确定为目标类型。
在一种可能的实现方式中,多个分享类型包括应用型和文件型。
在一种可能的实现方式中,还包括:
若判断出目标设备不具备显示目标文件所属的应用程序的能力,将文件型确定为目标类型。
在一种可能的实现方式中,可分享设备的图标具备不同的形状,且可分享设备的图标包括多个子图标,每个子图标对应于一个分享类型,不同的子图标具备不同的图案,不同的图案代表不同的分享类型。
在一种可能的实现方式中,目标文件包括图片、视频、音频、网页、文本或文件。
第八方面,本发明实施例提供了一种电子设备,设备包括:
显示屏;一个或多个处理器;存储器;多个应用程序;以及一个或多个计算机程序,其中一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令,当指令被设备执行时,使得设备执行以下步骤:
检测到对选取的目标文件的第一操作,且判断出第一操作满足设置的触发条件时,定位出电子设备头部朝向的至少一个可分享设备并显示目标文件的分享界面,其中,分享界面包括电子设备头部朝向的至少一个可分享设备的图标;
检测到第二操作,从至少一个可分享设备中选择至少一个目标设备;
按照确定的目标类型,将目标文件分享至至少一个目标设备。在一种可选的实现方式中,当所述指令被所述设备执行时,使得所述设备具体执行以下步骤:
检测到选取操作,选取目标文件,选取操作包括点击目标文件的操作。
在一种可选的实现方式中,第二操作包括将目标文件向目标设备的图标所在方向拖动后释放目标文件并从多个可分享设备的设备名和/或图标中点击至少一个可分享设备的设备名和/或图标的操作;当所述指令被所述设备执行时,使得所述设备具体执行以下步骤:
当至少一个可分享设备的数量为多个时,检测到将目标文件向目标设备的图标所在方向拖动后释放目标文件的操作,显示第一弹窗,第一弹窗包括多个可分享设备的设备名和/或图标;
检测到从多个可分享设备的设备名中点击至少一个可分享设备的设备名和/或图标的操作,将点击的至少一个可分享设备的设备名和/或图标所标识的至少一个可分享设备确定为至少一个目标设备。
在一种可选的实现方式中,第二操作包括释放第一操作并点击一个或多个可分享设备的图标的操作;当所述指令被所述设备执行时,使得所述设备具体执行以下步骤:
检测到释放第一操作的操作,显示电子设备头部朝向的可分享设备的图标;
检测到点击一个或多个可分享设备的图标的操作,将点击的可分享设备的图标所标识的可分享设备确定为目标设备。
在一种可选的实现方式中,当所述指令被所述设备执行时,使得所述设备具体执行以下步骤:
判断目标设备是否具备显示目标文件所属的应用程序的能力;
若判断出目标设备具备显示目标文件所属的应用程序的能力,显示第二弹窗,第二弹窗包括多个分享类型;
检测到点击一个分享类型的操作,将点击的分享类型确定为目标类型。
在一种可选的实现方式中,多个分享类型包括应用型和文件型;当所述指令被所述设备执行时,使得所述设备具体执行以下步骤:
当指令被设备执行时,使得设备具体执行以下步骤:
若判断出目标设备不具备显示目标文件所属的应用程序的能力,将文件型确定为目标类型。
第九方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质用于设备执行的程序代码,所述程序代码包括用于执行第七方面或者第七方面的任一可能的实现方式中的方法的指令。
第十方面,提供一种智能家居设备的控制方法,该方法应用于便携设备,该方法包括:便携设备确定第一智能家居设备;该第一智能家居设备是用户有操作意图的智能家居设备;便携设备将便携设备按键的操控对象设置为上述第一智能家居设备;响应于用户对便携设备按键的第一操作,便携设备控制第一智能家居设备做出第一响应。
上述第一方面提供的天线,便携设备可以在确定用户操控意图时,即在确定用户想要操控的智能家居设备时,通过将便携设备按键的操控对象切换为智能家居设备,以实现通过对便携设备按键的操作直接控制智能家居设备的目的。通过该方法,可以解决现有技术中,智能家居设备控制过程繁琐、花费时间长,导致用户体验差的问题。
在一种可能的实现方式中,上述便携设备确定第一智能家居设备,包括:在检测到便携设备的运动轨迹满足预设运动轨迹时;和/或,便携设备运动至预设空间姿态时,便携设备根据便携设备检测到的一个或多个智能家居设备与智能家居设备的相对位置,确定便携设备指向的智能家居设备为第一智能家居设备。本方案支持通过检测便携设备的运动轨迹和/或空间姿态,以确定用户是否有操控智能家居设备的意图。
在一种可能的实现方式中,上述便携设备指向的智能家居设备是指便携设备所在平面的垂线经过的智能家居设备;或者,便携设备指向的智能家居设备是指便携设备长边方向延长线经过的智能家居设备。通过检测便携设备所在平面的垂线经过的智能家居设备,或者便携设备长边方向延长线经过的智能家居设备,以确定用户有操控意图的智能家居设备。
在一种可能的实现方式中,上述便携设备通过蓝牙模块或者超宽带UWB模块检测得到所述便携设备周围的上述一个或多个智能家居设备与所述智能家居设备的相对位置。
在一种可能的实现方式中,便携设备通过一个或多个运动传感器测量便携设备的运动数据,以得到便携设备的运动轨迹或空间姿态。
在一种可能的实现方式中,上述便携设备确定第一智能家居设备,包括:便携设备根据用户在智能家居应用界面上选择智能家居设备虚拟“卡片”的操作,确定第一智能家居设备。本方案支持通过检测用户在智能家居应用界面上的选择操作,以确定用户是否有操控智能家居设备的意图。
在一种可能的实现方式中,上述便携设备按键包括物理按键和/或虚拟按键,上述物理按键包括电源按键、音量增加键、音量减小键和指纹按键中的一个或多个。本方案支持通过便携设备物理按键或虚拟按键达到直接操控智能家居设备的目的。
在一种可能的实现方式中,上述第一操作是用户在第一智能家居设备处于开机状态下,对电源按键的按压操作,第一响应是关机;或者,所第一操作是用户在第一智能家居设备处于关机状态下,对电源按键的按压操作,第一响应是开机。
在一种可能的实现方式中,上述第一操作是用户在第一智能家居设备处于开机状态下,对音量增加键的按压操作,第一响应是以下中的任一种:增加风速、增大音量、增强亮度、升高温度、增加转速、增强强度、升高位置或打开;或者,第一操作是用户在第一智能家居设备处于开机状态下,对音量减小键的按压操作,第一响应是以下中的任一种:减小风速、减小音量、减弱亮度、降低温度、减小转速、减弱强度、降低位置或闭合。
在一种可能的实现方式中,上述第一操作是用户在第一智能家居设备处于开机状态下,对指纹按键的按压操作,第一响应是验证用户通过指纹按键输入的指纹信息。
第十一方面,提供一种便携设备,该便携设备包括:处理单元,用于确定第一智能家居设备;以及,将便携设备按键的操控对象设置为第一智能家居设备;其中,第一智能家居设备是用户有操作意图的智能家居设备;控制单元,用于响应于用户对便携设备按键的第一操作,控制第一智能家居设备做出第一响应。
上述第十一方面提供的天线,便携设备可以在确定用户操控意图时,即在确定用户想要操控的智能家居设备时,通过将便携设备按键的操控对象切换为智能家居设备,以实现通过对便携设备按键的操作直接控制智能家居设备的目的。通过该方案,可以解决现有技术中,智能家居设备控制过程繁琐、花费时间长,导致用户体验差的问题。
在一种可能的实现方式中,上述处理单元确定第一智能家居设备,具体包括:处理单元在检测到所述便携设备的运动轨迹满足预设运动轨迹时;和/或,便携设备运动至预设空间姿态时,根据检测到的一个或多个智能家居设备与智能家居设备的相对位置,确定便携设备指向的智能家居设备为所述第一智能家居设备。本方案支持通过检测便携设备的运动轨迹和/ 或空间姿态,以确定用户是否有操控智能家居设备的意图。
在一种可能的实现方式中,上述便携设备还包括:传感器单元,用于测量便携设备的运动数据,以得到便携设备的运动轨迹或空间姿态;传感器单元包括一个或多个运动传感器。
在一种可能的实现方式中,上述收发单元还用于,检测来自便携设备周围的一个或多个智能家居设备的信号,以得到一个或多个智能家居设备与智能家居设备之间的相对位置。
在一种可能的实现方式中,上述收发单元包括蓝牙模块和/或超宽带UWB模块。
在一种可能的实现方式中,上述便携设备还包括:传感器单元,用于接收用户的触摸操作;该传感器单元包括触摸传感器;上述处理单元确定第一智能家居设备,具体包括:处理单元根据传感器单元接收到的用户在智能家居应用界面上选择智能家居设备虚拟“卡片”的操作,确定第一智能家居设备。本方案支持通过检测用户在智能家居应用界面上的选择操作,以确定用户是否有操控智能家居设备的意图。
在一种可能的实现方式中,上述便携设备按键包括物理按键和/或虚拟按键,该物理按键包括电源按键、音量增加键、音量减小键和指纹按键中的一个或多个。
第十二方面,提供一种便携设备,该便携设备包括:存储器,用于存储计算机程序代码,该计算机程序代码包括指令;射频电路,用于进行无线信号的发送和接收;处理器,用于执行上述指令,使得便携设备执行确定第一智能家居设备;将便携设备按键的操控对象设置为第一智能家居设备;以及,响应于用户对便携设备按键的第一操作,控制第一智能家居设备做出第一响应;其中,第一智能家居设备是用户有操作意图的智能家居设备。
上述第十二方面提供的方法,便携设备可以在确定用户操控意图时,即在确定用户想要操控的智能家居设备时,通过将便携设备按键的操控对象切换为智能家居设备,以实现通过对便携设备按键的操作直接控制智能家居设备的目的。通过该方案,可以解决现有技术中,智能家居设备控制过程繁琐、花费时间长,导致用户体验差的问题。
在一种可能的实现方式中,上述处理器确定第一智能家居设备,具体包括:处理器执行上述指令,使得便携设备在检测到所述便携设备的运动轨迹满足预设运动轨迹时;和/或,便携设备运动至预设空间姿态时,根据检测到的一个或多个智能家居设备与智能家居设备的相对位置,确定便携设备指向的智能家居设备为所述第一智能家居设备。本方案支持通过检测便携设备的运动轨迹和/或空间姿态,以确定用户是否有操控智能家居设备的意图。
在一种可能的实现方式中,上述便携设备还包括:一个或多个运动传感器,所述一个或多个运动传感器用于测量便携设备的运动数据,以得到便携设备的运动轨迹或空间姿态。
在一种可能的实现方式中,上述射频电路还用于:检测来自便携设备周围的一个或多个智能家居设备的信号,以得到一个或多个智能家居设备与智能家居设备之间的相对位置。
在一种可能的实现方式中,上述射频电路包括蓝牙模块和/或超宽带UWB模块。
在一种可能的实现方式中,上述便携设备还包括:触摸传感器,该触摸传感器用于接收用户的触摸操作;上述处理器确定第一智能家居设备,具体包括:处理器执行上述指令,使得便携设备根据传感器单元接收到的用户在智能家居应用界面上选择智能家居设备虚拟“卡片”的操作,确定第一智能家居设备。本方案支持通过检测用户在智能家居应用界面上的选择操作,以确定用户是否有操控智能家居设备的意图。
在一种可能的实现方式中,上述便携设备按键包括物理按键和/或虚拟按键,该物理按键包括电源按键、音量增加键、音量减小键和指纹按键中的一个或多个。
第十三方面,提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机执行指令,该计算机执行指令被处理器执行时实现如第十方面中任一种可能的实现方式中的方法。
第十四方面,提供一种芯片系统,该芯片系统包括处理器、存储器,存储器中存储有指令;所述指令被所述处理器执行时,实现如第十方面中任一种可能的实现方式中的方法。该芯片系统可以由芯片构成,也可以包含芯片和其他分立器件。
第十五方面,提供一种计算机程序产品,当其在计算机上运行时,使得实现如第十方面中任一种可能的实现方式中的方法。
第十六方面,提供了一种指向性搜索交互的方法,所述方法应用于电子设备,所述方法包括:所述电子设备在第一界面内检测用户的第一操作;所述电子设备响应于所述第一操作,显示第一搜索界面,其中所述第一搜索界面包括搜索框和第一内容,所述第一内容与所述电子设备本机存储的内容相关;所述电子设备响应于用户的第二操作,显示所述第一界面;所述电子设备在所述第一界面内检测用户的第三操作;所述电子设备响应于所述第三操作,检测到所述电子设备的指向方向上包括目标电子设备,获取所述目标设备的状态;所述电子设备根据所述目标设备的状态,显示第二搜索界面,其中所述第二搜索界面包括所述搜索框和第二内容,所述第二内容与所述目标设备的状态相关。
基于本申请实施例,当电子设备确定其指向方向的设备为另一电子设备时,响应于用户输入搜索内容的操作,显示搜索界面,该搜索界面的搜索结果和另一电子设备的状态相关,例如,用户将电子设备对准智能电视搜索时,用户可能希望得到的搜索结果是视频,因此,该技术方案可以得到用户希望搜索的结果,从而提升了用户的使用体验。
结合第十六方面,在第十六方面的一些实现方式中,所述第三操作为输入关键词,当所述电子设备判断所述另一电子设备的状态为正在播放所述关键词的第一任务内容时,所述第二内容包括与所述第一任务内容相关的具有优先级顺序的多个任务内容卡片,所述多个任务内容卡片与所述目标电子设备的能力相关。
基于本申请实施例,当另一电子设备正在播放用户输入关键词的任务内容时,该搜索界面可以包括和关键词的内容相关的多个任务内容卡片,且该多个任务内容卡片具有优先级顺序,有利于用户进行选择。
结合第十六方面,在第十六方面的一些实现方式中,所述多个任务内容卡片中的第一个任务内容卡片用于显示所述第一任务内容。
基于本申请实施例,该搜索结果中的第一个显示结果为另一电子设备当前播放的任务内容,有利于用户了解当前播放任务内容的详情信息,并可以进行选集播放等。
结合第十六方面,在第十六方面的一些实现方式中,当所述电子设备判断所述目标电子设备的状态为关机时,所述第二内容包括所述目标电子设备的控制卡片,所述方法还包括:当所述电子设备检测到所述用户点击所述控制卡片中的开启控件的操作后,显示第三搜索界面,所述第三搜索界面包括搜索框和多个任务内容卡片,所述多个任务内容卡片与所述目标电子设备的能力相关。
基于本申请实施例,用户在电子设备当前的显示界面内控制另一电子设备,提升了用户的跨设备控制体验。
结合第十六方面,在第十六方面的一些实现方式中,当所述电子设备判断所述目标电子设备的状态为开启且并未播放任务内容时,所述第二内容包括多个任务内容卡片,所述多个任务内容卡片与所述目标电子设备的能力相关。
结合第十六方面,在第十六方面的一些实现方式中,当所述目标电子设备为智能电视时,所述多个任务内容卡片为视频内容卡片,当所述目标电子设备为智能音箱时,所述多个任务内容卡片为音频内容卡片。
结合第十六方面,在第十六方面的一些实现方式中,所述方法还包括:当所述电子设备检测到用户点击所述多个任务内容卡片中的其中一个任务内容卡片时,弹出可供用户选择的在指定电子设备上播放的提示框。
基于本申请实施例,用户可以根据意愿选择在电子设备或另一电子设备上播放该任务内容。
第十七方面,提供一种指向性搜索交互的方法,所述方法应用于电子设备,所述方法包括:所述电子设备在第一界面内检测用户的第一操作;所述电子设备响应于所述第一操作,显示第二界面,所述第二界面为所述第一界面刷新后的界面;所述电子设备在所述第二界面内检测用户的第二操作;所述电子设备响应于所述第二操作,识别周边的其他电子设备;所述电子设备显示第三界面,所述第三界面包括所述其他电子设备的定位标签。
基于本申请实施例,响应于用户的操作,电子设备可以识别周边的多个其他电子设备,并在手机界面中显示该多个其他电子设备的定位标签,用户可以通过该定位标签控制该多个电子设备。
结合第十七方面,在第十七方面的一些实现方式中,所述第二操作为所述用户将所述电子设备拿起到竖直状态,所述电子设备显示第三界面,包括:所述电子设备调用摄像头,获取所述摄像头视角内显示的第三界面。
基于本申请实施例,用户将电子设备拿起到竖直状态时,电子设备可以打开摄像头,获取摄像头视角内的其他电子设备的定位标签,用户可以通过该定位标签控制该多个电子设备。
结合第十七方面,在第十七方面的一些实现方式中,所述方法还包括:所述电子设备在所述第三界面内检测用户点击所述定位标签的操作后,显示第四界面,所述第四界面包括所述定位标签对应的电子设备的显示界面卡片,所述显示界面卡片的内容与所述定位标签对应的电子设备的显示屏的内容一致,或者所述显示界面卡片用于控制所述定位标签对应的电子设备。
基于本申请实施例,用户通过点击该定位标签,可以在电子设备的屏幕中显示定位标签对应的电子设备的显示界面卡片,从而提升了用户的使用体验。
结合第十七方面,在第十七方面的一些实现方式中,所述方法还包括:所述电子设备在所述第三界面内检测用户点击所述定位标签的操作后,显示第四界面,所述第四界面包括所述定位标签对应的电子设备的控制卡片;当所述电子设备检测到用户点击所述控制卡片中的开启控件的操作后,显示第五界面,所述第五界面包括所述定位标签对应的电子设备的显示界面卡片,所述显示界面卡片的内容与所述定位标签对应的电子设备的显示屏的内容一致,或者所述显示界面卡片用于控制所述定位标签对应的电子设备。
基于本申请实施例,用户可以在电子设备的显示界面中控制另一电子设备,提升了用户的跨设备控制体验。
结合第十七方面,在第十七方面的一些实现方式中,所述方法还包括:所述电子设备在所述第三界面内检测预设手势的操作;所述电子设备响应于所述预设手势的操作,判断所述电子设备指向方向的设备为目标电子设备;所述电子设备显示第四界面,所述第四界面包括所述目标电子设备的显示界面卡片,所述显示界面卡片的内容与所述目标电子设备的显示屏的内容一致,或者所述显示界面卡片用于控制所述目标电子设备。
基于本申请实施例,用户通过预设的手势,可以将电子设备指向方向的另一电子设备的显示界面卡片显示在电子设备中,使得电子设备与其他智能设备的交互简单快捷,有助于提升用户的体验。
第十八方面,提供了一种指向性搜索交互的方法,所述方法包括:所述电子设备在第一界面内检测用户的第一操作;所述电子设备响应于所述第一操作,显示第二界面,所述第二界面为所述第一界面刷新后的界面;所述电子设备在所述第二界面内检测用户的第二操作;所述电子设备在确定所述电子设备指向方向的设备为目标电子设备时,响应于所述第二操作,显示第三界面,所述第三界面包括所述目标电子设备的显示界面卡片。
基于本申请实施例,用户在第二界面执行预设的手势,可以将电子设备指向方向的智能设备的控制卡片或显示界面卡片显示在电子设备的界面中,从而方便用户对该智能设备进行控制。
第十九方面,提供一种电子设备,包括:一个或多个处理器;一个或多个存储器;所述一个或多个存储器存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:在第一界面内检测用户的第一操作;响应于所述第一操作,显示第一搜索界面,其中所述第一搜索界面包括搜索框和第一内容,所述第一内容与所述电子设备本机存储的内容相关;响应于用户的第二操作,显示所述第一界面;在所述第一界面内检测用户的第三操作;响应于所述第三操作,检测到所述电子设备的指向方向上包括目标电子设备,获取所述目标设备的状态;根据所述目标设备的状态,显示第二搜索界面,其中所述第二搜索界面包括所述搜索框和第二内容,所述第二内容与所述目标设备的状态相关。
结合第十九方面,在第十九方面的一些实现方式中,所述第三操作为输入关键词,当所述电子设备判断所述另一电子设备的状态为正在播放所述关键词的第一任务内容时,所述第二内容包括与所述第一任务内容相关的具有优先级顺序的多个任务内容卡片,所述多个任务内容卡片与所述目标电子设备的能力相关。
结合第十九方面,在第十九方面的一些实现方式中,所述多个任务内容卡片中的第一个任务内容卡片用于显示所述第一任务内容。
结合第十九方面,在第十九方面的一些实现方式中,当所述电子设备判断所述目标电子设备的状态为关机时,所述第二内容包括所述目标电子设备的控制卡片,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
当所述电子设备检测到所述用户点击所述控制卡片中的开启控件的操作后,显示第三搜索界面,所述第三搜索界面包括搜索框和多个任务内容卡片,所述多个任务内容卡片与所述目标电子设备的能力相关。
结合第十九方面,在第十九方面的一些实现方式中,当所述电子设备判断所述目标电子设备的状态为开启且并未播放任务内容时,所述第二内容包括多个任务内容卡片,所述多个任务内容卡片与所述目标电子设备的能力相关。
结合第十九方面,在第十九方面的一些实现方式中,当所述目标电子设备为智能电视时,所述多个任务内容卡片为视频内容卡片,当所述目标电子设备为智能音箱时,所述多个任务内容卡片为音频内容卡片。
结合第十九方面,在第十九方面的一些实现方式中,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:当所述电子设备检测到用户点击所述多个任务内容卡片中的其中一个任务内容卡片时,弹出可供用户选择的在指定电子设备上播放的提示框。
第二十方面,提供一种电子设备,包括:一个或多个处理器;一个或多个存储器;所述一个或多个存储器存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:在第一界面内检测用户的第一操作;响应于所述第一操作,显示第二界面,所述第二界面为所述第一界面刷新后的界面;在所述第二界面内检测用户的第二操作;响应于所述第二操作,识别周边的其他电子设备;显示第三界面,所述第三界面包括所述其他电子设备的定位标签。
结合第二十方面,在第五方面的一些实现方式中,所述第二操作为所述用户将所述电子设备拿起到竖直状态,所述电子设备具体用于:调用摄像头,获取所述摄像头视角内显示的第三界面。
结合第二十方面,在第五方面的一些实现方式中,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:所述电子设备在所述第三界面内检测用户点击所述定位标签的操作后,显示第四界面,所述第四界面包括所述定位标签对应的电子设备的显示界面卡片,所述显示界面卡片的内容与所述定位标签对应的电子设备的显示屏的内容一致,或者所述显示界面卡片用于控制所述定位标签对应的电子设备。
结合第二十方面,在第五方面的一些实现方式中,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:所述电子设备在所述第三界面内检测用户点击所述定位标签的操作后,显示第四界面,所述第四界面包括所述定位标签对应的电子设备的控制卡片;当所述电子设备检测到用户点击所述控制卡片中的开启控件的操作后,显示第五界面,所述第五界面包括所述定位标签对应的电子设备的显示界面卡片,所述显示界面卡片的内容与所述定位标签对应的电子设备的显示屏的内容一致,或者所述显示界面卡片用于控制所述定位标签对应的电子设备。
结合第二十方面,在第五方面的一些实现方式中,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:所述电子设备在所述第三界面内检测预设手势的操作;所述电子设备响应于所述预设手势的操作,判断所述电子设备指向方向的设备为目标电子设备;所述电子设备显示第四界面,所述第四界面包括所述目标电子设备的显示界面卡片,所述显示界面卡片的内容与所述目标电子设备的显示屏的内容一致,或者所述显示界面卡片用于控制所述目标电子设备。
第二十一方面,提供一种计算机存储介质,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如第十六方面至第十八方面中任一项所述的指向性搜索交互的方法。
第二十二方面,提供一种计算机程序产品,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如第十六方面至第十八方面中任一项所述的指向性搜索交互的方法。
第二十三方面,提供一种电子设备,包括:一个或多个处理器;一个或多个存储器;一个或多个存储器存储有一个或多个计算机程序,一个或多个计算机程序包括指令,当指令被一个或多个处理器执行时,使得电子设备执行如第一方面、第二方面、第七方面、第九方面以及第十六方面至第十八方面中任一项所述的方法。
第二十四方面,提供一种计算机存储介质,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如第一方面、第二方面、第七方面、第九方面以及第十六方面至第十八方面中任一项所述的方法。
第二十五方面,提供一种计算机程序产品,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如第一方面、第二方面、第七方面、第九方面以及第十六方面至第十八方面中任一项所述的方法。
附图说明
图1a-图1b为本申请实施例提供的一种多设备场景示意图;
图2a-图2i为本申请实施例提供的一组多设备之间进行数据传输过程的用户界面示意图;
图3a-图3c为本申请实施例提供的一组手机111的用户界面示意图;
图3d为本申请实施例提供的一种在多设备场景中选定目标设备的示意图;
图3e为本申请实施例提供的一种用户操作示意图;
图3f为本申请实施例提供的又一种用户操作示意图;
图3g为本申请实施例提供的又一种用户操作示意图;
图3h为本申请实施例提供的另一种用户操作示意图;
图3i为本申请实施例提供的一种在多设备场景中选定目标设备的示意图;
图3j为本申请实施例提供的一种手机111的用户界面示意图;
图3k为本申请实施例提供的又一种在多设备场景中选定目标设备的示意图;
图3l-图3m为本申请实施例提供的手机111的一组用户界面示意图;
图4a-图4c为本申请实施例提供的手机111的一组用户界面界面示意图;
图4d为本申请实施例提供的一种多设备场景中选定目标设备示意图;
图4e-图4f为本申请实施例提供的手机111的一组用户界面示意图;
图4g为本申请实施例提供的一种在多设备场景中选定目标设备的示意图;
图4h-图4k为本申请实施例提供的电视机113的一组用户界面示意图;
图4l为本申请实施例提供的手机111的一种用户界面示意图;
图5a为本申请实施例提供的一种在多设备场景中选定目标设备的示意图;
图5b-图5d为本申请实施例提供的手机111的一组用户界面示意图;
图5e为本申请实施例提供的手机111的视频通话界面示意图;
图5f为本申请实施例提供的平板电脑116的视频通话界面示意图;
图6为本发明实施例提供的一种用户的电子设备的界面示意图;
图7为本发明实施例提供的又一种用户的电子设备的界面示意图;
图8为本发明实施例提供的又一种用户的电子设备的界面示意图;
图9a至图9e为本发明实施例提供的一种将目标文件分享至目标设备的操作示意图;
图10a至图10d为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图11a至图11d为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图12a至图12d为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图13a至图13f为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图14a至图14e为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图15a至图15e为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图16a至图16e为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图17a至图17d为本发明实施例提供的又一种将目标文件分享至目标设备的操作示意图;
图18为本发明实施例提供的一种第一弹窗的界面示意图;
图19为本发明实施例提供的一种第二弹窗的界面示意图;
图20为本发明实施例提供的一种可分享设备的图标示意图;
图21为本发明实施例提供的选择分享类型的界面示意图;
图22a为本发明实施例提供的电子设备定位可分享设备的示意图;
图22b为本发明实施例提供的一种定位电子设备头部朝向的可分享设备的界面示意图;
图23a为本申请实施例提供的一种在多设备场景中选定目标设备的示意图;
图23b为本申请实施例提供的手机111的一种用户界面示意图;
图23c为本申请实施例提供的一种用户操作示意图;
图23d为本申请实施例提供的又一种用户操作示意图;
图23e为本申请实施例提供的又一种用户操作示意图;
图23f为本申请实施例提供的另一种用户操作示意图;
图23g为本申请实施例提供的电视机113的一种用户界面示意图;
图23h-图23i为本申请实施例提供的手机111的一组用户界面示意图;
图23j为本申请实施例提供的电视机113的一种用户界面示意图;
图23k-图23l为本申请实施例提供的手机111的一组用户界面示意图;
图24a-图24b为本申请实施例提供的手机111的一组用户界面示意图;
图25a-图25b为本申请实施例提供的手机111的一组用户界面示意图;
图26a-图26b为本申请实施例提供的手机111的一组用户界面示意图;
图27为本申请实施例提供的一种智能家居系统的结构示意图;
图28为一种便携设备控制智能家居设备的操作过程示意图;
图29为本申请实施例提供的一种便携设备物理按键对应的控制参数示例图;
图30为本申请实施例提供的两种便携设备满足预设运动轨迹的示例图;
图31为本申请实施例提供的便携设备运动至预设空间姿态的示例图;
图32a为本申请实施例提供的一种便携设备的预设坐标系示意图;
图32b为本申请实施例提供的一种确定便携设备空间姿态的方法示意图;
图33为本申请实施例提供的一种确定智能家居设备相对于便携设备的方位角和距离的方法示意图;
图34为本申请实施例提供的一种智能手机控制电视机的示例图;
图35为本申请实施例提供的一种智能手机控制空调的示例图;
图36是本申请实施例提供的一组GUI的示意图;
图37是本申请实施例提供的另一组GUI的示意图;
图38是本申请实施例提供的另一组GUI的示意图;
图39是本申请实施例提供的另一组GUI的示意图;
图40是本申请实施例提供的另一组GUI的示意图;
图41是本申请实施例提供的另一组GUI的示意图;
图42是本申请实施例提供的另一组GUI的示意图;
图43是本申请实施例提供的另一组GUI的示意图;
图44是本申请实施例提供的另一组GUI的示意图;
图45是本申请实施例提供的另一组GUI的示意图;
图46是本申请实施例提供的另一组GUI的示意图;
图47是本申请实施例提供的另一组GUI的示意图;
图48是本申请实施例提供的另一组GUI的示意图;
图49是本申请实施例提供的另一组GUI的示意图;
图50是本申请实施例提供的另一组GUI的示意图;
图51是本申请实施例提供的另一组GUI的示意图;
图52是本申请实施例提供的另一组GUI的示意图;
图53是本申请实施例提供的另一组GUI的示意图;
图54a为本申请实施例提供的一种应用于电子设备的控制方法流程示意图;
图54b为本申请实施例提供的一种应用于电子设备的控制方法流程示意图;
图54c为本发明实施例提供的一种目标文件分享方法的流程图;
图54d为本发明实施例提供的又一种目标文件分享方法的流程图;
图54e是本申请实施例提供的一种指向性搜索交互方法的示意性流程图;
图54f是本申请实施例提供的另一种指向性搜索交互方法的示意性流程图;
图55为本申请实施例提供的电子设备的硬件结构示意图;
图56为本申请实施例提供的电子设备的硬件结构示意图;
图57为本申请实施例提供的一种便携设备的结构框图;
图58为本申请实施例提供的另一种便携设备的结构框图;
图59为本申请实施例提供的一种便携设备的示意性结构图;
图60为本申请实施例提供的一种便携设备的软件结构示意图;
图61为本申请实施例提供的一种便携设备控制智能家居设备的控制过程示意图;
图62为本申请实施例提供的另一种便携设备控制智能家居设备的控制过程示意图;
图63是本申请实施例提供的指向性搜索交互方法的框架的示意性流程图;
图64是本申请实施例提供的UWB或蓝牙器件识别方位和距离的示意图。
具体实施方式
下面将结合附图对本申请实施例中的技术方案进行清除、详尽地描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本申请实施例中电子设备和目标设备具有定位模块。通过该定位模块,电子设备可以和其他设备进行指向性交互。即电子设备指向一个目标设备时,电子设备可以向目标设备发送文件(或称为分享文件)。当电子设备指向目标设备时,电子设备还可以获取目标设备正在执行任务的信息。例如目标设备为电视机时,电子设备可以获取到电视机正在播放视频的信息 (视频名称、视频集数、视频演员表等等)。或者,电子设备可以控制目标设备,不仅可以在电子设备的用户界面中控制目标设备(例如,开启或者关闭目标设备,调整目标设备音量等等),还可以通过电子设备的物理按键来控制目标设备。
在本申请实施例中,电子设备可以称为便携设备。智能家居设备以及可分享设备均可以称为本申请实施例中的目标设备。第一内容可以称为目标文件。定位模块可以称为定位芯片,定位芯片可以为UWB芯片或蓝牙芯片。电子设备可以通过定位芯片计算出电子设备与可分享设备之间的距离和可分享设备的位置。
首先,本申请实施例结合附图介绍一种应用于电子设备的控制方法,通过该方法,电子设备在指向目标设备时,或者在电子设备指向目标设备并向目标设备的方向移动时,电子设备可以向目标设备发送第一内容。第一内容可以包括图片、视频、音频、文档、食物制作参数、运动参数等等。这样,用户只需要简单的操作,电子设备就可以确定目标设备,并进行数据交互。电子设备无需多次识别用户操作,可以提高与目标设备进行数据交互的效率。用户操作简单,提升了用户体验。
图1a示出了一种多设备的场景。如图1a所示,多设备场景100A中可以包括手机111、音响112、电视机113、豆浆机114以及跑步机115。手机111可以和该多设备场景中的100A 中的其他设备(例如音响112、电视机113、豆浆机和跑步机115)进行数据传输。或者,用户可以通过手机111来控制多设备场景100A中的其他设备。
可以理解的是,多设备场景100A中可以包括更多或更少的电子设备,本申请实施例对多设备场景中的电子设备的数量不作限定。
可选地,多设备场景中还可以包括平板电脑、电脑、投影仪等等电子设备。
图1b示出了本申请实施例中的另一种多设备的场景。如图1b所示,多设备场景100B 中可以包括手机111、音响112、电视机113、豆浆机114、跑步机115、平板电脑116、电脑117、音响118以及投影仪119等电子设备。用户可以通过电子设备(例如,手机111、平板电脑116)控制该多设备场景100B中的其他设备。或者,用户也可以将电子设备中的数据传输给其他电子设备。例如,用户可以将电子设备中的视频投屏到电视机113中。用户还可以将电子设备中音频发送到音响112中播放。
图2a-图2i示出了现有技术中在多设备场景100B中选择一个电子设备来接收电子设备传输的数据的示意图。在多设备的场景100B中,以用户在手机111选择目标设备发送图片为例阐述现有技术。
图2a示出了手机111的用户界面200。该用户界面200中可以包括一些应用程序图标,例如图库图标201、音乐图标202、视频图标203、运动图标204、菜谱图标205。用户可以点击图库图标201。响应于该用户操作,手机111可以显示用户界面30A。
图2b示出了手机111的用户界面30A。该用户界面30A中可以包括图片301和图片302。该用户界面30A中还可以显示手机111保存图片301和图片302的时间。例如,手机111保存图片301的时间可以是“今天”。
如图2c所示,用户可以长按用户界面30A中的图片301,响应于该用户操作,手机111 可以显示用户界面30B。
图2d示出了手机111的用户界面30B。该用户界面30B中可以包括图片301和菜单303。菜单303中可以包括控件304。该控件304用于选择共享图片301的方式。该菜单303中还可以显示图片301的属性(图中未示出)、大小(图中未示出)等等。
如图2e所示,用户可以点击用户界面30B中的控件304,响应于该用户操作,手机111 可以显示用户界面30C。
图2f示出了手机111的用户界面30C,该用户界面30C中可以包括图片301、图片302以及选项框310。选项框310中可以包括控件311和控件312。控件311用于选择目标设备共享图片301。控件312用于关闭选项框310。
如图2g所示,用户可以点击用户界面30C中的控件311。响应于该用户操作,手机111 可以显示用户界面400。
图2h示出了手机111的用户界面400。用户界面400可以显示能够进行共享的多个设备的图标。例如,音响112的图标401、平板116的图标402、电视机113的图标403、跑步机115的图标404、电脑117的图标405、豆浆机114的图标406、音响118的图标407以及投影仪119的图标408。其中,图标401至图标408在用户界面400中显示顺序可以根据对应电子设备的接收到Wi-Fi网络或者4G网络或5G网络的信号强度决定。信号强度越强,用户界面400中电子设备对应的图标显示的位置越靠前。当信号强度改变后,电子设备对应的图标在用户界面400中的位置也会改变。例如,用户界面400中示出的平板116的图标402。当平板116接收到Wi-Fi网络或者4G网络或5G网络的信号强度变弱时,用户界面400中平板116的图标402的位置会改变。
当用户在手机111的用户界面400中点击平板116的图标402时,若平板116的图标的位置发生改变,可能用户会选错进行图片共享的电子设备。
如图2i所示,用户本来想选择平板116进行共享图片301。但是当用户点击时,平板116 的图标402在用户界面400中的位置发生改变。导致用户点击到了电视机113的图标403,图片301被共享到了电视机113。
上述现有技术中的一种控件电子设备选择设备进行交互的方法中,用户想要选择一个电子设备共享手机111的图片301时,操作过程十分繁琐。并且,若电子设备接收到Wi-Fi网络或者4G网络或5G网络的信号强度变化或电子设备与手机111之间的位置发生改变,都会导致手机111中用户界面中显示的电子设备对应的图标位置改变。这样,会导致用户选错想要进行共享的电子设备。用户可能将想要共享给电子设备A的图片或其他内容发送给了电子设备B。这样,用户体验差。
针对现有技术中的问题,本申请实施例提供了一种应用于电子设备的控制方法,该方法包括:电子设备(例如,手机、平板电脑等)可以检测到用户的第一操作;响应于第一操作,电子设备获取第一操作的方向和电子设备的第一姿态;电子设备根据第一操作的方向和/或所述第一姿态确定目标设(例如,手机、平板电脑、电脑、电视、豆浆机、跑步机等等);检测到电子设备和目标设备登录相同的账号,电子设备向目标设备发送第一内容。第一内容可以包括图片、视频、音频、文档、食物制作参数、运动参数等等。这样,用户只需要简单的操作,电子设备就可以确定目标设备,并进行数据交互。电子设备无需多次识别用户操作,可以提高与目标设备进行数据交互的效率。用户操作简单,提升了用户体验。
在本申请实施例中,第一操作的方向可以指第一操作的运动方向,也可以指用户在进行第一操作时,电子设备顶部指向的方向。电子设备可以将第一操作运动方向上的电子设备确定为目标设备。电子设备也可以将电子设备顶部所指方向上的电子设备确定为目标设备。
在本申请实施例中,电子设备中用户界面具有默认的显示方向。本申请实施例将电子设备默认显示方向的用户界面的上方的边框称为电子设备的顶部,默认显示方向的用户界面的下方的边框称为电子设备的底端。如图2a所示,用户界面200的显示方向为默认的显示方向。用户界面200的上方的边框称为手机111的顶部,用户界面200的下方的边框称为手机111 的底端。
下面结合附图详细介绍本申请实施例提供的一种应用于电子设备的控制方法。本申请实施例提供的方法可以应用在如图1a多设备场景100A和图1b示出的多设备场景100B中。
首先,结合附图3a-图3m介绍手机111在多设备场景100B中确定目标设备为平板电脑 116,并向平板电脑116发送图片。图3a-图3l示出的实施例中,用户第一指向性操作的方向上存在多个电子设备。
在本申请实施例中,第一操作可以包括第一指向性操作。
图3a示出了手机111的用户界面200。用户界面300中可以包括一些应用程序图标,例如图库图标201、音乐图标202、视频图标203、运动图标204、菜谱图标205。用户可以点击图库图标201。响应于该用户操作,手机111可以显示用户界面30A。
图3b示出了手机111的用户界面30A。用户界面30A中可以包括图片301和图片302。此处具体可以参考上文对图2b的描述,此处不再赘述。用户可以点击图片301,响应于该用户操作,手机111可以显示用户界面500。
图3c示出了手机111的用户界面500。用户界面500中可以显示图片301。用户可以在多设备场景100B中通过第一指向性操作确定目标设备。手机111可以向目标设备发送图片 301。
图3d示出了多设备场景100B。如图3d所示,用户对手机111进行第一指向性操作,即将手机指向想要发送图片301的目标设备。
在一种可能的实现方式中,第一指向性操作可以用户朝向目标设备(例如,平板电脑116) 所在位置移动手机111。例如图3e中示出的用户朝着目标设备所在位置往前推手机111。当用户朝向目标设备所在位置移动手机111时,手机111可以检测出该用户操作。
可选地,第一指向性操作可以是当电子设备的顶部向上,显示屏朝向目标设备时,用户向靠近目标设备的方向推电子设备。如图3f所述,图3f中手机111的顶部向上,显示屏朝向电视机113,用户向靠近电视机113的方向推手机111。
进一步地,手机111可以根据加速度传感器采集到的加速度来检测用户的第一指向性操作。举例来说,当手机111的加速度传感器采集到的加速度大于或等于第一阈值时,手机111 确定用户在进行第一指向性操作。第一阈值可以由手机111系统配置。
可选地,手机111可以根据加速度传感器采集到的加速度和陀螺仪传感器采集到的角速度来检测用户的第一指向性操作。例如,当手机111的加速度传感器采集到的加速度大于或等于第一阈值,且陀螺仪传感器采集到的角速度为第二阈值时,手机111确定用户在进行第一指向性操作。第二阈值可以由手机111系统配置。
可选地,手机111可以根据加速度传感器以及触摸传感器来检测用户的第一指向性操作。例如,当手机111的加速度传感器采集到的加速度大于或等于第一阈值,且触摸传感器在预设时间内未检测到用户触摸操作时,手机111确定用户在进行第一指向性操作。预设时间可以由手机111系统配置。
可选地,当手机111中加速度传感器在第一时长内采集到的加速度为第一阈值。然后,在第一时长后的第二时长内手机111的加速度传感器采集的加速度为0,即手机未运动。这样,手机111确定用户在进行第一指向性操作。本申请实施例对电子设备具体如何检测该用户的第一指向性操作不作限定。
在一种可能的实现方式中,第一指向性操作可以是用户将手机111的顶部朝着目标设备 (例如,平板电脑116)的方向时,在手机111的显示屏上方隔空在第一方向移动手。例如图 3g所示,用户将手机111的顶部朝着目标设备的方向,在手机111的显示屏上方隔空将手从手机111的底部滑向顶部。手机111可以利用加速度传感器和陀螺仪传感器检测出手机111 顶部的朝向。手机111可以利用摄像头检测出该用户在手机111的显示屏上方隔空将手从手机111的底部滑向顶部。
在一种可能的实现方式中,第一指向性操作可以是用户将手机111的顶部朝着目标设备 (例如,平板电脑116)的方向时,用户的手在手机111的显示屏中朝着第一方向滑动。例如图3h所示,用户将手机111朝着目标设备的方向,用户的手在手机111的显示屏中从下往上滑动。手机111可以利用加速度传感器和陀螺仪传感器检测出手机111顶部的朝向。手机111 可以利用触摸传感器检测出用户的手在手机111的显示屏中从下往上滑动。
当手机111检测到用户的第一指向性操作时,手机111可以获取到多设备场景100B中其他电子设备(例如平板电脑116、电视机113、豆浆机114、音响112、电脑117、音响118、投影仪119、跑步机115)的位置信息(例如电子设备所在位置的三维坐标),并确定出该第一指向性操作的方向上所在的电子设备。
在一种可能的实现方式中,多设备场景100B中的所有电子设备具有定位功能。当手机 111检测到用户的第一指向性操作时,手机111可以向其他设备发送获取位置的请求。接收到手机111发送的获取位置的请求后,其他电子设备向手机111发送其他电子设备的位置信息。手机111接收到位置信息后,确定第一指向性操作的方向上所在的电子设备。
可选地,多设备场景100B中可以具有三个或多个定位传感器组成的定位系统。定位系统可以将多设备场景100B中所有电子设备进行定位并将所有电子设备的位置保存在该定位系统对应的定位服务器中。手机111检测到用户的第一指向性操作时,可以向定位服务器发送获取位置的请求。响应于手机111的请求,定位服务器可以向手机111发送多设备场景100B 中其他电子设备的位置信息。
可选地,在一种可能的实现方式中,手机111只获取在预设距离内的电子设备的位置信息。也就是说,手机只搜索在预设距离内的电子设备,并可以向预设距离内的电子设备发送请求,来获取预设距离内电子设备的位置信息。
进一步地,手机111可以将以手机111的第一点沿着第一指向性操作的方向上所在直线上存在的电子设备确定为目标设备。如图3i所示,手机111可以将以手机111的重心点沿着第一指向性操作的方向所在直线上存在的电子设备确定为目标设备(例如图3i示出的平板电脑116、电视机113、豆浆机114)。
更进一步地,当目标设备有多个时,手机111可以将距离手机111最近的一个目标设备确定为最终要发送图片的目标设备。例如,在图3h中,手机111可以将距离手机111最近的平板电脑116确定为最终要发送图片的目标设备。
可选地,当目标设备有多个时,手机111可以将多个目标设备对应的图标(例如名称、设备ID等等)显示在手机11的用户界面中。例如,图3j示出的手机111的用户界面600。用户界面60A可以包括文本601、控件602-控件605。文本601用于提示手机111确定目标设备的数量为3。控件602用于返回上一级界面。控件603-控件605用于用户选择最终的目标设备。例如,用户可以点击控件603,响应于用户操作,手机111将平板电脑116确定为最终的目标设备。
在另一种可能实现的方式中,手机111可以将以手机111的第一点沿着第一指向性操作的方向的预设范围内的电子设备确定为目标设备。例如图3k所示,手机111以手机111的重心点沿着第一指向性操作的方向的预设范围内的电子设备确定为目标设备。手机111确定的目标设备可以有平板电脑116、音响112、电视机113、豆浆机114、电脑117。
如图3l所示,手机111可以确定的5个目标设备的图标显示在用户界面60B中。用户界面60A可以包括文本601、控件602-控件607。文本601用于提示手机111确定目标设备的数量为5。控件602用于返回上一级界面。控件603-控件607用于用户选择最终的目标设备。例如,用户可以点击控件603,响应于用户操作,手机111将平板电脑116确定为最终的目标设备。
在一种可能的实现方式中,手机111用户界面中显示的多个目标设备对应图标的排列顺序可以根据手机111与多个目标设备的距离确定。目标设备与手机111的距离越近,目标设备对应的图标在手机111用户界面中的位置越靠前。例如,在图3i示出的多设备场景100B 中,平板电脑116、电视机113、豆浆机114都在第一指向性操作的方向上。其中,平板电脑 116离手机111的距离。那么在手机111的用户界面中显示的目标设备的图标列表中,平板电脑116对应的图标排列在最前面。例如,图3j示出的用户界面60A。
可选地,手机111用户界面60B只显示在预设距离内,且在第一指向性操作一定夹角范围内的目标设备的图标。
可选地,当手机111确定在预设距离内,且在第一指向性操作一定夹角范围内的目标设备有多个时,手机111中显示的多个目标设备的图标的排列顺序按照多个目标设备与手机111 的距离,以及与第一指向性操作的方向来确定。例如,如图3k示出的多设备场景100B。手机111确定的多个目标设备中,平板电脑116和电视机113、豆浆机114在第一指向性操作的方向上,且在手机111的中心线上。其中,平板电脑116距离手机111最近。音响112和电脑117在手机111的中心线的预设范围内。这样,手机111中显示的多个目标设备的图标的列表中,平板电脑的图标排在最前面,然后是电视机111的图标,豆浆机114的图标,音响112的图标、电脑117的图标。例如图3l示出的用户界面60B。
可选地,当两个目标设备距离手机的位置相同时,手机111的显示目标设备的图标的列表中,手机111左侧目标设备的图标可以排在手机111右侧目标设备的图标的前面。
可选地,在手机111中心线上,且在第一指向性操作方向上目标设备的图标可以比其他目标设备的图标大。例如,在图3j示出的多设备场景100B中,平板电脑116,电视机113、豆浆机114对应的图标比音响112以及电脑117对应的图标大。
在一种可能的实现方式中,手机111可以根据发送数据的类型来筛选目标设备。举例来说,手机发送数据的类型是图片时,手机111可以获取到其他设备是否支持图片。手机111 将可以支持图片的电子设备作为目标设备。例如图3l示出的用户界面60B中,音响112和豆浆机114不支持图片,则手机111的用户界面中可以不显示音响112和豆浆机114对应的图标。
在一种可能的实现方式中,当手机111确定好最终的目标设备时,手机111可以提示用户,例如,手机111振动提示用户,或者响铃、或者显示屏亮屏多次来提示用户已确定好最终的目标设备。
手机111确定最终的目标设备为平板电脑116后,手机111将图片301发送给平板电脑116。
在一种可能的实现方式中,当手机111确定手机111与平板电脑116登录相同的账号时,手机111将图片301发送给平板电脑116。
可选地,当手机111确定手机111与平板电脑116未登录相同的账号时,手机111向平板电脑116发送第一请求,第一请求用于请求平板电脑116接收图片301;手机111接收平板电脑116发送的第一响应;响应于第一响应,手机111向平板电脑116发送图片301。
即当手机111和平板电脑116登录相同的账号时,手机111可以直接向平板电脑116发送图片301。当手机111和平板电脑116未登录相同的账号时,手机111需要先向平板电脑116发请求,若平板电脑116同意请求,则手机111可以向平板电脑116发送图片301。若平板电脑116未同意请求,则手机111不向平板电脑116发送图片301。
平板电脑116接收图片后可以直接保存在平板电脑116的相册中。例如,图3m示出了平板电脑116的用户界面700。用户界面700中可以包括提示框701。提示框701用于提示平板电脑116的用户从手机111中接收到一张图片,并保存在相册中。
这样,用户通过更少的操作便可以将图片发送到平板设备中,操作简单,可以提升用户体验。
下面结合附图4a-图4l介绍手机111在多设备场景100A中确定目标设备为平板电脑116,并向平板电脑116发送图片。图4a-图4l示出的实施例中,用户第一指向性操作的方向上只存在一个电子设备。
图4a、图4b以及图4c示出了用户在手机111的图库中选定想要发送给目标设备的图片的具体操作过程。图4a-图4c可以参考上述图3a-图3c中的描述,此处不再赘述。
图4d示出了用户在多设备场景100A中进行第一指向性操作。即用户朝着电视机113的方向对手机111进行第一指向性操作。图4d示出的场景中用户第一指向性操作的方向上只有电视机113这一个电子设备。关于第一指向性操作具体可以参考图3e-图3g中的描述,此处不再赘述。响应于该用户操作,手机111可以将电视机113确定为目标设备。此时,手机111 可以提示用户已确定好目标设备。具体提示方式可以参考上文中的描述,此处不再赘述。可选地,电视机113也可以提示用户,电视机113已被确定为目标设备。例如,电视机113可以发出提示音,例如“滴”或者“叮咚”,提示音的具体形式不作限定。电视机113还可以利用改变显示屏的亮度,或者交替亮屏和灭屏来提示用户。此处对提示用户的方式不作限定。
当手机111确定的目标设备只有一个时,手机可以在确定目标设备后直接向目标设备发送用户选定的内容(即图4c中示出的图片301)。
可选地,手机111可以将确定的目标设备的图标显示在用户界面中。这样用户可以在手机111的用户界面中看到目标设备的图标。这样,用户可以再次确认手机111确定的目标设备是否正确。例如图4e中示出的手机111的用户界面60C。用户界面60C可以包括文本601、控件602、控件606。用户界面60C可以参考用户界面60B中的描述,此处不再赘述。
可选地,例如图4f所示,用户可以在用户界面60C中点击控件606,以确定将手机111 中的图片发送给电视机113。
可选地,如图4g所示,手机111通过第一指向性操作确定目标设备。手机111确定好目标设备后,用户翻转手机111,即将手机111的显示屏朝向目标设备。响应于该用户操作,手机111将图片301发送给电视机113。
可以理解的是,第一指向性操作可以是两个操作的结合。例如用户将手机111的顶部指向目标设备并向目标设备运动。手机111确定目标设备后,用户再将手机111的显示屏朝向目标设备(此时手机111的顶部可以朝向天空)。即第一指向操作可以是先将手机111向靠近目标设备的方向运动,再将手机111的显示屏朝向目标设备。
可选地,第一指向性操作还可以是用户先将手机111向靠近目标设备的方向运动,然后在手机111的显示屏上方隔空将手从手机111的底部滑向顶部。
可选地,第一指向性操作还可以是先将手机111向靠近目标设备的方向运动,在手机111 的显示屏中从下往上滑动。
图4h示出了电视机113的用户界面900。用户界面900可以为电视机113当前正在播放的视频。
在一种可能的实现方式中,若手机111和电视机113的登录账号相同,电视机113接收到手机111发送的图片301后可以显示图片301。如图4i所示,电视机113的用户界面1000中可以显示图片301。电视机113和手机111都登录了用户A的账号。
可选地,若手机111和电视机113的登录账号不同,即手机111登录的用户A的账号,电视机登录了用户B的账号。用户需在电视机113的用户界面中确认后,电视机113才显示手机111发送的内容。例如图4j示出的电视机113的用户界面1100。该用户界面1100中可以包括选项框1101。选项框1101可以包括控件1102和控件1103若用户点击控件102,电视机113可以接收手机111发送的图片301。如图4k所示,电视机113接收图片301后可以显示该图片。若用户点击控件1103,则电视机113不接收手机111发送的图片301。手机111 中可以接收到电视机113不接收图片301的指示,并在手机111的用户界面中提示用户电视机113未接收图片。如图4l所示,手机111接收到电视机113不接收图片301的指示后,可以显示用户界面800。用户界面800中可以包括图片301,提示框801。提示框801用来提示用户电视机拒绝接收手机111发送的图片301。当用户B正在看电视时,可以选择不接收用户A的手机111发送的图片。这样,可以不影响用户B观看电视机113中播放的视频。
可选地,在一种可能的实现方式中,手机111可以将用户第一指向性操作的方向和反方向上的电子设备都确定为目标设备。如图5a所示,用户将手机111朝向跑步机115移动。响应于该用户操作,手机111可以将用户第一指向性操作的方向上的跑步机115,以及用户第一指向性操作的反方向上的音响112确定为目标设备。
进一步地,手机111可以将确定的目标设备的图标显示在用户界面中。例如,图5b示出的用户界面60D。用户界面60D中可以显示音响112的图标607,以及跑步机115的图标608。用户界面60D可以参考上文对用户界面60A的描述,此处不再赘述。
可选地,手机可以确定目标设备是否支持用户选定的内容的格式。例如图5c所示,用户点击音响112的图标607,将音响112选定为接收手机111发送图片的目标设备。手机111可以确定音响112不支持该图片的格式。手机111中可以显示提示框用来提示用户目标设备不支持用户选定图片的格式。例如,图5d中示出的用户界面60E。用户界面60E可以包括提示框609。提示框609用来提示用户目标设备不支持图片的格式。提示框609中可以包括控件610。用户点击控件610后,该手机111可以不显示提示框609。
在另一个可行的例子中,用户还可以选择将手机111中的视频发送给电视机113。电视机 113接收到该视频后,播放该视频。手机111将视频发送给电视机113的具体过程可以参考图 3a-图3l中的描述,此处不再赘述。
在另一个可行的例子中,用户还可以选择将手机111中的视频通话数据发送给平板电脑 116。平板电脑116接收到该视频通话数据后,显示该视频通话界面。手机111的视频通话界面如图5e所示。图5e示出了视频通话界面3300。该视频通话界面3300中可以包括视频帧 3301和视频帧3302、控件3303,控件3304、控件3305。视频帧3301和视频帧3302可以分别正在进行视频通话的两个设备拍摄到的视频帧。视频帧3301和视频帧3302的显示位置可以互换。用户可以点击控件3303来结束视频通话。用户可以点击控件3303来开启或关闭麦克风。用户可以点击控件3305来切换手机的前后置摄像头拍摄视频帧。用户点击控件3305后,视频通话界面3300中显示的手机111的视频帧会变化。视频通话界面3300具体可以参考现有技术中的描述,此处不再赘述。平板电脑接收手机111的视频通话数据后,平板电脑116中可以显示的视频通话界面3400。如图5f所示,图5f中示出的视频通话界面3400可以参考视频通话界面3300的描述,此处不再赘述。
手机111将视频通话发送给平板电脑116的具体过程可以参考图3a-图3m中的描述,此处不再赘述。
在又一个可行的例子中,用户可以选择将手机111中的音频发送给音响112。音响112 接收该音频后,播放该音频。例如,手机111中可以显示手机111将音频发送给音响112的具体过程可以参考图3a-图3l中的描述,此处不再赘述。
在又一个可行的例子中,用户可以选择将手机111中的食物制作参数发送给豆浆机114。豆浆机114接收到食物制作参数后,可以按该食物制作参数设置工作模式。例如,食物制作参数可以为加热10分钟,搅拌2分钟。手机111将食物制作参数发送给豆浆机114的具体过程可以参考图3a-图3l中的描述,此处不再赘述。
在又一个可行的例子中,用户可以选择将手机111中的运动参数发送给跑步机115,跑步机115,接收到运动参数后,可以参照该运动参数设置运动模式。运动参数可以包括运动时长、运动速度、跑步机倾斜度等等。手机111将运动参数发送给跑步机115的具体过程可以参考图3a-图3l中的描述,此处不再赘述。
可选地,当目标设备与关联设备登录同一账号时,关联设备中可以设置电子设备是否可以与目标设备的权限。例如,若电视机113与平板电脑116登录了同一账号(例如华为云账号),平板电脑116的用户可以在平板电脑116中设置手机111是否可以与电视机113进行数据交互。若平板电脑116中设置禁止手机111与电视机113进行数据交互,那么手机111不能向电视机113发送图片301。若平板电脑116中设置允许手机111与电视机113进行数据交互,则手机111可以向电视机113发送图片。
在本申请实施例提供的一种应用于电子设备的控制方法中,电子设备检测到第五操作;响应于第五操作,电子设备获取第五操作的方向和电子设备的第三姿态;电子设备根据第五操作的方向和/或第三姿态确定目标设备;电子设备向目标设备发送第四请求,第四请求用于请求目标设备发送第二内容;当电子设备和目标设备登录相同的账号时,电子设备显示目标设备发送的第二内容。当电子设备和目标设备未登录相同的账号时,电子设备显示目标设备发送的第三内容,第三内容与第二内容不同。第二内容可以包括目标设备当前正在执行的第一任务的第一信息和/或第一任务的第一控制指令;第三内容用于表明目标设备当前的工作状态。
下面介绍本申请另一种发送(或分享)目标文件的具体实施过程。另一种发送目标文件的方法中用户交互的过程可以与上述图1a-图5f示出的用户交互的过程不同。具体可参考图6-图21示出的用户将电子设备中的目标文件分享给目标设备的交互过程。
在一些实施例中,电子设备与目标设备之间进行文件分享的方法是用户点击电子设备的显示屏上的分享功能图标,电子设备的显示屏显示设备列表,设备列表包括位于电子设备周围的多个设备的设备名,用户查询设备列表中的设备名并选择分享的目标设备的设备名,使得电子设备将文件分享至目标设备。该文件分享方法的操作步骤繁琐,目标文件的分享效率低下。为了提高目标文件的分享效率,本申请实施例图6-图21提供一种分享目标文件的方法。
下面结合一个目标文件分享场景,用一个具体的实施例对目标文件分享方法做出示例性说明:
以分享一张图片为例,假设用户需要将图库中的某张图片分享给智慧屏,使得智慧屏可以显示该图片。用户打开自己的电子设备,使得电子设备的显示屏显示电子设备的桌面,图 6为本申请实施例提供的一种用户的电子设备的界面示意图,如图6所示,该示意图包括状态栏21、菜单栏22和功能栏23。状态栏21包括运营商、当前时间、当前地理位置及当地天气、网络状态、信号状态和电源电量。如图6所示,运营商为中国移动;当前时间为2月9 日星期五08:08;当前地理位置为北京,北京天气为多云且温度为6摄氏度;网络状态为wifi网络;信号状态为满格信号,表示当前信号较强;电源电量中的黑色部分可以表示电子设备的剩余电量。菜单栏22包括至少一个应用程序的图标,每个应用程序的图标下方具有相应的应用程序的名称,例如:图库、任务卡商店、微博、支付宝、微信、卡包、设置、相机、电话、短信和通讯录。其中,应用程序的图标以及相应的应用程序的名称的位置可以根据用户的喜好进行调整,本申请实施例对此不作限定。功能栏23包括返回键、主桌面键和菜单键。返回键用于返回上一级,主桌面键用于返回主桌面,菜单键用于显示出多个后台应用。
需要说明的是,图6所示的电子设备的界面示意图为本申请实施例的示例性的展示,电子设备的界面示意图也可以为其他样式,本申请实施例对此不作限定。
如图6所示,用户可以点击菜单栏22中的图库,使得用户的电子设备的显示屏显示图库的界面。图7为本申请实施例提供的又一种用户的电子设备的界面示意图,如图7所示,该界面示意图包括照片搜索栏31、至少一个相册32和分类栏33。照片搜索栏31用于根据用户输入的关键词进行搜索,关键词的类型包括地点、人物或时间,例如:关键词为天津,则电子设备的显示屏可以显示出所有在天津拍摄的图片。至少一个相册32包括但不限于所有照片、图片和最近删除中之一或其任意组合。进一步地,该界面示意图还包括“新建相册”键,用户也可以通过在显示屏上点击“新建相册”键,自定义命名一个新的相册。分类栏33包括照片栏、相册栏、时刻栏和发现栏。例如:当用户点击照片栏时,电子设备的显示屏显示电子设备的所有图片;当用户点击相册栏时,如图7所示,电子设备的显示屏显示电子设备的“所有照片”相册;当用户点击时刻栏时,电子设备的显示屏显示以时刻为单位所划分的图片;当用户点击发现栏时,电子设备的显示屏显示自动分类后的图片,自动分类包括但不限于风景、人物和美食中之一或其任意组合。
需要说明的是,图7所示的电子设备的界面示意图为本申请实施例的示例性的展示,电子设备的界面示意图也可以为其他样式,本申请实施例对此不作限定。
如图7所示,用户点击“所有照片”相册,使得用户的电子设备的显示屏显示“所有照片”相册的界面示意图。图8为本申请实施例提供的又一种用户的电子设备的界面示意图,如图 8所示,该界面示意图包括返回键41、“所有照片”相册名42、至少一张图片43。返回键41 用于返回上一层界面,即:返回图库的界面。
需要说明的是,图8所示的电子设备的界面示意图为本申请实施例的示例性展示,电子设备的界面示意图也可以为其它样式,用户也可以点击其它相册选择要分享的图片,本申请实施例对此不作限定。
用户可以通过选取操作选取目标文件,如图8所示,该目标文件为要分享的图片。例如:选取操作为点击图片的操作。具体地,触屏驱动检测到选取操作,将选取操作发送至输入管理器,输入管理器根据选取操作选取目标文件。需要说明的是,图8所示的点击图片的选取操作仅为一种选取目标文件的示例性操作,还可以以其它方式选取目标文件,本申请实施例对选取目标文件的方式不作限定。
用户可以通过第一操作触发电子设备的显示屏显示分享界面,该界面包括至少一个可分享设备的图标;可分享设备的图标用于指示定位到的电子设备周围的可分享设备。第一操作可以包括第一滑动操作和第一按压操作,以分享一张图片为例,图9a至图9d为本申请实施例提供的一种分享界面的示意图,如图9a所示,用户选取该图片后,用手指拖动该图片从电子设备的显示屏的底部区域向上滑动,可选的,图片的尺寸可以随着手指的向上滑动逐渐缩小到一定尺寸,滑动后的示意图如图9b所示;用户用手指拖动该图片向上滑动后,按压该图片,按压该图片的示意图如图9c所示,且保持按压时长大于或等于第一设定时长,例如:第一按压时长为700ms;可选的,当按压时长大于或等于第一设定时长后,该图片的尺寸二次缩小,且二次缩小后的图片继续跟随手指的移动而移动,电子设备的显示屏显示分享界面。分享界面可以包括电子设备周围全部可分享设备的图标,也可以仅包括电子设备头部朝向的可分享设备的图标,电子设备的定位驱动可以定位出电子设备头部朝向的可分享设备。当分享界面仅包括电子设备头部朝向的可分享设备的图标时,可以便于用户更加精准的选择目标设备,也可以直观显示出电子设备头部朝向的可分享设备。图9d所示的分享界面包括一个可分享设备的图标,即:智慧屏的图标。如图9d所示,该界面通过指定形状的边框包围二次缩小后的图片和智慧屏的图标,且在二次缩小后的图片与智慧屏的图标之间设置指示图形,以表明用户下一步操作的操作方向。例如:指定形状的边框为椭圆形的闭合虚线,指示图形为箭头。若分享界面包括多个可分享设备的图标,该界面可以通过一个指定形状的边框包围二次缩小后的图片和多个可分享设备的图标,且在二次缩小后的图片与每个可分享设备的图标之间设置指示图形;该界面也可以通过多个指定形状的边框包围二次缩小后的图片和多个可分享设备的图标,其中,每个指定形状的边框包围二次缩小后的图片和一个可分享设备的图标,且在二次缩小后的图片与每个可分享设备的图标之间设置指示图形。可选地,分享界面也可以以雷达图的形式显示出可分享设备的图标,图15d为本申请实施例提供的一种以雷达图的形式显示可分享设备的图标的示意图,如图15d所示,智慧屏的图标以雷达图的形式显示于分享界面中,二次缩小后的图片处于雷达图的正中央,若定位到的智慧屏处于电子设备的12点钟方向,且距离电子设备3m的位置,则在雷达图中,智慧屏的图标处于二次缩小后的图片的12点钟方向,且相距二次缩小后的图片有设定距离,例如:设定距离为3cm。进一步地,图15d所示的分享界面还包括退出按钮的图标,用于退出当前分享界面。退出按钮的图标可以设置于指定位置,例如:如图15d所示,退出按钮的图标设置于电子设备的显示屏的左上角。需要说明的是,本申请实施例对退出按钮的图标的位置不作限定;二次缩小后的图片和可分享设备的图标还可以在雷达图中具有其它表现形式,本申请实施例对此不作限定。
图13a至图13d(即图13a、图13b、图13c、图13d)和图9a至图9d(即图9a、图9b、图9c、图9d)相同,在此不再赘述;图15a至图15c(即图15a、图15b、图15c)与图9a 至图9c(即图9a、图9b、图9c)相同,在此不再赘述。
需要说明的是,本申请实施例对第一滑动操作和第一按压操作的描述仅为示例性说明,第一滑动操作和第一按压操作也可以具有其他表现形式,本申请实施例对此不作限定。
作为另一种可选方案,第一操作可以包括第二滑动操作。以分享一张图片为例,图10a 至图10c为本申请实施例提供的又一种分享界面的示意图,如图10a所示,用户选取该图片后,用手指拖动该图片从电子设备的显示屏的底部区域向上滑动,可选的,图片的尺寸可以随着手指的向上滑动逐渐缩小到一定尺寸,滑动后的示意图如图10b所示;可选地,当滑动距离大于或等于指定距离时,该图片的尺寸二次缩小,且二次缩小后的图片继续跟随手指的移动而移动,电子设备的显示屏显示分享界面。可选地,指定距离为3cm。分享界面可以包括电子设备周围全部可分享设备的图标,也可以仅包括电子设备头部朝向的可分享设备的图标,电子设备的定位驱动可以定位出电子设备头部朝向的可分享设备。当分享界面仅包括电子设备头部朝向的可分享设备的图标时,可以便于用户更加精准的选择目标设备,也可以直观显示出电子设备头部朝向的可分享设备。图10c所示的分享界面包括一个可分享设备的图标,即:智慧屏的图标。如图10c所示,该界面通过指定形状的边框包围二次缩小后的图片和智慧屏的图标,且在二次缩小后的图片与智慧屏的图标之间设置指示图形,以表明用户下一步操作的操作方向。例如:指定形状的边框为椭圆形的闭合虚线,指示图形为箭头。若分享界面包括多个可分享设备的图标,该界面可以通过一个指定形状的边框包围二次缩小后的图片和多个可分享设备的图标,且在二次缩小后的图片与每个可分享设备的图标之间设置指示图形;该界面也可以通过多个指定形状的边框包围二次缩小后的图片和多个可分享设备的图标,其中,每个指定形状的边框包围二次缩小后的图片和一个可分享设备的图标,且在二次缩小后的图片与每个可分享设备的图标之间设置指示图形。可选地,分享界面也可以以雷达图的形式显示出可分享设备的图标。
图16a至图16b与图10a至图10c相同,在此不再赘述;图17a至图17b与图10a至图10b相同,在此不再赘述。
需要说明的是,本申请实施例对第二滑动操作的描述仅为示例性说明,第二滑动操作也可以具有其它表现形式,本申请实施例对此不作限定。
作为另一种可选方案,第一操作可以包括第二按压操作,第二按压操作包括多指按压操作,手指的数量大于1且小于或等于5,作为一种可选方案,多指按压操作包括三指按压操作。以分享一张图片为例,图11a至图11c为本申请实施例提供的又一种分享界面的示意图,如图11a至图11b所示,用户选取该图片后用三根手指按压该图片且保持按压时长大于或等于第二设定时长。作为一种可选方案,第二设定时长为700ms;当按压时长大于或等于第二设定时长时,电子设备的显示屏显示分享界面,此时该图片可以全屏或以一定尺寸显示于电子设备的显示屏上,图11c所示的分享界面显示的图片是全屏显示于电子设备的显示屏上;分享界面可以包括电子设备周围全部可分享设备的图标,也可以仅包括电子设备头部朝向的可分享设备的图标,电子设备的定位驱动可以定位出电子设备头部朝向的可分享设备。当分享界面仅包括电子设备头部朝向的可分享设备的图标时,可以便于用户更加精准的选择目标设备,也可以直观显示出电子设备头部朝向的可分享设备。图11c所示的分享界面包括一个可分享设备的图标,即:智慧屏的图标。如图11c所示,该界面以雷达图的形式显示出可分享设备的图标。可选地,分享界面也可以通过指定形状的边框包围缩小后的图片和智慧屏的图标,且在缩小后的图片与智慧屏的图标之间设置指示图形的形式显示出可分享设备的图标,具体可参见图12c或图14c,在此不再赘述。
图12a至图12b与图11a至图11b相同,图14a至图14b与图11a至图11b相同,在此不再赘述。
需要说明的是,本申请实施例对第二按压操作的描述仅为示例性说明,第二按压操作也可以具有其它表现形式,本申请对此不作限定。
进一步地,图11c所示的分享界面还包括退出按钮的图标,用于退出当前分享界面。退出按钮的图标可以设置于指定位置,例如:如图11c所示,退出按钮的图标设置于电子设备的显示屏的左上角。需要说明的是,本申请实施例对退出按钮的图标的位置不作限定。
图17c为本申请实施例提供的又一种以雷达图的形式显示出可分享设备的图标的界面示意图,图17c与图11c的区别仅在于,图17c中的图片是以一定尺寸显示于电子设备的显示屏上的,图11c中的图片是全屏实现与电子设备的显示屏上的。
用户可以通过第二操作触发将目标文件分享至目标设备。第二操作包括将目标文件拖动至目标设备的图标上的操作。以目标文件为图片,且目标设备为智慧屏为例,图9e为本申请实施例提供的一种将目标文件分享至目标设备的界面示意图,如图9e所示,分享界面包括一个可分享设备的图标,即:智慧屏的图标。用户可以用单根手指沿指示图形所示的方向将二次缩小后的图片拖动至智慧屏的图标上,完成将该图片分享至智慧屏的操作。若分享界面包括多个可分享设备的图标,用户可以用单根手指沿指示图形所示的方向将二次缩小后的图片拖动至其中一个可分享设备的图标,该图标用于指示目标设备。
图10d与图9e相同,在此不再赘述。
本申请实施例中,用户也可以用多根手指将目标文件拖动至目标设备的图标上,手指的数量大于1且小于或等于5,作为一种可选方案,用户可以用三根手指将目标文件拖动至目标设备的图标上。以目标文件为图片,且目标设备为智慧屏为例,图12d为本申请实施例提供的又一种将目标文件分享至目标设备的界面示意图,如图12d所示,用户用三根手指沿指示图形所示的方向将缩小后的图片拖动至智慧屏的图标上,完成将该图片分享至智慧屏的操作。若分享界面包括多个可分享设备的图标,用户可以用多根手指沿指示图形所示的方向将缩小后的图片拖动至其中一个可分享设备的图标,该图标用于指示目标设备。
进一步地,在目标文件被分享至目标设备的过程中,围绕目标设备的图标会出现一圈分享进度条,分享进度条用于指示当前分享进度,当分享完成后,目标设备的界面上会显示分享完成标识。可选地,分享完成标识位于目标设备的图标的右上角。分享完成标识的样式可根据实际情况进行设置,例如,分享完成标识的样式为对勾图标。需要说明的是,本申请实施例对分享完成标识的位置和分享完成标识的样式不作限定。
作为另一种可选方案,第二操作可以包括将目标文件向目标设备的图标所在方向拖动后释放目标文件的操作,以使目标文件移动至目标设备的图标上。以目标文件为图片,且目标设备为智慧屏为例,图13e至图13f为本申请实施例提供的又一种将目标文件分享至目标设备的界面示意图,如图9e所示,分享界面包括一个可分享设备的图标,即:智慧屏的图标。用户可以用单根手指沿指示图形所示的方向将二次缩小后的图片向智慧屏的图标的方向上拖动后抬起手指,抬手后的界面如图13f所示,虚线部分是二次缩小后的图片在抬手前所处的位置,该图片以指定动画效果从虚线部分的位置移动至智慧屏的图标上,例如:指定动画效果为快速移动。
图16d至图16e与图13e至图13f相同,在此不再赘述。
本申请实施例中,当分享界面包括一个可分享设备的图标时,用户也可以用多根手指将目标文件向目标设备的图标所在方向拖动后释放目标文件,以使目标文件移动至目标设备的图标上,其中,手指的数量大于1且小于或等于5,作为一种可选方案,用户可以用三根手指将目标文件向目标设备所在方向拖动后释放目标文件。图14d至图14e为本申请实施例提供的又一种将目标文件分享至目标设备的界面示意图,如图14d所示,分享界面包括一个可分享设备的图标,即:智慧屏的图标。用户可以用三根手指沿指示图形所示的方向将二次缩小后的图片向智慧屏的图标的方向上拖动后抬起手指,抬手后的界面如图14e所示,虚线部分是二次缩小后的图片在抬手前所处的位置,该图片以指定动画效果从虚线部分的位置移动至智慧屏的图标上,例如:指定动画效果为快速移动。
本申请实施例中,若分享界面包括多个可分享设备的图标,当用户用单根手指或多根手指将沿指示图形所示的方向将二次缩小后的图片向智慧屏的图标的方向上拖动后抬起手指时,由于分享界面包括两个可分享设备,无法确定出目标设备,因此需要用户选择目标设备,电子设备的显示屏显示第一弹窗。以分享一张图片为例,图18为本申请实施例提供的一种第一弹窗的界面示意图,如图18所示,分享界面包括两个可分享设备的图标,分别为智慧屏和 matebook,当用户抬起手指时,电子设备的显示屏显示第一弹窗,第一弹窗的第一弹窗问题为:请选择目标设备;第一弹窗选项为:“智慧屏”和“matebook”。本申请实施例中,第一弹窗的第一弹窗选项设置为多选,即:用户可以从多个可分享设备中选择至少一个可分享设备,将选择的至少一个可分享设备确定为目标设备,将目标文件分享至至少一个目标设备。
需要说明的是,图18所示的第一弹窗选项包括多个可分享设备的设备名,图18所示的第一弹窗仅为本申请实施例提供的一种示例性的第一弹窗。作为另一种可选方案,第一弹窗的第一弹窗选项还可以包括多个可分享设备的图标;作为另一种可选方案,第一弹窗的第一弹窗选项还可以包括多个可分享设备的设备名和图标,本申请实施例对此不作限定。
本申请实施例中,在目标文件分享至至少一个目标设备的过程中,需要对目标设备是否具备显示目标文件所属的应用程序的能力进行判断,若目标设备不具备显示目标文件所属的应用程序的能力,将目标文件分享至目标设备;若目标设备具备显示目标文件所属的应用程序的能力,电子设备显示第二弹窗,以供用户选择目标文件的分享类型。例如:判断目标设备是否具备显示目标文件所属的应用程序的能力的判断条件为目标设备是否具备显示屏,具体地,若判断出目标设备具备显示屏,表明目标设备具备显示目标文件所属的应用程序的能力;若判断出目标设备不具备显示屏,表明目标设备不具备显示目标文件所属的应用程序的能力。以分享一张图片为例,图19为本申请实施例提供的一种第二弹窗的界面示意图,如图 19所示,在缩小后的图片移动至目标设备的图标上之后,判断出智慧屏具备显示屏,电子设备显示第二弹窗,第二弹窗包括第二弹窗问题和第二弹窗选项,第二弹窗问题为:请选择分享的类型;第二弹窗选项为:“分享页面中的图片”和“分享图库”。第二弹窗的第二弹窗选项设置为单选,当用户选择“分享页面中的图片”时,表明仅将当前图片分享至智慧屏;当用户选择“分享图库”时,表明将图库分享至智慧屏。需要说明的是,本申请实施例描述的判断目标设备是否具备显示目标文件所属的应用程序的能力的判断条件仅为一种示例性描述,在一些实施例中,还可以通过其它判断条件来判断目标设备具备的能力,本申请实施例对此不作限定。
作为另一种可选方案,第二操作可以包括释放第一操作并点击一个或多个可分享设备的图标的操作。以目标文件为图片,且目标设备为智慧屏为例,图15d至图15e为本申请实施例提供的一种将目标文件分享至目标设备的界面示意图,用户释放第一操作的示意图如图15d 所示,用户抬起手指,即:释放第一操作。用户释放第一操作后,电子设备的显示屏显示分享界面,该分享界面包括电子设备头部朝向的可分享设备的图标,电子设备的定位驱动可以定位出电子设备头部朝向的可分享设备,如图15e所示,分享界面包括一个电子设备头部朝向的可分享设备的图标,即:智慧屏的图标,且该可分享设备的图标是以雷达图的形式显示于该分享界面上,用户可以用手指点击智慧屏的图标,将智慧屏确定为目标设备,并将该图片分享至智慧屏。当分享界面包括多个电子设备头部朝向的可分享设备的图标时,用户可以用手指点击一个或多个可分享设备的图标,该图标用于指示可分享设备,将点击的一个或多个可分享设备的图标所指示的可分享设备确定为目标设备,并将目标文件分享至至少一个目标设备。图15d和图15e所示的界面示意图还包括退出按钮的图标,用于退出当前分享界面。若用户此时想要终止目标文件的分享,可以点击退出按钮的图标,以返回至如图15a所示的界面;或者,可以点击目标文件,以返回至如图15a所示的界面。用户也可以通过其它方式终止目标文件的分享,本申请实施例对此不作限定。
图17d与图15e相同,在此不再赘述。图11d与图15e的区别仅在于,图15e中的图片是以一定尺寸显示于电子设备的显示屏上的,图11d中的图片是全屏实现与电子设备的显示屏上的。
需要说明的是,图15e所示的通过点击的方式选择目标设备仅为一种示例性描述,目标设备也可以通过其他方式进行选择,本申请实施例对此不作限定。
本申请实施例中,采用第一操作和第二操作来描述具体的操作,但这些操作不应限于这些术语。这些术语仅用来将操作彼此区分开。例如,在不脱离本申请实施例范围的情况下,第一操作也可以被称为第二操作,类似地,第二操作也可以被称为第一操作。本申请实施例中,可分享设备的支持的能力不同,因此,目标文件分享的分享类型不同。分享类型包括应用型或文件型。其中,应用型包括电子设备将目标文件所属的应用程序分享至目标设备的类型,分享后若用户在电子设备上针对该应用程序进行操作并生成结果,该结果会显示到目标设备的显示屏上;文件型包括将目标文件分享至目标设备的类型。
以分享一个音乐文件为例,图20为本申请实施例提供的一种可分享设备的图标示意图,如图20所示,该图标示意图包括多个可分享设备的图标,且多个可分享设备的图标以雷达图形式显示于电子设备的显示屏上,多个可分享设备包括用户a的matebook、用户b的智慧屏和用户c的音箱。可分享设备的图标可以具备不同的形状,且可分享设备的图标可以包括多个子图标,每个子图标对应于一个分享类型,不同的子图标可以具备不同的图案,不同的图案可以代表不同的分享类型。例如:用户a的matebook的图标采用椭圆形图标,且椭圆形图标被划分为左右两个子图标,左边的子图标的图案为空白图案,右边的子图标的图案为波点图案,空白图案表示将该音乐文件分享至该matebook,波点图案表示将该音乐文件所属的应用程序分享至该matebook。c的音箱的图标采用圆形图标,且该圆形图标的图案为空白图案,表示将目标文件分享至该音箱。用户可以用手指将该音乐文件拖动至目标设备的子图标。图 21为本申请实施例提供的选择分享类型的界面示意图,如图21所示,若用户将该音乐文件向用户a的matebook的左边的子图标拖动,使得该音乐文件靠近用户a的matebook的左边的子图标,当前界面显示指示图形,该指示图形用于指示分享类型,如图21所示,指示图形为箭头,箭头指示该音乐文件的分享类型为文件型。
进一步地,若目标设备不支持目标文件的分享,则不显示该目标文件的图标或以指定显示方式显示该目标设备的图标。以分享一张图片为例,若定位到电子设备周围的可分享设备包括音箱,但音箱不支持分享图片,则在分享界面上可以不显示音箱的图标或者分享界面显示灰色的音箱图标。
本申请实施例中,当目标文件靠近目标设备的子图标时,通过指示图形指示选择的分享类型,可以更加明确的示意用户当前的选择方向,降低用户由于手误导致分享类型选择错误的概率,使得用户可以按照自身意图做出精确选择。
需要说明的是,可分享设备的图标的还可以具备其它形状,例如:三角形、矩形和菱形,本申请实施例对此不作限定。子图标还可以具备其它图案,例如:横向条纹图案、竖向条纹图案或波浪图案,本申请实施例对此不作限定。本申请实施例对不同图案代表的不同的分享类型的描述仅作为一种示例性描述,不同图案还可以代表其它分享类型,本申请实施例对此不作限定。
下面对电子设备周围的可分享设备的定位过程进行介绍:以可分享设备的数量为一个为例,图22a为本申请实施例提供的电子设备定位可分享设备的示意图。如图22a所示,该示意图包括电子设备51和可分享设备52。其中,电子设备51包括第一发射器511、第一接收器512、第一天线512和定位驱动513;可分享设备52包括第二发射器521、第二接收器521和第二天线522。下面对定位驱动包括UWB驱动的定位过程和定位驱动包括蓝牙驱动的定位过程分别进行描述:
若定位驱动513包括UWB驱动,UWB驱动包括UWB芯片,UWB芯片控制第一发射器511通过单根第一天线512向可分享设备52的第二接收器521发送测量脉冲信号;第二发射器521通过多根第二天线522根据测量脉冲信号向电子设备的第一接收器512反射回反射信号;第一接收器512将反射信号发送至UWB芯片;UWB芯片可以记录发送测量脉冲信号的第一时间戳和接收反射信号的第二时间戳,并通过飞行时间测距法(Time of Flight,简称:ToF)根据第一时间戳和第二时间戳之间的时间段,计算出电子设备与可分享设备之间的距离; UWB芯片通过球面相交法根据电子设备与可分享设备之间的距离计算出可分享设备的位置。其中,飞行时间测距法具体包括:将第一时间戳和第二时间戳之间的时间段,乘以测量脉冲信号在空气中的传播速度,得到脉冲信号往返一次的距离,再将该距离除以2,得到电子设备与可分享设备之间的距离。其中,测量脉冲信号在空气中的传播速度为定值v=30万千米/ 秒。
若定位驱动513包括蓝牙驱动,蓝牙驱动具有蓝牙芯片。蓝牙驱动的定位过程与UWB 驱动的定位过程相同,在此不再赘述。
下面对电子设备头部朝向的可分享设备的定位过程进行介绍:
电子设备内设置有陀螺仪传感器,陀螺仪传感器可以检测出电子设备头部的朝向。定位驱动513包括定位芯片,其中,定位芯片为UWB芯片或蓝牙芯片。如上所述,定位芯片可以计算出电子设备与可分享设备之间的距离和可分享设备的位置,例如:智慧屏处于电子设备的12点钟方向,且距离电子设备3m的位置。陀螺仪传感器可以将检测出的电子设备头部的朝向发送至定位芯片;定位芯片根据电子设备头部的朝向、电子设备与可分享设备之间的距离和可分享设备的位置,定位出电子设备头部朝向的可分享设备。图22b为本申请实施例提供的一种定位电子设备头部朝向的可分享设备的界面示意图,如图22b所示,电子设备的定位驱动定位出位于电子设备周围的两个可分享设备,两个可分享设备分别为智慧屏和 matebook,其中,智慧屏位于电子设备头部朝向的位置,matebook位于电子设备左侧的位置。分享界面仅显示电子设备头部朝向的可分享设备的图标,即:该界面仅显示智慧屏的图标,不显示matebook的图标,其中,智慧屏的图标的边框用实线示意,以表明该分享界面显示智慧屏的图标;matebook的图标的边框用虚线示意,以表明该分享界面不显示matebook的图标。该界面通过指定形状的边框包围图片和智慧屏的图标,且在该图片与智慧屏的图标之间设置指示图形,以表明用户下一步操作的操作方向。例如:指定形状的边框为椭圆形的闭合虚线,指示图形为箭头。需要说明的是,不显示的可分享设备的图标的边框还可以具备其它表现形式,本申请实施例对此不作限定。
本申请实施例中,电子设备不仅可以向指向方向上的目标设备发送目标文件,电子设备还可以将目标设备正在执行的任务(例如,下文中描述的第一信息)显示到电子设备中。电子设备还可以在电子设备的用户界面中对目标设备进行控制,例如关机、开机、暂停、启动等等。
下面将结合附图示例性的展示电子设备获取用户第一指向性操作的方向上的目标设备的第一信息或控制指令的具体过程。
图23a-图23l示例性地示出手机111获取电视机113的第一信息或控制指令的过程。
图23a示出了用户在多设备场景100A。多设备场景100A可以参考上文对图1a的描述,此处不再赘述。在多设备场景100A中,用户可以对手机进行第二指向性操作。用户对手机 111进行第二指向性操作时,手机111可以显示主界面。
在本申请实施例中,第五操作可以包括第二指向性操作。
图23b示出了手机111的用户界面200。用户界面200即为手机111的主界面。用户界面 200具体可以参考上文对图2a的描述,此处不再赘述。
可选地,用户在对手机111进行第二指向性操作时,手机111可以显示其他用户界面。例如,视频播放界面、锁屏界面等等此处不作限定。
用户对手机111进行的第二指向性操作可以是图23a中示出的用户将手机113的顶部指向电视机113,并将手机朝着远离电视机113的方向移动。在移动的过程中,手机111的顶部可以一直指向电视113。手机111可以利用加速度传感器和角速度传感器检测到该用户操作。例如,当加速度传感器检测到的加速度大于或等于第三阈值,陀螺仪传感器检测到的角速度为第四阈值时,手机111可以确定用户在对手机111进行第二指向性操作。第三阈值和第四阈值可以由系统配置。
可选地,手机111可以利用加速度传感器和触摸传感器检测用户的第二指向性操作。例如,当加速度传感器检测到的加速度大于或等于第三阈值,且触摸传感器在第三时长内未检测用户的触摸操作时,手机111确定用户在对手机111进行第二指向性操作。第三时长可以有系统配置。手机111可以根据第二指向性操作确定目标设备,并确定用户是想要手机111 获取目标设备第一信息或控制指令。
可选地,第二指向性操作可以是两个用户操作的结合。例如,如图23c所示,用户可以先将手机111向靠近的电视机的方向移动,然后再将手机111朝着远离电视机113的方向移动。这样,手机111可以先根据用户将手机111向靠近的电视机的方向移动的操作确定出目标设备。然后手机111可以根据用户将手机111朝着远离电视机113的方向移动的操作确定用户是想要手机111获取目标设备第一信息或控制指令。
可选地,第二指向性操作可以是当电子设备的顶部指向目标设备时,用户将电子设备向远离目标设备的方向移动。如图23d所示,手机111的顶部指向电视机113,用户将手机111 向远离电视机113的方向移动。
可选地,第二指向性操作还可以是用户将手机111的顶部朝着目标设备(例如,电视机 113)的方向时,在手机111的显示屏上方隔空在第二方向移动手。例如图23e所示,用户将手机111的顶部朝着目标设备的方向,在手机111的显示屏上方隔空将手从手机111的顶部滑向底部。手机111可以利用加速度传感器和陀螺仪传感器检测出手机111顶部的朝向。手机111可以利用摄像头检测出该用户在手机111的显示屏上方隔空将手从手机111的顶部滑向底部。
可选地,第二指向性操作可以是两个用户操作的结合。例如,用户先将手机111向靠近的电视机的方向移动。然后,用户的手在手机111的显示屏中朝着第二方向滑动。
可选地,第二指向性操作可以是用户将手机111的顶部朝着目标设备(例如,电视机113) 的方向时,用户的手在手机111的显示屏中朝着第二方向滑动。例如图23f所示,用户将手机111朝着目标设备的方向,用户的手在手机111的显示屏中从上往下滑动。手机111可以利用加速度传感器和陀螺仪传感器检测出手机111顶部的朝向。手机111可以利用触摸传感器检测出用户的手在手机111的显示屏中从上往下滑动。
可选地,第二指向性操作可以是用户先将手机111向靠近的电视机的方向移动,然后在手机111的显示屏中朝着第二方向滑动。
当手机111检测到用户的第二指向性操作时,手机111可以获取到多设备场景100A中其他电子设备(例如电视机113、豆浆机114、音响112、跑步机115)的位置信息(例如三维位置坐标),并确定出该指向性操作的方向上所在的电子设备。这里可参考上文中对手机111 如何获取其他设备的位置信息的描述,此处不再赘述。
当手机111检测到用户的第二指向性操作时,手机111可以确定出目标设备为电视机113。这时,手机111可以在用户界面中显示出电视机113的图标。例如,如图4e所示的用户界面 60C。手机111也可以不在用户界面中显示,直接向电视机113发送获取电视机113的第一信息或控制指令的请求。
当电视机113接收到手机111发送的请求时,电视机113的用户界面可以如图23g所示。图23g示出了电视机113的用户界面1300。该用户界面1300中可以包括控件1301-控件1309。用户可以点击控件1301查看电视机113的账号登录信息。用户可以点击控件1302搜索与用户输入的文字相关的内容。用户可以点击控件1303回到电视机113的主页。用户可以点击控件1304观看地理搜索类节目。用户可以点击控件1305观看电视节目“XXX”。用户可以点击控件1307查看电视机113中播放电视节目的历史记录。用户可以点击控件1308查看电视机 113的信号源。用户可以点击控件1309查看电视机113的菜单。电视机113可以向手机111发送控制指令。该控制指令用于手机111来控制电视机113。
手机113可以接收到电视机113发送的控制指令。如图23h所示,手机111接收到控制指令后,可以显示用户界面1400。用户界面1400中可以包括控件1401-控件1410。用户点击控件1401后,电视机113可以显示设置界面。用户可以通过点击控件1402来使得电视机113 关机或开机。用户可以点击控件1403选定电视机113中的节目进行播放。用户可以点击控件 1404来使电视机113中的频道加或减。用户可以点击控件1405增大或减少电视机113的音量。用户可以通过点击控件1407向上翻看电视机113中的节目单。用户可以通过点击控件 1410向下翻看电视机113中的节目单。用户可以点击控件1408使得电视机113中播放的节目快退。用户可以点击控件1409使得电视机113中播放的节目快进。用户可以点击控件1406 返回手机111的上一级界面。
可选地,若手机111与电视机113的登录账号不同,且手机111没有获取到电视机113 的权限,那么手机111无法获取电视机113的第一信息或控制指令。或者电视机113处于忙碌状态(例如,其他用户正在控制电视机113、电视机113正在与其他电子设备进行数据交互),手机111无法获取电视机113的第一信息或控制指令。如图23i所示,手机111在用户界面200中显示提示框206。提示框206用于提示用户电视机113未响应。可选地,提示框 206还可以包括控件207和控件208。用户可以点击控件207再次向电视机113发送请求。该请求用于请求电视机113发送第一信息和控制指令。用户可以点击控件208用来取消手机111 中要获取电视机113的第一信息和控制指令的任务。
可选地,当电视机113接收到手机111发送的请求时,电视机113的用户界面可以如图 23j所示。电视机113可以显示用户界面900。用户界面900中显示正在播放视频。用户界面 900可以包括文本901。文本901用来显示播放视频的信息,例如视频名称。电视机113响应于手机111的请求,可以向手机111发送电视机113第一信息,或者发送第一信息和控制指令。
手机111可以接收到电视机113发送的第一信息和控制指令。如图23k所示,手机111 接收到电视机113发送的第一信息和控制指令后,可以显示用户界面1500。用户界面1500 中可以包括控件1501、文本信息1502、控件1503、控件1504、控件1505、控件1506、控件1507以及控件1508。用户可以点击控件1501,手机响应于该用户操作,手机111可以播放电视机113中正在播放的视频。文本信息1502用来显示电视机113中当前正在播放的视频的信息。例如,视频名称,播放次数(例如“X万次播放”)、视频类型(例如记录片)、网址、演员表等等。用户可以通过点击控件1503控制电视机113播放上一集视频。用户可以通过点击控件1504控制电视机113中播放的视频快退。用户可以点击控件1505控制电视机播放的视频暂停或播放。用户可以通过点击控件1506控制电视机113中播放的视频快进。用户可以通过点击控件1507控制电视机113播放下一集视频。用户可以点击控件1508返回手机111 的上一级界面。
可选地,如图23l所示,手机111接收到电视机113发送的第一信息和控制指令后,可以显示用户界面1600。用户界面1600中可以包括文本信息1601、控件1602。文本信息1601用来显示电视机113中当前正在播放的视频的信息。例如,视频名称为,播放次数(例如“X万次播放”)、视频类型(例如记录片)、网址、演员表等等。用户可以点击控件1602返回手机111的上一级界面。
这样,用户可以通过简单的操作可以将电视机113的第一信息和控制指令获取到手机111 中。这样,用户可以在手机111中查看电视机113当前播放视频的信息。或者通过指向性操作就可以控制电视机113。这样,用户操作简单,可以提升用户体验。
在一个可行的例子中,手机111还可以通过指向性操作获取音响112的第一信息和控制指令。手机111通过指向性操作获取音响112的第一信息和控制指令的具体操作过程可以参考上述图23a-图23e中的描述,此处不再赘述。如图24a所示,手机111接收到音响112的第一信息和控制指令后,手机111可以显示用户界面4000。用户界面4000中可以包括文本4001、歌曲进度条4002、控件4003-控件4010。文本4001可以为音响112播放歌曲的信息(例如,歌曲名称和歌曲演唱者等等)用户可以通过歌曲进度条4002调整音响112中歌曲的播放进度。用户可以点击控件4003调整音响112中歌曲的播放音量。用户可以点击控件4004让手机111和音响112进行蓝牙连接。用户可以点击控件4005让音响112播放上一首歌曲。用户可以点击控件4006可以控制音响112暂停播放歌曲或开始播放歌曲。用户可以点击控件 4007让音响112播放下一首歌曲。用户可以点击控件4008查看音响112的音乐播放列表。用户点击控件4009,点击控件4009后,手机111可以播放音响112中当前正在播放的歌曲。
可选地,手机111没有控制音响112的权限,手机只可以获取到音响112的第一信息。如图24b所示,手机111接收到音响112的第一信息,手机111可以显示用户界面4100。用户界面4100中可以显示音响112中当前播放歌曲的名称、演唱者、以及歌词等信息。
在一个可行的例子中,手机111还可以通过指向性操作获取豆浆机114的第一信息和控制指令。手机111通过指向性操作获取豆浆机114的第一信息和控制指令的具体操作过程可以参考上述图23a-图23e中的描述,此处不再赘述。如图25a所示,手机111接收到豆浆机 114的第一信息和控制指令后,手机111可以显示用户界面4200。用户界面4200中可以包括控件4201-控件4207。用户可以点击控件4201查看豆浆机114中正在制作食物的详细制作流程。控件4202用于显示豆浆机114当前的状态(例如空闲或繁忙)。控件4203用于显示豆浆机114完成正在制作食物的剩余时间(例如,“00:03:10”)。用户可以点击控件4204使豆浆机114暂停工作。用户可以点击控件4205启动豆浆机114。用户可以点击控件4206取消豆浆机114当前任务。用户可以点击控件4207返回手机111的上一级界面。
可选地,手机111没有控制豆浆机114的权限,手机只可以获取到豆浆机114的第一信息。如图25b所示,手机111接收到豆浆机114的第一信息,手机111可以显示用户界面4300。用户界面4300中可以包括控件4301-控件4304。用户可以点击控件4301查看豆浆机114中正在制作食物的详细制作流程。控件4302用于显示豆浆机114当前的状态(例如空闲或繁忙)。控件4303用于显示豆浆机114完成正在制作食物的剩余时间(例如,“00:03:10”)。用户可以点击控件4304返回手机111的上一级界面。
在一个可行的例子中,手机111还可以通过指向性操作获取跑步机115的第一信息和控制指令。手机111通过指向性操作获取跑步机115的第一信息和控制指令的具体操作过程可以参考上述图23a-图23e中的描述,此处不再赘述。如图26a所示,手机111接收到跑步机 115的第一信息和控制指令后,手机111可以显示用户界面4400。用户界面4400中可以包括控件4402-控件4409。用户可以点击控件4401查看跑步机115正在进行课程的详情。控件4402 用于显示跑步机115当前的状态(例如空闲或繁忙)。控件4403用于显示跑步机115完成正在进行中的运动剩余时间(例如,“00:03:10”)。用户可以点击控件4404调整跑步机115的速度。用户可以点击控件4405调整跑步机的坡度。用户可以点击控件4406使跑步机115暂停。用户可以点击控件4407启动跑步机115。用户可以点击控件4408取消跑步机115中的运动任务。
可选地,手机111没有控制跑步机115的权限,手机只可以获取到跑步机115的第一信息。如图26b所示,手机111接收到跑步机115的第一信息,手机111可以显示用户界面4500。用户界面4500中可以包括控件4501。控件4501用于显示跑步机115当前的状态(例如空闲或繁忙)。
手机111还可以通过第二指向性操作获取到平板电脑116以及电脑117等电子设备的第一信息和控制指令。具体可以参考上文中手机11通过第二指向性操作获取到电视机113的第一信息和控制指令的描述,此处不再赘述。
在一些实施例中,越来越多的用户选择利用智能化技术将安防,照明,健康,厨电、家装,清洁等智能家居设备集成,构建高效的住宅设施与家庭日程事务的智能家居系统,以提升家居安全性、便利性、舒适性等。在智能家居系统中,通常可以利用便携设备(如智能手机)实现对不同智能家居设备的管理和控制。例如,智能手机中可以安装有智能家居应用,该应用中包括用户添加的多个智能家居设备对应的虚拟“卡片”。用户可以通过不同的虚拟“卡片”管理和控制不同的智能家居设备。但是,随着智能家居设备越来越多,用户在需要控制例如智能家居设备A时,就需要通过该虚拟“卡片”进入智能家居设备A的控制界面,通过在该控制界面上的操作控制智能家居设备A。例如,通过点击虚拟电源按钮控制智能家居设备A 开机或关机。若用户需要控制多个智能家居设备,则需要逐一在多个虚拟“卡片”对应的控制界面进行相应控制操作。上述对智能家居设备的控制过程繁琐,花费时间较长,用户体验差。
为了简化对智能家居设备的控制过程,提升用户体验。本申请实施例提供了一种智能家居设备的控制方法。下面,本申请实施例将结合附图详细描述本申请实施例提供的一种通过电子设备(在下文中可以称为便携设备)对目标设备(在下文中可称为智能家居设备)进行控制的实现过程。
本申请实施例提供一种智能家居设备的控制方法,该方法应用于智能家居系统中,利用便携设备对智能家居设备的控制过程中。其中,智能家居系统中包括但不限于一个或多个便携设备、一个或多个路由器和一个或多个智能家居设备。
其中,智能家居设备是智能家居系统中的各种可通过无线通信技术控制的家居设备,例如用于安防、照明、环境、健康、厨电、娱乐、家装或清洁等的家居设备。示例性的,请参考图27,图27示出了本申请实施例提供的智能家居系统的结构示意图。如图27所示,智能家居系统中的智能家居设备可以包括用于安防的报警器、智能门锁等设备;用于照明的智能台灯、智能灯泡等设备;用于健康的新风系统、空气净化器、空气质量传感器等设备;用于厨电的洗碗机、消毒柜等设备;用于娱乐的电视机、音响等设备;用于家装的电动窗帘、智能门等设备;或者用于清洁的扫地机器人等设备。
图27所示的智能家居系统中的路由器也可以被称为智能主机或家庭网关。路由器用于连接两个或多个网络的硬件设备,在网络间起到网关的作用。路由器是读取每一个数据包地址,以及决定如何传送的专用智能性的网络设备。在智能家居系统中,路由器通过与主机的无线连接,可以方便用户使用便携设备管理和控制不同的智能家居设备。通常,路由器可以提供无线保真(wireless fidelity,Wi-Fi)热点,智能家居设备和便携设备可以通过接入路由器提供的Wi-Fi热点接入Wi-Fi网络。
在本申请中,便携设备用于辅助用户选择和控制智能家居系统中的各个智能家居设备和路由器等设备。例如,便携设备可以是智能手机。
需要说明的是,本申请图27仅作为一种智能家居系统示例,本申请并不限定智能家居系统的具体结构。例如,智能家居系统还可以不包括路由器,智能家居系统中的便携设备可以直接控制智能家居设备(例如通过Wi-Fi直连的方式直接控制智能家居设备)。又如,智能家居系统还可以包括例如具有其他功能的智能家居设备等其他设备。
另外,本申请中的便携设备除了可以是智能手机,还可以是上网本、平板电脑、智能手表、智能手环、电话手表、智能相机、掌上电脑、个人数字助理(personal digitalassistant, PDA)、便携式多媒体播放器(portable multimedia player,PMP)、(AugmentedReality,AR)、虚拟现实(Virtual Reality,VR)设备等。或者,便携设备还可以是其他类型或结构的电子设备,本申请不限定。
作为一种智能家居设备的控制方法,请参考图28,图28示出了一种便携设备控制智能家居设备的操作过程示意图。如图28所示,响应于用户在有操控智能家居设备意图时,在智能手机上打开智能家居应用的操作(如图28所示的操作2801),如图28所示,智能手机显示智能家居应用界面2802。其中,智能家居应用界面2802上显示有每一个用户已添加的智能家居设备对应的虚拟“卡片”。例如图28所示的智能台灯、空调、音响、扫地机器人、空气净化器、洗碗机和电动窗帘对应的虚拟“卡片”。假设此时用户需要对空调、音响和扫地机器人进行操控。则用户需要逐一点击进入空调、音响和扫地机器人对应的虚拟“卡片”,进入相应的控制界面进行新进行操作。例如,响应于用户打开空调控制界面的操作(如图28所示的用户点击空调对应的虚拟“卡片”的操作2803),如图28所示,智能手机显示空调控制界面2804。其中,空调控制界面2804上包括电源按钮、温度增加按钮(“+”)、温度降低按钮(“-”)等。智能手机可以响应于用户在空调控制界面2804的操作控制空调。例如,响应于用户在空调控制界面2804上点击电源按钮的操作2805,智能手机控制空调开机。以及接下来,响应于用户在空调控制界面2804上点击温度增加按钮(“+”)的操作2806,智能手机控制空调升高制冷温度。
可以看出,在控制界面上操控多个智能家居设备的时候,需要逐一进行。即,进入第一个智能家居设备的控制界面→操作第一个智能家居设备→返回→进入第二个智能家居设备的控制界面→操作第二个智能家居设备→返回→……。上述对智能家居设备的控制过程繁琐,花费时间较长,用户体验差。
为解决上述问题,本申请实施例提供一种智能家居设备的控制方法,该方法可以提供一种基于便携设备按键直接控制智能家居设备的方案。该方法的基本原理是:在确定用户操控意图时,即在确定用户想要操控的智能家居设备时,通过将便携设备按键的操控对象切换为智能家居设备,以实现通过对便携设备按键的操作直接控制智能家居设备的目的。
在一些实施例中,便携设备的按键可以包括物理按键例如电源键、音量增加键(“+”)、音量减小键(“-”)或指纹键等。在本申请中,对便携设备物理按键的操作可以包括但不限于对单一物理按键的操作和对多个物理按键的复用操作。对单一物理按键的操作例如对电源键的按压操作。对多个物理按键的复用操作例如对电源键和音量增加键(“+”)的同时按压操作。本申请不限定操作的具体形式,具体视物理按键的功能设置而定。例如,智能手机可以在确定用户想要操控台灯时,通过智能手机的电源键控制台灯的开启和关闭;通过智能手机的音量增加键(“+”)控制台灯的亮度增加,通过智能手机的音量减小键(“-”)控制台灯的亮度减小。又如,智能手机可以在确定用户想要操控音响时,通过智能手机的电源键控制音响的开启和关闭;通过智能手机的音量增加键(“+”)控制音响的音量增加,通过智能手机的音量减小键(“-”)控制音响的音量减小。又如,智能手机可以在确定用户想要操控电视机时,通过智能手机的电源键控制电视机的开启和关闭;通过智能手机的指纹键对使用电视业务的用户身份进行验证;通过智能手机的音量增加键(“+”)控制电视机的音量增加,通过智能手机的音量减小键(“-”)控制电视机的音量减小。
请参考图29,图29以便携设备的电源键、音量增加键(“+”)和音量减小键(“-”)为例,介绍一种便携设备物理按键对应的控制参数。如图29所示,便携设备的电源键可以对应于任意智能家居设备的“开启”或“关闭”。便携设备的音量增加键(“+”)可以对应风速增加、音量增大、亮度增强、温度升高、转速增加、强度增强、位置升高或打开等。便携设备的音量减小键(“-”)可以对应风速减小、音量减小、亮度减弱、温度降低、转速减小、强度减弱、位置降低或闭合等。其中,便携设备的音量键对应哪些具体控制参数视智能家居设备的功能而定。例如,在智能家居设备是风扇或空调时,便携设备的音量键可以对应风扇或空调的风速或转速;在智能家居设备是电视机或音响时,便携设备的音量键可以对应电视机或音响的音量;在智能家居设备是台灯时,便携设备的音量键可以对应台灯的亮度或强度;在智能家居设备是空调时,便携设备的音量键可以对应空调的温度;在智能家居设备是风扇时,便携设备的音量键可以对应风扇的转速;在智能家居设备是晾衣架时,便携设备的音量键可以对应台灯的位置升降;在智能家居设备是智能门锁时,便携设备的音量键可以对应智能门锁的开合。
需要说明的是,本申请中图29仅作为一种便携设备物理按键与控制参数的对应关系示例,便携设备物理按键可以对应的控制参数并不限于图29所示的控制参数。具体可以参考智能家居设备的功能和可以调节的参数。
另外,本申请并不限定便携设备按键的具体形式。在另一些实施例中,便携设备的按键可以包括虚拟按键。例如,便携设备的按键可以是便携设备中安装用于遥控的应用界面上的虚拟按键。或者,便携设备的按键可以是便携设其他用户界面(user interface,UI)上的虚拟操作,本申请不作限定。
在另一些实施例中,便携设备可以在检测到便携设备的运动轨迹满足预设运动轨迹和/或便携设备运动至预设空间姿态时,确定用户想要操控的智能家居设备(即便携设备指向的智能家居设备(如第一智能家居设备)。
例如,预设运动轨迹可以包括但不限于远离用户身体的轨迹。在一些实施例中,预设运动轨迹可以如图30中的(a)或图30中的(b)所示的手机从位置A运动到位置B的轨迹。运动至预设空间姿态可以包括但不限于运动至与水平面呈90°夹角(或者接近90°夹角)的空间姿态,或者运动至与水平面夹角为α(其中,0≤α<90°)。在一些实施例中,运动至预设空间姿态如图31中的(a)所示的手机从位置A运动到位置B处,与水平面呈90°夹角的空间姿态。在另一些实施例中,运动至预设空间姿态如图31中的(b)所示的手机从位置A运动到位置B处,与水平面呈α夹角的空间姿态,其中,0≤α<90°。
需要说明的是,本申请图30中的(a)和图30中的(b)所示的预设运动轨迹仅作为一种示例,本申请并不限定预设运动轨迹的具体轨迹阈值和判定标准等。另外,图31中的(a)和图31中的(b)所示的手机在位置B处的空间姿态仅作为两种示例,本申请并不限定预设空间姿态的具体设置和判定标准等。
在本申请中,作为一种可能的实现方式,便携设备可以通过传感器驱动采集的便携设备的运动数据,确定便携设备的运动轨迹和/或空间姿态。
例如,便携设备可以通过加速度传感器实时采集便携设备的运动方向和运动速度,并绘制出便携设备的运动轨迹,进而判断便携设备的运动轨迹是否满足预设运动轨迹。
又如,便携设备可以根据陀螺仪传感器、加速度传感器和磁传感器实时采集的便携设备的运动数据,采用九轴融合算法确定便携设备的空间姿态,进而判断便携设备的空间姿态是否满足预设空间姿态。在本申请中,便携设备的空间姿态可以用便携设备的预设坐标系相对于地面坐标系的欧拉角来表示。其中,欧拉角包括俯仰角(pitch)θ、偏航角(yaw)和横滚角(roll)φ。
以智能手机为例,便携设备的预设坐标系可以参考图32a,如图32a所示,以OA为坐标原点的xA轴,yA轴和zA轴构成右手直角坐标系。图32a所示的OA可以是智能手机的重心。智能手机可以包括四条边:长边01,短边02,与长边01平行且等长度的另一条长边,以及与短边02平行且等长度的另一条短边。yA轴平行于智能手机的短边02。xA轴平行于智能手机的长边01向上。zA轴垂直于yA轴,且垂直于xA轴。
地面坐标系可以如图32b所示,如图32b中的(a)和图32b中的(b)所示,以O为坐标原点的X轴,Y轴和Z轴构成右手直角坐标系。图32b中的(a)和图32b中的(b)所示的坐标原点O可以为空间中的任意一点。X轴指向水平面内的任一方向。Z轴垂直于X轴所在的平面并指向地心。Y轴垂直于X轴,且垂直于Z轴。
基于图32a所示的便携设备的预设坐标系和图32b所示的地面坐标系,便携设备的预设坐标系相对于地面坐标系的俯仰角θ可以是便携设备的预设坐标系的x轴与地面坐标系的 XOY所在平面(即水平面)的夹角。智能手表的预设坐标系相对于地面坐标系的俯仰角θ是 xA轴与水平面(即XOY所在平面)之间的夹角。便携设备的预设坐标系相对于地面坐标系的偏航角是便携设备的预设坐标系的x轴与地面坐标系的X轴之间的水平夹角,也就是OxA'(即OAxA')与地面坐标系的X轴之间的夹角。便携设备的预设坐标系相对于地面坐标系的横滚角φ是便携设备的预设坐标系的zA轴与通过xA轴的铅垂面(即xAOZ所在平面)之间的夹角。
需要说明的是,上述图32a仅以智能手机为例介绍便携设备的预设坐标系。便携设备的预设坐标系还可以根据其他规则定义。例如,坐标原点还可以为便携设备上或者便携设备外的其他任一点。预设坐标系的三轴方向也不限于图32a所示的xA轴,yA轴和zA轴所示的方向。本申请实施例对便携设备的预设坐标系的坐标原点位置和坐标轴方向设定不作限定。
在一些示例中,在便携设备检测到便携设备满足预设运动轨迹和/或便携设备运动至预设空间姿态时,便携设备具体可以通过以下步骤1和步骤2确定用户想要操控的智能家居设备 (即便携设备指向的智能家居设备(如第一智能家居设备):
步骤1:便携设备检测和识别周围的智能家居设备。
例如,便携设备可以触发通过UWB驱动或蓝牙驱动检测和识别周围的智能家居设备。
可以理解,智能家居设备和便携设备在接入网络(如Wi-Fi)后,可以获取到自身的接入信息。例如,接入信息中可以包括网络接入的方式,通信地址(如IP地址),接入信号强度指示(received signal strength indication,RSSI)参数等。如图33所示,由于信号强度是随传播距离逐渐衰减的,因此UWB或蓝牙传感器可以通过多根天线接收多个发射设备(如智能家居设备)发出的信号。根据不同接收信号的强度,计算不同接收信号的传输时间差,从而计算得到不同发射设备(如智能家居设备)相对于接收设备(如便携设备)的方位角和距离,从而实现便携设备对智能家居设备的识别。
假设第一智能家居设备是电视机,如图34所示,在电视机处于关机状态时,第一操作是用户在手持智能手机指向电视机时,按压智能手机电源键的操作1201(如图34中的标号A 处所示),则如图34中的标号B处所示,电视机开机,显示界面1202。在一些实施例中,假设用户根据电视机显示屏上的界面1202上的指纹验证指示,按压智能手机指纹键(如图34中的标号C处所示的操作1203),则如图34中的标号D处所示,电视机指纹验证通过,显示电视节目的界面1204。在另一些实施例中,假设用户在观看电视节目的过程中,按压智能手机音量增加键(“+”)(如图34中的标号E处所示的操作1205),则如图34中的标号F处所示,电视机显示音量增大的界面1206,同时电视机的音量增大。在另一些实施例中,假设用户按压智能手机电源键(如图34中的标号G处所示的操作1207),则如图34中的标号H处所示,电视机关机。
例如,假设第一智能家居设备是空调,便携设备是智能手机,智能手机的语音键可以通过长按音量减小键(“-”)来实现,如图35所示,响应于用户长按智能手机音量减小键(“-”) 的同时,发出的语音指令“调到26℃,2小时后关机”,空调将温度调节到26℃,并且,定时工作在2小时后关机。
本申请实施例中提供的电子设备控制目标设备的具体过程不限于上述图27-图35示出的实现过程。用户还可以根据图36-图53示出的操作过程来实现电子设备控制目标设备(在下文中又可以称为智能设备)。用户一般可以通过电子设备控制该多个智能设备,但是当用户使用电子设备控制该多个智能设备时,可能需要打开专门的应用程序,从该应用程序中点击对应的智能设备,才能实现对该智能设备的控制,整个操作过程复杂,降低了用户的使用体验。
为了简化电子设备对智能设备的控制过程,提升用户体验,本申请实施例图36-图53示出了一种可以简化操作的智能设备控制过程。具体如下:
图36是本申请实施例提供的一组GUI的示意图。其中,从图36中的(b)至(d)示出了手机在桌面状态下与其他智能设备进行交互的过程。该智能设备可以为智能电视、音箱、空调、平板电脑等。本申请实施例中手机的头部当前指向方向的智能设备为智能电视。
参见图36中的(a),该GUI为智能电视的显示界面3610。该显示界面3610可以包括预览界面3614,以及接口选项3611、视频选项3612和音频选项3613等功能选项。用户可以通过接口选项3611,如高清多媒体接口(high definition multimedia interface,HDMI),将智能电视连接机顶盒等;用户可以通过视频选项3612搜索视频,通过音频选项3613搜索音乐等。
参见图36中的(b),该GUI为手机的桌面3620,当手机检测到用户在该桌面3620的任意位置单指往下滑动的操作后,可以显示如图36中的(c)所示的GUI。
参见图36中的(c),该GUI为手机的搜索界面3630。该搜索界面3630可以显示用户常用的几款应用(application,App)、实时热点以及搜索历史等。当手机检测到用户的手指继续往下滑动时,若滑动的距离大于预设值,则手机可以显示如图36中的(d)所示的GUI。
参见图36中的(d),该界面3640可以包括用于显示手机指向方向的智能电视的显示界面卡片3641,该显示界面卡片3641为智能电视当前显示的界面3610,即该显示界面卡片3641 可以是嵌入到搜索界面3630中。
示例性地,该显示界面卡片3641位于该搜索界面3630的界面上方位置,如位于应用建议的上方,该显示界面卡片3641的上方还可以显示文字“我的智慧屏”等。
示例性地,手机和智能电视中均可以包括蓝牙器件或超宽带(ultra wide band,UWB)器件,则手机可以通过该蓝牙器件或UWB器件判断手机与智能电视之间的方位和距离,如,在手机判断其头部指向方向的设备为智能电视时,响应于用户的滑动操作,将智能电视显示的界面显示在手机屏幕中。下文将结合具体实施例介绍该蓝牙器件或UWB器件判断方位和距离的方案,此处暂不详述。
可选地,该显示界面卡片3641中还可以包括若干可以控制电视的功能控件,例如,增加、减小音量,切换频道等,该显示界面卡片3641中还可以包括关闭该显示界面卡片3641的控件等。
可选地,该智能电视未开机,则该显示界面卡片3641可以为控制电视开关的控制界面,用户可以在手机中控制该智能电视开机,并显示该智能电视的界面。
应理解,从图36中的(b)至(d)的过程中,用户的手指可以不离开桌面,即图36中的(b)中用户手指的滑动与图36中的(c)中用户手指的滑动是连续的。或者,用户的手指可以离开桌面,即图36中的(b)中用户手指的滑动与图36中的(c)中用户手指的滑动不是连续的,也就是说,只要手机检测到用户在桌面3620中单指下滑,就会显示搜索界面3630,手机检测到用户在搜索界面单指下滑超过预设距离,就会将手机指向方向的智能设备的显示界面拉入该搜索界面中。
可选地,在搜索界面3630中,手机检测到用户摇动或晃动手机时,也可以将手机头部指向方向的智能设备的显示界面卡片3641显示在手机的屏幕中,本申请实施例对此不做限定。
本申请实施例中,当用户通过电子设备(如手机)控制其他智能设备时,可以将电子设备的头部对准该智能设备,并在该电子设备的屏幕上做向下滑动、摇动或晃动的手势,就可以将该智能设备的显示界面显示在该电子设备的屏幕中,减少了用户使用电子设备控制其他智能设备、或使用电子设备与其他智能设备进行交互的冗余操作,使得电子设备与其他智能设备的交互简单快捷,有助于提升用户的体验。
图37是本申请实施例提供的另一组GUI的示意图。其中,从图37中的(b)至(d)示出了手机在锁屏界面状态下与智能电视进行交互的过程。本申请实施例中手机的头部当前指向的智能设备为智能电视。
图37中的(a)可以参考图36中的(a)的相关描述。
参见图37中的(b),该GUI为手机的锁屏界面3720,该锁屏界面3720的界面上方可以显示用于提示用户解锁的图标和提示文字,当手机检测到用户在该锁屏界面3720上单指下滑的操作后,可以显示如图37中的(c)所示的GUI。
参见图37中的(c),该GUI的显示界面3730可以包括用于用户提示的加载区域3731,该加载区域3731可以位于锁屏界面的界面上方位置,如,原用于显示解锁提示的位置,当手机检测到用户的手指继续往下滑动时,若滑动的距离大于预设值,则手机可以显示如图37中的(d)所示的GUI。
例如,该手机头部当前指向的智能设备为智能电视,则该加载区域3731用于显示提示用户的“电视”,若该手机头部当前指向的智能设备为智能音箱,则该加载区域3731可以显示“音箱”,从而用户可以验证加载区域显示的设备是否是手机当前指向的智能设备。
应理解,图37中的(b)至(c)的过程中,用户手指的滑动可以是连续的,或者,用户手指的滑动可以暂停,但当滑动暂停时,用户的手指仍需停留在手机桌面。
参见图37中的(d),锁屏界面3740可以显示手机头部当前指向的智能电视的显示界面卡片3741,该显示界面卡片3741即为智能电视的显示界面3610。该锁屏界面3740的界面上方还可以显示用于提示用户已经解锁的图标等。
其中,该显示界面卡片3741可以层叠于该锁屏界面之上,该显示界面卡片3741还可以嵌入该锁屏界面中,该显示界面卡片3741可以显示在手机屏幕的中间位置,中间位置偏上或偏下等,或者,用户可以根据需要自由拖动。
可选地,若该智能电视未开机,则该显示界面卡片3741可以为控制电视开关的控制界面,用户可以在手机中控制该智能电视开机,并显示该智能电视的界面。
本申请实施例中,当用户通过电子设备(如手机)控制其他智能设备时,可以将电子设备的头部对准该智能设备,并在该电子设备的锁屏界面上做向下滑动的手势,就可以将该智能设备的显示界面卡片显示在该电子设备的屏幕中,减少了用户使用电子设备控制其他智能设备、或使用电子设备与其他智能设备进行交互的冗余操作,使得电子设备与其他智能设备的交互简单快捷,提升了用户的体验。
图38是本申请实施例提供的另一组GUI的示意图。其中,从图38中的(b)至(d)示出了手机与空调进行交互的过程。本申请实施例中手机的头部当前指向方向的智能设备为空调。
参见图38中的(a),该空调3800可以是处于关闭状态。
图38中的(b)和(c)可以参照图36中的(b)和(c)中的相关描述,不再赘述。
参见图38中的(d),该显示界面3840可以显示空调的控制卡片3842,该控制卡片3842 中可以包括用于提示用户开启空调的控件3841,当手机检测到用户点击控件3841的操作之后,可以显示如图38中的(e)所示的GUI。
应理解,当用户点击控件3841的操作之后,空调会从关闭状态变成开启状态。
示例性地,该控制卡片3842可以位于该搜索界面3840的界面上方位置,如位于应用建议的上方,该控制卡片3842的上方还可以显示文字“我的智慧屏”等。
参见图38中的(e),该显示界面3850中可以包括空调的控制卡片3851,该控制卡片3851 中可以包括用于显示空调品牌的区域,以及可以控制风速、风向、扫风、电源3852、温度加减等的功能控件,用户可以通过点击该功能控件实现对空调的控制。示例性地,该控制卡片 3842可以位于该搜索界面3840的界面上方位置,如位于应用建议的上方,该控制卡片3842 的上方还可以显示文字“我的智慧屏”等。
可选地,用户可以在锁屏界面上进行上述相同的操作,本申请实施例对此不做限定。
本申请实施例中,当手机头部指向的设备为空调时,用户可以通过在手机屏幕上做手指下滑的操作,就可以将空调的控制界面显示在手机的屏幕中,该技术方案可以简单、快捷地实现用户对空调的控制,有助于提升用户体验。
图39是本申请实施例提供的另一组GUI的示意图。其中,从图39中的(a)至(d)示出了手机与平板电脑进行交互的过程。
图39中的(a),示出了平板电脑3900正在播放的界面3910。
图39中的(b)至(d)可以参考图36中的(b)至(d)的相关描述。
本申请实施例中,当手机头部指向方向的设备为平板电脑时,用户可以通过在手机屏幕上做手指下滑的操作,就可以将平板电脑当前的显示界面显示在手机的屏幕中,该技术方案可以简单、快捷地实现用户对平板电脑的控制,有助于提升用户体验。
图40是本申请实施例提供的另一组GUI的示意图。其中,从图40中的(a)至(h)示出了手机与智能电视进行交互的过程。
参见图40中的(a),该智能电视处于关闭状态。
图40中的(b)和(c),可以参照图37中的(b)和(c)的相关描述,不再赘述。
参见图40中的(d),该锁屏界面4040d上包括该智能电视的显示界面卡片4041d,该显示界面卡片为智能电视的控制卡片,该显示界面卡片4041d中包括用于提示用户开启空调的控件4042d,该显示界面卡片741的上方还可以显示文字“我的智慧屏”等,该锁屏界面4040d 的界面上方还可以显示用于提示用户已经解锁的图标等。当手机检测到用户点击控件4042d 的操作之后,该智能电视可以显示如图40中的(e)所示的GUI,同时,该手机可以显示如图40中的(f)或(g)所示的GUI。
可选地,该显示界面卡片4041d可以嵌入到锁屏界面中,或者,层叠在锁屏界面4040d 之上,该显示界面卡片4041d可以显示在手机屏幕的中间位置,中间位置偏上或偏下等。
参见图40中的(e),响应于用户点击控件4042d的操作,该智能电视由关机状态到开机状态,该GUI为智能电视当前的显示界面4011e。
参见图40中的(f),该锁屏界面4050f上包括该智能电视当前的显示界面卡片4051f,该显示界面卡片4051f即为智能电视当前的显示界面4011e,该显示界面卡片4051f的上方还可以显示文字“我的智慧屏”等,该锁屏界面4050f的界面上方还可以显示用于提示用户已经解锁的图标等。
在一个可选地实施例中,参见图40中的(g),该锁屏界面4060g上包括智能电视的显示界面卡片4061g,以及两个相关服务内容卡片4062g、4063g,其中,该相关服务内容卡片4062g 可以是智能电视当前播放的内容相关的书籍的购买链接,该相关服务内容卡片4063g可以是智能电视当前播放的内容相关的人物或物品的简介等。该相关服务内容卡片4062g和4063g 可以依次层叠在显示界面卡片4061g之下,当手机检测到用户点击4061g或4062g或4063g 的操作之后,可以显示如图40中的(h)所示的GUI。
应理解,本申请实施例仅以该锁屏界面显示两个相关服务内容卡片为例进行说明,本申请实施例中的对相关服务内容卡片的数量不予限制。
参见图40中的(h),手机可以将显示界面卡片4071h、相关服务内容卡片4072h和4073h 以列表的形式显示在锁屏界面4070h上。用户可以通过点击相关链接跳转到其他应用程序或网页中。
例如,当用户点击相关服务内容卡片4072h之后,手机可以跳转到购买书籍的界面中。
本申请实施例中,当手机头部指向的设备为智能电视时,用户可以通过在手机屏幕上做手指下滑的操作,就可以将电视的显示界面显示在手机的屏幕中,进一步地,还可以在手机屏幕上显示与该电视的显示界面中的内容相关的服务内容卡片,从而可以为用户提供多个相关链接,使得用户可以在该界面进行相关操作,而不用再去打开其他的App进行搜索等,提升了用户的体验。
图41是本申请实施例提供的另一组GUI的示意图。其中,从图41中的(a)至(g)示出了手机与智能电视进行交互的过程。
参见图41中的(a),该GUI为智能电视的显示界面4110。
图41中的(b)和(c)可以参照图36中的(b)和(c)的相关描述,为了简洁,不再赘述。
参见图41中的(d),该搜索界面4130可以分为上下两个部分,其中,区域4131用于显示智能电视的显示界面卡片,区域4132为原搜索界面4130的部分显示区域,在用户手指向下滑动的过程中,该区域4131可以显示用于提示用户智能电视的显示界面卡片正在加载中的图标4133。当手机检测到用户手指滑动的距离大于预设距离时,可以显示如图41中的(e) 所示的GUI。
参见图41中的(e),该显示界面4140中包括智能电视的显示界面卡片4141,该显示界面卡片4141即为智能电视当前的显示界面4110,该显示界面卡片4141的上方还可以包括文字“我的智慧屏”等,该显示界面4140的底部还可以包括搜索界面的搜索框。当手机检测到用户在该显示界面4140中单指向上滑动的操作之后,可以显示如图41中的(f)所示的GUI。
可选地,该显示界面4140中还包括多个相关服务内容卡片(图中未示出),该多个相关服务内容卡片可以以列表的形式显示在显示界面卡片4141的下方,或者,依次层叠在显示界面卡片4141之下。
本申请实施例中,用户在显示界面4140中的向上滑动可以理解为向上滑动一定的距离。
参见图41中的(f),该界面为手机的搜索界面4130。当手机检测到用户在搜索界面4130 中单指向下滑动的一定的距离之后,可以显示如图41中的(g)所示的GUI。
参见图41中的(g),该GUI实际就是图41中的(e)所示的界面。
本申请实施例中,将手机上的显示智能电视的显示界面卡片的界面与手机的搜索界面分割成两个界面,可以通过用户在屏幕上向上、向下滑动的操作实现界面显示的切换,从而该智能电视的显示界面卡片可以不影响手机原本搜索界面的布局及功能。
图42是本申请实施例提供的另一组GUI的示意图。其中,从图42中的(b)至(g)示出了手机和智能音箱交互的过程。本申请实施例中,手机头部当前指向方向的智能设备为智能音箱。
图42中的(a)为智能音箱4210。
图42中的(b)和(c)可以参考图36中的(b)和(c)的相关描述。
参见图42中的(d),该显示界面4240中包括音箱的控制卡片4241,该控制卡片4241可以位于该界面4240的界面上方位置,如位于应用建议的上方,该显示界面卡片4241的上方还可以显示文字“我的智慧屏”等。当该音箱处于关闭状态时,该卡片4241可以显示供用户控制音箱开启的控件4242。当手机检测到用户点击控件4242的操作之后,可以显示如图42 中的(e)所示的GUI。可选地,若该音箱当前处于正在播放的状态下,可以从图42中的(c)的界面直接跳转到该图42中的(e)所示的GUI。
参见图42中的(e),该显示界面4250中可以包括音箱的显示界面卡片4251,该卡片可以显示当前播放音乐的歌词、播放进度、以及在播放进度的下方显示音乐播放方式、切换音乐、暂定、播放列表等功能控件,用户可以通过点击该卡片中的一些控件控制音箱进行音乐播放、切换、播放方式设置等操作。
在一个可选地实施例中,参见图42中的(f),该显示界面4250中还可以包括该音乐的相关服务内容卡片4252,如音乐视频(music video,MV),该服务内容卡片4252可以层叠与该显示界面卡片4251之下,当手机检测到用户点击该显示界面卡片4251或服务内容卡片4252的操作之后,可以显示如图42中的(g)所示的GUI。
参见图42中的(g),该显示界面4260中可以包括以列表形成排列的显示界面卡片4253 和服务内容卡片4254,即该显示界面卡片4251为用于显示当前音乐的播放界面,该服务内容卡片4254为用于显示当前音乐的MV界面,该MV界面中可以显示MV名称、画面、歌词等。
本申请实施例中,当手机头部指向的设备为智能音箱时,用户可以通过在手机屏幕上做手指下滑的操作,就可以将音箱的控制界面显示在手机的屏幕中,进一步地,还可以在手机屏幕上显示与该音箱的控制界面中的内容相关的服务内容卡片,如MV,从而用户可以在使用音箱播放音乐的同时,在手机同步显示该音乐的MV,从而为用户带来视觉与听觉的双重感受,提升了用户的体验。
图43是本申请实施例提供的另一组GUI的示意图。其中,从图43中的(a)至(f)示出了手机与智能电视的交互过程。本申请实施例中手机头部当前指向的智能设备为智能电视。
参见图43中的(a),该GUI为某个应用内的显示界面4320,例如,该显示界面4320为某个新闻资讯类应用的界面,该界面可以显示多个文字、视频等新闻资讯。当手机检测到用户在该界面的任意位置单指下滑的操作之后,可以显示如图43中的(b)所示的GUI。
应理解,该显示界面4320可以是应用内的任意界面,本申请实施例对此不做限定。
参见图43中的(b),该GUI为显示界面4320正在刷新的界面,显示界面4330的上方包括用于提示用户界面刷新的图标4321,当用户单指下滑完成之后,该显示界面4330可以显示刷新后的界面。
可选地,该显示界面4330的上方包括应于提示用户进行刷新的指引,例如,显示文字“正在刷新”或“下拉刷新”、显示文字和向下的箭头等。
图43中的(c)为电视当前的显示界面4310。
参见图43中的(d),该GUI为某个应用内的显示界面4320,当手机检测到用户在该界面的任意位置多指下滑时,例如,双指下滑、三指下滑等,可以显示如图43中的(e)所示的GUI。
应理解,该显示界面4320可以是手机的任意界面,本申请实施例对此不做限定。
参见图43中的(e),该显示界面4340的上方包括加载区域4322,该加载区域4322用于显示提示用户的“电视”,该加载区域4322所在的界面层叠于显示界面4320之上,并显示与显示界面4322不同的颜色,例如,灰色。当手机检测到用户多指继续向下滑动,且滑动的距离超过预设距离之后,可以显示如图43中的(f)所示的GUI。
参见图43中的(f),该GUI中包括层叠于显示界面4320之上的智能电视的显示界面卡片4323,即当前智能电视的显示界面4310。
示例性地,该显示界面卡片4323可以显示在手机屏幕的中间位置,中间位置偏上或偏下等,或者,用户可以根据需要自由拖动。
可选地,该显示界面卡片除了包含当前智能电视的显示界面4310之外,还包括若干可以控制电视的功能控件,例如,增加、减小音量,切换频道等。
可选地,若该智能电视未开机,则该显示界面卡片4323可以为控制电视开关的控制界面,用户可以在手机中控制该智能电视开机,并显示该智能电视的界面。
在一个示例中,用户正在某个应用内浏览时事新闻,电视处于关机状态,此时,用户希望打开电视,则用户可以将手机头部对准电视,并在该界面上的任意位置多指向下滑动,就可以实现将电视的控制界面显示在用户手机的屏幕中,此时用户可以通过该界面打开电视。
在另一个示例中,用户正在某个应用内浏览时事新闻,电视处于正在播放状态,但用户想要切换到别的节目,此时,用户可以将手机头部对准电视,并在该界面上的任意位置多指向下滑动,就可以实现将电视的显示界面卡片显示在用户手机的屏幕中,用户可以通过控制该显示界面卡片上的功能控件,实现切换节目的。
在一个可选地实施例中,该显示界面卡片4323之下还层叠有多个与电视的显示界面中的内容相关的服务内容卡片,如购买书籍的链接,人物或物体的简介的网页等。
基于本申请实施例,在某个应用内的界面中,用户单指下滑可以刷新界面,多指下滑可以将手机头部指向的智能设备的显示界面卡片层叠在该应用内的原有界面之上,因而不会影响该页面内原有的布局形式。
基于本申请实施例,用户在任意界面多指下滑,均可以将手机指向方向的智能设备的控制卡片或显示界面卡片显示在手机的界面中,从而方便用户对该智能设备进行控制。
图44是本申请实施例提供的另一组GUI的示意图。其中,从图44中的(a)至(c)示出了手机与其他智能设备交互的过程。
参见图44中的(a),该GUI为某个应用内的显示界面4420,当手机检测到用户在该界面的任意位置多指长按的操作后,例如,双指长按,三指长按等,可以显示如图44中的(b)所示的GUI。
应理解,本申请实施例中,用户单指下滑仍然具有刷新界面的功能。
应理解,该显示界面4420可以是手机的任何界面。
参见图44中的(b),该GUI为层叠于显示界面4420之上的手机周边被允许识别的智能设备的雷达分布界面4430,例如,该雷达分布界面中显示有智能电视标签、智能音箱标签、空调标签和平板电脑mate pad标签等。当手机检测到用户点击智能电视标签4423的操作后,可以显示如图44中的(c)所示的GUI。
参见图44中的(c),该GUI为层叠于显示界面4420之上的界面4430,该界面4430中包括智能电视的显示界面卡片4424,该显示界面卡片为智能电视当前的显示界面。
可选地,该显示界面卡片中还包括若干可以控制电视的功能控件,例如,增加、减小音量,切换频道等,该显示界面卡片中还可以包括关闭该显示界面卡片的控件。
可选地,当用户点击音箱的标签后,可以在手机上显示音箱的控制界面或播放界面,当用户点击空调的标签后,可以在手机上显示空调的控制界面。
可选地,该显示界面卡片4424在界面4430中的位置不做具体限定,用户可以根据需要自由拖动。
基于本申请实施例,在某个应用内的界面中,用户单指下滑可以刷新界面,多指长按可以将手机周边所有被允许识别的智能设备标签的雷达分布图,层叠在该应用内的原有界面之上,因而不会影响该页面内原有的布局形式,且智能设备的显示界面卡片或控制界面显示在该界面中,从而可以实现简单便捷的控制多个智能设备。
基于本申请实施例,用户在任意界面多指长按,均可以将手机周边所有被允许识别的智能设备标签的雷达分布图显示在手机的界面中,从而方便用户对该智能设备进行控制。
图45是本申请实施例提供的另一组GUI的示意图。其中,从图45中的(a)至(c)示出了手机与其他智能设备交互的过程。
图45中的(a)可以参照图44中的(a)的相关描述,不再赘述。
参见图45中的(b),该GUI为层叠于显示界面4520之上的手机周边被允许识别的智能设备的雷达分布界面4530,例如,该雷达分布界面中显示有智能电视标签、智能音箱标签、空调标签和平板电脑mate pad标签等。当手机检测到用户在该界面4530中多指下滑或多指下滑的距离超过预设距离时,可以显示如图45中的(c)所示的GUI。
本申请实施例中,用户在某个应用内的界面中多指长按出现智能电视的雷达分布标签的界面时,用户的手指可以不离开手机屏幕,并直接向下滑动,即可以显示如图45中的(c) 所示的GUI,或者用户在某个应用内的界面中多指长按出现智能电视的雷达分布标签的界面时,用户的手指离开了屏幕,然后用户再在屏幕上做多指下滑的操作,也可以显示如图45中的(c)所示的GUI。
图45中的(c),可以参照图44中的(c)的相关描述,为了简洁,不再赘述。
图46是本申请实施例提供的另一组GUI的示意图。本申请实施例中,手机头部指向方向的智能设备为智能电视。
参见图46中的(a),该GUI为现有的用户在搜索界面搜索输入关键词搜索的搜索结果显示界面4610。其中,当用户在该界面中的搜索框4611中输入某个关键词并点击搜索之后,该界面可以呈现出所有搜索到的与该关键词相关的内容。
例如,该界面可以呈现出与该关键词有关的视频4612,音频4613,网页资讯4614和4615,以及购买链接4613、手机本机存储的文件,如信息4616等,该界面还可以优先呈现出本机存储的内容,如短信、备忘录中存储的和该关键词有关的信息。
手机本机存储的文件可以理解为存储在手机存储器中的文件,如信息,备忘录等。
参见图46中的(b),该GUI为本申请实施例提供的当手机头部指向方向的智能设备为智能电视时,用户在搜索界面搜索输入关键词搜索的搜索结果显示界面4620。其中,该显示界面4620中可以包括多个和关键词视频相关的功能卡片,即该显示界面4620中显示的功能卡片和智能电视的能力相关,该多个功能卡片位于搜索框的下方。
在一个示例中,电视当前正在播放某个电视剧,当手机头部指向方向的智能设备为智能电视,用户在搜索界面的搜索框中输入的关键词为该电视剧的名称时,该显示界面4620中可以优先显示功能卡片4621,该功能卡片4621为该电视剧的播放控制界面,该功能卡片4621 中可以包括该电视剧的简介、播放次数、演员信息、上映年份以及该电视剧每一集的播放控件等,该功能卡片4621的上方可以显示其来源,如来自华为视频等。该显示界面4620中还可以包括多个与该电视剧相关的多个视频内容卡片4622、4623和4624等,该多个视频内容卡片可以以列表或层叠的形式呈现在该功能卡片4621的下方,用户可以通过手指滑动来翻动该显示界面4620,以查看多个视频内容卡片。
在另一个示例中,电视处于开机状态,但并未播放任何节目,用户在搜索框中输入某电视剧的名称时,该显示界面4620中也可以优先显示功能卡片4621,该显示界面4620中还可以包括多个与该电视剧相关的多个视频内容卡片4622、4623和4624等。
用户可以根据自己的意愿选择某个视频播放,当手机检测到用户点击控件4625的操作之后,可以显示如图46中的(c)所示的GUI,同时,智能电视也显示正在播放的用户选定的剧集。
参见图46中的(c),该功能卡片4621中包括智能电视的显示界面卡片4651,该显示界面卡片用于显示正在播放的用户选定的剧集。该显示界面卡片4651可以位于功能卡片4621 中的选集区域,该显示界面卡片4651上方还可以包括选集控件4652,用户可以点击该选集控件选定希望播放的剧集。
例如,该控件4625为该电视剧的第1集的播放控件,则该显示界面卡片4651可以显示该第1集的播放界面。
基于本申请实施例,在手机头部指向其他智能设备的情况下,当用户在搜索界面输入关键词进行搜索时,该搜索界面的搜索结果和该智能设备的能力相关,例如,该智能设备为智能电视,则该搜索结果中显示的均是视频,该智能设备为智能音箱,则该搜索结果显示的均是音频。当用户将手机指向智能电视时,用户可能希望搜索得到的是视频,因此本申请实施例可以方便用户查找相关视频。
图47是本申请实施例提供的另一组GUI的示意图。
图47中的(a)和(b)可以参照图46中的(a)和(b)的相关描述。
参见图47中的(c),响应于用户点击选定剧集的控件,可以在功能卡片4621中显示“电视播放”的提示框4603、“手机播放”的提示框4604,以供用户选择在指定设备上播放该选定的剧集。该提示框4603、4604可以位于功能卡片4621中的选集区域。
示例性地,当手机检测到用户点击电视播放的提示框4603的操作后,可以显示如图47 中的(d)所示的GUI,同时,在智能电视的显示界面4602上播放该选定的剧集。
参见图47中的(d),该界面4621中可以显示用于提示当前正在播放的用户选定的剧集的提示框4603a,例如,该提示框4603a显示“正在使用电视播放第1集”。该界面4621中还可以包括用于用户选集的提示框4603b,例如,该选集提示框4603b显示“选集”。
可选地,当用户点击手机播放的提示框4604后,可以在该界面4621中播放该选定的剧集。
本申请实施例中,用户可以在搜索界面搜索到相关的视频之后,可以灵活的选择在手机上播放还是在电视上播放。
图48是本申请实施例提供的另一组GUI的示意图。本申请实施例中,手机头部指向的智能设备为智能音箱。
图48中的(a)可以参照图47中的(a)的相关描述。
参见图48中的(b),该GUI为本申请实施例提供的当手机头部指向的智能设备为智能音箱时,用户在搜索界面搜索输入关键词搜索的搜索结果显示界面4640。其中,该显示界面 4640中可以包括多个和关键词音频相关的功能卡片,即该显示界面4640中显示的功能卡片和智能音箱的能力相关,该多个功能卡片位于搜索框的下方。
在一个示例中,当用户希望听到与某个电视剧相关的音乐时,用户可以在搜索界面输入该电视剧的名称,即该关键词为该电视剧的名称,则该显示界面4640中可以显示多个和该关键词相关的音频内容卡片4641、4642、4643、4644、4645、4646、4647、4648等,该音频内容卡片可以包括与该关键词为名称的音乐、纯音乐,该关键词为名称的电视剧的主题曲、片头曲和片尾曲等。该多个音频内容卡片可以以列表或层叠的形式呈现在该显示界面4640中,该多个音频内容的上方还可以显示其来源,如来自华为音乐。
在另一个示例中,用户在搜索界面输入某个音乐的名称,则该显示界面4640中可以显示该音乐的多个不同的版本,以供用户选择。
在另一个示例中,若智能音箱正在播放某个音乐,则该显示界面4640中可以优先显示该智能音箱当前播放的音乐的控制界面,该控制界面可以显示当前播放音乐的歌词、播放进度、以及在播放进度的下方显示音乐播放方式、切换音乐、暂定、播放列表等功能控件等,用户可以通过点击该卡片中的一些控件控制智能音箱进行音乐播放、切换、播放方式设置等操作。该显示界面4640中还可以显示多个与该音乐相关内容的音频卡片。
用户可以根据自己的意愿选择某个音乐播放,当手机检测到用户点击某个卡片时,例如,音频内容卡片4643,可以显示如图48中的(c)所示的GUI,同时,智能音箱开始播放用户选定的音乐。
参见图48中的(c),该显示界面4660中包括该选定的音频内容卡片4643的播放显示界面4661,该播放显示界面4661中包括该音乐的歌词,播放时长等,还可以包括若干控制控件,从而用户可以控制播放暂定,切换上一曲、切换下一曲、播放方式、播放列表等。该音频内容卡片4662中可以显示用于提示用户正在播放的图标和“正在播放”,以提示用户知晓当前播放的音乐。
基于本申请实施例,在手机头部指向其他智能设备的情况下,当用户在搜索界面输入关键词进行搜索时,该搜索界面的搜索结果和该智能设备的能力相关,当用户将手机指向智能音箱时,用户可能希望搜索得到的是音频,因此本申请实施例可以方便用户查找相关音频。
基于本申请实施例,智能音箱正在播放音乐时,用户可以在搜索界面输入该正在播放的音乐的名称,则该搜索结果中优先呈现当前正在播放的音乐的控制界面,从而有助于用户对该智能音箱正在播放的音乐的控制。
图49是本申请实施例提供的另一组GUI的示意图。本申请实施例中,手机头部指向的智能设备为智能音箱。
图49中的(a)可以参照图47中的(a)的相关描述,图49中的(b)可以参照图48中的(b)的相关描述。
参见图49中的(c),响应于用户点击音频内容卡片4643的操作,手机弹出提示卡片4650,该提示卡片4650可以层叠于搜索结果界面之上,该提示卡片4650可以包括“音箱播放”的提示框4605和“手机播放”的提示框4606,以供用户选择在指定设备上播放该选定的音乐。
应理解,用户可以根据需要自由拖动该卡片4650。
示例性地,当手机检测到用户点击音箱播放的提示框4605的操作后,可以显示如图49 中的(d)所示的GUI,同时,智能音箱开始播放该选定的音乐。
参见图49中的(d),在卡片4605a上显示“正在使用音箱播放”,以提示用户当前正在播放的音乐。
可选地,当用户点击手机播放的提示框4606后,可以在该卡片4605a上显示“正在使用手机播放”。
本申请实施例中,用户可以在搜索界面搜索到相关的音频之后,可以灵活的选择在手机上播放还是在音箱上播放。
图50是本申请实施例提供的另一组GUI的示意图。本申请实施例中,手机头部指向的智能设备为智能音箱。
图50中的(a)可以参照图47中的(a)的相关描述。
参见图50中的(b),该GUI为本申请实施例提供的当手机头部指向的智能设备为智能音箱时,用户在搜索界面搜索输入关键词搜索的搜索结果显示界面4670。其中,该显示界面 4670中可以包括多个和关键词音频相关的功能卡片,即该显示界面4670中显示的功能卡片和智能音箱的能力相关,该功能卡片为音频内容卡片,该多个音频内容卡片位于搜索框的下方。
示例性地,该音频内容卡片4671中除了包括该音乐的名称、作者等信息之外,还包括供用户选择在指定设备上播放的提示框,例如,包括“音箱播放”的提示框4607,“手机播放”的提示框4608。
用户可以根据自己的意愿选择某个音乐播放,并可以选择指定的设备播放,当手机检测到用户点击某个卡片中的用于在指定设备上播放的提示框时,例如,手机检测到用户点击音频内容卡片4671中的“音箱播放”提示框4607,可以显示如图50中的(c)所示的GUI,同时,智能音箱开始播放用户选定的音乐。
参见图50中的(c),该音频内容卡片4609中可以显示“正在使用音箱播放”,以提示用户当前正在播放的音乐。
可选地,当用户点击手机播放的提示框4608后,可以在该卡片4609上显示“正在使用手机播放”。
本申请实施例中,用户可以在搜索界面搜索到相关的音频之后,可以灵活的选择在手机上播放还是在音箱上播放。
图51是本申请实施例提供的另一组GUI的示意图。
参见图51中的(a),当手机4821检测到其被用户抬起到竖直状态时,可以显示如图51 的(b)所示的GUI。
应理解,手机中的重力传感器、陀螺仪等器件可以判断手机是否处于竖直状态。
参见图51中的(b),该GUI为某个应用内的显示界面4710以及层叠在该界面4710之上的雷达分布界面,该雷达分布界面表示手机4821周边所有可允许被识别的智能设备的分布,并显示该智能设备的标签,例如,智能电视标签4711、智能音箱标签、空调标签、平板电脑标签mate pad等。当手机检测到用户点击某个标签时,例如,智能电视标签4711,可以显示如图51中的(c)所示的GUI。
参见图51中的(c),该智能电视的显示界面卡片4712所在的界面层叠于显示界面4710 之上,该显示界面卡片4712为智能电视当前的显示界面。
应理解,用户可以根据需要自由拖动该卡片4712。
基于本申请实施例,在某个应用内的界面中,用户通过将手机拿起到竖直状态,就可以将手机周边所有被允许识别的智能设备标签的雷达分布图层叠在该应用内的原有界面之上,因而不会影响该页面内原有的布局形式,且可以将智能设备的显示界面卡片或控制界面显示在该界面中,从而可以实现简单便捷的控制多个智能设备。
图52是本申请实施例提供的另一组GUI的示意图。
参见图52中的(a),手机处在搜索界面中,此时,当手机检测到用户将手机拿起到竖直状态时,可以打开摄像头,并显示如图52中的(b)所示的界面。
参见图52中的(b),该界面为摄像头视角内三维显示界面4810,当手机打开摄像时,摄像头视角内的智能设备可以显示其标签,例如,华为电视标签4811、华为音箱标签4812 等。用户可以点击某个智能设备的标签,当手机检测到用户点击某个标签时,例如,华为电视标签4811,可以显示如图52中的(c)所示的界面。
应理解,本申请实施例中手机可以通过人工智能(artificial intelligence,AI)识物技术自动识别智能设备,并结合手机中的UWB或蓝牙器件,可以生成智能设备的定位标签。
参见图52中的(c),该智能电视的显示界面卡片4813所在的界面层叠于显示界面4810 之上,该显示界面卡片4813为智能电视当前的显示界面。
应理解,用户可以根据需要自由拖动该卡片4813。
可选地,当用户点击华为音箱标签4812时,可以显示音箱的播放控制界面,并层叠于显示界面4810之上。
基于本申请实施例,在手机的搜索界面中,用户通过将手机拿起到竖直状态,就可以通过打开摄像头识别手机周边的多个智能设备,摄像头界面内会显示该多个智能设备标签,用户通过点击该标签就可以将智能设备的显示界面卡片或控制界面显示在该界面中,从而可以实现简单便捷的控制多个智能设备。
图53是本申请实施例提供的另一组GUI的示意图。其中,通过图53中的(a)和(b)示出了手机与平板电脑进行交互的过程。
参见图53中的(a),该GUI为手机的搜索界面4920。其中,该搜索界面4920可以包括搜索框、应用建议、实时热点、搜索历史等,此外,该搜索界面还可以包括多个功能区域,该多个功能区域可以和键盘绑定在一起,并位于键盘之上,例如,该功能区域可以包括“发弹幕”功能区域4921、“视频搜索”功能区域4922、“音频搜索”功能区域4923等。
示例性地,用户使用平板电脑4900观看某个电视剧时,为了提升观看电视剧的体验,用户希望发送弹幕与其他观看该剧的用户进行交流。而一般用户发送弹幕时需要调用键盘进行打字,因为键盘会占用一部分屏幕的显示空间,因此在一定程度上影响了用户的观看体验。
在本申请实施例中,当手机检测到用户点击“发弹幕”功能区域4921的操作后,可以显示如图53中的(b)所示的GUI。
参见图53的(b),该搜索界面4930中可以包括发送弹幕的功能卡片4931,该功能卡片 4931中可以包括弹幕文字的显示框4932,可以关闭该功能卡片4931的控件4933,弹幕的发送键4934等。
当用户发送弹幕时,只需要将手机头部指向该平板电脑4900,平板电脑4900的显示区域4910中将显示用户发送的弹幕4912。
示例性地,当用户点击视频搜索4922时,可以在弹出的输入框中输入关键词,点击确认之后,可以在平板电脑的显示屏中显示多个视频相关结果。当用户点击音频搜索4923时,可以在弹出的输入框中输入关键词,点击确认之后,可以在平板电脑的显示屏中显示多个音频相关结果。
本申请实施例中,在手机的搜索界面下,可以实现对手机头部指向方向的设备的文字输入,视频搜索和音频搜索等,从而可以提升用户跨设备的输入体验。
图54a-图54b示出了本申请实施例提供的应用于电子设备的控制方法流程示意图。如图 54a所示,该应用于电子设备的控制方法具体可以包括如下步骤:
S100-S104:电子设备向目标设备发送第一内容的过程。
S100、电子设备显示第一内容。
电子设备还可以是平板电脑、智能手表、智能手环等等,此处不作限定。电子设备显示的第一内容可以是图片、视频、音频、食物制作参数、运动参数等等。
S101、当电子设备显示第一内容时,电子设备检测到用户第一操作。
第一操作可以是上文中描述的第一指向性操作。关于第一指向性操作可以参考上文中对图3d-图3f中的描述,此处不再赘述。电子设备可以检测用户的第一指向性操作。关于电子设备如何检测到第一指向性操作可以参考图3e-图3g中的描述,此处不再赘述。电子设备可以是图1a示出的多设备场景100中的手机111。
S102、响应于第一操作,电子设备获取第一操作的方向和电子设备的第一姿态。
当电子设备检测到第一操作时,电子设备获取第一操作的方向。第一操作的方向为第一操作时电子设备的重心运动的方向,或第一操作时用户手势运动的方向。如图3e-图3f所示,第一操作的方向即为用户将手机111向电视机113移动的方向。如图3g-图3h所示,第一操作的方向即用户在进行第一操作时手势运动的方向。
电子设备可以通过加速度传感器和陀螺仪传感器确定出电子设备的姿态。电子设备的第一姿态可以是电子设备的顶部向上,电子设备的显示屏朝向目标设备。如图3g所示,图3g 示出的手机的顶部向上,手机的显示屏朝向目标设备,背向用户。
可选地,当电子设备检测到电子设备的顶部向上,摄像头无法检测到人脸时,电子设备可以确定电子设备处于第一姿态。
S103、电子设备根据第一操作的方向和/或第一姿态确定目标设备。
电子设备可以向一个或多个电子设备发送第二请求,该第二请求用于获取一个或多个电子设备的位置信息。
在一种可能的实现方式中,根据第一操作的方向和/或第一姿态确定目标设备,具体包括:向一个或多个智能设备发送第二请求,第二请求用于指示一个或多个智能设备向电子设备发送位置信息;根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第一操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。这样,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
电子设备可以与一个或多个电子设备连接同一个Wi-Fi网络。或者电子设备的登录账号可以与一个或多个电子设备的登录账号相同。电子设备、一个或多个电子设备均可以接入互联网。例如,电子设备、一个或多个电子设备可以通过Wi-Fi网络、或者4G网络、5G网络接入互联网。一个或多个电子设备可以是电视机、音响、跑步机、冰箱、平板电脑等等。电子设备可以向一个或多个设备发送位置信息的请求。一个或多个电子设备可以具有定位模块。一个或多个电子设备通过定位模块可以获取到三维位置信息。
可选地,根据第一操作的方向和/或第一姿态确定目标设备,具体包括:向定位服务器发送第三请求,第三请求用于指示定位服务器发送一个或多个智能设备的位置信息;定位服务器用于保存一个或多个智能设备的位置信息;根据一个或多个智能设备的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第一操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。这样,当智能设备不具有定位功能时,电子设备也能获取到该智能设备的位置信息。并且,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
可选地,电子设备向定位系统发送获取一个或多个电子设备位置信息的请求。一个或多个电子设备不具有定位模块。一个或多个电子设备可以通过多个传感器组成的定位系统进行定位。该定位系统可以定位出一个或多个电子设备的位置。可以理解的是,当一个或多个电子设备的位置发生改变时,需要重新通过定位系统进行定位。
一个或多个电子设备可以具有定位模块。一个或多个电子设备通过定位模块可以获取到三维位置信息。然后,一个或多个电子设备将三维定位信息发送给电子设备。
可选地,定位系统可以将一个或多个电子设备的位置信息发送给电子设备。
步骤S103可以参考图31中对手机111获取电视113的位置信息的描述,此处不再赘述。
电子设备可以将在第一指向性操作的方向上的电子设备作为目标设备。例如,图4d示出的多设备场景100A中,手机111即为电子设备,第一指向性操作可以是用户将手机111朝向电视机113运动。电视机113在第一指向性操作的方向上。那么电视机113即为目标设备。
这里,电子设备可以根据检测到第一指向性操作的方向,以及获取到一个或多个电子设备的位置信息来计算出,具体哪个电子设备在第一指向性操作的方向上。
在一种可能的实现方式中,当电子设备确定好目标设备后,电子设备可以提示用户,例如,电子设备振动提示用户,或者响铃、或者显示屏亮屏多次来提示用户已确定好最终的目标设备。
S104、电子设备检测到电子设备和目标设备登录相同的账号,电子设备向目标设备发送第一内容。
电子设备可以检测到电子设备和目标设备登录相同的账号,电子设备可以将第一内容发送给目标设备。第一内容可以是图片、视频、音频、食物制作参数、运动参数等等。这里具体可以参考上文中对第一内容的描述,此处不再赘述。
可以理解的是,目标设备向电子设备发送的位置信息中可以携带目标设备登录的账号信息,例如账号ID。
在一种可能的方式中,当电子设备和目标设备未登录相同的账号时,电子设备向目标设备发送第一请求,第一请求用于请求目标设备接收所述第一内容;电子设备接收所述第一响应,第一响应用于指示电子设备发送第一内容;电子设备向目标设备发送第一内容。
可选地,若电子设备已经获取到目标设备的权限,那么当电子设备和目标设备未登录相同的账号时,电子设备也可以直接向目标设备发送第一内容。
目标设备可以接收第一内容。目标设备接收到第一内容可以显示在用户界面。例如图4i 示出的电视机113将接收到的图片显示在用户界面中。这里可以参考上文对图4i的描述,此处不再赘述。
可选地,目标设备可以将第一内容直接保存在目标设备中,例如图3l示出的平板电脑116 将接收到图片保存到平板电脑116的相册中。这里可以参考上文对图3l的描述,此处不再赘述。
可选地,用户可以在目标设备中选择是否接收第一内容。
通过本申请实施例提供的方法,用户通过第一操作就可以控制电子设备向目标设备发送数据。例如,用户可以通过向手机向电视机推的操作,将手机中播放的视频发送给电视机。这样,用户可以通过电视机观看视频。用户操作简单,可以提升用户体验。
图54b示出了本申请实施例提供的一种应用于电子设备的控制方法流程示意图。如图54b 所示,该应用于电子设备的控制方法可以包括如下步骤:
S200-S204:电子设备获取数据。
S200、电子设备检测到第五操作。
第五操作为将第三姿态的电子设备向远离目标设备的方向移动。第五操作的方向为远离目标设备的方向。
本申请实施例中的第五操作可以是上文中的第二指向性操作。用户可以对电子设备进行第二指向性操作。第二指向性操作具体可以参考上文图23c-图23e的描述,此处不再赘述。
S201、响应于第五操作,电子设备获取第五操作的方向和电子设备的第三姿态。
第五操作的方向为远离目标设备的方向。第三姿态可以是电子设备的头部朝向目标设备。此处可以参考步骤S102中的描述,此处不再赘述。
S202、电子设备根据第五操作的方向和/或第三姿态确定目标设备。
在一种可能的实现方式中,根据第五操作的方向和/或第三姿态确定目标设备,具体包括:向一个或多个智能设备发送第五请求,第五请求用于指示一个或多个智能设备向电子设备发送位置信息;根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第五操作的方向上,第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。这样,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
结合第二方面,在一种可能的实现方式中,根据第五操作的方向和/或第三姿态确定目标设备,具体包括:向定位服务器发送第六请求,第六请求用于指示定位服务器发送一个或多个智能设备的位置信息;定位服务器用于保存一个或多个智能设备的位置信息;根据一个或多个智能设备的位置信息,确定第一智能设备为目标设备,第一智能设备的位置在第五操作的方向上,第一智能设备包括一个或多个智能设备中的一个或多个智能设备。这样,当智能设备不具有定位功能时,电子设备也能获取到该智能设备的位置信息。并且,电子设备可以根据多个智能设备的位置信息计算出在第一操作方向的智能设备。从而确定用户是想要电子设备进行数据交互的目标设备。
结合第二方面,在一种可能的实现方式中,根据一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:当第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,第一列表用于显示多个智能设备的图标;响应于用户的第六操作,确定第一智能设备中被第六操作在第一列表中选中图标的智能设备为目标设备。这样,电子设备可以通过用户的操作确认目标设备。
可选地,根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:当第一智能设备中包含多个智能设备时,电子设备将第一智能设备中距离电子设备最近的智能设备作为目标设备。
在一种可能的实现方式中,第一列表中显示的多个智能设备的图标的排列顺序根据多个智能设备与电子设备的距离确定。
进一步地,确定第一智能设备中被第六操作在第一列表中选中图标的智能设备为目标设备的之后,方法还包括:执行第一预设动作;述第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
S203、电子设备向目标设备发送第四请求,第四请求用于请求目标设备发送第二内容。
电子设备确定目标设备,向目标设备发送第四请求。第四请求用户获取目标的第二内容。第二内容可以包括目标设备的第一信息和控制指令。这里可以参考图23f中的描述,此处不再赘述。可以理解的是,目标设备的类型不同,第二内容也相对不同。例如,当目标设备为电视机时,第二内容可以如图23j-图23k中示出的内容,即电视节目名称、演员详细等等,此处不再赘述。当目标设备是音响时,第二内容可以如图24a-图24b示出的内容,例如歌曲名称,歌曲演唱者等等,此处不再赘述。
S204、电子设备检测到电子设备和目标设备登录相同的账号,电子设备显示目标设备发送的第二内容。
电子设备接收到第二内容后可以显示在用户界面中,例如图23j-图26b中示出的手机111 的用户界面。这里可以参考上文对图23j-图26b中的描述,此处不再赘述。
可选地,在一种可能的实现方式中,向目标设备发送第四请求的步骤之后,方法还包括:检测到电子设备和目标设备未登录相同的账号,电子设备显示目标设备发送的第三内容,第三内容与第二内容不同。
其中,第二内容包括目标设备当前正在执行的第一任务的第一信息和/或第一任务的第一控制指令;第三内容用于表明目标设备当前的工作状态。
即当电子设备和目标设备登录的账号相同时,电子设备可以获取目标设备正在执行任务的详细信息。例如图23j所示,若目标设备正在播放视频,电子设备可以获取该视频名称,演员表,下载地址,以及控制该视频的质指令,例如暂停播放、停止播放等等,具体参考图 23j中的描述,此处不再赘述。
当电子设备和目标设备未登录的账号相同时,电子设备只能获取到目标当前是忙碌还是空闲以及当前任务结束时间等等。如图25b所示,手机111中显示到从目标设备获取的信息为豆浆机此时是忙碌或空闲,以及当前任务剩余时间。这里具体可以参考图25b中的描述,此处不再赘述。
通过本申请实施例提供的方法,用户可以通过第五操作,就可以控制电子设备获取目标设备的第二内容。例如,用户可以将手机向远离电视机的方向拉。然后响应于用户的操作,手机检测到手机与电视机登录相同的账号。手机就可以获取到电视机发送的第二内容。若电视机正在播放电视机,第二内容可以是电视机播放的电视剧的电视剧名称,演员表,下载地址,控制电视剧停止播放、暂停播放、开始播放、调节音量等等的指令。这样,用户操作简单,可以提升用户体验。
图54c为本申请实施例提供的一种目标文件分享方法的流程图,图54d为本申请实施例提供的又一种目标文件分享方法的流程图,应用于电子设备。如图54c和图54d所示,该方法包括:
S300、检测到选取操作,选取目标文件。
本申请实施例中,触屏驱动检测到选取操作,将选取操作发送至输入管理器,输入管理器根据选取操作选取目标文件。
本申请实施例中,选取操作对应于图6至图8所示的操作。
S302、检测到对选取的目标文件的第一操作,且判断出第一操作满足设置的触发条件时,定位出电子设备头部朝向的至少一个可分享设备并显示目标文件的分享界面,其中,分享界面包括电子设备头部朝向的至少一个可分享设备的图标。
本申请实施例中,触发条件可根据实际情况预先设置。
作为一种可选方案,第一操作包括第一滑动操作和第一按压操作,触发条件包括第一滑动操作对应的第一触发条件和第一按压操作对应的第二触发条件。第一触发条件包括在指定显示区域内滑动且滑动方向包括第一指定方向,第二触发条件包括按压时长大于或等于第一设定时长。其中,指定显示区域和第一指定方向均可根据实际情况进行设置,作为一种可选方案,指定显示区域为电子设备的显示屏的底部区域,第一指定方向包括向上。第一设定时长可根据实际情况进行设置,作为一种可选方案,第一设定时长为700ms。
作为另一种可选方案,第一操作包括第二滑动操作,触发条件包括第二滑动操作对应的第三触发条件。第三触发条件包括在指定显示区域内滑动且滑动方向包括第二指定方向且滑动距离大于或等于指定距离。其中,指定显示区域和第二指定方向均可根据实际情况进行设置,作为一种可选方案,指定显示区域为电子设备的显示屏的底部区域,第二指定方向包括向上。滑动距离可根据实际情况进行设置,作为一种可选方案,滑动距离为3cm。
作为另一种可选方案,第一操作包括第二按压操作,触发条件包括第二按压操作对应的第四触发条件。第四触发条件包括多指按压操作,且按压时长大于或等于第二设定时长。其中,执行多只按压操作的手指数量可根据实际情况进行设置,作为一种可选方案,执行多指按压操作包括三指按压操作。第二设定时长可根据实际情况进行设置,作为一种可选方案,第二设定时长为700ms。
本申请实施例中,触屏驱动检测到对目标文件的第一操作,并将第一操作发送至输入管理器;输入管理器判断第一操作是否满足设置的触发条件,输入管理器若判断出第一操作满足设置的触发条件,向目标文件所属的应用程序层发送提取指令,以供应用程序层根据提取指令从应用程序中提取可分享的目标文件,并将目标文件发送至指向分享服务管理器;输入管理器向内核驱动层的定位驱动发送定位指令,以使定位驱动对电子设备周围的可分享设备进行定位,并将定位到的至少一个可分享设备的IP地址发送至指向分享服务管理器;指向分享服务管理器根据IP地址查询到对应的可分享设备的位置,并将目标文件和至少一个可分享设备的位置发送至动画管理器,以使动画管理器控制电子设备的显示屏的分享界面按照至少一个可分享设备的位置显示至少一个可分享设备的图标和目标文件的动画效果,其中,分享界面包括至少一个可分享设备的图标。定位驱动包括UWB驱动或蓝牙驱动。
本申请实施例中,应用程序层根据提取指令从应用程序中提取目标文件。例如:提取指令为提取选取操作选取的图片的指令,应用程序层从图库中提取出选取操作选取的图片。例如:提取指令为提取选取操作选取的word文件的指令,应用程序层从word应用程序中提取出word文件。例如:提取指令为提取选取操作选取的网页的指令,应用程序层从浏览器中提取出网页。
本申请实施例中,第一操作对应于图9a至图9d、图10a至图10c、图11a至图11c、图12a至图12c、图13a至图13d、图14a至图14c、图15a至图15d、图16a至图16c或图17a 至图17c所示的操作。
S304、检测到第二操作,从至少一个可分享设备中选择至少一个目标设备。
本申请实施例中,触屏驱动检测到第二操作,并将第二操作发送至输入管理器;输入管理器根据第二操作生成选择指令,选择指令包括选择的目标设备的设备名,并将选择指令发送至指向分享服务管理器。
本申请实施例中,用户可以通过连续的第一操作和第二操作将目标文件分享至目标设备,从而实现对目标文件的一步分享。
本申请实施例中,第二操作对应于图9e、图10d、图11d、图12d、图13e至图13f、图14d至图14e、图15e、图16d至图16e或图17d所示的步骤。
S306、判断目标设备是否具备显示目标文件所属的应用程序的能力,若是,执行步骤S308;若否,执行步骤S312。
S308、显示第二弹窗,第二弹窗包括多个分享类型。
S310、检测到点击一个分享类型的操作,将点击的分享类型确定为目标类型。
本申请实施例中,触屏驱动检测到点击一个分享类型的操作,并将该操作发送至输入管理器;输入管理器将点击的分享类型确定为目标类型;输入管理器根据目标类型生成选择指令,选择指令包括目标类型,并将选择指令发送至指向分享服务管理器。
本申请实施例中,设置第二弹窗以接收用户点击一个分享类型的操作,可以方便用户选择分享类型,并按照用户的意愿进行目标文件的分享,从而避免当用户仅需分享目标文件却将目标文件所属的应用程序分享至目标设备时而造成资源浪费。
S312、按照目标类型,将目标文件分享至至少一个目标设备。
本申请实施例中,若目标设备不具备显示目标文件所属的应用程序的能力,将文件型确定为目标类型;按照文件型,将目标文件分享至至少一个目标设备;若目标设备具备显示目标文件所属的应用程序的能力,按照步骤S310确定出的目标类型将目标文件分享至至少一个目标设备。
本申请实施例中,应用程序层将目标文件发送至指向分享服务管理器;指向分享服务管理器将目标类型的选择指令和目标设备的选择指令发送至动画管理器,以供动画管理器控制目标文件移动至目标设备的图标。
本申请实施例提供的技术方案中,检测到对选取的目标文件的第一操作,且判断出第一操作满足设置的触发条件时,定位出电子设备头部朝向的至少一个可分享设备并显示目标文件的分享界面,其中,分享界面包括电子设备头部朝向的至少一个可分享设备;检测到第二操作,从至少一个可分享设备中选择至少一个目标设备;按照确定的目标类型,将目标文件分享至至少一个目标设备,简化了将目标文件分享至目标设备的操作步骤,从而提高目标文件的分享效率。
图54e是本申请实施例提供的一种指向性搜索交互方法的示意性流程图。如图54e所示,该方法可以包括步骤S410至步骤S460。
S410,电子设备在第一界面内检测用户的第一操作。
其中,该第一界面可以是手机的搜索界面,该第一操作可以是输入关键词。
S420,电子设备响应于该第一操作,显示第一搜索界面,其中该第一搜索界面包括搜索框和第一内容,该第一内容与该电子设备本机存储的内容相关。
如图46中的(a)所示,该第一搜索界面可以是显示界面4610,该搜索框为4611,该第一内容可以为本机存储的内容,例如多个功能内容卡片4612、4613、4614、4615等,或本机存储的短信4616、备忘录等。
S430,电子设备响应于用户的第二操作,显示该第一界面。
其中,该第二操作可以是用户删除该输入的关键词。
S440,电子设备在该第一界面内检测用户的第三操作。
其中,该第三操作可以是用户输入关键词,可以是文字输入或语音输入,或扫一扫输入等。如图46中的(b),用户可以文字输入。
S450,电子设备响应于该第三操作,检测到该电子设备的指向方向上包括目标电子设备,获取该目标设备的状态。
如图46中的(b)所示,该手机指向方向上的目标电子设备为智能电视。该目标设备的状态可以是正在播放任务,关机等。
S460,电子设备根据该目标设备的状态,显示第二搜索界面,其中该第二搜索界面包括该搜索框和第二内容,该第二内容与该目标设备的状态相关。
如图46中的(b)所示,该第二搜索界面包括搜索框和第二内容,该第二内容可以是多个视频内容卡片4621、4622、4623和4624等。
可选地,该第三操作为输入关键词,当该电子设备判断该另一电子设备的状态为正在播放该关键词的第一任务内容时,该第二内容包括与该第一任务内容相关的具有优先级顺序的多个任务内容卡片,该多个任务内容卡片与该目标电子设备的能力相关。
如图46中的(b)所示,该第一任务内容为智能电视当前正在播放的任务,如正在播放卡片4621对应的任务。该多个任务内容卡片为多个功能卡片4621、4622、4623、4624,该多个功能卡片均为视频内容卡片。
可选地,该多个任务内容卡片中的第一个卡片即4621为当前电视正在播放的任务。
可选地,当电子设备判断目标电子设备的状态为关机时,可以在第二内容中显示该目标电子设备的控制卡片,用户可以通过点击该控制卡片中的开启控件,显示第三搜索界面,该第三搜索界面可以包括搜索框和多个任务内容卡片。
例如,智能电视处于关机状态,则手机在对着智能电视搜索时,可以在手机的界面中显示该智能电视的控制卡片,当用户点击该控制卡片中开启时,可以打开智能电视,同时,该手机界面可以显示搜索结果,该搜索结果包括多个和电视能力相关的多个视频内容卡片。
可选地,当电子设备判断目标电子设备的状态为开启且并未播放任务内容时,第二内容可以包括多个任务内容卡片,多个任务内容卡片与该目标电子设备的能力相关。
例如,智能电视处于开启但并未播放节目,则手机在对着智能电视搜索时,可以在手机的界面中显示搜索结果,该搜索结果包括多个和电视能力相关的多个视频内容卡片。
可选地,当该目标电子设备为智能电视时,该多个任务内容卡片为视频内容卡片,如图 46中的(b)所示。当该目标电子设备为智能音箱时,该多个任务内容卡片为音频内容卡片,如图48中的(b)所示。
图54f是本申请实施例提供的一种指向性搜索交互方法的示意性流程图。如图54f所示,该方法可以包括步骤S510至步骤S550。
S510、电子设备在第一界面内检测用户的第一操作。
例如,如图43中的(a)所示,该第一界面可以是某个应用内的界面。
S520、电子设备响应于该第一操作,显示第二界面,该第二界面为该第一界面刷新后的界面。
例如,如图43中的(b)所示,该界面4330可以为4320的刷新之后显示的界面。
S530、电子设备在该第二界面内检测用户的第二操作。
例如,该第二操作可以是多指长按,如图44中的(a)所示。
S540、电子设备响应于该第二操作,识别周边的其他电子设备。
S550、电子设备显示第三界面,该第三界面包括该其他电子设备的定位标签。
例如,如图44中的(b)所示,该第三界面可以显示手机周边的多个电子设备的定位标签。
可选地,该第二操作为该用户将该电子设备拿起到竖直状态,则该电子设备调用摄像头,获取该摄像头视角内显示的第三界面。
例如,如图52所示,当手机检测到用户将手机拿起到竖直状态时,可以调用摄像头,显示该第三界面。或者,当手机检测到用户将手机拿起到竖直状态时,直接显示识别到的多个设备的定位标签。
可选地,该方法还可以包括:电子设备在该第三界面内检测用户点击该定位标签的操作后,显示第四界面,该第四界面包括该定位标签对应的电子设备的显示界面卡片,该显示界面卡片的内容与该定位标签对应的电子设备的显示屏的内容一致,或者该显示界面卡片用于控制该定位标签对应的电子设备。
例如,如图51中的(b)、(c)所示。该第四界面可以显示电视的显示界面卡片,该显示界面卡片即为智能电视的显示界面。
当用户点击智能音箱的定位标签时,该显示界面卡片可以是播放控制卡片。
可选地,该方法还可以包括:该电子设备在该第三界面内检测用户点击该定位标签的操作后,显示第四界面,该第四界面包括该定位标签对应的电子设备的控制卡片;当该电子设备检测到用户点击该控制卡片中的开启控件的操作后,显示第五界面,该第五界面包括该定位标签对应的电子设备的显示界面卡片,该显示界面卡片的内容与该定位标签对应的电子设备的显示屏的内容一致,或者该显示界面卡片用于控制该定位标签对应的电子设备。
当电视处于关机状态时,该显示界面卡片可以是控制电视开机的控制卡片,当用户点击该控制卡片中开启控件时,可以打开电视,并在手机上显示第五界面,该第五界面可以显示界面卡片,如图44中的(c)所示。
可选地,该方法还包括:该电子设备在该第三界面内检测预设手势的操作;该电子设备响应于该预设手势的操作,判断该电子设备指向方向的设备为目标电子设备;该电子设备显示第四界面,该第四界面包括该目标电子设备的显示界面卡片,该显示界面卡片的内容与该目标电子设备的显示屏的内容一致,或者该显示界面卡片用于控制该目标电子设备。
例如,该预设手势可以是多指长按,如图45中的(b)所示,该显示界面卡片可以是卡片4524,即智能电视的显示界面。当该目标设备时智能音箱时,该显示界面卡片可以是播放控制界面,用户可以通过该播放控制界面控制该智能音箱。
基于本申请实施例,当电子设备确定其指向方向的设备为另一电子设备时,响应于用户输入搜索内容的操作,显示搜索界面,该搜索界面的搜索结果和另一电子设备的状态相关,例如,用户将电子设备对准智能电视搜索时,用户可能希望得到的搜索结果是视频,因此,该技术方案可以得到用户希望搜索的结果,从而提升了用户的使用体验。
图55示出了电子设备100的结构示意图。
下面以电子设备100为例对实施例进行具体说明。应该理解的是,图55所示电子设备 100仅是一个范例,并且电子设备100可以具有比图55中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
电子设备100可以包括:处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器 180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110 中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface, MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头 193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface, DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100 的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S 接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块 141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块 150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution, LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system, GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统 (quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems, SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode, AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备 100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体 (complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组 (moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备 100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110 中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备 100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm 的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100 抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C 测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D 检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100 使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器 180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J 检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备 100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142 的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。 SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
图56为本申请实施例提供的一种电子设备的结构示意图,如图56所示,电子设备900 包括处理器910和收发器920。可选地,该电子设备900还可以包括存储器930。其中,处理器910、收发器920和存储器930之间可以通过内部连接通路互相通信,传递控制和/或数据信号,该存储器930用于存储计算机程序,该处理器910用于从该存储器930中调用并运行该计算机程序。
可选地,电子设备900还可以包括天线940,用于将收发器920输出的无线信号发送出去。
上述处理器910可以和存储器930可以合成一个处理装置,更常见的是彼此独立的部件,处理器910用于执行存储器930中存储的程序代码来实现上述功能。具体实现时,该存储器 930也可以集成在处理器910中,或者,独立于处理器910。
除此之外,为了使得电子设备900的功能更加完善,该电子设备900还可以包括输入单元960、显示单元970、音频电路980、摄像头990和传感器901等中的一个或多个,所述音频电路还可以包括扬声器982、麦克风984等。其中,显示单元970可以包括显示屏。
可选地,上述电子设备900还可以包括电源950,用于给终端设备中的各种器件或电路提供电源。
应理解,图56所示的电子设备900能够实现图54a-图54f所示方法实施例的各个过程。电子设备900中的各个单元的操作和/或功能,分别为了实现上述方法实施例中的相应流程。具体可参见上述方法实施例中的描述,为避免重复,此处适当省略详细描述。
应理解,图56所示的电子设备900中的处理器910可以是片上系统(system on achip, SOC),该处理器910中可以包括中央处理器(central processing unit,CPU),还可以进一步包括其他类型的处理器,所述CPU可以叫主CPU,神经网络处理器NPU 30作为协处理器挂载到主CPU(Host CPU)上,由Host CPU分配任务。各部分处理器配合工作实现之前的方法流程,并且每部分处理器可以选择性执行一部分软件驱动程序。
总之,处理器910内部的各部分处理器或处理单元可以共同配合实现之前的方法流程,且各部分处理器或处理单元相应的软件程序可存储在存储器930中。
本发明还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当该指令在计算机上运行时,使得计算机执行如上述图54a-图54f所示的目标文件分享方法中的各个步骤。
以上各实施例中,涉及的处理器910可以例如包括中央处理器(centralprocessing unit, CPU)、微处理器、微控制器或数字信号处理器,还可包括GPU、NPU和ISP,该处理器还可包括必要的硬件加速器或逻辑处理硬件电路,如特定应用集成电路(application-specific integrated circuit,ASIC),或一个或多个用于控制本发明技术方案程序执行的集成电路等。此外,处理器可以具有操作一个或多个软件程序的功能,软件程序可以存储在存储器中。
存储器可以是只读存储器(read-only memory,ROM)、可存储静态信息和指令的其它类型的静态存储设备、随机存取存储器(random access memory,RAM)或可存储信息和指令的其它类型的动态存储设备,也可以是电可擦可编程只读存储器(electricallyerasable programmable read-only memory,EEPROM)、只读光盘(compact disc read-only memory, CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其它磁存储设备,或者还可以是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其它介质等。
可以理解的是,便携设备为了实现上述任一个实施例的功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以对便携设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
比如,以采用集成的方式划分各个功能模块的情况下,如图57所示,为本申请实施例提供的一种便携设备的结构框图。该便携设备可以包括处理单元5710和收发单元5720。
其中,处理单元5710用于支持便携设备确定第一智能家居设备。例如,支持便携设备在检测到便携设备的运动轨迹满足预设运动轨迹时;和/或,便携设备运动至预设空间姿态时,根据检测到的一个或多个智能家居设备与所智能家居设备的相对位置,确定便携设备指向的智能家居设备为第一智能家居设备。又如,支持便携设备根据用户在智能家居应用界面上选择智能家居设备虚拟“卡片”的操作,确定第一智能家居设备。处理单元5710还可以用于本文所描述的技术的其他过程。收发单元5720用于支持便携设备响应于用户对便携设备按键的第一操作,向第一智能家居设备发送控制指令,以控制第一智能家居设备做出第一响应。和/或用于本文所描述的技术的其他过程。
在一种可能的结构中,如图58所示,便携设备可以包括传感器单元5730。
在一些实施例中,传感器单元5730包括一个或多个运动传感器。该一个或多个运动传感器用于测量便携设备的运动数据,以得到便携设备的运动轨迹或空间姿态。
在另一些实施例中,传感器单元5730包括触摸传感器,该触摸传感器用于接收用户的触摸操作。例如,接收用户在智能家居应用界面上选择智能家居设备虚拟“卡片”的操作。
在一种可能的结构中,收发单元5720还用于,检测来自便携设备周围的一个或多个智能家居设备的信号。以得到一个或多个智能家居设备与智能家居设备之间的相对位置。在一些实施例中,收发单元5720包括蓝牙模块和/或超宽带UWB模块。该蓝牙模块和/或超宽带UWB 模块用于检测来自便携设备周围的一个或多个智能家居设备的信号。
需要说明的是,上述收发单元5720可以包括射频电路。具体的,便携设备可以通过射频电路进行无线信号的接收和发送。通常,射频电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频电路还可以通过无线通信和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统、通用分组无线服务、码分多址、宽带码分多址、长期演进、电子邮件、短消息服务等。
应理解,便携设备中的各个模块可以通过软件和/或硬件形式实现,对此不作具体限定。换言之,便携设备是以功能模块的形式来呈现。这里的“模块”可以指特定应用集成电路ASIC、电路、执行一个或多个软件或固件程序的处理器和存储器、集成逻辑电路,和/或其他可以提供上述功能的器件。可选地,在一个简单的实施例中,本领域的技术人员可以想到便携设备可以采用图59所示的形式。处理单元5710可以通过图59所示的处理器5910实现。收发单元5720可以通过图59所示的收发器5920来实现。具体的,处理器通过执行存储器中存储的计算机程序来实现。可选地,所述存储器为所述芯片内的存储单元,比如寄存器、缓存等,所述存储单元还可以是所述计算机设备内的位于所述芯片外部的存储单元,如图59所的存储器5930。
图60示出了本申请实施例的电子设备的软件框架示意图。如图60所示,本申请涉及的电子设备的软件框架可以包括应用程序层,应用程序框架层(framework,FWK)、系统库、安卓运行时、硬件抽象层(hardware abstraction layer,HAL)和内核层(kernel)。
其中,应用程序层可以包括一系列应用程序包,例如锁屏应用、桌面应用、分享、设备控制应用(如设备控制中心)、语音交互应用、通信录、图库、文件管理器、浏览器、联系人等应用程序。其中,在本申请中,设备控制中心用于管理不同智能家居设备的控制界面。例如,设备控制中心用于根据用户在智能家居APP界面上选择某一虚拟“卡片”的操作,进入该虚拟“卡片”对应的智能家居设备的控制界面。语音交互应用用于处理检测到的语音指令。关于应用程序层的其他应用,可以参考常规技术中的介绍和说明,本申请不做赘述。在本申请中,便携设备上的应用可以是原生的应用(如在便携设备出厂前,安装操作系统时安装在便携设备中的应用),也可以是第三方应用(如用户通过应用商店下载安装的应用),本申请实施例不予限定。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。如图60所示,应用程序框架层可以包括窗口管理器,打包管理服务器,视图,动画,广播接收器,电源管理器,字体管理器,数据库,输入管理器,按键管理器和物联网(internet of things,IOT)设备监听器等。其中,在本申请中,智能家居设备即IOT设备。按键管理器和IOT设备监听器为本申请新增的部分。按键管理器用于确定便携设备按键所匹配的智能家居设备,以及将便携设备按键的操控制对象切换为确定的与其所匹配的智能家居设备。按键管理器还用于接收按键驱动检测到的按键事件,并将该按键事件对应的控制参数以及对应的智能家居设备信息发送给IOT设备监听器。IOT设备监听器用于指示IOT设备管理驱动根据从按键管理器接收到的控制参数控制具体智能家居设备。
应用程序框架层中还可以包括只想分享服务管理器(图中未示出)。指向分享服务管理器用于获取选择指令、目标文件和定位到的可分享设备的网际互连协议(InternetProtocol,简称:IP)地址。
系统库和安卓运行时包含FWK所需要调用的功能函数,Android的核心库,以及Android 虚拟机。系统库可以包括多个功能模块。例如:浏览器内核,三维(3dimensional,3D)图形,字体库等。
硬件抽象层是设备内核驱动的抽象接口,用于实现向更高级别的Java API框架提供访问底层设备的应用编程接口。HAL包含多个库模块,例如相机、显示屏、蓝牙、音频等。其中每个库模块都为特定类型的硬件组件实现一个接口。当系统框架层API要求访问便携设备的硬件时,Android操作系统将为该硬件组件加载库模块。
内核层是Android操作系统的基础,Android操作系统最终的功能都是通过内核层完成。内核层可以包含摄像头驱动,显示驱动,蓝牙驱动,超宽带(Ultra Wideband,UWB)驱动,音频驱动,传感器驱动,触屏驱动,IOT设备管理驱动和按键驱动等。例如,内核层与硬件抽象层之间的接口语言为硬件抽象层接口描述语言(HAL interface definitionlanguage,HIDL)。其中,传感器驱动用于采集便携设备的运动数据,以确定便携设备的运动方向、运动速度和空间姿态等,以便在便携设备满足预设运动轨迹和/或预设空间姿态时,触发蓝牙驱动或者 UWB驱动对便携设备所指向的智能家居设备的测量和识别。IOT设备管理驱动用于根据从按键管理器接收到的控制参数控制具体智能家居设备。按键驱动用于检测的按键事件,例如用于检测用于按压便携设备电源键、音量增加键或音量减小键的操作事件等。
需要说明的是,本申请提供的图60所示结构的便携设备的软件结构示意图仅作为一种示例,并不限定Android操作系统不同分层中的具体模块划分,具体可以参考常规技术中对 Android操作系统软件结构的介绍。另外,本申请提供的一种智能家居设备的控制方法还可以基于其他操作系统实现,本申请不再一一举例。以下实施例以图60所示结构的便携设备的软件结构为例,对本申请实施例提供的技术方案进行具体阐述。
在一些实施例中,图60所示按键管理器包括物理按键管理模块,按键驱动包括物理按键驱动。在便携设备的物理按键驱动检测到物理按键事件时,物理按键管理模块将该物理按键事件对应的控制参数以及对应的智能家居设备信息发送给IOT设备监听器。
在另一些实施例中,图60所示按键管理器包括虚拟按键管理模块,按键驱动包括虚拟按键驱动。在便携设备的虚拟按键驱动检测到虚拟按键事件时,虚拟按键管理模块将该虚拟按键事件对应的控制参数以及对应的智能家居设备信息发送给IOT设备监听器。
在一些示例中,在便携设备检测到便携设备满足预设运动轨迹和/或便携设备运动至预设空间姿态时,便携设备具体可以通过以下步骤1和步骤2确定用户想要操控的智能家居设备 (即便携设备指向的智能家居设备(如第一智能家居设备):
步骤1:便携设备检测和识别周围的智能家居设备。
例如,便携设备可以触发通过UWB驱动或蓝牙驱动检测和识别周围的智能家居设备。
可以理解,智能家居设备和便携设备在接入网络(如Wi-Fi)后,可以获取到自身的接入信息。例如,接入信息中可以包括网络接入的方式,通信地址(如IP地址),接入信号强度指示(received signal strength indication,RSSI)参数等。如图33所示,由于信号强度是随传播距离逐渐衰减的,因此UWB或蓝牙传感器可以通过多根天线接收多个发射设备(如智能家居设备)发出的信号。根据不同接收信号的强度,计算不同接收信号的传输时间差,从而计算得到不同发射设备(如智能家居设备)相对于接收设备(如便携设备)的方位角和距离,从而实现便携设备对智能家居设备的识别。
请参考图61,图61以便携设备根据便携设备的运动轨迹和/或空间姿态确定用户想要操控的智能家居设备为例,示出了本申请实施例提供的一种便携设备控制智能家居设备的控制过程示意图。如图61所示,响应于传感器驱动根据采集的便携设备的运动数据确定便携设备的运动轨迹满足预设运动轨迹和/或便携设备运动至预设空间姿态,传感器驱动触发UWB驱动或蓝牙传感器检测和识别周围的智能家居设备。
步骤2:便携设备根据多个智能家居设备相对于便携设备的方位角和距离,结合便携设备的空间姿态,确定第一智能家居设备。
在本申请中,便携设备指向的智能家居设备可以包括但不限于便携设备背向的智能家居设备或者便携设备轴向指向的智能家居设备。
在一些实施例中,便携设备背向的智能家居设备是指便携设备所在平面的垂线经过的智能家居设备。例如,在便携设备满足运动至图31中的(a)所示的预设空间姿态(即与水平面呈90°夹角或者接近90°夹角)时,便携设备指向的智能家居设备是便携设备所在平面的垂线经过的电视机。
在一些实施例中,便携设备轴向指向的智能家居设备是指便携设备长边方向延长线经过的智能家居设备。例如,在便携设备满足运动至图31中的(b)所示的预设空间姿态(即与水平面呈α夹角)时,便携设备指向的智能家居设备是便携设备长边方向延长线经过的电视机。
需要说明的是,上述确定便携设备指向的智能家居设备是基于便携设备背向,还是基于便携设备轴向指向是预先设置在便携设备中的。例如,出厂设置在便携设备操作系统中。
在便携设备确定用户想要操控的智能家居设备(即便携设备指向的智能家居设备(如第一智能家居设备)之后,在一些实施例中,为了能够通过便携设备按键控制第一智能家居设备,便携设备将第一智能家居设备设置为便携设备按键(如物理按键)所匹配的设备。
其中,便携设备按键与第一智能家居设备匹配是指:用于对便携设备按键的操作用于直接控制第一智能家居设备,而非便携设备或者其他智能家居设备。也就是说,便携设备按键所匹配的设备是指便携设备按键的操控对象。
以通过便携设备物理按键控制智能家居设备作为示例,在一些实施例中,便携设备在确定用户想要操控的智能家居设备(即第一智能家居设备)之后,可以将第一智能家居设备的设备信息(例如设备标识)上报给如图60所示软件结构中,应用程序框架层的物理按键管理器。物理按键管理器会根据设备信息进行物理按键操控对象的配置。即,将第一智能家居设备设置为便携设备物理按键所匹配的设备。
如图61所示,在UWB驱动或蓝牙驱动根据多个智能家居设备相对于便携设备的方位角和距离,结合便携设备的空间姿态,确定第一智能家居设备之后,按键管理器根据来自UWB 驱动或蓝牙驱动的第一智能家居设备的设备信息(例如设备标识),将便携设备按键所匹配的设备设置为第一智能家居设备。
又如,请参考图62,图62以便携设备根据用户在智能家居APP界面上的选择虚拟“卡片”的操作确定用户想要操控的智能家居设备为例,示出了本申请实施例提供的另一种便携设备控制智能家居设备的控制过程示意图。如图62所示,在应用程序层的设备控制中心接收到用户在某一智能家居APP界面上的选择虚拟“卡片”的操作之后,指示按键管理器根据来自设备控制中心的第一智能家居设备的设备信息(例如设备标识),将便携设备按键所匹配的设备设置为第一智能家居设备。
在便携设备将第一智能家居设备设置为便携设备按键所匹配的设备之后,便携设备便可以根据接收到的按键操作,控制第一智能家居设备做出响应。
以通过便携设备物理按键控制智能家居设备作为示例,在一些实施例中,响应于用户对便携设备物理按键的第一操作,便携设备控制第一智能家居设备做出第一响应。
其中,用户对便携设备物理按键的第一操作可以包括但不限于如上文所述的,用户对单一物理按键的操作和对多个物理按键的复用操作。例如,用户对便携设备物理按键的第一操作可以是用户对便携设备电源键、音量增加键(“+”)、音量减小键(“-”)或指纹键的按压操作。又如,用户对便携设备物理按键的第一操作可以是用户对便携设备电源键、音量增加键(“+”)、音量减小键(“-”)或指纹键中的多个的同时按压操作。
在一些实施例中,如图61或图62所示,在按键管理器通过输入管理器接收到按键驱动检测到的用户的第一操作对应的事件之后,按键管理器会根据按键的操控对象(即第一智能家居设备),将第一操作对应的控制参数以及设备信息发送给IOT设备监听器。以便IOT设备监听器指示IOT设备管理驱动根据接收到的控制参数控制设备信息指示的智能家居设备 (即第一智能家居设备)。
在一些实施例中,便携设备可以通过向第一智能家居设备发送控制指令,以指示第一智能家居设备对用户的第一操作做出响应(即第一响应)。如图61或图62所示,IOT设备管理驱动根据IOT设备监听器的指示,向设备信息指示的智能家居设备(即第一智能家居设备) 发送控制指令。其中,该控制指令中包括控制参数,该控制指令用于指示第一智能家居设备对用户的第一操作做出响应,调整接收到的控制参数。
结合图60示出的电子设备的软件框架示意图,图63提供了一种指向性搜索交互方法的示意性流程图。该方法可以包括步骤6301至步骤6308。
6301,内核驱动层的触屏驱动将检测到的手势信息发送给输入管理器。
其中,该触屏驱动会实时检测手机屏幕上的手势信息,并将该手势信息发送给系统框架层的输入管理器。
6302,输入管理器判断当前手势是否满足触发设备搜索的预设条件,当该手势信息满足设备搜索的预设条件时,将该手势触发信息发送给应用程序层与该手势触发信息对应的模块。
示例性地,若输入管理器判断该手势信息满足单指触发信息,则将该单指触发信息发送给应用程序层中的锁屏模块或桌面模块,例如,手机处于锁屏状态,则将该单指触发信息发送给锁屏模块,如图37中的(b)所示;手机处于桌面状态,则将该单指触发信息发送给桌面模块,如图36中的(b)所示。
示例性地,若输入管理器判断该手势信息满足多指触发信息,则将该多指触发信息发送给应用程序层中的全局设备搜索模块,如图43中的(d)、图44中的(a)所示。
6303,输入管理器将手势触发信息满足指向设备搜索的手势触发条件的信息发送给内核驱动层中的UWB驱动或蓝牙驱动。
6304,UWB驱动或蓝牙驱动进行周边设备信息识别。
6305,UWB驱动或蓝牙驱动将周边设备的信息发送给指向设备搜索服务管理器。
206,指向设备搜索服务管理器将指向设备的图标、设备卡片内容等进行整合。
6307,指向设备搜索服务管理器将整合后的指向设备的信息发送给动画模块。
6308,动画模块执行动画显示。
其中,动画模块执行动画显示,如图36中的(d)所示,将手机指向设备的显示界面卡片显示在手机界面中。
图64是本申请实施例提供的UWB或蓝牙器件识别方位和距离的示意图。
如图64所示,设备A可以包括UWB或蓝牙器件2220,该UWB或蓝牙器件2220中包括多个天线2221、2222,设备B可以包括UWB或蓝牙器件2210,该UWB或蓝牙器件2210 中包括多个天线2211、2212。
本申请实施例以该器件2220、2210为UWB芯片为例进行说明。
示例性地,设备A和设备B分别具有UWB芯片,其中,设备B中的UWB芯片2210 的天线2211可以向外发送UWB信号,设备A中的UWB芯片2220的天线2221和2222可以分别接收到该UWB信号,但由于该天线2221和2222在设备2220上的分布位置不同,因此,接收到UWB信号的时间也不同,例如,经过时间t1到达天线2222,经过时间t2到达天线2221,因此,可以通过该信号到达的时间分别计算出天线2211与2222、2221之间的距离,即可获知由该距离的不同而引起的信号的相位差,由该相位差信息可以确定接收的信号的角度,从而,设备B可以获知自身与设备A的方位和距离。
本申请实施例中,设备B(例如,手机)可以通过UWB芯片识别周边所有被允许识别的智能设备,并获知其位置分布,从而有助于实现上述实施例中将手机头部指向方向的智能设备的控制卡片或显示界面卡片显示在手机的屏幕中。
通过本申请实施例提供的方法,便携设备可以在确定用户操控意图时,即在确定用户想要操控的智能家居设备时,通过将便携设备按键的操控对象切换为智能家居设备,以实现通过对便携设备按键的操作直接控制智能家居设备的目的。通过该方法,可以解决现有技术中,智能家居设备控制过程繁琐、花费时间长,导致用户体验差的问题。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
Claims (43)
1.一种应用于电子设备的控制方法,其特征在于,包括:
显示第一内容,
检测到用户的第一操作;
响应于所述第一操作,获取所述第一操作的方向和所述电子设备的第一姿态;
根据所述第一操作的方向和/或所述第一姿态确定目标设备;
检测到所述电子设备和所述目标设备登录相同的账号,所述电子设备向所述目标设备发送所述第一内容;
所述第一操作包括第三操作和第四操作;
所述检测到用户的第一操作,具体包括:
检测到用户的第三操作;
所述响应于所述第一操作,获取所述第一操作的方向和所述电子设备的第一姿态,具体包括:
响应于所述第三操作,获取所述第三操作的方向和所述电子设备的第一姿态;
所述根据所述第一操作的方向和/或所述第一姿态确定目标设备,具体包括:
根据所述第三操作的方向和/或所述第一姿态确定目标设备;
所述检测到所述电子设备和所述目标设备登录相同的账号,所述电子设备向所述目标设备发送所述第一内容,具体包括:
获取到所述第四操作,所述第四操作为将所述电子设备从第一姿态改变成第二姿态;
响应于所述第四操作,检测到所述电子设备和所述目标设备登录相同的账号,所述电子设备向所述目标设备发送第一内容。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一操作的方向和/或所述第一姿态确定目标设备的步骤之后,所述方法还包括:
检测到所述电子设备和所述目标设备未登录相同的账号,所述电子设备向所述目标设备发送第一请求,所述第一请求用于请求所述目标设备接收所述第一内容;
接收第一响应,所述第一响应用于指示所述电子设备发送所述第一内容;
所述电子设备向所述目标设备发送所述第一内容。
3.根据权利要求1所述的方法,其特征在于,所述第一操作的方向为所述第一操作时所述电子设备的重心运动的方向,或所述第一操作时用户手势运动的方向。
4.根据权利要求1所述的方法,其特征在于,所述根据所述第一操作的方向和/或所述第一姿态确定目标设备,具体包括:
向一个或多个智能设备发送第二请求,所述第二请求用于指示所述一个或多个智能设备向所述电子设备发送位置信息;
根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第一操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
5.根据权利要求1所述的方法,其特征在于,所述根据所述第一操作的方向和/或所述第一姿态确定目标设备,具体包括:
向定位服务器发送第三请求,所述第三请求用于指示所述定位服务器发送一个或多个智能设备的位置信息;所述定位服务器用于保存一个或多个所述智能设备的位置信息;
根据所述一个或多个智能设备的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第一操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
6.根据权利要求4或5任一项所述的方法,其特征在于,所述根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:
当所述第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,所述第一列表用于显示所述多个智能设备的图标;
响应于用户的第二操作,确定所述第一智能设备中被所述第二操作在所述第一列表中选中图标的智能设备为所述目标设备。
7.根据权利要求6所述的方法,其特征在于,所述第一列表中显示的多个智能设备的图标的排列顺序根据所述多个智能设备与所述电子设备的距离确定。
8.根据权利要求6所述的方法,其特征在于,所述确定所述第一智能设备中被所述第二操作在所述第一列表中选中图标的智能设备为所述目标设备的之后,所述方法还包括:
执行第一预设动作;所述第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
9.根据权利要求1-5或7-8任一项所述的方法,所述第一操作为将处于第一姿态的所述电子设备向靠近所述目标设备的方向运动;所述第一姿态为所述电子设备的顶部向上,所述电子设备的显示屏朝向所述目标设备。
10.根据权利要求9所述的方法,其特征在于,所述第三操作为将处于第一姿态的所述电子设备向靠近所述目标设备的方向运动;所述第一姿态为所述电子设备的顶部朝向所述目标设备;
所述第四操作为将所述电子设备的所述第一姿态改变为所述第二姿态,所述第二姿态为所述电子设备的顶部向上,所述电子设备的显示屏朝向所述目标设备。
11.一种应用于电子设备的控制方法,其特征在于,包括:
检测到第五操作,所述第五操作包括将处于第三姿态的所述电子设备向远离目标设备的方向移动,所述第五操作的方向为远离所述目标设备的方向;
根据所述第五操作的方向和/或所述第三姿态确定所述目标设备;
向所述目标设备发送第四请求,所述第四请求用于请求所述目标设备发送第二内容;
所述电子设备显示包括所述第二内容的第一用户界面,其中,所述电子设备和所述目标设备登录相同的账号。
12.根据权利要求11所述的方法,其特征在于,所述第二内容包括所述目标设备当前正在执行的第一任务的第一信息和/或所述第一任务的第一控制指令,所述第一用户界面包括与所述第一控制指令对应的控件。
13.根据权利要求12所述的方法,其特征在于,当所述第一任务为播放第一音频时,所述第一信息包括所述第一音频的名称、演唱者信息、下载链接、歌词中的一项或多项,所述第一控制指令包括暂停指令、停止指令,播放指令、下一首指令中的一项或多项;或者,
当所述第一任务为制作第一食物时,所述第一信息包括所述第一食物的制作过程、制作时长、制作温度、制作湿度中的一项或多项,所述第一控制指令包括暂停指令、停止指令、启动指令、调整制作时长指令、调整制作温度指令、调整制作湿度指令中的一项或多项。
14.根据权利要求11所述的方法,其特征在于,所述根据所述第五操作的方向和/或所述第三姿态确定目标设备,具体包括:
向一个或多个智能设备发送第五请求,所述第五请求用于指示所述一个或多个智能设备向所述电子设备发送位置信息;
根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第五操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
15.根据权利要求11所述的方法,其特征在于,所述根据所述第五操作的方向和/或所述第三姿态确定目标设备,具体包括:
向定位服务器发送第六请求,所述第六请求用于指示所述定位服务器发送一个或多个智能设备的位置信息;所述定位服务器用于保存一个或多个所述智能设备的位置信息;
根据所述一个或多个智能设备的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第五操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
16.根据权利要求14或15任一项所述的方法,其特征在于,所述根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,具体包括:
当所述第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,所述第一列表用于显示所述多个智能设备的图标;
响应于用户的第六操作,确定所述第一智能设备中被所述第六操作在所述第一列表中选中图标的智能设备为所述目标设备。
17.根据权利要求16所述的方法,其特征在于,所述第一列表中显示的多个智能设备的图标的排列顺序根据所述多个智能设备与所述电子设备的距离确定。
18.根据权利要求16所述的方法,其特征在于,所述确定所述第一智能设备中被所述第六操作在所述第一列表中选中图标的智能设备为所述目标设备的之后,所述方法还包括:
执行第一预设动作;所述第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
19.根据权利要求11所述的方法,其特征在于:所述第五操作包括:先将所述电子设备向靠近所述目标设备的方向移动,再将所述电子设备向远离所述目标设备的方向移动。
20.根据权利要求11所述的方法,其特征在于:所述第三姿态的所述电子设备为所述电子设备的顶部指向所述目标设备。
21.根据权利要求11-15任一项所述的方法,其特征在于,所述第一用户界面还包括第一控件,所述方法还包括:
响应于对所述第一控件的操作,所述电子设备执行所述目标设备当前正在执行的所述第一任务;
其中,
当所述目标设备当前正在播放第一音频时,响应于对所述第一控件的操作,所述电子设备播放所述第一音频;或者
当所述目标设备当前正在播放第一视频时,响应于对所述第一控件的操作,所述电子设备播放所述第一视频。
22.一种电子设备,其特征在于,包括:存储器和一个或多个处理器;所述存储器用于存储计算机指令,当所述计算机指令被一个或多个处理器执行时,以使得所述电子设备执行:
显示第一内容,
检测到用户的第一操作;
响应于所述第一操作,获取所述第一操作的方向和所述电子设备的第一姿态;
根据所述第一操作的方向和/或所述第一姿态确定目标设备;
检测到所述电子设备和所述目标设备登录相同的账号,向所述目标设备发送所述第一内容;
所述第一操作包括第三操作和第四操作;
所述检测到用户的第一操作,具体包括:
检测到用户的第三操作;
所述响应于所述第一操作,获取所述第一操作的方向和所述电子设备的第一姿态,具体包括:
响应于所述第三操作,获取所述第三操作的方向和所述电子设备的第一姿态;
所述根据所述第一操作的方向和/或所述第一姿态确定目标设备,具体包括:
根据所述第三操作的方向和/或所述第一姿态确定目标设备;
所述检测到所述电子设备和所述目标设备登录相同的账号,所述电子设备向所述目标设备发送所述第一内容,具体包括:
获取到所述第四操作,所述第四操作为将所述电子设备从第一姿态改变成第二姿态;
响应于所述第四操作,检测到所述电子设备和所述目标设备登录相同的账号,所述电子设备向所述目标设备发送第一内容。
23.根据权利要求22所述的电子设备,其特征在于,所述根据所述第一操作的方向和/或所述第一姿态确定目标设备的步骤之后,所述电子设备还执行:
检测到所述电子设备和所述目标设备未登录相同的账号,向所述目标设备发送第一请求,所述第一请求用于请求所述目标设备接收所述第一内容;
接收第一响应,所述第一响应用于指示所述电子设备发送所述第一内容;
向所述目标设备发送所述第一内容。
24.根据权利要求22或23任一项所述的电子设备,其特征在于,所述第一操作的方向为所述第一操作时所述电子设备的重心运动的方向,或所述第一操作时用户手势运动的方向。
25.根据权利要求22所述的电子设备,其特征在于,所述根据所述第一操作的方向和/或所述第一姿态确定目标设备,所述电子设备具体执行:
向一个或多个智能设备发送第二请求,所述第二请求用于指示所述一个或多个智能设备向所述电子设备发送位置信息;
根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第一操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
26.根据权利要求22所述的电子设备,其特征在于,所述根据所述第一操作的方向和/或所述第一姿态确定目标设备,所述电子设备具体执行:
向定位服务器发送第三请求,所述第三请求用于指示所述定位服务器发送一个或多个智能设备的位置信息;所述定位服务器用于保存一个或多个所述智能设备的位置信息;
根据所述一个或多个智能设备的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第一操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
27.根据权利要求25或26任一项所述的电子设备,其特征在于,所述根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述电子设备具体执行:
当所述第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,所述第一列表用于显示所述多个智能设备的图标;
响应于用户的第二操作,确定所述第一智能设备中被所述第二操作在所述第一列表中选中图标的智能设备为所述目标设备。
28.根据权利要求27所述的电子设备,其特征在于,所述第一列表中显示的多个智能设备的图标的排列顺序根据所述多个智能设备与所述电子设备的距离确定。
29.根据权利要求28所述的电子设备,其特征在于,所述确定所述第一智能设备中被所述第二操作在所述第一列表中选中图标的智能设备为所述目标设备的之后,所述电子设备还执行第一预设动作;所述第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
30.根据权利要求29所述的电子设备,其特征在于,所述第一操作为将处于第一姿态的所述电子设备向靠近所述目标设备的方向运动;所述第一姿态为所述电子设备的顶部向上,所述电子设备的显示屏朝向所述目标设备。
31.根据权利要求24所述的电子设备,其特征在于,所述第三操作为将处于第一姿态的所述电子设备向靠近所述目标设备的方向运动;所述第一姿态为所述电子设备的顶部朝向所述目标设备;
所述第四操作为将所述电子设备的所述第一姿态改变为所述第二姿态,所述第二姿态为所述电子设备的顶部向上,所述电子设备的显示屏朝向所述目标设备。
32.一种电子设备,其特征在于,包括:存储器和一个或多个处理器;所述存储器用于存储计算机指令,当所述计算机指令被一个或多个处理器执行时,以使得所述电子设备执行:
检测到第五操作,所述第五操作包括将处于第三姿态的所述电子设备向远离目标设备的方向移动,所述第五操作的方向为远离所述目标设备的方向;
根据所述第五操作的方向和/或所述第三姿态确定所述目标设备;
向所述目标设备发送第四请求,所述第四请求用于请求所述目标设备发送第二内容;
显示包括所述第二内容的第一用户界面,其中,所述电子设备和所述目标设备登录相同的账号。
33.根据权利要求32所述的电子设备,其特征在于,所述第二内容包括所述目标设备当前正在执行的第一任务的第一信息和/或所述第一任务的第一控制指令,所述第一用户界面包括与所述第一控制指令对应的控件。
34.根据权利要求33所述的电子设备,其特征在于,当所述第一任务为播放第一音频时,所述第一信息包括所述第一音频的名称、演唱者信息、下载链接、歌词中的一项或多项,所述第一控制指令包括暂停指令、停止指令,播放指令、下一首指令中的一项或多项;
当所述第一任务为制作第一食物时,所述第一信息包括所述第一食物的制作过程、制作时长、制作温度、制作湿度中的一项或多项,所述第一控制指令包括暂停指令、停止指令、启动指令、调整制作时长指令、调整制作温度指令、调整制作湿度指令中的一项或多项。
35.根据权利要求32所述的电子设备,其特征在于,所述根据所述第五操作的方向和/或所述第三姿态确定目标设备,所述电子设备具体执行:
向一个或多个智能设备发送第五请求,所述第五请求用于指示所述一个或多个智能设备向所述电子设备发送位置信息;
根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第五操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
36.根据权利要求32所述的电子设备,其特征在于,所述根据所述第五操作的方向和/或所述第三姿态确定目标设备,所述电子设备具体执行:
向定位服务器发送第六请求,所述第六请求用于指示所述定位服务器发送一个或多个智能设备的位置信息;所述定位服务器用于保存一个或多个所述智能设备的位置信息;
根据所述一个或多个智能设备的位置信息,确定第一智能设备为目标设备,所述第一智能设备的位置在所述第五操作的方向上,所述第一智能设备包括所述一个或多个智能设备中的一个或多个智能设备。
37.根据权利要求35-36任一项所述的电子设备,其特征在于,所述根据所述一个或多个智能设备发送的位置信息,确定第一智能设备为目标设备,所述电子设备具体执行:
当所述第一智能设备中包含多个智能设备时,在第一用户界面显示第一列表,所述第一列表用于显示所述多个智能设备的图标;
响应于用户的第六操作,确定所述第一智能设备中被所述第六操作在所述第一列表中选中图标的智能设备为所述目标设备。
38.根据权利要求37所述的电子设备,其特征在于,所述第一列表中显示的多个智能设备的图标的排列顺序根据所述多个智能设备与所述电子设备的距离确定。
39.根据权利要求37所述的电子设备,其特征在于,所述确定所述第一智能设备中被所述第六操作在所述第一列表中选中图标的智能设备为所述目标设备的之后,所述电子设备还执行:
执行第一预设动作;所述第一预设动作包括振动、响铃、在用户界面中显示提示框中的一项或多项。
40.根据权利要求32所述的电子设备,其特征在于:所述第五操作包括:先将所述电子设备向靠近所述目标设备的方向移动,再将所述电子设备向远离所述目标设备的方向移动。
41.根据权利要求32所述的电子设备,其特征在于:所述第三姿态的所述电子设备为所述电子设备的顶部指向所述目标设备。
42.根据权利要求32-36任一项所述的电子设备,其特征在于,所述第一用户界面还包括第一控件,所述电子设备还执行:
响应于对所述第一控件的操作,执行所述目标设备当前正在执行的所述第一任务;
其中,
当所述目标设备当前正在播放第一音频时,响应于对所述第一控件的操作,播放所述第一音频;或者
当所述目标设备当前正在播放第一视频时,响应于对所述第一控件的操作,播放所述第一视频。
43.一种计算机存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1至10或权利要求11至21任一项所述的方法。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2021/095855 WO2021238933A1 (zh) | 2020-05-27 | 2021-05-25 | 一种应用于电子设备的控制方法及电子设备 |
US17/999,831 US20230291826A1 (en) | 2020-05-27 | 2021-05-25 | Control Method Applied to Electronic Device and Electronic Device |
EP21814610.8A EP4141634A4 (en) | 2020-05-27 | 2021-05-25 | CONTROL METHOD AND ELECTRONIC DEVICE APPLIED TO AN ELECTRONIC DEVICE |
JP2022572514A JP2023527824A (ja) | 2020-05-27 | 2021-05-25 | 電子デバイスに適用される制御方法及び電子デバイス |
CN202180035817.0A CN115943621A (zh) | 2020-05-27 | 2021-05-25 | 一种应用于电子设备的控制方法及电子设备 |
Applications Claiming Priority (10)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010458414 | 2020-05-27 | ||
CN2020104584144 | 2020-05-27 | ||
CN202010779662 | 2020-08-05 | ||
CN202010780257 | 2020-08-05 | ||
CN2020107796629 | 2020-08-05 | ||
CN202010779814 | 2020-08-05 | ||
CN2020107802579 | 2020-08-05 | ||
CN202010780353 | 2020-08-05 | ||
CN2020107798145 | 2020-08-05 | ||
CN2020107803533 | 2020-08-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113810542A CN113810542A (zh) | 2021-12-17 |
CN113810542B true CN113810542B (zh) | 2022-10-28 |
Family
ID=78943476
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011174741.3A Active CN113810542B (zh) | 2020-05-27 | 2020-10-29 | 一种应用于电子设备的控制方法、电子设备及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113810542B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114257631A (zh) * | 2021-12-20 | 2022-03-29 | Oppo广东移动通信有限公司 | 数据交互方法、装置、设备及存储介质 |
CN114842634A (zh) * | 2022-04-25 | 2022-08-02 | 歌尔科技有限公司 | 一种设备控制方法、主控设备、电子设备及存储介质 |
CN115267652A (zh) * | 2022-07-26 | 2022-11-01 | Oppo广东移动通信有限公司 | 角度测量方法、可折叠设备、存储介质和计算机程序产品 |
CN118069006A (zh) * | 2022-11-22 | 2024-05-24 | 荣耀终端有限公司 | 应用流转方法及电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102549574A (zh) * | 2009-10-02 | 2012-07-04 | 高通股份有限公司 | 用于提供文件共享功能性的用户接口示意动作和方法 |
CN102681958A (zh) * | 2011-01-28 | 2012-09-19 | 微软公司 | 使用物理姿势传输数据 |
CN102932412A (zh) * | 2012-09-26 | 2013-02-13 | 华为终端有限公司 | 文件传输方法及系统、主控设备 |
CN110719584A (zh) * | 2019-09-02 | 2020-01-21 | 华为技术有限公司 | 近距离传输信息的方法和电子设备 |
US10564806B1 (en) * | 2012-09-25 | 2020-02-18 | Amazon Technologies, Inc. | Gesture actions for interface elements |
-
2020
- 2020-10-29 CN CN202011174741.3A patent/CN113810542B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102549574A (zh) * | 2009-10-02 | 2012-07-04 | 高通股份有限公司 | 用于提供文件共享功能性的用户接口示意动作和方法 |
CN102681958A (zh) * | 2011-01-28 | 2012-09-19 | 微软公司 | 使用物理姿势传输数据 |
US10564806B1 (en) * | 2012-09-25 | 2020-02-18 | Amazon Technologies, Inc. | Gesture actions for interface elements |
CN102932412A (zh) * | 2012-09-26 | 2013-02-13 | 华为终端有限公司 | 文件传输方法及系统、主控设备 |
CN110719584A (zh) * | 2019-09-02 | 2020-01-21 | 华为技术有限公司 | 近距离传输信息的方法和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN113810542A (zh) | 2021-12-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113810542B (zh) | 一种应用于电子设备的控制方法、电子设备及计算机存储介质 | |
CN113645351B (zh) | 应用界面交互方法、电子设备和计算机可读存储介质 | |
WO2020078299A1 (zh) | 一种处理视频文件的方法及电子设备 | |
WO2020034227A1 (zh) | 一种多媒体内容同步方法及电子设备 | |
CN111752443A (zh) | 显示设备控制页面的方法、相关装置及系统 | |
CN111176506A (zh) | 一种屏幕显示方法及电子设备 | |
WO2021036770A1 (zh) | 一种分屏处理方法及终端设备 | |
WO2021238933A1 (zh) | 一种应用于电子设备的控制方法及电子设备 | |
CN110559645B (zh) | 一种应用的运行方法及电子设备 | |
WO2022017393A1 (zh) | 显示交互系统、显示方法及设备 | |
CN112130788A (zh) | 一种内容分享方法及其装置 | |
WO2022007707A1 (zh) | 家居设备控制方法、终端设备及计算机可读存储介质 | |
WO2022028537A1 (zh) | 一种设备识别方法及相关装置 | |
CN112698756A (zh) | 用户界面的显示方法及电子设备 | |
CN112383664A (zh) | 一种设备控制方法、第一终端设备及第二终端设备 | |
CN113194454B (zh) | 数据分享的方法、电子设备 | |
CN114201738B (zh) | 解锁方法及电子设备 | |
WO2021196980A1 (zh) | 多屏交互方法、电子设备及计算机可读存储介质 | |
CN114285938B (zh) | 一种设备推荐方法、装置及计算机可读存储介质 | |
CN114095542B (zh) | 显示控制方法及电子设备 | |
WO2023045597A1 (zh) | 大屏业务的跨设备流转操控方法和装置 | |
CN114090140A (zh) | 基于指向操作的设备之间的交互方法及电子设备 | |
CN113391775A (zh) | 一种人机交互方法及设备 | |
WO2023001152A1 (zh) | 一种推荐视频片段的方法、电子设备及服务器 | |
WO2022152174A1 (zh) | 一种投屏的方法和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |