CN111522250B - 智能家居系统及其控制方法与装置 - Google Patents
智能家居系统及其控制方法与装置 Download PDFInfo
- Publication number
- CN111522250B CN111522250B CN202010464921.9A CN202010464921A CN111522250B CN 111522250 B CN111522250 B CN 111522250B CN 202010464921 A CN202010464921 A CN 202010464921A CN 111522250 B CN111522250 B CN 111522250B
- Authority
- CN
- China
- Prior art keywords
- user
- target
- terminal
- screen
- monitoring device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 160
- 238000012806 monitoring device Methods 0.000 claims abstract description 278
- 238000012544 monitoring process Methods 0.000 claims abstract description 109
- 238000012546 transfer Methods 0.000 claims abstract description 77
- 238000013507 mapping Methods 0.000 claims abstract description 17
- 238000012790 confirmation Methods 0.000 claims description 36
- 230000015654 memory Effects 0.000 claims description 36
- 230000008569 process Effects 0.000 claims description 27
- 238000012216 screening Methods 0.000 claims description 17
- 230000000977 initiatory effect Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 40
- 238000010586 diagram Methods 0.000 description 34
- 238000012545 processing Methods 0.000 description 19
- 230000006870 function Effects 0.000 description 15
- 238000007726 management method Methods 0.000 description 15
- 238000010295 mobile communication Methods 0.000 description 13
- 230000001815 facial effect Effects 0.000 description 11
- 238000001514 detection method Methods 0.000 description 9
- 230000005236 sound signal Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 230000007774 longterm Effects 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 210000000988 bone and bone Anatomy 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005265 energy consumption Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 206010011469 Crying Diseases 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- Telephonic Communication Services (AREA)
Abstract
本申请提供了一种智能家居系统及其控制方法与装置,应用于智能家居技术领域。该方法包括:接收用户终端发送的屏幕寻呼指示;根据屏幕寻呼指示,向至少一个监测装置发送寻呼请求,其中监测装置与屏幕终端之间具有映射关系;接收至少一个监测装置发送的监测数据,监测数据用于指示是否监测到目标用户;根据监测数据,从至少一个屏幕终端中选定目标屏幕终端;将用户终端上目标应用的实时运行数据转移至目标屏幕终端进行显示。本申请中,在用户离开用户终端并转移至其他区域时,控制中心可以将用户终端上目标应用的实时运行数据转移至用户所在区域的屏幕终端上,从而使得用户能够无缝衔接的继续使用目标应用,帮助用户摆脱了手机等终端的束缚。
Description
技术领域
本申请涉及智能家居技术领域,尤其涉及一种智能家居系统及其控制方法与装置。
背景技术
随着近年人工智能(Artificial Intelligence,AI)技术的发展和人们生活水平的提高,人们越来越注重自己生活环境的舒适性、安全性与便利性。为顺应大众的需求,智能家居系统(smart home)得到了快速发展。其中,智能家居系统的目的是利用物联网技术使用户家庭中的各种设备更多的按照用户的生活方式来服务,从而为用户创造出一个更舒适、更环保、更便捷、更智慧的居住环境。
目前,用户处于目标环境(如居家环境、办公环境等)中时,常利用智能手机、个人计算机(Personal Computer,PC)等终端设备进行娱乐或办公;但当用户远离相应的终端设备时,用户往往不能继续处理相应的终端设备上的事件,例如,用户无法继续与他人进行视频会议、无法处理新的邮件通知等。也就是说,目前的智能家居系统,无法使用户摆脱相应终端设备(如娱乐终端或办公终端等)的束缚,智能化程度低,致使用户体验差。
发明内容
本申请实施例提供了一种智能家居系统及其控制方法与装置,能够使用户在不同的区域无缝衔接的继续使用目标应用,帮助用户摆脱了手机等终端的束缚,使得用户享受到了智能家居系统带来的便捷,提升了智能家居系统的智能化程度。
第一方面,本申请实施例提供了一种智能家居系统的控制方法,应用于控制中心,该方法包括:接收用户终端发送的屏幕寻呼指示;根据屏幕寻呼指示,向至少一个监测装置发送寻呼请求,以使至少一个监测装置监测目标用户,监测装置与屏幕终端之间具有映射关系;接收至少一个监测装置发送的监测数据,监测数据用于指示是否监测到目标用户;根据监测数据,从至少一个屏幕终端中选定目标屏幕终端,其中,目标屏幕终端指第一监测装置对应的屏幕终端,第一监测装置指监测到目标用户的监测装置;基于接收到的用户终端发送的目标应用的运行状态信息,将目标应用的实时运行数据转移至目标屏幕终端进行显示,其中,运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。
也就是说,在该方法中,控制中心通过将用户终端上目标应用的实时运行数据转移至目标屏幕终端上,从而使得用户在离开用户终端并转移至目标屏幕终端所处的区域时,用户也能够无缝衔接的继续使用目标应用,帮助用户摆脱了手机等终端的束缚,使得用户享受到了智能家居系统带来的便捷,提升了智能家居系统的智能化程度。
在一种可能的实现方式中,监测数据中包括至少一个监测装置采集到的用户的用户特征信息;根据监测数据,从至少一个屏幕终端中选定目标屏幕终端,包括:根据用户特征信息,从至少一个监测装置所监测到的用户中筛选目标用户;根据筛选结果,将监测到目标用户的监测装置作为第一监测装置;根据监测装置与屏幕终端之间的映射关系,利用第一监测装置,从至少一个屏幕终端中选定目标屏幕终端。
也就是说,当监测数据中包括监测装置采集到的用户的用户特征信息时,控制中心可以基于用户特征信息,筛选出监测到目标用户的监测装置,并基于监测装置与屏幕终端之间的映射关系,选定目标屏幕终端,从而实现了在控制中心侧根据用户特征信息确定目标屏幕终端的目的。
在一种可能的实现方式中,根据用户特征信息,从至少一个监测装置所监测到的用户中筛选目标用户,包括:获取预存储的用户的第一特征信息,第一特征信息中包括目标用户的特征信息;将用户特征信息与第一特征信息进行比对,若比对成功,则筛选到目标用户。
也就是说,控制中心在基于用户特征信息筛选目标用户时,可以将用户特征信息与预存储的且包括有目标用户的特征信息的第一特征信息进行比对,从而筛选出目标用户。
在一种可能的实现方式中,根据用户特征信息,从至少一个监测装置所监测到的用户中筛选目标用户,包括:接收用户终端发送的用户的第二特征信息,第二特征信息为用户终端在发送屏幕寻呼指示前采集,且第二特征信息中包括目标用户的特征信息;将用户特征信息与第二特征信息进行比对,若比对成功,则筛选到目标用户。
也就是说,控制中心在基于用户特征信息筛选目标用户时,可以将用户特征信息与接收的用户终端发送的且包括有目标用户的特征信息的第二用户特征信息进行比对,从而筛选出目标用户。
在一种可能的实现方式中,监测数据中包括至少一个监测装置的监测结果,监测结果用于指示监测装置是否监测到目标用户;根据监测数据,从至少一个屏幕终端中选定目标屏幕终端,包括:根据监测结果,将第一监测装置对应的屏幕终端选定为目标屏幕终端。
也就是说,当监测数据中包括有指示监测装置是否监测到目标用户时,可以直接将监测到目标用户的监测装置对应的屏幕终端选定为目标屏幕终端。
在一种可能的实现方式中,第一监测装置为多个,且目标用户为多个,从至少一个屏幕终端中选定目标屏幕终端,包括:根据监测到的目标用户的优先级,得到每个第一监测装置的优先级,以及选取优先级最高的第一监测装置对应的屏幕终端选定为目标屏幕终端。
也就是说,当监测到目标用户的监测装置为多个,且监测到的目标用户也有多个(此时系统中注册有多个用户,且至少有两个用户分别被不同的屏幕终端监测到)时,基于目标用户的优先级,确定监测装置的优先级;之后,再选取优先级最高的监测装置对应的屏幕终端作为目标屏幕终端,以避免出现误转移目标应用的实时运行数据的情况。
在一种可能的实现方式中,第一监测装置为多个,且目标用户为一个,从至少一个屏幕终端中选定目标屏幕终端,包括:将第一监测装置中,距离目标用户最近的监测装置对应的屏幕终端选定为目标屏幕终端。也就是说,当监测到目标用户的监测装置为多个,且监测到的目标用户仅有一个时,则选取与目标用户相距最近的监测装置所对应的屏幕终端作为目标屏幕终端,以便于目标用户进行操控和/或观测,提升了智能家居系统的智能化程度。
在一种可能的实现方式中,将目标应用的实时运行数据转移至目标屏幕终端进行显示之前,还包括:向目标屏幕终端发送确认指令,以在目标屏幕终端上显示转移提示信息,转移提示信息用于提示是否将实时运行数据转移至目标屏幕终端;接收目标屏幕终端响应于转移提示信息反馈的第一确认信息,第一确认信息用于指示将实时运行数据转移至目标屏幕终端。在接收到目标屏幕终端反馈的第一确认信息后,再将实时运行数据转移至目标屏幕终端,使得用户能够自主选择是否进行转移操作,提升了智能家居系统的便捷性。
在一种可能的实现方式中,接收用户终端发送的屏幕寻呼指示之前,还包括:接收用户终端发送的注册请求,其中,注册请求用于请求在目标屏幕终端显示目标应用的实时运行数据;检测目标应用是否适配至少一个屏幕终端;若目标应用适配至少一个屏幕终端,则将目标应用添加至注册列表中;若目标应用未能适配至少一个屏幕终端,则向用户终端发送提示信息,以使用户终端对发起注册请求的用户进行提醒。通过用户自主选择添加目标应用,以及在目标应用不能适配屏幕终端时发出提示,提示了用户体验。
在一种可能的实现方式中,基于接收到的用户终端发送的目标应用的运行状态数据,将目标应用的实时运行数据转移至目标屏幕终端进行显示之前,还包括:向用户终端反馈选定的目标屏幕终端的信息,以使用户终端发送目标应用的运行状态信息;接收用户终端发送的目标应用的运行状态信息。
在一种可能的实现方式中,屏幕寻呼指示中携带有目标应用的运行状态信息。
在一种可能的实现方式中,监测装置为多个,多个监测装置同时或分时进行用户监测。通过同时进行用户监测,提升了监测的准确度;通过分时进行用户监测避免不必要的监测,降低智能家居系统的能耗。
第二方面,本申请实施例提供了一种智能家居系统的控制方法,应用于控制中心,方法包括:接收用户终端发送的屏幕寻呼指示;根据屏幕寻呼指示,向至少一个屏幕终端发送寻呼请求,以使屏幕终端显示转移提示信息,转移提示信息用于提示是否将用户终端上目标应用的实时运行数据转移至屏幕终端;接收至少一个屏幕终端反馈的第二确认消息,以及将反馈第二确认消息的屏幕终端选定为目标屏幕终端,第二确认信息用于指示将实时运行数据转移至屏幕终端;基于接收到的用户终端发送的目标应用的运行状态信息,将实时运行数据转移至目标屏幕终端进行显示,其中,运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。
也就是说,在该方法中,控制中心通过广播等方式向屏幕终端上发送是否将目标应用的实时运行数据转移到屏幕终端的寻呼请求,并将实时运行数据转移至确认转移的屏幕终端上,从而使得用户在离开用户终端时,能够自主选择其所需使用的屏幕终端,以及能够无缝衔接的继续使用目标应用,帮助用户摆脱了手机等终端的束缚,使得用户享受到了智能家居系统带来的便捷,提升了智能家居系统的智能化程度。
在一种可能的实现方式中,根据屏幕寻呼指示,向至少一个屏幕终端发送寻呼请求之前,还包括:向至少一个监测装置发送自检指令,以使监测装置检测监测装置上的目标硬件是否出现故障,监测装置与屏幕终端之间的映射关系,目标硬件用于监测目标用户;接收至少一个监测装置反馈的自检数据;根据自检数据,得出至少一个监测装置上的目标硬件出现故障。
也就是说,当监测装置上的目标硬件出现故障时,控制中心可以向屏幕终端直接发送是否转移实时运行数据的寻呼请求,以使用户能够自主选择,从而使得在监测装置上目标硬件出现故障时,目标用户能够无缝衔接的继续使用目标应用。
在一种可能的实现方式中,接收用户终端发送的屏幕寻呼指示之前,还包括:接收用户终端发送的注册请求,其中,注册请求用于请求在目标屏幕终端显示目标应用的实时运行数据;检测目标应用是否适配至少一个屏幕终端;若目标应用适配至少一个屏幕终端,则将目标应用添加至注册列表中;若目标应用未能适配至少一个屏幕终端,则向用户终端发送提示信息,以使用户终端对发起注册请求的用户进行提醒。
在一种可能的实现方式中,基于接收到的用户终端发送的目标应用的运行状态信息,将实时运行数据转移至目标屏幕终端进行显示之前,还包括:向用户终端反馈选定的目标屏幕终端的信息,以使用户终端发送目标应用的运行状态信息;接收用户终端发送的目标应用的运行状态信息。
在一种可能的实现方式中,屏幕寻呼指示中携带有目标应用的运行状态信息。
第三方面,本申请实施例提供了一种智能家居系统的控制方法,应用于用户终端,该方法包括:识别满足屏幕寻呼的触发条件,触发条件包括检测到目标用户未处于用户终端可视范围内的时长达到第一预设时长,和检测到目标应用处于激活状态的时长达到第二预设时长中的至少一项;向控制中心发送屏幕寻呼指示,以使控制中心向至少一个监测装置或屏幕终端发送寻呼请求,监测装置与屏幕终端之间的映射关系。
也就是说,该方法在用户终端识别出满足屏幕寻呼的触发条件时,则向控制中心发送屏幕寻呼指示,从而使得控制中心向至少一个监测装置或屏幕终端发送寻呼请求,以便于控制中心确定出目标用户所在区域的屏幕终端,进而将用户终端上目标应用的实时运行数据转移至该屏幕终端上,以使得目标用户能够无缝衔接的继续使用目标应用。
在一种可能的实现方式中,触发条件包括检测到目标用户未处于用户终端可视范围内的时长达到第一预设时长,和检测到目标应用处于激活状态的时长达到第二预设时长中;识别满足屏幕寻呼的触发条件之前,还包括:获取目标应用的类型;根据类型,选取与类型相关联的触发条件。通过根据目标应用的类型确定触发条件,达到了根据不同的应用确定不同的触发条件的目的,提升了控制的精确度。
在一种可能的实现方式中,识别满足屏幕寻呼的触发条件之前,还包括:采集在预设时间内使用用户终端的用户的第二特征信息,以及将第二特征信息发送至控制中心,以使控制中心根据第二特征信息从监测装置发送的监测数据中筛选出目标用户。
在一种可能的实现方式中,识别满足屏幕寻呼的触发条件之前,还包括:采集在预设时间内使用用户终端的用户的第三特征信息,以及将第三特征信息发送至监测装置,以使监测装置根据第三特征信息判断是否监测到目标用户。
在一种可能的实现方式中,识别满足屏幕寻呼的触发条件之前,还包括:识别用户终端处于目标环境中,以避免出现误转移的情况,其中,目标环境包括居家环境、办公环境。
在一种可能的实现方式中,该方法还包括:接收目标用户发送的注册请求,其中,注册请求用于请求在目标屏幕终端显示目标应用的实时运行数据;将注册请求发送至控制中心,以使控制中心检测目标应用是否适配至少一个屏幕终端。通过用户自主选择添加目标应用,提示了用户体验
在一种可能的实现方式中,屏幕寻呼指示中携带有目标应用的运行状态信息,以使控制中心基于运行状态信息,将目标应用的实时运行数据转移至目标屏幕终端进行显示,其中,运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。
在一种可能的实现方式中,向控制中心发送屏幕寻呼指示之后,还包括:接收控制中心反馈的确定出目标屏幕终端的信息,以及向控制中心发送目标应用的运行状态信息,以使控制中心基于运行状态信息,将目标应用的实时运行数据转移至目标屏幕终端进行显示,其中,运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。
在一种可能的实现方式中,向控制中心发送屏幕寻呼指示之后,还包括:接收控制中心反馈的确定出目标屏幕终端的信息,以及将目标应用的运行状态信息发送至目标屏幕终端,以使所述目标屏幕终端显示所述目标应用的实时运行数据,其中,运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。
第四方面,本申请实施例提供了一种智能家居系统的控制方法,应用于监测装置,监测装置与屏幕终端之间的映射关系,方法包括:接收控制中心发送的寻呼请求,寻呼请求为控制中心接收到用户终端发送的屏幕寻呼指示后发出;根据寻呼请求,监测目标用户,以及将监测数据发送至控制中心,以使控制中心根据监测数据从至少一个屏幕终端中选定目标屏幕终端,并将用户终端上目标应用的实时运行数据转移至目标屏幕终端,监测数据用于指示是否监测到目标用户。
也就是说,该方法中监测装置接收到寻呼请求后,则开始监测目标用户,并将监测数据反馈至控制中心,之后,控制中心基于监测数据选定目标屏幕终端,并将用户终端上目标应用的实时运行数据转移至该目标屏幕终端上,从而使得用户在离开用户终端时,用户也能够无缝衔接的继续使用目标应用,帮助用户摆脱了手机等终端的束缚,使得用户享受到了智能家居系统带来的便捷,提升了智能家居系统的智能化程度。
在一种可能的实现方式中,监测数据中包括监测结果,监测结果用于指示监测装置是否监测到目标用户;监测目标用户,包括:采集监测装置监测范围内用户的用户特征信息,以及根据用户特征信息,得到监测结果,从而得出监测装置是否监测到目标用户。
在一种可能的实现方式中,根据用户特征信息,得到监测结果,包括:获取预存储的用户的第一特征信息,第一特征信息中包括目标用户的特征信息;将用户特征信息与第一特征信息进行比对,若比对成功,则监测结果为监测到目标用户。
在一种可能的实现方式中,根据用户特征信息,得到监测结果,包括:接收控制中心发送的用户的第二特征信息,第二特征信息由用户终端发送至控制中心,第二特征信息为用户终端向控制中心发送屏幕寻呼指示前采集,且第二特征信息中包括目标用户的特征信息;将用户特征信息与第二特征信息进行比对,若比对成功,则监测结果为监测到目标用户。
在一种可能的实现方式中,根据用户特征信息,得到监测结果,包括:接收用户终端发送的用户的第三特征信息,第三特征信息为用户终端向控制中心发送屏幕寻呼指示前采集,且第三特征信息中包括目标用户的特征信息;将用户特征信息与第三特征信息进行比对,若比对成功,则监测结果为监测到目标用户。。
第五方面,本申请实施例提供了一种智能家居系统的控制方法,应用于屏幕终端,方法包括:接收控制中心发送的寻呼请求,以及显示转移提示信息,寻呼请求为控制中心接收到用户终端发送的屏幕寻呼指示后发出,转移提示信息用于提示是否将实时运行数据转移至屏幕终端;接收用户下发的确认转移的信息,以及向控制中心反馈第二确认信息,第二确认信息用于指示将实时运行数据转移至屏幕终端;接收控制中心转移的用户终端上目标应用的实时运行数据,以及显示实时运行数据。
第六方面,本申请实施例提供了一种智能家居系统的控制装置,该控制装置包括至少一个处理器,该处理器用于执行存储器中存储的指令,以使得控制中心执行第一方面中的方法,或者执行第二方面中的方法。
第七方面,本申请实施例提供了一种智能家居系统的控制装置,该控制装置包括至少一个处理器,该处理器用于执行存储器中存储的指令,以使得用户终端执行第三方面中的方法。
第八方面,本申请实施例提供了一种智能家居系统的控制装置,该控制装置包括至少一个处理器,该处理器用于执行存储器中存储的指令,以使得监测装置执行第四方面中的方法。
第九方面,本申请实施例提供了一种智能家居系统的控制装置,该控制装置包括至少一个处理器,该处理器用于执行存储器中存储的指令,以使得屏幕终端执行第五方面中的方法。
第十方面,本申请实施例提供了一种控制中心,用于执行执行第一方面中的方法,或者执行第二方面中的方法。
第十一方面,本申请实施例提供了一种用户终端,用于执行执行第三方面中的方法。
第十二方面,本申请实施例提供了一种监测装置,用于执行执行第四方面中的方法。
第十三方面,本申请实施例提供了一种屏幕终端,用于执行执行第五方面中的方法。
第十四方面,本申请实施例提供了一种智能家居系统,包括控制中心、用户终端监测装置和屏幕终端,其中,控制中心用于执行第一方面中的方法,用户终端用于执行第三方面中的方法,监测装置用于执行第四方面中的方法。
第十五方面,本申请实施例提供了一种智能家居系统,包括控制中心、用户终端和屏幕终端,其中,控制中心用于执行第二方面中的方法,用户终端用于执行第三方面中的方法,屏幕终端用于执行第五方面中的方法。
第十六方面,本申请实施例提供了一种计算机存储介质,该计算机存储介质中存储有指令,当该指令在计算机上运行时,使得计算机执行上述任一方面中所提供的方法。
第十七方面,本申请实施例提供了一种包含指令的计算机程序产品,当该指令在计算机上运行时,使得计算机执行上述任一方面中所提供的方法。
附图说明
图1是本申请实施例提供的一种智能家居系统的系统架构图;
图2为本申请实施例提供的一种终端的硬件结构示意图;
图3为本申请实施例提供的一种控制中心的硬件结构示意图;
图4A和图4B共同构成了本申请实施例提供的智能家居系统的控制方法的一个应用场景示意图;
图5是本申请实施例提供的一种添加目标应用的步骤示意图;
图6A是本申请实施例提供的一种智能家居系统的登录界面示意图;
图6B是本申请实施例提供的一种添加目标应用的用户界面示意图;
图7A是本申请实施例提供的一种目标应用被添加成功时的用户界面示意图;
图7B是本申请实施例提供的一种目标应用被添加失败时的用户界面示意图;
图8是本申请实施例提供的一种智能家居系统的控制方法的通信示意图;
图9A是本申请实施例提供的一种用户终端的用户界面示意图;
图9B是本申请实施例提供的一种用户终端的用户界面示意图;
图10是本申请实施例提供的一种用户终端的用户界面示意图;
图11是本申请实施例提供的一种用户终端确定目标用户处于可视范围内的场景示意图;
图12是本申请实施例提供的一种目标用户为多个且目标屏幕终端为多个的场景示意图;
图13是本申请实施例提供的一种目标用户为一个且目标屏幕终端为多个的场景示意图;
图14是本申请实施例提供的一种用户终端确定与目标应用相对应的触发条件的步骤示意图;
图15是本申请实施例提供的一种基于用户特征信息筛选目标用户的步骤示意图;
图16是本申请实施例提供的另一种基于用户特征信息筛选目标用户的步骤示意图;
图17是本申请实施例提供的一种控制中心询问目标屏幕终端的通信示意图;
图18是本申请实施例提供的一种屏幕终端的用户界面示意图;
图19A和19B共同构成了本申请实施例提供的智能家居系统的控制方法的一个应用场景示意图;
图20是本申请实施例提供的智能家居系统的控制方法的一个应用场景示意图;
图21是本申请实施例提供的另一种智能家居系统的控制方法的通信示意图;
图22是本申请实施例提供的一种智能家居系统的控制装置的结构示意图。
具体实施方式
为了使本申请实施例的目的、技术方案和优点更加清楚,下面将结合附图,对本申请实施例中的技术方案进行描述。
在本申请实施例的描述中,“示例性的”、“例如”或者“举例来说”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”、“例如”或者“举例来说”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”、“例如”或者“举例来说”等词旨在以具体方式呈现相关概念。
在本申请实施例的描述中,术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,单独存在B,同时存在A和B这三种情况。另外,除非另有说明,术语“多个”的含义是指两个或两个以上。例如,多个系统是指两个或两个以上的系统,多个屏幕终端是指两个或两个以上的屏幕终端。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
图1是本申请实施例提供的一种智能家居系统的系统架构图。如图1所示,智能家居系统包括用户终端11、控制中心12、至少一个屏幕终端(例如屏幕终端13,14),以及至少一个监测装置(图中未示出);其中,监测装置与屏幕终端之间具有映射关系,每个屏幕终端对应至少一个监测装置;屏幕终端13,14被设置在不同的位置。用户终端11为用户在第一时间段使用的终端,屏幕终端13或屏幕终端14为用户在第二时间段需要使用的终端,其中,第一时间段早于第二时间段。用户终端11与至少一个屏幕终端(例如屏幕终端13,14)可以处于相同区域,也可以处于不同区域,举例来说,用户终端11可以处于客厅中,屏幕终端13可以处于客厅或卧室中。
在一些示例中,用户终端11和屏幕终端(例如屏幕终端13,14)均可以为手机、平板电脑、数码相机、个人数字助理(personal digitalassistant,PDA)、可穿戴设备、膝上型计算机(laptop)、智能电视、华为智慧屏等具有显示屏幕的电子设备。电子设备的示例性实施例包括但不限于搭载iOS、android、Windows、鸿蒙系统(Harmony OS)或者其他操作系统的电子设备。上述电子设备也可以是其他电子设备,诸如具有触敏表面(例如触控面板)的膝上型计算机(laptop)等。本申请实施例对电子设备的类型不做具体限定。
用户终端11和屏幕终端(例如屏幕终端13,14)均可以与控制中心12通过有线网络(Wired network)或无线网络(wireless network)等网络连接。例如,该网络可以为局域网(local area networks,LAN),也可以为广域网(wide area networks,WAN)(例如互联网)。用户终端11和屏幕终端与控制中心12之间的网络均可使用任何已知的网络通信协议来实现,上述网络通信协议可以是各种有线或无线通信协议,诸如以太网、通用串行总线(universal serial bus,USB)、火线(firewire)、全球移动通讯系统(global system formobile communications,GSM)、通用分组无线服务(general packet radio service,GPRS)、码分多址接入(code divisionmultiple access,CDMA)、宽带码分多址(widebandcode division multiple access,WCDMA),时分码分多址(time-division code divisionmultiple access,TD-SCDMA)、长期演进(long term evolution,LTE)、新空口(new radio,NR)、蓝牙(bluetooth)、无线保真(wireless fidelity,Wi-Fi)等通信协议。
此外,用户终端11和屏幕终端(例如屏幕终端13,14)之间也可以通过有线网络(Wirednetwork)或无线网络(wireless network)等网络连接。详细的网络类型参考上述描述,在此就不再一一赘述。
应理解的是,用户终端11上可以配置有信息采集装置,例如,信息采集装置可以用于采集环境中的用户特征信息,其中,信息采集装置可以为图像采集装置、声音采集装置等。在一些示例中,图像采集装置可以为摄像头,声音采集装置可以为听筒、麦克风等。另一些示例中,用户终端11上可以配置有用于定位用户终端11所处位置的定位系统,如全球定位系统(Global Positioning System,GPS)、中国北斗卫星导航系统(BeiDou NavigationSatellite System,BDS)。
在一些示例中,监测装置可以为可以为图像采集装置、声音采集装置等,其中,图像采集装置可以为摄像头,声音采集装置可以为听筒、麦克风等。监测装置可以与控制中心、屏幕终端和/或用户终端之间通过有线网络(Wired network)或无线网络(wirelessnetwork)等网络连接。详细的网络类型参考上述描述,在此就不再一一赘述。其中,监测装置集成或独立于屏幕终端,且监测装置与屏幕之间具有映射关系。对于映射关系,可以理解为:监测装置A对应着屏幕终端a,监测装置B对应着屏幕终端b。此外,当监测装置独立于屏幕终端时,监测装置可以设置于与屏幕终端所处位置相同或相对的墙体或支架等支撑物上。
下面介绍本申请实施例中一种终端的硬件结构示意图,其中,该终端为用户终端11和/或屏幕终端(例如屏幕终端13,14)。
图2示出了终端的硬件结构示意图。如图2所示,终端100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriberidentification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对终端100的具体限定。在本申请另一些实施例中,终端100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如,处理器110可以包括应用处理器(application processor,AP)、调制解调器(modem)、图形处理器(graphics processingunit,GPU)、图像信号处理器(image signal processor,ISP)、控制器、视频编解码器、数字信号处理器(digital signal processor,DSP)、基带处理器、和/或神经网络处理器(neural-network processing unit,NPU)等中的一项或多项。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
处理器110中还可以设置存储器,用于存储指令和数据。在一些示例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用,以避免重复存取,减少处理器110的等待时间,提高系统的效率。在一些示例中,处理器110可以用于解析摄像头193采集的图像数据,并分析图像中的用户特征信息(例如面部特征、姿态特征等),以及根据用户特征信息,识别和/或判断是否监测到目标用户或其他用户出现在屏幕终端的覆盖范围内;或者根据用户特征信息和/或图像数据中的用户的轮廓信息,判断用户是否在用户终端11或者屏幕终端的可视范围内等。
在一些示例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(PulseCodeModulation,PCM)接口,通用异步收发传输器(Universal Asynchronous Receiver/Transmitter,UART)接口,移动产业处理器接口(MobileIndustryProcessorInterface,MIPI),通用输入输出(General PurposeI/0Ports,GPIO),用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(UniversalSerialBus,USB)接口等。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的示例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的示例中,充电管理模块140可以通过终端100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为其他电子设备供电。
电源管理模块141用于连接电池142、充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110、内部存储器121、外部存储器、显示屏194、摄像头193和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量、电池循环次数、电池健康状态(漏电,阻抗)等参数。在其他一些示例中,电源管理模块141也可以设置于处理器110中。在另一些示例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
终端100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。终端100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些示例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在终端100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(lownoi se amp l ifier,LNA)等。移动通信模块150可以由包括天线1的至少两根天线接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调器进行解调。移动通信模块150还可以对经调制解调器调制后的信号放大,经天线1转为电磁波辐射出去。在一些示例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些示例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些示例中,调制解调器可以是独立的器件。在另一些示例中,调制解调器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。在另一些示例中,移动通信模块150可以是调制解调器中的模块。
无线通信模块160可以提供应用在终端100上的包括无线局域网(wireless localarea networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequencymodulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些示例中,终端100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得终端100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(code divisionmultiple access,CDMA),宽带码分多址(wideband code division multiple access,WCDMA),时分码分多址(time-division codedivision multiple access,TD-SCDMA),长期演进(long term evolution,LTE),第五代,新空口(new radio,NR),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidou navigation satellite system,BDS),准天顶卫星系统(quasi-zenithsatellite system,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
终端100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可以包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些示例中,终端100可以包括一个或多个显示屏194。
终端100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍摄时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些示例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频,例如,捕获用户的面部特征信息、姿态特征信息等。物体通镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(chargecoupled device,CCD)或互补金属氧化物半导体(ComplementaryMetalOxideSemiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些示例中,终端100可以包括一个或多个摄像头193。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当终端100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。终端100可以支持一种或多种视频编解码器。这样,终端100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展终端100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行终端100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储终端100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
终端100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些示例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。终端100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当终端100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。终端100可以设置至少一个麦克风170C。在另一些示例中,终端100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,终端100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
其中,压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些示例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。终端100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,终端100根据压力传感器180A检测所述触摸操作强度。终端100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些示例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定终端100的运动姿态。在一些示例中,可以通过陀螺仪传感器180B确定终端100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当使用终端100采集环境中的用户特征信息时,陀螺仪传感器180B检测终端100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消终端100的抖动,实现防抖。
气压传感器180C用于测量气压。在一些示例中,终端100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
加速度传感器180E可检测终端100在各个方向上(一般为三轴)加速度的大小。当终端100静止时可检测出重力的大小及方向。还可以用于识别终端的姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。终端100可以通过红外或激光测量距离。在一些示例中,当利用终端采集环境中用户的用户特征信息时,终端100可以利用距离传感器180F测距以实现快速对焦。
环境光传感器180L用于感知环境光亮度。终端100可以根据感知的环境光亮度自适应调节显示屏194亮度。
指纹传感器180H用于采集指纹。终端100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些示例中,终端100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,终端100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,终端100对电池142加热,以避免低温导致终端100异常关机。在其他一些实施例中,当温度低于又一阈值时,终端100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于终端100的表面,与显示屏194所处的位置不同。
按键190包括开机键,音量键,输入键盘等。按键190可以是机械按键。也可以是触摸式按键。终端100可以接收按键输入,产生与终端100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如视频播放,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
下面介绍本申请实施例中一种控制中心的硬件结构示意图。
图3示出了控制中心的硬件结构示意图。如图3所示,控制中心12可以包括处理器210、存储器220、无线通信模块230、收发器240、检测模块250、有线通信模块260、电源开关270等等。
处理器210可用于读取和执行计算机可读指令。具体实现中,处理器111可主要包括控制器、运算器和寄存器。其中,控制器主要负责指令译码,并为指令对应的操作发出控制信号。运算器主要负责保存指令执行过程中临时存放的寄存器操作数和中间操作结果等。在一些示例中,处理器210可以用于解析无线通信模块230和/或有线通信模块270接收到的信号,例如解析图像数据,得到图像,并分析图像中的用户特征信息(例如面部特征、姿态特征等),并根据用户特征信息,筛选出目标用户,之后再将监测到目标用户的监测装置所对应的屏幕终端选定为目标屏幕终端。在本申请实施例中,图像数据可以包括监测装置发送的视频数据。由于视频是由多帧图像组成,因此,视频数据也可以理解为图像数据。
处理器230可以用于根据监测装置发送的监测结果进行相应的处理操作,和/或转移用户终端上目标应用的实时运行数据。例如,将监测到目标用户的监测装置所对应的屏幕终端选定为目标屏幕终端,和/或将用户终端11上目标应用的实时运行数据转移至目标屏幕终端上。
存储器220与处理器210耦合,用于存储各种数据和/或多组指令。例如,存储预先采集的用户特征信息,存储安装的应用等。
无线通信模块230可以包括蓝牙模块231、Wi-Fi模块232。蓝牙模块231和/或Wi-Fi模块232可以与用户终端11以及屏幕终端13进行数据交互,例如,从用户终端11接收屏幕寻呼指示,从屏幕终端13接收视频数据。在具体实现时,蓝牙模块231可以提供包括经典蓝牙(例如蓝牙2.1)模块和/或蓝牙低功耗(bluetooth low energy,BLE)模块。Wi-Fi模块232可以包括Wi-Fi direct模块、Wi-Fi LAN模块或Wi-Fi softAP模块中一项或多项。在一些示例中,蓝牙模块231和/或Wi-Fi模块232可以发射信号,如广播蓝牙信号、信标信号等,使得其他设备(例如用户终端11和屏幕终端13)可以发现控制中心12,进行可以建立控制中心12与用户终端11以及屏幕终端13之间的无线通信连接,以进行数据交互。在一些示例中,控制中心12可以通过Wi-Fi模块232接入互联网,从而与互联网上的服务器(例如视频播放网站服务器)建立通信连接。在一些示例中,无线通信模块230还可以包括红外线通信模块(未示出)。红外线通信模块可以通过红外遥控技术与遥控器等设备进行通信。
收发器240用于进行数据接收和/或发送操作。例如,接收用户终端11和监测装置发送的数据,和/或,向用户终端11和屏幕终端13发送数据。
检测模块250用于检测用户终端11请求添加的应用是否适配至少一个屏幕终端,和/或,检测监测装置上用于监测用户的硬件是否出现故障等。例如,用户终端11请求添加的应用为WhatsApp,如果用户终端11请求的权限是转移语音,则检测模块250会自动检测已注册到控制中心12中的屏幕终端13的硬件信息,从而确定出屏幕终端13是否具有语音通话能力,其中,当屏幕终端13具有语音通话能力时,则表明WhatsApp适配至少一个屏幕终端。检测模块250还可以持续或间歇性通过收发器240向监测装置发送自检指令,之后根监测装置反馈的自检数据,得出监测装置上用于监测用户的硬件是否出现故障,例如,检测模块250发送一组或多组自检指令至监测装置,若监测装置能够正常运行自检指令,检测模块250则根据监测装置反馈的信息确定出监测装置上的用于监测用户的硬件未出现故障。
有线通信模块260可以包括USB模块261,使得控制中心12可以通过USB数据线和其他设备(例如用户终端11、屏幕终端13、监测装置等)进行通信。有线通信模块260还可以包括是高清晰多媒体接口(high definition multimedia interface,HDMI)(未示出)。控制中心12可以通过HDMI和机顶盒(set top box,STB)等设备进行通信。
电源开关270可用于控制电源向控制中心12的供电。
在一些示例中,用户终端11主要用于运行目标应用,以及在用户终端11确定出目标应用正在被使用,且用户终端11与目标用户分离时,向控制中心12发送屏幕寻呼指示,其中,屏幕寻呼指示为查找距离目标用户最近的屏幕终端的指示。
目标用户是指在与用户终端11分离前正在使用用户终端11的用户,或者开启用户终端11的用户,或者在智能家居系统内注册的用户等。举例来说,当用户终端11为手机时,则目标用户可以为在与手机分离前正在使用手机的用户;当用户终端11为智能电视时,则目标用户可以为开启智能电视的用户;当智能家居系统中注册的用户为用户A时,则用户A为目标用户。目标应用是指用户利用用户终端11或其他终端在控制中心12中添加的可在屏幕终端(例如屏幕终端13,14)上进行显示的应用,也可以理解为是在智能家居系统中注册的应用。其中,目标应用可以为视频点播应用,如YouTube、腾讯视频、爱奇艺视频等;也可以为社交应用,如Facebook、Twitter、WhatsApp、微信(WeChat)等;也可以为邮箱应用,如谷歌邮箱(gmail)、网易邮箱、华为邮箱等;也可以为视频会议软件应用,如ZOOM、华为云WeLink等;也可以为提醒事项等应用。
控制中心12主要用于控制和协调相关的设备和资源,初始化的时候读取相关设备的相关配置,自动监测相关的硬件资源,比如可以检测已经注册在线的监测装置(如摄像头等)是否运行正常。此外,还用于在接收到用户终端11发送的屏幕寻呼指示后,向一个或多个屏幕终端(例如屏幕终端13、14)发送寻呼请求,以及将用户终端11上目标用户正在使用的目标应用的实时运行数据转移至屏幕终端上。控制中心12可以理解为智能家居系统中的中控系统,通过此中控系统将用户家庭中的智能设备连接在一起。此外,控制中心12也可以理解为服务器,由此服务器将用户终端11和屏幕终端连接在一起。
屏幕终端(例如屏幕终端13、14)主要用于在接收到控制中心12转移的用户终端11上目标应用的实时运行数据,以及显示该实时运行数据,从而使得目标用户可以继续无缝衔接的使用目标应用。
监测装置主要用于在接收到控制中心12发送的寻呼请求后,根据寻呼请求,监测目标用户。例如,监测装置监测目标用户时,可以采集环境中用户的用户特征信息等,之后再根据采集到的用户特征信息判断该用户是否为目标用户。其中,用户特征信息包括面部特征信息、声音特征信息和姿态特征信息中的一项或多项。
应理解的是,以监测装置为例,其在监测目标用户时,可以由监测装置判断是否监测到目标用户,也可以由控制中心12根据监测装置发送的监测数据判断监测装置是否监测到目标用户。例如,若由监测装置判断是否监测到目标用户,则监测装置可以根据其采集到的用户特征信息对用户进行识别,当识别到目标用户时,则判断已监测到目标用户;若由控制中心12根据监测装置发送的监测数据判断监测装置是否监测到目标用户,则控制中心12可以根据监测数据中包含的监测装置采集到的用户的用户特征信息,对目标用户进行识别,进而判断监测装置是否监测到目标用户。其中,在对用户进行识别时,可以基于用户的面部特征信息、人体姿态特征信息、声纹特征信息等进行识别。
举例来说,当采用面部特征信息进行识别时,利用监测装置(如摄像机或摄像头等)采集含有人脸的图像或视频流,并自动在图像中检测和跟踪人脸,之后,监测装置可以直接或间接调用数据库15中预存储的用户的面部特征信息,并将实时采集的和预存储的面部特征信息进行比对辨识,当两者的相似度达到预设阈值时,就可以确定该监测装置监测到目标用户。
当采用人体姿态特征信息进行识别时,利用监测装置(如Kinect等)捕捉用户的人体姿态特征信息,之后,监测装置可以直接或间接调用数据库15中预存储的用户的人体姿态特征信息,并将实时采集的和预存储的人体姿态特征信息进行比对辨识,当两者的相似度达到预设阈值时,就可以确定该监测装置监测到目标用户。
当采用声纹特征信息进行识别时,利用监测装置(如麦克风等)采集用户的声音信息,并从采集到的声音信息中提取出声纹特征信息,之后,监测装置可以直接或间接调用数据库15中预存储的用户的声纹特征信息,并将提取的和预存储的声纹特征信息进行比对辨识,当两者的相似度达到预设阈值时,就可以确定该监测装置监测到目标用户。
此外,当识别出的目标用户为多个时,还可以根据识别到的不同目标用户的相似度,选取最终的目标用户,例如,以相似度最高的用户作为最终选取的目标用户。
应理解的是,用户终端11和屏幕终端(例如屏幕终端13,14)在注册到控制中心12中时,控制中心12将存储用户终端11、监测装置和屏幕终端(如屏幕终端13、14)的地址信息(如表一所示),以便于控制中心12搜寻屏幕终端,和/或便于控制中心12识别接收到的信息的来源。
表一
设备名称 | 设备地址 | 设备型号 |
用户设备11 | 192.168.253.1 | AC3205 |
屏幕终端13 | 192.168.253.3 | EZ210 |
屏幕终端14 | 192.168.253.3 | EZ210 |
监测装置20 | 192.168.253.9 | M24 |
为了更好地理解本申请实施例提供的技术方案,下面介绍本申请实施例的一个应用场景。图4示出了本申请实施例提供的智能家居系统的控制方法的一个应用场景示意图。如图4A所示,在第一时间段(如晚上8点至9点),用户A(即图中的人形图画标记)位于客厅中,并使用用户终端11上的应用Whatsapp进行语音通话。如图4B所示,在第二时间段(如晚上9点至10点),用户A由客厅移步至卧室中,且用户A将用户终端11遗留在客厅中。其中,在客厅中布置有控制中心12,在卧室和厨房中分别布置有屏幕终端13和14,其中,屏幕终端13和14上均集成有至少一个监测装置(如摄像头)。
在第二时间段内,由于用户A和用户终端11是分离的,这就导致用户A将难以继续使用用户终端11上的应用Whatsapp进行语音通话。目前,人们一般利用其它位置处的智能控制终端(如卧室中的屏幕终端13)重新启动应用Whatsapp,并进行相应的操控,这样虽然用户A可以延续语音通话,但由于整个延续过程操作繁琐,耗时长,因此,无法在不同的终端上做到无缝衔接的操控,致使智能家居系统的智能化程度低,用户体验差。
而本申请实施例中,在用户A和用户终端11分离的第二时间段内,用户终端11向智能家居系统中的控制中心12发送应用Whatsapp的屏幕寻呼指示;之后控制中心12根据屏幕寻呼指示,向家庭中多个的屏幕终端(如屏幕终端13、14)上的监测装置发送寻呼请求;监测装置接收到寻呼请求后,监测装置则采集环境中用户的用户特征信息,以监测到用户A;之后,当控制中心12或者监测装置根据用户特征信息识别到用户A时,控制中心12则将用户终端11上应用Whatsapp进行语音通话的数据转移至监测到用户A的监测装置所对应的目标屏幕终端(如卧室中的屏幕终端13)上,从而使得用户A能够无缝衔接的继续使用应用Whatsapp进行语音通话,摆脱了手机等终端的束缚,使得用户A享受到了智能家居系统带来的便捷,提升了智能家居系统的智能化程度。其中,目标屏幕终端是指监测到用户A的监测装置所对应的的屏幕终端。由于厨房中的屏幕终端14上的监测装置未采集到用户A的用户特征信息,因此,控制中心12不会向屏幕终端14进行语音通话的数据的转移。
下面基于图1所示的系统架构、图2所示的终端的硬件结构、图3所示的控制中心的硬件结构和图4所示的一个应用场景,并结合附图对本申请实施例提供的技术方案进行详细说明。
本申请实施例中,用户可以预先指定某个应用(如Youtube)作为目标应用,以便于用户自主选择,提升用户体验。图5示出了添加目标应用的流程示意图。如图5所示,添加目标应用包括以下步骤:
步骤501,用户终端接收目标用户发送的注册请求。
目标用户可以在用户终端上打开智能家居系统的客户端或者网页端,之后,通过其自行注册的账户自主选择在控制中心中添加目标应用目标用户。当目标用户选择添加目标应用时,用户终端则接收到注册请求,其中,注册请求用于请求在目标屏幕终端显示目标应用的实时运行数据。
举例来说,如图6A所示,目标用户在用户终端上利用其用户名和密码登录智能家居系统的客户端;之后,登录成功,如图6B所示,目标用户可以点击添加按键,然后,从子菜单中选择添加WhatsApp;之后,用户终端则接收到目标用户的注册请求。
在一些示例中,目标用户可以选择在屏幕终端上显示目标应用的相关权限,以增大用户的自主选择权,提升用户体验。例如,目标应用为WhatsApp时,目标用户可以选择音频权限和视频权限等。
步骤502,用户终端将注册请求发送至控制中心。
步骤503,控制中心接收注册请求,检测目标应用是否适配至少一个屏幕终端。
当某个设备(如屏幕终端13)加入到智能家居系统中后,该设备则将其自身的硬件信息发送至控制中心,并由控制中心进行存储,这样控制中心就获知到该设备的硬件信息。之后,控制中心接收到注册请求,则根据目标应用的类型和/或目标用户选择的相关权限,在其存储的信息中进行匹配;当匹配成功时,确定目标应用适配至少一个屏幕终端,此时,则将目标应用添加至注册列表中;当匹配失败时,确定目标应用不能适配至少一个屏幕终端,此时则向用户终端发送提示信息,以使用户终端对发起注册请求的用户进行提醒,进而使目标用户重新进行选择。
举例来说,目标应用为WhatsApp,且目标用户选择的权限为音频通话;若控制中心存储的信息中包含具有音频通话功能的终端信息,则确定WhatsApp适配至少一个屏幕终端。
在一些示例中,控制中心确定出目标应用适配至少一个屏幕终端后,控制中心可以建立目标应用和相应的屏幕终端所对应的监测装置之间的关联关系,以便于控制中心根据目标应用向与目标应用具有关联关系的监测装置精准发送寻呼请求,提升处理效率。其中,相应的屏幕终端是指适配目标应用所需硬件的屏幕终端。
步骤504,控制中心向用户终端反馈添加成功或失败的提示信息。
步骤505,用户终端根据提示信息向目标用户发出提示。
若控制中心反馈的提示信息为添加成功,用户终端则向目标用户发出添加成功的提示;若控制中心反馈的提示信息为添加失败,用户终端则向目标用户发出添加失败的提示。用户终端可以在其用户界面上显示“添加成功”或“添加失败”的文字信息;也可以在其用户界面上显示“添加成功”或“添加失败”的图形信息,如图7A所示,添加成功时,可以显示笑脸图形,如图7B所示,添加失败时,可以显示哭脸图形。
在一些示例中,若控制中心检测到需要添加的目标应用适配至少一个屏幕终端,控制中心则在将目标应用添加到注册列表中后,可以利用网络下载并安装目标应用,以便于在控制中心中运行目标应用。此外,适配目标应用的屏幕终端也可以利用网络下载并安装目标应用,以便于该屏幕终端可以自行运行目标应用。
目标用户成功添加目标应用后,控制中心就可以基于目标用户使用用户终端的情况,将用户终端上目标应用的实时运行数据转移至目标屏幕终端上,详见下文描述。
图8是本申请实施例提供的一种智能家居系统的控制方法的通信示意图。如图8所示,本申请提供的智能家居系统的控制方法,包括以下步骤:
步骤801,用户终端识别满足屏幕寻呼的触发条件。
目标用户或者其他用户可以在用户终端上登录智能家居系统的客户端或网页端,之后,在智能家居系统的客户端或网页端中预先设置屏幕寻呼的触发条件。举例来说,以在智能家居系统的客户端上设置为例,如图9A所示,用户点击“设置”的虚拟按键;之后,如图9B所示,用户可以从设置的子菜单中选择触发条件,然后从触发条件的子菜单中选择一个或多个触发条件,如,选取手动触发和/或自动触发。当达到触发条件时,用户终端就可以确定出当前已满足屏幕寻呼的触发条件。
在一些示例中,为提升操控的便利性,触发条件为手动触发,目标用户这时在用户终端上设置有实体按键和/或虚拟按键,目标用户可以通过按压实体按键和/或虚拟按键以下发开启屏幕寻呼的指示,之后,用户终端就可以确定出当前已满足屏幕寻呼的触发条件。例如,如图10所示,用户终端的用户界面上设置有“开启屏幕寻呼”的虚拟按键,当目标用户使用用户终端进行语音通话时,若目标用户按压虚拟按键,用户终端则识别出当前已满足屏幕寻呼的触发条件。
应理解的是,当用户终端可被其他设备(如遥控器等终端)控制时,目标用户也可以通过其他设备向用户终端下发开启屏幕寻呼的指示。
在一些示例中,为提升智能家居系统的智能化程度,触发条件为自动触发,这时若用户终端自主识别出其与目标用户处于分离状态的情形,用户终端就可以识别出当前已满足屏幕寻呼的触发条件。其中,用户终端自主识别出其与目标用户处于分离状态的情形,包括:
第一、用户终端检测到目标用户未处于用户终端的可视范围内。例如,如图11所示,用户终端为智能电视,智能电视上摄像头3的拍摄角度β为90度角,当目标用户处于区域一时,摄像头3能够采集到目标用户的用户特征信息,此时智能电视可以检测出目标用户处于其可视范围内;当目标用户处于区域二时,摄像头3不能够采集到目标用户的用户特征信息,此时智能电视可以检测出目标用户未处于其可视范围内。此外,若用户终端上的摄像头等图像采集装置未采集到面部、头部等轮廓信息,用户终端也可确定在其可视范围内未检测到目标用户,具体可根据实际情况而定,在此不做限定。
此外,由于存在目标用户在用户终端的可视范围和不可视范围间来回走动的现象,因此,为了提升控制的精准度,还可以设定用户终端在其可视范围内未检测到目标用户的时长,当该时长达到第一预设时长后,则用户终端就可以检测出其与目标用户处于分离状态。
第二、用户终端检测到目标应用处于激活状态的时长达到第二预设时长。例如,用户终端为手机,手机接收到新的通讯请求(如通话请求)时,若新的通讯请求时长达到第二预设时长(如30秒钟),则可以手机可以检测出目标用户未在附近,此时手机就可以检测到其与目标用户处于分离状态。
应理解的是,用户终端在自主确定出其是否与目标用户处于分离状态时,可以确定其上的目标应用正处于激活状态,以提升控制的准确度,避免不必要的屏幕寻呼,节省资源。例如,目标应用为Youtube,在Youtube处于激活状态(即被开启)时,用户终端才会确定其是否与目标用户处于分离状态,之后,再确定是否需要向控制中心发送屏幕寻呼指示。
在一些示例中,为了便于控制中心快速识别到消息的来源,在屏幕寻呼指示中除了添加指示操作码外,还可以添加用户终端的地址码。
此外,屏幕寻呼指示中除了包括屏幕寻呼的操作码外,还包括目标应用的运行状态信息,以便于控制中心能够根据目标应用的运行状态信息,将目标应用的实时运行数据转移至屏幕终端。本申请实施例中,目标应用的运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。其中,当目标应用为Youtube等视频点播应用时,实时运行数据可以理解为目标用户正在观看的视频内容;当目标应用为WhatsApp等远程通话应用时,实时运行数据可以理解为与目标用户正在进行沟通的其他用户的身份信息(例如账号信息)等;当目标应用为Gmai l等邮箱类应用时,实时运行数据可以理解为目标用户的邮箱中的内容,具体可根据实际情况而定,在此不做限定。
在一些示例中,由于智能家居系统往往需要在目标环境中运行,因此,本申请实施例中,用户终端在识别满足屏幕寻呼的触发条件之前,用户终端还可以识别其是否处于目标环境中,其中,目标环境包括居家环境、办公环境等。例如,用户终端可以利用其上的定位装置进行定位,当定位到用户所在的居住小区时,则可以确定用户终端处于居家环境中。此外,为了提升判断的准确度,用户终端还可以利用其上的摄像头等装置,对其所处环境进行扫描拍摄;之后,再对扫描拍摄的环境图像信息进行分析处理,以识别出其是否处于目标环境中。
步骤802,用户终端向控制中心发送屏幕寻呼指示。
在一些示例中,屏幕寻呼的目的是查找距离目标用户最近的屏幕终端。
步骤803,控制中心接收用户终端发送的屏幕寻呼指示。
步骤804,控制中心根据屏幕寻呼指示,向至少一个监测装置发送寻呼请求。
控制中心接收到用户终端发送的屏幕寻呼指示后,将响应屏幕寻呼指示,向至少一个监测装置发送寻呼请求,以使至少一个监测装置监测目标用户,其中,监测装置与屏幕终端之间具有映射关系。其中,控制中心可以使用广播的方式发送寻呼请求。
应理解的是,在寻呼请求中除了添加请求操作码外,还可以添加监测装置的地址码,以便于控制中心精准的将寻呼请求发送至监测装置。
步骤805,监测装置接收控制中心发送的寻呼请求。
步骤806,监测装置根据寻呼请求,监测目标用户。
监测装置接收到控制中心发送的寻呼请求后,开始监测目标用户。例如,监测装置采集其所覆盖的范围内的用户的用户特征信息。
应理解的是,若监测装置为多个,多个监测装置可以同时或分时进行用户监测。当分时进行用户监测时,监测装置可以利用其上的距离探测单元等确定是否探测到物体,当探测到物体时,则开始进行监测,从而避免不必要的监测,降低智能家居系统的能耗。
步骤807,监测装置将监测数据发送至控制中心。
在一些示例中,监测数据中包括至少一个监测装置采集到的用户的用户特征信息;或者包括至少一个监测装置的监测结果,监测结果用于指示监测装置是否监测到目标用户。其中,监测结果由监测装置基于其采集到的用户特征信息所得。
步骤808,控制中心接收监测装置发送的监测数据。
步骤809,控制中心根据监测数据,从至少一个屏幕终端中选定目标屏幕终端。
在一些示例中,若监测数据中包括监测装置采集到的用户的用户特征信息,则控制中心可以根据接收到的用户特征信息,从至少一个监测装置所监测到的用户中筛选目标用户;之后,根据筛选结果,将监测到目标用户的监测装置作为第一监测装置;然后,再根据监测装置与屏幕终端之间的映射关系,利用第一监测装置,从至少一个屏幕终端中选定目标屏幕终端。其中,目标屏幕终端指第一监测装置对应的屏幕终端,第一监测装置指监测到目标用户的监测装置。例如,控制中心可以根据监测装置A发送的用户特征信息,判断该用户特征信息是否是目标用户的用户特征信息,若是,则确定监测装置A监测到了目标用户,此时,就可以将监测装置A作为第一监测装置;之后,在利用第一监测装置检索监测装置与屏幕终端之间的映射关系,进而得出与第一监测装置相对应的屏幕终端,并将该屏幕终端选定为目标屏幕终端。
在一些示例中,若监测数据中包括监测装置的监测结果,则控制中心可以根据监测结果,将监测到目标用户的监测装置所对应的屏幕终端选定为目标屏幕终端。例如,控制中心分别接收到监测装置A和监测装置B发送的监测结果,若监测装置A发送的监测结果表明其监测到目标用户,而监测装置B发送的监测结果表明其未监测到目标用户,则控制中心就可以将监测装置A所对应的屏幕终端选定为目标屏幕终端。
在一些示例中,当经用户终端或其他终端注册到控制中心中的目标用户为多个时,监测到目标用户的监测装置可能为多个,这就使得控制中心确定出的目标屏幕终端可能为多个。此时控制中心可以基于预先存储的目标用户的优先级,得到每个监测到目标用户的监测装置的优先级;之后,选取优先级最高的监测装置多对应的屏幕终端作为目标屏幕终端,以避免出现误转移目标应用的实时运行数据的情况。例如,如图12所示,目标用户包括用户A和用户B,其中,用户A的优先级高于用户B的优先级,屏幕终端包括第一屏幕终端和第二屏幕终端,两个屏幕终端中均集成有监测装置;若第一屏幕终端中的监测装置监测到用户A,第二屏幕终端中的监测装置监测到用户B,则两者均可作为目标屏幕终端;但由于用户A的优先级高于用户B的优先级,所以第一屏幕终端中的监测装置的优先级高于第二屏幕终端中的监测装置的优先级;因此,此时,控制中心将第一屏幕终端作为最终确定出的目标屏幕终端。其中,图中虚线表示屏幕终端中监测装置的可视范围区间。
在一些示例中,若多个监测装置同时监测到同一个目标用户,这就使得控制中心确定出的目标屏幕终端也为多个。此时控制中心可以基于目标用户与每个监测装置之间的距离,得出与目标用户距离最近的监测装置,并将该监测装置所对应的屏幕终端选定为最终确定的目标屏幕终端,以便于目标用户进行操控和/或观测。例如,如图13所示,目标用户为用户A,屏幕终端包括第一屏幕终端和第二屏幕终端;若第一屏幕终端和第二屏幕终端同时监测到用户A,则控制中心可以将两者均作为目标屏幕终端,两个屏幕终端中均集成有监测装置;但由于用户A与第二屏幕终端中的监测装置之间的距离最近,因此,此时为了便于用户A操控和/或观测,控制中心则将第二屏幕终端选定为最终确定出的目标屏幕终端。其中,图中虚线表示监测装置的可视范围区间。
应理解的是,对于监测装置与目标用户之间的距离,可由监测装置或者其他位置(如屏幕终端等)上的距离探测单元进行确定,其中,距离探测单元可以为雷达测距传感器、超声波测距传感器、激光测距传感器等。此外,监测装置也可对其采集到的视频数据或图像数据进行分析处理,以确定出其与目标用户之间的距离;或者监测装置将采集到的信息发送至其他设备(如用户终端、控制中心、屏幕终端等),由其他设备基于监测装置采集到的信息,确定出该监测装置与目标用户之间的距离。
步骤810,控制中心基于接收到的用户终端发送的目标应用的运行状态信息,将目标应用的实时运行数据转移至目标屏幕终端进行显示。
控制中心确定出目标屏幕终端后,基于接收到的用户终端发送的目标应用的运行状态信息,将目标应用的实时运行数据转移至该目标屏幕终端上。其中,目标应用的运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。
在一些示例中,若屏幕寻呼指示中携带有目标应用的运行状态信息,其中,运行状态信息包括目标应用的标识和进程,控制中心则可以根据目标应用的运行状态信息,启动其系统中已安装的虚拟/实体的目标应用;之后,再将控制中心中目标应用的应用进程调整至与运行状态信息中的应用进程一致。之后,控制中心再将其上目标应用的实时运行数据发送到目标屏幕终端进行显示,从而实现了将用户终端上目标应用的实时运行数据转移至目标屏幕终端。
在一些示例中,若屏幕寻呼指示中未携带有目标应用的运行状态信息,控制中心则在确定出目标屏幕终端后,向用户终端进行反馈其已选定的目标屏幕终端的信息;之后,用户终端接收到反馈后,再将目标应用的运行状态信息发送至控制中心。之后,控制中心在以上述所描述的转移方式,将用户终端上目标应用的实时运行数据转移至目标屏幕终端。
在一些示例中,若目标应用的运行状态信息包括目标应用的实时运行数据,则控制中心可以作为中转站,其在接收到包含有目标应用的实时运行数据的运行状态信息后,直接将实时运行数据转发至目标屏幕终端,以在目标屏幕终端上进行显示。例如,当目标应用为Youtube等视频点播类应用时,用户终端可以将目标应用上的视频流文件发送至控制中心,之后,控制中心再转发至目标屏幕终端,从而使得目标屏幕终端能够显示视频流文件中的实时内容。
步骤811,目标屏幕终端接收控制中心转移的目标应用的实时运行数据,以及显示实时运行数据。
目标屏幕终端接收控制中心转移的目标应用的实时运行数据,以及显示实时运行数据,从而使得目标用户能够无缝衔接的继续使用目标应用,帮助目标用户摆脱了手机等终端的束缚,使得目标用户享受到了智能家居系统带来的便捷,提升了智能家居系统的智能化程度。
需要说明的是,由于存在目标用户持续走动的情况,因此,为了使目标用户由已确定出的目标屏幕终端的位置移动至其他屏幕终端的位置处时,目标用户也能够继续使用目标应用,在本申请实施例中,用户终端发出的屏幕寻呼指示可以持续有效,直至用户终端确定其不在与目标用户分离时为止。和/或,当已确定出的目标屏幕终端所对应的监测装置监测不到目标用户时,该监测装置将会反馈至控制中心;之后,由控制中心重新发送寻呼请求,以使至少一个监测装置重新监测目标用户。和/或,当其他监测装置监测到目标用户时,其他监测装置将反馈至控制中心,之后,控制中心再将该监测装置所对应的屏幕终端作为目标屏幕终端,并将目标应用的实时运行数据转移至重新确定出的目标屏幕终端上。
此外,本申请实施例中,用户终端和控制中心之间可以共享内核,以便于控制中心将用户终端上目标应用的实时运行数据转移至目标屏幕终端。
在一些示例中,用户终端在确定其是否满足屏幕寻呼的触发条件时,由于不同的应用具有不同的运行条件,而不同的运行条件往往对应着不同的触发条件,因此,本申请实施例中,用户终端在确定满足屏幕寻呼的触发条件之前,可以先确定与目标应用相对应的触发条件,以提升控制的准确度,以及提升智能家居系统的智能化程度。其中,图14示出了确定与目标应用相对应的触发条件的步骤示意图,如图14所示,具体包括以下步骤:
步骤1401,用户终端获取目标应用的类型。
目标用户将目标应用下载并安装至用户终端上后,用户终端可以根据其解析目标应用的安装包过程中,获取到的目标应用的程序名,确定出该目标应用的类型;其中,目标应用的类型包括视频类型、社交类型、通话类型等。例如,当目标应用的名称为腾讯视频时,用户终端可以确定出目标应用的类型为视频类型。
进一步地,在确定出目标应用的类型后,用户终端则将目标应用的类型进行存储,以便于后期获取目标应用的类型;以及建立目标应用的类型与触发条件之间的关联关系,并进行存储。例如,当目标应用的类型为视频类型时,其触发条件可以为用户终端在其可视范围内未检测到目标用户;当目标应用的类型为通话类型时,其触发条件可以为用户终端确定目标应用处于激活状态的时长达到第一预设时长。
步骤1402,用户终端根据类型,选取与类型相关联的触发条件。
用户终端获取到目标应用的类型后,查询建立的目标应用的类型与触发条件之间的关联关系,就可以选取出与目标应用的类型相关联的触发条件。
在一些示例中,控制中心根据接收到的用户特征信息,从至少一个所述监测装置所监测到的用户中筛选目标用户时,可以将用户特征信息与目标用户的用户特征信息进行比对进行筛选。
作为一种可能的实现方式,图15示出了一种控制中心基于用户特征信息筛选目标用户的步骤示意图,如图15所示,具体包括以下步骤:
步骤1501,获取预存储的用户的第一特征信息。
在控制中心中预先存储有用户的第一特征信息,因此,控制中心可以直接调取第一特征信息,其中,第一特征信息中包括目标用户的特征信息。
步骤1502,将用户特征信息与第一特征信息进行比对。
控制中心可以将用户特征信息与第一特征信息进行比对,其中,用户特征信息的类型与第一特征信息的类型相同。
步骤1503,判断是否比对成功。
控制中心可以比对出用户特征信息与第一特征信息之间的相似度;之后,控制中心可以基于比对出的相似度,判断是否比对成功,其中,若比对成功,则执行步骤1504,否则,则执行步骤1505。例如,若相似度大于预设相似度阈值,则可以判断比对成功;否则,则判断比对失败。
步骤1504,筛选到目标用户。
步骤1505,未筛选到目标用户。
作为另一种可能的实现方式,图16示出了另一种控制中心基于用户特征信息筛选目标用户的步骤示意图,如图16所示,具体包括以下步骤:
步骤1601,接收用户终端发送的用户的第二特征信息。
控制中心接收到用户终端发送的用户的第二特征信息,第二特征信息中包括目标用户的特征信息。其中,第二特征信息为用户终端采集的在预设时间内使用用户终端的用户的特征信息,例如,第二特征信息可以在发送屏幕寻呼指示前采集。可选地,第二特征信息可以被携带于屏幕寻呼指示中,也可以由用户终端在其他时间段发送。
步骤1602,将用户特征信息与第二特征信息进行比对。
控制中心可以将用户特征信息与第二特征信息进行比对;其中,第二特征信息的类型与用户特征信息的类型相同。
步骤1603,判断是否比对成功。
控制中心可以比对出用户特征信息与第二特征信息之间的相似度;之后,控制中心可以基于比对出的相似度,判断是否比对成功,其中,若比对成功,则执行步骤1604,否则,则执行步骤1605。例如,若相似度大于预设相似度阈值,则可以判断比对成功;否则,则判断比对失败。
步骤1604,筛选到目标用户。
步骤1605,未筛选到目标用户。
需说明的是,监测装置在基于其采集到的用户特征信息得到监测结果时,可参考步骤1501-1505或者1601-1605步骤中的处理过程,在此就不再一一赘述。
此外,监测装置获取比对所需的特征信息的方式,可以分为以下几种情况,详见下述描述:
情况一,控制中心在发送寻呼请求时,可以将预存储的用户的第一特征信息和/或其接收到的用户终端在发送第二特征信息、发送给监测装置,这样监测装置就可以在接收到寻呼请求的同时,获取到第一特征信息和/或第二特征信息。
情况二,监测装置可以主动向控制中心发出请求,以请求控制中心向其发送第一特征信息和/或第二特征信息。
情况三,当用户终端与监测装置之间可以直接进行通信时,监测装置可以主动向用户终端发出请求,以请求用户终端直接向监测装置发送用户的特征信息(以下称为第三特征信息);或者,用户终端自动直接向监测装置发送第三特征信息。应理解的是,第二特征信息和第三特征信息均可以理解为同一信息,两者均是用户终端在发送屏幕寻呼指示前所采集,且均包括有目标用户的用户特征信息,此处仅是为了便于描述,才采用第二和第三进行区分。
应理解的是,第一特征信息和/或第二特征信息可以存储于控制中心中,也可以存储于数据库中。当存储于数据库中时,控制中心可以与数据库进行通信,以调用第一特征信息和/或第二特征信息。
在一些示例中,控制中心在将用户终端上目标应用的实时运行数据转移至目标屏幕终端之前,还可以询问目标屏幕终端是否同意转移。其中,图17示出了控制中心询问目标屏幕终端的通信示意图,如图17所示,具体包括以下步骤:
步骤1701,控制中心向目标屏幕终端发送确认指令。
步骤1702,目标屏幕终端接收确认指令,以及显示转移提示信息。
目标屏幕终端接收到确认指令,则在其屏幕上显示出转移提示信息,以供目标用户进行选择,其中,该转移提示信息用于提示是否将实时运行数据转移至目标屏幕终端。
步骤1703,目标屏幕终端接收目标用户下发的第一确认信息,第一确认信息用于指示将实时运行数据转移至目标屏幕终端。
步骤1704,目标屏幕终端将第一确认消息反馈至控制中心。
步骤1705,控制中心接收到第一确认消息。
也就是说,控制中心需要向目标屏幕终端发送是否转移用户终端上目标应用的实时运行数据的确认指令,目标屏幕终端接收到确认指令之后,向目标用户展示出转移提示信息,例如,如图18所示,目标屏幕可以在其显示屏上进行显示是否同意转移的信息,也可以通过利用语音信息进行显示。继续参考图18,当目标用户利用目标屏幕终端上的虚拟按键或实体按键(即图中的“是”或“否”),确认执行转移操作时,目标屏幕终端则将第一确认信息反馈至控制中心;或者,当目标用户用语音下发确认执行转移操作时,目标屏幕终端则将第一确认信息反馈至控制中心。之后,控制中心确认接收到第一确认信息后,则开始将用户终端上的目标应用的实时运行数据转移至目标屏幕终端上。
应理解的是,当目标用户禁止执行转移操作时,控制中心则不在对用户终端上目标应用的实时运行数据进行转移。
为便于理解,下面举例对本申请实施例中提供的智能家居系统的控制方法进行解释说明。
第一种情况,如图19A所示,当目标应用为语音通话类应用,且用户A正在使用位于第一区域的手机(即用户终端)进行语音通话时,若在9点至9点10分之间用户A离开第一区域并移动至第二区域,手机可以确定其与用户A处于分离状态。之后,手机向位于第四区域的控制中心发送屏幕寻呼指示;然后,控制中心分别向位于第二区域和第三区域中集成于屏幕终端上的监测装置发送寻呼请求。之后,第二区域和第三区域中集成于屏幕终端上的监测装置监测用户A;由于用户A处于第二区域中,因此,第二区域中集成于屏幕终端上的监测装置会监测到用户A,而第三区域中集成于屏幕终端上的监测装置不会监测到用户A;然后,两个屏幕终端上的监测装置均将监测结果反馈至控制中心中。之后,控制中心将是否进行转移操作的确认指令发送至第二区域中的屏幕终端上,在用户A确认进行转移操作后,控制中心则将第一区域的手机上的语音通话转移至第二区域中的屏幕终端上,从而使得用户A在第二区域中也能够继续进行语音通话。
进一步地,如图19B所示,在9点10分以后,用户A从第二区域移步至第三区域。当用户A处于第三区域时,第三区域中集成于屏幕终端上的监测装置会监测到用户A,而第二区域中集成于屏幕终端上的监测装置将不会再监测到用户A。之后,控制中心接收到两个屏幕终端上的监测装置的反馈后,控制中心则将第一区域的手机上的语音通话转移至第三区域中的屏幕终端上,从而使得用户A在第三区域中也能够继续进行语音通话。
第二种情况,如图20所示,当目标应用为邮箱类应用,且此时位于第一区域的平板电脑(即用户终端)接收到新的邮件时,若接收到新邮件的时长超过了2分钟,但仍未被查看,则平板电脑可以确定其与用户A处于分离状态。之后,平板电脑向位于第四区域的控制中心发送屏幕寻呼指示;然后,控制中心分别向位于第二区域和第三区域中集成于屏幕终端上的监测装置发送寻呼请求。之后,第二区域和第三区域中集成于屏幕终端上的监测装置监测目标用户;由于用户A处于第二区域中,因此,第二区域中集成于屏幕终端上的监测装置会监测到用户A,而第三区域中集成于屏幕终端上的监测装置不会监测到用户A;然后,两个屏幕终端上的监测装置均将监测结果反馈至控制中心中。之后,控制中心将是否进行转移操作的确认指令发送至第二区域中的屏幕终端上,在用户A确认进行转移操作后,控制中心则将第一区域的平板电脑上的新邮件的内容转移至第二区域中的屏幕终端上,从而使得用户A在第二区域中也能够查看到新邮件的内容。
应理解的是,对于其他类型的应用,可参考上述两种情况中的描述,在此就不再一一赘述。
本申请提供的智能家居系统的控制方法,在用户离开用户终端并转移至其他区域时,控制中心可以将用户终端上目标应用的实时运行数据转移至用户所在区域的屏幕终端上,从而使得用户能够无缝衔接的继续使用目标应用,帮助用户摆脱了手机等终端的束缚。
下面介绍本申请实施例提供的又一种智能家居系统的控制方法。
图21是本申请实施例提供的又一种智能家居系统的控制方法的通信示意图。如图21所示,本申请提供的智能家居系统的控制方法,包括以下步骤:
步骤2101,用户终端识别满足屏幕寻呼的触发条件。
步骤2102,用户终端向控制中心发送屏幕寻呼指示。
步骤2103,控制中心接收用户终端发送的屏幕寻呼指示。
步骤2104,控制中心向至少一个监测装置发送自检指令。
控制中心可以实时或间歇性向至少一个监测装置发送自检指令,以使至少一个监测装置进行自检。
步骤2105,监测装置接收自检指令,并检测其上的目标硬件是否出现故障。
步骤2106,监测装置将自检数据反馈至控制中心。
步骤2107,控制中心接收自检数据,并由自检数据得出至少一个监测装置上的目标硬件出现故障。
控制中心若由自检数据得出某个监测装置上的目标硬件不能正常工作,则控制中心可确定该监测装置上的目标硬件出现故障。其中,目标硬件用于监测目标用户。
由于有监测装置不能正常监测目标用户,但目标用户有可能正好处于目标硬件出现故障的监测装置的覆盖范围,这就导致监测装置将无法正常监测到目标用户。因此,此时为了使目标用户也能够无缝衔接的使用用户终端上目标应用的实时运行数据,控制中心则以广播或其他方式向至少一个屏幕终端发送寻呼请求,其中,寻呼请求用于使屏幕终端上显示转移提示信息,转移提示信息用于提示是否将用户终端上目标应用的实时运行数据转移至屏幕终端,即执行步骤2108。
步骤2108,控制中心根据屏幕寻呼指示,向至少一个屏幕终端发送寻呼请求。
步骤2109,屏幕终端接收寻呼请求,以及显示转移提示信息。
步骤2110,屏幕终端接收用户下发的确认转移信息。
在一些示例中,若屏幕终端接收到用户下发的确认转移信息,则该屏幕终端可以确定用户出现在其覆盖范围内。若屏幕终端未接收到用户下发的确认转移信息,则该屏幕终端可以确定用户未出现在其覆盖范围内,此时屏幕终端可以选择不向控制中心进行反馈,具体可根据情况而定,在此不做限定。
步骤2111,屏幕终端向控制中心反馈第二确认信息,其中,第二确认信息用于指示将实时运行数据转移至该屏幕终端
步骤2112,控制中心接收第二确认信息,以及将反馈第二确认消息的屏幕终端选定为目标屏幕终端。
控制中心接收到屏幕终端反馈的第二确认信息后,则将反馈第二确认信息的屏幕终端选定为目标屏幕终端。
步骤2113,控制中心将用户终端上目标应用的实时运行数据转移至目标屏幕终端。
步骤2114,目标屏幕终端接收控制中心转移的用户终端上目标应用的实时运行数据,以及显示实时运行数据。
本申请提供的智能家居系统的控制方法,用户终端确定出其与目标用户分离时,发起目标应用的屏幕寻呼的指示;之后,控制中心确定出至少一个监测装置的目标硬件出现故障时,控制中心向至少一个屏幕终端发送用于指示是否转移用户终端上目标应用的实时运行数据的寻呼请求;然后,控制中心在将用户终端上目标应用的实时运行数据转移至反馈确认转移信息的屏幕终端上,从而使得在监测装置上目标硬件出现故障而无法监测目标用户时,目标用户也能够无缝衔接的继续使用目标应用,帮助目标用户摆脱了手机等终端的束缚,使得目标用户享受到了智能家居系统带来的便捷,提升了智能家居系统的智能化程度。
需说明的是,本申请提供的实施例中,在将用户终端上目标应用的实时运行数据转移至目标屏幕终端的过程中,除了借助控制中心转移之外,用户终端还可以直接将目标应用的运行状态信息发送至目标屏幕终端上,以使目标屏幕终端显示目标应用的实时运行数据,其中,运行状态信息包括目标应用的实时运行数据、和/或目标应用的标识和进程。此时,控制中心在选定目标屏幕终端后,则将目标屏幕终端的信息反馈至用户终端;之后,用户终端接收到目标屏幕终端的信息,并将目标应用的运行状态信息发送至目标屏幕终端,以在目标屏幕终端上显示目标应用的实时运行数据。
其中,当目标应用的运行状态信息包括目标应用的标识和进程时,目标屏幕终端则可以根据目标应用的运行状态信息,启动其系统中已安装的虚拟/实体的目标应用;之后,目标屏幕终端再将其上目标应用的应用进程调整至与运行状态信息中的应用进程一致,目标屏幕终端上即可以显示目标应用的实时运行数据,从而实现了将用户终端上目标应用的实时运行数据转移至目标屏幕终端。
当目标应用的运行状态信息包括目标应用的实时运行数据时,目标屏幕终端则可以直接显示目标应用的实时运行数据。例如,当目标应用为Youtube等视频点播类应用时,用户终端可以将目标应用上的视频流文件发送至至目标屏幕终端,从而使得目标屏幕终端能够显示视频流文件中的实时内容。
下面介绍本申请实施例提供的一种智能家居系统的控制装置。
图22是本申请实施例提供的一种智能家居系统的控制装置的结构示意图。如图22所示,本申请提供的智能家居系统的控制装置,该控制装置可用于实现上述方法实施例中描述的控制中心执行的控制方法、用户终端执行的控制方法、监测装置执行的控制方法和屏幕终端执行的控制方法。
该控制装置包括至少一个处理器2201,该至少一个处理器2201可支持控制装置实现本申请实施例中所述的控制中心执行的控制方法、用户终端执行的控制方法、监测装置执行的控制方法和屏幕终端执行的控制方法。
该处理器2201可以是通用处理器或者专用处理器。例如,处理器2201可以包括中央处理器(central processing unit,CPU)和/或基带处理器。其中,基带处理器可以用于处理通信数据(例如,确定目标屏幕终端),CPU可以用于实现相应的控制和处理功能,执行软件程序,处理软件程序的数据。
进一步的,控制装置还可以包括收发单元2205,用以实现信号的输入(接收)和输出(发送)。例如,收发单元2205可以包括收发器或射频芯片。收发单元2205还可以包括通信接口。
可选地,控制装置还可以包括天线2206,可以用于支持收发单元2205实现控制装置的收发功能。
可选地,控制装置中可以包括一个或多个存储器2202,其上存有程序(也可以是指令或者代码)2204,程序2204可被处理器2201运行,使得处理器2201执行上述方法实施例中描述的方法。可选地,存储器2202中还可以存储有数据。可选地,处理器2201还可以读取存储器2202中存储的数据(例如,预存储的第一特征信息),该数据可以与程序2204存储在相同的存储地址,该数据也可以与程序2204存储在不同的存储地址。
处理器2201和存储器2202可以单独设置,也可以集成在一起,例如,集成在单板或者系统级芯片(system on chip,SOC)上。
关于控制装置在上述各种可能的设计中执行的操作的详细描述可以参照本申请提供的智能家居系统的控制方法的实施例中的描述,在此就不再一一赘述。
应理解,上述方法实施例的各步骤可以通过处理器2201中的硬件形式的逻辑电路或者软件形式的指令完成。处理器2201可以是CPU、数字信号处理器(digital signalprocessor,DSP)、专用集成电路(application specific integrated circuit,ASIC)、现场可编程门阵列(field programmable gate array,FPGA)或者其它可编程逻辑器件,例如,分立门、晶体管逻辑器件或分立硬件组件。
可以理解的是,本申请的实施例中的处理器可以是中央处理单元(centralprocessing unit,CPU),还可以是其他通用处理器、数字信号处理器(digital signalprocessor,DSP)、专用集成电路(application specific integrated circuit,ASIC)、现场可编程门阵列(field programmable gate array,FPGA)或者其他可编程逻辑器件、晶体管逻辑器件,硬件部件或者其任意组合。通用处理器可以是微处理器,也可以是任何常规的处理器。
本申请的实施例中的方法步骤可以通过硬件的方式来实现,也可以由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成,软件模块可以被存放于随机存取存储器(random access memory,RAM)、闪存、只读存储器(read-only memory,ROM)、可编程只读存储器(programmable rom,PROM)、可擦除可编程只读存储器(erasable PROM,EPROM)、电可擦除可编程只读存储器(electrically EPROM,EEPROM)、寄存器、硬盘、移动硬盘、CD-ROM或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器,从而使处理器能够从该存储介质读取信息,且可向该存储介质写入信息。当然,存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者通过所述计算机可读存储介质进行传输。所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘(solid state disk,SSD))等。
可以理解的是,在本申请的实施例中涉及的各种数字编号仅为描述方便进行的区分,并不用来限制本申请的实施例的范围。
Claims (34)
1.一种智能家居系统的控制方法,其特征在于,应用于控制中心,所述方法包括:
接收用户终端发送的屏幕寻呼指示,所述屏幕寻呼指示用于指示查找距离目标用户最近的屏幕终端;
根据所述屏幕寻呼指示,向至少一个监测装置发送寻呼请求,以使至少一个所述监测装置监测目标用户,所述监测装置与屏幕终端之间具有映射关系;
接收至少一个所述监测装置发送的监测数据,所述监测数据用于指示是否监测到所述目标用户;
根据所述监测数据,从至少一个所述屏幕终端中选定目标屏幕终端,其中,所述目标屏幕终端指第一监测装置对应的屏幕终端,所述第一监测装置指监测到所述目标用户的监测装置;
基于接收到的所述用户终端发送的目标应用的运行状态信息,将所述目标应用的实时运行数据转移至所述目标屏幕终端进行显示,其中,所述运行状态信息包括所述目标应用的实时运行数据、和/或所述目标应用的标识和进程。
2.根据权利要求1所述的方法,其特征在于,所述监测数据中包括至少一个所述监测装置采集到的用户的用户特征信息;
所述根据所述监测数据,从至少一个屏幕终端中选定目标屏幕终端,包括:
根据所述用户特征信息,从至少一个所述监测装置所监测到的用户中筛选所述目标用户;
根据筛选结果,将监测到所述目标用户的监测装置作为所述第一监测装置;
根据监测装置与屏幕终端之间的映射关系,利用所述第一监测装置,从所述至少一个屏幕终端中选定所述目标屏幕终端。
3.根据权利要求2所述的方法,其特征在于,所述根据所述用户特征信息,从至少一个所述监测装置所监测到的用户中筛选所述目标用户,包括:
获取预存储的用户的第一特征信息,所述第一特征信息中包括所述目标用户的特征信息;
将所述用户特征信息与所述第一特征信息进行比对,若比对成功,则筛选到所述目标用户。
4.根据权利要求2所述的方法,其特征在于,所述根据所述用户特征信息,从至少一个所述监测装置所监测到的用户中筛选所述目标用户,包括:
接收所述用户终端发送的用户的第二特征信息,所述第二特征信息为所述用户终端在发送所述屏幕寻呼指示前采集,且所述第二特征信息中包括所述目标用户的特征信息;
将所述用户特征信息与所述第二特征信息进行比对,若比对成功,则筛选到所述目标用户。
5.根据权利要求1所述的方法,其特征在于,所述监测数据中包括至少一个所述监测装置的监测结果,所述监测结果用于指示监测装置是否监测到所述目标用户;
所述根据所述监测数据,从至少一个屏幕终端中选定目标屏幕终端,包括:
根据所述监测结果,将所述第一监测装置对应的屏幕终端选定为所述目标屏幕终端。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述第一监测装置为多个,且所述目标用户为多个,所述从至少一个屏幕终端中选定目标屏幕终端,包括:
根据监测到的目标用户的优先级,得到每个所述第一监测装置的优先级,以及选取优先级最高的第一监测装置对应的屏幕终端选定为所述目标屏幕终端。
7.根据权利要求1-5任一项所述的方法,其特征在于,所述第一监测装置为多个,且所述目标用户为一个,所述从至少一个屏幕终端中选定目标屏幕终端,包括:
将所述第一监测装置中,距离所述目标用户最近的监测装置对应的屏幕终端选定为所述目标屏幕终端。
8.根据权利要求1-5任一项所述的方法,其特征在于,所述将所述目标应用的实时运行数据转移至所述目标屏幕终端进行显示之前,还包括:
向所述目标屏幕终端发送确认指令,以在所述目标屏幕终端上显示转移提示信息,所述转移提示信息用于提示是否将所述实时运行数据转移至所述目标屏幕终端;
接收所述目标屏幕终端响应于所述转移提示信息反馈的第一确认信息,所述第一确认信息用于指示将所述实时运行数据转移至所述目标屏幕终端。
9.根据权利要求1-5任一项所述的方法,其特征在于,所述接收用户终端发送的屏幕寻呼指示之前,还包括:
接收所述用户终端发送的注册请求,其中,所述注册请求用于请求在所述目标屏幕终端显示所述目标应用的实时运行数据;
检测所述目标应用是否适配至少一个所述屏幕终端;
若所述目标应用适配至少一个所述屏幕终端,则将所述目标应用添加至注册列表中;
若所述目标应用未能适配至少一个所述屏幕终端,则向所述用户终端发送提示信息,以使所述用户终端对发起所述注册请求的用户进行提醒。
10.根据权利要求1-5任一项所述的方法,其特征在于,所述基于接收到的所述用户终端发送的目标应用的运行状态数据,将所述目标应用的实时运行数据转移至所述目标屏幕终端进行显示之前,还包括:
向所述用户终端反馈选定的所述目标屏幕终端的信息,以使所述用户终端发送所述目标应用的运行状态信息;
接收所述用户终端发送的所述目标应用的运行状态信息。
11.根据权利要求1-5任一项所述的方法,其特征在于,所述屏幕寻呼指示中携带有所述目标应用的运行状态信息。
12.根据权利要求1-5任一项所述的方法,其特征在于,所述监测装置为多个,多个所述监测装置同时或分时进行用户监测。
13.一种智能家居系统的控制方法,其特征在于,应用于用户终端,所述方法包括:
识别满足屏幕寻呼的触发条件,所述触发条件包括检测到目标用户未处于所述用户终端可视范围内的时长达到第一预设时长,和检测到目标应用处于激活状态的时长达到第二预设时长中的至少一项;
向控制中心发送屏幕寻呼指示,以使所述控制中心向至少一个监测装置发送寻呼请求,所述监测装置与所述屏幕终端之间的映射关系,所述屏幕寻呼指示用于指示查找距离目标用户最近的屏幕终端。
14.根据权利要求13所述的方法,其特征在于,所述触发条件包括检测到目标用户未处于所述用户终端可视范围内的时长达到第一预设时长,和检测到目标应用处于激活状态的时长达到第二预设时长中;
所述识别满足屏幕寻呼的触发条件之前,还包括:
获取所述目标应用的类型;
根据所述类型,选取与所述类型相关联的触发条件。
15.根据权利要求13所述的方法,其特征在于,所述识别满足屏幕寻呼的触发条件之前,还包括:
采集在预设时间内使用所述用户终端的用户的第二特征信息,以及将所述第二特征信息发送至所述控制中心,以使所述控制中心根据所述第二特征信息从所述监测装置发送的监测数据中筛选出所述目标用户。
16.根据权利要求13所述的方法,其特征在于,所述识别满足屏幕寻呼的触发条件之前,还包括:
采集在预设时间内使用所述用户终端的用户的第三特征信息,以及将所述第三特征信息发送至所述监测装置,以使所述监测装置根据所述第三特征信息判断是否监测到所述目标用户。
17.根据权利要求13-16中任一项所述的方法,其特征在于,所述识别满足屏幕寻呼的触发条件之前,还包括:
识别所述用户终端处于目标环境中,所述目标环境包括居家环境、办公环境。
18.根据权利要求13-16中任一项所述的方法,其特征在于,所述方法还包括:
接收所述目标用户发送的注册请求,其中,所述注册请求用于请求在目标屏幕终端显示所述目标应用的实时运行数据;
将所述注册请求发送至所述控制中心,以使所述控制中心检测所述目标应用是否适配至少一个屏幕终端。
19.根据权利要求13-16中任一项所述的方法,其特征在于,所述屏幕寻呼指示中携带有所述目标应用的运行状态信息,以使所述控制中心基于所述运行状态信息,将所述目标应用的实时运行数据转移至目标屏幕终端进行显示,其中,所述运行状态信息包括所述目标应用的实时运行数据、和/或所述目标应用的标识和进程。
20.根据权利要求13-16中任一项所述的方法,其特征在于,所述向控制中心发送屏幕寻呼指示之后,还包括:
接收所述控制中心反馈的确定出目标屏幕终端的信息,以及向所述控制中心发送所述目标应用的运行状态信息,以使所述控制中心基于所述运行状态信息,将所述目标应用的实时运行数据转移至目标屏幕终端进行显示,其中,所述运行状态信息包括所述目标应用的实时运行数据、和/或所述目标应用的标识和进程。
21.根据权利要求13-16中任一项所述的方法,其特征在于,所述向控制中心发送屏幕寻呼指示之后,还包括:
接收所述控制中心反馈的确定出目标屏幕终端的信息,以及将所述目标应用的运行状态信息发送至所述目标屏幕终端,以使所述目标屏幕终端显示所述目标应用的实时运行数据,其中,所述运行状态信息包括所述目标应用的实时运行数据、和/或所述目标应用的标识和进程。
22.一种智能家居系统的控制方法,其特征在于,应用于监测装置,所述监测装置与屏幕终端之间的映射关系,所述方法包括:
接收控制中心发送的寻呼请求,所述寻呼请求为所述控制中心接收到用户终端发送的屏幕寻呼指示后发出,所述屏幕寻呼指示用于指示查找距离目标用户最近的屏幕终端;
根据所述寻呼请求,监测目标用户,以及将监测数据发送至所述控制中心,以使所述控制中心根据所述监测数据从至少一个所述屏幕终端中选定目标屏幕终端,并将所述用户终端上目标应用的实时运行数据转移至所述目标屏幕终端,所述监测数据用于指示是否监测到所述目标用户。
23.根据权利要求22所述的方法,其特征在于,所述监测数据中包括监测结果,所述监测结果用于指示监测装置是否监测到所述目标用户;
所述监测目标用户,包括:
采集所述监测装置监测范围内用户的用户特征信息,以及根据所述用户特征信息,得到所述监测结果。
24.根据权利要求23所述的方法,其特征在于,所述根据所述用户特征信息,得到所述监测结果,包括:
获取预存储的用户的第一特征信息,所述第一特征信息中包括所述目标用户的特征信息;
将所述用户特征信息与所述第一特征信息进行比对,若比对成功,则所述监测结果为监测到所述目标用户。
25.根据权利要求23所述的方法,其特征在于,所述根据所述用户特征信息,得到所述监测结果,包括:
接收所述控制中心发送的用户的第二特征信息,所述第二特征信息由用户终端发送至所述控制中心,所述第二特征信息为所述用户终端向所述控制中心发送屏幕寻呼指示前采集,且所述第二特征信息中包括所述目标用户的特征信息;
将所述用户特征信息与所述第二特征信息进行比对,若比对成功,则所述监测结果为监测到所述目标用户。
26.根据权利要求23所述的方法,其特征在于,所述根据所述用户特征信息,得到所述监测结果,包括:
接收用户终端发送的用户的第三特征信息,所述第三特征信息为所述用户终端向所述控制中心发送屏幕寻呼指示前采集,且所述第三特征信息中包括所述目标用户的特征信息;
将所述用户特征信息与所述第三特征信息进行比对,若比对成功,则所述监测结果为监测到所述目标用户。
27.一种智能家居系统的控制装置,其特征在于,包括至少一个处理器,所述处理器用于执行存储器中存储的指令,以使得控制中心执行如权利要求1-12任一所述的方法。
28.一种智能家居系统的控制装置,其特征在于,包括至少一个处理器,所述处理器用于执行存储器中存储的指令,以使得用户终端执行如权利要求13-21任一所述的方法。
29.一种智能家居系统的控制装置,其特征在于,包括至少一个处理器,所述处理器用于执行存储器中存储的指令,以使得监测装置执行如权利要求22-26任一所述的方法。
30.一种控制中心,其特征在于,用于执行如权利要求1-12任一所述的方法。
31.一种用户终端,其特征在于,用于执行如权利要求13-21任一所述的方法。
32.一种监测装置,其特征在于,用于执行如权利要求22-26任一所述的方法。
33.一种智能家居系统,包括控制中心、用户终端、监测装置和屏幕终端,其中,所述监测装置与所述屏幕终端之间具有映射关系,控制中心用于执行如权利要求1-12任一所述的方法,所述用户终端用于执行如权利要求13-21任一所述的方法,所述监测装置用于执行如权利要求22-26任一所述的方法。
34.一种计算机存储介质,所述计算机存储介质中存储有指令,当所述指令在计算机上运行时,使得计算机执行如权利要求1-26任一所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010464921.9A CN111522250B (zh) | 2020-05-28 | 2020-05-28 | 智能家居系统及其控制方法与装置 |
PCT/CN2021/070632 WO2021238230A1 (zh) | 2020-05-28 | 2021-01-07 | 智能家居系统及其控制方法与装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010464921.9A CN111522250B (zh) | 2020-05-28 | 2020-05-28 | 智能家居系统及其控制方法与装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111522250A CN111522250A (zh) | 2020-08-11 |
CN111522250B true CN111522250B (zh) | 2022-01-14 |
Family
ID=71907304
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010464921.9A Active CN111522250B (zh) | 2020-05-28 | 2020-05-28 | 智能家居系统及其控制方法与装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN111522250B (zh) |
WO (1) | WO2021238230A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111522250B (zh) * | 2020-05-28 | 2022-01-14 | 华为技术有限公司 | 智能家居系统及其控制方法与装置 |
CN111901211B (zh) * | 2020-09-29 | 2022-09-09 | 深圳传音控股股份有限公司 | 控制方法、设备及存储介质 |
CN114690651A (zh) * | 2020-12-31 | 2022-07-01 | 青岛海尔多媒体有限公司 | 用于屏幕图像传递的方法、装置、智能家居设备及系统 |
CN114137887A (zh) * | 2021-12-09 | 2022-03-04 | 南京煜耀智能科技有限公司 | 一种基于Harmony OS的智慧屏 |
CN114333185A (zh) * | 2021-12-31 | 2022-04-12 | 深圳市商汤科技有限公司 | 支付方法及装置、电子设备和存储介质 |
CN114449300B (zh) * | 2022-01-11 | 2023-12-15 | 海信集团控股股份有限公司 | 实时视频流的播放方法及服务器 |
CN114666912B (zh) * | 2022-05-25 | 2022-08-05 | 广东海洋大学 | 请求上行资源的方法、装置、计算机设备和系统 |
CN116170767A (zh) * | 2023-01-13 | 2023-05-26 | 深圳市丰润达科技有限公司 | 保障无线数据上报不易丢失的方法、管理设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103414894A (zh) * | 2013-07-29 | 2013-11-27 | 上海凯统信息科技有限公司 | 一种无线实时传屏设备及方法 |
CN109375888A (zh) * | 2018-09-07 | 2019-02-22 | 北京奇艺世纪科技有限公司 | 一种投屏方法及装置 |
CN109471605A (zh) * | 2018-11-14 | 2019-03-15 | 维沃移动通信有限公司 | 一种信息处理方法及终端设备 |
CN109660842A (zh) * | 2018-11-14 | 2019-04-19 | 华为技术有限公司 | 一种播放多媒体数据的方法及电子设备 |
CN110602087A (zh) * | 2019-09-10 | 2019-12-20 | 腾讯科技(深圳)有限公司 | 智能投屏方法、装置、智能终端及服务器 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140098247A1 (en) * | 1999-06-04 | 2014-04-10 | Ip Holdings, Inc. | Home Automation And Smart Home Control Using Mobile Devices And Wireless Enabled Electrical Switches |
JP5067850B2 (ja) * | 2007-08-02 | 2012-11-07 | キヤノン株式会社 | システム、頭部装着型表示装置、その制御方法 |
CN101430632A (zh) * | 2008-12-19 | 2009-05-13 | 深圳华为通信技术有限公司 | 触摸屏输入方法、装置和通信终端 |
US20130328770A1 (en) * | 2010-02-23 | 2013-12-12 | Muv Interactive Ltd. | System for projecting content to a display surface having user-controlled size, shape and location/direction and apparatus and methods useful in conjunction therewith |
CN101958817B (zh) * | 2010-07-17 | 2012-09-05 | 刘利华 | 智能家居信息管理系统 |
US20130147686A1 (en) * | 2011-12-12 | 2013-06-13 | John Clavin | Connecting Head Mounted Displays To External Displays And Other Communication Networks |
CN104252828B (zh) * | 2013-06-29 | 2018-06-05 | 华为终端(东莞)有限公司 | 保护视力的显示方法、显示装置和终端设备 |
CN104243883B (zh) * | 2014-09-22 | 2018-06-05 | 联想(北京)有限公司 | 一种投影方法及电子设备 |
CN104360797A (zh) * | 2014-10-16 | 2015-02-18 | 广州三星通信技术研究有限公司 | 用于电子设备的内容显示方法和系统 |
CN104808521B (zh) * | 2015-02-26 | 2018-07-13 | 百度在线网络技术(北京)有限公司 | 智能设备的控制方法和装置 |
CN105242554B (zh) * | 2015-09-28 | 2018-03-06 | 努比亚技术有限公司 | 终端控制方法及装置 |
CN106095084A (zh) * | 2016-06-06 | 2016-11-09 | 乐视控股(北京)有限公司 | 投屏方法及装置 |
CN106201195A (zh) * | 2016-06-30 | 2016-12-07 | 北京小米移动软件有限公司 | 主屏幕页显示方法及装置 |
US10466889B2 (en) * | 2017-05-16 | 2019-11-05 | Apple Inc. | Devices, methods, and graphical user interfaces for accessing notifications |
CN108712484A (zh) * | 2018-05-10 | 2018-10-26 | 武汉思美特云智慧科技有限公司 | 智能家居多个控制终端同步显示的系统 |
CN108874342B (zh) * | 2018-06-13 | 2021-08-03 | 深圳市东向同人科技有限公司 | 投影视图切换方法及终端设备 |
CN109302464B (zh) * | 2018-09-18 | 2021-09-21 | 爱普(福建)科技有限公司 | 基于控制站的智能家居设备的app统一控制方法和系统 |
TWI704473B (zh) * | 2018-11-16 | 2020-09-11 | 財團法人工業技術研究院 | 視線向量偵測方向與裝置 |
CN109901539A (zh) * | 2019-03-27 | 2019-06-18 | 辽东学院 | 一种应用于智能家居的人机交互系统及其控制方法 |
CN110401767B (zh) * | 2019-05-30 | 2021-08-31 | 华为技术有限公司 | 信息处理方法和设备 |
CN110784830B (zh) * | 2019-09-18 | 2022-07-29 | 华为技术有限公司 | 数据处理方法、蓝牙模块、电子设备与可读存储介质 |
CN111522250B (zh) * | 2020-05-28 | 2022-01-14 | 华为技术有限公司 | 智能家居系统及其控制方法与装置 |
-
2020
- 2020-05-28 CN CN202010464921.9A patent/CN111522250B/zh active Active
-
2021
- 2021-01-07 WO PCT/CN2021/070632 patent/WO2021238230A1/zh active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103414894A (zh) * | 2013-07-29 | 2013-11-27 | 上海凯统信息科技有限公司 | 一种无线实时传屏设备及方法 |
CN109375888A (zh) * | 2018-09-07 | 2019-02-22 | 北京奇艺世纪科技有限公司 | 一种投屏方法及装置 |
CN109471605A (zh) * | 2018-11-14 | 2019-03-15 | 维沃移动通信有限公司 | 一种信息处理方法及终端设备 |
CN109660842A (zh) * | 2018-11-14 | 2019-04-19 | 华为技术有限公司 | 一种播放多媒体数据的方法及电子设备 |
CN110602087A (zh) * | 2019-09-10 | 2019-12-20 | 腾讯科技(深圳)有限公司 | 智能投屏方法、装置、智能终端及服务器 |
Also Published As
Publication number | Publication date |
---|---|
WO2021238230A1 (zh) | 2021-12-02 |
CN111522250A (zh) | 2020-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111522250B (zh) | 智能家居系统及其控制方法与装置 | |
CN115209195B (zh) | 一种通过遥控器实现一碰投屏的终端设备、方法以及系统 | |
CN110622123B (zh) | 一种显示方法及装置 | |
WO2020041952A1 (zh) | 一种基于快递消息控制快递柜的方法及电子设备 | |
CN113542839B (zh) | 电子设备的投屏方法和电子设备 | |
CN111369988A (zh) | 一种语音唤醒方法及电子设备 | |
EP4024907A1 (en) | Data processing method, bluetooth module, electronic device, and readable storage medium | |
WO2021043045A1 (zh) | 一种网络配置信息的配置方法及设备 | |
CN110198362B (zh) | 一种在联系人中添加智能家居设备的方法及系统 | |
CN114339709A (zh) | 无线通信方法和终端设备 | |
WO2020220180A1 (zh) | 媒体内容推荐方法及设备 | |
US20220124607A1 (en) | Method for Accessing Network by Smart Home Device and Related Device | |
CN114610193A (zh) | 内容共享方法、电子设备及存储介质 | |
CN114258037A (zh) | 一种网络控制方法、装置及电子设备 | |
CN114339698A (zh) | 设备间触碰建立无线连接的方法、电子设备及芯片 | |
WO2022095712A1 (zh) | 数据分享方法、装置、系统及电子设备 | |
CN113365274B (zh) | 一种网络接入方法和电子设备 | |
CN113810532B (zh) | 定位方法和相关装置 | |
CN113572798B (zh) | 设备控制方法、系统、设备和存储介质 | |
CN114860178A (zh) | 一种投屏的方法和电子设备 | |
CN114079809A (zh) | 终端及其输入方法与装置 | |
WO2024001735A1 (zh) | 网络连接方法、电子设备及存储介质 | |
CN115134402B (zh) | 设备连接方法及电子设备 | |
WO2023025059A1 (zh) | 一种通信系统及通信方法 | |
CN115706680A (zh) | 人声信号响应方法、控制设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |