CN107861388A - 一种交互方法、装置、存储设备及终端 - Google Patents

一种交互方法、装置、存储设备及终端 Download PDF

Info

Publication number
CN107861388A
CN107861388A CN201710920151.2A CN201710920151A CN107861388A CN 107861388 A CN107861388 A CN 107861388A CN 201710920151 A CN201710920151 A CN 201710920151A CN 107861388 A CN107861388 A CN 107861388A
Authority
CN
China
Prior art keywords
equipment entity
control instruction
equipment
entity
device models
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710920151.2A
Other languages
English (en)
Inventor
黄辉
贾巨涛
宋德超
冼海鹰
何贤俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201710920151.2A priority Critical patent/CN107861388A/zh
Publication of CN107861388A publication Critical patent/CN107861388A/zh
Priority to PCT/CN2018/091128 priority patent/WO2019062210A1/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00—Systems controlled by a computer
    • G05B15/02—Systems controlled by a computer electric
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2642—Domotique, domestic, home control, automation, smart house
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

本发明公开了一种交互方法、装置、存储设备及终端，该方法包括：获取待交互的设备实体的AR设备模型；接收用户对所述AR设备模型的触摸位置信息；确定与所述触摸位置信息对应的控制指令，并将所述控制指令发送至所述设备实体。本发明的方案，可以克服现有技术中直观性差、不够方便和用户体验差等缺陷，实现直观性好、方便操作和用户体验好的有益效果。克服现有技术中的缺陷，实现的有益效果。

Description

一种交互方法、装置、存储设备及终端
技术领域
本发明属于家电技术领域，具体涉及一种交互方法、装置、存储设备及终端，尤其涉及一种基于AR及无线通讯技术的空调交互方法、与该方法对应的装置、存储有该方法指令的存储设备、以及能够执行该方法指令的终端。
背景技术
空调(即空调器)，可以对建筑/构筑物内环境空气的温度、湿度、洁净度、速度等参数进行调节和控制。现有空调器，可以通过遥控器或空调面板上的设置按键，控制空调的开关、以及进行温度设置等。但是现有的人与空调的交互方式，大多是基于遥控面板实现控制功能，操作方式不够直观、不够便捷。
现有技术中，存在直观性差、不够方便和用户体验差等缺陷。
发明内容
本发明的目的在于，针对上述缺陷，提供一种交互方法、装置、存储设备及终端，以解决现有技术中通过遥控面板对空调进行控制的操作方式不够方便的问题，达到操作方便的效果。
本发明提供一种交互方法，包括：获取待交互的设备实体的AR设备模型；接收用户对所述AR设备模型的触摸位置信息；确定与所述触摸位置信息对应的控制指令，并将所述控制指令发送至所述设备实体。
可选地，获取待交互的设备实体的AR设备模型，包括：接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的图像信息；对所述图像信息进行AR处理，生成所述AR设备模型；和/或，自所述图像信息中提取所述设备实体的特征信息，自预先建立的信息库中调用与所述特征信息对应的所述AR设备模型；和/或，接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的识别信息；根据设定识别信息与设定AR设备模型的对应关系，确定与所述识别信息对应的所述AR设备模型。
可选地，其中，所述特征信息，包括：外部轮廓；和/或，所述识别信息，包括：二维码、条形码、ID码、RF标签中的至少之一。
可选地，还包括：接收所述设备实体对所述控制指令的执行结果。
可选地，接收所述设备实体对所述控制指令的执行结果，包括：接收由所述设备实体执行所述控制指令后主动发送的执行结果。
可选地，还包括：当未收到所述执行结果时，发送查询请求，以请求所述设备实体发送所述执行结果。
可选地，还包括：当连续发送设定次数的查询消息仍未收到回应时，放弃查询；和/或，当确定所述设备实体未执行所述控制指令时，恢复发送所述控制指令前的状态。
可选地，还包括：确定与所述执行结果对应的所述设备实体的当前运行状态；将所述当前运行状态同步虚拟显示至所述AR设备模型中，以实现所述AR设备模型与所述当前运行状态的同步显示。
可选地，其中，所述设备实体，包括：空调器、热水器、冰箱、洗衣机、电磁炉、电暖气、电烤箱、电饭煲、电风扇、净水机、空气净化器、抽油烟机、消毒柜中的至少之一；和/或，所述触摸位置信息，包括：所述AR设备模型的顶部、底部、机身任一位置、机身所在显示界面中除所述机身之外的任一位置中的至少之一；和/或，所述控制指令，包括：开机、关机、开度、运行模式中的至少之一。
与上述方法相匹配，本发明另一方面提供一种交互装置，包括：通信单元，用于获取待交互的设备实体的AR设备模型；所述通信单元，还用于接收用户对所述AR设备模型的触摸位置信息；控制单元，用于确定与所述触摸位置信息对应的控制指令，并通过所述通信单元将所述控制指令发送至所述设备实体。
可选地，所述通信单元获取待交互的设备实体的AR设备模型，具体包括：接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的图像信息；对所述图像信息进行AR处理，生成所述AR设备模型；和/或，自所述图像信息中提取所述设备实体的特征信息，自预先建立的信息库中调用与所述特征信息对应的所述AR设备模型；和/或，接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的识别信息；
根据设定识别信息与设定AR设备模型的对应关系，确定与所述识别信息对应的所述AR设备模型。
可选地，其中，所述特征信息，包括：外部轮廓；和/或，所述识别信息，包括：二维码、条形码、ID码、RF标签中的至少之一。
可选地，还包括：所述通信单元，还用于接收所述设备实体对所述控制指令的执行结果。
可选地，所述通信单元接收所述设备实体对所述控制指令的执行结果，具体包括：接收由所述设备实体执行所述控制指令后主动发送的执行结果。
可选地，还包括：所述控制单元，还用于当未收到所述执行结果时，发送查询请求，以请求所述设备实体发送所述执行结果。
可选地，还包括：所述控制单元，还用于当连续发送设定次数的查询消息仍未收到回应时，放弃查询；和/或，当确定所述设备实体未执行所述控制指令时，恢复发送所述控制指令前的状态。
可选地，还包括：所述控制单元，还用于确定与所述执行结果对应的所述设备实体的当前运行状态；所述通信单元，还用于将所述当前运行状态同步虚拟显示至所述AR设备模型中，以实现所述AR设备模型与所述当前运行状态的同步显示。
可选地，其中，所述设备实体，包括：空调器、热水器、冰箱、洗衣机、电磁炉、电暖气、电烤箱、电饭煲、电风扇、净水机、空气净化器、抽油烟机、消毒柜中的至少之一；和/或，所述触摸位置信息，包括：所述AR设备模型的顶部、底部、机身任一位置、机身所在显示界面中除所述机身之外的任一位置中的至少之一；和/或，所述控制指令，包括：开机、关机、开度、运行模式中的至少之一。
与上述方法相匹配，本发明再一方面提供一种存储设备，包括：所述存储设备中存储有多条指令；所述多条指令，用于由处理器加载并执行以上所述的交互方法。
与上述方法相匹配，本发明再一方面提供一种终端，包括：处理器，用于执行多条指令；存储器，用于存储多条指令；其中，所述多条指令，用于由所述存储器存储，并由所述处理器加载并执行以上所述的交互方法；或者，以上所述的交互装置。
本发明的方案，通过利用AR、无线技术，实现人与设备的便捷交互，实现空调设备便捷控制。
进一步，本发明的方案，通过采用AR设备模型实现用户与设备之间的交互，采用直观交互方式提高设备操作便捷性，改变了传统通过遥控面板控制方式的单一性，改善了用户操作体验。
进一步，本发明的方案，通过利用增强现实(AR)技术，将空调设备实物以及空调运行状态同步显示到屏幕上，通过无线技术(例如：wifi、蓝牙、zigbee等)实现无线通讯，实现了人与空调通过增强现实的方式互动。
进一步，本发明的方案，通过手机或平板等带有显示屏幕的设备，扫描空调实物或者识别图，在显示屏幕中生成AR空调模型，实现用户与空调之间的交互，实现空调设备自然交互。
由此，本发明的方案，通过基于空调或其识别图生成AR空调模型，并通过对AR空调模型的控制实现用户与空调之间的交互；解决通过遥控面板对空调进行控制的操作方式不够方便的问题，从而，克服现有技术中直观性差、不够方便和用户体验差的缺陷，实现直观性好、方便操作和用户体验好的有益效果。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
图1为本发明的交互方法的一实施例的流程示意图；
图2为本发明的方法中根据图像信息获取AR设备模型的一实施例的流程示意图；
图3为本发明的方法中根据识别信息获取AR设备模型的一实施例的流程示意图；
图4为本发明的方法中接收设备实体对控制指令的执行结果的一实施例的流程示意图；
图5为本发明的方法中确定设备实体是否收到控制指令的一实施例的流程示意图；
图6为本发明的方法中设备实体无法收到控制指令时进行故障提示的一实施例的流程示意图；
图7为本发明的方法中将设备实体的当前运行状态同步显示至AR设备模型的一实施例的流程示意图；
图8为本发明的交互装置的一实施例的结构示意图；
图9为本发明的终端对设备实体的AR识别图的一实施例的效果示意图；
图10为本发明的终端对设备实体的AR识别图的一实施例的AR效果图；
图11为本发明的终端对设备实体进行交互控制的一实施例的交互流程图；
图12为本发明的终端中AR设备模型的一实施例的机身触摸位置示意图；
图13为本发明的终端中AR设备模型的一实施例的机身之外的显示区域的触摸位置显示效果图。
结合附图，本发明实施例中附图标记如下：
102-通信单元；104-控制单元；106-提示单元。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
根据本发明的实施例，提供了一种交互方法，如图1所示本发明的方法的一实施例的流程示意图。该交互方法可以包括：
在步骤S110处，获取待交互的设备实体的AR设备模型。
可选地，所述设备实体，可以包括：空调器、热水器、冰箱、洗衣机、电磁炉、电暖气、电烤箱、电饭煲、电风扇、净水机、空气净化器、抽油烟机、消毒柜中的至少之一。
由此，通过对多种设备实体的AR交互控制，使得AR交互控制的适用范围广，使用灵活性好。
在一个可选例子中，可以结合图2所示本发明的方法中根据图像信息获取AR设备模型的一实施例的流程示意图，进一步说明步骤S110中获取待交互的设备实体的AR设备模型的一个过程。
步骤S210，接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的图像信息。
步骤S220，对所述图像信息进行AR处理，生成所述AR设备模型。
例如：用户通过手机或平板等带有显示屏幕的设备，扫描空调实物或者识别图，在显示屏幕中生成AR空调模型(例如：参见图9和图10所示的例子)。
例如：对不同机型的空调实物或者识别图进行扫描，对应生成不同的AR空调模型，基于该AR空调模型可以进行人机交互。
例如：见图11所示的例子，该基于AR、无线通讯技术的空调交互方法，其实现方式可以包括：手机或平板设备扫描成功后，在屏幕中生成AR空调模型。
由此，通过根据设备实体的图像信息进行AR处理得到AR设备模型，处理效果好，生成AR设备模型的可靠性高。
在一个可选例子中，可以结合图2所示本发明的方法中根据图像信息获取AR设备模型的一实施例的流程示意图，进一步说明步骤S110中获取待交互的设备实体的AR设备模型的另一个过程。
步骤S230，自步骤S210接收到的所述图像信息中提取所述设备实体的特征信息(例如：设备实体的外部轮廓、功能等信息)。
可选地，所述特征信息，可以包括：外部轮廓。
由此，通过多种形式的特征信息，有利于提升对AR设备模型调用的效率和准确性。
步骤S240，自预先建立的信息库中调用与所述特征信息对应的所述AR设备模型。
例如：可以对扫描后生成的AR空调模型进行存储，在需要控制空调时调用存储的AR空调模型。例如：在需要控制空调时，可以通过扫描后提取的特征信息，调用与该特征信息对应的AR空调模型。
由此，通过基于设备实体的图像信息提取特征信息，进而调用与该特征信息对应的AR设备模型，使得获取AR设备模型的效率高，便捷性好。
在一个可选例子中，可以结合图3所示本发明的方法中根据识别信息获取AR设备模型的一实施例的流程示意图，进一步说明步骤S110中获取待交互的设备实体的AR设备模型的再一个过程。
步骤S310，接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的识别信息。
可选地，所述识别信息，可以包括：二维码、条形码、ID码、RF标签中的至少之一。
由此，通过多种形式的识别信息，有利于提升基于识别信息获取AR设备模型的便捷性和灵活性。
步骤S320，根据设定识别信息与设定AR设备模型的对应关系，确定与所述识别信息对应的所述AR设备模型。
由此，通过基于设备实体的识别信息调用AR设备模型，获取便捷性好，可靠性高。
在步骤S120处，接收用户对所述AR设备模型的触摸位置信息。
例如：可以在AR空调模型的显示屏幕中，对空调进行触控操作。
例如：软件读取手机或平板设备感知到的触摸位置信息。
可选地，所述触摸位置信息，可以包括：所述AR设备模型的顶部(例如：AR空调模型的顶部位置A)、底部(例如：AR空调模型的底部位置B)、机身任一位置、机身所在显示界面中除所述机身之外的任一位置(例如：AR空调模型的机身位置C和D)中的至少之一。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的顶部Logo(位置A)。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的底部风口(位置B)。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身温度(位置C)。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身(位置D)。
由此，通过多种形式的触摸位置信息，有利于提高基于触摸位置信息进行交互控制的灵活性和便捷性。
在步骤S130处，确定与所述触摸位置信息对应的控制指令，并将所述控制指令发送至所述设备实体，以实现通过所述AR设备模型对所述设备实体的控制。
例如：可以利用AR、无线技术，实现人与设备的便捷交互。
例如：将读取的触摸位置信息通过无线连接将命令发送到设备端。
例如：通过无线技术(例如：wifi、蓝牙、zigbee等)实现无线通讯，实现了人与空调通过增强现实的方式互动。
由此，通过基于设备实体的AR设备模型实现用户与设备实体之间的交互，直观性强，交互便捷性好，用户体验佳。
可选地，所述控制指令，可以包括：开机、关机、开度(例如：空调的出风量、温度等)、运行模式(例如：空调的出风方式、制冷模式、制热模式、除湿模式等)中的至少之一。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的顶部Logo(位置A)：实现开机/关机。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的底部风口(位置B)：实现出风口摆动。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身温度(位置C)：实现温度调节。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身(位置D)：在屏幕两侧提供更多个性化设置。
由此，通过与触摸位置信息对应的多种控制指令，可以提升基于AR设备模型与设备实体进行交互的便捷性和灵活性，人性化好。
在一个可选实施方式中，还可以包括：接收所述设备实体对所述控制指令的执行结果，以实现对所述设备实体对所述控制指令的执行情况的监控。
例如：设备端执行接收到的控制命令，并将执行的结果再次通过无线通讯的方式反馈给手机或平板设备。
由此，通过接收设备实体基于通过AR设备模型触发的控制指令的执行结果，以实现对设备实体基于控制指令的执行情况的监控，有利于提升基于AR设备模型实现用户与设备实体之间交互的可靠性和安全性。
在一个可选例子中，接收由所述设备实体执行所述控制指令后主动发送的执行结果。例如：设备实体执行指令后可以主动发送执行结果。
例如：家电设备实体在执行完指令后将执行结果反馈给手机或平板。
可选地，也可以结合图4所示本发明的方法中接收设备实体对控制指令的执行结果的一实施例的流程示意图，进一步说明接收所述设备实体对所述控制指令的执行结果的具体过程。
步骤S410，发送请求所述设备实体返回对所述控制指令的执行结果的请求消息。
步骤S420，接收所述设备实体基于所述请求消息返回的所述执行结果。
由此，通过发送请求消息的方式接收执行结果，可以避免误发送或误接收，通信安全性强，获取的执行结果的精准性好、可靠性高。
在一个可选实施方式中，还可以包括：确定设备实体是否收到控制指令的过程。
在一个可选例子中，当未收到所述执行结果时，发送查询请求，以请求所述设备实体发送所述执行结果。
例如：特殊情况下，设备实体未主动发送执行结果或者发出的结果未被手机端收到时，此时手机开始发送查询请求。
例如：当手机或平板未接收到反馈消息时发送查询命令，请求接收端发送执行结果消息。
例如：当手机或平板未接收到所述反馈消息时，首先发送查询命令，n次查询无果后认为设备未执行命令，AR设备恢复操作前状态。
可选地，也可以结合图5所示为本发明的方法中确定设备实体是否收到控制指令的一实施例的流程示意图，进一步说明确定设备实体是否收到控制指令的具体过程。
步骤S510，在接收所述设备实体对所述控制指令的执行结果之前，确定是否已接收到所述设备实体收到所述控制指令时的反馈消息。
步骤S520，当已接收到所述反馈消息时，对所述设备实体对所述控制指令的执行结果进行接收。
或步骤S530当未接收到所述反馈消息时，再次发送所述控制指令。
由此，通过确定设备实体是否收到控制指令，以根据确定结果接收执行结果或再次发送控制指令，有利于提升基于AR设备模型与设备实体交互的可靠性和安全性。
在一个可选实施方式中，还可以包括：未收到执行结果时的处理过程。
在一个可选例子中，当连续发送设定次数的查询消息仍未收到回应时，放弃查询；和/或，当确定所述设备实体未执行所述控制指令时，恢复发送所述控制指令前的状态。
例如：连续发送n次查询消息无回应则放弃查询，认为接收端未执行操作命令，此时发送端恢复原始状态(操作前状态)。
可选地，也可以结合图6所示本发明的方法中设备实体无法收到控制指令时进行故障提示的一实施例的流程示意图，进一步说明设备实体无法收到控制指令时进行故障提示的具体过程。
步骤S610，确定是否在设定时长内仍未接收到所述反馈消息、和/或再次发送所述控制指令的次数是否达到设定次数。
步骤S620，当在所述设定时长内未接收到所述反馈消息、和/或所述次数达到设定次数时，发起提示(例如：发起声光、语音等提示消息)，以提示所述设备实体不能收到所述控制指令、和/或所述设备实体不能发送所述反馈消息的故障情况。
由此，通过在多次发送控制指令仍未成功、或长时间内未收到设备实体收到控制指令的反馈消息时，发起提示，以提示用户及时干预或维护设备实体，一方面可以提示对设备实体维护的及时性和可靠性，另一方面可以提示用户及时干预以享受设备实体带来的服务，人性化好。
在一个可选实施方式中，还可以包括：将设备实体的当前运行状态同步显示至AR设备模型的过程。
在一个可选例子中，可以结合图7所示本发明的方法中将设备实体的当前运行状态同步显示至AR设备模型的一实施例的流程示意图，进一步说明将设备实体的当前运行状态同步显示至AR设备模型的具体过程。
步骤S710，确定与所述执行结果对应的所述设备实体的当前运行状态。
步骤S720，将所述当前运行状态同步虚拟显示至所述AR设备模型中，以实现所述AR设备模型与所述当前运行状态的同步显示。
例如：进行虚拟设备和实际设备的同步，保证屏幕中空调的状态和真实空调状态保持一致，从而实现人和产品的交互过程。
例如：利用增强现实(AR)技术，将空调设备实物以及空调运行状态同步显示到屏幕上，实现空调设备自然交互。
其中，该自然交互，主要体现在直接触控设备的操作方式上，操作更加直观，符合用户直观操作习惯。
由此，通过基于设备实体对控制指令的执行结果，将设备实体的当前运行状态同步虚拟现实至AR设备模型，实现设备实体与AR设备模型之间的同步运行及显示，同步及时性好，用户查看的直观性和便捷性好。
经大量的试验验证，采用本实施例的技术方案，通过利用AR、无线技术，实现人与设备的便捷交互，实现空调设备便捷控制。
根据本发明的实施例，还提供了对应于交互方法的一种交互装置。参见图8所示本发明的装置的一实施例的结构示意图。该交互装置可以可以包括：通信单元102和控制单元104。
在一个可选例子中，通信单元102，可以用于获取待交互的设备实体的AR设备模型。该通信单元102的具体功能及处理参见步骤S110。
其中，所述设备实体，可以包括：空调器、热水器、冰箱、洗衣机、电磁炉、电暖气、电烤箱、电饭煲、电风扇、净水机、空气净化器、抽油烟机、消毒柜中的至少之一。
由此，通过对多种设备实体的AR交互控制，使得AR交互控制的适用范围广，使用灵活性好。
可选地，所述通信单元102获取待交互的设备实体的AR设备模型，具体可以包括：获取待交互的设备实体的AR设备模型的一个过程。
在一个可选具体例子中，所述通信单元102，可以用于接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的图像信息。该通信单元102的具体功能及处理还参见步骤S210。
在一个可选具体例子中，所述通信单元102，还可以用于对所述图像信息进行AR处理，生成所述AR设备模型。该通信单元102的具体功能及处理还参见步骤S220。
例如：用户通过手机或平板等带有显示屏幕的设备，扫描空调实物或者识别图，在显示屏幕中生成AR空调模型(例如：参见图9和图10所示的例子)。
例如：对不同机型的空调实物或者识别图进行扫描，对应生成不同的AR空调模型，基于该AR空调模型可以进行人机交互。
例如：见图11所示的例子，该基于AR、无线通讯技术的空调交互方法，其实现方式可以包括：手机或平板设备扫描成功后，在屏幕中生成AR空调模型。
由此，通过根据设备实体的图像信息进行AR处理得到AR设备模型，处理效果好，生成AR设备模型的可靠性高。
可选地，所述通信单元102获取待交互的设备实体的AR设备模型，具体还可以包括：获取待交互的设备实体的AR设备模型的另一个过程。
在一个可选具体例子中，所述通信单元102，还可以用于自所述图像信息中提取所述设备实体的特征信息(例如：设备实体的外部轮廓、功能等信息)。该通信单元102的具体功能及处理还参见步骤S230。
可选地，所述特征信息，可以包括：外部轮廓。
由此，通过多种形式的特征信息，有利于提升对AR设备模型调用的效率和准确性。
在一个可选具体例子中，所述通信单元102，还可以用于自预先建立的信息库中调用与所述特征信息对应的所述AR设备模型。该通信单元102的具体功能及处理还参见步骤S240。
例如：可以对扫描后生成的AR空调模型进行存储，在需要控制空调时调用存储的AR空调模型。例如：在需要控制空调时，可以通过扫描后提取的特征信息，调用与该特征信息对应的AR空调模型。
由此，通过基于设备实体的图像信息提取特征信息，进而调用与该特征信息对应的AR设备模型，使得获取AR设备模型的效率高，便捷性好。
可选地，所述通信单元102获取待交互的设备实体的AR设备模型，具体还可以包括：获取待交互的设备实体的AR设备模型的再一个过程。
在一个可选具体例子中，所述通信单元102，还可以用于接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的识别信息。该通信单元102的具体功能及处理还参见步骤S310。
可选地，所述识别信息，可以包括：二维码、条形码、ID码、RF标签中的至少之一。
由此，通过多种形式的识别信息，有利于提升基于识别信息获取AR设备模型的便捷性和灵活性。
在一个可选具体例子中，所述通信单元102，还可以用于根据设定识别信息与设定AR设备模型的对应关系，确定与所述识别信息对应的所述AR设备模型。该通信单元102的具体功能及处理还参见步骤S320。
由此，通过基于设备实体的识别信息调用AR设备模型，获取便捷性好，可靠性高。
在一个可选例子中，所述通信单元102，还可以用于接收用户对所述AR设备模型的触摸位置信息。该通信单元102的具体功能及处理参见步骤S120。
例如：可以在AR空调模型的显示屏幕中，对空调进行触控操作。
例如：软件读取手机或平板设备感知到的触摸位置信息。
可选地，所述触摸位置信息，可以包括：所述AR设备模型的顶部(例如：AR空调模型的顶部位置A)、底部(例如：AR空调模型的底部位置B)、机身任一位置、机身所在显示界面中除所述机身之外的任一位置(例如：AR空调模型的机身位置C和D)中的至少之一。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的顶部Logo(位置A)。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的底部风口(位置B)。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身温度(位置C)。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身(位置D)。
由此，通过多种形式的触摸位置信息，有利于提高基于触摸位置信息进行交互控制的灵活性和便捷性。
在一个可选例子中，控制单元104，可以用于确定与所述触摸位置信息对应的控制指令，并通过所述通信单元102将所述控制指令发送至所述设备实体，以实现通过所述AR设备模型对所述设备实体的控制。该控制单元104的具体功能及处理参见步骤S130。
例如：可以利用AR、无线技术，实现人与设备的便捷交互。
例如：将读取的触摸位置信息通过无线连接将命令发送到设备端。
例如：通过无线技术(例如：wifi、蓝牙、zigbee等)实现无线通讯，实现了人与空调通过增强现实的方式互动。
由此，通过基于设备实体的AR设备模型实现用户与设备实体之间的交互，直观性强，交互便捷性好，用户体验佳。
可选地，所述控制指令，可以包括：开机、关机、开度(例如：空调的出风量、温度等)、运行模式(例如：空调的出风方式、制冷模式、制热模式、除湿模式等)中的至少之一。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的顶部Logo(位置A)：实现开机/关机。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的底部风口(位置B)：实现出风口摆动。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身温度(位置C)：实现温度调节。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身(位置D)：在屏幕两侧提供更多个性化设置。
由此，通过与触摸位置信息对应的多种控制指令，可以提升基于AR设备模型与设备实体进行交互的便捷性和灵活性，人性化好。
在一个可选实施方式中，还可以包括：接收所述设备实体对所述控制指令的执行结果的过程。
在一个可选例子中，所述通信单元102，还可以用于接收所述设备实体对所述控制指令的执行结果，以实现对所述设备实体对所述控制指令的执行情况的监控。
例如：设备端执行接收到的控制命令，并将执行的结果再次通过无线通讯的方式反馈给手机或平板设备。
由此，通过接收设备实体基于通过AR设备模型触发的控制指令的执行结果，以实现对设备实体基于控制指令的执行情况的监控，有利于提升基于AR设备模型实现用户与设备实体之间交互的可靠性和安全性。
在一个可选例子中，所述通信单元102接收由所述设备实体执行所述控制指令后主动发送的执行结果。例如：设备实体执行指令后可以主动发送执行结果。
例如：家电设备实体在执行完指令后将执行结果反馈给手机或平板。
可选地，也可以通过发送请求消息获取执行结果，具体如下：
在一个可选具体例子中，所述通信单元102接收所述设备实体对所述控制指令的执行结果，具体可以包括：发送请求消息并接收执行结果的过程。
在一个可选具体例子中，所述通信单元102，还可以用于发送请求所述设备实体返回对所述控制指令的执行结果的请求消息。该通信单元102的具体功能及处理还参见步骤S410。
在一个可选具体例子中，所述通信单元102，还可以用于接收所述设备实体基于所述请求消息返回的所述执行结果。该通信单元102的具体功能及处理还参见步骤S420。
由此，通过发送请求消息的方式接收执行结果，可以避免误发送或误接收，通信安全性强，获取的执行结果的精准性好、可靠性高。
在一个可选实施方式中，还可以包括：确定设备实体是否收到控制指令的过程。
在一个可选例子中，当未收到所述执行结果时，发送查询请求，以请求所述设备实体发送所述执行结果。
例如：特殊情况下，设备实体未主动发送执行结果或者发出的结果未被手机端收到时，此时手机开始发送查询请求。
例如：当手机或平板未接收到反馈消息时发送查询命令，请求接收端发送执行结果消息。
例如：当手机或平板未接收到所述反馈消息时，首先发送查询命令，n次查询无果后认为设备未执行命令，AR设备恢复操作前状态。
可选地，也可以按以下方式执行：
在一个可选例子中，所述控制单元104，还可以用于在接收所述设备实体对所述控制指令的执行结果之前，确定是否已接收到所述设备实体收到所述控制指令时的反馈消息。该控制单元104的具体功能及处理还参见步骤S510。
在一个可选例子中，所述通信单元102，还可以用于当已接收到所述反馈消息时，对所述设备实体对所述控制指令的执行结果进行接收。该通信单元102的具体功能及处理还参见步骤S520。
在一个可选例子中，所述通信单元102，还可以用于当未接收到所述反馈消息时，再次发送所述控制指令。该通信单元102的具体功能及处理还参见步骤S530。
由此，通过确定设备实体是否收到控制指令，以根据确定结果接收执行结果或再次发送控制指令，有利于提升基于AR设备模型与设备实体交互的可靠性和安全性。
在一个可选实施方式中，还可以包括：未收到执行结果时的处理过程。
在一个可选例子中，当连续发送设定次数的查询消息仍未收到回应时，放弃查询；和/或，当确定所述设备实体未执行所述控制指令时，恢复发送所述控制指令前的状态。
例如：连续发送n次查询消息无回应则放弃查询，认为接收端未执行操作命令，此时发送端恢复原始状态(操作前状态)。
可选地，也可以按一下方式执行：
在一个可选例子中，提示单元106，用于执行设备实体无法收到控制指令时进行故障提示的过程。
在一个可选例子中，所述控制单元104，还可以用于确定是否在设定时长内仍未接收到所述反馈消息、和/或再次发送所述控制指令的次数是否达到设定次数。该控制单元104的具体功能及处理还参见步骤S610。
在一个可选例子中，提示单元106，可以用于当在所述设定时长内未接收到所述反馈消息、和/或所述次数达到设定次数时，发起提示(例如：发起声光、语音等提示消息)，以提示所述设备实体不能收到所述控制指令、和/或所述设备实体不能发送所述反馈消息的故障情况。该提示单元106的具体功能及处理还参见步骤S620。
由此，通过在多次发送控制指令仍未成功、或长时间内未收到设备实体收到控制指令的反馈消息时，发起提示，以提示用户及时干预或维护设备实体，一方面可以提示对设备实体维护的及时性和可靠性，另一方面可以提示用户及时干预以享受设备实体带来的服务，人性化好。
在一个可选实施方式中，还可以包括：将设备实体的当前运行状态同步显示至AR设备模型的过程。
在一个可选例子中，所述控制单元104，还可以用于确定与所述执行结果对应的所述设备实体的当前运行状态。该控制单元104的具体功能及处理还参见步骤S710。
在一个可选例子中，所述通信单元102，还可以用于将所述当前运行状态同步虚拟显示至所述AR设备模型中，以实现所述AR设备模型与所述当前运行状态的同步显示。该通信单元102的具体功能及处理还参见步骤S720。
例如：进行虚拟设备和实际设备的同步，保证屏幕中空调的状态和真实空调状态保持一致，从而实现人和产品的交互过程。
例如：利用增强现实(AR)技术，将空调设备实物以及空调运行状态同步显示到屏幕上，实现空调设备自然交互。
其中，该自然交互，主要体现在直接触控设备的操作方式上，操作更加直观，符合用户直观操作习惯。
由此，通过基于设备实体对控制指令的执行结果，将设备实体的当前运行状态同步虚拟现实至AR设备模型，实现设备实体与AR设备模型之间的同步运行及显示，同步及时性好，用户查看的直观性和便捷性好。
由于本实施例的装置所实现的处理及功能基本相应于前述图1至图7所示的方法的实施例、原理和实例，故本实施例的描述中未详尽之处，可以参见前述实施例中的相关说明，在此不做赘述。
经大量的试验验证，采用本发明的技术方案，通过采用AR设备模型实现用户与设备之间的交互，采用直观交互方式提高设备操作便捷性，改变了传统通过遥控面板控制方式的单一性，改善了用户操作体验。
根据本发明的实施例，还提供了对应于交互方法的一种存储设备。该存储设备，可以包括：所述存储设备中存储有多条指令；所述多条指令，用于由处理器加载并执行以上所述的交互方法。
由于本实施例的存储设备所实现的处理及功能基本相应于前述图1至图7所示的方法的实施例、原理和实例，故本实施例的描述中未详尽之处，可以参见前述实施例中的相关说明，在此不做赘述。
经大量的试验验证，采用本发明的技术方案，通过利用增强现实(AR)技术，将空调设备实物以及空调运行状态同步显示到屏幕上，通过无线技术(例如：wifi、蓝牙、zigbee等)实现无线通讯，实现了人与空调通过增强现实的方式互动。
根据本发明的实施例，还提供了对应于交互方法的一种终端。该终端，可以包括：处理器，用于执行多条指令；存储器，用于存储多条指令；其中，所述多条指令，用于由所述存储器存储，并由所述处理器加载并执行以上所述的交互方法；或者，以上所述的交互装置。
在一个可选例子中，该终端，可以利用AR、无线技术，实现人与设备的便捷交互。
可选地，交互操作，可以是：用户通过手机或平板等带有显示屏幕的设备，扫描空调实物或者识别图，在显示屏幕中生成AR空调模型(例如：参见图9和图10所示的例子)。
其中，AR(Augmented Reality，增强现实)技术成像，将虚拟图像与现实图像结合进行显示，以供用户参考和使用。
AR技术，是一种实时地计算摄影机影像的位置及角度、并加上相应图像的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
增强现实技术，它是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(例如：视觉信息、声音、味道、触觉等)通过电脑等科学技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。
增强现实技术，不仅展现了真实世界的信息，而且将虚拟的信息同时显示出来，两种信息相互补充、叠加。在视觉化的增强现实中，用户利用头盔显示器，把真实世界与电脑图形多重合成在一起，便可以看到真实的世界围绕着它。
例如：对不同机型的空调实物或者识别图进行扫描，对应生成不同的AR空调模型，基于该AR空调模型可以进行人机交互。
例如：可以对扫描后生成的AR空调模型进行存储，在需要控制空调时调用存储的AR空调模型。例如：在需要控制空调时，可以通过扫描后提取的特征信息，调用与该特征信息对应的AR空调模型。
在一个可选例子中，可以在AR空调模型的显示屏幕中，对空调进行触控操作。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的顶部Logo(位置A)：实现开机/关机。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的底部风口(位置B)：实现出风口摆动。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身温度(位置C)：实现温度调节。
例如：参见图12和图13所示的例子，触摸屏幕中虚拟产品的机身(位置D)：在屏幕两侧提供更多个性化设置。
在一个可选例子中，参见图11所示的例子，该基于AR、无线通讯技术的空调交互方法，其实现方式可以包括：手机或平板设备扫描成功后，在屏幕中生成AR空调模型；软件读取手机或平板设备感知到的触摸位置信息，并通过无线连接将命令发送到设备端；设备端执行接收到的控制命令，并将执行的结果再次通过无线通讯的方式反馈给手机或平板设备，进行虚拟设备和实际设备的同步，保证屏幕中空调的状态和真实空调状态保持一致，从而实现人和产品的交互过程。
在一个可选例子中，也可以采用手机APP中遥控器界面直接控制空调，但是这种方式局限于遥控面板，缺乏直观、便捷的交互体验。
由于本实施例的终端所实现的处理及功能基本相应于前述图1至图7所示的方法、或前述图8所示的装置的实施例、原理和实例，故本实施例的描述中未详尽之处，可以参见前述实施例中的相关说明，在此不做赘述。
经大量的试验验证，采用本发明的技术方案，通过手机或平板等带有显示屏幕的设备，扫描空调实物或者识别图，在显示屏幕中生成AR空调模型，实现用户与空调之间的交互，实现空调设备自然交互。
综上，本领域技术人员容易理解的是，在不冲突的前提下，上述各有利方式可以自由地组合、叠加。
以上所述仅为本发明的实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的权利要求范围之内。

Claims (20)

1.一种交互方法，其特征在于，包括：
获取待交互的设备实体的AR设备模型；
接收用户对所述AR设备模型的触摸位置信息；
确定与所述触摸位置信息对应的控制指令，并将所述控制指令发送至所述设备实体。
2.根据权利要求1所述的方法，其特征在于，获取待交互的设备实体的AR设备模型，包括：
接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的图像信息；
对所述图像信息进行AR处理，生成所述AR设备模型；和/或，自所述图像信息中提取所述设备实体的特征信息，自预先建立的信息库中调用与所述特征信息对应的所述AR设备模型；
和/或，
接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的识别信息；
根据设定识别信息与设定AR设备模型的对应关系，确定与所述识别信息对应的所述AR设备模型。
3.根据权利要求2所述的方法，其特征在于，其中，
所述特征信息，包括：外部轮廓；
和/或，
所述识别信息，包括：二维码、条形码、ID码、RF标签中的至少之一。
4.根据权利要求1-3之一所述的方法，其特征在于，还包括：
接收所述设备实体对所述控制指令的执行结果。
5.根据权利要求4所述的方法，其特征在于，接收所述设备实体对所述控制指令的执行结果，包括：
接收由所述设备实体执行所述控制指令后主动发送的执行结果。
6.根据权利要求4或5所述的方法，其特征在于，还包括：
当未收到所述执行结果时，发送查询请求，以请求所述设备实体发送所述执行结果。
7.根据权利要求6所述的方法，其特征在于，还包括：
当连续发送设定次数的查询消息仍未收到回应时，放弃查询；和/或，
当确定所述设备实体未执行所述控制指令时，恢复发送所述控制指令前的状态。
8.根据权利要求4-7之一所述的方法，其特征在于，还包括：
确定与所述执行结果对应的所述设备实体的当前运行状态；
将所述当前运行状态同步虚拟显示至所述AR设备模型中，以实现所述AR设备模型与所述当前运行状态的同步显示。
9.根据权利要求1-8之一所述的方法，其特征在于，其中，
所述设备实体，包括：空调器、热水器、冰箱、洗衣机、电磁炉、电暖气、电烤箱、电饭煲、电风扇、净水机、空气净化器、抽油烟机、消毒柜中的至少之一；
和/或，
所述触摸位置信息，包括：所述AR设备模型的顶部、底部、机身任一位置、机身所在显示界面中除所述机身之外的任一位置中的至少之一；
和/或，
所述控制指令，包括：开机、关机、开度、运行模式中的至少之一。
10.一种交互装置，其特征在于，包括：
通信单元，用于获取待交互的设备实体的AR设备模型；
所述通信单元，还用于接收用户对所述AR设备模型的触摸位置信息；
控制单元，用于确定与所述触摸位置信息对应的控制指令，并通过所述通信单元将所述控制指令发送至所述设备实体。
11.根据权利要求10所述的装置，其特征在于，所述通信单元获取待交互的设备实体的AR设备模型，具体包括：
接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的图像信息；
对所述图像信息进行AR处理，生成所述AR设备模型；和/或，自所述图像信息中提取所述设备实体的特征信息，自预先建立的信息库中调用与所述特征信息对应的所述AR设备模型；
和/或，
接收由扫描模块扫描所述设备实体或其识别图像、和/或由输入模块输入得到的所述设备实体的识别信息；
根据设定识别信息与设定AR设备模型的对应关系，确定与所述识别信息对应的所述AR设备模型。
12.根据权利要求11所述的装置，其特征在于，其中，
所述特征信息，包括：外部轮廓；
和/或，
所述识别信息，包括：二维码、条形码、ID码、RF标签中的至少之一。
13.根据权利要求10-12之一所述的装置，其特征在于，还包括：
所述通信单元，还用于接收所述设备实体对所述控制指令的执行结果。
14.根据权利要求13所述的装置，其特征在于，所述通信单元接收所述设备实体对所述控制指令的执行结果，具体包括：
接收由所述设备实体执行所述控制指令后主动发送的执行结果。
15.根据权利要求13或14所述的装置，其特征在于，还包括：
所述控制单元，还用于当未收到所述执行结果时，发送查询请求，以请求所述设备实体发送所述执行结果。
16.根据权利要求15所述的装置，其特征在于，还包括：
所述控制单元，还用于当连续发送设定次数的查询消息仍未收到回应时，放弃查询；和/或，
当确定所述设备实体未执行所述控制指令时，恢复发送所述控制指令前的状态。
17.根据权利要求13-16之一所述的装置，其特征在于，还包括：
所述控制单元，还用于确定与所述执行结果对应的所述设备实体的当前运行状态；
所述通信单元，还用于将所述当前运行状态同步虚拟显示至所述AR设备模型中，以实现所述AR设备模型与所述当前运行状态的同步显示。
18.根据权利要求10-17之一所述的装置，其特征在于，其中，
所述设备实体，包括：空调器、热水器、冰箱、洗衣机、电磁炉、电暖气、电烤箱、电饭煲、电风扇、净水机、空气净化器、抽油烟机、消毒柜中的至少之一；
和/或，
所述触摸位置信息，包括：所述AR设备模型的顶部、底部、机身任一位置、机身所在显示界面中除所述机身之外的任一位置中的至少之一；
和/或，
所述控制指令，包括：开机、关机、开度、运行模式中的至少之一。
19.一种存储设备，其特征在于，所述存储设备中存储有多条指令；所述多条指令，用于由处理器加载并执行如权利要求1-9任一所述的交互方法。
20.一种终端，其特征在于，包括：
处理器，用于执行多条指令；
存储器，用于存储多条指令；
其中，所述多条指令，用于由所述存储器存储，并由所述处理器加载并执行如权利要求1-9任一所述的交互方法；
或者，
如权利要求10-18任一所述的交互装置。
CN201710920151.2A 2017-09-30 2017-09-30 一种交互方法、装置、存储设备及终端 Pending CN107861388A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710920151.2A CN107861388A (zh) 2017-09-30 2017-09-30 一种交互方法、装置、存储设备及终端
PCT/CN2018/091128 WO2019062210A1 (zh) 2017-09-30 2018-06-13 一种交互方法、装置、存储设备及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710920151.2A CN107861388A (zh) 2017-09-30 2017-09-30 一种交互方法、装置、存储设备及终端

Publications (1)

Publication Number Publication Date
CN107861388A true CN107861388A (zh) 2018-03-30

Family

ID=61698267

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710920151.2A Pending CN107861388A (zh) 2017-09-30 2017-09-30 一种交互方法、装置、存储设备及终端

Country Status (2)

Country Link
CN (1) CN107861388A (zh)
WO (1) WO2019062210A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108958057A (zh) * 2018-08-01 2018-12-07 珠海格力电器股份有限公司 家电设备的控制方法及装置、存储介质、电子装置
CN109442706A (zh) * 2018-10-26 2019-03-08 广东美的制冷设备有限公司 空调器控制方法、服务器、移动终端以及存储介质
WO2019062210A1 (zh) * 2017-09-30 2019-04-04 格力电器（武汉）有限公司 一种交互方法、装置、存储设备及终端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105843054A (zh) * 2016-03-22 2016-08-10 美的集团股份有限公司 控制家居设备的方法、智能家居系统及移动设备
CN106126014A (zh) * 2016-06-16 2016-11-16 北京小米移动软件有限公司 交互界面的生成方法及装置
CN106302039A (zh) * 2016-07-29 2017-01-04 海尔优家智能科技（北京）有限公司 一种安全控制智能家电的方法和装置
US20170108838A1 (en) * 2015-10-14 2017-04-20 Hand Held Products, Inc. Building lighting and temperature control with an augmented reality system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8751049B2 (en) * 2010-05-24 2014-06-10 Massachusetts Institute Of Technology Kinetic input/output
CN106648297A (zh) * 2016-10-09 2017-05-10 广州艾想电子科技有限公司 一种基于vr设备的智能设备控制方法及装置
CN107861388A (zh) * 2017-09-30 2018-03-30 珠海格力电器股份有限公司 一种交互方法、装置、存储设备及终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170108838A1 (en) * 2015-10-14 2017-04-20 Hand Held Products, Inc. Building lighting and temperature control with an augmented reality system
CN105843054A (zh) * 2016-03-22 2016-08-10 美的集团股份有限公司 控制家居设备的方法、智能家居系统及移动设备
CN106126014A (zh) * 2016-06-16 2016-11-16 北京小米移动软件有限公司 交互界面的生成方法及装置
CN106302039A (zh) * 2016-07-29 2017-01-04 海尔优家智能科技（北京）有限公司 一种安全控制智能家电的方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019062210A1 (zh) * 2017-09-30 2019-04-04 格力电器（武汉）有限公司 一种交互方法、装置、存储设备及终端
CN108958057A (zh) * 2018-08-01 2018-12-07 珠海格力电器股份有限公司 家电设备的控制方法及装置、存储介质、电子装置
CN109442706A (zh) * 2018-10-26 2019-03-08 广东美的制冷设备有限公司 空调器控制方法、服务器、移动终端以及存储介质

Also Published As

Publication number Publication date
WO2019062210A1 (zh) 2019-04-04

Similar Documents

Publication Publication Date Title
CN103827846B (zh) 基于上下文感知邻近度的无线连接建立
CN107861388A (zh) 一种交互方法、装置、存储设备及终端
CN104023050B (zh) 一种设备云环境下设备协同多屏互动系统及其方法
CN108282677A (zh) 通过客户端实现内容投屏的方法、投屏装置及系统
CN107203144B (zh) 智能家居的控制方法及系统、集中控制器
CN105915418A (zh) 一种家电控制方法及装置
CN109361869A (zh) 一种拍摄方法及终端
CN111031108B (zh) 一种同步方法及电子设备
CN102724577A (zh) 基于手持设备对电视控制操作的方法及系统
CN101771834B (zh) 显示系统及其信息显示方法
CN107209601A (zh) 图像处理装置、图像处理系统和图像处理方法
CN109815676A (zh) 一种隐私空间操作方法及终端设备
CN107911267A (zh) 智能家电信息显示位置调整方法和装置
CN110032156A (zh) 家居设备的控制和调整方法、终端及家居设备
CN109408171A (zh) 一种显示控制方法及终端
CN107103668A (zh) 一种门禁系统信息传输方法、装置及服务器
CN108572555A (zh) 油烟机和基于油烟机的家庭互联控制方法
KR20150005800A (ko) 원격 제어 가능한 가전 기기와 이를 위한 이동통신 단말기 및 가전 기기 관리 시스템
CN110022551A (zh) 一种信息交互方法及终端设备
CN113645596A (zh) 一种基于物联网的电动床组网配对方法和装置
CN104146585A (zh) 烹饪系统
CN102594630A (zh) 智慧家庭系统
CN106292305A (zh) 一种用于厨房环境的多媒体装置
CN111048016A (zh) 产品展示方法、装置及系统
CN108553878A (zh) 一种基于3g或4g移动网络的远程控制抓娃娃机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180330