CN115220356A - 智能设备控制方法、装置、存储介质及设备 - Google Patents

智能设备控制方法、装置、存储介质及设备 Download PDF

Info

Publication number
CN115220356A
CN115220356A CN202210714329.9A CN202210714329A CN115220356A CN 115220356 A CN115220356 A CN 115220356A CN 202210714329 A CN202210714329 A CN 202210714329A CN 115220356 A CN115220356 A CN 115220356A
Authority
CN
China
Prior art keywords
target
virtual
control instruction
influence
influence degree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210714329.9A
Other languages
English (en)
Inventor
高斌
黄晓庆
马世奎
尹东奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cloudminds Shanghai Robotics Co Ltd
Original Assignee
Cloudminds Shanghai Robotics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cloudminds Shanghai Robotics Co Ltd filed Critical Cloudminds Shanghai Robotics Co Ltd
Priority to CN202210714329.9A priority Critical patent/CN115220356A/zh
Publication of CN115220356A publication Critical patent/CN115220356A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/418Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2642Domotique, domestic, home control, automation, smart house

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Manufacturing & Machinery (AREA)
  • Quality & Reliability (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及一种智能设备控制方法、装置、存储介质及设备,以提高智能设备控制的智能程度。该方法包括:响应于接收到向目标设备发起的控制指令,控制虚拟世界中目标虚拟设备执行控制指令,得到虚拟运行信息,其中,目标虚拟设备是真实世界中的目标设备在虚拟世界中的映射对象,虚拟运行信息包括目标虚拟设备在执行控制指令后对虚拟世界造成影响的影响范围;确定虚拟世界中处于影响范围内的目标虚拟对象,以及控制指令对目标虚拟对象的影响程度;根据影响程度确定指令执行策略;根据指令执行策略控制目标设备执行控制指令。

Description

智能设备控制方法、装置、存储介质及设备
技术领域
本公开涉及智能控制技术领域,具体地,涉及一种智能设备控制方法、装置、存储介质及设备。
背景技术
随着智能控制技术的发展,各种各样的智能设备应运而生。相关技术中,可通过多个智能设备之间的配合运行,给用户带来不同的模式体验。例如,在“晚安模式”下,可以根据该模式对应的组合指令自动关闭卧室的灯、窗帘以及开启状态的电视设备等。还例如,可以根据用户发出的关灯指令控制对应的灯光设备关闭。然而,直接执行模式对应的组合指令或其他单一控制指令的方式不够灵活,智能程度较低。
发明内容
本公开的目的是提供一种智能设备控制方法、装置、存储介质及设备,以解决相关技术中存在的问题。
为了实现上述目的,本公开实施例的第一方面提供一种智能设备控制方法,所述方法包括:
响应于接收到向目标设备发起的控制指令,控制虚拟世界中目标虚拟设备执行所述控制指令,得到虚拟运行信息,其中,所述目标虚拟设备是真实世界中的所述目标设备在所述虚拟世界中的映射对象,所述虚拟运行信息包括所述目标虚拟设备在执行所述控制指令后对所述虚拟世界造成影响的影响范围;
确定所述虚拟世界中处于所述影响范围内的目标虚拟对象,以及所述控制指令对所述目标虚拟对象的影响程度;
根据所述影响程度确定指令执行策略;
根据所述指令执行策略控制所述目标设备执行所述控制指令。
可选地,所述确定所述控制指令对所述目标虚拟对象的影响程度,包括:
获取所述目标虚拟对象对应的目标对象数据;
根据所述目标虚拟对象的目标对象数据、所述虚拟运行信息以及所述虚拟世界的环境信息确定所述控制指令对所述目标虚拟对象的影响程度。
可选地,所述根据所述目标虚拟对象的目标对象数据、所述虚拟运行信息以及所述虚拟世界的环境信息确定所述控制指令对所述目标虚拟对象的影响程度,包括:
将所述目标虚拟对象的目标对象数据、所述虚拟运行信息以及所述虚拟世界的环境信息输入训练完成的评估模型,得到所述训练完成的评估模型输出的表征所述控制指令对所述目标虚拟对象的影响程度的结果。
可选地,所述目标虚拟对象包括所述控制指令对应的目标影响对象,以及处于所述影响范围内、除了所述目标影响对象之外的其他虚拟对象,相应地,所述影响程度包括对所述目标影响对象的第一影响程度和对所述其他虚拟对象的第二影响程度;
所述根据所述影响程度确定指令执行策略,包括:
在所述第一影响程度的数值大于或等于第一预设阈值,且所述第二影响程度的数值小于第二预设阈值的情况下,将第一预设策略确定为所述指令执行策略;
所述第一预设策略是所述目标设备在所述控制指令下对应的候选策略中的一者。
可选地,所述根据所述影响程度确定指令执行策略,包括:
在所述第一影响程度的数值小于所述第一预设阈值,且所述第二影响程度的数值小于所述第二预设阈值的情况下,或者,在所述第一影响程度的数值大于或等于所述第一预设阈值,且所述第二影响程度的数值大于或等于所述第二预设阈值的情况下,将第二预设策略确定为所述指令执行策略;
所述第二预设策略是所述目标设备在所述控制指令下对应的候选策略中的一者。
可选地,所述根据所述影响程度确定指令执行策略,包括:
在所述第一影响程度的数值小于所述第一预设阈值,且所述第二影响程度的数值大于或等于所述第二预设阈值的情况下,将第三预设策略确定为所述指令执行策略;
所述第三预设策略是所述目标设备在所述控制指令下对应的候选策略中的一者。
可选地,在所述目标虚拟对象的个数为1的情况下,所述根据所述影响程度确定指令执行策略,包括:
在所述影响程度的影响数值大于或等于第三预设阈值的情况下,将第一预设策略确定为所述指令执行策略;
在所述影响数值小于所述第三预设阈值的情况下,将第二预设策略或第三预设策略确定为所述指令执行策略;
所述目标设备在所述控制指令下对应的候选策略包括所述第一预设策略、所述第二预设策略和所述第三预设策略。
可选地,在根据所述指令执行策略控制所述目标设备执行所述控制指令之后,所述方法还包括:
根据所述目标设备的实际运行信息更新所述目标虚拟设备的虚拟运行信息,以使所述目标虚拟设备的虚拟运行信息与所述目标设备的实际运行信息一致。
可选地,所述虚拟世界为数字孪生世界,所述方法还包括:
通过数字孪生技术将真实世界中的所述目标设备映射到所述虚拟世界中,得到所述目标虚拟设备。
本公开实施例的第二方面提供一种智能设备控制装置,所述装置包括:
响应模块,用于响应于接收到向目标设备发起的控制指令,控制虚拟世界中目标虚拟设备执行所述控制指令,得到虚拟运行信息,其中,所述目标虚拟设备是真实世界中的所述目标设备在所述虚拟世界中的映射对象,所述虚拟运行信息包括所述目标虚拟设备在执行所述控制指令后对所述虚拟世界造成影响的影响范围;
第一确定模块,用于确定所述虚拟世界中处于所述影响范围内的目标虚拟对象,以及所述控制指令对所述目标虚拟对象的影响程度;
第二确定模块,用于根据所述影响程度确定指令执行策略;
控制模块,用于根据所述指令执行策略控制所述目标设备执行所述控制指令。
本公开实施例的第三方面提供一种电子设备,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现第一方面中方法的步骤。
本公开实施例的第四方面提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现第一方面中方法的步骤。
相关技术通常直接控制设备执行模式组合指令或单一控制指令,然而这样忽略了指令对应场景的变化情况,无法将场景中受该指令影响的对象纳入考虑,从而使得这种方式的执行效果不能贴近事实生活,智能程度较低。相较于相关技术中控制智能设备的方式,本公开提供的技术方案通过在虚拟世界中确定受到控制指令影响的目标虚拟对象、以及执行控制指令对目标虚拟对象的影响程度,并根据影响程度确定指令执行策略,从而可以根据指令执行策略灵活控制真实世界中的目标设备执行控制指令。这样可以使得控制指令的执行效果更加贴近于事实生活,避免对受该控制指令影响的对象造成不便或损坏,智能程度高。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
图1是根据本公开一示例性实施例示出的一种智能设备控制方法的流程图。
图2是根据本公开一示例性实施例示出的一种智能设备控制装置的框图。
图3是根据本公开一示例性实施例示出的一种电子设备的框图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。
需要说明的是,本公开中所有获取信号、信息或数据的动作都是在遵照所在地国家相应的数据保护法规政策的前提下,并获得由相应装置所有者给予授权的情况下进行的。
相关技术可通过多个智能设备之间的配合运行,给用户带来不同的模式体验。例如,在“离开客厅模式”下,可以根据该模式对应的组合指令自动关闭客厅的灯、开启状态的电视设备以及其他电器设备等。然而,在客厅中有用户B处于“观影模式”的情况下,若用户A触发了“离开客厅模式”,那么直接按照“离开客厅模式”对应的组合指令控制智能设备,会给用户B造成不便。可见,相关技术直接控制目标设备执行模式组合指令或单一控制指令的方式不能观测到指令对应场景的情况,无法将场景中受该指令影响的对象纳入考虑,从而使得这种方式的执行效果不能贴近事实生活,智能程度较低。
有鉴于此,本公开实施例提供一种智能设备控制方法,通过在虚拟世界中确定受到控制指令影响的目标虚拟对象、以及执行控制指令对目标虚拟对象的影响程度,并根据影响程度确定指令执行策略,从而可以根据指令执行策略灵活控制真实世界中的目标设备执行控制指令。这样可以使得控制指令的执行效果更加贴近于事实生活,避免对受该控制指令影响的对象造成不便或损坏,智能程度高。
应说明的是,本公开实施例提供的智能设备控制方法可以应用于智能设备控制终端,该智能设备控制终端可以包括云端控制器和本地控制器。其中,云端控制器可以是设置在云端服务器的云端大脑,云端大脑可以将智能技术与人类辅助(HI,HumanIntelligence)融合,为机器人及智能设备提供高效、安全的云端智能运营服务。本地控制器可以是指本地的控制设备,例如移动电话、智能电话、笔记本电脑、数字广播接收器、个人数字助理(PDA)、平板电脑(PDA)等用户设备(User Equipment,UE)。云端控制器和本地控制器均可以加载与真实世界相对应的虚拟世界,并且可以通过两者之间的通信实现虚拟世界的同步。
其中,虚拟世界可以是指数字孪生世界,可以从真实世界中采集传感器数据,并通过数字孪生技术构建得到该数字孪生世界。不难理解,数字孪生世界(也即虚拟世界)中的虚拟环境信息与真实世界中的环境信息一致。其中虚拟环境信息可以包括从真实世界中映射得到的虚拟设备(例如虚拟灯、虚拟电视以及虚拟空调等)、虚拟动植物、虚拟建筑、虚拟人物、虚拟光、虚拟水、虚拟马路以及虚拟交通工具等。
在一实施例中,可以根据目标设备(即控制指令所控制的设备)实时采集到的环境信息和/或真实世界中的其他设备采集到的环境信息更新虚拟世界中的虚拟环境信息,以使虚拟世界中的虚拟环境信息与真实世界中的环境信息一致。
应说明的是,智能设备(可以包括目标设备和其他设备)可以是指自身可以接收和/或分享数据的设备,例如:智能灯、智能家电、智能音箱以及摄像头灯等其他物联网设备。智能设备还可以是指智能传感器,例如米波雷达、视觉摄像头、超声传感器、雷达传感器以及红外传感器等。
此外,可以通过有线网络、Wi-Fi、蓝牙、摄像头、超宽带(UWB,Ultra Wide Band)、超声、激光雷达、毫米波雷达以及红外等通信技术建立真实世界和虚拟世界之间的连接,以获取真实世界的变化(例如用户对智能设备进行了操作所造成的设备变化),以及将虚拟世界中的变化反馈至真实世界(例如将控制指令传输至真实世界对应的设备)。
参照图1,图1是根据本公开一示例性实施例示出的一种智能设备控制方法的流程图。如图1所示,该智能设备控制方法可以包括:
S101,响应于接收到向目标设备发起的控制指令,控制虚拟世界中目标虚拟设备执行控制指令,得到虚拟运行信息。
其中,目标虚拟设备是真实世界中的目标设备在虚拟世界中的映射对象,虚拟运行信息包括目标虚拟设备在执行控制指令后对虚拟世界造成影响的影响范围。
应说明的是,控制指令可以由本地用户发起,也可以由云端用户发起。用户可以通过语音发起控制指令,也可以通过终端设备上的程序软件发起控制指令,本公开对此不作具体限定。目标设备可以是指控制指令所控制的设备,目标设备的个数可以为一个或多个。由于虚拟世界的虚拟环境信息与真实世界的环境信息一致,并且目标虚拟设备是真实世界中的目标设备在虚拟世界中的映射对象,因此通过模拟控制虚拟世界中的目标虚拟设备执行控制指令得到的虚拟运行信息与真实世界中的目标设备执行控制指令得到的运行信息一致。虚拟运行信息所包括的目标虚拟设备在执行控制指令后对虚拟世界造成影响的影响范围也与目标设备在执行控制指令后对真实世界造成影响的影响范围一致。
不难理解的是,可以通过数字孪生技术将真实世界中的目标设备映射到虚拟世界中,得到目标虚拟设备,以及通过数字孪生技术模拟真实世界中目标设备执行控制指令得到的运行信息,得到在虚拟世界中目标虚拟设备执行控制指令得到的虚拟运行信息。
S102,确定虚拟世界中处于影响范围内的目标虚拟对象,以及控制指令对目标虚拟对象的影响程度。
S103,根据影响程度确定指令执行策略。
其中,目标虚拟对象可以是指受到控制指令影响的虚拟设备和虚拟人物(对应真实世界中的设备和人物)等。不难理解的是,在虚拟世界的虚拟环境信息与真实世界的环境信息一致的情况下,所确定的处于影响范围内的目标虚拟对象也与真实世界中处于影响范围内的目标对象一致。在此基础之上,可以确定控制指令对目标虚拟对象的影响程度,以及根据影响程度确定指令执行策略。
S104,根据指令执行策略控制目标设备执行控制指令。
应当理解的是,可以根据指令执行策略灵活控制目标设备执行控制指令,以提高指令执行的灵活性和指令执行效果的智能程度,从而提升用户体验。
本公开提供的技术方案通过在虚拟世界中确定受到控制指令影响的目标虚拟对象、以及执行控制指令对目标虚拟对象的影响程度,并根据影响程度确定指令执行策略,从而可以根据指令执行策略灵活控制真实世界中的目标设备执行控制指令。这样可以使得控制指令的执行效果更加贴近于事实生活,避免对受该控制指令影响的对象造成不便或损坏,智能程度高。
需说明的是,通过数字孪生技术,可以在虚拟世界中建立语义地图,例如为虚拟世界中的虚拟灯建立ID(该ID可以用于标识虚拟灯)。还可以模拟真实世界中设备的参数/属性、运行范围以及功能/作用等,为虚拟世界中的虚拟设备等设置运行参数/属性、运行范围以及运行能力等。
其中,针对设置运行参数/属性,例如虚拟灯的运行参数/属性可以包括开启/关闭、亮度调节、色温调节、颜色调节、是否可定时开关、延时开关、是否可语音控制、是否有按钮调节、是否需要电辅助运行以及剩余电量等。虚拟水杯的运行参数/属性可以包括底座大小、水杯容量以及水杯可放置在比底座大的平台上等。针对设置运行范围,例如可以模拟真实世界毫米波雷达可以检测到的范围设置虚拟毫米波雷达的运行范围。针对设置运行能力,例如对于真实世界中水杯盛水的作用,可以设置虚拟水杯的运行能力为水杯可以盛水,还例如对于真实世界中灯可以照明的功能,可以设置虚拟灯的运行能力为灯可以照明。
在此基础之上,虚拟运行信息可以包括虚拟设备的运行参数/属性、运行范围以及运行能力等。可以理解,在目标设备为1个的情况下,虚拟运行信息所包括的影响范围为该目标设备的运行范围。在目标设备为多个的情况下,虚拟运行信息所包括的影响范围为多个目标设备的运行范围的并集。
此外,虚拟运行信息还可以包括故障信息,该故障信息可以表征虚拟设备是否出现故障。在故障信息表征虚拟设备出现故障(例如设备老化)时,可以表明真实世界与该虚拟设备对应的设备也存在故障隐患。在此种情况下,可以向用户发送提示信息。
可选地,上述步骤S102中,确定控制指令对目标虚拟对象的影响程度,可以包括:
获取目标虚拟对象对应的目标对象数据;
根据目标虚拟对象的目标对象数据、虚拟运行信息以及虚拟世界的环境信息确定控制指令对目标虚拟对象的影响程度。
其中,在目标虚拟对象为虚拟人物的情况下,目标对象数据可以包括虚拟人物的历史习惯(例如历史使用时长)、性别、年龄、偏好以及特殊事项等。在目标虚拟对象为虚拟设备的情况下,目标对象数据可以包括虚拟设备的虚拟运行信息。
不难理解的是,可以根据目标虚拟对象的目标对象数据、虚拟运行信息以及虚拟世界的环境信息确定控制指令对目标虚拟对象的影响程度。
可选地,根据目标虚拟对象的目标对象数据、虚拟运行信息以及虚拟世界的环境信息确定控制指令对目标虚拟对象的影响程度,可以包括:
将目标虚拟对象的目标对象数据、虚拟运行信息以及虚拟世界的环境信息输入训练完成的评估模型,得到训练完成的评估模型输出的表征控制指令对目标虚拟对象的影响程度的结果。
其中,评估模型可以是在强化学习的训练框架下训练得到的。示例地,可以通过对真实世界的模拟得到目标对象数据样本、虚拟运行信息样本以及虚拟世界的环境信息样本等样本数据,并且可以根据这些样本数据在虚拟世界中对评估模型进行训练。在强化学习的训练过程中,可以根据评估模型输出的表征控制指令对目标虚拟对象的影响程度的结果以及该结果对应的标签值调整评估模型的训练参数。这样,在经过多次迭代训练之后,可以得到训练完成的评估模型。
还应说明的是,虚拟世界中的虚拟设备的运行参数/属性还可以包括预设的前置/后置条件,例如获取虚拟碗柜里的虚拟碗的前置条件可以为打开虚拟碗柜,放置虚拟水杯的前置条件为找到比虚拟水杯底座大的虚拟平台。前置/后置条件可以辅助评估模型评估控制指令对目标虚拟对象的影响程度。例如在控制指令表征将虚拟水杯放置到平台上时,若该平台比虚拟水杯底座小,则不满足前置条件,可表明执行控制指令对虚拟水杯的影响程度高。在此种情况下,可以停止执行控制指令,并提示用户执行该控制指令可能对水杯造成损坏。
可选地,在目标虚拟对象有多个的情况下,目标虚拟对象可以包括控制指令对应的目标影响对象,以及处于影响范围内、除了目标影响对象之外的其他虚拟对象,相应地,影响程度包括对目标影响对象的第一影响程度和对其他虚拟对象的第二影响程度。在此基础之上,上述步骤S103可以包括:
在第一影响程度的数值大于或等于第一预设阈值,且第二影响程度的数值小于第二预设阈值的情况下,将第一预设策略确定为指令执行策略。
其中,第一预设策略是目标设备在控制指令下对应的候选策略中的一者。
应说明的是,第一预设阈值和第二预设阈值可以为评估模型训练过程中的训练参数,可以根据评估模型迭代训练的结果调整第一预设阈值和第二预设阈值。不难理解的是,目标影响对象可以为执行控制指令所作用的对象(例如在控制指令为“晚安模式”时,目标影响对象可以是期望安静入睡的虚拟人物,该虚拟人物可以是发起控制指令的虚拟发起者,也可以是控制指令所作用的虚拟接受者)。其他虚拟对象可以是处于影响范围内、除了目标影响对象之外的虚拟人物和/或虚拟设备等。
还应说明的是,第一影响程度的数值大于或等于第一预设阈值可以表明执行控制指令对目标影响对象的影响程度高,也即该控制指令的执行效果符合预期。类似地,第二影响程度的数值小于第二预设阈值可以表明执行控制指令对其他虚拟对象的影响程度低,也即执行该控制指令对其他虚拟对象造成不便或损坏的可能性小。在此种情况下,可以将第一预设策略确定为指令执行策略。其中第一预设策略可以是直接执行控制指令。
可选地,上述步骤S103还可以包括:
在第一影响程度的数值小于第一预设阈值,且第二影响程度的数值小于第二预设阈值的情况下,或者,在第一影响程度的数值大于或等于第一预设阈值,且第二影响程度的数值大于或等于第二预设阈值的情况下,将第二预设策略确定为指令执行策略。
其中,第二预设策略是目标设备在控制指令下对应的候选策略中的一者。
在一实施例中,第一影响程度的数值小于第一预设阈值可以表明执行控制指令对目标影响对象的影响程度低,也即该控制指令的执行效果不符合预期。其中不符合预期例如可以是指在目标影响对象正在离开或者已经离开了执行控制指令的影响范围的情况下,执行控制指令无法作用于目标影响对象或者作用的程度低。类似地,第二影响程度的数值小于第二预设阈值可以表明执行控制指令对其他虚拟对象的影响程度低,也即执行该控制指令对其他虚拟对象造成不便或损坏的可能性小。在此种情况下,可以将第二预设策略确定为指令执行策略。其中第二预设策略可以是延后执行控制指令或者减弱执行控制指令。在具体实现中,可以根据实际情况确定第二预设策略是延后执行控制指令还是减弱执行控制指令,本公开对此不作具体限定。
例如,当执行控制指令对目标影响对象的影响程度低且对其他虚拟对象的影响程度低时,针对正在离开的目标影响对象,可以减弱执行控制指令,以及在确定目标影响对象已经离开了执行控制指令的影响范围时,可停止执行控制指令。此外,评估模型可以根据目标影响对象的历史习惯判定正在离开或者已经离开了的目标影响对象可能在预设时长后回到执行控制指令的影响范围,在此种情况下,可以在预设时长之后执行控制指令(即延后执行控制指令)。
在另一实施例中,第一影响程度的数值大于或等于第一预设阈值可以表明执行控制指令对目标影响对象的影响程度高,也即该控制指令的执行效果符合预期。类似地,第二影响程度的数值大于或等于第二预设阈值可以表明执行控制指令对其他虚拟对象的影响程度高,也即执行该控制指令对其他虚拟对象造成不便或损坏的可能性大。在此种情况下,可以将第二预设策略确定为指令执行策略。其中第二预设策略可以是延后执行控制指令或者减弱执行控制指令。在具体实现中,可以根据实际情况确定第二预设策略是延后执行控制指令还是减弱执行控制指令,本公开对此不作具体限定。
例如,当执行控制指令对目标影响对象的影响程度高且对其他虚拟对象的影响程度高时,评估模型可以根据其他虚拟对象的历史习惯判定其可能在预设时长后离开执行控制指令的影响范围,在此种情况下,可以在预设时长之后执行控制指令(即延后执行控制指令)。还可以减弱执行控制指令,以及可在确定其他虚拟对象已经离开了执行控制指令的影响范围时,正常执行控制指令。
可选地,上述步骤S103还可以包括:
在第一影响程度的数值小于第一预设阈值,且第二影响程度的数值大于或等于第二预设阈值的情况下,将第三预设策略确定为指令执行策略。
其中,第三预设策略是目标设备在控制指令下对应的候选策略中的一者。
可以理解的是,第一影响程度的数值小于第一预设阈值可以表明执行控制指令对目标影响对象的影响程度低,也即该控制指令的执行效果不符合预期。类似地,第二影响程度的数值大于或等于第二预设阈值可以表明执行控制指令对其他虚拟对象的影响程度高,也即执行该控制指令对其他虚拟对象造成不便或损坏的可能性大。在此种情况下,可以将第三预设策略确定为指令执行策略。其中第三预设策略可以是减弱执行控制指令或者不执行控制指令。
例如,在控制指令表征将虚拟水杯放置到平台上时(此时目标虚拟对象的目标影响对象为发起控制指令的虚拟发起者,其他虚拟对象包括虚拟水杯),若该平台比虚拟水杯底座小,则不满足前置条件。在此种情况下,第一影响程度的数值可小于第一预设阈值,第二影响程度可大于或等于第二预设阈值。也即执行控制指令对虚拟发起者的影响程度低(不能按照预期安全放置虚拟水杯),对虚拟水杯的影响程度高(可能造成虚拟水杯损坏)。在此种情况下,可以不执行或停止执行控制指令,并提示用户执行该控制指令可能对水杯造成损坏。
还例如,当执行控制指令对目标影响对象的影响程度低且对其他虚拟对象的影响程度高时,评估模型可以根据目标影响对象的历史习惯判定正在离开或者已经离开了的目标影响对象可能回到执行控制指令的影响范围,以及根据其他虚拟对象的历史习惯判定其可能离开执行控制指令的影响范围。在此种情况下,可以减弱执行控制指令,并可在确定目标影响对象回到影响范围以及其他虚拟对象已经离开了执行控制指令的影响范围时,正常执行控制指令。
还应说明的是,虽然目标设备在控制指令下对应的候选策略均可以包括第一预设策略、第二预设策略和第三预设策略,但是不同的目标设备在不同的控制指令下对应的候选策略所进行的调整略有不同。
例如,在“晚安模式”对应的控制指令下,目标设备可以包括灯、窗帘以及电视设备等。在此基础之上,第一预设策略可以是直接执行控制指令,即关闭灯、窗帘以及电视设备等。第二预设策略可以是延后执行控制指令或者减弱执行控制指令,其中延后执行控制指令可以是指在预设时长(预设时长可以根据实际情况而定,本公开对此不作具体限定)之后、或者在受到影响的对象(例如“晚安模式”的场景中存在需要灯光的对象C)不再被影响之后(例如对象C离开了“晚安模式”的场景)关闭灯、窗帘以及电视设备等。减弱执行控制指令可以是指调暗灯的亮度、关闭部分窗帘(例如在窗帘包括遮光帘和纱帘的情况下关闭纱帘)以及降低电视音量等。第三预设策略可以是减弱执行或者不执行控制指令。
还例如,在“养老院模式”下,用户发起倒水指令,目标设备可以包括饮水机、水杯以及倒水机器人等。在此基础之上,第一预设策略可以是直接执行控制指令,即控制倒水机器人端起水杯至饮水机倒水,并将盛水的水杯送至用户。第二预设策略可以是延后执行控制指令或者减弱执行控制指令,其中延后执行控制指令可以是指在预设时长之后执行控制指令。减弱执行控制指令可以是指升高/降低饮水机出水的温度,以使出水温度适合老人饮用。第三预设策略可以是减弱执行或者不执行控制指令。
其中不难理解的是,对于在“养老院模式”下的倒水指令,目标虚拟对象可以包括目标影响对象(例如需要喝水的虚拟人物),以及其他虚拟对象(例如虚拟饮水机)。由于虚拟饮水机通常设置有预设出水温度,因此在该预设出水温度与“养老院模式”下的出水温度不一致时,第一影响程度的数值可小于第一预设阈值,第二影响程度可大于或等于第二预设阈值。也即执行控制指令对目标影响对象的影响程度低(不能按照预期获得出水温度适合老人饮用的饮用水),对虚拟饮水机的影响程度高(虚拟饮水机的预设出水温度与“养老院模式”下的出水温度不一致)。在此种情况下,可以减弱执行控制指令,也即指升高/降低饮水机出水的温度,以使出水温度适合老人饮用。其中应当理解,相关技术直接执行倒水指令所获取的饮用水水温通常与饮水机预设出水温度一致。与相关技术相比,在饮水机预设出水温度偏高时,减弱执行指令可以是指降低饮水机出水的温度。在饮水机预设出水温度偏低时,减弱执行指令可以是指升高饮水机出水的温度。
可选地,在目标虚拟对象的个数为1的情况下,该目标虚拟对象可以是控制指令的虚拟发起者,也可以是处于影响范围内的其他虚拟对象(在此种情况下,虚拟发起者不在影响范围内)。在此基础之上,上述步骤S103可以包括:
在影响程度的影响数值大于或等于第三预设阈值的情况下,将第一预设策略确定为指令执行策略;
在影响数值小于第三预设阈值的情况下,将第二预设策略或第三预设策略确定为指令执行策略。
其中,目标设备在控制指令下对应的候选策略包括第一预设策略、第二预设策略和第三预设策略。
应说明的是,第三预设阈值可以为评估模型训练过程中的训练参数,可以根据评估模型迭代训练的结果调整第三预设阈值。
在一实施例中,影响程度的影响数值大于或等于第一预设阈值可以表明执行控制指令对目标虚拟对象的影响程度高,也即该控制指令的执行效果符合预期。在此种情况下,可以将第一预设策略确定为指令执行策略。
在另一实施例中,影响程度的影响数值小于第二预设阈值可以表明执行控制指令对目标虚拟对象的影响程度低,也即该控制指令的执行效果不符合预期。在此种情况下,可以将第二预设策略或第三预设策略确定为指令执行策略。在具体实现中,采用第二预设策略或是采用第三预设策略可以根据实际情况而定,本公开对此不作具体限定。
可选地,在根据指令执行策略控制目标设备执行控制指令之后,本公开实施例提供的技术方案还可以包括:
根据目标设备的实际运行信息更新目标虚拟设备的虚拟运行信息,以使目标虚拟设备的虚拟运行信息与目标设备的实际运行信息一致。
不难理解的是,在根据指令执行策略控制真实世界的目标设备执行控制指令之后,为了保持真实世界和虚拟世界的一致性,可以根据目标设备的实际运行信息更新目标虚拟设备的虚拟运行信息,从而使得目标虚拟设备的虚拟运行信息与目标设备的实际运行信息一致。
本公开提供的技术方案通过在虚拟世界中确定受到控制指令影响的目标虚拟对象、以及执行控制指令对目标虚拟对象的影响程度,并根据影响程度确定指令执行策略,从而可以根据指令执行策略灵活控制真实世界中的目标设备执行控制指令。这样可以使得控制指令的执行效果更加贴近于事实生活,避免对受该控制指令影响的对象造成不便或损坏,智能程度高。
基于同一发明构思,本公开实施例还提供一种智能设备控制装置100,参照图2,图2是根据本公开一示例性实施例示出的一种智能设备控制装置100的框图。智能设备控制装置100包括:
响应模块101,用于响应于接收到向目标设备发起的控制指令,控制虚拟世界中目标虚拟设备执行控制指令,得到虚拟运行信息,其中,目标虚拟设备是真实世界中的目标设备在虚拟世界中的映射对象,虚拟运行信息包括目标虚拟设备在执行控制指令后对虚拟世界造成影响的影响范围;
第一确定模块102,用于确定虚拟世界中处于影响范围内的目标虚拟对象,以及控制指令对目标虚拟对象的影响程度;
第二确定模块103,用于根据影响程度确定指令执行策略;
控制模块104,用于根据指令执行策略控制目标设备执行控制指令。
本公开提供的技术方案通过在虚拟世界中确定受到控制指令影响的目标虚拟对象、以及执行控制指令对目标虚拟对象的影响程度,并根据影响程度确定指令执行策略,从而可以根据指令执行策略灵活控制真实世界中的目标设备执行控制指令。这样可以使得控制指令的执行效果更加贴近于事实生活,避免对受该控制指令影响的对象造成不便或损坏,智能程度高。
可选地,第一确定模块102进一步用于:
获取目标虚拟对象对应的目标对象数据;
根据目标虚拟对象的目标对象数据、虚拟运行信息以及虚拟世界的环境信息确定控制指令对目标虚拟对象的影响程度。
可选地,第一确定模块102进一步用于:
将目标虚拟对象的目标对象数据、虚拟运行信息以及虚拟世界的环境信息输入训练完成的评估模型,得到训练完成的评估模型输出的表征控制指令对目标虚拟对象的影响程度的结果。
可选地,目标虚拟对象包括控制指令对应的目标影响对象,以及处于影响范围内、除了目标影响对象之外的其他虚拟对象,相应地,影响程度包括对目标影响对象的第一影响程度和对其他虚拟对象的第二影响程度;
第二确定模块103进一步用于:
在第一影响程度的数值大于或等于第一预设阈值,且第二影响程度的数值小于第二预设阈值的情况下,将第一预设策略确定为指令执行策略;
第一预设策略是目标设备在控制指令下对应的候选策略中的一者。
可选地,第二确定模块103进一步用于:
在第一影响程度的数值小于第一预设阈值,且第二影响程度的数值小于第二预设阈值的情况下,或者,在第一影响程度的数值大于或等于第一预设阈值,且第二影响程度的数值大于或等于第二预设阈值的情况下,将第二预设策略确定为指令执行策略;
第二预设策略是目标设备在控制指令下对应的候选策略中的一者。
可选地,第二确定模块103进一步用于:
在第一影响程度的数值小于第一预设阈值,且第二影响程度的数值大于或等于第二预设阈值的情况下,将第三预设策略确定为指令执行策略;
第三预设策略是目标设备在控制指令下对应的候选策略中的一者。
可选地,在目标虚拟对象的个数为1的情况下,第二确定模块103进一步用于:
在影响程度的影响数值大于或等于第三预设阈值的情况下,将第一预设策略确定为指令执行策略;
在影响数值小于第三预设阈值的情况下,将第二预设策略或第三预设策略确定为指令执行策略;
目标设备在控制指令下对应的候选策略包括第一预设策略、第二预设策略和第三预设策略。
可选地,智能设备控制装置100还包括更新模块,该更新模块用于:
在根据指令执行策略控制目标设备执行控制指令之后,根据目标设备的实际运行信息更新目标虚拟设备的虚拟运行信息,以使目标虚拟设备的虚拟运行信息与目标设备的实际运行信息一致。
可选地,虚拟世界为数字孪生世界,智能设备控制装置100还包括映射模块,该映射模块用于:
通过数字孪生技术将真实世界中的目标设备映射到虚拟世界中,得到目标虚拟设备。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
基于同一发明构思,本公开实施例还提供一种电子设备,参照图3,图3是根据本公开一示例性实施例示出的一种电子设备200的框图。如图3所示,该电子设备200可以包括:处理器201,存储器202。该电子设备200还可以包括多媒体组件203,输入/输出(I/O)接口204,以及通信组件205中的一者或多者。
其中,处理器201用于控制该电子设备200的整体操作,以完成上述的智能设备控制方法中的全部或部分步骤。存储器202用于存储各种类型的数据以支持在该电子设备200的操作,这些数据例如可以包括用于在该电子设备200上操作的任何应用程序或方法的指令,以及应用程序相关的数据,例如联系人数据、收发的消息、图片、音频、视频等等。该存储器202可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,例如静态随机存取存储器(Static Random Access Memory,简称SRAM),电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,简称EEPROM),可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,简称EPROM),可编程只读存储器(Programmable Read-Only Memory,简称PROM),只读存储器(Read-Only Memory,简称ROM),磁存储器,快闪存储器,磁盘或光盘。多媒体组件203可以包括屏幕和音频组件。其中屏幕例如可以是触摸屏,音频组件用于输出和/或输入音频信号。例如,音频组件可以包括一个麦克风,麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储器202或通过通信组件205发送。音频组件还包括至少一个扬声器,用于输出音频信号。I/O接口204为处理器201和其他接口模块之间提供接口,上述其他接口模块可以是键盘,鼠标,按钮等。这些按钮可以是虚拟按钮或者实体按钮。通信组件205用于该电子设备200与其他设备之间进行有线或无线通信。无线通信,例如Wi-Fi,蓝牙,近场通信(Near FieldCommunication,简称NFC),2G、3G、4G、NB-IOT、eMTC、或其他5G等等,或它们中的一种或几种的组合,在此不做限定。因此相应的该通信组件205可以包括:Wi-Fi模块,蓝牙模块,NFC模块等等。
在一示例性实施例中,电子设备200可以被一个或多个应用专用集成电路(Application Specific Integrated Circuit,简称ASIC)、数字信号处理器(DigitalSignal Processor,简称DSP)、数字信号处理设备(Digital Signal Processing Device,简称DSPD)、可编程逻辑器件(Programmable Logic Device,简称PLD)、现场可编程门阵列(Field Programmable Gate Array,简称FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述的智能设备控制方法。
在另一示例性实施例中,还提供了一种包括程序指令的计算机可读存储介质,该程序指令被处理器执行时实现上述的智能设备控制方法的步骤。例如,该计算机可读存储介质可以为上述包括程序指令的存储器202,上述程序指令可由电子设备200的处理器201执行以完成上述的智能设备控制方法。
在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的智能设备控制方法的代码部分。
以上结合附图详细描述了本公开的优选实施方式,但是,本公开并不限于上述实施方式中的具体细节,在本公开的技术构思范围内,可以对本公开的技术方案进行多种简单变型,这些简单变型均属于本公开的保护范围。
另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合,为了避免不必要的重复,本公开对各种可能的组合方式不再另行说明。
此外,本公开的各种不同的实施方式之间也可以进行任意组合,只要其不违背本公开的思想,其同样应当视为本公开所公开的内容。

Claims (12)

1.一种智能设备控制方法,其特征在于,所述方法包括:
响应于接收到向目标设备发起的控制指令,控制虚拟世界中目标虚拟设备执行所述控制指令,得到虚拟运行信息,其中,所述目标虚拟设备是真实世界中的所述目标设备在所述虚拟世界中的映射对象,所述虚拟运行信息包括所述目标虚拟设备在执行所述控制指令后对所述虚拟世界造成影响的影响范围;
确定所述虚拟世界中处于所述影响范围内的目标虚拟对象,以及所述控制指令对所述目标虚拟对象的影响程度;
根据所述影响程度确定指令执行策略;
根据所述指令执行策略控制所述目标设备执行所述控制指令。
2.根据权利要求1所述的方法,其特征在于,所述确定所述控制指令对所述目标虚拟对象的影响程度,包括:
获取所述目标虚拟对象对应的目标对象数据;
根据所述目标虚拟对象的目标对象数据、所述虚拟运行信息以及所述虚拟世界的环境信息确定所述控制指令对所述目标虚拟对象的影响程度。
3.根据权利要求2所述的方法,其特征在于,所述根据所述目标虚拟对象的目标对象数据、所述虚拟运行信息以及所述虚拟世界的环境信息确定所述控制指令对所述目标虚拟对象的影响程度,包括:
将所述目标虚拟对象的目标对象数据、所述虚拟运行信息以及所述虚拟世界的环境信息输入训练完成的评估模型,得到所述训练完成的评估模型输出的表征所述控制指令对所述目标虚拟对象的影响程度的结果。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述目标虚拟对象包括所述控制指令对应的目标影响对象,以及处于所述影响范围内、除了所述目标影响对象之外的其他虚拟对象,相应地,所述影响程度包括对所述目标影响对象的第一影响程度和对所述其他虚拟对象的第二影响程度;
所述根据所述影响程度确定指令执行策略,包括:
在所述第一影响程度的数值大于或等于第一预设阈值,且所述第二影响程度的数值小于第二预设阈值的情况下,将第一预设策略确定为所述指令执行策略;
所述第一预设策略是所述目标设备在所述控制指令下对应的候选策略中的一者。
5.根据权利要求4所述的方法,其特征在于,所述根据所述影响程度确定指令执行策略,包括:
在所述第一影响程度的数值小于所述第一预设阈值,且所述第二影响程度的数值小于所述第二预设阈值的情况下,或者,在所述第一影响程度的数值大于或等于所述第一预设阈值,且所述第二影响程度的数值大于或等于所述第二预设阈值的情况下,将第二预设策略确定为所述指令执行策略;
所述第二预设策略是所述目标设备在所述控制指令下对应的候选策略中的一者。
6.根据权利要求4所述的方法,其特征在于,所述根据所述影响程度确定指令执行策略,包括:
在所述第一影响程度的数值小于所述第一预设阈值,且所述第二影响程度的数值大于或等于所述第二预设阈值的情况下,将第三预设策略确定为所述指令执行策略;
所述第三预设策略是所述目标设备在所述控制指令下对应的候选策略中的一者。
7.根据权利要求1-3中任一项所述的方法,其特征在于,在所述目标虚拟对象的个数为1的情况下,所述根据所述影响程度确定指令执行策略,包括:
在所述影响程度的影响数值大于或等于第三预设阈值的情况下,将第一预设策略确定为所述指令执行策略;
在所述影响数值小于所述第三预设阈值的情况下,将第二预设策略或第三预设策略确定为所述指令执行策略;
所述目标设备在所述控制指令下对应的候选策略包括所述第一预设策略、所述第二预设策略和所述第三预设策略。
8.根据权利要求4所述的方法,其特征在于,在根据所述指令执行策略控制所述目标设备执行所述控制指令之后,所述方法还包括:
根据所述目标设备的实际运行信息更新所述目标虚拟设备的虚拟运行信息,以使所述目标虚拟设备的虚拟运行信息与所述目标设备的实际运行信息一致。
9.根据权利要求1所述的方法,其特征在于,所述虚拟世界为数字孪生世界,所述方法还包括:
通过数字孪生技术将真实世界中的所述目标设备映射到所述虚拟世界中,得到所述目标虚拟设备。
10.一种智能设备控制装置,其特征在于,所述装置包括:
响应模块,用于响应于接收到向目标设备发起的控制指令,控制虚拟世界中目标虚拟设备执行所述控制指令,得到虚拟运行信息,其中,所述目标虚拟设备是真实世界中的所述目标设备在所述虚拟世界中的映射对象,所述虚拟运行信息包括所述目标虚拟设备在执行所述控制指令后对所述虚拟世界造成影响的影响范围;
第一确定模块,用于确定所述虚拟世界中处于所述影响范围内的目标虚拟对象,以及所述控制指令对所述目标虚拟对象的影响程度;
第二确定模块,用于根据所述影响程度确定指令执行策略;
控制模块,用于根据所述指令执行策略控制所述目标设备执行所述控制指令。
11.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-9中任一项所述方法的步骤。
12.一种电子设备,其特征在于,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现权利要求1-9中任一项所述方法的步骤。
CN202210714329.9A 2022-06-22 2022-06-22 智能设备控制方法、装置、存储介质及设备 Pending CN115220356A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210714329.9A CN115220356A (zh) 2022-06-22 2022-06-22 智能设备控制方法、装置、存储介质及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210714329.9A CN115220356A (zh) 2022-06-22 2022-06-22 智能设备控制方法、装置、存储介质及设备

Publications (1)

Publication Number Publication Date
CN115220356A true CN115220356A (zh) 2022-10-21

Family

ID=83609753

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210714329.9A Pending CN115220356A (zh) 2022-06-22 2022-06-22 智能设备控制方法、装置、存储介质及设备

Country Status (1)

Country Link
CN (1) CN115220356A (zh)

Similar Documents

Publication Publication Date Title
CN108919669B (zh) 一种智能家居动态决策方法、装置和服务终端
CN108419453B (zh) 一种照明灯控制方法及其装置、照明灯
CN110853619B (zh) 人机交互方法、控制装置、被控装置及存储介质
CN105700389B (zh) 一种智能家庭自然语言控制方法
CN104852975B (zh) 一种家居设备调用方法及装置
US11782590B2 (en) Scene-operation method, electronic device, and non-transitory computer readable medium
AU2018246843A1 (en) Data learning server and method for generating and using learning model thereof
CN113341743B (zh) 智能家居设备控制方法、装置、电子设备及存储介质
CN104039040A (zh) 智能灯的控制方法及装置
WO2020252703A1 (zh) 设备控制方法、装置、服务器及存储介质
CN111295022A (zh) 一种灯光控制方法及系统
CN105099386A (zh) 家用电器的控制系统和控制方法
TW201617784A (zh) 根據觸發策略定時驅動對應裝置之控制系統及其方法
CN111895580A (zh) 一种空调器防打扰控制方法、装置及空调器
CN112785802B (zh) 智能家居安防系统控制方法、装置、电子设备及介质
CN115793481A (zh) 设备控制方法、装置、电子设备及存储介质
CN112162624B (zh) 显示器控制方法和装置、线控器
CN115220356A (zh) 智能设备控制方法、装置、存储介质及设备
US11818820B2 (en) Adapting a lighting control interface based on an analysis of conversational input
US11856675B2 (en) Providing a notification for a lighting device without user-specified power-switch behavior
CN114815635A (zh) 计算机可读存储介质、智能面板及其语音交互方法
CN113641105A (zh) 一种家电设备控制方法、装置、设备及存储介质
CN110609482A (zh) 用电设备控制方法、装置及电子设备
CN112328199A (zh) 屏幕控制方法、装置、智能空调以及计算机可读存储介质
CN107241838B (zh) 单火线开关工作模式切换方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination