CN115473755A - 基于数字孪生的智能设备的控制方法、装置 - Google Patents
基于数字孪生的智能设备的控制方法、装置 Download PDFInfo
- Publication number
- CN115473755A CN115473755A CN202210908385.6A CN202210908385A CN115473755A CN 115473755 A CN115473755 A CN 115473755A CN 202210908385 A CN202210908385 A CN 202210908385A CN 115473755 A CN115473755 A CN 115473755A
- Authority
- CN
- China
- Prior art keywords
- target
- equipment
- display
- intelligent
- panorama
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 238000010586 diagram Methods 0.000 claims abstract description 80
- 230000000694 effects Effects 0.000 claims abstract description 16
- 238000004590 computer program Methods 0.000 claims description 9
- 230000003993 interaction Effects 0.000 abstract description 13
- 230000006870 function Effects 0.000 description 10
- 241000282326 Felis catus Species 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 238000005406 washing Methods 0.000 description 4
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 4
- 238000010411 cooking Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000004887 air purification Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 235000019504 cigarettes Nutrition 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000005057 refrigeration Methods 0.000 description 2
- 238000010408 sweeping Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 238000007664 blowing Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种基于数字孪生的智能设备的控制方法、装置，涉及智慧家庭技术领域，该基于数字孪生的智能设备的控制方法包括：在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从目标空间的全景展示图中获取目标智能设备对应的设备展示图；显示设备展示图；在设备展示图上显示目标智能设备执行控制操作后的设备状态。解决了相关技术中，智能设备提供的设备交互体验较差等问题，实现了提升了智能设备提供的设备交互体验的技术效果。
Description
技术领域
本申请涉及智慧家庭技术领域，具体而言，涉及一种基于数字孪生的智能设备的控制方法、装置。
背景技术
随着智能设备的逐步发展，用户可以通过多种多样的方式与智能设备进行交互，在用户对设备进行控制之后，往往会通过固定的虚拟图片或者虚拟动画等等方式，示意用户所希望控制的设备的运行状态。比如：用户控制智能空调在制冷模式25℃下运行，在空调调整至制冷模式25℃运行的情况下，往往固定显示虚拟空调打开并吹风的动图。这样的呈现方式的真实感较低，导致用户与智能设备进行交互的体验感较差。
针对相关技术中，智能设备提供的设备交互体验较差等问题，尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种基于数字孪生的智能设备的控制方法、装置，以至少解决相关技术中，智能设备提供的设备交互体验较差等问题。
根据本申请的一个实施例，提供了一种基于数字孪生的智能设备的控制方法、装置，包括：在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
显示所述设备展示图；
在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
可选的，所述从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图，包括：
从所述全景展示图中确定所述目标智能设备所在的目标区域；
获取所述全景展示图中所述目标区域对应的目标区域全景图；
从所述目标区域全景图中获取所述设备展示图。
可选的，所述从所述目标区域全景图中获取所述设备展示图，包括：
在所述目标区域全景图上创建所述目标智能设备所对应的感兴趣区域；
按照所述感兴趣区域对所述目标区域全景图进行编辑，得到所述设备展示图。
可选的，在所述从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图之前，所述方法还包括：
获取对所述目标空间拍摄的多个初始图像；
将所述多个初始图像拼接为初始全景图；
从所述初始全景图上识别所述目标空间中部署的智能设备的设备信息，得到所述全景展示图。
可选的，所述将所述多个初始图像拼接为初始全景图，包括：
从每个所述初始图像上识别目标对象的轮廓信息；
根据所述轮廓信息从每个所述初始图像上去除所述目标对象，得到多个参考图像；
对每个所述参考图像上去除了所述目标对象的区域进行填充，得到多个候选图像；
对多个所述候选图像进行拼接，得到所述初始全景图。
可选的，所述从所述初始全景图上识别所述目标空间中部署的智能设备的设备信息，得到所述全景展示图，包括：
对所述初始全景图进行空间类型识别，得到所述目标空间对应的目标空间类型；
对所述初始全景图进行智能设备识别，得到所述目标空间中部署的智能设备的设备标识和设备位置作为所述设备信息；
将携带了所述目标空间类型和所述设备信息的所述初始全景图确定为所述全景展示图。
可选的，所述在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态，包括：
获取所述设备状态所对应的展示效果以及所述设备状态对应的设备参数；
在所述设备展示图上所述目标智能设备所在区域展示所述展示效果并在所述设备展示图上的参数展示区域展示所述设备参数。
根据本申请的另一个实施例，还提供了一种基于数字孪生的智能设备的控制装置，包括：
第一获取模块，用于在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
第一显示模块，用于显示所述设备展示图；
第二显示模块，用于在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
根据本申请实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述基于数字孪生的智能设备的控制方法。
根据本申请实施例的又一方面，还提供了一种电子装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，上述处理器通过计算机程序执行上述的基于数字孪生的智能设备的控制方法。
在本申请实施例中，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从目标空间的全景展示图中获取目标智能设备对应的设备展示图；显示设备展示图；在设备展示图上显示目标智能设备执行控制操作后的设备状态，即在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，可以从目标空间的真实的全景展示图中获取目标智能设备对应的设备展示图；显示设备展示图，在结合目标空间的真实场景的设备展示图上形象直观的显示目标智能设备执行控制操作后的设备状态。采用上述技术方案，解决了相关技术中，智能设备提供的设备交互体验较差等问题，实现了提升智能设备提供的设备交互体验的技术效果。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是根据本申请实施例的一种基于数字孪生的智能设备的控制方法的硬件环境示意图；
图2是根据本申请实施例的一种基于数字孪生的智能设备的控制方法的流程图；
图3是根据本申请实施例的一种识别目标对象的轮廓信息的示意图；
图4是根据本申请实施例的一种获取参考图像的示意图；
图5是根据本申请实施例的一种获取候选图像的示意图；
图6是根据本申请实施例的一种全景展示图的示意图；
图7是根据本申请实施例的一种在设备展示图上显示设备状态的示意图；
图8是根据本申请实施例的一种基于数字孪生的智能设备的控制装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本申请实施例的一个方面，提供了一种基于数字孪生的智能设备的控制方法。该基于数字孪生的智能设备的控制方法广泛应用于智慧家庭(Smart Home)、智能家居、智能家用设备生态、智慧住宅(Intelligence House)生态等全屋智能数字化控制应用场景。可选地，在本实施例中，上述基于数字孪生的智能设备的控制方法可以应用于如图1所示的由终端设备102和服务器104所构成的硬件环境中。如图1所示，服务器104通过网络与终端设备102进行连接，可用于为终端或终端上安装的客户端提供服务(如应用服务等)，可在服务器上或独立于服务器设置数据库，用于为服务器104提供数据存储服务，可在服务器上或独立于服务器配置云计算和/或边缘计算服务，用于为服务器104提供数据运算服务。
上述网络可以包括但不限于以下至少之一：有线网络，无线网络。上述有线网络可以包括但不限于以下至少之一：广域网，城域网，局域网，上述无线网络可以包括但不限于以下至少之一：WIFI(Wireless Fidelity，无线保真)，蓝牙。终端设备102可以并不限定于为PC、手机、平板电脑、智能空调、智能烟机、智能冰箱、智能烤箱、智能炉灶、智能洗衣机、智能热水器、智能洗涤设备、智能洗碗机、智能投影设备、智能电视、智能晾衣架、智能窗帘、智能影音、智能插座、智能音响、智能音箱、智能新风设备、智能厨卫设备、智能卫浴设备、智能扫地机器人、智能擦窗机器人、智能拖地机器人、智能空气净化设备、智能蒸箱、智能微波炉、智能厨宝、智能净化器、智能饮水机、智能门锁等。
在本实施例中提供了一种基于数字孪生的智能设备的控制方法，应用于上述终端设备。图2是根据本申请实施例的一种基于数字孪生的智能设备的控制方法的流程图，如图2所示，该流程包括如下步骤：
步骤S202，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
步骤S204，显示所述设备展示图；
步骤S206，在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
通过上述步骤，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，可以从目标空间的真实的全景展示图中获取目标智能设备对应的设备展示图；显示设备展示图，在结合目标空间的真实场景的设备展示图上形象直观的显示目标智能设备执行控制操作后的设备状态。采用上述技术方案，解决了相关技术中，智能设备提供的设备交互体验较差等问题，实现了提升智能设备提供的设备交互体验的技术效果。
在上述步骤S202提供的技术方案中，可以但不限于在目标空间中部署的一个或者多个目标智能设备执行了控制操作的情况下，从目标空间的真实的全景展示图中获取目标智能设备所对应的设备展示图，设备展示图可以真实的展示目标智能设备在目标空间中的部署背景，实现了将目标智能设备与目标空间的真实场景结合起来，增加了目标智能设备所对应的设备展示图的真实性，提升了用户的体验。
可选地，在本实施例中，每个目标空间都有对应的全景展示图，全景展示图中可以但不限于包括了部署在目标空间中的所有的智能设备所对应的设备展示图，并且全景展示图与目标空间中真实的环境相同，使得全景展示图能够真实形象的展示目标空间。目标空间可以但不限于包括具有办公功能、烹饪功能、以及娱乐功能等等功能的空间，比如：具有办公功能的书房、办公室、会议室等等，具有休息功能的卧室、阳台等等，以及具有烹饪功能的厨房、餐厅等等。
可选地，在本实施例中，目标空间中部署的智能设备可以但不限于包括智能空调、智能烟机、智能冰箱、智能烤箱、智能炉灶、智能洗衣机、智能热水器、智能洗涤设备、智能洗碗机、智能投影设备、智能电视、智能晾衣架、智能窗帘、智能影音、智能插座、智能音响、智能音箱、智能新风设备、智能厨卫设备、智能卫浴设备、智能扫地机器人、智能擦窗机器人、智能拖地机器人、智能空气净化设备、智能蒸箱、智能微波炉、智能厨宝、智能净化器、智能饮水机、智能门锁等等。
在一个示范性实施例中，可以但不限于通过以下方式获取目标智能设备对应的设备展示图：从所述全景展示图中确定所述目标智能设备所在的目标区域；获取所述全景展示图中所述目标区域对应的目标区域全景图；从所述目标区域全景图中获取所述设备展示图。
可选地，在本实施例中，目标区域全景图中可以但不限于携带了目标智能设备在目标空间中的真实的部署区域，目标智能设备在全景展示图中所在的目标区域可以但不限于与目标智能设备在目标空间中的真实的部署区域相对应，实现了通过区域全景图展真实形象的展示目标智能设备在目标空间中的部署情况，保证了区域全景图的真实性。
可选地，在本实施例中，可以但不限于通过确定目标智能设备在全景展示图中的像素位置或者目标智能设备在目标空间中的真实位置等等方式，确定目标智能设备在全景展示图中的目标区域，可以但不限于从全景展示图中获取目标区域对应的目标区域全景图，避免了获取到部署在目标空间中的其它智能设备的区域全景图，提升了获取目标智能设备所对应的设备展示图的准确度。
可选地，在本实施例中，可以但不限于按照目标空间中部署的智能设备，将全景展示图划分为具有对应关系的智能设备所在的区域和区域全景图，可以但不限于从具有对应关系的智能设备所在的区域和区域全景图中获取目标智能设备所在的目标区域所对应的目标区域全景图。设备展示图可以但不限于为目标区域全景图，或者，对目标区域全景图进行缩放、裁剪等等操作之后得到的设备展示图。
在一个示范性实施例中，可以但不限于通过以下方式获取设备展示图：在所述目标区域全景图上创建所述目标智能设备所对应的感兴趣区域；按照所述感兴趣区域对所述目标区域全景图进行编辑，得到所述设备展示图。
可选地，在本实施例中，可以但不限于在目标区域全景图上创建目标智能设备所对应的感兴趣区域，感兴趣区域可以但不限于用于显示用户的视觉关注重点(可以但不限于为目标智能设备)的区域，可以但不限于根据用户的显示需求在目标全景图上创建任意形状以及任意区域范围的以目标智能设备为主体的感兴趣区域，大大提升了用户与智能设备的交互体验。
可选地，在本实施例中，在目标区域全景图与感兴趣区域的形状或者区域范围匹配的情况下，可以但不限于将目标区域全景图确定为设备展示图；在目标区域全景图与感兴趣区域的形状或者区域范围不匹配的情况下，可以但不限于根据感兴趣区域的形状、区域范围等等对目标区域全景图进行放大、缩小或者裁剪等等编辑操作，得到与感兴趣区域相匹配的设备展示图。
在一个示范性实施例中，可以但不限于通过以下方式获取全景展示图：获取对所述目标空间拍摄的多个初始图像；将所述多个初始图像拼接为初始全景图；从所述初始全景图上识别所述目标空间中部署的智能设备的设备信息，得到所述全景展示图。
可选地，在本实施例中，用户可以但不限于通过照相机或者摄影机等等拍摄设备拍摄目标空间的视频或者多张图片得到多个初始图像，多个初始图像之间可以但不限于有重复的部分或者没有重复的部分；可以但不限于通过对多个初始图像进行特征提取、不同图像之间的特征匹配、图像拼接的方式，将多个初始图像拼接为初始全景图。
可选地，在本实施例中，可以但不限于在初始全景图上识别目标空间中部署的所有智能设备的设备信息，得到目标空间所对应的全景展示图，保证了全景展示图能真实反映目标空间的同时，还能保证全景展示图中的携带的设备信息与目标空间中实际部署的智能设备的设备信息相匹配，提升了全景展示图的真实性。
在一个示范性实施例中，可以但不限于通过以下方式将多个初始图像拼接为初始全景图：从每个所述初始图像上识别目标对象的轮廓信息；根据所述轮廓信息从每个所述初始图像上去除所述目标对象，得到多个参考图像；对每个所述参考图像上去除了所述目标对象的区域进行填充，得到多个候选图像；对多个所述候选图像进行拼接，得到所述初始全景图。
可选地，在本实施例中，可以但不限于通过实例分割算法识别每个初始图像上的人、宠物、杂物等等与部署在目标空间中的智能设备无关的对象的轮廓信息，图3是根据本申请实施例的一种识别目标对象的轮廓信息的示意图，如图3所示，可以但不限于以智能冰箱(即上述的目标智能设备)为例进行解释说明，初始图像上的智能冰箱上可以但不限于放置了一副猫咪的照片(即上述的目标对象)，可以但不限于识别猫咪的照片的轮廓信息。
可选地，在本实施例中，可以但不限于根据目标对象的轮廓信息从每个初始图像上删除或者扣除目标对象的轮廓信息，得到多个参考图像。图4是根据本申请实施例的一种获取参考图像的示意图，如图4所示，可以但不限于以智能冰箱(即上述的目标智能设备)为例进行解释说明，初始图像上的智能冰箱上可以但不限于放置了一副猫咪的照片(即上述的目标对象)，可以但不限于识别猫咪的照片的轮廓信息，并从初始图像上去除目标对象的轮廓信息，得到参考图像。
可选地，在本实施例中，可以但不限于对每个参考图像上去除了目标对象的区域进行填充，得到多个候选图像，图5是根据本申请实施例的一种获取候选图像的示意图，如图5所示，初始图像上的智能冰箱上可以但不限于放置了一副猫咪的照片(即上述的目标对象)，可以但不限于识别猫咪的照片的轮廓信息，并从初始图像上去除目标对象的轮廓信息，得到参考图像。可以但不限于在参考图像上去除了目标对象的区域进行填充，得到候选图像。
需要说明的是，在图3至图5中仅仅以拍摄的放置有猫咪照片的智能冰箱的初始图像，对去除目标对象，得到候选图像的过程进行解释说明，实际上可以是任何智能设备，目标对象可以但不限于为动物、杂物等等会影响目标智能设备所在的位置的对象，本申请对此不作限制。
在一个示范性实施例中，可以但不限于通过以下方式得到全景展示图：对所述初始全景图进行空间类型识别，得到所述目标空间对应的目标空间类型；对所述初始全景图进行智能设备识别，得到所述目标空间中部署的智能设备的设备标识和设备位置作为所述设备信息；将携带了所述目标空间类型和所述设备信息的所述初始全景图确定为所述全景展示图。
可选地，在本实施例中，可以但不限于对初始全景图所对应的空间类型进行识别，空间类型可以但不限于按照目标空间所具有的功能进行划分，可以但不限于包括具有办公功能的书房，具有烹饪功能的厨房、以及具有休息功能的卧室等等。
可选地，在本实施例中，可以但不限于对初始全景图中进行智能设备识别，得到目标空间中部署的智能设备的设备标识(可以但不限于包括智能设备的序列号、名称或者编号等等标识)以及设备位置(可以但不限于包括智能设备在初始全景图中的像素位置等等)，得到携带有目标空间类型和设备信息的全景展示图。图6是根据本申请实施例的一种全景展示图的示意图，如图6所示，目标空间所对应的空间类型可以但不限于为客厅，目标空间中可以但不限于部署了智能电视和智能冰箱，全景展示图中可以但不限于携带了部署的智能电视的序列号(SN002)和位置(位置2)以及智能冰箱的序列号(SN001)和位置(位置1)。
在上述步骤S204提供的技术方案中，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，可以但不限于从目标空间的全景展示图中获取目标智能设备对应的设备展示图；显示设备展示图，实现了在与真实的目标空间相同的设备展示图中展示目标智能设备。
可选地，在本实施例中，可以但不限于在手机、电脑或者平板等等终端设备的应用界面上显示设备展示图，或者可以但不限于在智能设备的屏幕端显示设备展示图，或者可以但不限于在网关的屏幕端上显示设备展示图等等，实现了通过多种方式显示设备展示图，提升了显示设备展示图的灵活度。
在上述步骤S206提供的技术方案中，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，可以但不限于从目标空间的全景展示图中获取目标智能设备对应的设备展示图；可以但不限于在设备展示图上显示目标智能设备执行控制操作后的设备状态，实现了在与真实的目标空间相同的设备展示图中展示目标智能设备执行控制操作之后的设备状态，大大提升了用户与智能设备之间的交互体验。
可选地，在本实施例中，可以但不限于根据目标智能设备被执行的控制操作的不同，实时的在设备展示图上展示不同的目标智能设备执行控制操作之后不同的设备状态，实现了在设备展示图上实时的展示用户所控制的智能设备的设备状态，大大提升了用户的体验。
在一个示范性实施例中，可以但不限于通过以下方式在设备展示图上显示目标智能设备执行控制操作后的设备状态：获取所述设备状态所对应的展示效果以及所述设备状态对应的设备参数；在所述设备展示图上所述目标智能设备所在区域展示所述展示效果并在所述设备展示图上的参数展示区域展示所述设备参数。
可选地，在本实施例中，目标智能设备执行不同的控制操作之后可以但不限于对应着不同的展示效果，展示效果可以但不限于包括目标智能设备执行控制操作的之后的动态图，或者视频等等视觉展示效果；设备参数可以但不限于包括目标智能设备执行控制操作之后的参数，比如智能空调的运行温度、运行模式、运行时间、运行风速等等，智能音箱的播放歌曲、播放模式等等。
可选地，在本实施例中，可以但不限于在设备展示图上以目标智能设备为主体展示目标智能设备执行控制操作之后的展示效果，可以但不限于在参数展示区域展示设备参数，图7是根据本申请实施例的一种在设备展示图上显示设备状态的示意图，如图7所示，可以但不限于以智能冰箱(即上述的目标智能设备)在智能冰箱的设备展示图上显示智能冰箱在冷藏温度为3℃，冷冻温度为-2℃(即上述的设备参数)下的运行状态，实现了在智能设备所部署的空间中真实的展示智能设备执行控制操作之后的设备状态，大大提升了用户与智能设备进行交互的体验。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例的方法。
图8是根据本申请实施例的一种基于数字孪生的智能设备的控制装置的结构框图；如图8所示，包括：
第一获取模块82，用于在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
第一显示模块84，用于显示所述设备展示图；
第二显示模块86，用于在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
通过上述实施例，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，可以从目标空间的真实的全景展示图中获取目标智能设备对应的设备展示图；显示设备展示图，在结合目标空间的真实场景的设备展示图上形象直观的显示目标智能设备执行控制操作后的设备状态。采用上述技术方案，解决了相关技术中，智能设备提供的设备交互体验较差等问题，实现了提升智能设备提供的设备交互体验的技术效果。
可选的，所述第一获取模块，包括：
第一确定单元，用于从所述全景展示图中确定所述目标智能设备所在的目标区域；
第一获取单元，用于获取所述全景展示图中所述目标区域对应的目标区域全景图；
第二获取单元，用于从所述目标区域全景图中获取所述设备展示图。
可选的，所述第二获取单元，用于：
在所述目标区域全景图上创建所述目标智能设备所对应的感兴趣区域；
按照所述感兴趣区域对所述目标区域全景图进行编辑，得到所述设备展示图。
可选的，所述装置还包括：
第二获取模块，用于在所述从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图之前，获取对所述目标空间拍摄的多个初始图像；
拼接模块，用于将所述多个初始图像拼接为初始全景图；
识别模块，用于从所述初始全景图上识别所述目标空间中部署的智能设备的设备信息，得到所述全景展示图。
可选的，所述拼接模块，包括：
第一识别单元，用于从每个所述初始图像上识别目标对象的轮廓信息；
去除单元，用于根据所述轮廓信息从每个所述初始图像上去除所述目标对象，得到多个参考图像；
填充单元，用于对每个所述参考图像上去除了所述目标对象的区域进行填充，得到多个候选图像；
拼接单元，用于对多个所述候选图像进行拼接，得到所述初始全景图。
可选的，所述识别模块，包括：
第二识别单元，用于对所述初始全景图进行空间类型识别，得到所述目标空间对应的目标空间类型；
第三识别单元，用于对所述初始全景图进行智能设备识别，得到所述目标空间中部署的智能设备的设备标识和设备位置作为所述设备信息；
第二确定单元，用于将携带了所述目标空间类型和所述设备信息的所述初始全景图确定为所述全景展示图。
可选的，所述第二显示模块，包括：
第三获取单元，用于获取所述设备状态所对应的展示效果以及所述设备状态对应的设备参数；
展示单元，用于在所述设备展示图上所述目标智能设备所在区域展示所述展示效果并在所述设备展示图上的参数展示区域展示所述设备参数。
本申请的实施例还提供了一种存储介质，该存储介质包括存储的程序，其中，上述程序运行时执行上述任一项的方法。
可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的程序代码：
S1，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
S2，显示所述设备展示图；
S3，在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
本申请的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
S1，在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
S2，显示所述设备展示图；
S3，在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的硬件和软件结合。
以上所述仅是本申请的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。
Claims (10)
1.一种基于数字孪生的智能设备的控制方法，其特征在于，包括：
在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
显示所述设备展示图；
在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
2.根据权利要求1所述的方法，其特征在于，所述从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图，包括：
从所述全景展示图中确定所述目标智能设备所在的目标区域；
获取所述全景展示图中所述目标区域对应的目标区域全景图；
从所述目标区域全景图中获取所述设备展示图。
3.根据权利要求2所述的方法，其特征在于，所述从所述目标区域全景图中获取所述设备展示图，包括：
在所述目标区域全景图上创建所述目标智能设备所对应的感兴趣区域；
按照所述感兴趣区域对所述目标区域全景图进行编辑，得到所述设备展示图。
4.根据权利要求1至3任一项所述的方法，其特征在于，在所述从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图之前，所述方法还包括：
获取对所述目标空间拍摄的多个初始图像；
将所述多个初始图像拼接为初始全景图；
从所述初始全景图上识别所述目标空间中部署的智能设备的设备信息，得到所述全景展示图。
5.根据权利要求4所述的方法，其特征在于，所述将所述多个初始图像拼接为初始全景图，包括：
从每个所述初始图像上识别目标对象的轮廓信息；
根据所述轮廓信息从每个所述初始图像上去除所述目标对象，得到多个参考图像；
对每个所述参考图像上去除了所述目标对象的区域进行填充，得到多个候选图像；
对多个所述候选图像进行拼接，得到所述初始全景图。
6.根据权利要求4所述的方法，其特征在于，所述从所述初始全景图上识别所述目标空间中部署的智能设备的设备信息，得到所述全景展示图，包括：
对所述初始全景图进行空间类型识别，得到所述目标空间对应的目标空间类型；
对所述初始全景图进行智能设备识别，得到所述目标空间中部署的智能设备的设备标识和设备位置作为所述设备信息；
将携带了所述目标空间类型和所述设备信息的所述初始全景图确定为所述全景展示图。
7.根据权利要求1至6任一项所述的方法，其特征在于，所述在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态，包括：
获取所述设备状态所对应的展示效果以及所述设备状态对应的设备参数；
在所述设备展示图上所述目标智能设备所在区域展示所述展示效果并在所述设备展示图上的参数展示区域展示所述设备参数。
8.一种基于数字孪生的智能设备的控制装置，其特征在于，包括：
第一获取模块，用于在检测到目标空间中部署的目标智能设备被执行了控制操作的情况下，从所述目标空间的全景展示图中获取所述目标智能设备对应的设备展示图；
第一显示模块，用于显示所述设备展示图；
第二显示模块，用于在所述设备展示图上显示所述目标智能设备执行所述控制操作后的设备状态。
9.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行权利要求1至7中任一项所述的方法。
10.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行权利要求1至7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210908385.6A CN115473755A (zh) | 2022-07-29 | 2022-07-29 | 基于数字孪生的智能设备的控制方法、装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210908385.6A CN115473755A (zh) | 2022-07-29 | 2022-07-29 | 基于数字孪生的智能设备的控制方法、装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115473755A true CN115473755A (zh) | 2022-12-13 |
Family
ID=84366576
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210908385.6A Pending CN115473755A (zh) | 2022-07-29 | 2022-07-29 | 基于数字孪生的智能设备的控制方法、装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115473755A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116304260A (zh) * | 2023-03-20 | 2023-06-23 | 深圳绿米联创科技有限公司 | 环境模型的生成方法、展示方法、装置、设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA3132506A1 (en) * | 2020-04-23 | 2021-10-23 | Tencent Technology (Shenzhen) Company Limited | Operation control display method and apparatus based on virtual scene |
| US20210349525A1 (en) * | 2016-01-07 | 2021-11-11 | Northwest Instrument Inc. | Intelligent interface based on augmented reality |
| CN113885345A (zh) * | 2021-10-29 | 2022-01-04 | 广州市技师学院(广州市高级技工学校、广州市高级职业技术培训学院、广州市农业干部学校) | 基于智能家居仿真控制系统的交互方法、装置、设备 |
| CN114241358A (zh) * | 2021-11-23 | 2022-03-25 | 广东电网有限责任公司广州供电局 | 基于数字孪生变电站的设备状态展示方法、装置和设备 |
| CN114265328A (zh) * | 2021-12-24 | 2022-04-01 | 珠海格力电器股份有限公司 | 智能家居设备的控制方法及装置 |
-
2022
- 2022-07-29 CN CN202210908385.6A patent/CN115473755A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20210349525A1 (en) * | 2016-01-07 | 2021-11-11 | Northwest Instrument Inc. | Intelligent interface based on augmented reality |
| CA3132506A1 (en) * | 2020-04-23 | 2021-10-23 | Tencent Technology (Shenzhen) Company Limited | Operation control display method and apparatus based on virtual scene |
| CN113885345A (zh) * | 2021-10-29 | 2022-01-04 | 广州市技师学院(广州市高级技工学校、广州市高级职业技术培训学院、广州市农业干部学校) | 基于智能家居仿真控制系统的交互方法、装置、设备 |
| CN114241358A (zh) * | 2021-11-23 | 2022-03-25 | 广东电网有限责任公司广州供电局 | 基于数字孪生变电站的设备状态展示方法、装置和设备 |
| CN114265328A (zh) * | 2021-12-24 | 2022-04-01 | 珠海格力电器股份有限公司 | 智能家居设备的控制方法及装置 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116304260A (zh) * | 2023-03-20 | 2023-06-23 | 深圳绿米联创科技有限公司 | 环境模型的生成方法、展示方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108922450B (zh) | 在房屋虚拟三维空间中讲房内容自动播放控制方法及装置 | |
| CN113055255A (zh) | 智能家电的场景配置方法和装置、存储介质及电子设备 | |
| CN107817701B (zh) | 设备控制方法、装置、计算机可读存储介质及终端 | |
| CN115473755A (zh) | 基于数字孪生的智能设备的控制方法、装置 | |
| CN113014934A (zh) | 产品展示方法、产品展示装置、计算机设备及存储介质 | |
| CN115167164A (zh) | 设备场景的确定方法和装置、存储介质及电子装置 | |
| CN113111199A (zh) | 多媒体资源的续播方法及装置、存储介质、电子装置 | |
| CN114755931A (zh) | 控制指令的预测方法和装置、存储介质及电子装置 | |
| CN115343962A (zh) | 智能家电控制方法、系统、智能屏及存储介质 | |
| CN114675928A (zh) | 容器镜像的构建方法和装置、存储介质及电子装置 | |
| CN110361978B (zh) | 基于物联网操作系统的智能设备控制方法和装置及系统 | |
| CN117456089A (zh) | 三维场景的生成方法、装置、存储介质及电子装置 | |
| CN110285528B (zh) | 空调器的控制方法及装置、空调器、家用电器 | |
| CN116382111A (zh) | 设备控制方法和装置、存储介质及电子装置 | |
| CN114442980B (zh) | 影音设备的控制方法、控制装置、存储介质及电子装置 | |
| CN111814695A (zh) | 一种清洁设备及音频信息播放方法和装置 | |
| CN113542689A (zh) | 基于无线物联网的图像处理方法及相关设备 | |
| CN112711988A (zh) | 一种图像处理方法、装置、存储介质及终端 | |
| CN111093112A (zh) | 存储介质、交互设备及其视频阴影渲染播放方法 | |
| CN114885092A (zh) | 图像采集装置的控制方法和装置、存储介质及电子装置 | |
| CN118519710A (zh) | 虚拟界面的生成方法和装置、存储介质及电子装置 | |
| CN117541913A (zh) | 基于数字孪生的部署场景的生成方法和装置 | |
| CN115174290B (zh) | 会话记录的显示方法、装置、存储介质及电子装置 | |
| CN116301511A (zh) | 设备交互方法、装置、存储介质及电子装置 | |
| CN116009438A (zh) | 控制场景生成方法、装置、存储介质及电子装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |