CN109324748B - 一种设备控制的方法、电子设备及存储介质 - Google Patents

一种设备控制的方法、电子设备及存储介质 Download PDF

Info

Publication number
CN109324748B
CN109324748B CN201811033734.4A CN201811033734A CN109324748B CN 109324748 B CN109324748 B CN 109324748B CN 201811033734 A CN201811033734 A CN 201811033734A CN 109324748 B CN109324748 B CN 109324748B
Authority
CN
China
Prior art keywords
target device
control panel
virtual
control instruction
display area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811033734.4A
Other languages
English (en)
Other versions
CN109324748A (zh
Inventor
高江涛
陈建冲
杨旭
孙炼杰
周毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201811033734.4A priority Critical patent/CN109324748B/zh
Publication of CN109324748A publication Critical patent/CN109324748A/zh
Application granted granted Critical
Publication of CN109324748B publication Critical patent/CN109324748B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Abstract

本发明实施例公开了一种设备控制的方法，所述方法包括：从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定至少一个目标设备；将至少一个目标设备对应的至少一个虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；基于至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；发送至少一个控制指令至至少一个目标设备，以基于至少一个控制指令对至少一个目标设备进行控制。本发明实施例还公开了一种电子设备及存储介质。

Description

一种设备控制的方法、电子设备及存储介质
技术领域
本发明涉及控制技术，尤其涉及一种设备控制的方法、电子设备及存储介质。
背景技术
目前增强现实技术(Augmented Reality，AR)以及混合现实技术(Mixed Reality，MR)应用主要是以信息展示为主，通过将虚拟信息与现实空间融合并展现给使用者来提高对数字信息的消费体验，另一方面基于识别技术将现实物体与其数字信息联系起来，可以在现实物体上自动的叠加增强的数字信息以减少对现实物体相关数字信息的人工检索，提高工作效率。另外，物联网技术的发展正逐渐将现实物体数字化，并将现实物体对应的数字信息通过网络与计算设备相连，AR技术与物联网技术的结合使得数字信息的获取与展示更加的方便。单纯的AR技术中的交互方式还主要是针对数字信息的单向交互，AR技术与物联网技术的结合使得虚拟与现实的双向交互成为可能，AR技术可以利用数字界面将交互信息通过物联网传递回现实物体，从而实现AR设备与现实物体的交互。
目前有些电子设备已经可以通过网络与移动设备上的应用程序进行交互，但这种交互方式用户只能通过移动设备上应用程序的显示界面对电子设备进行交互，无法与现实场景结合导致交互方式不够直观，交互体验不高。
发明内容
为解决上述技术问题，本发明实施例期望提供一种信息交互的方法、电子设备及存储介质，能够实现虚拟与现实双向的数据交互。
本发明的技术方案是这样实现的：
本发明实施例提供了一种设备控制的方法，应用于电子设备，该方法包括：
从显示区域展示的环境图像中识别出至少一个设备，从所述至少一个设备中确定至少一个目标设备；
将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内；其中，所述虚拟控制面板包含至少一个虚拟按键；
基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；
发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制。
上述方案中，所述将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内，包括：在所述显示区域内，展示至少一个目标设备中每一个目标设备对应的虚拟控制面板。
上述方案中，所述基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制，包括：基于至少一个目标设备中第一目标设备对应的虚拟控制面板，获取到针对所述第一目标设备的第一类控制指令；发送所述第一类控制指令至所述第一目标设备，以基于所述第一类控制指令对所述第一目标设备进行控制。
上述方案中，所述将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内，包括：在所述显示区域内，展示至少一个目标设备对应的一个虚拟控制面板。
上述方案中，所述基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制，包括：基于至少一个目标设备对应的一个虚拟控制面板，获取到针对所述至少一个目标设备的第二类控制指令；发送所述第二类控制指令至所述至少一个目标设备，以基于所述第二类控制指令对所述至少一个目标设备进行控制。
上述方案中，所述从所述至少一个设备中确定至少一个目标设备，包括：从所述至少一个设备中，确定一个第二目标设备；相应的，所述将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内，包括：将所述第二目标设备对应的虚拟控制面板，展示在所述显示区域内。
上述方案中，所述获取到针对至少一个目标设备的至少一个控制指令，包括：基于用户输入单元检测的用户操作，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成所述至少一个目标设备的控制指令；或者，基于姿态检测单元检测的用户姿态信息，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成所述至少一个目标设备的控制指令；其中，所述用户姿态信息用于表征用户至少一个身体部位的姿态变化。
本发明实施例中还提供了一种电子设备，所述电子设备包括：处理器和存储器；其中，
所述处理器用于执行存储器中存储的程序，以实现以下步骤：
从显示区域展示的环境图像中识别出至少一个设备，从所述至少一个设备中确定至少一个目标设备；
将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内；其中，所述虚拟控制面板包含至少一个虚拟按键；
基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；
发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制。
上述方案中，所述处理器具体用于执行存储器中存储的程序，以实现以下步骤：在所述显示区域内，展示至少一个目标设备中每一个目标设备对应的虚拟控制面板。
上述方案中，所述处理器具体用于执行存储器中存储的程序，以实现以下步骤：基于至少一个目标设备中第一目标设备对应的虚拟控制面板，获取到针对所述第一目标设备的第一类控制指令；发送所述第一类控制指令至所述第一目标设备，以基于所述第一类控制指令对所述第一目标设备进行控制。
本发明实施例中还提供了一种计算机存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现前述任一项所述的方法的步骤。
本发明实施例提供的一种设备控制的方法、电子设备及存储介质，从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定至少一个目标设备；将至少一个目标设备对应的至少一个虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；基于至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；发送至少一个控制指令至至少一个目标设备，以基于至少一个控制指令对至少一个目标设备进行控制。
采用上述技术方案，能够将目标设备的虚拟控制面板显示在显示区域内，通过对显示区域内虚拟控制面板的控制操作，实现对目标设备的真实控制。如此，能够实现虚拟与现实双向的数据交互，在精简设备的物理控制面板的基础上，提升交互体验。
附图说明
图1为本发明实施例中设备控制的方法的第一流程示意图；
图2为本发明实施例中第一显示示意图；
图3为本发明实施例中第二显示示意图；
图4为本发明实施例中第三显示示意图；
图5为本发明实施例中设备控制的方法的第二流程示意图；
图6为本发明实施例中第四显示示意图；
图7为本发明实施例中设备控制的方法的第三流程示意图；
图8为本发明实施例中设备控制的方法的第四流程示意图；
图9为本发明实施例中电子设备的组成结构示意图。
具体实施方式
为了能够更加详尽地了解本发明实施例的特点与技术内容，下面结合附图对本发明实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本发明实施例。
实施例一
如图1所示，设备控制的方法包括：
步骤101：从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定至少一个目标设备；
步骤102：将至少一个目标设备对应的至少一个虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；
步骤103：基于至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；
步骤104：发送至少一个控制指令至至少一个目标设备，以基于至少一个控制指令对至少一个目标设备进行控制。
这里，步骤101至步骤104的执行主体可以为电子设备的处理器。电子设备可以是具备AR功能、或虚拟现实(Virtual Reality，VR)功能的电子设备。
这里，显示区域可以为电子设备的显示屏区域、投影区域、或者VR设备的可视范围、AR设备的可视范围。
实际应用时，从显示区域展示的环境图像中识别出至少一个设备，可以包括：基于三维物体识别技术检测出环境图像中出现的至少一个设备。从至少一个设备中选择出至少一个目标设备。
实际应用中，该方法还可以包括：预先为至少一种设备建立对应的虚拟控制面板，以及建立至少一种设备与虚拟控制面板的映射关系；基于至少一种设备与虚拟控制面板之间的映射关系，确定至少一个目标设备对应的至少一个虚拟控制面板。
实际应用中，在显示区域内，展示至少一个目标设备中每一个目标设备对应的虚拟控制面板；或者在显示区域内，展示至少一个目标设备对应的一个虚拟控制面板。具体的展示方法还包括：在目标设备上展示对应的虚拟控制面板，或者在目标设备之外的显示区域内展示虚拟控制面板。
这里，虚拟控制面板包含至少一个虚拟控制按键，如：开机、关机、暂停、音量加键、音量减键等。
本发明实施例中的执行设备控制操作的电子设备可以为AR头戴设备，AR头戴设备所控制的至少一个设备可以为当前能够接入物联网平台的任何电子设备。
如图2所示，在真实环境中包括原电子设备22，原电子设备22为目前普遍存在的包含多个物理按键的物理控制面板的电子设备，用户可以通过操作多个物理按键实现对原电子设备22的各种功能控制。
本发明实施例中可以省去原电子设备22物理控制面板上的物理按键，或者直接省去物理控制面板，得到如图2中改进后电子设备23，此时改进后电子设备23上的物理控制面板上只包含一个控制按键(如：用于控制电子设备开启或关闭的电源按键)。AR设备21获取到包含改进后电子设备23的环境图像后，可以通过三维物体识别技术识别出改进后电子设备23，确定改进后电子设备23对应的虚拟控制面板，虚拟控制面板的结构可以与原电子设备22上的物理控制面板结构相同。
增强AR场景中的控制面板，将改进后电子设备23对应的虚拟控制面板显示在环境图像中的改进后电子设备23上，得到增强后电子设备24，用户可以通过AR设备21观察到电子设备最终的显示效果为增强后电子设备24。通过对虚拟控制面板上的虚拟控制按键执行控制操作，生成控制指令，将控制指令基于物联网的传输交互传递会真实环境中的改进后电子设备23，完成对真实环境中电子设备的控制。
实际应用中，获取到针对至少一个目标设备的至少一个控制指令，包括：基于用户输入单元检测的用户操作，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成至少一个目标设备的控制指令；或者，基于姿态检测单元检测的用户姿态信息，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成至少一个目标设备的控制指令；其中，用户姿态信息用于表征用户至少一个身体部位的姿态变化。
这里，用户输入单元包括以下至少一项：触控面板、外接输入设备；用户姿态信息可以为：眼球视线、手臂位置变化等。
进一步地，基于至少一个目标设备中第一目标设备对应的虚拟控制面板，获取到针对第一目标设备的第一类控制指令；发送第一类控制指令至第一目标设备，以基于第一类控制指令对第一目标设备进行控制。
或者，基于至少一个目标设备对应的一个虚拟控制面板，获取到针对至少一个目标设备的第二类控制指令；发送第二类控制指令至至少一个目标设备，以基于第二类控制指令对至少一个目标设备进行控制。
也就是说，显示区域内分别显示至少一个目标设备各自对应的虚拟控制面板对目标设备分别进行控制，或者，通过至少一个目标设备共同对应的一个虚拟控制面板对目标设备分别进行控制。
如图3所示，环境图像中包括烤箱31和冰箱32，烤箱31的虚拟控制面板显示在烤箱前表面右侧，冰箱32的虚拟控制面板显示在冰箱前表面上侧。
如图4所示，环境图像中包括6个显示设备，具体有显示设备1、显示设备2、显示设备3、显示设备4、显示设备5、显示设备6，这6个显示设备对应一个虚拟控制面板，虚拟控制面板显示在环境图像中的空白区域，虚拟控制面板上包括开机、关机、休眠三个虚拟控制按键，通过一个虚拟控制面板对6个显示设备同时进行控制。
实际应用中，发送控制指令的方法包括：基于物联网将至少一个控制指令发送至至少一个目标设备。
实际应用中，该方法还包括：获取包含至少一个目标设备的控制结果的提示信息；将提示信息显示在结果提示区域中。
也就是说，还可以环境图像中保留一部分区域作为结果提示区域，结果提示区域可以位于虚拟控制面板以内或者以外。
本发明实施例提供的技术方案，从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定至少一个目标设备；将至少一个目标设备对应的至少一个虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；基于至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；发送至少一个控制指令至至少一个目标设备，以基于至少一个控制指令对至少一个目标设备进行控制。
采用上述技术方案，能够将目标设备的虚拟控制面板显示在显示区域内，通过对显示区域内虚拟控制面板的控制操作，实现对目标设备的真实控制。如此，能够实现虚拟与现实双向的数据交互，在精简设备的物理控制面板的基础上，提升交互体验。
实施例二
为了能更加体现本发明的目的，在本发明实施例一的基础上，进行进一步的举例说明，如图5所示，设备控制方法具体包括：
步骤501：从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定至少一个目标设备；
步骤502：将至少一个目标设备对应的至少一个虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；
步骤503：基于至少一个目标设备中第一目标设备对应的虚拟控制面板，获取到针对第一目标设备的第一类控制指令；
步骤504：发送第一类控制指令至第一目标设备，以基于第一类控制指令对第一目标设备进行控制。
这里，步骤501至步骤504的执行主体可以为电子设备的处理器。
本发明实施例中，每一个目标设备各自对应一个虚拟控制面板，利用各自对应的虚拟控制面板分别对目标设备进行控制。
本发明实施例中的执行设备控制操作的电子设备可以为移动终端，移动终端所控制的至少一个设备可以为当前能够接入物联网平台的任何电子设备。
如图6所示，移动终端61通过摄像头获取真实环境中包括电子设备62的环境图像，其中，电子设备62的物理控制面板上设置有1个物理按键，将环境图像显示在显示屏上，显示屏内显示叠加了虚拟控制面板的电子设备63，其中，虚拟控制面板上设置有4个虚拟按键。用户通过操作显示屏上电子设备63的虚拟控制面板，实现对真实环境中电子设备62的控制。
实施例三
为了能更加体现本发明的目的，在本发明实施例一的基础上，进行进一步的举例说明，如图7所示，设备控制方法具体包括：
步骤701：从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定一个第二目标设备；
步骤702：将第二目标设备对应的虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；
步骤703：基于第二目标设备对应的虚拟控制面板，获取到针对第二目标设备的控制指令；
步骤704：发送控制指令至第二目标设备，以基于控制指令对第二目标设备进行控制。
这里，步骤701至步骤704的执行主体可以为电子设备的处理器。
本发明实施例中，识别出环境图像中的至少一个设备后，基于用户选择，或者预设的识别规则，确定一个第二目标设备，将第二目标设备的虚拟控制面板展示在第二目标设备上，或者展示在第二目标设备之外的显示区域，利用第二目标设备的虚拟控制面板对第二目标设备进行控制。
实施例四
为了能更加体现本发明的目的，在本发明实施例一的基础上，进行进一步的举例说明，如图8所示，设备控制方法具体包括：
步骤801：从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定至少一个目标设备；
步骤802：将至少一个目标设备对应的至少一个虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；
步骤803：基于至少一个目标设备对应的一个虚拟控制面板，获取到针对至少一个目标设备的第二类控制指令；
步骤804：发送第二类控制指令至至少一个目标设备，以基于第二类控制指令对至少一个目标设备进行控制。
这里，步骤801至步骤804的执行主体可以为电子设备的处理器。
本发明实施例中，多个目标设备对应一个虚拟控制面板，利用一个虚拟控制面板对多个目标设备分别进行控制，或者对多个目标设备共同进行控制。
这里，对多个目标设备分别进行控制时，虚拟控制面板包含目标设备的选择功能，基于目标设备的选择功能实现对不同目标设备单独控制。例如，为每一个目标设备设置对应的至少一个虚拟控制按键，或者经过组合按键实现对目标设备的选择功能。
这里，对多个目标设备共同进行控制时，基于虚拟控制面板生成的控制指令，会下发至每一个目标设备，来实现共同控制。
实施例五
基于同一发明构思，本发明实施例还提供了一种电子设备。图9为本发明实施例中电子设备的组成结构示意图，如图9所示，该电子设备90包括：处理器901和存储器902，其中，
处理器901用于执行存储器902中存储的设备控制程序，以实现以下步骤：
处理器用于执行存储器中存储的程序，以实现以下步骤：
从显示区域展示的环境图像中识别出至少一个设备，从至少一个设备中确定至少一个目标设备；
将至少一个目标设备对应的至少一个虚拟控制面板，展示在显示区域内；其中，虚拟控制面板包含至少一个虚拟按键；
基于至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；
发送至少一个控制指令至至少一个目标设备，以基于至少一个控制指令对至少一个目标设备进行控制。
在一些实施例中，处理器901具体用于执行存储器902中存储的程序，以实现以下步骤：在显示区域内，展示至少一个目标设备中每一个目标设备对应的虚拟控制面板。
在一些实施例中，处理器901具体用于执行存储器902中存储的程序，以实现以下步骤：基于至少一个目标设备中第一目标设备对应的虚拟控制面板，获取到针对第一目标设备的第一类控制指令；发送第一类控制指令至第一目标设备，以基于第一类控制指令对第一目标设备进行控制。
在一些实施例中，处理器901具体用于执行存储器902中存储的程序，以实现以下步骤：在显示区域内，展示至少一个目标设备对应的一个虚拟控制面板。
在一些实施例中，处理器901具体用于执行存储器902中存储的程序，以实现以下步骤：基于至少一个目标设备对应的一个虚拟控制面板，获取到针对至少一个目标设备的第二类控制指令；发送第二类控制指令至至少一个目标设备，以基于第二类控制指令对至少一个目标设备进行控制。
在一些实施例中，处理器901具体用于执行存储器902中存储的程序，以实现以下步骤：从至少一个设备中，确定一个第二目标设备；将第二目标设备对应的虚拟控制面板，展示在显示区域内。
在一些实施例中，处理器901具体用于执行存储器902中存储的程序，以实现以下步骤：基于用户输入单元检测的用户操作，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成至少一个目标设备的控制指令；或者，基于姿态检测单元检测的用户姿态信息，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成至少一个目标设备的控制指令；其中，用户姿态信息用于表征用户至少一个身体部位的姿态变化。
在实际应用中，上述存储器可以是易失性存储器(volatile memory)，例如随机存取存储器(RAM，Random-Access Memory)；或者非易失性存储器(non-volatile memory)，例如只读存储器(ROM，Read-Only Memory)，快闪存储器(flash memory)，硬盘(HDD，HardDisk Drive)或固态硬盘(SSD，Solid-State Drive)；或者上述种类的存储器的组合，并向处理器提供指令和数据。
上述处理器可以为特定用途集成电路(ASIC，Application Specific IntegratedCircuit)、数字信号处理装置(DSPD，Digital Signal Processing Device)、可编程逻辑装置(PLD，Programmable Logic Device)、现场可编程门阵列(Field－Programmable GateArray，FPGA)、控制器、微控制器、微处理器中的至少一种。可以理解地，对于不同的设备，用于实现上述处理器功能的电子器件还可以为其它，本发明实施例不作具体限定。
实施例六
基于同一发明构思，本发明实施例还提供了一种计算机可读存储介质，例如包括计算机程序的存储器，上述计算机程序可由电子设备的处理器执行，以完成前述一个或者更多个实施例中的方法步骤。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程示意图和/或方框图来描述的。应理解可由计算机程序指令实现流程示意图和/或方框图中的每一流程和/或方框、以及流程示意图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。

Claims (10)

1.一种设备控制的方法，应用于电子设备，所述方法包括：
从显示区域展示的环境图像中识别出至少一个设备，从所述至少一个设备中确定至少一个目标设备；
将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内；其中，所述虚拟控制面板包含至少一个虚拟按键；每一所述虚拟控制面板在所述显示区域内的展示位置是基于所述虚拟控制面板对应的目标设备的数量确定的；
基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；
发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制。
2.根据权利要求1所述的方法，其特征在于，所述将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内，包括：
在所述显示区域内，展示至少一个目标设备中每一个目标设备对应的虚拟控制面板。
3.根据权利要求2所述的方法，其特征在于，所述基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制，包括：
基于至少一个目标设备中第一目标设备对应的虚拟控制面板，获取到针对所述第一目标设备的第一类控制指令；
发送所述第一类控制指令至所述第一目标设备，以基于所述第一类控制指令对所述第一目标设备进行控制。
4.根据权利要求1所述的方法，其特征在于，所述将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内，包括：
在所述显示区域内，展示至少一个目标设备对应的一个虚拟控制面板。
5.根据权利要求4所述的方法，其特征在于，所述基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制，包括：
基于至少一个目标设备对应的一个虚拟控制面板，获取到针对所述至少一个目标设备的第二类控制指令；
发送所述第二类控制指令至所述至少一个目标设备，以基于所述第二类控制指令对所述至少一个目标设备进行控制。
6.根据权利要求1所述的方法，其特征在于，所述从所述至少一个设备中确定至少一个目标设备，包括：
从所述至少一个设备中，确定一个第二目标设备；
相应的，所述将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内，包括：
将所述第二目标设备对应的虚拟控制面板，展示在所述显示区域内。
7.根据权利要求1-6任一项所述的方法，其特征在于，所述获取到针对至少一个目标设备的至少一个控制指令，包括：
基于用户输入单元检测的用户操作，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成所述至少一个目标设备的控制指令；
或者，基于姿态检测单元检测的用户姿态信息，获取对虚拟控制面板上至少一个虚拟按键的控制操作，以生成所述至少一个目标设备的控制指令；其中，所述用户姿态信息用于表征用户至少一个身体部位的姿态变化。
8.一种电子设备，所述电子设备包括：处理器和存储器；其中，
所述处理器用于执行存储器中存储的程序，以实现以下步骤：
从显示区域展示的环境图像中识别出至少一个设备，从所述至少一个设备中确定至少一个目标设备；
将所述至少一个目标设备对应的至少一个虚拟控制面板，展示在所述显示区域内；其中，所述虚拟控制面板包含至少一个虚拟按键；每一所述虚拟控制面板在所述显示区域内的展示位置是基于所述虚拟控制面板对应的目标设备的数量确定的；
基于所述至少一个虚拟控制面板，获取到针对至少一个目标设备的至少一个控制指令；
发送所述至少一个控制指令至所述至少一个目标设备，以基于所述至少一个控制指令对所述至少一个目标设备进行控制。
9.根据权利要求8所述的电子设备，其特征在于，所述处理器具体用于执行存储器中存储的程序，以实现以下步骤：
在所述显示区域内，展示至少一个目标设备中每一个目标设备对应的虚拟控制面板。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至7任一项所述的方法的步骤。
CN201811033734.4A 2018-09-05 2018-09-05 一种设备控制的方法、电子设备及存储介质 Active CN109324748B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811033734.4A CN109324748B (zh) 2018-09-05 2018-09-05 一种设备控制的方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811033734.4A CN109324748B (zh) 2018-09-05 2018-09-05 一种设备控制的方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN109324748A CN109324748A (zh) 2019-02-12
CN109324748B true CN109324748B (zh) 2021-12-24

Family

ID=65264400

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811033734.4A Active CN109324748B (zh) 2018-09-05 2018-09-05 一种设备控制的方法、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN109324748B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110020649A (zh) * 2019-03-22 2019-07-16 联想(北京)有限公司 一种信息处理方法、装置、设备及存储介质
CN111625095A (zh) * 2020-05-28 2020-09-04 重庆跃途科技有限公司 基于vr和物联网融合技术的训练测评系统及方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106095235A (zh) * 2016-06-07 2016-11-09 腾讯科技（深圳）有限公司 基于虚拟现实的控制方法和装置
CN106445156A (zh) * 2016-09-29 2017-02-22 宇龙计算机通信科技(深圳)有限公司 一种基于虚拟现实的智能家居控制的方法、装置以及终端
CN106485956A (zh) * 2016-09-29 2017-03-08 珠海格力电器股份有限公司 一种演示电子设备功能的方法、装置和智能终端
CN106648297A (zh) * 2016-10-09 2017-05-10 广州艾想电子科技有限公司 一种基于vr设备的智能设备控制方法及装置
CN106713082A (zh) * 2016-11-16 2017-05-24 惠州Tcl移动通信有限公司 一种用于智能家居管理的虚拟现实方法
CN107132769A (zh) * 2017-04-21 2017-09-05 北京小米移动软件有限公司 智能设备控制方法及装置
CN107506037A (zh) * 2017-08-23 2017-12-22 三星电子（中国）研发中心 一种基于增强现实的控制设备的方法和装置
CN107528752A (zh) * 2016-06-22 2017-12-29 佛山市顺德区美的电热电器制造有限公司 智能家电的控制系统及虚拟现实投影装置
CN107577352A (zh) * 2017-10-13 2018-01-12 美的智慧家居科技有限公司 家电设备的终端接入方法、装置和电子设备和存储介质
CN107703872A (zh) * 2017-10-31 2018-02-16 美的智慧家居科技有限公司 家电设备的终端控制方法、装置及终端
CN107797661A (zh) * 2017-09-14 2018-03-13 珠海格力电器股份有限公司 一种设备控制装置、方法及移动终端
CN108388142A (zh) * 2018-04-10 2018-08-10 百度在线网络技术（北京）有限公司 用于控制家居设备的方法、装置和系统

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106095235A (zh) * 2016-06-07 2016-11-09 腾讯科技（深圳）有限公司 基于虚拟现实的控制方法和装置
CN107528752A (zh) * 2016-06-22 2017-12-29 佛山市顺德区美的电热电器制造有限公司 智能家电的控制系统及虚拟现实投影装置
CN106445156A (zh) * 2016-09-29 2017-02-22 宇龙计算机通信科技(深圳)有限公司 一种基于虚拟现实的智能家居控制的方法、装置以及终端
CN106485956A (zh) * 2016-09-29 2017-03-08 珠海格力电器股份有限公司 一种演示电子设备功能的方法、装置和智能终端
CN106648297A (zh) * 2016-10-09 2017-05-10 广州艾想电子科技有限公司 一种基于vr设备的智能设备控制方法及装置
CN106713082A (zh) * 2016-11-16 2017-05-24 惠州Tcl移动通信有限公司 一种用于智能家居管理的虚拟现实方法
CN107132769A (zh) * 2017-04-21 2017-09-05 北京小米移动软件有限公司 智能设备控制方法及装置
CN107506037A (zh) * 2017-08-23 2017-12-22 三星电子（中国）研发中心 一种基于增强现实的控制设备的方法和装置
CN107797661A (zh) * 2017-09-14 2018-03-13 珠海格力电器股份有限公司 一种设备控制装置、方法及移动终端
CN107577352A (zh) * 2017-10-13 2018-01-12 美的智慧家居科技有限公司 家电设备的终端接入方法、装置和电子设备和存储介质
CN107703872A (zh) * 2017-10-31 2018-02-16 美的智慧家居科技有限公司 家电设备的终端控制方法、装置及终端
CN108388142A (zh) * 2018-04-10 2018-08-10 百度在线网络技术（北京）有限公司 用于控制家居设备的方法、装置和系统

Also Published As

Publication number Publication date
CN109324748A (zh) 2019-02-12

Similar Documents

Publication Publication Date Title
TWI611354B (zh) 使用圖像重疊減少顯示延遲的系統及方法，以及用於提供回應顯示裝置上所畫路徑之回饋的加速器
CN106843498B (zh) 基于虚拟现实的动态界面交互方法及装置
CN106873886B (zh) 一种立体显示的控制方法、装置和电子设备
AU2016200885B2 (en) Three-dimensional virtualization
JP2023015274A (ja) 面限定制御用に自由空間入力を適用する方法および装置
CN107479818B (zh) 一种信息交互方法及移动终端
JP2019087284A (ja) ユーザインタフェースのための対話方法
CN109324748B (zh) 一种设备控制的方法、电子设备及存储介质
US20150077339A1 (en) Information processing device
CN105022580A (zh) 图像显示系统
CN104731338A (zh) 一种基于封闭式的增强虚拟现实系统及方法
CN105912101B (zh) 一种投影控制方法和电子设备
CN104699249A (zh) 一种信息处理方法及电子设备
CN107305432B (zh) 一种终端及在终端上实现触觉反馈的方法、装置
JP6360509B2 (ja) 情報処理プログラム、情報処理システム、情報処理方法、および情報処理装置
CN109242977B (zh) 网页渲染方法、装置及存储介质
JP6081839B2 (ja) 表示装置および同装置における画面制御方法
JP5767371B1 (ja) 仮想空間平面上に配置したオブジェクトを表示制御するゲーム・プログラム
CN105808089A (zh) 一种数据传输方法及第一电子设备
US10845888B2 (en) Techniques for integrating different forms of input with different forms of output when interacting with an application
CN104820489B (zh) 管理低延时的直接控制反馈的系统和方法
Chuah et al. Experiences in using a smartphone as a virtual reality interaction device
CN104216603A (zh) 一种显示方法和电子设备
CN104081333A (zh) 包括均描绘图形用户界面的区域的输入镜头的远程显示区
JP2016016319A (ja) 仮想空間平面上に配置したオブジェクトを表示制御するゲーム・プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant