CN114200895A - 设备控制方法、装置及存储介质 - Google Patents

设备控制方法、装置及存储介质 Download PDF

Info

Publication number
CN114200895A
CN114200895A CN202010981293.1A CN202010981293A CN114200895A CN 114200895 A CN114200895 A CN 114200895A CN 202010981293 A CN202010981293 A CN 202010981293A CN 114200895 A CN114200895 A CN 114200895A
Authority
CN
China
Prior art keywords
anchor point
target
control
image
target device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010981293.1A
Other languages
English (en)
Inventor
林形省
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202010981293.1A priority Critical patent/CN114200895A/zh
Priority to US17/328,472 priority patent/US11435891B2/en
Priority to EP21175911.3A priority patent/EP3971688A1/en
Publication of CN114200895A publication Critical patent/CN114200895A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/418Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G05B19/4183Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by data acquisition, e.g. workpiece identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/22Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/30User interface
    • G08C2201/34Context aware guidance
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/50Receiving or transmitting feedback, e.g. replies, status updates, acknowledgements, from the controlled devices
    • G08C2201/51Remote controlling of devices based on replies, status thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Automation & Control Theory (AREA)
  • Quality & Reliability (AREA)
  • Manufacturing & Machinery (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

本公开涉及一种设备控制方法、装置及存储介质,解决了相关技术中设备控制时受设备图像角度影响,不能快速准确的对设备进行控制。本方法包括:获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;确定与所述AR锚点锚定的空间位置绑定的目标设备;显示所述目标设备的控制菜单;响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。可以在目标设备所在空间的任意角度和位置获取目标设备的控制菜单,且每个设备对应一个锚点,在多个设备存在的情况下,可准确的获取目标设备的控制菜单,对目标设备进行控制。

Description

设备控制方法、装置及存储介质
技术领域
本公开涉及智能设备控制领域,尤其涉及一种设备控制方法、装置及存储介质。
背景技术
随着智能设备不断的普及,传统的通过硬件开关、控制面板、遥控器的方式不能满足用户对智能设备的高效控制。
相关技术中,智能设备的控制方式有两种,第一种是通过手机APP寻找对应设备的控制菜单进行控制;第二种是通过对设备图像进行识别,获取设备类型并确定设备的控制菜单,对设备进行控制。但是第一种方法在设备较多的情况下,需要用户一个一个的进行查找,效率低下;第二种方法的设备图像需要包含完整的设备标识信息,受设备图像角度的影响,且由于某些设备的标识类似或者特征信息较少,导致不能高效的对设备进行控制。
发明内容
为克服相关技术中存在的问题,本公开提供一种设备控制方法、装置及存储介质。
根据本公开实施例的第一方面,提供一种设备控制方法,包括:
获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;
确定与所述AR锚点锚定的空间位置绑定的目标设备;
显示所述目标设备的控制菜单;
根据所述标识信息确定对应的控制菜单,并对所述控制菜单进行显示;
响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
可选的,所述获取摄像头拍摄到的图像中的AR锚点,包括:
在所述摄像头拍摄到的图像中进行AR锚点识别;
在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,获取所述AR锚点的锚点标识信息;
所述确定与所述AR锚点锚定的空间位置绑定的目标设备,包括:
根据所述AR锚点的锚点标识信息,以及预存的锚点标识信息与设备标识信息之间的对应关系,获取与所述AR锚点锚定的空间位置绑定的目标设备。
可选的,在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,所述方法还包括:
判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
可选的,在所述根据所述控制指令对所述目标设备进行控制之后,所述方法包括:
在预设时长内未接收到所述目标设备的控制响应的情况下,判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
可选的,所述AR锚点是通过如下方式创建的:
通过所述摄像头获取目标设备所处的空间位置,并获取所述目标设备的图像在所述终端的预览界面内的显示位置;
根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点;
根据所述AR锚点生成锚点标识信息,将所述锚点标识信息与设备标识信息进行绑定,并将绑定关系发送给服务器进行存储,其中所述服务器还存储有目标设备的设备标识信息与目标设备的控制菜单之间的对应关系。
可选的,所述通过所述摄像头获取目标设备所处的空间位置,包括:
通过所述摄像头进行空间特征识别,得到多个空间特征点;
所述根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点,包括:
根据所述显示位置与多个所述空间特征点之间的位置关系,创建所述AR锚点。
可选的,所述显示所述目标设备的控制菜单,包括:
根据所述AR锚点在所述图像中的位置,将所述目标设备的控制菜单显示在该位置的预设范围内;或,
在所述AR锚点为多个的情况下,根据每一所述AR锚点相对于用户的距离,显示距离用户最近的AR锚点对应的目标设备的控制菜单。
根据本公开实施例的第二方面,提供一种设备控制装置,应用于设置有摄像头的终端,包括:
获取模块,被配置成获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;
控制模块,被配置成确定与所述AR锚点锚定的空间位置绑定的目标设备;
显示模块,被配置成显示所述目标设备的控制菜单;
执行模块,被配置成响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
可选的,所述获取模块被配置成在所述摄像头拍摄到的图像中进行AR锚点识别;
在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,获取所述AR锚点的锚点标识信息;
根据所述AR锚点的锚点标识信息,以及预存的锚点标识信息与设备标识信息之间的对应关系,确定与所述AR锚点锚定的空间位置绑定的目标设备。
可选的,所述装置还包括判断模块,所述判断模块被配置成判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
可选的,所述执行模块被配置成在预设时长内未接收到所述目标设备的控制响应的情况下,判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
可选的,所述装置还包括锚点创建模块,所述锚点创建模块被配置成通过所述摄像头获取目标设备所处的空间位置,并获取放置在所述终端的预览界面内的目标设备的显示位置;
根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点;
根据所述AR锚点生成锚点标识信息,将所述锚点标识信息与设备标识信息进行绑定,并将绑定关系发送给服务器进行存储,其中,所述服务器还存储有目标设备的设备标识信息与目标设备的控制菜单之间的对应关系。
可选的,所述锚点创建模块被配置成通过所述摄像头进行空间特征识别,得到多个空间特征点;
根据所述显示位置与多个所述空间特征点之间的位置关系,创建所述AR锚点。
所述显示模块包括第一显示子模块和第显示二子模块;
所述第一子模块被配置成根据所述AR锚点在所述图像中的位置,将所述目标设备的控制菜单显示在该位置的预设范围内;
所述第二子模块被配置成在所述AR锚点为多个的情况下,根据每一所述AR锚点相对于用户的距离,显示距离用户最近的AR锚点对应的目标设备的控制菜单。
根据本实施例的第三方面,提供一种设备控制装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;
确定与所述AR锚点锚定的空间位置绑定的目标设备;
显示所述目标设备的控制菜单;
响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开第一方面所提供的设备控制方法的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果:本公开获取图像中的AR锚点,根据AR锚点确定与AR锚点锚定的空间位置绑定的目标设备,显示目标设备的控制菜单,通过控制菜单对目标设备进行控制。可以在目标设备所在空间的任意角度和位置获取目标设备的控制菜单,且每个设备对应一个锚点,在多个设备存在的情况下,可准确的获取目标设备的控制菜单,对目标设备进行控制。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种设备控制方法的流程图。
图2是根据一示例性实施例示出的一种设备控制方法的步骤S110的流程图。
图3是根据一示例性实施例示出的一种显示所述目标设备的控制菜单的示意图。
图4是根据一示例性实施例示出的另一种显示所述目标设备的控制菜单的示意图。
图5是根据一示例性实施例示出的一种设备控制方法的步骤S110的另一流程图。
图6是根据一示例性实施例示出的一种设备控制方法的另一流程示图。
图7是根据一示例性实施例示出的一种设备控制装置的框图。
图8是根据一示例性实施例示出的一种设备控制装置的框图。
具体实施方式
随着智能设备不断的普及,传统的通过硬件开关、控制面板、遥控器的方式不能满足用户对智能设备的高效控制。
而相关技术中,智能设备的控制方式有两种,第一种是用于通过手机APP寻找对应要控制的设备,点击进去获取设备的控制菜单进行操作,实现对智能设备的控制。这种方法在设备较多的情况下,需要用户一个一个的进行查找,效率低下;在同类型的设备较多的情况下,无法确定具体需要控制的设备。
第二种是通过对设备图像进行识别确定需要控制的设备,获取设备类型并确定设备的控制菜单,对设备进行控制。这种方法受设备图像的拍摄角度影响,在设备图像中设备标识信息不完整的情况下,无法确定需要控制的设备,且由于某些设备的标识类似或者特征信息较少,导致不能高效的对设备进行控制。
本公开提供的一种设备控制方法、装置及存储介质可克服相关技术中设备控制效率低,以及受设备图像的拍摄角度的影响不能高效的对设备进行控制的技术问题。
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种设备控制方法的流程图,如图1所示,设备控制方法用于设置有摄像头的终端中,该终端可以是手机、平板等,包括以下步骤。
在步骤S110中,获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的。
在步骤S120中,确定与所述AR锚点锚定的空间位置绑定的目标设备。
在步骤S130中,显示所述目标设备的控制菜单。
在步骤S140中,响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
其中,目标设备的控制菜单可以在终端的预览界面(即图像取景框)中进行显示,本公开对此不作具体限定。
具体的,本实施例中的目标设备可以是智能灯、门锁、空调、空气净化器等带有智能能力的终端硬件设备。
举例说明,获取摄像头拍摄到的图像中的AR锚点,确定与所述AR锚点锚定的空间位置绑定的目标设备标识信息,将所述目标设备的控制菜单显示给用户,响应于用户针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
可选的,所述AR锚点可以通过如下方式创建:
通过所述摄像头获取目标设备所处的空间位置,并获取所述目标设备的图像在所述终端的预览界面内的显示位置;
根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点;
根据所述AR锚点生成锚点标识信息,将所述锚点标识信息与设备标识信息进行绑定,并将绑定关系发送给服务器进行存储,其中所述服务器还存储有目标设备的设备标识信息与目标设备的控制菜单之间的对应关系。
其中,目标设备所处的空间位置可以是目标设备在实体空间的位置,目标设备的显示位置可以是目标设备在建立锚点的虚拟空间的位置,本公开对此不作具体限定。
其中,终端的预览界面可以根据用户的使用习惯进行预设的,本公开对此不作具体限定。
举例说明,确定终端的预览界面内的设备为需要创建AR锚点的目标设备,通过摄像头获取该设备的显示位置和设备所处的空间位置,根据显示位置和空间位置创建对应该设备的AR锚点;根据该AR锚点生成锚点标识信息,将该AR锚点的锚点标识信息和该设备的设备标识信息进行绑定,实现AR锚点与设备的绑定;将绑定关系发送给服务器进行存储,服务器中还存储有该设备的设备标识信息和该设备的控制菜单之间的对应关系,便于后续根据AR锚点确定的该设备的控制菜单,通过该控制菜单对该设备进行控制。
可选的,所述通过所述摄像头获取目标设备所处的空间位置,可以包括:
通过所述摄像头进行空间特征识别,得到多个空间特征点;
所述根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点,可以包括:
根据所述显示位置与多个所述空间特征点之间的位置关系,创建所述AR锚点。
举例说明,通过摄像头进行空间特征识别,得到多个空间特征点,根据显示位置和多个空间特征点之间的位置关系确定设备相对于空间的位置,在设备相对于空间的位置创建AR锚点。创建AR锚点后,未对设备的位置进行移动的情况下,还可以根据该AR锚点得到设备在当前空间的位置。比如,通过摄像头对客厅进行空间特征识别,得到多个空间特征点,空间特征点包括不限于在客厅的窗户,门,电视墙上等表征客厅分布特征的点;在客厅内放置有一台空调,空调是放置在客厅的地面的,根据空调的位置和客厅的空间特征点之间的位置关系,确定空调是放置在客厅窗边的地面,在空调所在的客厅窗边的地面位置创建AR锚点。
可选的,如图2所示,步骤S110可以包括:
在步骤S1101中,在所述摄像头拍摄到的图像中进行AR锚点识别;
在步骤S1102中,在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,获取所述AR锚点的锚点标识信息;
所述确定与所述AR锚点锚定的空间位置绑定的目标设备,可以包括:
根据所述AR锚点的锚点标识信息,以及预存的锚点标识信息与设备标识信息之间的对应关系,确定与所述AR锚点锚定的空间位置绑定的目标设备。
举例说明,通过终端的摄像头拍摄当前空间的图像,终端对图像中的AR锚点进行识别,在从图像中识别到AR锚点的情况下,获取AR锚点的锚点标识信息;根据AR锚点的锚点标识信息,以及预存的锚点标识信息与设备标识信息之间的对应关系,确定与AR锚点锚定的空间位置绑定的目标设备。比如,通过摄像头拍摄客厅的图像,对图像中的AR锚点进行识别,在从形象中识别到AR锚点的情况下,获取AR锚点的锚点标识信息;根据AR锚点的锚点标识信息以及预存的锚点标识信息于设备标识信息之间的对应关系,确定与AR锚点锚定的空间位置绑定的空调。
可选的,所述显示所述目标设备的控制菜单,可以包括:
根据所述AR锚点在所述图像中的位置,将所述目标设备的控制菜单显示在该位置的预设范围内;或,
在所述AR锚点为多个的情况下,根据每一所述AR锚点相对于用户的距离,显示距离用户最近的AR锚点对应的目标设备的控制菜单。
具体的,如图3所示,在拍摄图像中包括窗帘(Curtains)、灯(Lights)、床温(BedTemp)、风扇(Fan)的多个AR锚点的情况下,可以根据各个AR锚点在所述图像中的位置,在该位置的预设范围内对窗帘、灯、床温、风扇的控制菜单进行显示,用户可根据需要选择控制菜单,对窗帘、灯、床温、风扇中的一个进行控制,其中,拍摄图像中可以包括一个窗帘AR锚点,也可以同时包括窗帘、灯、床温、风扇的多个AR锚点。本公开对此不作具体限定。
如图4所示,在拍摄图像中包括窗帘(Curtains)、灯(Lights)、床温(Bed Temp)、风扇(Fan)的多个AR锚点的情况下,可以根据每一所述AR锚点相对于用户的距离,对距离用户最近的AR锚点对应的灯的控制菜单进行显示,用户根据灯的控制菜单来对灯进行控制。本公开对此不作具体限定。
其中,在显示多个所述目标设备的控制菜单时,还可以通过总开关(All Off)对图像中存在的所有设备实现一键关闭的功能,可以在多个设备同时打开,用户又着急出门时使用,本公开对此不作具体限定。
其中,一个锚点标识信息对应一个设备标识信息。
可选的,如图5所示,步骤S1101还可以包括:
在步骤S1101中,在所述摄像头拍摄到的图像中进行AR识别;
在步骤S1103中,在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,判断所述图像中是否存在所述AR锚点对应的目标设备;
在步骤S1104中,在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
具体的,提醒消息可以是文字消息,也可以是语音消息,本公开对此不作具体限定。
举例说明,在摄像头拍摄到的客厅的图像中识别到AR锚点的情况下,判断图像中是否存在该AR锚点对应的空调;在将空调移出客厅放置在卧室时,拍摄到的客厅的图像中不存在空调的情况下,发出用于提醒用户删除AR锚点的提醒消息;在将空调从原本的位置移动到客厅的其他位置,拍摄到的客厅的图像中不存在空调的情况下,发出用于提醒用户更新空调的AR锚点的提醒消息。
可选的,如图6所示,本实施例公开的设备控制方法还可以包括以下步骤:
在步骤S110中,获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的。
在步骤S120中,确定与所述AR锚点锚定的空间位置绑定的目标设备。
在步骤S130中,显示所述目标设备的控制菜单。
在步骤S140中,响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
在步骤S150中,在预设时长内未接收到所述目标设备的控制响应的情况下,判断所述图像中是否存在所述AR锚点对应的目标设备。
在步骤S160中,在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
其中,预设时长可以根据目标设备实际的响应情况进行预设,本公开对此不作具体限定。
举例说明,在将空调损坏丢弃或者送给他人的后,获取摄像头拍摄到的图像中的AR锚点,确定与所述AR锚点锚定的空间位置绑定的目标设备,显示所述目标设备的控制菜单给用户,响应于用户针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对空调(目标设备)进行控制,在5分钟内未接收到空调的控制响应的情况下,判断客厅的图像中是否存在该AR锚点对应的空调,在图像中不存储在该AR锚点对应的空调的情况下,发出用于提醒用户删除该AR锚点的提醒消息;
在将空调从客厅移动到书房后,获取摄像头拍摄到的图像中的AR锚点,确定与所述AR锚点锚定的空间位置绑定的目标设备,显示所述目标设备的控制菜单给用户,响应于用户针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对空调(目标设备)进行控制,在5分钟内未接收到空调的控制响应的情况下,判断客厅的图像中是否存在该AR锚点对应的空调,在图像中不存储在该AR锚点对应的空调的情况下,发出用于提醒用户更新空调的AR锚点的提醒消息。
可选的,所述根据所述控制指令对所述目标设备进行控制,可以包括:
将所述控制指令发送给服务器,以使所述服务器根据所述控制指令对所述设备标识信息对应的目标设备进行控制。
本实施例公开的一种设备控制方法,可以在设备所在的空间的任意角度和位置获取摄像头拍摄到的图像中的AR锚点,确定与该AR锚点锚点定的目标设备,显示所述目标设备的控制菜单,通过控制菜单对目标设备进行控制。每个设备对应一个锚点,在中存在多个设备的情况下,可通过AR锚点快速准确获取每个设备的控制菜单,对设备进行高效控制,且不受摄像头拍摄的图像的角度影响。
图7是根据一示例性实施例示出的一种设备控制装置框图。参照图7,该设备控制装置500包括获取模块501,控制模块502,显示模块503和执行模块504。
本实施例公开的设备控制装置可以在设备所在的空间的任意角度和位置获取摄像头拍摄到的图像中的AR锚点,确定与该AR锚点锚定的空间位置绑定的目标设备,显示目标设备的控制菜单,通过控制菜单对目标设备进行控制。每个设备对应一个锚点,在中存在多个设备的情况下,可通过AR锚点快速准确获取每个设备的控制菜单,对设备进行高效控制,且不受摄像头拍摄的图像的角度影响。
该获取模块501被配置成获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先设置的。
该控制模块502被配置成确定与所述AR锚点锚定的空间位置绑定的目标设备。
该显示模块503被配置成显示所述目标设备的控制菜单。
该执行模块504被配置成响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
可选的,所述获取模块501具体可以在所述摄像头拍摄到的图像中进行AR锚点识别;
在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,获取所述AR锚点的锚点标识信息;
根据所述AR锚点的锚点标识信息,以及预存的锚点标识信息与设备标识信息之间的对应关系,确定与所述AR锚点锚定的空间位置绑定的目标设备。
可选的,所述执行模块504具体可以在预设时长内未接收到所述目标设备的控制响应的情况下,判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
可选的,所述执行模块504还可以将所述控制指令发送给服务器,以使所述服务器根据所述控制指令对所述目标设备进行控制。
可选的,所述设备控制装置500还包括判断模块,所述判断模块被配置成判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
可选的,所述设备控制装置500还包括锚点创建模块,所述锚点创建模块被配置成通过所述摄像头获取目标设备所处的空间位置,并获取放置在所述终端的预览界面内的目标设备的显示位置;
根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点;
根据所述AR锚点生成锚点标识信息,将所述锚点标识信息与设备标识信息进行绑定,并将绑定关系发送给服务器进行存储,其中,所述服务器还存储有目标设备的设备标识信息与目标设备的控制菜单之间的对应关系。
可选的,所述锚点创建模块具体可以通过所述摄像头进行空间特征识别,得到多个空间特征点;
根据所述显示位置与多个所述空间特征点之间的位置关系,创建所述AR锚点。
可选的,所述显示模块可以包括第一显示子模块和第显示二子模块;
所述第一子模块可以根据所述AR锚点在所述图像中的位置,将所述目标设备的控制菜单显示在该位置的预设范围内;
所述第二子模块可以在所述AR锚点为多个的情况下,根据每一所述AR锚点相对于用户的距离,显示距离用户最近的AR锚点对应的目标设备的控制菜单。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开还提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开提供的设备控制方法的步骤。
具体的,该计算机可读存储介质可以是闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘、服务器等等。
关于上述实施例中的计算机可读存储介质,其上存储的计算机程序被执行时的方法步骤已将在有关该方法的实施例中进行了详细描述,此处不做详细阐述。
本公开还提供一种设备控制装置,该装置可以是计算机,平台设备等,设备控制装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;
确定与所述AR锚点锚定的空间位置绑定的目标设备;
显示所述目标设备的控制菜单;
响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
设备控制装置可以在设备所在的空间的任意角度和位置获取摄像头拍摄到的图像中的AR锚点,确定与该AR锚点锚定的空间位置绑定的目标设备,显示目标设备的控制菜单,通过控制菜单对目标设备进行控制。每个设备对应一个锚点,在中存在多个设备的情况下,可通过AR锚点快速准确获取每个设备的控制菜单,对设备进行高效控制,且不受摄像头拍摄的图像的角度影响。
图8是根据一示例性实施例示出的一种设备控制装置600的框图。例如,装置600可以是移动电话,计算机,平板设备等。
参照图8,设备控制装置600可以包括以下一个或多个组件:处理组件602,存储器604,电力组件606,多媒体组件608,音频组件610,输入/输出(I/O)的接口612,传感器组件614,以及通信组件616。
处理组件602通常控制装置600的整体操作,诸如与显示相关联的操作。处理组件602可以包括一个或多个处理器620来执行指令,以完成上述的设备控制方法的全部或部分步骤。此外,处理组件602可以包括一个或多个模块,便于处理组件602和其他组件之间的交互。例如,处理组件602可以包括多媒体模块,以方便多媒体组件608和处理组件602之间的交互。
存储器604被配置为存储各种类型的数据以支持在装置600的操作。这些数据的示例包括用于在装置600上操作的任何应用程序或方法的指令,图像、锚点标识信息与设备标识信息之间的对应关系、目标设备的设备标识信息与目标设备的控制菜单之间的对应关系等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件606为装置600的各种组件提供电力。电力组件606可以包括电源管理系统,一个或多个电源,及其他与为装置600生成、管理和分配电力相关联的组件。
多媒体组件608包括在所述装置600和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件608包括一个前置摄像头和/或后置摄像头。当装置600处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以获取外部的图像。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件610被配置为输出和/或输入音频信号。例如,音频组件610包括一个扬声器,当装置600处于操作模式,如对目标设备进行控制时,扬声器被配置为发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的语音消息。
I/O接口612为处理组件602和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件614包括一个或多个传感器,用于为装置600提供各个方面的状态评估。例如,传感器组件614可以检测到装置600的打开/关闭状态,组件的相对定位,例如所述组件为装置600的显示器和小键盘,传感器组件614还可以检测装置600或装置600一个组件的位置改变,用户与装置600接触的存在或不存在,装置600方位或加速/减速和装置600的温度变化。传感器组件614还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。
通信组件616被配置为便于装置600和其他设备之间有线或无线方式的通信。装置600可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件616经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件616还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述设备控制方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器604,上述指令可由装置600的处理器620执行以完成上述设备控制方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践本公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (16)

1.一种设备控制方法,应用于设置有摄像头的终端,其特征在于,所述方法包括:
获取所述摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;
确定与所述AR锚点锚定的空间位置绑定的目标设备;
显示所述目标设备的控制菜单;
响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
2.根据权利要求1所述的方法,其特征在于,所述获取所述摄像头拍摄到的图像中的AR锚点,包括:
在所述摄像头拍摄到的图像中进行AR锚点识别;
在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,获取所述AR锚点的锚点标识信息;
所述确定与所述AR锚点锚定的空间位置绑定的目标设备,包括:
根据所述AR锚点的锚点标识信息,以及预存的锚点标识信息与目标设备标识信息之间的对应关系,确定与所述AR锚点锚定的空间位置绑定的目标设备。
3.根据权利要求2所述的方法,其特征在于,在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,所述方法还包括:
判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
4.根据权利要求2所述的方法,其特征在于,在所述根据所述控制指令对所述目标设备进行控制之后,所述方法包括:
在预设时长内未接收到所述目标设备的控制响应的情况下,判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
5.根据权利要求1-4任一所述的方法,其特征在于,所述AR锚点是通过如下方式创建的:
通过所述摄像头获取目标设备所处的空间位置,并获取所述目标设备的图像在所述终端的预览界面内的显示位置;
根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点;
根据所述AR锚点生成锚点标识信息,将所述锚点标识信息与设备标识信息进行绑定,并将绑定关系发送给服务器进行存储,其中所述服务器还存储有目标设备的设备标识信息与目标设备的控制菜单之间的对应关系。
6.根据权利要求5所述的方法,其特征在于,所述通过所述摄像头获取目标设备所处的空间位置,包括:
通过所述摄像头进行空间特征识别,得到多个空间特征点;
所述根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点,包括:
根据所述目标显示位置与多个所述空间特征点之间的位置关系,创建所述AR锚点。
7.根据权利要求1-4任一项所述的方法,其特征在于,所述显示所述目标设备的控制菜单,包括:
根据所述AR锚点在所述图像中的位置,将所述目标设备的控制菜单显示在该位置的预设范围内;或,
在所述AR锚点为多个的情况下,根据每一所述AR锚点相对于用户的距离,显示距离用户最近的AR锚点对应的目标设备的控制菜单。
8.一种设备控制装置,应用于设置有摄像头的终端,其特征在于,所述装置包括:
获取模块,被配置成获取所述摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;
控制模块,被配置成确定与所述AR锚点锚定的空间位置绑定的目标设备;
显示模块,被配置成显示所述目标设备的控制菜单;
执行模块,被配置成响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
9.根据权利要求8所述的装置,其特征在于,所述获取模块被配置成在所述摄像头拍摄到的图像中进行AR锚点识别;
在从所述摄像头拍摄到的图像中识别到AR锚点的情况下,获取所述AR锚点的锚点标识信息;
根据所述AR锚点的锚点标识信息,以及预存的锚点标识信息与设备标识信息之间的对应关系,确定与所述AR锚点锚定的空间位置绑定的目标设备。
10.根据权利要求8所述的装置,其特征在于,所述装置还包括判断模块,所述判断模块被配置成判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
11.根据权利要求8所述的装置,其特征在于,所述执行模块被配置成在预设时长内未接收到所述目标设备的控制响应的情况下,判断所述图像中是否存在所述AR锚点对应的目标设备;
在所述图像中不存在所述AR锚点对应的目标设备的情况下,发出用于提醒用户删除所述AR锚点或者更新所述目标设备的AR锚点的提醒消息。
12.根据权利要求8-11任一所述的装置,其特征在于,所述装置还包括锚点创建模块,所述锚点创建模块被配置成通过所述摄像头获取目标设备所处的空间位置,并获取放置在所述终端的预览界面内的目标设备的显示位置;
根据所述空间位置以及所述显示位置创建对应所述目标设备的AR锚点;
根据所述AR锚点生成锚点标识信息,将所述锚点标识信息与设备标识信息进行绑定,并将绑定关系发送给服务器进行存储,其中,所述服务器还存储有目标设备的设备标识信息与目标设备的控制菜单之间的对应关系。
13.根据权利要求12所述的装置,其特征在于,所述锚点创建模块被配置成通过所述摄像头进行空间特征识别,得到多个空间特征点;
根据所述显示位置与多个所述空间特征点之间的位置关系,创建所述AR锚点。
14.根据权利要求8-11任一项所述的装置,其特征在于,所述显示模块包括第一显示子模块和第显示二子模块;
所述第一子模块被配置成根据所述AR锚点在所述图像中的位置,将所述目标设备的控制菜单显示在该位置的预设范围内;
所述第二子模块被配置成在所述AR锚点为多个的情况下,根据每一所述AR锚点相对于用户的距离,显示距离用户最近的AR锚点对应的目标设备的控制菜单。
15.一种设备控制装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取摄像头拍摄到的图像中的AR锚点,所述AR锚点是根据目标设备的空间位置预先创建的;
确定与所述AR锚点锚定的空间位置绑定的目标设备;
显示所述目标设备的控制菜单;
响应于针对所述控制菜单的操作,生成控制指令,并根据所述控制指令对所述目标设备进行控制。
16.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,该程序指令被处理器执行时实现权利要求1-7中任一项所述的设备控制方法的步骤。
CN202010981293.1A 2020-09-17 2020-09-17 设备控制方法、装置及存储介质 Pending CN114200895A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010981293.1A CN114200895A (zh) 2020-09-17 2020-09-17 设备控制方法、装置及存储介质
US17/328,472 US11435891B2 (en) 2020-09-17 2021-05-24 Augment reality techniques for controlling smart devices
EP21175911.3A EP3971688A1 (en) 2020-09-17 2021-05-26 Device control method and apparatus, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010981293.1A CN114200895A (zh) 2020-09-17 2020-09-17 设备控制方法、装置及存储介质

Publications (1)

Publication Number Publication Date
CN114200895A true CN114200895A (zh) 2022-03-18

Family

ID=76159238

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010981293.1A Pending CN114200895A (zh) 2020-09-17 2020-09-17 设备控制方法、装置及存储介质

Country Status (3)

Country Link
US (1) US11435891B2 (zh)
EP (1) EP3971688A1 (zh)
CN (1) CN114200895A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115898039A (zh) * 2023-03-10 2023-04-04 北京建工四建工程建设有限公司 钢筋对孔可视化调整方法、装置、设备、系统和存储介质

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111263002B (zh) * 2020-01-19 2022-08-26 华为技术有限公司 一种显示方法和电子设备
US11482002B1 (en) 2020-10-16 2022-10-25 Splunk Inc. Codeless anchor detection for detectable features in an environment
US11954774B2 (en) 2021-08-29 2024-04-09 Snap Inc. Building augmented reality experiences with IoT devices
US20230063944A1 (en) * 2021-08-29 2023-03-02 Yu Jiang Tham Two-way control of iot devices using ar camera
US11941231B2 (en) 2021-08-29 2024-03-26 Snap Inc. Camera interfaces to interact with IoT devices
WO2023244581A1 (en) * 2022-06-15 2023-12-21 Apple Inc. Home automation device control and designation

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160084502A (ko) * 2011-03-29 2016-07-13 퀄컴 인코포레이티드 로컬 멀티-사용자 협업을 위한 모듈식 모바일 접속된 피코 프로젝터들
US9894471B1 (en) * 2015-07-25 2018-02-13 Gary M. Zalewski Wireless coded communication (WCC) devices with power harvesting power sources for processing biometric identified functions
WO2017165705A1 (en) * 2016-03-23 2017-09-28 Bent Image Lab, Llc Augmented reality for the internet of things
CA3045664A1 (en) 2016-12-05 2018-06-14 Magic Leap, Inc. Virtual user input controls in a mixed reality environment
US10140773B2 (en) * 2017-02-01 2018-11-27 Accenture Global Solutions Limited Rendering virtual objects in 3D environments
US11782570B2 (en) * 2017-02-23 2023-10-10 Jue-Hsuan Hsiao Integration platform of internet of things and virtual device
US11164380B2 (en) 2017-12-05 2021-11-02 Samsung Electronics Co., Ltd. System and method for transition boundaries and distance responsive interfaces in augmented and virtual reality
US11131973B2 (en) * 2017-12-06 2021-09-28 Arris Enterprises Llc System and method of IOT device control using augmented reality

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115898039A (zh) * 2023-03-10 2023-04-04 北京建工四建工程建设有限公司 钢筋对孔可视化调整方法、装置、设备、系统和存储介质

Also Published As

Publication number Publication date
US11435891B2 (en) 2022-09-06
EP3971688A1 (en) 2022-03-23
US20220083188A1 (en) 2022-03-17

Similar Documents

Publication Publication Date Title
CN114200895A (zh) 设备控制方法、装置及存储介质
EP3144915B1 (en) Method and apparatus for controlling device, and terminal device
EP3119039B1 (en) Method and apparatus for controlling an intelligent device
EP3015779B1 (en) Air purification prompting method and apparatus, and user equipment
US10564833B2 (en) Method and apparatus for controlling devices
EP3171548A1 (en) A method and apparatus for controlling a home device
US10530836B2 (en) Methods and apparatuses for acquiring image
EP3174053A1 (en) Method, apparatus and system for playing multimedia data, computer program and recording medium
WO2016173193A1 (zh) 智能家居系统中智能设备的分组方法和分组装置
US20170083220A1 (en) Method and apparatus for controlling devices
WO2016183992A1 (zh) 对账户与设备的控制关系进行管理的方法、装置和系统
EP3136793A1 (en) Method and apparatus for awakening electronic device
CN108710306B (zh) 智能设备的控制方法、装置及计算机可读存储介质
CN106603350B (zh) 信息展示方法及装置
KR20160077011A (ko) 스마트 홈 디바이스의 운전상태 조절 방법, 장치, 프로그램 및 기록매체
CN107343087B (zh) 智能设备控制方法及装置
EP3099017A1 (en) A method and a device for controlling a smart home power supply
CN106990894B (zh) 智能设备的控制方法及装置
CN109525966B (zh) 智能设备的查询方法、装置和存储介质
EP3119037A1 (en) Method and apparatus for downloading control program
US20160123622A1 (en) Air purification notification method and apparatus, user equipment and system
CN105549572A (zh) 智能家居设备的控制方法、装置及设备
CN113992928A (zh) 直播间展示方法、装置、电子设备及存储介质
CN107247535B (zh) 智能镜子调节方法、装置及计算机可读存储介质
US20180062934A1 (en) Method and apparatus for device identification

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination