CN105259765A - 生成控制界面的方法及装置 - Google Patents

生成控制界面的方法及装置 Download PDF

Info

Publication number
CN105259765A
CN105259765A CN201510600225.5A CN201510600225A CN105259765A CN 105259765 A CN105259765 A CN 105259765A CN 201510600225 A CN201510600225 A CN 201510600225A CN 105259765 A CN105259765 A CN 105259765A
Authority
CN
China
Prior art keywords
smart machine
scene picture
submodule
region
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510600225.5A
Other languages
English (en)
Other versions
CN105259765B (zh
Inventor
张旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Technology Co Ltd
Xiaomi Inc
Original Assignee
Xiaomi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaomi Inc filed Critical Xiaomi Inc
Priority to CN201510600225.5A priority Critical patent/CN105259765B/zh
Publication of CN105259765A publication Critical patent/CN105259765A/zh
Application granted granted Critical
Publication of CN105259765B publication Critical patent/CN105259765B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/418Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2642Domotique, domestic, home control, automation, smart house

Abstract

本公开是关于一种生成控制界面的方法及装置,所述方法,包括:获取场景图片;所述场景图片包括智能设备的轮廓;确定所述智能设备在所述场景图片中的位置;在所述位置上显示用于控制所述智能设备的控制按钮。达到了在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数,也利于用户寻找到智能设备在场景图中的位置。

Description

生成控制界面的方法及装置
技术领域
本公开涉及通信及计算机处理领域,尤其涉及生成控制界面的方法及装置。
背景技术
随着电子技术和互联网的发展,很多电子设备都具有联网功能。智能家居应运而生。有了智能家居就离不开对智能家居的控制。可以在手机上安装各个电器对应的APP(应用),一个APP控制一个电器。
发明内容
为克服相关技术中存在的问题,本公开提供一种生成控制界面的方法及装置。
根据本公开实施例的第一方面,提供一种生成控制界面的方法,包括:
获取场景图片;所述场景图片包括智能设备的轮廓;
确定所述智能设备在所述场景图片中的位置;
在所述位置上显示用于控制所述智能设备的控制按钮。
本公开的实施例提供的技术方案可以包括以下有益效果:通过智能设备与场景图片中的智能设备对应,并在场景图片中智能设备的位置处显示控制按键,通过控制按键对智能设备进行控制,达到了在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数,由于在场景图片中显示了智能设备的轮廓,可以更直观的表达出智能设备在场景图中的位置,所以用户在通过场景图片控制智能设备时,也利于用户寻找到智能设备在场景图中的位置。
所述场景图片为全景场景图片;
所述获取场景图片,包括:
通过调整拍摄的角度和焦距,获取多张图片;
将所述多张图片合成为所述全景场景图片。
本公开的实施例提供的技术方案可以包括以下有益效果:通过多张不同的角度和焦距的图片合成全景场景图片,通过合成图片的方式获取的场景图片的视角更广,可以展示出智能设备周围所有的角度,使智能设备及其周围的智能设备在场景图片中都可以正常的表达出来,方便用户在场景图片中寻找到多个智能设备的位置。
所述获取场景图片之前,还包括:
向所述智能设备发送第一闪烁指令,所述第一闪烁指令用于指示所述智能设备按照所述第一闪烁指令闪烁指示灯;
所述获取场景图片,包括:
按照预设时间间隔,获取多个场景图片;
所述确定所述智能设备在所述场景图片中的位置,包括:
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
本公开的实施例提供的技术方案可以包括以下有益效果:通过向智能设备发送第一闪烁指令指示智能设备根据第一闪烁指令闪烁指示灯,并按照预设时间间隔获取多个场景图片,由于智能设备根据第一闪烁指令闪烁指示灯时,会影响智能设备周围区域的亮度变化,按照预设的时间间隔获取的图片包括指令灯亮时及指令灯灭时的图片,所以将多张场景图片比较后亮度变化的区域确定为智能设备的位置信息,方便建立智能设备在与场景图片中的控制按键的对应关系,从而方便用户在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数。
所述第一闪烁指令中携带有闪烁频率,所述闪烁频率用于指示所述智能设备按照所述闪烁频率闪烁指示灯;
所述将获取的多个场景图片进行比较,确定亮度变化的区域,包括:
将获取的多个场景图片进行比较,确定亮度变化符合所述闪烁频率的区域。
本公开的实施例提供的技术方案可以包括以下有益效果:在第一闪烁指令中携带闪烁频率,并在获取的多个场景图片中,根据闪烁频率确定符合的区域,方便建立智能设备在与场景图片中的控制按键的对应关系。
所述获取场景图片之前,还包括:
向所述智能设备发送第二闪烁指令,所述第二闪烁指令用于指示所述智能设备按照所述智能设备对应的预设闪烁频率闪烁指示灯;
所述确定所述智能设备在所述场景图片中的位置,包括:
确定亮度变化的频率;
根据所述频率获取所述智能设备的基本信息;
所述在所述位置上显示用于控制所述智能设备的控制按钮,包括:
根据所述基本信息,在所述位置上显示用于控制所述智能设备的控制按钮。
本公开的实施例提供的技术方案可以包括以下有益效果:向智能设备发送的第二闪烁指令中携带有智能设备对应的预设闪烁频率,可以指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯,由于向不同的智能设备发送第二闪烁指令时,可以携带不同的闪烁频率,当根据闪烁频率确定符合的区域时,也可以同时确定智能设备,可以同时确定多个智能设备在场景图片上的位置,减少了确定不同智能设备在场景图片中位置的操作次数。
所述确定所述智能设备在所述场景图片中的位置,包括:
通过与所述智能设备的连接向所述智能设备发送开指令和关指令,所述开指令用于指示智能设备进行开处理,所述关指令用于指示智能设备进行关处理;
按照预设时间间隔,获取多个场景图片;
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
本公开的实施例提供的技术方案可以包括以下有益效果:由于智能设备在开关时,智能设备在开状态会有指示灯指示,会影响智能设备周围区域的亮度变化,所以将多张场景图片比较后亮度变化的区域确定为智能设备的位置信息,并且通过与智能设备建立连接,获取智能设备的基本信息,可以更准确的获取到智能设备的位置信息及基本信息,在与场景图片中智能设备对应后,方便生成的控制按钮与智能设备进行连接,从而方便用户在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数。
所述通过与所述智能设备的连接向所述智能设备发送开指令和关指令,包括:
通过路由器与所述智能设备进行连接,并向智能设备发送开指令和关指令。
本公开的实施例提供的技术方案可以包括以下有益效果:通过路由器与智能设备建立连接,并通过路由器向智能设备发送开指令和关指令,由于路由器即可以连接互联网,又可以连接局域网,所以通过路由器与智能设备进行通信,可以使用户无需在智能设备的周围,即可实现与智能设备进行通信,向智能设备发送开指令和关指令,进一步方便用户控制智能设备。
所述确定所述智能设备在所述场景图片中的位置,包括:
与所述智能设备建立无线连接,获取所述智能设备的基本信息;
通过无线测量方式获取所述智能设备相对于参考点方向和距离;
根据所述相对于所述参考点的方向和距离,以及所述参考点在场景图片中的位置,确定所述智能设备在所述场景图片中的位置。
本公开的实施例提供的技术方案可以包括以下有益效果:通过无线测量方式获取智能设备相对于参考点的方向和距离,根据智能设备相对于参考点的方向和距离以及参考点在场景图片中的位置确定智能设备在场景图片中的位置,便于确定智能设备在场景图片中的位置。
所述方法还包括:
接收对更新按钮的触发操作;
根据所述触发操作,重新确定所述智能设备在所述场景图片中的位置;或者,确定新的智能设备在所述场景图片中的位置;
在所述位置上显示用于控制智能设备的控制按钮。
本公开的实施例提供的技术方案可以包括以下有益效果:当更新按键被触发时,说明智能设备的位置发生变化或者场景图片中新的智能设备,因此,可以重新确定智能设备在场景图片中的位置或者确定新的智能设备在场景图片中的位置,并在相应位置上显示控制按键。方便用户对智能设备进行调整时,手动触发控制按键的更新,方便场景图片中控制按钮的显示,进一步方便用户对智能设备的控制。
所述接收对更新按钮的触发操作之后,还包括:
根据所述触发操作,确定所述场景图片中减少的智能设备;
从所述场景图片中删除减少的智能设备对应的控制按钮。
本公开的实施例提供的技术方案可以包括以下有益效果:触发操作还可以是删除智能设备的操作,如果是删除智能设备的操作时,则确定场景图片中减少的智能设备,并从场景图片中删除减少的智能设备对应的控制按键。方便用户对智能设备进行调整,方便场景图片中控制按钮的更新,进一步方便用户对智能设备的控制。
所述获取场景图片,包括:
周期性地获取多张场景图片;
所述确定所述智能设备在所述场景图片中的位置,包括:
将当前场景图片与前一次获取的场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置;
所述将亮度变化的区域确定为所述智能设备在所述场景图片中的位置之后,还包括:
如果所述当前场景图片增加了变亮区域,则通过与所述智能设备连接确定当前场景图片中所有的智能设备的智能设备集合;
将当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
本公开的实施例提供的技术方案可以包括以下有益效果:通过对比周期性获取的多张场景图片,确定亮度变化的区域为智能设备的位置信息,当增加了变亮区域时,确定当前智能设备集合,并将当前智能设备集合与前一次的智能设备集合比较确定新增的智能设备,获取新增的智能设备的基本信息。获取不同的场景图片中的智能设备的集合,通过确定两次相邻的智能设备的集合中的变化确定智能设备的位置信息及基本信息,可以更准确的获取到智能设备的位置信息及基本信息,减少了获取智能设备的位置信息及基本信息的操作次数。
所述将亮度变化的区域确定为所述智能设备在所述场景图片中的位置,包括:
判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值;
如果亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值,则将亮度变化的区域确定为所述智能设备在所述场景图片上的位置。
本公开的实施例提供的技术方案可以包括以下有益效果:由于轻微的位置变化可能是获取场景图片时图像处理的问题,而实际上智能设备的位置并没有发生改变,也可能是用户对智能设备的位置进行了微调,因此亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值时,确定亮度变化区域不为新的智能设备的位置信息,通过判断亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值时,将亮度变化的区域确定为智能设备的位置信息,避免了由于轻微的位置变化而确定智能设备的位置信息的情况,提高了确定智能设备的位置信息的准确率。
所述判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值之后,还包括:
如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在所述场景图片上的原有的所述智能设备的位置。
本公开的实施例提供的技术方案可以包括以下有益效果:由于轻微的位置变化可能是获取场景图片时图像处理的问题,而实际上智能设备的位置并没有发生改变,也可能是用户对智能设备的位置进行了微调,因此亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值时,确定亮度变化区域不为新的智能设备的位置信息,通过判断亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值时,将亮度变化的区域确定为智能设备的位置信息,避免了由于轻微的位置变化而确定智能设备的位置信息的情况,提高了确定智能设备的位置信息的准确率。
所述在所述位置上显示用于控制所述智能设备的控制按钮,包括:
判断所述智能设备在所述场景图片与已有的控制按钮之间的距离是否小于预设的距离阈值;
如果智能设备在所述场景图片中的位置与已有的控制按钮之间的距离小于预设的距离阈值时,则输出关于多个智能设备的选项;
接收针对所述选项的选择结果;
根据接收的针对所述选项的选择结果,在所述位置上显示用于控制所述智能设备的控制按钮。
本公开的实施例提供的技术方案可以包括以下有益效果:如果智能设备在所述场景图片中的位置与已有的控制按钮之间的距离小于预设的距离阈值时,不确定场景图片中的位置与控制按钮是否表示两个电器,也不确定是否是多个电器中的哪个电器覆盖其他电器,所以输入关于多个智能设备的选项,以供用户自行选择是哪种情况,方便在场景图片中智能设备的位置处显示控制按钮,进一步方便用户根据场景图片中智能设备的控制按钮对智能设备进行控制。
根据本公开实施例的第二方面,提供一种生成控制界面的装置,包括:
获取模块,用于获取场景图片;所述场景图片包括智能设备的轮廓;
第一确定模块,用于确定所述智能设备在所述获取模块获取的所述场景图片中的位置;
第一显示模块,用于在所述第一确定模块确定的所述位置上显示用于控制所述智能设备的控制按钮。
所述获取模块获取的所述场景图片为全景的场景图片;
所述获取模块,包括:第一获取子模块及合成子模块;
所述第一获取子模块,用于通过调整拍摄的角度和焦距,获取多张图片;
所述合成子模块,用于将第一获取子模块获取的所述多张图片合成为所述全景场景图片。
所述装置,还包括:第一发送模块;
第一发送模块,用于向所述智能设备发送第一闪烁指令,所述第一闪烁指令用于指示所述智能设备按照所述第一闪烁指令闪烁指示灯;
所述获取模块,包括:第二获取子模块;
所述第二获取子模块,用于按照预设时间间隔,获取多个场景图片;
所述第一确定模块,包括:第一确定子模块;
所述第一确定子模块,用于将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
所述第一发送模块发送的所述第一闪烁指令中携带有闪烁频率,所述闪烁频率用于指示所述智能设备按照所述闪烁频率闪烁指示灯;
所述第一确定子模块还用于将获取的多个场景图片进行比较,确定亮度变化符合所述闪烁频率的区域。
所述装置,还包括:第二发送模块;
第二发送模块,用于向所述智能设备发送第二闪烁指令,所述第二闪烁指令用于指示所述智能设备按照所述智能设备对应的预设闪烁频率闪烁指示灯;
所述第一确定模块,包括:第二确定子模块及第二获取子模块;
所述第二确定子模块,用于确定亮度变化的频率;
所述第二获取子模块,用于根据所述频率获取所述智能设备的基本信息;
所述第一显示模块,包括:第一显示子模块;
所述第一显示子模块,用于根据所述基本信息,在所述位置上显示用于控制所述智能设备的控制按钮。
所述第一确定模块,包括:第一发送子模块、第三获取子模块及第三确定子模块;
所述第一发送子模块,用于通过与所述智能设备的连接向所述智能设备发送开指令和关指令,所述开指令用于指示智能设备进行开处理,所述关指令用于指示智能设备进行关处理;
所述第三获取子模块,用于按照预设时间间隔,获取多个场景图片;
所述第三确定子模块,用于将所述第三获取子模块获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
所述第一发送子模块还用于通过路由器与所述智能设备进行连接,并向所述智能设备发送开指令和关指令。
所述第一确定模块,包括:第四获取子模块、第五获取子模块及第四确定子模块;
所述第四获取子模块,用于与所述智能设备建立无线连接,获取所述智能设备的基本信息;
所述第五获取子模块,用于通过无线测量方式获取智能设备相对于参考点的方向和距离;
所述第四确定子模块,用于根据所述第五获取子模块获取的相对于所述参考点的方向和距离,以及所述参考点在场景图片中的位置,确定所述智能设备在所述场景图片中的位置。
所述装置还包括:第一接收模块、第二确定模块及第二显示模块;
所述第一接收模块,用于接收对更新按钮的触发操作;
所述第二确定模块,用于根据所述第一接收模块接收到的所述触发操作,重新确定所述智能设备在所述场景图片中的位置;或者,确定新的智能设备在所述场景图片中的位置;
所述第二显示模块,用于在所述位置上显示用于控制智能设备的控制按钮。
所述装置,还包括:第三确定模块及删除模块;
所述第三确定模块,用于根据所述触发操作,确定所述场景图片中减少的智能设备;
所述删除模块,用于从所述场景图片中删除减少的智能设备对应的控制按钮。
所述获取模块,包括:第六获取子模块;
所述第六获取子模块,用于周期性地获取多张场景图片;
所述第一确定模块,包括:第五确定子模块;
所述第五确定子模块,用于将当前场景图片与前一次场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置;
所述装置还包括:第四确定模块及第五确定模块;
所述第四确定模块,用于如果所述第五确定子模块确定所述当前场景图片增加变亮区域,则通过与所述智能设备连接确定当前场景图片中所有的智能设备的当前智能设备集合;
所述第五确定模块,用于将所述第四确定模块确定的当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
所述第二确定模块,包括:第一判断子模块及第六确定子模块;
所述第一判断子模块,用于判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值;
所述第六确定子模块,用于如果所述第一判断子模块判断的亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值时,则将亮度变化的区域确定为所述智能设备在所述场景图片上的位置。
所述第二确定模块,还包括:第七确定子模块;
所述第七确定子模块,用于如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在所述场景图片上的原有的所述智能设备的位。
所述第一显示模块,包括:第二判断子模块、输出子模块、接收子模块及第二显示子模块;
所述第二判断子模块,用于判断所述智能设备在所述场景图片中的位置与已有的控制按钮之间的距离是否小于预设的距离阈值;
所述输出子模块,用于如果所述第二判断子模块判断所述智能设备在所述场景图片上的位置与已有的控制按钮之间的距离小于预设的距离阈值,则输出关于多个智能设备的选项;
所述接收子模块,用于接收针对所述输出了模块输出的所述选项的选择结果;
所述第二显示子模块,用于根据所述接收子模块接收的针对所述选项的选择结果,在所述位置上显示用于控制所述智能设备的控制按钮。
根据本公开实施例的第三方面,提供一种生成控制界面的装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取场景图片,所述场景图片包括智能设备的轮廓;
确定所述智能设备在所述场景图片中的位置;
在所述位置上显示用于控制所述智能设备的控制按钮。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种生成控制界面的方法的流程图。
图2a是根据一示例性实施例示出的一种生成控制界面的方法的详细流程图。
图2b-2g是根据一示例性实施例示出的一种生成控制界面的方法的场景示意图。
图3a是根据一示例性实施例示出的一种生成控制界面的方法的详细流程图。
图3b-3d是根据一示例性实施例示出的一种生成控制界面的方法的场景示意图。
图4是根据一示例性实施例示出的一种生成控制界面的方法的详细流程图。
图5是根据一示例性实施例示出的一种生成控制界面的方法的详细流程图。
图6是根据一示例性实施例示出的一种生成控制界面的方法的详细流程图。
图7是根据一示例性实施例示出的一种生成控制界面的方法的详细流程图。
图8是根据一示例性实施例示出的一种生成控制界面的方法的详细流程图。
图9是根据一示例性实施例示出的一种生成控制界面的装置的框图。
图10是根据一示例性实施例示出的一种生成控制界面的装置中获取模块的框图。
图11是根据一示例性实施例示出的一种生成控制界面的装置的框图。
图12是根据一示例性实施例示出的一种生成控制界面的装置的框图。
图13是根据一示例性实施例示出的一种生成控制界面的装置中第一确定模块的框图。
图14是根据一示例性实施例示出的一种生成控制界面的装置中第一确定模块的框图。
图15是根据一示例性实施例示出的一种生成控制界面的装置的框图。
图16是根据一示例性实施例示出的一种生成控制界面的装置的框图。
图17是根据一示例性实施例示出的一种生成控制界面的装置的框图。
图18是根据一示例性实施例示出的一种生成控制界面的装置中第二确定模块的框图。
图19是根据一示例性实施例示出的一种生成控制界面的装置中第二确定模块的框图。
图20是根据一示例性实施例示出的一种生成控制界面的装置中第一显示模块的框图。
图21是根据一示例性实施例示出的一种生成控制界面的装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本公开实施例提供了一种生成控制界面的方法,在本公开实施例中分移动终端包括:手机、平板电脑、个人电脑等,用于在显示根据智能设备的实际位置生成的场景图片。
图1是根据一示例性实施例示出的一种生成控制界面的方法的流程图,如图1所示,该方法可以由移动终端实现,包括以下步骤:
在步骤S101中,获取场景图片,场景图片包括智能设备的轮廓。
在步骤S102中,确定智能设备在场景图片中的位置。
在步骤S103中,在位置上显示用于控制智能设备的控制按钮。
本公开实施例提供了一种生成控制界面的方法,通过智能设备与场景图片中的智能设备对应,并在场景图片中智能设备的位置处生成控制按钮,通过控制按钮对智能设备进行控制,达到了在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数,由于在场景图片中显示了智能设备的轮廓,可以更直观的表达出智能设备在场景图中的位置,所以用户在通过场景图片控制智能设备时,也利于用户寻找到智能设备在场景图中的位置。
在一个实施例中,步骤S102中还可实施为:步骤S102a至步骤S102b。
在步骤S102a中,通过与智能设备的连接获取智能设备的位置信息和基本信息。其中,当与多个智能设备连接时,依次逐一进行连接,即连接第一个智能设备后执行步骤S102b、步骤S103,执行完成后继续执行步骤S102a连接下一个智能设备。基本信息,包括,智能设备的名称、智能设备的标识、智能设备的地址、智能设备的类型、智能设备的接口协议、智能设备的控制协议及智能设备的控制变量等。其中,智能设备的控制变量,包括:智能设备的亮度、智能设备的音量、智能设备的色差、智能设备的温度、智能设备的运行时间及智能设备的预设值等。本实施例中可以直接与智能设备连接,也可以通过路由器与智能设备连接。在与智能设备连接后,可以通过与智能设备交互获得智能设备的类型、接口协议等基本信息。或者,从路由器处获得智能设备的基本信息。
在步骤S102b中,根据获取的位置信息和场景图片,建立连接的智能设备与场景图片中的智能设备的对应关系。
在一个实施例中,场景图片为全景场景图片,步骤S101还可实施为:步骤A1-步骤A2。
在步骤A1中,通过调整拍摄的角度和焦距,获取多张图片。
在步骤A2中,将多张图片合成为场景图片,可以获得全景的场景图片。
采用上述方法,通过多张不同的角度和焦距的图片合成全景场景图片,通过合成图片的方式获取的场景图片的视角更广,可以展示出智能设备周围所有的角度,使智能设备及其周围的智能设备在场景图片中都可以正常的表达出来,方便用户在场景图片中寻找到多个智能设备的位置。
在一个实施例中,获取场景图片之前,该方法还可实施为:步骤B1,
在步骤B1中,向智能设备发送第一闪烁指令,第一闪烁指令用于指示智能设备按照第一闪烁指令闪烁指示灯。智能设备根据第一闪烁指令自动多次开关指示灯或屏幕等。
步骤S101还可实施为:步骤B2。
在步骤B2中,按照预设时间间隔,获取多个场景图片。
举例而言,预设时间间隔为0.1秒,则1秒内可以获取10个场景图片,获取到的10个场景图片为连续图片,这样可以方便在连续的场景图片中确定亮度变化的区域。
步骤S102还可实施为:步骤B3,
在步骤B3中,将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
采用上述方法,通过向智能设备发送第一闪烁指令指示智能设备根据第一闪烁指令闪烁指示灯,并按照预设时间间隔获取多个场景图片,由于智能设备根据第一闪烁指令闪烁指示灯时,会影响智能设备周围区域的亮度变化,按照预设的时间间隔获取的图片包括指令灯亮时及指令灯灭时的图片,所以将多张场景图片比较后亮度变化的区域确定为智能设备的位置信息,方便建立智能设备在与场景图片中的控制按键的对应关系,从而方便用户在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数。并且,闪烁方式意味着不只开关一次,多次开关指示灯可以减少周围环境中的光亮对指示灯亮度的影响,可以更准确的确定智能设备的位置。
在一个实施例中,第一闪烁指令中携带有闪烁频率,闪烁频率用于指示智能设备按照闪烁频率闪烁指示灯。
步骤B3还可实施为:步骤C1,
在步骤C1中,将获取的多个场景图片进行比较,确定亮度变化符合闪烁频率的区域。
其中,智能设备按照闪烁频率闪烁指示灯的闪烁间隔大于步骤B2中公开的预设时间间隔,因为只有在闪烁间隔大于预设时间间隔时,在获取多个场景图片时,才能获取到亮度不同的场景图片,这样才能获取场景图片之间的亮度变化。
采用上述方法,在第一闪烁指令中携带闪烁频率,并在获取的多个场景图片中,根据闪烁频率确定符合的区域,方便建立智能设备在与场景图片中的控制按键的对应关系。
在一个实施例中,获取场景图片之前,该方法还可实施为:步骤D1,
在步骤D1中,向智能设备发送第二闪烁指令,第二闪烁指令用于指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯。
步骤S102还可实施为:步骤D2至步骤D3,
在步骤D2中,确定亮度变化的频率。
在步骤D3中,根据频率获取智能设备的基本信息。
步骤S103还可实施为:步骤D4,
在步骤D4中,根据基本信息,在位置上显示用于控制智能设备的控制按钮。
采用上述方法,向智能设备发送的第二闪烁指令中携带有智能设备对应的预设闪烁频率,可以指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯,由于向不同的智能设备发送第二闪烁指令时,可以携带不同的闪烁频率,当根据闪烁频率确定符合的区域时,也可以同时确定智能设备是什么智能设备,可以同时确定多个智能设备在场景图片上的位置,减少了确定不同智能设备在场景图片中位置的操作次数。
在一个实施例中,步骤S102还可实施为:步骤E1-步骤E3。
在步骤E1中,通过与智能设备的连接向智能设备发送开指令和关指令,开指令用于指示智能设备进行开处理,关指令用于指示智能设备进行关处理。
在步骤E2中,按照预设时间间隔,获取多个场景图片。
在步骤E3中,将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
采用上述方法,由于智能设备在开关时,智能设备在开状态会有指示灯指示,会影响智能设备周围区域的亮度变化,所以将多张场景图片比较后亮度变化的区域确定为智能设备的位置信息,并且通过与智能设备建立连接,获取智能设备的基本信息,可以更准确的获取到智能设备的位置信息及基本信息,在与场景图片中智能设备对应后,方便生成的控制按钮与智能设备进行连接,从而方便用户在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数。
在一个实施例中,步骤E1还可实施为:步骤F1。
在步骤F1中,通过路由器与智能设备进行连接,并向智能设备发送开指令和关指令。
采用上述方法,通过路由器与智能设备建立连接,并通过路由器向智能设备发送开指令和关指令,由于路由器即可以连接互联网,又可以连接局域网,所以通过路由器与智能设备进行通信,可以使用户无需在智能设备的周围,即可实现与智能设备进行通信,向智能设备发送开指令和关指令,进一步方便用户控制智能设备。
在一个实施例中,步骤S102还可实施为:步骤G1-步骤G3。
在步骤G1中,与智能设备建立无线连接,获取智能设备的基本信息。
在步骤G2中,通过无线测量方式获取智能设备相对于参考点方向和距离。
在步骤G3中,根据相对于参考点方向和距离,以及参考点在场景图片中的位置,确定智能设备在场景图片中的位置。
其中,无线网络及蓝牙都可实现无线测量方式,在无线网络与蓝牙中都可以根据信号强度计算出与信号源之间的距离。
采用上述方法,通过无线测量方式获取智能设备相对于参考点方向和距离,根据智能设备相对于参考点方向和距离以及参考点在场景图片中的位置确定智能设备在场景图片中的位置,便于确定智能设备在场景图片中的位置。
在一个实施例中,该方法还可实施为:步骤H1至步骤H3,
在步骤H1中,接收对更新按钮的触发操作。
在步骤H2中,根据触发操作,重新确定智能设备在场景图片中的位置。或者,确定新的智能设备在场景图片中的位置。
在步骤H3中,在位置上显示用于控制智能设备的控制按钮。
采用上述方法,当更新按键被触发时,说明智能设备的位置发生变化或者场景图片中新的智能设备,因此,可以重新确定智能设备在场景图片中的位置或者确定新的智能设备在场景图片中的位置,并在相应位置上显示控制按键。方便用户对智能设备进行调整时,手动触发控制按键的更新,方便场景图片中控制按钮的显示,进一步方便用户对智能设备的控制。
在一个实施例中,步骤H1之后,该方法还可实施为:步骤I1至步骤I2,
在步骤I1中,根据触发操作,确定场景图片中减少的智能设备。
在步骤I2中,从场景图片中删除减少的智能设备对应的控制按钮。
采用上述方法,触发操作还可以是删除智能设备的操作,如果是删除智能设备的操作时,则确定场景图片中减少的智能设备,并从场景图片中删除减少的智能设备对应的控制按键。方便用户对智能设备进行调整,方便场景图片中控制按钮的更新,进一步方便用户对智能设备的控制。
在一个实施例中,步骤S101还可实施为:步骤J1。
在步骤E1中,周期性的获取多张场景图片。
步骤S102还可实施为:步骤J2。
在步骤J2中,将当前获取的场景图片与前一次获取的场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
在步骤J2之后,该方法还可实施为:步骤J3至步骤J4,
在步骤J3中,如果当前场景图片增加了变亮区域,则通过与智能设备连接确定当前场景图片中所有的智能设备的智能设备智能设备集合。
在步骤E4中,将当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
采用上述方法,通过对比周期性获取的多张场景图片,确定亮度变化的区域为智能设备的位置信息,当增加了变亮区域时,确定当前智能设备集合,并将当前智能设备集合与前一次的智能设备集合比较确定新增的智能设备,获取新增的智能设备的基本信息。获取不同的场景图片中的智能设备的集合,通过确定两次相邻的智能设备的集合中的变化确定智能设备的位置信息及基本信息,可以更准确的获取到智能设备的位置信息及基本信息,减少了获取智能设备的位置信息及基本信息的操作次数。
在一个实施例中,步骤J2还可实施为:步骤K1至步骤K2。
在步骤K1中,判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值。
在步骤K2中,如果亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值,则将亮度变化的区域确定为智能设备在场景图片上的位置。
采用上述方法,由于轻微的位置变化可能是获取场景图片时图像处理的问题,而实际上智能设备的位置并没有发生改变,也可能是用户对智能设备的位置进行了微调,因此亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值时,确定亮度变化区域不为新的智能设备的位置信息,通过判断亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值时,将亮度变化的区域确定为智能设备的位置信息,避免了由于轻微的位置变化而确定智能设备的位置信息的情况,提高了确定智能设备的位置信息的准确率。
在一个实施例中,步骤K1之后,该方法还可实施为:步骤L1。
在步骤L1中,如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在场景图片上的原有的智能设备的位置。
采用上述方法,由于轻微的位置变化可能是获取场景图片时图像处理的问题,而实际上智能设备的位置并没有发生改变,也可能是用户对智能设备的位置进行了微调,因此亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值时,确定亮度变化区域不为新的智能设备的位置信息,通过判断亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值时,将亮度变化的区域确定为智能设备的位置信息,避免了由于轻微的位置变化而确定智能设备的位置信息的情况,提高了确定智能设备的位置信息的准确率。
在一个实施例中,步骤S103还可实施为:步骤M1-步骤M4。
在步骤M1中,判断智能设备在场景图片中与已有的控制按钮之间的距离是否小于预设的距离阈值。
在步骤M2中,如果智能设备在场景图片中的位置与已有的控制按钮之间的距离小于预设的距离阈值时,则输出关于多个智能设备的选项。
在步骤M3中,接收针对选项的选择结果。
在步骤M4中,根据接收的针对选项的选择结果,在位置上显示用于控制智能设备的控制按钮。
采用上述方法,如果智能设备在场景图片中的位置与已有的控制按钮之间的距离小于预设的距离阈值时,不确定场景图片中的位置与控制按钮是否表示两个电器,也不确定是否是多个电器中的哪个电器覆盖其他电器,所以输入关于多个智能设备的选项,以供用户自行选择是哪种情况,方便在场景图片中智能设备的位置处显示控制按钮,进一步方便用户根据场景图片中智能设备的控制按钮对智能设备进行控制。
上述实施例简单介绍了如何在终端中生成控制智能设备的控制界面,下面通过实施例具体介绍生成控制界面的方法。
如图2a所示,本公开实施例提供了一种生成控制界面的方法,具体实施步骤如下:
在步骤S201中,通过调整拍摄的角度和焦距,获取多张图片。
例如,用户通过摄像头在室内,拍摄摄像头四周的四张图片,拍摄这四张图片时,通过调整拍摄的角度与焦距,使拍摄的图片中的相同物体的大小相同,不同物体之间的大小比例符合实际物体之间的大小比例。
在步骤S202中,将多张图片合成为全景的场景图片。场景图片包括智能设备的轮廓。如图2b所示,在图2a中示出了在手机端显示场景图片。
将这多张图片合成为一张图片,这张图片则为全景的场景图片。在该场景图片中包括作为被控制方的智能设备的轮廓,例如,用户所在室内为客厅,客厅中包括的可被控制的电器有,电视、饮水机、音箱、电灯等。则电视、饮水机、音箱、电灯即为智能设备,其轮廓在全景的场景图片中显示。
在步骤S203中,通过与智能设备的连接向智能设备发送开指令和关指令,开指令用于指示智能设备进行开处理,关指令用于指示智能设备进行关处理。如图2c所示,在图2b中示出了在手机端显示场景图片,并且图中的电灯根据开指令点亮。
当手机与智能设备连接后,可以向智能设备发送各种指令,其中包括开指令和关指令,开指令可以指示智能设备开机,关指令可以指示智能设备关机。
在步骤S203中,通过与智能设备的连接向智能设备发送开指令和关指令,可以通过步骤S2031实现,在步骤S2031中,通过路由器与智能设备的连接向智能设备发送开指令和关指令。
在步骤S203中,通过无线方式与智能设备建立连接,可以通过步骤S2031实现,在步骤S2031中,以无线方式通过路由器与智能设备建立连接。
通过路由器使手机与智能设备连接,可以使手机在控制智能设备时不局限于与智能设备之间的距离,可以通过互联网在外地与智能设备连接,并控制智能设备。
在步骤S204中,按照预设时间间隔,获取多个场景图片。
在智能设备的开和关的过程中,再次通过摄像头拍摄四周的四张图片,并将四张图片合成一张全景的场景图片。
在步骤S205中,将获取的多张场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
在智能设备的开和关的过程中,可以获取多张全景的场景图片,并这些全景的场景图片进行比较,由于智能设备的开启后,智能设备会进入工作状态,而电器在进入工作状态后指示灯会点亮,或者电器本身为发光设备如电视、电灯,则会发出亮光,智能设备关闭后,则指示灯熄灭或不在发光,从而在智能设备的开和关的过程中,智能设备的周围环境的亮度会发生改变。因此,在智能设备的开和关的过程中,亮度变化的区域可以确定为智能设备的位置信息。如图2d-2e所示,除电灯外的其他智能设备都可以向电灯开关时亮度变化一样,通过智能设备的指示灯生产亮度的变化。
在步骤S206中,在位置上显示用于控制智能设备的控制按钮。
在场景图片中的智能设备的位置处生成并显示控制按钮,控制按钮用于控制智能设备。如图2f所示,在场景图片中电灯的位置处显示了用于控制电灯的控制按钮。如图2g所示,用户如需要控制电灯,只需点击场景图片中所需打开的电灯的位置即可开启电灯。
本公开实施例提供了一种生成控制界面的方法,通过多张不同的角度和焦距的图片合成全景的场景图片,由于智能设备在开关时,智能设备在开状态会有指示灯指示,会影响智能设备周围区域的亮度变化,所以将多张场景图片比较后亮度变化的区域确定为智能设备的位置信息,并且通过与智能设备建立连接,获取智能设备的基本信息,可以更准确的获取到智能设备的位置信息及基本信息,在与场景图片中智能设备对应后,方便生成的控制按钮与智能设备进行连接,从而方便用户在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数。由于在场景图片中显示了智能设备的轮廓,可以更直观的表达出智能设备在场景图中的位置,所以用户在通过场景图片控制智能设备时,也利于用户寻找到智能设备在场景图中的位置。
如图3a所示,本公开实施例提供了一种生成控制界面的方法,具体实施步骤如下:
在步骤S301中,获取场景图片,场景图片包括智能设备的轮廓。
手机通过摄像头拍摄室内环境的照片获取场景图片,在手机拍摄室内环境时,一起拍摄到了智能设备的轮廓照片,因此在场景图片中包括智能设备的轮廓。
在步骤S302中,与智能设备建立无线连接,获取智能设备的基本信息。
手机通过无线方式与智能设备建立连接,在与智能设备建立连接后获取智能设备的基本信息,基本信息,包括,智能设备的名称、智能设备的类型、智能设备的接口协议、智能设备的控制协议及智能设备的控制变量。其中,智能设备的控制变量,包括:智能设备的亮度、智能设备的音量、智能设备的色差、智能设备的温度、智能设备的运行时间及智能设备的预设值。
在步骤S303中,通过无线测量方式获取智能设备相对于参考点的方向和距离。
在本公开实施例中,参考点手机的位置手机通过无线测量方式获取智能设备相对于手机的方向和距离。
在步骤S304中,根据相对于参考点的方向和距离,以及参考点在场景图片中的位置,确定智能设备在场景图片中的位置。
根据步骤S303测量到智能设备相对于手机的方向和距离,以及手机预设在场景图片中的位置,计算获取智能设备在场景图片中的位置信息。
在步骤S305中,判断智能设备在场景图片中的位置与已有的控制按钮之间的距离是否小于预设的距离阈值。
判断步骤S304中获取的智能设备的在场景中的位置与场景图片中已有的控制按钮之间的距离是否小于预设的距离阈值。
在步骤S306中,如果智能设备在场景图片中的位置与已有的控制按钮之间的距离小于预设的距离阈值,则输出关于多个智能设备的选项。
如果智能设备的轮廓在场景图片中的位置与已有的控制按钮之间的距离小于预设的距离阈值,则无法判断智能设备的轮廓与已有的控制按钮是否是用于控制同一个智能设备。因此需要通过用户对智能设备的轮廓及已有的控制按钮进行确认。手机输出关于多个智能设备的选项,以供用户选择。
在步骤S307中,接收针对选项的选择结果。
用户在手机输出的关于多个智能设备的选项中,进行了选择后,手机接收用户对该选项的选择结果。如图3b-3c所示,在用户对手机输出的多个智能设备进行选择。
在步骤S308中,根据接收的针对选项的选择结果,在位置上显示用于控制智能设备的控制按钮。
根据接收到的针对关于多个智能设备的选项的选择结果,为智能设备的轮廓在场景图片中的位置,生成控制按钮。如果选择的结果为多个智能设备,则在已有的控制按钮之外,为智能设备的轮廓再生成一个新的控制按钮,如果选择的结果为同一个智能设备,则取消已有的控制按钮,为智能设备的轮廓在场景图片中的位置处,生成新的控制按钮。如图3d所示,在用户选择的位置处显示控制按钮。
本公开实施提供了一种生成控制界面的方法,通过无线测量方式及参考点在场景图片中的位置,获取智能设备在场景图片中的位置。并且如果智能设备的轮廓在场景图片中的位置与已有的控制按钮的距离小于预设的距离阈值时,根据用户的选择结果生成控制按钮。方便用户在同一个场景图片中对多个智能设备进行控制,并且减少了用户设置智能设备时的操作次数,方便用户可以快速的与智能设备进行连接,同时由于在智能设备的轮廓在场景图片中的位置与已有的控制按钮的距离小于预设的距离阈值时,需要用户进行确认,也增加了生成的控制按钮与智能设备轮廓对应的准确性。
如图4所示,本公开实施例提供了一种生成控制界面的方法,具体实施步骤如下:
在步骤S401中,周期性地获取多张场景图片,场景图片包括智能设备的轮廓。
例如,获取场景图片的周期为2秒,则每2秒通过摄像头获取一次场景图片。
在步骤S402中,将当前场景图片与前一次场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
通过将当前获取的场景图片与2秒前获取的场景图片进行比较,确定亮度变化的区域。由于智能设备的开启后,智能设备会进入工作状态,而电器在进入工作状态后指示灯会点亮,或者电器本身为发光设备如电视、电灯,则会发出亮光,智能设备关闭后,则指示灯熄灭或不在发光,从而在智能设备的开关的过程中,智能设备的周围环境的亮度会发生改变。因此,在智能设备的开和关的过程中,亮度变化的区域可以确定为智能设备在场景图片中的位置。
在步骤S402中,获取新增的智能设备的基本信息,可以通过步骤S4021-步骤S4023实施,在步骤S4021中,判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值;在步骤S4022中,如果亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值,则将亮度变化的区域确定为智能设备的位置信息;在步骤S4023中,如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在场景图片上的原有的智能设备的位置。
在步骤S4021-步骤S4023中,判断亮度变化区域与已有的热之间的距离是否是小于预设的第一距离阈值,是为了避免由于智能设备位置发生轻微的变化而使手机认为新增了智能设备的情况。
在步骤S403中,如果当前场景图片增加了变亮区域,则通过与智能设备连接确定当前场景图片中所有的智能设备的智能设备集合。
如果增加了亮度变化的区域则确定目前已与手机连接的智能设备的集合,例如,目前已与手机连接的有电视、饮水机、电灯及空调。则智能设备集合包括电视、饮水机、电灯及空调。
在步骤S404中,将当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
前一次确定的与手机连接的智能设备的集合包括:电视、饮水机及电灯。通过比较两次的智能设备的集合,可以确定新增的智能设备为空调,获取空调的基本信息。
在步骤S405中,在位置上显示用于控制智能设备的控制按钮。
在场景图片中的智能设备的位置处生成并显示控制按钮。
本公开实施例提供了一种生成控制界面的方法,通过亮度的变化区域及两次智能设备集合的比较,确定新增智能设备及新增智能设备的位置,并在场景图片中新增智能设备的位置处,生成控制按钮,方便用户可以在一张场景图片中同时控制多个智能设备,通过在生成控制界面时,减少了用户的操作次数。
如图5所示,本公开实施例提供了一种生成控制界面的方法,具体实施步骤如下:
在步骤S501中,向智能设备发送第一闪烁指令。第一闪烁指令用于指示智能设备按照第一闪烁指令闪烁指示灯。
向电灯发送第一闪烁指令,电灯按照第一闪烁指令闪烁。
在步骤S502中,按照预设时间间隔,获取多个场景图片。
预设时间间隔为0.1秒,则每0.1秒获取一张场景图片,在本公开实施例中获取10个场景图片。
在步骤S503中,将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
将获取到的10个场景图片进行比较,这10个场景图片中的亮度有变化的区域,并将亮度有变化的区域确定为电灯在场景图片中的位置。
在步骤S504中,在位置上显示用于控制智能设备的控制按钮。
在步骤S503中确定的电灯在场景图片中的位置处显示控制按键,该控制按键可以控制电灯的开关。
此外,如图6所示,本公开实施例中步骤S501中公开的第一闪烁指令中携带有闪烁频率,闪烁频率用于指示智能设备按照闪烁频率闪烁指示灯。则在S503将获取的多个场景图片进行比较,确定亮度变化的区域还可以实施为步骤S601,在步骤S601中,将获取的多个场景图片进行比较,确定亮度变化符合闪烁频率的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
本公开实施例提供了一种生成控制界面的方法,通过向智能设备发送第一闪烁指令指示智能设备根据第一闪烁指令闪烁指示灯,并按照预设时间间隔获取多个场景图片,由于智能设备根据第一闪烁指令闪烁指示灯时,会影响智能设备周围区域的亮度变化,按照预设的时间间隔获取的图片包括指令灯亮时及指令灯灭时的图片,所以将多张场景图片比较后亮度变化的区域确定为智能设备的位置信息,方便建立智能设备在与场景图片中的控制按键的对应关系,从而方便用户在同一场景中可以对多个智能设备进行控制的目的,减少了用户为了控制智能设备而进行的操作次数。并且,在第一闪烁指令中携带闪烁频率,并在获取的多个场景图片中,根据闪烁频率确定符合的区域,方便建立智能设备在与场景图片中的控制按键的对应关系。
如图7所示,本公开实施例提供了一种生成控制界面的方法,具体实施步骤如下:
在步骤S701中,向智能设备发送第二闪烁指令,第二闪烁指令用于指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯。
向饮水机及空调发送第二闪烁指令,向饮水机发送的第二闪烁指令中携带的预设闪烁频率为2次/秒,向空调发送的第二闪烁指令中携带的预设闪烁频率为4次/秒。饮水机按照2次/秒的频率进行闪烁,空调按照2次/秒的频率进行闪烁。
在步骤S702中,获取场景图片。
在步骤S703中,确定亮度变化的频率。
确定亮度变化的频率为2次/秒及4次/秒。
在步骤S704中,根据频率获取智能设备的基本信息。
根据确定的亮度变化的频率,可知闪烁频率为2次/秒的智能设备为饮水机,闪烁频率为4次/秒的智能设备为空调,并获取饮水机及空调的基本信息。
在步骤S705中,根据基本信息,在位置上显示用于控制智能设备的控制按钮。
根据获取的基本信息,以及确定的在场景图片中饮水机及空调分别对应的位置显示控制饮水机的控制按钮及控制空调的控制按钮。
本公开实施例提供了一种生成控制界面的方法,向智能设备发送的第二闪烁指令中携带有智能设备对应的预设闪烁频率,可以指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯,由于向不同的智能设备发送第二闪烁指令时,可以携带不同的闪烁频率,当根据闪烁频率确定符合的区域时,也可以同时确定智能设备,可以同时确定多个智能设备在场景图片上的位置,减少了确定不同智能设备在场景图片中位置的操作次数。
如图8所示,本公开实施例提供了一种生成控制界面的方法,具体实施步骤如下:
在步骤S801中,接收对更新按钮的触发操作。根据触发操作执行步骤S802-步骤S803或步骤S804-步骤S805。
在步骤S802中,根据触发操作,重新确定智能设备在场景图片中的位置。
步骤S802还可实施为:确定新的智能设备在场景图片中的位置。
在步骤S803中,在位置上显示用于控制智能设备的控制按钮。
在步骤S804中,根据触发操作,确定场景图片中减少的智能设备。
在步骤S805中,从场景图片中删除减少的智能设备对应的控制按钮。
本公开实施例提供了一种生成控制界面的方法,当更新按键被触发时,说明智能设备的位置发生变化或者场景图片中新的智能设备,因此,可以重新确定智能设备在场景图片中的位置或者确定新的智能设备在场景图片中的位置,并在相应位置上显示控制按键。触发操作还可以是删除智能设备的操作,如果是删除智能设备的操作时,则确定场景图片中减少的智能设备,并从场景图片中删除减少的智能设备对应的控制按键。方便用户对智能设备进行调整时,手动触发控制按键的更新,方便场景图片中控制按钮的显示,进一步方便用户对智能设备的控制。
通过以上介绍了解了传输截屏图片的实现过程,该过程由移动终端和计算机实现,下面分别针对两个设备的内部结构和功能进行介绍。
图9是根据一示例性实施例示出的一种生成控制界面的装置示意图。参照图9,该装置包括:
获取模块91,用于获取场景图片;场景图片包括智能设备的轮廓。
第一确定模块92,用于确定智能设备在获取模块获取的场景图片中的位置。
第一显示模块93,用于在第一确定模块确定的位置上显示用于控制智能设备的控制按钮。
如图10所示,获取模块91获取的场景图片为全景的场景图片。
获取模块91,包括:第一获取子模块101及合成子模块102。
第一获取子模块101,用于通过调整拍摄的角度和焦距,获取多张图片。
合成子模块102,用于将第一获取子模块获取的多张图片合成为全景场景图片。
如图11所示,该装置,还包括:第一发送模块111。
第一发送模块111,用于向智能设备发送第一闪烁指令,第一闪烁指令用于指示智能设备按照第一闪烁指令闪烁指示灯。
获取模块91,包括:第二获取子模块112。
第二获取子模块112,用于按照预设时间间隔,获取多个场景图片。
第一确定模块92,包括:第一确定子模块113。
第一确定子模块113,用于将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
第一发送模块111发送的第一闪烁指令中携带有闪烁频率,闪烁频率用于指示智能设备按照闪烁频率闪烁指示灯。
第一确定子模块113还用于将获取的多个场景图片进行比较,确定亮度变化符合闪烁频率的区域。
如图12所示,该装置,还包括:第二发送模块121。
第二发送模块121,用于向智能设备发送第二闪烁指令,第二闪烁指令用于指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯。
第一确定模块92,包括:第二确定子模块122及第二获取子模块123。
第二确定子模块122,用于确定亮度变化的频率。
第二获取子模块123,用于根据频率获取智能设备的基本信息。
第一显示模块93,包括:第一显示子模块124。
第一显示子模块124,用于根据基本信息,在位置上显示用于控制智能设备的控制按钮。
如图13所示,第一确定模块92,包括:第一发送子模块131、第三获取子模块132及第三确定子模块133。
第一发送子模块131,用于通过与智能设备的连接向智能设备发送开指令和关指令,开指令用于指示智能设备进行开处理,关指令用于指示智能设备进行关处理。
第三获取子模块132,用于按照预设时间间隔,获取多个场景图片。
第三确定子模块123,用于将第三获取子模块获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
第一发送子模块131还用于通过路由器与智能设备进行连接,并向智能设备发送开指令和关指令。
如图14所示,第一确定模块92,包括:第四获取子模块141、第五获取子模块142及第四确定子模块143。
第四获取子模块141,用于与智能设备建立无线连接,获取智能设备的基本信息。
第五获取子模块142,用于通过无线测量方式获取智能设备相对于参考点的方向和距离。
第四确定子模块143,用于根据第五获取子模块获取的相对于参考点的方向和距离,以及参考点在场景图片中的位置,确定智能设备在场景图片中的位置。
如图15所示,该装置还包括:第一接收模块151、第二确定模块152及第二显示模块153。
第一接收模块151,用于接收对更新按钮的触发操作。
第二确定模块152,用于根据第一接收模块接收到的触发操作,重新确定智能设备在场景图片中的位置;或者,确定新的智能设备在场景图片中的位置。
第二显示模块153,用于在位置上显示用于控制智能设备的控制按钮。
如图16所示,该装置,还包括:第三确定模块161及删除模块162。
第三确定模块161,用于根据触发操作,确定场景图片中减少的智能设备。
删除模块162,用于从场景图片中删除减少的智能设备对应的控制按钮。
如图17所示,获取模块91,包括:第六获取子模块171。
第六获取子模块171,用于周期性地获取多张场景图片。
第一确定模块92,包括:第五确定子模块172。
第五确定子模块172,用于将当前场景图片与前一次场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
该装置还包括:第四确定模块173及第五确定模块174。
第四确定模块173,用于如果第五确定子模块确定当前场景图片增加变亮区域,则通过与智能设备连接确定当前场景图片中所有的智能设备的当前智能设备集合。
第五确定模块174,用于将第四确定模块确定的当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
如图18所示,第二确定模块152,包括:第一判断子模块181及第六确定子模块182。
第一判断子模块181,用于判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值。
第六确定子模块182,用于如果第一判断子模块判断的亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值时,则将亮度变化的区域确定为智能设备在场景图片上的位置。
如图19所示,第二确定模块152,还包括:第七确定子模块191。
第七确定子模块191,用于如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在场景图片上的原有的智能设备的位。
如图20所示,第一显示模块93,包括:第二判断子模块201、输出子模块202、接收子模块203及第二显示子模块204。
第二判断子模块201,用于判断智能设备在场景图片中的位置与已有的控制按钮之间的距离是否小于预设的距离阈值。
输出子模块202,用于如果第二判断子模块判断智能设备在场景图片上的位置与已有的控制按钮之间的距离小于预设的距离阈值,则输出关于多个智能设备的选项。
接收子模块203,用于接收针对输出了模块输出的选项的选择结果。
第二显示子模块204,用于根据接收子模块接收的针对选项的选择结果,在位置上显示用于控制智能设备的控制按钮。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图21是根据一示例性实施例示出的一种用于生成控制界面的装置2100的框图。例如,装置2100可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图21,装置2100可以包括以下一个或多个组件:处理组件2102,存储器2104,电源组件2106,多媒体组件2108,音频组件2110,输入/输出(I/O)的接口2112,传感器组件2114,以及通信组件2116。
处理组件2102通常控制装置2100的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件2102可以包括一个或多个处理器2120来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件2102可以包括一个或多个模块,便于处理组件2102和其他组件之间的交互。例如,处理部件2102可以包括多媒体模块,以方便多媒体组件2108和处理组件2102之间的交互。
存储器2104被配置为存储各种类型的数据以支持在设备2100的操作。这些数据的示例包括用于在装置2100上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器2104可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件2106为装置2100的各种组件提供电力。电力组件2106可以包括电源管理系统,一个或多个电源,及其他与为装置2100生成、管理和分配电力相关联的组件。
多媒体组件2108包括在该装置2100和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件2108包括一个前置摄像头和/或后置摄像头。当设备2100处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件2110被配置为输出和/或输入音频信号。例如,音频组件2110包括一个麦克风(MIC),当装置2100处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器2104或经由通信组件2116发送。在一些实施例中,音频组件2110还包括一个扬声器,用于输出音频信号。
I/O接口2112为处理组件2102和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件2114包括一个或多个传感器,用于为装置2100提供各个方面的状态评估。例如,传感器组件2114可以检测到设备2100的打开/关闭状态,组件的相对定位,例如组件为装置2100的显示器和小键盘,传感器组件2114还可以检测装置2100或装置2100的一个组件的位置改变,用户与装置2100接触的存在或不存在,装置2100方位或加速/减速和装置2100的温度变化。传感器组件2114可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件2114还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件2114还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件2116被配置为便于装置2100和其他设备之间有线或无线方式的通信。装置2100可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信部件2116经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,通信部件2116还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置2100可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器2104,上述指令可由装置2100的处理器2120执行以完成上述方法。例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种生成控制界面的装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,该处理器被配置为:
获取场景图片;场景图片包括智能设备的轮廓;
确定智能设备在场景图片中的位置;
在位置上显示用于控制智能设备的控制按钮。
该处理器还可以被配置为:
场景图片为全景场景图片;
获取场景图片,包括:
通过调整拍摄的角度和焦距,获取多张图片;
将多张图片合成为全景场景图片。
该处理器还可以被配置为:
获取场景图片之前,还包括:
向智能设备发送第一闪烁指令,第一闪烁指令用于指示智能设备按照第一闪烁指令闪烁指示灯;
获取场景图片,包括:
按照预设时间间隔,获取多个场景图片;
确定智能设备在场景图片中的位置,包括:
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
该处理器还可以被配置为:
第一闪烁指令中携带有闪烁频率,闪烁频率用于指示智能设备按照闪烁频率闪烁指示灯;
将获取的多个场景图片进行比较,确定亮度变化的区域,包括:
将获取的多个场景图片进行比较,确定亮度变化符合闪烁频率的区域。
该处理器还可以被配置为:
获取场景图片之前,还包括:
向智能设备发送第二闪烁指令,第二闪烁指令用于指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯;
确定智能设备在场景图片中的位置,包括:
确定亮度变化的频率;
根据频率获取智能设备的基本信息;
在位置上显示用于控制智能设备的控制按钮,包括:
根据基本信息,在位置上显示用于控制智能设备的控制按钮。
该处理器还可以被配置为:
确定智能设备在场景图片中的位置,包括:
通过与智能设备的连接向智能设备发送开指令和关指令,开指令用于指示智能设备进行开处理,关指令用于指示智能设备进行关处理;
按照预设时间间隔,获取多个场景图片;
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
该处理器还可以被配置为:
通过与智能设备的连接向智能设备发送开指令和关指令,包括:
通过路由器与智能设备进行连接,并向智能设备发送开指令和关指令。
该处理器还可以被配置为:
确定智能设备在场景图片中的位置,包括:
与智能设备建立无线连接,获取智能设备的基本信息;
通过无线测量方式获取智能设备相对于参考点的方向和距离;
根据相对于参考点的方向和距离,以及参考点在场景图片中的位置,确定智能设备在场景图片中的位置。
该处理器还可以被配置为:
该方法还包括:
接收对更新按钮的触发操作;
根据触发操作,重新确定智能设备在场景图片中的位置;或者,确定新的智能设备在场景图片中的位置;
在位置上显示用于控制智能设备的控制按钮。
该处理器还可以被配置为:
接收对更新按钮的触发操作之后,还包括:
根据触发操作,确定场景图片中减少的智能设备;
从场景图片中删除减少的智能设备对应的控制按钮。
该处理器还可以被配置为:
获取场景图片,包括:
周期性地获取多张场景图片;
确定智能设备在场景图片中的位置,包括:
将当前场景图片与前一次场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置;
将亮度变化的区域确定为智能设备在场景图片中的位置之后,还包括:
如果当前场景图片增加变亮区域,则通过与智能设备连接确定当前场景图片中所有的智能设备的智能设备集合;
将当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
该处理器还可以被配置为:
将亮度变化的区域确定为智能设备在场景图片中的位置,包括:
判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值;
如果亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值,则将亮度变化的区域确定为智能设备在场景图片上的位置。
该处理器还可以被配置为:
判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值之后,还包括:
如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在场景图片上的原有的智能设备的位置。
该处理器还可以被配置为:
在位置上显示用于控制智能设备的控制按钮,包括:
判断智能设备在场景图片中的位置与已有的控制按钮之间的距离是否小于预设的距离阈值;
如果智能设备在场景图片上的位置与已有的控制按钮之间的距离小于预设的距离阈值,则输出关于多个智能设备的选项;
接收针对选项的选择结果;
根据接收的针对选项的选择结果,在位置上显示用于控制智能设备的控制按钮。
一种非临时性计算机可读存储介质,当该存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种生成控制界面的方法,该方法包括:
获取场景图片;场景图片包括智能设备的轮廓;
确定智能设备在场景图片中的位置;
在位置上显示用于控制智能设备的控制按钮。
该存储介质中的指令还可以包括:
场景图片为全景场景图片;
获取场景图片,包括:
通过调整拍摄的角度和焦距,获取多张图片;
将多张图片合成为全景场景图片。
该存储介质中的指令还可以包括:
获取场景图片之前,还包括:
向智能设备发送第一闪烁指令,第一闪烁指令用于指示智能设备按照第一闪烁指令闪烁指示灯;
获取场景图片,包括:
按照预设时间间隔,获取多个场景图片;
确定智能设备在场景图片中的位置,包括:
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
该存储介质中的指令还可以包括:
第一闪烁指令中携带有闪烁频率,闪烁频率用于指示智能设备按照闪烁频率闪烁指示灯;
将获取的多个场景图片进行比较,确定亮度变化的区域,包括:
将获取的多个场景图片进行比较,确定亮度变化符合闪烁频率的区域。
该存储介质中的指令还可以包括:
获取场景图片之前,还包括:
向智能设备发送第二闪烁指令,第二闪烁指令用于指示智能设备按照智能设备对应的预设闪烁频率闪烁指示灯;
确定智能设备在场景图片中的位置,包括:
确定亮度变化的频率;
根据频率获取智能设备的基本信息;
在位置上显示用于控制智能设备的控制按钮,包括:
根据基本信息,在位置上显示用于控制智能设备的控制按钮。
该存储介质中的指令还可以包括:
确定智能设备在场景图片中的位置,包括:
通过与智能设备的连接向智能设备发送开指令和关指令,开指令用于指示智能设备进行开处理,关指令用于指示智能设备进行关处理;
按照预设时间间隔,获取多个场景图片;
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置。
该存储介质中的指令还可以包括:
通过与智能设备的连接向智能设备发送开指令和关指令,包括:
通过路由器与智能设备进行连接,并向智能设备发送开指令和关指令。
该存储介质中的指令还可以包括:
确定智能设备在场景图片中的位置,包括:
与智能设备建立无线连接,获取智能设备的基本信息;
通过无线测量方式获取智能设备相对于参考点的方向和距离;
根据相对于参考点的方向和距离,以及参考点在场景图片中的位置,确定智能设备在场景图片中的位置。
该存储介质中的指令还可以包括:
该方法还包括:
接收对更新按钮的触发操作;
根据触发操作,重新确定智能设备在场景图片中的位置;或者,确定新的智能设备在场景图片中的位置;
在位置上显示用于控制智能设备的控制按钮。
该存储介质中的指令还可以包括:
接收对更新按钮的触发操作之后,还包括:
根据触发操作,确定场景图片中减少的智能设备;
从场景图片中删除减少的智能设备对应的控制按钮。
该存储介质中的指令还可以包括:
获取场景图片,包括:
周期性地获取多张场景图片;
确定智能设备在场景图片中的位置,包括:
将当前场景图片与前一次场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为智能设备在场景图片中的位置;
将亮度变化的区域确定为智能设备在场景图片中的位置之后,还包括:
如果当前场景图片增加变亮区域,则通过与智能设备连接确定当前场景图片中所有的智能设备的智能设备集合;
将当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
该存储介质中的指令还可以包括:
将亮度变化的区域确定为智能设备在场景图片中的位置,包括:
判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值;
如果亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值,则将亮度变化的区域确定为智能设备在场景图片上的位置。
该存储介质中的指令还可以包括:
判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值之后,还包括:
如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在场景图片上的原有的智能设备的位置。
该存储介质中的指令还可以包括:
在位置上显示用于控制智能设备的控制按钮,包括:
判断智能设备在场景图片中的位置与已有的控制按钮之间的距离是否小于预设的距离阈值;
如果智能设备在场景图片上的位置与已有的控制按钮之间的距离小于预设的距离阈值,则输出关于多个智能设备的选项;
接收针对选项的选择结果;
根据接收的针对选项的选择结果,在位置上显示用于控制智能设备的控制按钮。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (29)

1.一种生成控制界面的方法,其特征在于,包括:
获取场景图片;所述场景图片包括智能设备的轮廓;
确定所述智能设备在所述场景图片中的位置;
在所述位置上显示用于控制所述智能设备的控制按钮。
2.根据权利要求1所述的生成控制界面的方法,其特征在于,所述场景图片为全景场景图片;
所述获取场景图片,包括:
通过调整拍摄的角度和焦距,获取多张图片;
将所述多张图片合成为所述全景场景图片。
3.根据权利要求1所述的生成控制界面的方法,其特征在于,所述获取场景图片之前,还包括:
向所述智能设备发送第一闪烁指令,所述第一闪烁指令用于指示所述智能设备按照所述第一闪烁指令闪烁指示灯;
所述获取场景图片,包括:
按照预设时间间隔,获取多个场景图片;
所述确定所述智能设备在所述场景图片中的位置,包括:
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
4.根据权利要求3所述的生成控制界面的方法,其特征在于,所述第一闪烁指令中携带有闪烁频率,所述闪烁频率用于指示所述智能设备按照所述闪烁频率闪烁指示灯;
所述将获取的多个场景图片进行比较,确定亮度变化的区域,包括:
将获取的多个场景图片进行比较,确定亮度变化符合所述闪烁频率的区域。
5.根据权利要求1所述的生成控制界面的方法,其特征在于,所述获取场景图片之前,还包括:
向所述智能设备发送第二闪烁指令,所述第二闪烁指令用于指示所述智能设备按照所述智能设备对应的预设闪烁频率闪烁指示灯;
所述确定所述智能设备在所述场景图片中的位置,包括:
确定亮度变化的频率;
根据所述频率获取所述智能设备的基本信息;
所述在所述位置上显示用于控制所述智能设备的控制按钮,包括:
根据所述基本信息,在所述位置上显示用于控制所述智能设备的控制按钮。
6.根据权利要求1所述的生成控制界面的方法,其特征在于,所述确定所述智能设备在所述场景图片中的位置,包括:
通过与所述智能设备的连接向所述智能设备发送开指令和关指令,所述开指令用于指示智能设备进行开处理,所述关指令用于指示智能设备进行关处理;
按照预设时间间隔,获取多个场景图片;
将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
7.根据权利要求6所述的生成控制界面的方法,其特征在于,所述通过与所述智能设备的连接向所述智能设备发送开指令和关指令,包括:
通过路由器与所述智能设备进行连接,并向所述智能设备发送开指令和关指令。
8.根据权利要求1所述的生成控制界面的方法,其特征在于,所述确定所述智能设备在所述场景图片中的位置,包括:
与所述智能设备建立无线连接,获取所述智能设备的基本信息;
通过无线测量方式获取所述智能设备相对于参考点的方向和距离;
根据相对于所述参考点的方向和距离,以及所述参考点在场景图片中的位置,确定所述智能设备在所述场景图片中的位置。
9.根据权利要求1所述的生成控制界面的方法,其特征在于,所述方法还包括:
接收对更新按钮的触发操作;
根据所述触发操作,重新确定所述智能设备在所述场景图片中的位置;或者,确定新的智能设备在所述场景图片中的位置;
在所述位置上显示用于控制智能设备的控制按钮。
10.根据权利要求9所述的生成控制界面的方法,其特征在于,所述接收对更新按钮的触发操作之后,还包括:
根据所述触发操作,确定所述场景图片中减少的智能设备;
从所述场景图片中删除减少的智能设备对应的控制按钮。
11.根据权利要求1所述的生成控制界面的方法,其特征在于,所述获取场景图片,包括:
周期性地获取多张场景图片;
所述确定所述智能设备在所述场景图片中的位置,包括:
将当前场景图片与前一次场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置;
所述将亮度变化的区域确定为所述智能设备在所述场景图片中的位置之后,还包括:
如果所述当前场景图片增加变亮区域,则通过与所述智能设备连接确定当前场景图片中所有的智能设备的智能设备集合;
将当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
12.根据权利要求10所述的生成控制界面的方法,其特征在于,所述将亮度变化的区域确定为所述智能设备在所述场景图片中的位置,包括:
判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值;
如果亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值,则将亮度变化的区域确定为所述智能设备在所述场景图片上的位置。
13.根据权利要求12所述的生成控制界面的方法,其特征在于,所述判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值之后,还包括:
如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在所述场景图片上的原有的所述智能设备的位置。
14.根据权利要求1所述的生成控制界面的方法,其特征在于,所述在所述位置上显示用于控制所述智能设备的控制按钮,包括:
判断所述智能设备在所述场景图片中的位置与已有的控制按钮之间的距离是否小于预设的距离阈值;
如果所述智能设备在所述场景图片中的位置与已有的控制按钮之间的距离小于预设的距离阈值,则输出关于多个智能设备的选项;
接收针对所述选项的选择结果;
根据接收的针对所述选项的选择结果,在所述位置上显示用于控制所述智能设备的控制按钮。
15.一种生成控制界面的装置,其特征在于,包括:
获取模块,用于获取场景图片;所述场景图片包括智能设备的轮廓;
第一确定模块,用于确定所述智能设备在所述获取模块获取的所述场景图片中的位置;
第一显示模块,用于在所述第一确定模块确定的所述位置上显示用于控制所述智能设备的控制按钮。
16.根据权利要求15所述的生成控制界面的装置,其特征在于,
所述获取模块获取的所述场景图片为全景的场景图片;
所述获取模块,包括:第一获取子模块及合成子模块;
所述第一获取子模块,用于通过调整拍摄的角度和焦距,获取多张图片;
所述合成子模块,用于将第一获取子模块获取的所述多张图片合成为所述全景场景图片。
17.根据权利要求15所述的生成控制界面的装置,其特征在于,所述装置,还包括:第一发送模块;
第一发送模块,用于向所述智能设备发送第一闪烁指令,所述第一闪烁指令用于指示所述智能设备按照所述第一闪烁指令闪烁指示灯;
所述获取模块,包括:第二获取子模块;
所述第二获取子模块,用于按照预设时间间隔,获取多个场景图片;
所述第一确定模块,包括:第一确定子模块;
所述第一确定子模块,用于将获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
18.根据权利要求17所述的生成控制界面的装置,其特征在于,所述第一发送模块发送的所述第一闪烁指令中携带有闪烁频率,所述闪烁频率用于指示所述智能设备按照所述闪烁频率闪烁指示灯;
所述第一确定子模块还用于将获取的多个场景图片进行比较,确定亮度变化符合所述闪烁频率的区域。
19.根据权利要求15所述的生成控制界面的装置,其特征在于,所述装置,还包括:第二发送模块;
第二发送模块,用于向所述智能设备发送第二闪烁指令,所述第二闪烁指令用于指示所述智能设备按照所述智能设备对应的预设闪烁频率闪烁指示灯;
所述第一确定模块,包括:第二确定子模块及第二获取子模块;
所述第二确定子模块,用于确定亮度变化的频率;
所述第二获取子模块,用于根据所述频率获取所述智能设备的基本信息;
所述第一显示模块,包括:第一显示子模块;
所述第一显示子模块,用于根据所述基本信息,在所述位置上显示用于控制所述智能设备的控制按钮。
20.根据权利要求15所述的生成控制界面的装置,其特征在于,所述第一确定模块,包括:第一发送子模块、第三获取子模块及第三确定子模块;
所述第一发送子模块,用于通过与所述智能设备的连接向所述智能设备发送开指令和关指令,所述开指令用于指示智能设备进行开处理,所述关指令用于指示智能设备进行关处理;
所述第三获取子模块,用于按照预设时间间隔,获取多个场景图片;
所述第三确定子模块,用于将所述第三获取子模块获取的多个场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置。
21.根据权利要求20所述的生成控制界面的装置,其特征在于,所述第一发送子模块还用于通过路由器与所述智能设备进行连接,并向所述智能设备发送开指令和关指令。
22.根据权利要求15所述的生成控制界面的装置,其特征在于,所述第一确定模块,包括:第四获取子模块、第五获取子模块及第四确定子模块;
所述第四获取子模块,用于与所述智能设备建立无线连接,获取所述智能设备的基本信息;
所述第五获取子模块,用于通过无线测量方式获取智能设备相对于参考点的方向和距离;
所述第四确定子模块,用于根据所述第五获取子模块获取的相对于所述参考点的方向和距离,以及所述参考点在场景图片中的位置,确定所述智能设备在所述场景图片中的位置。
23.根据权利要求15所述的生成控制界面的装置,其特征在于,所述装置还包括:第一接收模块、第二确定模块及第二显示模块;
所述第一接收模块,用于接收对更新按钮的触发操作;
所述第二确定模块,用于根据所述第一接收模块接收到的所述触发操作,重新确定所述智能设备在所述场景图片中的位置;或者,确定新的智能设备在所述场景图片中的位置;
所述第二显示模块,用于在所述位置上显示用于控制智能设备的控制按钮。
24.根据权利要求23所述的生成控制界面的装置,其特征在于,所述装置,还包括:第三确定模块及删除模块;
所述第三确定模块,用于根据所述触发操作,确定所述场景图片中减少的智能设备;
所述删除模块,用于从所述场景图片中删除减少的智能设备对应的控制按钮。
25.根据权利要求15所述的生成控制界面的装置,其特征在于,所述获取模块,包括:第六获取子模块;
所述第六获取子模块,用于周期性地获取多张场景图片;
所述第一确定模块,包括:第五确定子模块;
所述第五确定子模块,用于将当前场景图片与前一次场景图片进行比较,确定亮度变化的区域,并将亮度变化的区域确定为所述智能设备在所述场景图片中的位置;
所述装置还包括:第四确定模块及第五确定模块;
所述第四确定模块,用于如果所述第五确定子模块确定所述当前场景图片增加变亮区域,则通过与所述智能设备连接确定当前场景图片中所有的智能设备的当前智能设备集合;
所述第五确定模块,用于将所述第四确定模块确定的当前智能设备集合与前一次的智能设备集合进行比较,确定新增的智能设备,以及获取新增的智能设备的基本信息。
26.根据权利要求24所述的生成控制界面的装置,其特征在于,所述第二确定模块,包括:第一判断子模块及第六确定子模块;
所述第一判断子模块,用于判断亮度变化区域与已有的控制按钮之间的距离是否小于预设的第一距离阈值;
所述第六确定子模块,用于如果所述第一判断子模块判断的亮度变化区域与已有的控制按钮之间的距离不小于预设的第一距离阈值时,则将亮度变化的区域确定为所述智能设备在所述场景图片上的位置。
27.根据权利要求26所述的生成控制界面的装置,其特征在于,所述第二确定模块,还包括:第七确定子模块;
所述第七确定子模块,用于如果亮度变化区域与已有的控制按钮之间的距离小于预设的第一距离阈值,则将亮度变化的区域确定为在所述场景图片上的原有的所述智能设备的位。
28.根据权利要求15所述的生成控制界面的装置,其特征在于,所述第一显示模块,包括:第二判断子模块、输出子模块、接收子模块及第二显示子模块;
所述第二判断子模块,用于判断所述智能设备在所述场景图片中的位置与已有的控制按钮之间的距离是否小于预设的距离阈值;
所述输出子模块,用于如果所述第二判断子模块判断所述智能设备在所述场景图片上的位置与已有的控制按钮之间的距离小于预设的距离阈值,则输出关于多个智能设备的选项;
所述接收子模块,用于接收针对所述输出了模块输出的所述选项的选择结果;
所述第二显示子模块,用于根据所述接收子模块接收的针对所述选项的选择结果,在所述位置上显示用于控制所述智能设备的控制按钮。
29.一种生成控制界面的装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取场景图片,所述场景图片包括智能设备的轮廓;
确定所述智能设备在所述场景图片中的位置;
在所述位置上显示用于控制所述智能设备的控制按钮。
CN201510600225.5A 2015-09-18 2015-09-18 生成控制界面的方法及装置 Active CN105259765B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510600225.5A CN105259765B (zh) 2015-09-18 2015-09-18 生成控制界面的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510600225.5A CN105259765B (zh) 2015-09-18 2015-09-18 生成控制界面的方法及装置

Publications (2)

Publication Number Publication Date
CN105259765A true CN105259765A (zh) 2016-01-20
CN105259765B CN105259765B (zh) 2018-06-05

Family

ID=55099508

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510600225.5A Active CN105259765B (zh) 2015-09-18 2015-09-18 生成控制界面的方法及装置

Country Status (1)

Country Link
CN (1) CN105259765B (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105739315A (zh) * 2016-02-02 2016-07-06 杭州鸿雁电器有限公司 一种室内用户电器设备的控制方法与装置
WO2017162170A1 (zh) * 2016-03-22 2017-09-28 珠海格力电器股份有限公司 智能家居设备的控制方法及装置
CN107479399A (zh) * 2017-09-29 2017-12-15 珠海格力电器股份有限公司 一种智能家居设备的场景设置方法及装置
CN107689017A (zh) * 2016-08-03 2018-02-13 霍尼韦尔国际公司 通过基于情境的通知避免经移动应用的模糊动作的方法和系统
CN107959997A (zh) * 2017-11-30 2018-04-24 北京小米移动软件有限公司 智能手电筒的控制方法及装置
CN108732936A (zh) * 2018-05-09 2018-11-02 青岛海信智慧家居系统股份有限公司 一种创建联动场景信息的方法和设备
CN109491263A (zh) * 2018-12-13 2019-03-19 深圳绿米联创科技有限公司 智能家居设备控制方法、装置、系统及存储介质
CN110557560A (zh) * 2018-05-31 2019-12-10 佳能株式会社 摄像设备及其控制方法和存储介质
CN110568771A (zh) * 2019-10-18 2019-12-13 珠海格力电器股份有限公司 一种智能联动控制智能家居设备的系统及方法
CN110780598A (zh) * 2019-10-24 2020-02-11 深圳传音控股股份有限公司 一种智能设备控制方法、装置、电子设备及可读存储介质
CN111885358A (zh) * 2020-07-24 2020-11-03 广东讯飞启明科技发展有限公司 考试终端定位及监控方法、装置、系统
CN111934960A (zh) * 2020-08-17 2020-11-13 广州河东科技有限公司 一种智能家居的场景模式控制方法及装置
CN112104529A (zh) * 2019-06-18 2020-12-18 调调(北京)科技有限公司 网络设备、智能家居设备及其网络管理方法与装置
WO2021196608A1 (zh) * 2020-04-02 2021-10-07 深圳创维-Rgb电子有限公司 一种显示场景的切换方法、智能显示屏及可读存储介质
CN113495491A (zh) * 2021-06-24 2021-10-12 深圳市晨北科技有限公司 设备联动关系的展示方法、装置、电子设备及存储介质
CN114301724A (zh) * 2021-12-23 2022-04-08 珠海格力电器股份有限公司 智能家居的控制方法和装置、存储介质、电子装置
CN114326423A (zh) * 2021-12-21 2022-04-12 美的集团股份有限公司 一种场景化控制方案的自动生成方法及场景化控制设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201156192Y (zh) * 2008-02-20 2008-11-26 福建师范大学 一种新型的分布式远程电力监控装置
CN103019201A (zh) * 2012-12-03 2013-04-03 广东威创视讯科技股份有限公司 一种基于三维虚拟场景的远程控制方法和装置
CN103246267A (zh) * 2013-04-29 2013-08-14 鸿富锦精密工业(深圳)有限公司 具有三维用户界面的远程控制装置及其界面生成方法
WO2014066858A1 (en) * 2012-10-25 2014-05-01 Microsoft Corporation Providing images with zoomspots
CN104181884A (zh) * 2014-08-11 2014-12-03 厦门立林科技有限公司 一种基于全景视图的智能家居控制装置及方法
CN104391453A (zh) * 2014-10-22 2015-03-04 北京恒泰实达科技股份有限公司 一种可视化的控制室信号控制方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201156192Y (zh) * 2008-02-20 2008-11-26 福建师范大学 一种新型的分布式远程电力监控装置
WO2014066858A1 (en) * 2012-10-25 2014-05-01 Microsoft Corporation Providing images with zoomspots
CN103019201A (zh) * 2012-12-03 2013-04-03 广东威创视讯科技股份有限公司 一种基于三维虚拟场景的远程控制方法和装置
CN103246267A (zh) * 2013-04-29 2013-08-14 鸿富锦精密工业(深圳)有限公司 具有三维用户界面的远程控制装置及其界面生成方法
CN104181884A (zh) * 2014-08-11 2014-12-03 厦门立林科技有限公司 一种基于全景视图的智能家居控制装置及方法
CN104391453A (zh) * 2014-10-22 2015-03-04 北京恒泰实达科技股份有限公司 一种可视化的控制室信号控制方法及系统

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105739315B (zh) * 2016-02-02 2019-12-06 杭州鸿雁电器有限公司 一种室内用户电器设备的控制方法与装置
CN105739315A (zh) * 2016-02-02 2016-07-06 杭州鸿雁电器有限公司 一种室内用户电器设备的控制方法与装置
WO2017162170A1 (zh) * 2016-03-22 2017-09-28 珠海格力电器股份有限公司 智能家居设备的控制方法及装置
CN107689017A (zh) * 2016-08-03 2018-02-13 霍尼韦尔国际公司 通过基于情境的通知避免经移动应用的模糊动作的方法和系统
CN107479399A (zh) * 2017-09-29 2017-12-15 珠海格力电器股份有限公司 一种智能家居设备的场景设置方法及装置
CN107479399B (zh) * 2017-09-29 2020-08-11 珠海格力电器股份有限公司 一种智能家居设备的场景设置方法及装置
CN107959997A (zh) * 2017-11-30 2018-04-24 北京小米移动软件有限公司 智能手电筒的控制方法及装置
CN108732936A (zh) * 2018-05-09 2018-11-02 青岛海信智慧家居系统股份有限公司 一种创建联动场景信息的方法和设备
CN110557560A (zh) * 2018-05-31 2019-12-10 佳能株式会社 摄像设备及其控制方法和存储介质
US10979632B2 (en) 2018-05-31 2021-04-13 Canon Kabushiki Kaisha Imaging apparatus, method for controlling same, and storage medium
CN110557560B (zh) * 2018-05-31 2021-09-10 佳能株式会社 摄像设备及其控制方法和存储介质
CN109491263A (zh) * 2018-12-13 2019-03-19 深圳绿米联创科技有限公司 智能家居设备控制方法、装置、系统及存储介质
CN109491263B (zh) * 2018-12-13 2022-06-03 深圳绿米联创科技有限公司 智能家居设备控制方法、装置、系统及存储介质
CN112104529A (zh) * 2019-06-18 2020-12-18 调调(北京)科技有限公司 网络设备、智能家居设备及其网络管理方法与装置
CN110568771A (zh) * 2019-10-18 2019-12-13 珠海格力电器股份有限公司 一种智能联动控制智能家居设备的系统及方法
CN110780598A (zh) * 2019-10-24 2020-02-11 深圳传音控股股份有限公司 一种智能设备控制方法、装置、电子设备及可读存储介质
WO2021196608A1 (zh) * 2020-04-02 2021-10-07 深圳创维-Rgb电子有限公司 一种显示场景的切换方法、智能显示屏及可读存储介质
CN111885358A (zh) * 2020-07-24 2020-11-03 广东讯飞启明科技发展有限公司 考试终端定位及监控方法、装置、系统
CN111885358B (zh) * 2020-07-24 2022-05-17 广东讯飞启明科技发展有限公司 考试终端定位及监控方法、装置、系统
CN111934960A (zh) * 2020-08-17 2020-11-13 广州河东科技有限公司 一种智能家居的场景模式控制方法及装置
CN113495491A (zh) * 2021-06-24 2021-10-12 深圳市晨北科技有限公司 设备联动关系的展示方法、装置、电子设备及存储介质
CN114326423A (zh) * 2021-12-21 2022-04-12 美的集团股份有限公司 一种场景化控制方案的自动生成方法及场景化控制设备
CN114301724A (zh) * 2021-12-23 2022-04-08 珠海格力电器股份有限公司 智能家居的控制方法和装置、存储介质、电子装置
CN114301724B (zh) * 2021-12-23 2023-09-12 珠海格力电器股份有限公司 智能家居的控制方法和装置、存储介质、电子装置

Also Published As

Publication number Publication date
CN105259765B (zh) 2018-06-05

Similar Documents

Publication Publication Date Title
CN105259765A (zh) 生成控制界面的方法及装置
CN104318741B (zh) 蓝牙设备控制方法及装置
US20170091551A1 (en) Method and apparatus for controlling electronic device
US20170048078A1 (en) Method for controlling device and the device thereof
CN104184944B (zh) 获取多媒体数据流的方法及装置
CN104090735B (zh) 一种图片的投影方法及装置
CN106791893A (zh) 视频直播方法及装置
CN105279898A (zh) 报警方法及装置
CN104506772A (zh) 拍摄参数调节方法和装置
CN104244528A (zh) 智能灯的控制方法及装置
CN104281432A (zh) 调节音效的方法及装置
CN105072336A (zh) 调节拍摄功能的控制方法、装置和设备
CN103927165A (zh) 一种壁纸图片的处理方法及装置
CN105388779A (zh) 智能设备的控制方法及装置
KR101770930B1 (ko) 모니터링 화면 소리 수집 방법, 장치, 프로그램 및 컴퓨터 판독가능한 기록매체
EP2985980B1 (en) Method and device for playing stream media data
EP3945490A1 (en) Method and device for processing video, and storage medium
CN105288941A (zh) 跑步机调速方法及装置
CN105388453A (zh) 定位智能设备的方法及装置
CN105744133A (zh) 视频补光方法及装置
CN105282441A (zh) 拍照方法及装置
CN104216525B (zh) 相机应用的模式控制方法及装置
CN104111720A (zh) 电子设备控制方法、装置及电子设备
CN105487786A (zh) 应用程序图标管理方法及装置
CN108628449A (zh) 设备控制方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant