CN105955040A - 根据实时视频画面可视化控制的智能家居系统及控制方法 - Google Patents

根据实时视频画面可视化控制的智能家居系统及控制方法 Download PDF

Info

Publication number
CN105955040A
CN105955040A CN201610336921.4A CN201610336921A CN105955040A CN 105955040 A CN105955040 A CN 105955040A CN 201610336921 A CN201610336921 A CN 201610336921A CN 105955040 A CN105955040 A CN 105955040A
Authority
CN
China
Prior art keywords
controlled
client
intelligent
cloud service
service platform
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610336921.4A
Other languages
English (en)
Inventor
余承富
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN DANALE TECHNOLOGY Co Ltd
Original Assignee
SHENZHEN DANALE TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN DANALE TECHNOLOGY Co Ltd filed Critical SHENZHEN DANALE TECHNOLOGY Co Ltd
Priority to CN201610336921.4A priority Critical patent/CN105955040A/zh
Publication of CN105955040A publication Critical patent/CN105955040A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00—Systems controlled by a computer
    • G05B15/02—Systems controlled by a computer electric
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2642—Domotique, domestic, home control, automation, smart house

Abstract

根据实时视频画面可视化控制的智能家居系统及控制方法，涉及到智能家居技术领域。解决现有被控智能产品操作繁琐的技术不足，包括有云服务平台，与云服务平台连接的网络摄像机、被控智能产品和客户端；所述的云服务平台包含有视频物体分析服务器；视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据；视频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控智能产品发送控制指令用。快捷方便，达到所见即所得，让用户身临其境。从操作体验来说，给用户虚实结合的操作感受及体验。

Description

根据实时视频画面可视化控制的智能家居系统及控制方法
技术领域
本发明涉及到智能家居技术领域。
背景技术
当前市面上控制智能设备操作的，有以下几种方式：
第一种，通过被控智能产品配对的遥控器进行操作：
有些被控智能产品为了方便用户控制会配置室内的遥控器，用户使用遥控器可以直接操作被控智能产品的基本操作。
缺点：不能远程控制。被控智能产品多了，遥控器就多了，很容易混乱，不能实现真正意义上的智能生活。
第二种，通过网络连接，获取被控智能产品状态并控制：
为能够连入外网的被控智能产品研发一个应用APP，应用App可以与这些被控智能产品之间连接，连接后用户即可实现远程控制。
缺点：操作太繁琐，用户还需要一个个找到被控智能产品进行设置，不能可视化操作。
发明内容
综上所述，本发明的目的在于解决现有被控智能产品在远程控制时，不能实现可视化智能识别需操作的被控智能产品，操作繁琐的技术不足，而提出根据实时视频画面可视化控制的智能家居系统及控制方法。
为解决本发明所提出的技术问题，采用的技术方案为：根据实时视频画面可视化控制的智能家居系统，包括有云服务平台，与云服务平台连接的网络摄像机、被控智能产品和客户端；其特征在于：所述的云服务平台包含有视频物体分析服务器；视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据；视频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控智能产品发送控制指令用。
所述智能家居系统的控制方法，所述方法包括如下步骤：
a、首先客户端登陆云服务平台，通过云服务平台建立与网络摄像机建立通讯连接；
b、客户端请求网络摄像机发送视频流；
c、客户端展示包含有被控智能产品图像内容的实时视频画面；
d、在客户端的实时视频画面上，点击需操作的被控智能产品图像区域，由客户端或云服务平台捕捉生成被检画面，并将被检画面和点击坐标信息提供给视频物体分析服务器；
e、视频物体分析服务器根据被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，并由云服务平台返回给客户端；
f、客户端上展示该被控智能产品可操作按键界面，以按用户对被控智能产品可视化远程操作控制。
所述的云服务平台通过WIFI智能主机与被控智能产品间WIFI无线连接控制。
所述的WIFI智能主机还连接有与被控智能产品对应的遥控模块，WIFI智能主机通过遥控模块遥控被控智能产品。
本发明的有益效果为：在客户端上查看网络摄像机输出的实时视频画面时，需要对某个被控智能产品控制的话，直接点击实时视频画面上该被控智能产品图像区域，由视频物体分析服务器进行形态匹配，获取被控智能产品对应的智能硬件类别信息，之后在客户端上展示该被控智能产品可操作按键界面，快捷方便。视觉是人的主要感知系统，通过本发明，可以可视化管理被控智能产品，达到所见即所得，让用户身临其境。从操作体验来说，给用户虚实结合的操作感受及体验。
附图说明
图1为本发明根据实时视频画面可视化控制的智能家居系统的结构示意图；
图2为本发明的智能家居系统的控制方法的工作流程图。
具体实施方式
以下结合附图和本发明具体实施例对本发明作进一步地说明。
参照图1中所示，根据实时视频画面可视化控制的智能家居系统，包括有云服务平台，与云服务平台连接的网络摄像机、被控智能产品和客户端；所述的云服务平台包含有视频物体分析服务器；视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据；视频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控智能产品发送控制指令用。
参照图2中所示，采用上述根据实时视频画面可视化控制的智能家居系统的控制方法，包括如下步骤：
a、首先客户端登陆云服务平台，通过云服务平台建立与网络摄像机建立通讯连接；
b、客户端请求网络摄像机发送视频流；
c、客户端展示包含有被控智能产品图像内容的实时视频画面；
d、在客户端的实时视频画面上，点击需操作的被控智能产品图像区域，由客户端或云服务平台捕捉生成被检画面，并将被检画面和点击坐标信息提供给视频物体分析服务器；
e、视频物体分析服务器根据被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，并由云服务平台返回给客户端；
f、客户端上展示该被控智能产品可操作按键界面，以按用户对被控智能产品可视化远程操作控制。实现远程可视化控制物体的基本操作。识别出实时画面中的基本物体，包含电视，灯，窗帘，温控，空调，智能插座等等（能够有控制能力的物体），并在实时画面中直接进行基础的控制操作。实现用户的可视化操作。
其中e、步骤，对于已经接入云服务平台的各种被控智能产品（泛指网络摄像机、智能窗帘、温控等，一切可以通过某种方式被外界控制的智能设备），通过通讯协议，将获取网络摄像机的画面信息，送至视频物体分析服务器，即可获取画面中的智能灯，智能电视等常见的家居智能产品信息，获取到对应的被控智能产品信息即可到视频物体分析服务器的数据库中查询产品对应的操作属性，例如：电视对应基本开关和换台操作。
对于没有接入云服务平台的各种被控智能产品，将采用一种物体识别技术，来做基础匹配。首先任何一种物体都会有一个相对的形态，包含人在内。这项识别技术也是从人脸识别技术衍生过来的。提前在视频物体分析服务器的数据库中存储最常用而且形状尽可能多的物体形态，例如：智能电视，智能灯，智能窗帘等。这些被控智能产品都有自己的标准的API(也即是标准的功能)和对外公开的标准形态。
当网络摄像机捕捉到画面后（这里特指家居场景），送至物体识别服务器，物体识别服务器将采用从人脸识别技术升级的采集方式，捕捉到独立个体的外观信息，同时匹配是对应放置在墙上还是天花板上还是家居场景的其他位置。将综合信息放置到数据库里匹配，即可获取到对应的被控智能产品类别设置到型号。（当然也会有匹配不到情况，如果没有提前录入该电视信息，那么将识别失败。物体识别服务器将失败信息反馈给云服务平台的中心服务器，云服务平台的中心服务器将会把数据统计发给服务人员，服务人员将会逐个录入，也就是信息量也会越来越大，匹配度也会越来越高）。
当物体识别服务器识别到时某个类型被控智能产品后，将会到其数据库里再度匹配该被控智能产品匹配的API。并将调用指令的方式下发给客户端上展示。这样也就可以进行第二阶段的操作。
所述的云服务平台通过WIFI智能主机与被控智能产品间WIFI无线连接控制。
或者所述的WIFI智能主机还连接有与被控智能产品对应的遥控模块，WIFI智能主机通过遥控模块遥控被控智能产品。

Claims (4)

1.根据实时视频画面可视化控制的智能家居系统，包括有云服务平台，与云服务平台连接的网络摄像机、被控智能产品和客户端；其特征在于：所述的云服务平台包含有视频物体分析服务器；视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据；视频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控智能产品发送控制指令用。
2.如权利要求1所述智能家居系统的控制方法，其特征在于所述方法包括如下步骤：a、首先客户端登陆云服务平台，通过云服务平台建立与网络摄像机建立通讯连接； b、客户端请求网络摄像机发送视频流； c、客户端展示包含有被控智能产品图像内容的实时视频画面； d、在客户端的实时视频画面上，点击需操作的被控智能产品图像区域，由客户端或云服务平台捕捉生成被检画面，并将被检画面和点击坐标信息提供给视频物体分析服务器； e、视频物体分析服务器根据被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，并由云服务平台返回给客户端； f、客户端上展示该被控智能产品可操作按键界面，以按用户对被控智能产品可视化远程操作控制。
3.根据权利要求2所述的智能家居系统的控制方法，其特征在于：所述的云服务平台通过WIFI智能主机与被控智能产品间WIFI无线连接控制。
4.根据权利要求3所述的智能家居系统的控制方法，其特征在于：所述的WIFI智能主机还连接有与被控智能产品对应的遥控模块，WIFI智能主机通过遥控模块遥控被控智能产品。
CN201610336921.4A 2016-05-20 2016-05-20 根据实时视频画面可视化控制的智能家居系统及控制方法 Pending CN105955040A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610336921.4A CN105955040A (zh) 2016-05-20 2016-05-20 根据实时视频画面可视化控制的智能家居系统及控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610336921.4A CN105955040A (zh) 2016-05-20 2016-05-20 根据实时视频画面可视化控制的智能家居系统及控制方法

Publications (1)

Publication Number Publication Date
CN105955040A true CN105955040A (zh) 2016-09-21

Family

ID=56912308

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610336921.4A Pending CN105955040A (zh) 2016-05-20 2016-05-20 根据实时视频画面可视化控制的智能家居系统及控制方法

Country Status (1)

Country Link
CN (1) CN105955040A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109688370A (zh) * 2017-10-18 2019-04-26 中兴通讯股份有限公司 物联网设备控制方法、设备及可读存储介质
CN110336719A (zh) * 2019-06-03 2019-10-15 武汉工程大学 一种实时视频家居环境设备识别交互的远程智能家居控制方法
CN111736485A (zh) * 2020-07-29 2020-10-02 上海杉纳精密机械有限公司 一种可视化智能家居系统
CN113419652A (zh) * 2021-06-22 2021-09-21 中国联合网络通信集团有限公司 智能设备交互方法、服务端和客户端

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103777851A (zh) * 2014-02-26 2014-05-07 朱定局 物联网视频交互方法和系统
CN103901863A (zh) * 2014-04-11 2014-07-02 何红 基于实景控制界面的智能家居控制系统及方法
WO2014180208A1 (zh) * 2013-10-31 2014-11-13 中兴通讯股份有限公司 处理方法及设备、控制设备及工作方法、控制方法及系统
CN104635677A (zh) * 2014-12-19 2015-05-20 欧阳秋娜 一种智能家居控制系统及其控制方法
CN104936036A (zh) * 2015-05-29 2015-09-23 四川长虹电器股份有限公司 家庭智能家居整合系统中的智能电视显示方法及其系统
CN105022281A (zh) * 2015-07-29 2015-11-04 中国电子科技集团公司第十五研究所 一种基于虚拟现实的智能家居控制系统
CN105045122A (zh) * 2015-06-24 2015-11-11 张子兴 一种基于音频和视频的智能家居自然交互系统
CN105072483A (zh) * 2015-08-28 2015-11-18 深圳创维－Rgb电子有限公司 基于智能电视视频场景的智能家居设备互动方法及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014180208A1 (zh) * 2013-10-31 2014-11-13 中兴通讯股份有限公司 处理方法及设备、控制设备及工作方法、控制方法及系统
CN103777851A (zh) * 2014-02-26 2014-05-07 朱定局 物联网视频交互方法和系统
CN103901863A (zh) * 2014-04-11 2014-07-02 何红 基于实景控制界面的智能家居控制系统及方法
CN104635677A (zh) * 2014-12-19 2015-05-20 欧阳秋娜 一种智能家居控制系统及其控制方法
CN104936036A (zh) * 2015-05-29 2015-09-23 四川长虹电器股份有限公司 家庭智能家居整合系统中的智能电视显示方法及其系统
CN105045122A (zh) * 2015-06-24 2015-11-11 张子兴 一种基于音频和视频的智能家居自然交互系统
CN105022281A (zh) * 2015-07-29 2015-11-04 中国电子科技集团公司第十五研究所 一种基于虚拟现实的智能家居控制系统
CN105072483A (zh) * 2015-08-28 2015-11-18 深圳创维－Rgb电子有限公司 基于智能电视视频场景的智能家居设备互动方法及系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109688370A (zh) * 2017-10-18 2019-04-26 中兴通讯股份有限公司 物联网设备控制方法、设备及可读存储介质
CN110336719A (zh) * 2019-06-03 2019-10-15 武汉工程大学 一种实时视频家居环境设备识别交互的远程智能家居控制方法
CN110336719B (zh) * 2019-06-03 2021-10-12 武汉工程大学 一种实时视频家居环境设备识别交互的远程智能家居控制方法
CN111736485A (zh) * 2020-07-29 2020-10-02 上海杉纳精密机械有限公司 一种可视化智能家居系统
CN113419652A (zh) * 2021-06-22 2021-09-21 中国联合网络通信集团有限公司 智能设备交互方法、服务端和客户端

Similar Documents

Publication Publication Date Title
KR102186899B1 (ko) 공간 인식에 기반한 인테리어 플랫폼 제공 방법
CN103529762B (zh) 一种基于传感器技术的智能家居控制方法及系统
CN105955040A (zh) 根据实时视频画面可视化控制的智能家居系统及控制方法
CN104394045B (zh) 针对智能设备的场景模式推荐方法和装置
US20140257532A1 (en) Apparatus for constructing device information for control of smart appliances and method thereof
CN101620715A (zh) 智能广告发布方法和系统
CN101702690A (zh) 嵌入式设备通过互联网即时通讯系统进行人机交互的方法
CN103248946B (zh) 一种视频图像快速传输的方法及系统
CN104597759A (zh) 基于网络视频的家居控制方法和系统及智能家居管理系统
CN110535732A (zh) 一种设备控制方法、装置、电子设备及存储介质
CN205281554U (zh) 会议室管理设备和会议管理系统
CN107817701B (zh) 设备控制方法、装置、计算机可读存储介质及终端
CN112085852B (zh) 装修前后房屋三维模型同屏显示的方法、装置及系统
WO2020151255A1 (zh) 一种基于移动终端的展示控制系统及方法
CN103150107A (zh) 触摸屏解锁方法和具有触摸屏的移动终端
CN112005281A (zh) 智能设备上的功率管理的系统和方法
CN110262866A (zh) 一种屏幕多画面布局的切换方法、装置及可读存储介质
CN110248144B (zh) 视频会议的控制方法、装置、设备及计算机可读存储介质
CN102520681B (zh) 基于外观信息识别的物联网终端智能配置方法及系统
JP5423068B2 (ja) 会議端末装置、表示制御方法、表示制御プログラム
CN103631225A (zh) 一种场景设备远程控制方法和装置
CN108227520A (zh) 一种基于全景界面的智能设备的控制系统及控制方法
CN108572555A (zh) 油烟机和基于油烟机的家庭互联控制方法
KR102144554B1 (ko) 사용자 맞춤형 서비스 장치 및 사용자 맞춤형 생활서비스를 제공하는 시스템
CN103338357A (zh) 一种实现视频监控集成的方法、设备及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160921

RJ01 Rejection of invention patent application after publication