CN105676652A - 一种智能家居系统控制方法 - Google Patents

一种智能家居系统控制方法 Download PDF

Info

Publication number
CN105676652A
CN105676652A CN201410670354.7A CN201410670354A CN105676652A CN 105676652 A CN105676652 A CN 105676652A CN 201410670354 A CN201410670354 A CN 201410670354A CN 105676652 A CN105676652 A CN 105676652A
Authority
CN
China
Prior art keywords
image
coordinate
panoramic
controllable
real time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410670354.7A
Other languages
English (en)
Inventor
刘武
刘满意
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuxi Meinuo Plastic Co Ltd
Original Assignee
Wuxi Meinuo Plastic Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuxi Meinuo Plastic Co Ltd filed Critical Wuxi Meinuo Plastic Co Ltd
Priority to CN201410670354.7A priority Critical patent/CN105676652A/zh
Publication of CN105676652A publication Critical patent/CN105676652A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Studio Devices (AREA)

Abstract

本发明公开了一种智能家居系统控制方法,其特征在于,包括如下步骤:1)?原始全景图的创建:2)?创建可控坐标库:选定可控点,设定各可控点的类型,计算每个可控点所对应的区域坐标范围,对所述区域坐标范围创建坐标数据库;3)?实时图像的获取;4)?实时图像的处理;5)?模式匹配:将实时全景图与原始全景图重合;6)?激活可控点:在实时全景图上选择控制点,计算所选择的控制点的坐标,并将该坐标与所述坐标数据库比较,如果所述坐标在坐标数据库的范围内,获取对应可控点的当前状态,进行相应的动作;如果所述坐标在坐标数据库的范围外,则不采取动作。通过实时全景图与原始全景图的匹配,可直观地在显示屏上根据实时图像进行操作,界面简单,适用的用户范围广。

Description

一种智能家居系统控制方法
技术领域
本发明涉及一种智能家居,尤其是一种智能家居系统控制方法。
背景技术
智能家居无疑是近年来炙手可热的概念,一些高档的住宅小区已经配套了比较完
善的智能家庭网络,其中人机交互界面的友好化和智能化显得尤为重要。同时随着智能化的深入,智能还体现在根据场景进行控制,进而达到用户的要求。系统智能化程度的提高大大降低了居住者管理及控制家居工作量的同时,也增加了家庭成员对复杂的操作界面的认知能力,如面对满目的按钮和图标、杂乱的界面主题,反而会令一些简单的操作变复杂,甚至还会对一些不熟悉这些操作界面的人,如老人、孩子、访客等造成新的困扰,违背了“科技以人为本”的理念,远离了家居智能化和让生活变简单的初衷。
发明内容
本发明所要解决的技术问题是提供一种智能家居系统控制方法,操作方便而直观,适用范围广。
本发明解决上述技术问题所采用的技术方案为:一种智能家居系统控制方法,其特征在于,包括如下步骤:
1)原始全景图的创建:
a)获取图像:拍摄的原始家居图像传输到智能家居监控系统;
b)图像预处理;
c)图像拼接:将预处理后的图像进行无缝拼接,然后将拼接后的图像转换成曲面全景图;
2)创建可控坐标库:选定可控点,设定各可控点的类型,计算每个可控点所对应的区域坐标范围,对所述区域坐标范围创建坐标数据库;
3)实时图像的获取:拍摄实时家居图像,并传输到智能家居监控系统;
4)实时图像的处理:对实时图像进行预处理,并将预处理后的实时图像进行无缝拼
接,然后转换成曲面全景图;
5)模式匹配:将实时全景图与原始全景图重合,进行匹配,使得实时全景图的每个像素和原始全景图的像素一一对应;
6)激活可控点:在实时全景图上选择控制点,计算所选择的当前控制点的坐标,并将所述当前控制点的坐标与所述坐标数据库比较,如果所述当前控制点的坐标在坐标数据库的范围内,则获取对应可控点的当前状态,进行相应的动作;如果所述当前控制点的坐标在坐标数据库的范围外,则不采取动作。
所述原始家居图像或实时家居图像的无缝拼接,包括以下步骤:
a)特征点检测:基于SURF算法提取图像特征点,利用近似Hessian矩阵行列式的局部极大值检测两幅图像中具有高重复度的位置中的特征点;
b)特征点描述:根据图像在水平和垂直方向上对一阶Haar小波的响应,SURF算法对特征点的主方向进行确定,同时利用特征点某一小的邻域内灰度分布信息形成描述子向量;
c)特征点及图像匹配:根据欧氏距离或者马氏距离进行特征点描述算子的匹配,找出待匹配点的对应位置从而确定相邻两幅图像之间的变换关系,同时估计两幅图像的数学变换模型;
d)图像融合:将具有重合区域的图像进行融合,得到平滑过渡的无缝拼接图像。
在步骤2)中,选定可控点采用手动的方式,拖动虚拟取景框到每个可控点,从而计算虚拟取景框的坐标范围作为相应的区域坐标范围。
在步骤2)中,选定可控点采用自动的方式,在步骤1)取得原始全景图后,将可控
的家居切换到与步骤1)中相对的状态,用同样的方法取得对比全景图,将原始全景图和对比全景图作相关性运算,取得原始全景图和对比全景图的差,得到各个可控点。
在步骤6)中,获取对应可控点的当前状态的方法,通过对每个可控家居监测电压、电流或状态反馈,判断当前状态,并将该状态信息与相应的可控点匹配。
与现有技术相比,本发明的优点在于:通过获取原始全景图,在原始全景图中选定可控点,然后采集实时图像,通过实时全景图与原始全景图的匹配,可直观地在显示屏上根据实时图像进行操作,界面简单,操作方便,适用的用户范围广。
附图说明
图1为本发明的控制方法的流程图。
具体实施方式
参见图1,一种智能家居系统控制方法,其特征在于,包括如下步骤:
1)原始全景图的创建:
a)获取图像:拍摄的原始家居图像传输到智能家居监控系统;
b)图像预处理;
c)图像拼接:将预处理后的图像进行无缝拼接,然后将拼接后的图像转换成曲面全景图;
2)创建可控坐标库:选定可控点,设定各可控点的类型,计算每个可控点所对应的区域坐标范围,对所述区域坐标范围创建坐标数据库;
3)实时图像的获取:拍摄实时家居图像,并传输到智能家居监控系统;
4)实时图像的处理:对实时图像进行预处理,并将预处理后的实时图像进行无缝拼
接,然后转换成曲面全景图;
5)模式匹配:将实时全景图与原始全景图重合,进行匹配,使得实时全景图的每个像素和原始全景图的像素一一对应;
6)激活可控点:在实时全景图上选择控制点,计算所选择的当前控制点的坐标,
将所述当前控制点的坐标与所述坐标数据库比较,如果所述当前控制点的坐标在坐标数据库的范围内,则获取对应可控点的当前状态,进行相应的动作;如果所述当前控制点的坐标在坐标数据库的范围外,则不采取动作。
其中,现有的图片拼接方法有角点检测方法,自适应图像拼接模型算法,SIFT特征匹配算法,和SURF算法等,在本发明中,采用SURF算法,SURF算法对特征点的检测是基于尺度空间理论,依据Hessian矩阵行列式的局部最大值定位特征点位置,同时也把行列式的值作为尺度空间的选择依据。
本发明中所优选使用的原始家居图像或实时家居图像的图像拼接方法,大致可以
分为以下几个步骤:
a)特征点检测:基于SURF(SpeedUpRobustFeature)SpeedUpRobustFeature)算法提取图像特征点,利用近似Hessian矩阵行列式的局部极大值检测两幅图像中具有高重复度的位置中的特征点;
b)特征点描述:根据图像在水平和垂直方向上对一阶Haar小波的响应,SURF算法对特征点的主方向进行确定,同时利用特征点某一小的邻域内灰度分布信息形成描述子向量;
c)特征点及图像匹配:根据欧氏距离或者马氏距离进行特征点描述算子的匹配,找出待匹配点的对应位置从而确定相邻两幅图像之间的变换关系,同时估计两幅图像的数学变换模型;
d)图像融合,将具有重合区域的图像进行融合,得到平滑过渡的无缝拼接图像。由于普通图像只能反映人们在固定视点某一个方向的视角的图像,而不能把一个场景的前后左右一览无余地展现在观察者的眼前。因此需要选取场景中的某个中心为固定视点,观察整个场景,并将周围场景的图像记录在以该点为中心的环境映照球面或者立方体表面上,实际上以全景图像的方式提供了其中心观点处的场景描述。
根据投影方式的不同,可以将投影模型分为:球面投影、立方体投影和柱面投影,
在本发明中,优选的采用柱面投影方式。
前述的步骤1)中的a)获取图像,是利用普通的数码相机在固定视点,尽量防止镜
头的偏斜和俯仰,在水平方向上旋转一周得到一系列边界具有一定程度重叠区域的连续图像序列。
柱面全景图是把这些图像经过无缝拼接技术,投影到柱面空间坐标。柱面全景图的生成主要包含以下三个步骤:1.对局部图像进行柱面投影,2.根据像素的相关性对两幅重叠投影图像确定相互重叠的范围并进行匹配,3.对两幅重叠的图像进行拼接。
在步骤2)中,需要首先选定原始全景图中一个或多个可控点,如窗帘、灯具、电视
机等。可控点的选定可以采用手动或自动的方式。
采用手动的方式,可以采用现有的,如首先在监控系统的触摸显示屏(也可以是
计算机显示屏,此时可通过鼠标或键盘操作)上建立坐标系,拖动虚拟取景框到某个可控点,虚拟取景框可以为方形、圆形等;计算此时虚拟取景框的坐标,当虚拟取景框为方形时,计算对角线上顶点的两个坐标,作为可控点相应的区域坐标范围,当虚拟取景框为圆形时,计算圆心坐标以及半径,作为可控点相应的区域坐标范围;然后,将虚拟取景框拖动到下一个可控点,计算此时的区域坐标范围,不断重复,直至选定所有的可控点,将这些可控点的区域坐标范围进行存储,建立坐标数据库。
以上所述仅为本发明的优选实施方式,应当指出,对于本领域的普通技术人员而言,在不脱离本发明的原理前提下,还可以做出多种变形和改进,这也应该视为本发明的保护范围。

Claims (5)

1.一种智能家居系统控制方法,其特征在于,包括如下步骤:
1)原始全景图的创建:
a)获取图像:拍摄的原始家居图像传输到智能家居监控系统;
b)图像预处理;
c)图像拼接:将预处理后的图像进行无缝拼接,然后将拼接后的图像转换成曲面全景图;
2)创建可控坐标库:选定可控点,设定各可控点的类型,计算每个可控点所对应的区域坐标范围,对所述区域坐标范围创建坐标数据库;
3)实时图像的获取:拍摄实时家居图像,并传输到智能家居监控系统;
4)实时图像的处理:对实时图像进行预处理,并将预处理后的实时图像进行无缝拼
接,然后转换成曲面全景图;
5)模式匹配:将实时全景图与原始全景图重合,进行匹配,使得实时全景图的每个像素和原始全景图的像素一一对应;
6)激活可控点:在实时全景图上选择控制点,计算所选择的当前控制点的坐标,并将所述当前控制点的坐标与所述坐标数据库比较,如果所述当前控制点的坐标在坐标数据库的范围内,则获取对应可控点的当前状态,进行相应的动作;如果所述当前控制点的坐标在坐标数据库的范围外,则不采取动作。
2.如权利要求1所述的智能家居系统控制方法,其特征在于,所述原始家居图像或实时家居图像的无缝拼接,包括以下步骤:
a)特征点检测:基于SURF算法提取图像特征点,利用近似Hessian矩阵行列式的局部极大值检测两幅图像中具有高重复度的位置中的特征点;
b)特征点描述:根据图像在水平和垂直方向上对一阶Haar小波的响应,SURF算法对特征点的主方向进行确定,同时利用特征点某一小的邻域内灰度分布信息形成描述子向量;
c)特征点及图像匹配:根据欧氏距离或者马氏距离进行特征点描述算子的匹配,找出待匹配点的对应位置从而确定相邻两幅图像之间的变换关系,同时估计两幅图像的数学变换模型;
d)图像融合:将具有重合区域的图像进行融合,得到平滑过渡的无缝拼接图像。
3.如权利要求1或2所述的智能家居系统控制方法,其特征在于,在步骤2)中,选定可控点采用手动的方式,拖动虚拟取景框到每个可控点,从而计算虚拟取景框的坐标范围作为相应的区域坐标范围。
4.如权利要求1或2所述的智能家居系统控制方法,其特征在于,在步骤2)中,选定可控点采用自动的方式,在步骤1)取得原始全景图后,将可控的家居切换到与步骤1)中相对的状态,用同样的方法取得对比全景图,将原始全景图和对比全景图作相关性运算,取得原始全景图和对比全景图的差,得到各个可控点。
5.如权利要求1或2所述的智能家居系统控制方法,其特征在于,在步骤6)中,获取对应可控点的当前状态的方法,通过对每个可控家居监测电压、电流或状态反馈,判断当前状态,并将该状态信息与相应的可控点匹配。
CN201410670354.7A 2014-11-20 2014-11-20 一种智能家居系统控制方法 Pending CN105676652A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410670354.7A CN105676652A (zh) 2014-11-20 2014-11-20 一种智能家居系统控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410670354.7A CN105676652A (zh) 2014-11-20 2014-11-20 一种智能家居系统控制方法

Publications (1)

Publication Number Publication Date
CN105676652A true CN105676652A (zh) 2016-06-15

Family

ID=56957930

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410670354.7A Pending CN105676652A (zh) 2014-11-20 2014-11-20 一种智能家居系统控制方法

Country Status (1)

Country Link
CN (1) CN105676652A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106054646A (zh) * 2016-07-08 2016-10-26 无锡市华东电力设备有限公司 智能家居控制方法
CN106789485A (zh) * 2017-02-24 2017-05-31 深圳凯达通光电科技有限公司 一种便捷的智能家居监视系统
CN109703461A (zh) * 2017-10-26 2019-05-03 夏普株式会社 车辆驾驶支援装置
CN112634460A (zh) * 2020-11-27 2021-04-09 浙江工商大学 基于Haar-like特征的户外全景图生成方法及装置
CN113110094A (zh) * 2021-05-18 2021-07-13 珠海瑞杰电子科技有限公司 一种基于物联网的智能家居控制系统
CN114740749A (zh) * 2022-05-24 2022-07-12 广东顺德胜上智能家居有限公司 智能家居控制系统

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106054646A (zh) * 2016-07-08 2016-10-26 无锡市华东电力设备有限公司 智能家居控制方法
CN106789485A (zh) * 2017-02-24 2017-05-31 深圳凯达通光电科技有限公司 一种便捷的智能家居监视系统
CN106789485B (zh) * 2017-02-24 2018-10-12 慧谷人工智能研究院(南京)有限公司 一种便捷的智能家居监视系统
CN109703461A (zh) * 2017-10-26 2019-05-03 夏普株式会社 车辆驾驶支援装置
CN112634460A (zh) * 2020-11-27 2021-04-09 浙江工商大学 基于Haar-like特征的户外全景图生成方法及装置
CN112634460B (zh) * 2020-11-27 2023-10-24 浙江工商大学 基于Haar-like特征的户外全景图生成方法及装置
CN113110094A (zh) * 2021-05-18 2021-07-13 珠海瑞杰电子科技有限公司 一种基于物联网的智能家居控制系统
CN114740749A (zh) * 2022-05-24 2022-07-12 广东顺德胜上智能家居有限公司 智能家居控制系统

Similar Documents

Publication Publication Date Title
CN103294024B (zh) 智能家居系统控制方法
CN105676652A (zh) 一种智能家居系统控制方法
US11747893B2 (en) Visual communications methods, systems and software
US10755438B2 (en) Robust head pose estimation with a depth camera
US20170345183A1 (en) Robust Head Pose Estimation with a Depth Camera
US9329716B2 (en) System for projecting content to a display surface having user-controlled size, shape and location/direction and apparatus and methods useful in conjunction therewith
JP5966510B2 (ja) 情報処理システム
TWI526878B (zh) 控制電子裝置的方法、手持電子裝置與監控系統
US10157032B2 (en) Method for logically positioning multiple display screens
KR20170031733A (ko) 디스플레이를 위한 캡처된 이미지의 시각을 조정하는 기술들
US10203837B2 (en) Multi-depth-interval refocusing method and apparatus and electronic device
KR101196291B1 (ko) 손가락의 움직임을 인식하여 3d인터페이스를 제공하는 단말기 및 그 방법
US11880999B2 (en) Personalized scene image processing method, apparatus and storage medium
KR102422929B1 (ko) 디스플레이장치, 서버 및 그 제어방법
US11146744B2 (en) Automated interactive system and method for dynamically modifying a live image of a subject
US11087561B2 (en) Three-dimensional sketching in mobile augmented reality
US20140267600A1 (en) Synth packet for interactive view navigation of a scene
KR102179154B1 (ko) 투명 디스플레이를 이용한 전자기기 제어방법 및 이를 이용한 장치
CN106054646A (zh) 智能家居控制方法
CN113066189B (zh) 一种增强现实设备及虚实物体遮挡显示方法
AU2011219427A1 (en) A system for projecting content to a display surface having user-controlled size, shape and location/direction and apparatus and methods useful in conjunction therewith
KR101100240B1 (ko) 멀티모달 상호작용을 이용한 로봇의 물체 학습 시스템 및 방법
WO2022266998A1 (zh) 一种智能交互平板及其亮度调节方法
KR102118055B1 (ko) 로봇 청소기의 원격제어장치 및 그 제어방법
CN113434046A (zh) 三维交互系统、方法、计算机设备及可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160615