CN109028231A - 一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法 - Google Patents

一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法 Download PDF

Info

Publication number
CN109028231A
CN109028231A CN201811152642.8A CN201811152642A CN109028231A CN 109028231 A CN109028231 A CN 109028231A CN 201811152642 A CN201811152642 A CN 201811152642A CN 109028231 A CN109028231 A CN 109028231A
Authority
CN
China
Prior art keywords
pixel
image
main body
vision
control device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811152642.8A
Other languages
English (en)
Inventor
陈小平
陈超
李思成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Foshan Viomi Electrical Technology Co Ltd
Original Assignee
Foshan Viomi Electrical Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Foshan Viomi Electrical Technology Co Ltd filed Critical Foshan Viomi Electrical Technology Co Ltd
Priority to CN201811152642.8A priority Critical patent/CN109028231A/zh
Publication of CN109028231A publication Critical patent/CN109028231A/zh
Pending legal-status Critical Current

Links

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24CDOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00Details
    • F24C15/20Removing cooking fumes
    • F24C15/2021Arrangement or mounting of control or safety systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

一种基于视觉手势控制的烟灶一体机,设置有烟机主体、灶具主体、用于操控烟机主体以及灶具主体的控制装置和用于识别手部动作并调节烟机主体以及灶具主体的视觉检测模块,视觉检测模块装配于烟机主体且视野朝向灶台,控制装置装配于烟机主体,控制装置分别与视觉检测模块、烟机主体和灶具主体电连接。该基于视觉手势控制的烟灶一体机具有根据用户的手部姿势而烟灶一体机控制的优点,同时减少控制按键的设置使烟灶一体机表面易于清洁,同时用户可不直接接触烟灶一体机,避免脏手,提高灶具和油烟机的一体智能化。一种油烟浓度检测方法,几乎不受检测距离的影响,可实现油烟浓度的非接触实时检测,具有高准确度和实时性等优点。

Description

一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法
技术领域
本发明涉及烟灶一体机领域,特别涉及一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法。
背景技术
现代生活中,许多家庭都使用灶具和油烟机进行煮食,但现有的灶具和油烟机的控制主要是通过按键或者语音控制。按键式灶具必须与灶具或者油烟机直接接触,易弄脏手。语音控制又因为油烟机或者其他厨房用品在运行时噪声较大,影响语音辨识,易造成误操作或不响应等问题。
现有技术中,针对厨房油烟浓度的检测,主要有红外投射法和物理检测法。红外投射法通过一端发射红外光,另一端进行接收,通过接收到的红外光强度来判断油烟浓度大小。但是,由于油烟飘散具有不确定性,实际中还会存在人手遮挡等干扰,故,需在不同位置安装多个红外发射器才能保证油烟检测的相对准确,成本较高,对安装位置要求也较高。物理检测法类似于烟雾报警器的原理,通过检测空气中漂浮颗粒数来判断油烟浓度,但此法有两个缺点,一是必须当油烟接触到报警器时才能进行检测,不能实现远距离检测;二是当空气中飘浮的不是油烟而是水雾时就无法检测。
因此针对现有技术不足,提供一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法以解决现有技术不足甚为必要。
发明内容
本发明的其中一个目的在于避免现有技术的不足之处而提供一种基于视觉手势控制的烟灶一体机。该基于视觉手势控制的烟灶一体机具有根据用户的手部姿势而烟灶一体机控制的优点,同时减少控制按键的设置使烟灶一体机表面易于清洁,同时用户可不直接接触烟灶一体机,避免脏手。
本发明的上述目的通过以下技术措施实现:
提供一种基于视觉手势控制的烟灶一体机,设置有烟机主体、灶具主体、用于操控烟机主体以及灶具主体的控制装置和用于识别手部动作并调节烟机主体以及灶具主体的视觉检测模块,视觉检测模块装配于烟机主体且视野朝向灶台,控制装置装配于烟机主体,控制装置分别与视觉检测模块、烟机主体和灶具主体电连接。
优选的,上述视觉检测模块设置有手势识别单元,手势识别单元与控制装置电连接。
优选的,上述手势识别单元识别用户的手部动作得到调节指示信号,再向控制装置传输调节指示信号。
优选的,上述视觉检测模块还设置有油烟浓度判定单元,油烟浓度判定单元与控制装置电连接;
油烟浓度判定单元识别当前灶具主体区域图像信息并确定当前油烟浓度得到处理信号,然后将处理信号传输至控制装置。
优选的,上述灶具主体设置有用炉火控制组件,炉火控制组件装配于灶具主体。
优选的,上述炉火控制组件与控制装置电连接。
控制装置接收到手势识别单元的调节指示信号,控制装置将调节指示信号传输至炉火控制组件,炉火控制组件接收调节指示信号并调节炉火强度。
控制装置接收油烟浓度判定单元的处理信号,控制装置将处理信号传输至抽炉火控制组件,炉火控制组件接收处理信号并调节炉火强度。
优选的,上述烟机主体设置用抽风组件和用于改变外部进风口大小的扰流板,扰流板活动装配于烟机主体且位于外部进风口,抽风组件装配于烟机主体的内部。
优选的,上述抽风组件和扰流板分别与控制装置电连接。
控制装置接收到手势识别单元的调节指示信号,控制装置分别将调节指示信号传输至抽风组件和扰流板,抽风组件接收调节指示信号并调节转速,扰流板接收调节指示信号并调节开度。
控制装置接收油烟浓度判定单元的处理信号,控制装置分别将处理信号传输至抽风组件和扰流板,抽风组件接收处理信号并调节转速,扰流板接收处理信号并调节开度。
优选的,上述视觉检测模块通过采集的初始图像进行处理并被序列化,依次通过后帧的初始图像与前帧的初始图像进行处理,得到各个后帧初始图像所处时刻的当前厨房油烟浓度。
优选的,上述视觉检测模块设置有装置主体、视觉检测部和防止油烟或水汽接近视觉检测部的正压部,视觉检测部和正压部分别装配于装置主体。
优选的,上述装置主体设置有风腔部,将视觉检测部朝向拍摄区域定义为上方,视觉检测部装配于风腔部的下方。
优选的,上述视觉检测部的视觉镜头穿过风腔部的通孔并朝向上方。
优选的,上述正压部装配于风腔部的上方且正压部的小出风口朝向风腔部。
优选的,上述风腔部设置有用于容纳正压部产生气流的第一风腔室和用于对从第一风腔室气流进入的气体进行提速的第二风腔室,正压部装配于第一风腔室,视觉镜头位于第二风腔室内部,第一风腔室与第二风腔室连通。
优选的,上述装置主体还设置有上盖和下盖,上盖固定扣合于风腔部的上方,下盖装配于视觉检测部的底部。
优选的,上述上盖设置有与正压部相配合的小进风口和小出风口,视觉镜头穿过小进风口且与上盖的表面持平。
本发明的基于视觉手势控制的烟灶一体机,设置有烟机主体、灶具主体、用于操控烟机主体以及灶具主体的控制装置和用于识别手部动作并调节烟机主体以及灶具主体的视觉检测模块,视觉检测模块装配于烟机主体且视野朝向灶台,控制装置装配于烟机主体,控制装置分别与视觉检测模块、烟机主体和灶具主体电连接。该基于视觉手势控制的烟灶一体机具有根据用户的手部姿势而烟灶一体机控制的优点,同时减少控制按键的设置使烟灶一体机表面易于清洁,同时用户可不直接接触烟灶一体机,避免脏手,提高灶具和油烟机的一体智能化。
本发明的另一发明目的在于避免现有技术的不足之处而提供一种油烟浓度检测方法。该油烟浓度检测方法具有检测实时、油烟浓度检测结果准确性高的特点。
提供一种油烟浓度检测方法,具有如上述特征的基于视觉手势控制的烟灶一体机,视觉检测模块以成像设备采集的初始图像作为基础进行处理,初始图像为灰度图,所采集的初始图像被序列化,依次通过后帧的初始图像与前帧的初始图像进行处理,得到各个后帧初始图像所处时刻的当前厨房油烟浓度;
每次通过后帧的初始图像与前帧的初始图像进行处理,得到后帧初始图像所处时刻的当前厨房油烟浓度的步骤过程如下:
(1)将后帧的初始图像与前帧的初始图像进行帧差处理得到帧差图像;
(2)以开运算方式对帧差图像进行去噪处理,得到去噪图像;
(3)对去噪图像进行边缘检测,标记运动区域作为初始感兴趣区域;
(4)对初始感兴趣区域进行灰度均值计算和区域平滑度计算,将同时满足灰度均值和平滑度要求的区域作为下一步感兴趣区域,其它的区域作为干扰排除;
(5)对步骤(4)提取出的感兴趣区域分别进行灰度直方图统计,根据统计结果划分油烟浓度等级。
步骤(1)中,对采集到的初始图像进行帧差操作得到帧差图像具体是:
视觉检测模块根据接收到的初始图像的先后顺序,将后一帧图像与前一帧图像做差,得到动态区域高亮的帧差图像;
优选的,上述步骤(2)对帧差图像采用开运算进行去噪处理,得到去噪图像,具体通过如下方式进行:先对帧差图像进行腐蚀操作,以消除图像中的噪点和细小尖刺,断开窄小的连接;再对腐蚀后的图像进行膨胀操作,恢复原帧差图像中的烟雾特征。
优选的,上述步骤(3)对去噪图像进行边缘检测,标记运动区域作为初始感兴趣区域,具体是:利用小波变换,检测帧差图像高亮区域的边缘并进行标记,将标记出的区域作为初始感兴趣区域。
优选的,上述步骤(4)具体是对每个初始感兴趣区域进行灰度均值、区域平滑度计算,得到每个初始感兴趣区域对应的灰度均值和灰度平滑度,将同时满足计算得到的灰度均值小于灰度阈值、灰度平滑度小于灰度平滑度阈值的初始感兴趣区域作为感兴趣区域,将其它初始感兴趣区域判定为干扰区域。
优选的,上述步骤(5)中对步骤(4)提取出的感兴趣区域分别进行灰度直方图统计,根据统计结果划分油烟浓度等级,具体是。
将感兴趣区域图像中的所有像素,按照灰度值的大小,统计其出现的频率;
再根据需要划分的浓度等级数量,取10为区间长度,统计每个灰度区间内的像素点个数,每个灰度区间内的像素点个数对应划分油烟为相应的浓度等级。
成像设备采集的目标区域以区域S表示,任意一帧初始图像为对应区域S的成像。
初始图像由m*n个像素构成。
后帧初始图像A的像素的灰度值以矩阵AH表示,AH={ahi,j},ahi,j代表后帧初始图像A中第i行、第j列像素对应的灰度值,i为像素所在的行,j为像素所在的列,1≤i≤m,1≤j≤n;后帧初始图像A中第i行、第j列像素所在的子区域为ASi,j
前帧初始图像B的像素的灰度值以矩阵BH表示,BH={bhi,j},bhi,j代表前帧初始图像B中第i行、第j列像素对应的灰度值,前帧初始图像B中第i行、第j列像素所在的子区域为BSi,j
帧差图像D的像素灰度值以矩阵DH表示,DH={dhi,j}={ahi,j-bhi,j},dhi,j代表帧差图像D中第i行、第j列像素对应的灰度值,帧差图像D中第i行、第j列像素所在的子区域为DSi,j
在帧差图像中,|dhi,j|=0的区域,呈黑色;|dhi,j|≠0的区域呈高亮显示。
步骤(2)中对帧差图像进行腐蚀操作,具体包括如下步骤:
2-11,任意定义一个卷积核θ;
2-12,将卷积核θ与帧差图像进行卷积;在卷积核θ遍历帧差图像时,提取卷积核所覆盖区域内卷积结果的像素灰度最小值p以及与卷积核中心重合的像素点C;
像素点C的灰度通过矩阵CH={ck,q}表示,k、q为像素点C的行序号和列序号,
获得在卷积核θ遍历帧差图像过程中得到的卷积结果最小值像素点矩阵P,最小值像素点矩阵P的灰度通过矩阵PH={pk,q}表示;
2-13将像素点矩阵P的灰度对应赋予像素点C,得到腐蚀图像;
步骤(2)中对腐蚀图像进行膨胀操作,具体包括如下步骤:
2-21,任意定义一个卷积核β;
2-22,将卷积核β与腐蚀图像进行卷积;在卷积核β遍历腐蚀图像时,提取卷积核所覆盖区域内卷积结果的像素灰度最大值o以及与卷积核中心重合的像素点R;
像素点R的灰度通过矩阵RH={rl,v}表示,l、v为像素点R的行序号和列序号,
获得在卷积核β遍历腐蚀图像过程中得到的卷积结果最大值像素点矩阵O,最大值像素点矩阵O的灰度通过矩阵OH={ol,v}表示;
2-13将最大值像素点矩阵O的灰度对应赋予像素点R,得到膨胀图像,得到的膨胀图像即为去噪图像。
优选的,上述步骤(3)通过如下步骤进行:
3-1,定义一个滤波器Y,滤波器为t*t矩阵,t为奇数;
3-2,使滤波器Y遍历去噪图像,计算滤波器在每一位置处的中心像素点所在的去噪图像的灰度值以及中心像素点邻域内其它像素点的灰度值,并根据公式(Ⅰ)计算滤波器在每一位置处的中心像素点的边缘检测值Xz,z为滤波器Y遍历去噪图像时的标记,
f、g为像素点的矩阵序号,1≤f≤t,1≤g≤t,e为滤波器在每一位置处的像素点所在的去噪图像的灰度值;α为权重系数,与滤波器位置相对应;
3-3,将滤波器在每一位置处的中心像素点边缘检测值Xz与中心像素点邻域的其它像素点的灰度值相减,并判断差值的绝对值是否大于阈值Δ;
统计大于阈值的数量,如果数量超过判定滤波器所处位置的中心像素点对应的去噪图像的像素点位置为边缘点,并进行标记;
3-4,滤波器遍历完整个去噪图像,得到所有标记的边缘点,获得初步感兴趣区域。
优选的,上述t为3。
本发明的油烟浓度检测方法,提供了一种区别于红外投射法和物理检测法的一种油烟浓度检测方法。该油烟浓度检测方法,几乎不受检测距离的影响,可实现油烟浓度的非接触实时检测,具有高准确度和实时性等优点。
附图说明
利用附图对本发明作进一步的说明,但附图中的内容不构成对本发明的任何限制。
图1为本发明一种基于视觉手势控制的烟灶一体机信号传输关系。
图2为一种基于视觉手势控制的烟灶一体机结构示意图。
图3为实施例2的视觉检测模块的截面示意图。
图4为视觉检测模块分解示意图。
图5为图3中的气流流动方向示意图。
图6是本发明的方法分割的油烟区域和干扰区域的示意图。
图1至图6中,包括有:
视觉检测模块1、
装置主体11、
风腔部111、第一风腔室1111、第二风腔室1112、
上盖112、小进风口1121、小出风口1122、
下盖113、
正压部12、
视觉检测部13、视觉镜头131、
控制装置2、
烟机主体3、
抽风组件4、
扰流板5、
灶具主体6。
具体实施方式
结合以下实施例对本发明的技术方案作进一步说明。
实施例1。
一种基于视觉手势控制的烟灶一体机,如图1至2所示,设置有烟机主体3、灶具主体6、用于操控烟机主体3以及灶具主体6的控制装置2和用于识别手部动作并调节烟机主体3以及灶具主体6的视觉检测模块1,视觉检测模块1装配于烟机主体3且视野朝向灶台,控制装置2装配于烟机主体3,控制装置2分别与视觉检测模块1、烟机主体3和灶具主体6电连接。
视觉检测模块1设置有手势识别单元,手势识别单元与控制装置2电连接。
手势识别单元识别用户的手部动作得到调节指示信号,再向控制装置2传输调节指示信号。
视觉检测模块1还设置有油烟浓度判定单元,油烟浓度判定单元与控制装置2电连接。
油烟浓度判定单元识别当前灶具主体6区域图像信息并确定当前油烟浓度得到处理信号,然后将处理信号传输至控制装置2。
灶具主体6设置有用炉火控制组件,炉火控制组件装配于灶具主体6。
炉火控制组件与控制装置2电连接。
控制装置2接收到手势识别单元的调节指示信号,控制装置2将调节指示信号传输至炉火控制组件,炉火控制组件接收调节指示信号并调节炉火强度。
控制装置2接收油烟浓度判定单元的处理信号,控制装置2分别将处理信号传输至抽炉火控制组件,炉火控制组件接收处理信号并调节炉火强度。
烟机主体3设置用抽风组件4和用于改变外部进风口大小的扰流板5,扰流板5活动装配于烟机主体3且位于外部进风口,抽风组件4装配于烟机主体3的内部。
抽风组件4和扰流板5分别与控制装置2电连接。
控制装置2接收到手势识别单元的调节指示信号,控制装置2分别将调节指示信号传输至抽风组件4和扰流板5,抽风组件4接收调节指示信号并调节转速,扰流板5接收调节指示信号并调节开度。
控制装置2接收油烟浓度判定单元的处理信号,控制装置2分别将处理信号传输至抽风组件4和扰流板5,抽风组件4接收处理信号并调节转速,扰流板5接收处理信号并调节开度。
本发明扰流板5的开度是指扰流板5沿烟机主体3的外部进风口伸缩从而调节进风口的大小的程度。
本发明的过程如下:例如当用户发出火力调小的动作指令时手势识别单元识别出该调节指示信号,控制装置2将调节指示信号传输至炉火控制组件,炉火控制组件接收火力调小的调节指示信号并减少炉火强度。当油烟浓度判定单元识别到所在区域的油烟浓度较大的时并发出调小炉火的处理信号,然后将处理信号传输至控制装置2,控制装置2接收油烟浓度判定单元的调小炉火的处理信号,控制装置2将调小炉火的处理信号至炉火控制组件,炉火控制组件接收调小炉火的处理信号并减少炉火强度,以减小油烟的生成。
例如当用户发出转速调小的动作指令时手势识别单元识别出转速调小调节指示信号,控制装置2将转速调小调节指示信号传输至抽风组件4,抽风组件4接收转速调小调节指示信号并减转动速度。当用户发出开度调小的动作指令时手势识别单元识别出开度调小调节指示信号,控制装置2将开度调小调节指示信号传输至扰流板5,扰流板5接收转速开度调小调节指示信号并减小开度以减小外部进风口。
例如当油烟浓度判定单元识别到所在区域的油烟浓度较大的时并发出对应的处理信号,然后将对应的处理信号传输至控制装置2,控制装置2接收油烟浓度判定单元的对应的处理信号,控制装置2将对应的处理信号至抽风组件4,抽风组件4接收对应的处理信号并增加转动速度,同时控制装置2将对应的处理信号至扰流板5,扰流板5接收转速对应的处理信号并增加开度以增加外部进风口,使油烟气体迅速抽走。上述例子反之亦然,在此不再一一列举。
该基于视觉手势控制的烟灶一体机,设置有烟机主体3、灶具主体6、用于操控烟机主体3以及灶具主体6的控制装置2和用于识别手部动作并调节烟机主体3以及灶具主体6的视觉检测模块1,视觉检测模块1装配于烟机主体3且视野朝向灶台,控制装置2装配于烟机主体3,控制装置2分别与视觉检测模块1、烟机主体3和灶具主体6电连接。该基于视觉手势控制的烟灶一体机具有根据用户的手部姿势而烟灶一体机控制的优点,同时减少控制按键的设置使烟灶一体机表面易于清洁,同时用户可不直接接触烟灶一体机,避免脏手,提高灶具和油烟机的一体智能化。
实施例2。
一种基于视觉手势控制的烟灶一体机,如图3至5所示,其他特征与实施例1相同,不同之处在于:视觉检测模块1设置有装置主体11、视觉检测部13和防止油烟或水汽接近视觉检测部13的正压部12,视觉检测部13和正压部12分别装配于装置主体11。
装置主体11设置有风腔部111,将视觉检测部13朝向拍摄区域定义为上方,视觉检测部13装配于风腔部111的下方。
视觉检测部13的视觉镜头131穿过风腔部111的通孔并朝向上方。正压部12装配于风腔部111的上方且正压部12的小出风口1122朝向风腔部111。
风腔部111设置有用于容纳正压部12产生气流的第一风腔室1111和用于对从第一风腔室1111气流进入的气体进行提速的第二风腔室1112,正压部12装配于第一风腔室1111,视觉镜头131位于第二风腔室1112内部,第一风腔室1111与第二风腔室1112连通。
装置主体11还设置有上盖112和下盖113,上盖112固定扣合于风腔部111的上方,下盖113装配于视觉检测部13的底部。
上盖112设置有与正压部12相配合的小进风口1121和小出风口1122,视觉镜头131穿过小进风口1121且与上盖112的表面持平。
本发明的视觉检测模块1的气流流动过程如下:正压部12从上盖112的小进风口1121吸入气体,正压部12再将气体排向第一风腔体,气体从第一风腔室1111流入第二风腔室1112,因为第二风腔室1112的未被占用的体积小于第二风腔室1112的未被占用的体积,气体在第二风腔室1112得到提速,被提速的气体再经过视觉镜头131与锥面结构的缝隙,气体最终以最高速度离开该正压防污式视觉装置,气体在视觉镜头131与烟雾之间形成一定正压,使得烟雾无法接触视觉镜头131。
与实施例1相比,本实施例视觉检测模块1的正压部12产生气体高速从视觉检测模块1的视觉镜头131的表面流过,从而在视觉镜头131与烟雾之间形成一定的正压,使得烟雾无法接触视觉镜头131。该视觉检测模块1能够防止油烟或水汽的附着。
实施例3。
一种油烟浓度检测方法,视觉检测模块1以成像设备采集的初始图像作为基础进行处理,初始图像为灰度图,所采集的初始图像被序列化,依次通过后帧的初始图像与前帧的初始图像进行处理,得到各个后帧初始图像所处时刻的当前厨房油烟浓度。通过该方法,也可实时得到当前帧时刻的油烟浓度情况,也可以根据需要即使监控各个时刻当前帧图像的油烟浓度情况,为油烟机的自动抽烟力度提供依据。
每次通过后帧的初始图像与前帧的初始图像进行处理,得到后帧初始图像所处时刻的当前厨房油烟浓度的步骤过程如下:
(1)将后帧的初始图像与前帧的初始图像进行帧差处理得到帧差图像;
(2)以开运算方式对帧差图像进行去噪处理,得到去噪图像;
(3)对去噪图像进行边缘检测,标记运动区域作为初始感兴趣区域;
(4)对初始感兴趣区域进行灰度均值计算和区域平滑度计算,将同时满足灰度均值和平滑度要求的区域作为下一步感兴趣区域,其它的区域作为干扰排除;
(5)对步骤(4)提取出的感兴趣区域分别进行灰度直方图统计,根据统计结果划分油烟浓度等级。统计方法可以为灰度直方图统计,也可以选择其他统计方法。
步骤(1)中,对采集到的初始图像进行帧差操作得到帧差图像具体是:视觉检测模块1根据接收到的初始图像的先后顺序,将后一帧图像与前一帧图像做差,得到动态区域高亮的帧差图像。由于前后两帧图像中静态区域是不变的,动态区域(例如油烟飘散,人手挥动等)是变化的,所以帧差后静态区域呈现黑色,动态区域帧差后表现为边缘模糊的高亮区域,故通过帧差可以得到动态区域高亮的帧差图像。
成像设备采集的目标区域以区域S表示,任意一帧初始图像为对应区域S的成像;初始图像由m*n个像素构成。
后帧初始图像A的像素的灰度值以矩阵AH表示,AH={ahi,j},ahi,j代表后帧初始图像A中第i行、第j列像素对应的灰度值,i为像素所在的行,j为像素所在的列,1≤i≤m,1≤j≤n;后帧初始图像A中第i行、第j列像素所在的子区域为ASi,j
前帧初始图像B的像素的灰度值以矩阵BH表示,BH={bhi,j},bhi,j代表前帧初始图像B中第i行、第j列像素对应的灰度值,前帧初始图像B中第i行、第j列像素所在的子区域为BSi,j
帧差图像D的像素灰度值以矩阵DH表示,DH={dhi,j}={ahi,j-bhi,j},dhi,j代表帧差图像D中第i行、第j列像素对应的灰度值,帧差图像D中第i行、第j列像素所在的子区域为DSi,j
在帧差图像中,|dhi,j|=0的区域,呈黑色;|dhi,j|≠0的区域呈高亮显示。
帧差操作后,进入步骤(2)。对帧差图像采用开运算进行去噪处理,得到去噪图像,具体通过如下方式进行:先对帧差图像进行腐蚀操作,以消除图像中的噪点和细小尖刺,断开窄小的连接;再对腐蚀后的图像进行膨胀操作,恢复原帧差图像中的烟雾特征。
步骤(2)中对帧差图像进行腐蚀操作,具体包括如下步骤:
2-11,任意定义一个卷积核θ;
2-12,将卷积核θ与帧差图像进行卷积;在卷积核θ遍历帧差图像时,提取卷积核所覆盖区域内卷积结果的像素灰度最小值p以及与卷积核中心重合的像素点C;
像素点C的灰度通过矩阵CH={ck,q}表示,k、q为像素点C的行序号和列序号,
获得在卷积核θ遍历帧差图像过程中得到的卷积结果最小值像素点矩阵P,最小值像素点矩阵P的灰度通过矩阵PH={pk,q}表示;
2-13将像素点矩阵P的灰度对应赋予像素点C,得到腐蚀图像。
步骤(2)中对腐蚀图像进行膨胀操作,具体包括如下步骤:
2-21,任意定义一个卷积核β;
2-22,将卷积核β与腐蚀图像进行卷积;在卷积核β遍历腐蚀图像时,提取卷积核所覆盖区域内卷积结果的像素灰度最大值o以及与卷积核中心重合的像素点R;
像素点R的灰度通过矩阵RH={rl,v}表示,l、v为像素点R的行序号和列序号,
获得在卷积核β遍历腐蚀图像过程中得到的卷积结果最大值像素点矩阵O,最大值像素点矩阵O的灰度通过矩阵OH={ol,v}表示;
2-13将最大值像素点矩阵O的灰度对应赋予像素点R,得到膨胀图像,得到的膨胀图像即为去噪图像。
利用开运算可以消除图像噪点,在纤细点处分离物体,平滑较大的物体边界,同时也可保证原来图像中高亮区域的面积基本不变,保证后续检测的准确性不受影响。
步骤(3)对去噪图像进行边缘检测,标记运动区域作为初始感兴趣区域,具体是:利用小波变换,检测帧差图像高亮区域的边缘并进行标记,将标记出的区域作为初始感兴趣区域。
由于图像边缘的灰度值与相邻像素点的灰度值会产生较大的灰度值梯度,根据边缘的这一特征,设定一个滤波器,用该滤波器遍历帧差图像。步骤(3)通过如下步骤进行:
3-1,定义一个滤波器Y,滤波器为t*t矩阵,t为奇数。滤波器选择奇数矩阵,以确保只有一个中心点,优选3*3矩阵,具有计算量小的特点。
3-2,使滤波器Y遍历去噪图像,计算滤波器在每一位置处的中心像素点所在的去噪图像的灰度值以及中心像素点邻域内其它像素点的灰度值,并根据公式(Ⅰ)计算滤波器在每一位置处的中心像素点的边缘检测值Xz,z为滤波器Y遍历去噪图像时的标记,
f、g为像素点的矩阵序号,1≤f≤t,1≤g≤t,e为滤波器在每一位置处的像素点所在的去噪图像的灰度值;α为权重系数,与滤波器位置相对应。
3-3,将滤波器在每一位置处的中心像素点边缘检测值Xz与中心像素点邻域的其它像素点的灰度值相减,并判断差值的绝对值是否大于阈值Δ;
统计大于阈值的数量,如果数量超过判定滤波器所处位置的中心像素点对应的去噪图像的像素点位置为边缘点,并进行标记;
3-4,滤波器遍历完整个去噪图像,得到所有标记的边缘点,获得初步感兴趣区域。
因为人在做菜操作时,手会一直在挥动,帧差完之后的图像中会包含油烟和人手操作等运动物体的干扰区域,在进行油烟浓度识别之前需要排除干扰区域的影响,这也是本发明专利的难点所在。
但是油烟的运动方向具有随机性,人手,锅铲的运动方向相对明确且特征不同,在数值上表现就是灰度值差异较大,从而:
1)帧差后的图像上油烟运动区域比人手、锅铲运动区域的亮度低,所以相应的油烟区域的灰度值均值也低于人手、锅铲运动区域的灰度均值;
2)帧差后的图像上油烟运动区域的灰度值分布较集中,而人手、锅铲的运动区域边界的灰度值较区域的中心区域跳跃较大,所以该区域的图像不够平滑,对应的灰度值的方差较大。
利用这两个特性,步骤(4)具体是对每个初始感兴趣区域进行灰度均值、区域平滑度计算,得到每个初始感兴趣区域对应的灰度均值和灰度平滑度,将同时满足计算得到的灰度均值小于灰度阈值、灰度平滑度小于灰度平滑度阈值的初始感兴趣区域作为感兴趣区域,将其它初始感兴趣区域判定为干扰区域。
灰度阈值、灰度平滑度阈值的量值可以根据具体需要灵活设置,在此不再赘述。步骤(4)完成油烟区域的识别和干扰区域的排除。
图6示意了一个利用本发明的方法分割的油烟区域和干扰区域的示意图,可见,本发明的方法能够将干扰区域有效排除。
步骤(5)中对步骤(4)提取出的感兴趣区域分别进行灰度直方图统计,根据统计结果划分油烟浓度等级,具体是:
将感兴趣区域图像中的所有像素,按照灰度值的大小,统计其出现的频率;
再根据需要划分的浓度等级数量,取10为区间长度,统计每个灰度区间内的像素点个数,每个灰度区间内的像素点个数对应划分油烟为相应的浓度等级。
需要说明的是,区间长度的选择不局限于10,也可以选择其他数量。
油烟浓度的划分标准可以具体设定,如设置浓烟、中等烟或者低烟等,具体数值以实际需求为准,在此不再赘述。
本发明的油烟浓度检测方法,提供了一种区别于红外投射法和物理检测法的一种油烟浓度检测方法。该油烟浓度检测方法,几乎不受检测距离的影响,可实现油烟浓度的非接触实时检测,具有高准确度和实时性等优点。
本发明油烟浓度检测方法,可以设置于烟机主体3中,通过烟机主体3设置的成像设备采集烟机主体3灶头区域的图像,并输送至视觉检测模块1,视觉检测模块1将处理的油烟等级结构输送至主控单元,主控单元根据烟机主体3的油烟等级控制烟机主体3抽吸力度。更加准确地对厨房油烟进行抽吸处理。
最后应当说明的是,以上实施例仅用以说明本发明的技术方案而非对本发明保护范围的限制,尽管参照较佳实施例对本发明作了详细说明,本领域的普通技术人员应当理解,可以对本发明技术方案进行修改或者等同替换,而不脱离本发明技术方案的实质和范围。

Claims (10)

1.一种基于视觉手势控制的烟灶一体机,其特征在于:设置有烟机主体、灶具主体、用于操控烟机主体以及灶具主体的控制装置和用于识别手部动作并调节烟机主体以及灶具主体的视觉检测模块,视觉检测模块装配于烟机主体且视野朝向灶台,控制装置装配于烟机主体,控制装置分别与视觉检测模块、烟机主体和灶具主体电连接。
2.根据权利要求1所述的基于视觉手势控制的烟灶一体机,其特征在于:所述视觉检测模块设置有手势识别单元,手势识别单元与控制装置电连接;
所述手势识别单元识别用户的手部动作得到调节指示信号,再向控制装置传输调节指示信号。
3.根据权利要求2所述的基于视觉手势控制的烟灶一体机,其特征在于:所述视觉检测模块还设置有油烟浓度判定单元,油烟浓度判定单元与控制装置电连接;
油烟浓度判定单元识别当前灶具主体区域图像信息并确定当前油烟浓度得到处理信号,然后将处理信号传输至控制装置。
4.根据权利要求3所述的基于视觉手势控制的烟灶一体机,其特征在于:所述灶具主体设置有用炉火控制组件,炉火控制组件装配于灶具主体;
所述炉火控制组件与控制装置电连接;
控制装置接收到手势识别单元的调节指示信号,控制装置将调节指示信号传输至炉火控制组件,炉火控制组件接收调节指示信号并调节炉火强度;
控制装置接收油烟浓度判定单元的处理信号,控制装置将处理信号传输至抽炉火控制组件,炉火控制组件接收处理信号并调节炉火强度。
5.根据权利要求4所述的基于视觉手势控制的烟灶一体机,其特征在于:所述烟机主体设置用抽风组件和用于改变外部进风口大小的扰流板,扰流板活动装配于烟机主体且位于外部进风口,抽风组件装配于烟机主体的内部;
所述抽风组件和扰流板分别与控制装置电连接;
控制装置接收到手势识别单元的调节指示信号,控制装置分别将调节指示信号传输至抽风组件和扰流板,抽风组件接收调节指示信号并调节转速,扰流板接收调节指示信号并调节开度;
控制装置接收油烟浓度判定单元的处理信号,控制装置分别将处理信号传输至抽风组件和扰流板,抽风组件接收处理信号并调节转速,扰流板接收处理信号并调节开度。
6.根据权利要求5所述的基于视觉手势控制的烟灶一体机,其特征在于:所述视觉检测模块通过采集的初始图像进行处理并被序列化,依次通过后帧的初始图像与前帧的初始图像进行处理,得到各个后帧初始图像所处时刻的当前厨房油烟浓度;
所述视觉检测模块设置有装置主体、视觉检测部和防止油烟或水汽接近视觉检测部的正压部,视觉检测部和正压部分别装配于装置主体。
7.根据权利要求6所述的基于视觉手势控制的烟灶一体机,其特征在于:所述装置主体设置有风腔部,将视觉检测部朝向拍摄区域定义为上方,视觉检测部装配于风腔部的下方;
所述视觉检测部的视觉镜头穿过风腔部的通孔并朝向上方;
所述正压部装配于风腔部的上方且正压部的小出风口朝向风腔部;
所述风腔部设置有用于容纳正压部产生气流的第一风腔室和用于对从第一风腔室气流进入的气体进行提速的第二风腔室,正压部装配于第一风腔室,视觉镜头位于第二风腔室内部,第一风腔室与第二风腔室连通;
所述装置主体还设置有上盖和下盖,上盖固定扣合于风腔部的上方,下盖装配于视觉检测部的底部;
所述上盖设置有与正压部相配合的小进风口和小出风口,视觉镜头穿过小进风口且与上盖的表面持平。
8.一种油烟浓度检测方法,其特征在于,具有如权利要求1至7任意一项特征的基于视觉手势控制的烟灶一体机,视觉检测模块以成像设备采集的初始图像作为基础进行处理,初始图像为灰度图,所采集的初始图像被序列化,依次通过后帧的初始图像与前帧的初始图像进行处理,得到各个后帧初始图像所处时刻的当前厨房油烟浓度;
每次通过后帧的初始图像与前帧的初始图像进行处理,得到后帧初始图像所处时刻的当前厨房油烟浓度的步骤过程如下:
(1)将后帧的初始图像与前帧的初始图像进行帧差处理得到帧差图像;
(2)以开运算方式对帧差图像进行去噪处理,得到去噪图像;
(3)对去噪图像进行边缘检测,标记运动区域作为初始感兴趣区域;
(4)对初始感兴趣区域进行灰度均值计算和区域平滑度计算,将同时满足灰度均值和平滑度要求的区域作为下一步感兴趣区域,其它的区域作为干扰排除;
(5)对步骤(4)提取出的感兴趣区域分别进行灰度直方图统计,根据统计结果划分油烟浓度等级。
9.根据权利要求8所述的油烟浓度检测方法,其特征在于,步骤(1)中,对采集到的初始图像进行帧差操作得到帧差图像具体是:
视觉检测模块根据接收到的初始图像的先后顺序,将后一帧图像与前一帧图像做差,得到动态区域高亮的帧差图像;
所述步骤(2)对帧差图像采用开运算进行去噪处理,得到去噪图像,具体通过如下方式进行:先对帧差图像进行腐蚀操作,以消除图像中的噪点和细小尖刺,断开窄小的连接;再对腐蚀后的图像进行膨胀操作,恢复原帧差图像中的烟雾特征;
所述步骤(3)对去噪图像进行边缘检测,标记运动区域作为初始感兴趣区域,具体是:利用小波变换,检测帧差图像高亮区域的边缘并进行标记,将标记出的区域作为初始感兴趣区域;
所述步骤(4)具体是对每个初始感兴趣区域进行灰度均值、区域平滑度计算,得到每个初始感兴趣区域对应的灰度均值和灰度平滑度,将同时满足计算得到的灰度均值小于灰度阈值、灰度平滑度小于灰度平滑度阈值的初始感兴趣区域作为感兴趣区域,将其它初始感兴趣区域判定为干扰区域;
所述步骤(5)中对步骤(4)提取出的感兴趣区域分别进行灰度直方图统计,根据统计结果划分油烟浓度等级,具体是:
将感兴趣区域图像中的所有像素,按照灰度值的大小,统计其出现的频率;
再根据需要划分的浓度等级数量,取10为区间长度,统计每个灰度区间内的像素点个数,每个灰度区间内的像素点个数对应划分油烟为相应的浓度等级。
10.根据权利要求9所述的油烟浓度检测方法,其特征在于,成像设备采集的目标区域以区域S表示,任意一帧初始图像为对应区域S的成像;
初始图像由m*n个像素构成,
后帧初始图像A的像素的灰度值以矩阵AH表示,AH={ahi,j},ahi,j代表后帧初始图像A中第i行、第j列像素对应的灰度值,i为像素所在的行,j为像素所在的列,1≤i≤m,1≤j≤n;后帧初始图像A中第i行、第j列像素所在的子区域为ASi,j
前帧初始图像B的像素的灰度值以矩阵BH表示,BH={bhi,j},bhi,j代表前帧初始图像B中第i行、第j列像素对应的灰度值,前帧初始图像B中第i行、第j列像素所在的子区域为BSi,j
帧差图像D的像素灰度值以矩阵DH表示,DH={dhi,j}={ahi,j-bhi,j},dhi,j代表帧差图像D中第i行、第j列像素对应的灰度值,帧差图像D中第i行、第j列像素所在的子区域为DSi,j
在帧差图像中,|dhi,j|=0的区域,呈黑色;|dhi,j|≠0的区域呈高亮显示;
步骤(2)中对帧差图像进行腐蚀操作,具体包括如下步骤:
2-11,任意定义一个卷积核θ;
2-12,将卷积核θ与帧差图像进行卷积;在卷积核θ遍历帧差图像时,提取卷积核所覆盖区域内卷积结果的像素灰度最小值p以及与卷积核中心重合的像素点C;
像素点C的灰度通过矩阵CH={ck,q}表示,k、q为像素点C的行序号和列序号,
获得在卷积核θ遍历帧差图像过程中得到的卷积结果最小值像素点矩阵P,最小值像素点矩阵P的灰度通过矩阵PH={pk,q}表示;
2-13将像素点矩阵P的灰度对应赋予像素点C,得到腐蚀图像;
步骤(2)中对腐蚀图像进行膨胀操作,具体包括如下步骤:
2-21,任意定义一个卷积核β;
2-22,将卷积核β与腐蚀图像进行卷积;在卷积核β遍历腐蚀图像时,提取卷积核所覆盖区域内卷积结果的像素灰度最大值o以及与卷积核中心重合的像素点R;
像素点R的灰度通过矩阵RH={rl,v}表示,l、v为像素点R的行序号和列序号,
获得在卷积核β遍历腐蚀图像过程中得到的卷积结果最大值像素点矩阵O,最大值像素点矩阵O的灰度通过矩阵OH={ol,v}表示;
2-13将最大值像素点矩阵O的灰度对应赋予像素点R,得到膨胀图像,得到的膨胀图像即为去噪图像;
所述步骤(3)通过如下步骤进行:
3-1,定义一个滤波器Y,滤波器为t*t矩阵,t为奇数;
3-2,使滤波器Y遍历去噪图像,计算滤波器在每一位置处的中心像素点所在的去噪图像的灰度值以及中心像素点邻域内其它像素点的灰度值,并根据公式(Ⅰ)计算滤波器在每一位置处的中心像素点的边缘检测值Xz,z为滤波器Y遍历去噪图像时的标记,
f、g为像素点的矩阵序号,1≤f≤t,1≤g≤t,e为滤波器在每一位置处的像素点所在的去噪图像的灰度值;α为权重系数,与滤波器位置相对应;
3-3,将滤波器在每一位置处的中心像素点边缘检测值Xz与中心像素点邻域的其它像素点的灰度值相减,并判断差值的绝对值是否大于阈值Δ;
统计大于阈值的数量,如果数量超过判定滤波器所处位置的中心像素点对应的去噪图像的像素点位置为边缘点,并进行标记;
3-4,滤波器遍历完整个去噪图像,得到所有标记的边缘点,获得初步感兴趣区域;
所述t为3。
CN201811152642.8A 2018-09-29 2018-09-29 一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法 Pending CN109028231A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811152642.8A CN109028231A (zh) 2018-09-29 2018-09-29 一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811152642.8A CN109028231A (zh) 2018-09-29 2018-09-29 一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法

Publications (1)

Publication Number Publication Date
CN109028231A true CN109028231A (zh) 2018-12-18

Family

ID=64615473

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811152642.8A Pending CN109028231A (zh) 2018-09-29 2018-09-29 一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法

Country Status (1)

Country Link
CN (1) CN109028231A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109631112A (zh) * 2018-12-31 2019-04-16 佛山市云米电器科技有限公司 一种简易操作式烟灶一体机
TWI695957B (zh) * 2019-04-02 2020-06-11 喜特麗國際股份有限公司 排油煙機系統及其控制方法
WO2020181570A1 (zh) * 2019-03-08 2020-09-17 上海达显智能科技有限公司 一种智能除烟设备及其控制方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107514664A (zh) * 2017-09-03 2017-12-26 吴联凯 一种具有正压式烟雾检测装置的油烟机及其控制方法
CN107940532A (zh) * 2018-01-02 2018-04-20 成都易活动科技有限公司 一种基于手势控制的智能厨房系统
CN207280492U (zh) * 2017-09-14 2018-04-27 安徽瀚和智能科技有限公司 一种基于机器视觉的检测系统
CN108534196A (zh) * 2018-03-08 2018-09-14 佛山市云米电器科技有限公司 降噪系统与视觉检测系统联动的厨房设备及其联动方法
CN108564091A (zh) * 2018-03-08 2018-09-21 佛山市云米电器科技有限公司 目标区域弱边缘提取方法及油烟浓度检测与干扰排除方法
CN108571757A (zh) * 2017-03-08 2018-09-25 博西华电器(江苏)有限公司 吸油烟机的摄像装置及吸油烟机

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108571757A (zh) * 2017-03-08 2018-09-25 博西华电器(江苏)有限公司 吸油烟机的摄像装置及吸油烟机
CN107514664A (zh) * 2017-09-03 2017-12-26 吴联凯 一种具有正压式烟雾检测装置的油烟机及其控制方法
CN207280492U (zh) * 2017-09-14 2018-04-27 安徽瀚和智能科技有限公司 一种基于机器视觉的检测系统
CN107940532A (zh) * 2018-01-02 2018-04-20 成都易活动科技有限公司 一种基于手势控制的智能厨房系统
CN108534196A (zh) * 2018-03-08 2018-09-14 佛山市云米电器科技有限公司 降噪系统与视觉检测系统联动的厨房设备及其联动方法
CN108564091A (zh) * 2018-03-08 2018-09-21 佛山市云米电器科技有限公司 目标区域弱边缘提取方法及油烟浓度检测与干扰排除方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109631112A (zh) * 2018-12-31 2019-04-16 佛山市云米电器科技有限公司 一种简易操作式烟灶一体机
WO2020181570A1 (zh) * 2019-03-08 2020-09-17 上海达显智能科技有限公司 一种智能除烟设备及其控制方法
TWI695957B (zh) * 2019-04-02 2020-06-11 喜特麗國際股份有限公司 排油煙機系統及其控制方法

Similar Documents

Publication Publication Date Title
CN109028232A (zh) 一种带可移动视觉检测系统的油烟机及油烟浓度检测方法
CN109028223A (zh) 具手势控制视觉检测功能的油烟机及油烟浓度检测方法
CN109028230A (zh) 具手势控制视觉检测功能的炉具及油烟浓度检测方法
CN109190624A (zh) 基于图像处理的厨房油烟浓度检测方法
CN109084350A (zh) 一种具滤光功能视觉检测模块的油烟机及油烟浓度检测方法
CN105740945B (zh) 一种基于视频分析的人群计数方法
CN109447063A (zh) 一种基于图像处理的厨房油烟浓度检测方法
CN108563991A (zh) 厨房油烟浓度划分方法及油烟浓度检测与干扰排除方法
CN109028231A (zh) 一种基于视觉手势控制的烟灶一体机及油烟浓度检测方法
CN108564091A (zh) 目标区域弱边缘提取方法及油烟浓度检测与干扰排除方法
CN109028226A (zh) 基于双区域图像采集进行油烟浓度判断的油烟机
CN109028237A (zh) 基于双区域图像采集进行风速调节的油烟机
CN209013299U (zh) 具手势控制视觉检测功能的油烟机
CN106991418A (zh) 飞虫检测方法、装置及终端
CN109028169A (zh) 一种具有熄火视觉控制功能的炉具及油烟浓度检测方法
CN109389604A (zh) 一种厨房油烟图像检测干扰排除方法
CN209013293U (zh) 一种基于视觉手势控制的烟灶一体机
CN109028225A (zh) 一种带固定式视觉检测系统的油烟机及油烟浓度检测方法
CN109028224A (zh) 一种具光线自适应视觉功能的油烟机及油烟浓度检测方法
CN103456123B (zh) 一种基于流动和扩散特征的视频烟气探测方法
CN109344827A (zh) 一种带补光装置的油烟机及油烟浓度检测方法
CN111401213A (zh) 一种用于化学气体检测的火焰检测实验装置及方法
CN109373377A (zh) 一种具有固定式视觉检测系统的油烟机及油烟浓度检测方法
CN209101365U (zh) 一种具无人识别功能的烟灶一体机
CN209013295U (zh) 具手势控制视觉检测功能的炉具

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination