CN113965362A - 一种基于WiFi信号感知的物联网家居智能防护系统及方法 - Google Patents

一种基于WiFi信号感知的物联网家居智能防护系统及方法 Download PDF

Info

Publication number
CN113965362A
CN113965362A CN202111183088.1A CN202111183088A CN113965362A CN 113965362 A CN113965362 A CN 113965362A CN 202111183088 A CN202111183088 A CN 202111183088A CN 113965362 A CN113965362 A CN 113965362A
Authority
CN
China
Prior art keywords
wifi
csi
data
behaviors
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111183088.1A
Other languages
English (en)
Other versions
CN113965362B (zh
Inventor
王鹏飞
赵祎安
侯晓璐
侯志翀
蒋浩然
林驰
张强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian University of Technology
Original Assignee
Dalian University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian University of Technology filed Critical Dalian University of Technology
Priority to CN202111183088.1A priority Critical patent/CN113965362B/zh
Publication of CN113965362A publication Critical patent/CN113965362A/zh
Application granted granted Critical
Publication of CN113965362B publication Critical patent/CN113965362B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
    • H04L63/1408—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic by monitoring network traffic
    • H04L63/1425—Traffic logging, e.g. anomaly detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/04—Processing captured monitoring data, e.g. for logfile generation
    • H04L43/045—Processing captured monitoring data, e.g. for logfile generation for graphical visualisation of monitoring data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Biomedical Technology (AREA)
  • Evolutionary Computation (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • Biophysics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Medical Informatics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Alarm Systems (AREA)

Abstract

本发明提供了一种基于WiFi信号感知的物联网家居智能防护系统及方法，属于入侵检测技术领域。本发明利用家庭中常见的WiFi信号，对其中的CSI进行采样，通过训练改进后的深度学习算法模型实现对物联网家居环境中人类目标的异常行为进行识别，配合特有的异常行为制定策略建立一个跨层的智能防护系统，实现对异常行为的识别和中止。本发明设计了一种低成本、高精度、隐私性好的智能家居智能防护系统，解决了智能家居系统不够人性化的问题，鼓励参与者使用智能家居。

Description

一种基于WiFi信号感知的物联网家居智能防护系统及方法
技术领域
本发明属于入侵检测技术领域，涉及一种基于WiFi信号感知的物联网家居智能防护系统及方法，本发明利用家庭中常见的WiFi信号，对其中的CSI(Channel StateInformation信道状态信息)进行采样，通过训练改进后的深度学习算法模型实现对物联网家居环境中人类目标的异常行为进行识别，配合特有的异常行为制定策略建立一个跨层的智能防护系统实现对异常行为的识别和中止。
背景技术
随着移动通信技术、互联网技术以及人工智能应用的不断发展，智能家居成为家居系统发展的方向和趋势所在。然而，人们在享受到智能便捷服务的同时，也应该思考这些物联网产品背后存在的信息安全隐患。由于智能家居中包含大量物联网设备需要接入到互联网进行数据交换，因此存在很大的安全风险，由此引发的问题也遍及世界各地。例如，远程攻击者可能会劫持应用程序，通过互联网播放音乐来干扰用户。针对这些问题，各国都在积极探索如何提高智能家居的安全性，如何有效保护用户隐私，如何抵御外界黑客对用户的入侵以及如何提高室内入侵检测系统的检测精度和保密性。目前国内外已经出现了许多采用不同设备(例如摄像机和红外设备)的入侵检测系统，但是，这些检测系统存在隐私性差和专用设备部署成本较高等缺点。本发明针对上述问题，以常见的WiFi信号为研究对象寻求入侵检测方法。WiFi信号覆盖广泛、是一种普适信号，然而目前对于WiFi信号的应用仅限于互联网末端的数据通信，并没有挖掘其潜在的应用价值。WiFi-CSI信号记录其在每条传输路径上的衰减因子，其中蕴含了包括散射、距离衰减等信息。经多径传播的WiFi-CSI信号携带了大量传播路径上的环境信息，因此从WiFi-CSI中可以挖掘出信号中隐含的环境信息。本发明在此基础上设计并实现了低成本、高精度、隐私性好的物联网家居智能防护系统。
发明内容
本发明解决的问题是如何运用物理层的WiFi-CSI数据，通过深度学习算法模型实现对异常行为的评判与识别。本发明以无源感知为研究内容，实现了一种基于深度学习的高精度识别系统，结合WiFi-CSI信号处理、深度学习等技术，最终为深度学习技术在无源感知异常行为的评判与识别领域的应用提供了理论依据和实践经验。
本发明基于WiFi-CSI信号感知环境行为原理，利用无源感知技术和普通无线路由器实现环境感知，通过分析WiFi-CSI数据，实现被动式人员行为检测，包括识别人的位置，姿势动作以及其他环境特征，建立一个考虑用户行为的跨层智能防护系统。本发明利用深度学习算法将初始数据的“低层”特征表示转化为“高层”抽象特征，从而利用标签信息发现隐藏在数据中的规律，进而完成复杂的分类学习任务，达到准确识别智能家居环境中人类异常行为的目标。本发明设计的异常行为监测系统为克服现有人类目标行为信息识别过程中隐私保护性差、安全性低及其带来的高成本花销问题，提供了一种基于WiFi信号感知的异常行为的评判和识别方法。
本发明的技术方案：
一种基于WiFi信号感知的物联网家居智能防护系统，包括WiFi信号发送设备、WiFi信号接收机、GUI(Graphical User Interface，图形用户界面)控制端和数据库。
所述的WiFi信号发送设备和WiFi信号接收机均搭载无线网卡，二者相隔置于房间内；WiFi信号发送设备用于发送带有CSI信息的WiFi信号，WiFi信号接收机用于获取环境中的WiFi-CSI信息并保存。
所述的GUI控制端为桌面应用端，GUI控制端首先对WiFi-CSI信号接收机捕获的数据进行预处理，然后通过训练好的残差网络ResNet50对异常行为进行评判和识别，并与数据库相通信，将监测行为及预警数据和应对措施保存至数据库用于记录监测日志，并对用户的异常行为进行实时监控和预警。
一种基于WiFi信号感知和深度学习的异常行为监测方法，具体步骤如下：
步骤一：WiFi信号发送设备负责发送WiFi-CSI数据，WiFi信号接收机收集空环境下WiFi-CSI数据。
步骤二：异常行为监测任务的参与者们Wn＝{w1,w2,...,wN}进入监测环境中，并根据监测任务需求做出相应的动作，对WiFi信道状态信息造成扰动，此时WiFi信号接收机将收集到的WiFi-CSI数据保存。
步骤三：监测者对步骤二收集到的WiFi-CSI数据进行数据预处理，然后利用深度学习算法建立模型——残差网络ResNet50，将预处理得到的数据输入残差网络ResNet50进行训练，并在训练完成后保存网络参数。
步骤四：监测者利用GUI控制端发出一系列监测任务需求，此时，WiFi信号发送设备发送WiFi-CSI数据给WiFi信号接收机，GUI控制端后台对WiFi-CSI信息的数据预处理并利用训练好的残差网络ResNet50识别当前行为，根据后台预设的异常行为列表判断该行为是否异常，同时输出检测到的行为信息及应对措施并存入数据库备份。
所述步骤三中的WiFi-CSI信息的数据预处理，具体步骤如下：
(1)空间变换与相位转换。为使最终得到的WiFi-CSI数据可以通过相位来区分不同的信道状态，因此在预处理阶段，首先根据相位变换原则，对收集的WiFi-CSI数据中的原始随机相位进行数学化处理，以消除原始随机相位的偏移量，得到具有明显规律性的相位信息。
(2)低通滤波与去噪。选用离散小波变换(Discrete Wavelet Transform-DWT)，保留时域特征和频域特征的同时，压缩提取出的波形数据量，降低直接用提取的按键波形形状作为按键的特征来建立分类器的过程中会付出的计算代价。对滤波后的信号进行PCA(principal component analysis，主成分分析)处理，达到降维去噪的效果。本发明采用小波变换阀值算法，去噪过程为：先通过合理的小波基和分解层数将原始信号分解，再对分解结果进行阀值处理，最后是小波重构，得到处理后的信号。
(3)数据分割与特征提取。对去噪后的WiFi-CSI数据进行分割，截取不同行为的数据，提取出各行为的数据特征，最终生成稀疏矩阵。
(4)将数据集划分为训练集、验证集和预测集。将训练集和验证集送入残差网络ResNet50进行训练并用预测集检测网络训练效果。
所述步骤三中的深度学习算法模型的构建步骤如下：
(1)构建基本的ResNet残差块。残差块总共有四种类型，四种残差块中3×3卷积层包含的卷积核数量依次增加，分别为64、128、256和512。其中，第一种残差块内部采用两个相同通道数的卷积层，使输入特征矩阵与输出矩阵直接相加再送入激活函数层；而其他三种残差块的设计略有不同，主要体现在残差连接的方式上，输入特征矩阵并没有像第一个残差块那样直接加到输出矩阵，而是经下采样处理之后再与输出矩阵进行相加送入激活函数层。
(2)设计ResNet50的内部结构。ResNet50将上述四种残差块的数量分别设置为3、4、6、3，输入特征矩阵首先经过一个卷积层并进行归一化处理，然后输入残差块集合按顺序进行计算最后经过全接连层进行维度转换输出分类结果。
(3)添加激活函数层、池化层、批量标准化层、激活函数层以及末尾的全连接层以保证残差网络的高效训练和正确输出。
(4)对全连接层的输出结果利用Softmax分类器进行特征分类，计算每种分类的概率大小，并根据概率大小(选取概率最大者)输出预测标签。
(5)初始化残差网络，选择Nadam优化器并设置学习率等参数，利用收集到的数据集对残差网络ResNet50进行训练，并保存训练完成后的网络参数用于识别用户行为。
所述步骤四中的GUI控制端开发流程如下：
(1)首先根据需求设计交互界面外观，确定需要实现的功能。本发明的异常行为监测系统包括两个界面：监测界面和日志界面。监测界面大体分为三部分，分别是WiFi-CSI信号可视化动态图像区域、室内真实环境监控区域以及监测到的行为展示列表。其中，WiFi-CSI信号可视化动态图像用来观察整个监测过程WiFi-CSI信号是否正常变化，室内真实环境监控区域用来评估系统是否根据采集到的WiFi-CSI信号正确识别出人类行为，行为展示列表用来展示监测到的行为以及是否属于异常行为。此外，此界面还设有触发警报按钮，当监测到异常行为后，系统不仅会给出应对措施，必要时还可以触发警报。日志界面需要实现根据给定时间范围展示此范围内所有的行为信息及处理措施。
(2)根据设计完成的界面编写代码实现各部分功能。本发明的GUI控制端利用PyQt5实现，并使用多线程管理等技术加快响应速度，提高用户体验。
(3)配置本地数据库。GUI控制端需要将监测到的行为信息和相应的应对措施存入数据库，通过在日志界面设置查询时间跨度，控制端后台会从数据库中筛选出监测时间位于时间跨度内的所有行为信息输出到界面展示。
(4)进行软件测试。经测试，GUI控制端可以根据采集到的WiFi-CSI数据利用后台的残差网络ResNet50成功识别出各种行为，并将行为信息和应对措施输出展示。
本发明的有益效果：
相比其他人类目标行为识别的方法，本发明利用WiFi感知技术来监测人体活动信息，即保障智能家居的安全，也可以保证系统的检测精度和人类目标特定行为识别的准确率，解决了传统监测系统隐私性差和需要专用设备的缺点。本发明通过开发一个异常行为监测系统界面实现在终端控制智能防护系统的行为，并通过WiFi感知技术将用户的行为与状态列入安全系统的考虑范围，降低使用门槛，不仅策略灵活，还适应高度动态的智能家居系统；不仅考虑应用程序的既定约束策略，还将用户实时行为纳入考虑范畴，综合考虑应用程序和用户行为这两方面的状态来制定适当的安全策略，解决智能家居系统不够人性化的问题，更好的鼓励参与者使用智能家居。
附图说明
图1是本发明的异常行为监测流程场景图。
图2是本发明的异常行为监测流程时序图。
图3是WiFi信号的采集及预处理流程示意图。
图4是深度学习异常行为识别算法流程图。
图5是残差网络ResNet50的网络结构图。
图6是残差网络ResNet50中包含的残差块结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，下面将结合附图，对本发明的具体实施方式进行详细的描述。
图1为本发明的异常行为监测流程场景图，本发明涉及的智能防护系统由WiFi信号发送设备、WiFi信号接收机、参与者、监测者、GUI控制端和数据库构成，监测者通过GUI控制端进行控制，参与者产生一系列动作，此时WiFi信号接收机获取WiFi-CSI数据。这些数据经过预处理后，再送入残差网络ResNet50进行识别，根据后台预设的异常行为列表判断该行为是否异常，同时输出检测到的行为信息及应对措施并存入数据库备份。
图2为本发明的异常行为监测流程时序图，本发明提供一种基于WiFi信号感知的异常行为监测流程，具体包括以下步骤：
步骤一：WiFi信号发送设备负责发送WiFi-CSI数据，WiFi信号接收机收集空环境下WiFi-CSI数据。
步骤二：异常行为监测任务的参与者们Wn＝{w1,w2,...,wN}进入监测环境中，并根据监测任务需求做出相应的动作，对WiFi信道状态信息造成扰动，此时WiFi信号接收机将收集到的WiFi-CSI数据保存。
步骤三：监测者对步骤二收集到的WiFi-CSI数据进行数据预处理，然后利用深度学习算法建立模型——残差网络ResNet50，将预处理得到的数据输入残差网络进行训练，并在训练完成后保存网络参数。
步骤四：监测者利用GUI控制端发出一系列监测任务需求，此时，WiFi信号发送设备发送WiFi-CSI数据给WiFi信号接收机，GUI控制端后台对WiFi-CSI信息的数据预处理并利用训练好的残差网络ResNet50识别当前行为，根据后台预设的异常行为列表判断该行为是否异常，同时输出检测到的行为信息及应对措施并存入数据库备份。
图3为WiFi-CSI数据的采集及预处理流程示意图，其中，数据预处理具体步骤如下：
(1)空间变换与相位转换。为使最终得到的WiFi-CSI数据可以通过相位来区分不同的信道状态，因此在预处理阶段，首先根据相位变换原则，对收集的WiFi-CSI数据中的原始随机相位进行数学化处理，以消除原始随机相位的偏移量，得到具有明显规律性的相位信息。
(2)低通滤波与去噪。选用离散小波变换(Discrete Wavelet Transform-DWT)，保留时域特征和频域特征的同时，压缩提取出的波形数据量，降低直接用提取的按键波形形状作为按键的特征来建立分类器的过程中会付出的计算代价。对滤波后的信号进行PCA(principal component analysis，主成分分析)处理，达到降维去噪的效果。本实施例采用小波变换阀值算法，去噪过程为：先通过合理的小波基和分解层数将原始信号分解，在对分解结果进行阀值处理，最后是小波重构，得到处理后的信号。
(3)数据分割与特征提取。对去噪后的WiFi-CSI数据进行分割，截取不同行为的数据，提取出各行为的数据特征，最终生成稀疏矩阵。
(4)将数据集划分为训练集、验证集和预测集。将训练集和验证集送入残差网络ResNet50进行训练并用预测集检测网络训练效果。
在详解本发明深度学习算法模型的具体建立步骤前，对问题进行以下描述：
首先，通过实验收集了智能家居环境中各类异常行为数据送入神经网络进行训练与预测，分析神经网络对CSI信号的识别能力，根据实验结果不断调整神经网络的结构及参数，进而提高本发明的可行性。最终本发明确定采用深度残差网络ResNet50作为主要结构，并对参数进行优化提高识别准确率。利用服务器将收集的各类异常行为数据送入神经网络进行训练和预测，将训练完成的网络参数保存至文件中。
图4为本发明采用的异常行为识别算法流程图，采用了残差网络ResNet50进行识别，残差网络ResNet50构建过程具体包括以下步骤：
(1)构建基本的ResNet残差块。残差块总共有四种类型，四种残差块中3×3卷积层包含的卷积核数量依次增加，分别为64、128、256和512。其中，第一种残差块内部采用两个相同通道数的卷积层，使输入特征矩阵与输出矩阵直接相加再送入激活函数层；而其他三种残差块的设计略有不同，主要体现在残差连接的方式上，输入特征矩阵并没有像第一个残差块那样直接加到输出矩阵，而是经下采样处理之后再与输出矩阵进行相加送入激活函数层。
(2)设计ResNet50的内部结构。ResNet50将上述四种残差块的数量分别设置为3、4、6、3，输入特征矩阵首先经过一个卷积层并进行归一化处理，然后输入残差块集合按顺序进行计算最后经过全接连层进行维度转换输出分类结果。
(3)添加激活函数层、池化层、批量标准化层、激活函数层以及末尾的全连接层以保证残差网络的高效训练和正确输出。本实施例将全连接层节点数设置为6，即给出6类异常行为，分别是：门锁未关、参与者不在床上但闹钟未关、婴儿位于窗边、参与者处于办公状态但音响未关、电视机处于打开状态但长时间无人观看以及参与者坐立不安。
(4)对全连接层的输出结果利用Softmax分类器进行特征分类，计算每种分类的概率大小，并根据概率大小(选取概率最大者)输出预测标签。
(5)初始化残差网络，选择Nadam优化器并设置学习率为0.005，利用收集到的数据集对残差网络ResNet50进行训练，并保存训练完成后的网络参数用于识别用户行为。经训练，残差网络ResNet50可以识别出上述六类异常行为。
图5为残差网络ResNet50的网络结构图。进一步解释了上述残差网络ResNet50构建步骤中涉及到的各残差块的参数。
图6为残差网络ResNet50中包含的残差块结构图。进一步解释了上述残差网络ResNet50构建步骤中涉及到的各残差块的内部结构。
本发明基于上述方法开发了一个用于智能家居异常行为监测的GUI控制端，可以实现监测过程中监控画面展示和WiFi-CSI信号可视化，GUI控制端后台利用训练完成的ResNet50网络实现异常行为的识别，并将识别的行为信息和具体应对措施输出展示。GUI控制端具体开发流程如下：
(1)首先根据需求设计交互界面外观，确定需要实现的功能。本发明的异常行为监测系统包括两个界面：监测界面和日志界面。监测界面大体分为三部分，分别是WiFi-CSI信号可视化动态图像区域、室内真实环境监控区域以及监测到的行为展示列表。其中，WiFi-CSI信号可视化动态图像用来观察整个监测过程WiFi-CSI信号是否正常变化，室内真实环境监控区域用来评估系统是否根据采集到的WiFi-CSI信号正确识别出人类行为，行为展示列表用来展示监测到的行为以及是否属于异常行为。此外，此界面还设有触发警报按钮，当监测到异常行为后，系统不仅会给出应对措施，必要时还可以触发警报。日志界面需要实现根据给定时间范围展示此范围内所有的行为信息及处理措施。
(2)根据设计完成的界面编写代码实现各部分功能。本发明的GUI控制端利用PyQt5实现，并使用多线程管理等技术加快响应速度，提高用户体验。
(3)配置本地数据库。GUI控制端需要将监测到的行为信息和相应的应对措施存入数据库，通过在日志界面设置查询时间跨度，控制端后台会从数据库中筛选出监测时间位于时间跨度内的所有行为信息输出到界面展示。
(4)进行软件测试。经测试，GUI控制端可以根据采集到的WiFi-CSI数据利用后台的残差网络ResNet50成功识别出各种行为，并将行为信息和应对措施输出展示。

Claims (6)

1.一种基于WiFi信号感知的物联网家居智能防护系统，其特征在于，该系统包括WiFi信号发送设备、WiFi信号接收机、GUI控制端和数据库；
所述的WiFi信号发送设备和WiFi信号接收机均搭载无线网卡，二者相隔置于房间内；WiFi信号发送设备用于发送带有CSI信息的WiFi信号，WiFi信号接收机用于获取环境中的WiFi-CSI信息并保存；
所述的GUI控制端为桌面应用端，GUI控制端对WiFi-CSI信号接收机捕获的数据进行预处理，然后通过训练好的残差网络ResNet50对异常行为进行评判和识别，并与数据库相通信，将监测行为及预警数据和应对措施保存至数据库用于记录监测日志，并对用户的异常行为进行实时监控和预警。
2.一种采用如权利要求1所述的物联网家居智能防护系统进行异常行为监测的方法，其特征在于，该方法包括以下步骤：
步骤一：WiFi信号发送设备负责发送WiFi-CSI数据，WiFi信号接收机收集空环境下WiFi-CSI数据；
步骤二：异常行为监测任务的参与者们Wn＝{w1,w2,...,wN}进入监测环境中，并根据监测任务需求做出相应的动作，对WiFi信道状态信息造成扰动，此时WiFi信号接收机将收集到的WiFi-CSI数据保存；
步骤三：监测者对步骤二收集到的WiFi-CSI数据进行数据预处理，然后利用深度学习算法建立残差网络ResNet50，将预处理得到的数据输入残差网络ResNet50进行训练，并在训练完成后保存网络参数；
步骤四：监测者利用GUI控制端发出一系列监测任务需求，此时，WiFi信号发送设备发送WiFi-CSI数据给WiFi信号接收机，GUI控制端后台对WiFi-CSI信息的数据预处理并利用训练好的残差网络ResNet50识别当前行为，根据后台预设的异常行为列表判断该行为是否异常，同时输出检测到的行为信息及应对措施并存入数据库备份。
3.根据权利要求2所述的方法，其特征在于，所述步骤三中，WiFi-CSI数据的数据预处理过程如下：
(1)空间变换与相位转换
首先根据相位变换原则，对收集的WiFi-CSI数据中的原始随机相位进行数学化处理，以消除原始随机相位的偏移量，得到具有规律性的相位信息；
(2)低通滤波与去噪
选用离散小波变换，保留时域特征和频域特征的同时，压缩提取出的波形数据量，降低直接用提取的按键波形形状作为按键的特征来建立分类器的过程中会付出的计算代价；对滤波后的信号进行主成分分析处理，达到降维去噪的效果；采用小波变换阀值算法，去噪过程为：先通过小波基和分解层数将原始信号分解，再对分解结果进行阀值处理，最后进行小波重构，得到处理后的信号；
(3)数据分割与特征提取
对去噪后的WiFi-CSI数据进行分割，截取不同行为的数据，提取出各行为的数据特征，最终生成稀疏矩阵；
(4)将数据集划分为训练集、验证集和预测集
将训练集和验证集送入残差网络ResNet50进行训练并用预测集检测网络训练效果。
4.根据权利要求2或3所述的方法，其特征在于，所述步骤三中，深度学习算法模型的构建步骤如下：
(1)构建基本的ResNet残差块
残差块总共有四种类型，四种残差块中3×3卷积层包含的卷积核数量依次增加，分别为64、128、256和512；其中，第一种残差块内部采用两个相同通道数的卷积层，使输入特征矩阵与输出矩阵直接相加再送入激活函数层；而其他三种残差块的输入特征矩阵经下采样处理之后再与输出矩阵进行相加送入激活函数层；
(2)设计ResNet50的内部结构
ResNet50将上述四种残差块的数量分别设置为3、4、6、3，输入特征矩阵首先经过一个卷积层并进行归一化处理，然后输入残差块集合按顺序进行计算，最后经过全接连层进行维度转换输出分类结果；
(3)添加激活函数层、池化层、批量标准化层、激活函数层以及末尾的全连接层以保证残差网络的高效训练和正确输出；
(4)对全连接层的输出结果利用Softmax分类器进行特征分类，计算每种分类的概率大小，并选取概率最大者输出预测标签；
(5)初始化残差网络，选择Nadam优化器并设置学习率，利用收集到的数据集对残差网络ResNet50进行训练，并保存训练完成后的网络参数用于识别用户行为。
5.根据权利要求2或3所述的方法，其特征在于，所述步骤四中，GUI控制端开发流程如下：
(1)根据需求设计交互界面外观，确定需要实现的功能
GUI控制端包括两个界面：监测界面和日志界面；
所述监测界面分为WiFi-CSI信号可视化动态图像区域、室内真实环境监控区域和监测到的行为展示列表；其中，WiFi-CSI信号可视化动态图像用来观察整个监测过程WiFi-CSI信号是否正常变化；室内真实环境监控区域用来评估系统是否根据采集到的WiFi-CSI信号正确识别出人类行为；行为展示列表用来展示监测到的行为以及是否属于异常行为；此外，此界面还设有触发警报按钮，当监测到异常行为后，系统不仅会给出应对措施，必要时还可以触发警报；
所述日志界面需要实现根据给定时间范围展示此范围内所有的行为信息及处理措施；
(2)利用PyQt5实现GUI控制端上述界面的功能；
(3)配置本地数据库
GUI控制端需要将监测到的行为信息和相应的应对措施存入数据库，通过在日志界面设置查询时间跨度，控制端后台会从数据库中筛选出监测时间位于时间跨度内的所有行为信息输出到界面展示；
(4)软件测试
经测试，GUI控制端可以根据采集到的WiFi-CSI数据利用后台的残差网络ResNet50成功识别出各种行为，并将行为信息和应对措施输出展示。
6.根据权利要求4所述的方法，其特征在于，所述步骤四中，GUI控制端开发流程如下：
(1)根据需求设计交互界面外观，确定需要实现的功能
GUI控制端包括两个界面：监测界面和日志界面；
所述监测界面分为WiFi-CSI信号可视化动态图像区域、室内真实环境监控区域和监测到的行为展示列表；其中，WiFi-CSI信号可视化动态图像用来观察整个监测过程WiFi-CSI信号是否正常变化；室内真实环境监控区域用来评估系统是否根据采集到的WiFi-CSI信号正确识别出人类行为；行为展示列表用来展示监测到的行为以及是否属于异常行为；此外，此界面还设有触发警报按钮，当监测到异常行为后，系统不仅会给出应对措施，必要时还可以触发警报；
所述日志界面需要实现根据给定时间范围展示此范围内所有的行为信息及处理措施；
(2)利用PyQt5实现GUI控制端上述界面的功能；
(3)配置本地数据库
GUI控制端需要将监测到的行为信息和相应的应对措施存入数据库，通过在日志界面设置查询时间跨度，控制端后台会从数据库中筛选出监测时间位于时间跨度内的所有行为信息输出到界面展示；
(4)软件测试
经测试，GUI控制端可以根据采集到的WiFi-CSI数据利用后台的残差网络ResNet50成功识别出各种行为，并将行为信息和应对措施输出展示。
CN202111183088.1A 2021-10-11 2021-10-11 一种基于WiFi信号感知的物联网家居智能防护系统及方法 Active CN113965362B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111183088.1A CN113965362B (zh) 2021-10-11 2021-10-11 一种基于WiFi信号感知的物联网家居智能防护系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111183088.1A CN113965362B (zh) 2021-10-11 2021-10-11 一种基于WiFi信号感知的物联网家居智能防护系统及方法

Publications (2)

Publication Number Publication Date
CN113965362A true CN113965362A (zh) 2022-01-21
CN113965362B CN113965362B (zh) 2022-08-09

Family

ID=79464039

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111183088.1A Active CN113965362B (zh) 2021-10-11 2021-10-11 一种基于WiFi信号感知的物联网家居智能防护系统及方法

Country Status (1)

Country Link
CN (1) CN113965362B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114781431A (zh) * 2022-03-21 2022-07-22 大连理工大学 基于跨模态迁移的人体行为数据标注及识别系统与方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108901021A (zh) * 2018-05-31 2018-11-27 大连理工大学 一种基于无线网络信道状态信息的深度学习身份识别系统及方法
US20190014488A1 (en) * 2017-07-06 2019-01-10 Futurewei Technologies, Inc. System and method for deep learning and wireless network optimization using deep learning
CN111460891A (zh) * 2020-03-01 2020-07-28 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) 一种面向自动驾驶的车路协同行人重识别方法和系统
CN111597877A (zh) * 2020-04-02 2020-08-28 浙江工业大学 一种基于无线信号的跌倒检测方法
CN113015093A (zh) * 2021-01-29 2021-06-22 辽宁大学 一种基于三维深度残差神经网络的室内无线定位方法
CN113033654A (zh) * 2021-03-23 2021-06-25 云南大学 基于WiFi信道状态信息的室内入侵检测方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190014488A1 (en) * 2017-07-06 2019-01-10 Futurewei Technologies, Inc. System and method for deep learning and wireless network optimization using deep learning
CN108901021A (zh) * 2018-05-31 2018-11-27 大连理工大学 一种基于无线网络信道状态信息的深度学习身份识别系统及方法
CN111460891A (zh) * 2020-03-01 2020-07-28 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) 一种面向自动驾驶的车路协同行人重识别方法和系统
CN111597877A (zh) * 2020-04-02 2020-08-28 浙江工业大学 一种基于无线信号的跌倒检测方法
CN113015093A (zh) * 2021-01-29 2021-06-22 辽宁大学 一种基于三维深度残差神经网络的室内无线定位方法
CN113033654A (zh) * 2021-03-23 2021-06-25 云南大学 基于WiFi信道状态信息的室内入侵检测方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
李古月等: "基于设备与信道特征的物理层安全方法", 《密码学报》 *
田增山等: "基于多天线FMCW雷达的人体行为识别方法", 《重庆邮电大学学报(自然科学版)》 *
肖玲等: "基于WiFi信号的人体动作识别系统", 《北京邮电大学学报》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114781431A (zh) * 2022-03-21 2022-07-22 大连理工大学 基于跨模态迁移的人体行为数据标注及识别系统与方法

Also Published As

Publication number Publication date
CN113965362B (zh) 2022-08-09

Similar Documents

Publication Publication Date Title
US7617167B2 (en) Machine vision system for enterprise management
CN110428522A (zh) 一种智慧新城的智能安防系统
CN103839346B (zh) 一种智能门窗防入侵装置以及系统、智能门禁系统
CN109154976A (zh) 通过机器学习训练对象分类器的系统和方法
KR102396888B1 (ko) 실시간 스마트 소방 화재 감지 및 모니터링 시스템
CN112149962B (zh) 一种施工事故致因行为的风险定量评估方法及系统
US10165228B2 (en) Sensor event assessor training and integration
CN109815904A (zh) 一种基于卷积神经网络的火灾识别方法
CN110717461A (zh) 一种疲劳状态识别方法、装置和设备
CN113965362B (zh) 一种基于WiFi信号感知的物联网家居智能防护系统及方法
CN111798356B (zh) 一种基于大数据的轨道交通客流异常模式识别方法
Wang et al. Online fault-tolerant dynamic event region detection in sensor networks via trust model
CN110022466A (zh) 一种基于智慧大数据的视频分析平台及其控制方法
CN101316371A (zh) 火焰侦测方法及装置
CN101790717B (zh) 用于企业管理的机器视觉系统
CN109871456B (zh) 一种看守所人员关系分析方法、装置和电子设备
CN117274881A (zh) 基于一致性正则化和分布对齐的半监督视频火灾检测方法
CN105451235A (zh) 基于背景更新的无线传感器网络入侵检测方法
CN115909144A (zh) 一种基于对抗学习的监控视频异常检测方法及系统
CN116248346A (zh) 面向智慧城市的cps网络安全态势感知建立方法和系统
CN112601054B (zh) 摄像画面的采集方法及装置、存储介质、电子设备
CN117648632B (zh) 光纤振动异常识别方法、装置、设备及计算机程序产品
CN118298363B (zh) 基于轨迹分析的家中人员往来监测与预警方法及系统
Cai et al. Interactive visualization of network anomalous events
CN118658230B (zh) 物联网一卡通平台的动态权限管理与访问控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant