CN112435423B - 一种监控方法及装置 - Google Patents

一种监控方法及装置 Download PDF

Info

Publication number
CN112435423B
CN112435423B CN201910779022.5A CN201910779022A CN112435423B CN 112435423 B CN112435423 B CN 112435423B CN 201910779022 A CN201910779022 A CN 201910779022A CN 112435423 B CN112435423 B CN 112435423B
Authority
CN
China
Prior art keywords
footstep sound
audio
preset
footstep
video monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910779022.5A
Other languages
English (en)
Other versions
CN112435423A (zh
Inventor
古典
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201910779022.5A priority Critical patent/CN112435423B/zh
Publication of CN112435423A publication Critical patent/CN112435423A/zh
Application granted granted Critical
Publication of CN112435423B publication Critical patent/CN112435423B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19654—Details concerning communication with a camera
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/04—Segmentation; Word boundary detection
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/063—Training
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/24—Speech recognition using non-acoustical features
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Alarm Systems (AREA)

Abstract

本申请实施例提供了一种监控方法及装置，涉及计算机技术领域，该方法包括：电子设备可以获取音频采集组件采集到的音频数据，并检测音频数据，若从音频数据中检测到脚步声，则电子设备可以向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态。电子设备可以分析包含脚步声的音频片段，得到脚步声参数。若脚步声参数满足预设条件，则电子设备可以触发预警模式。采用本申请电子设备可以同时通过脚步声以及监控视频，实现监控目标位置中的安全隐患，进而实现提高安防系统监控目标位置时的效果。

Description

一种监控方法及装置
技术领域
本申请涉及计算机技术领域，特别是涉及一种监控方法及装置。
背景技术
安防系统主要用于维护公共安全，当发生紧急情况时，安防系统可以自动触发报警系统或者提醒用户发生紧急情况，为公共安全提供保障。
目前，安防系统主要以视频监控的方式实现监控环境中的安全隐患，监控摄像设备可以二十四小时实时获取场景图像，以实现二十四小时视频监控的效果。
然而，视频监控的方式仅依赖获取场景图像，实现监控目标场景，当监控摄像设备所处的目标场景光线不足或者目标场景处于夜间环境时，视频监控的效果将大打折扣，导致安防系统的安防效果不佳。
发明内容
本申请实施例的目的在于提供监控方法及装置，以提高电子设备监控附近环境时的安防效果。具体技术方案如下：
第一方面，提供了一种监控方法，所述方法应用于电子设备，所述方法包括：
获取音频采集组件采集到的音频数据；
检测所述音频数据，若从所述音频数据中检测到脚步声，则向视频监控组件发送激活指令，以使得所述视频监控组件中的目标摄像头切换至激活状态；
分析包含脚步声的音频片段，得到脚步声参数；
若所述脚步声参数满足预设条件，则触发预警模式。
可选的，在所述向视频监控组件发送激活指令之前，所述方法还包括：
若从所述音频数据中检测到脚步声，则确定采集到包含所述脚步声的音频片段的音频采集设备的位置信息；
所述向视频监控组件发送激活指令，包括：
向所述视频监控组件发送激活指令，所述激活指令包括所述位置信息，以使得所述视频监控组件中，与所述位置信息之间的距离小于预设距离的目标摄像头切换至激活状态。
可选的，所述方法还包括：
若在预设时间段内，未在预设范围内检测到脚步声，则向所述视频监控组件发送休眠指令，所述休眠指令包括用于标识所述预设范围的范围信息，以使得所述视频监控组件中，所述预设范围内的摄像头切换至休眠状态。
可选的，所述分析包含脚步声的音频片段，得到脚步声参数，包括：
将所述包含脚步声的音频片段输入脚步声分析模型，得到所述脚步声分析模型输出的脚步声参数，所述脚步声分析模型为基于预设训练集对深度学习模型进行训练得到的模型，所述预设训练集包括预先采集的包含脚步声的音频片段，以及音频片段对应的脚步声参数。
可选的，所述脚步声参数包括：步伐频率、步伐响度、步伐持续时间中的任意一项或多项，所述若所述脚步声参数满足预设条件，则触发预警模式，包括：
若所述脚步声满足以下一个或多个预设条件，则触发所述预警模式；
所述步伐频率大于预设的步伐频率阈值；
所述步伐响度大于预设的步伐响度阈值；
所述步伐持续时间大于预设的步伐持续时间阈值。
可选的，在所述触发预警模式之后，所述方法还包括：
向终端发送所述位置信息和所述目标摄像头实时拍摄的监控视频。
第二方面，提供了一种监控装置，所述装置应用于电子设备，所述装置包括：
获取模块，用于获取音频采集组件采集到的音频数据；
检测模块，用于检测所述音频数据；
发送模块，用于若所述检测模块从所述音频数据中检测到脚步声，则所述发送模块向视频监控组件发送激活指令，以使得所述视频监控组件中的目标摄像头切换至激活状态；
分析模块，用于分析包含脚步声的音频片段，得到脚步声参数；
触发模块，用于若所述脚步声参数满足预设条件，则触发预警模式。
可选的，所述装置还包括：确定模块；
所述确定模块，用于若所述检测模块从所述音频数据中检测到脚步声，则所述确定模块确定采集到包含所述脚步声的音频片段的音频采集设备的位置信息；
所述发送模块，用于向所述视频监控组件发送激活指令，所述激活指令包括所述位置信息，以使得所述视频监控组件中，与所述位置信息之间的距离小于预设距离的目标摄像头切换至激活状态。
可选的，所述发送模块，还用于若所述检测模块在预设时间段内，未在预设范围内检测到脚步声，则向所述视频监控组件发送休眠指令，所述休眠指令包括用于标识所述预设范围的范围信息，以使得所述视频监控组件中，所述预设范围内的摄像头切换至休眠状态。
可选的，所述分析模块，具体用于：
将所述包含脚步声的音频片段输入脚步声分析模型，得到所述脚步声分析模型输出的脚步声参数，所述脚步声分析模型为基于预设训练集对深度学习模型进行训练得到的模型，所述预设训练集包括预先采集的包含脚步声的音频片段，以及音频片段对应的脚步声参数。
可选的，所述触发模块，具体用于：
若所述脚步声满足以下一个或多个预设条件，则触发所述预警模式；
所述步伐频率大于预设的步伐频率阈值；
所述步伐响度大于预设的步伐响度阈值；
所述步伐持续时间大于预设的步伐持续时间阈值。
可选的，所述发送模块，还用于向终端发送所述位置信息和所述目标摄像头实时拍摄的监控视频。
第三方面，提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现第一方面所述的方法步骤。
第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现第一方面所述的方法步骤。
第五方面，提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述第一方面所述的方法。
本申请实施例提供的一种监控方法及装置，电子设备可以获取音频采集组件采集到的音频数据，并检测音频数据，若从音频数据中检测到脚步声，则电子设备可以向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态。电子设备可以分析包含脚步声的音频片段，得到脚步声参数。若脚步声参数满足预设条件，则电子设备可以触发预警模式。这样，电子设备可以同时通过脚步声以及监控视频，实现监控目标位置中的安全隐患，进而实现提高安防系统监控目标位置时的效果。
当然，实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种安防系统的示意图；
图2为本申请实施例提供的一种监控方法流程图；
图3为本申请实施例提供的一种监控方法流程图；
图4为本申请实施例提供的一种监控装置的结构示意图；
图5为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请实施例提供了一种监控方法，该方法应用于安防系统中的电子设备。如图1所示，安防系统中具体包括电子设备、音频采集组件、视频监控组件、电源组件和通信组件。
其中，音频采集组件包括多个麦克风，每个麦克风可以采集自身周围的音频数据，视频监控组件包括多个摄像头，每个摄像头可以拍摄自身监控范围内的画面，电源组件用于安防系统的供电，通信组件包括无线通信模块，通信组件可以将音频、日志文件等上传至服务器或者终端。
其中，电子设备可以包含脚步声检测模块、脚步声分析模块、主控模块和存储模块。其中，脚步声检测模块可以获取音频采集组件采集到的音频数据，检测音频数据中是否存在脚步声，并通过声源定位的方式，确定脚步声的声源位置。脚步声分析模块用于处理采集到的音频数据，通过频谱分析的方式，确定音频数据的音频特征，并根据音频数据的音频特征，确定该音频数据的相关参数，例如，脚步声的步频、步伐响度、步伐持续时间等信息。主控模块可以协调整个系统，存储模块可以存储音频数据和/或和音频数据的相关参数。
本申请实施例提供了一种安防系统部署的示例，具体示例可以为：在楼梯间场景中，每一楼层可以分别安装一个摄像头以及一个麦克风，每个楼层的摄像头可以拍摄对应楼层场景的画面，每个麦克风可以采集对应楼层场景中出现的音频。通信组件可以将摄像头拍摄的对应楼层的视频，或者麦克风采集的对应楼层的音频，上传至服务器或者终端。
下面将结合具体实施方式，对本申请实施例提供的一种监控方法进行详细的说明，如图2示，具体步骤如下：
步骤201、获取音频采集组件采集到的音频数据。
本申请实施例中，音频采集组件可以采集音频采集组件周围的音频数据，并将采集到的音频数据提供给电子设备。
可选地，音频采集组件采集到音频数据后，可对音频数据进行降噪或者去混响处理，以使得电子设备获取降噪或者去混响处理后的音频数据。
步骤202、检测音频数据，若从音频数据中检测到脚步声，则向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态。
本申请实施例中，电子设备获取音频采集组件采集和处理的音频数据后，电子设备中的脚步声检测模块可以通过频谱分析和声源定位等方法，检测音频数据中是否包含脚步声的音频数据，以及脚步声的声源位置。
其中，电子设备可以根据脚步声距离音频采集组件中音频采集部件的相对位置，确定脚步声的声源位置。在某些特殊需求下(例如：用户需要定位某大楼内行人的具体位置)，电子设备可以根据脚步声的声源位置，确定脚步声所属行人的具体位置。
若音频数据中包含脚步声，则证明该音频采集组件附近存在行人通过，电子设备的主控模块可以向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态。
终端可以为具有接收音频数据和视频数据，且能播放音频数据和视频数据的移动终端或者PC(英文：personal computer，中文：个人计算机)终端。
可选的，电子设备检测音频数据，并向视频监控组件发送激活指令的过程，具体可以包括：
步骤一、若从音频数据中检测到脚步声，则确定采集到包含脚步声的音频片段的音频采集设备的位置信息。
本申请实施例中，音频采集设备可以是音频采集组件中的麦克风，电子设备可以定位音频采集组件中的麦克风的位置。
步骤二、向视频监控组件发送激活指令，激活指令包括位置信息。
本申请实施例中，激活指令可以使得视频监控组件中，与位置信息之间的距离小于预设距离的目标摄像头切换至激活状态。
本申请实施例提供了两种电子设备向视频监控组件发送激活指令的方式，具体可以包括：
方式一、若电子设备从音频数据中检测到脚步声，则电子设备可以确定与音频采集设备的位置信息之间的距离小于预设距离的目标摄像头，并向视频监控组件发送用于指示激活该目标摄像头的激活指令。当视频监控组件接收到该激活指令后，可以激活该激活指令指示激活的目标摄像头。
方式二、若电子设备从音频数据中检测到脚步声，则电子设备可以向视频监控组件发送激活指令，激活指令中包括位置信息。当视频监控组件接收到该激活指令后，可以根据该激活指令中包含的位置信息，确定与该位置信息之间的距离小于预设距离的目标摄像头，并激活目标摄像头。
步骤203、分析包含脚步声的音频片段，得到脚步声参数。
本申请实施例中，脚步声参数可以包括：步伐频率、步伐响度、步伐持续时间中的任意一项或多项。
其中，步伐频率表示行人行走时踩击地面的频率，步伐响度表示行人行走时踩击地面声音的大小，步伐持续时间表示行人行走通过目标区域所花费的时间。
可选的，在楼梯间场景中，脚步声参数还可以包括上下楼状态，电子设备可以根据多个音频采集设备采集到的脚步声，以及该脚步声对应的步伐响度，确定该脚步声所属行人的上下楼状态。
可选地，电子设备还可以根据上下楼状态将部分摄像头切换至激活状态。例如，在楼梯间中，当音频检测设备检测到5层出现脚步声时，电子设备可以激活4层、5层和6层的摄像头，当脚步声分析模块分析出的该脚步声的步伐响度在5层逐渐减小，且在4层逐渐增加，则此时该脚步声对应的上下楼状态为下楼状态。电子设备可以在激活4层、5层和6层的摄像头后，若在本步骤中检测到该脚步声对应下楼状态，则可激活2层和3层的摄像头。
电子设备获取脚步声参数后，可以将获取的脚步声参数以及音频数据存储并上传至服务器，以使电子设备可以根据包含脚步声参数以及音频数据的训练集，对脚步声分析模型进行离线训练。
可选的，电子设备可以将包含脚步声的音频片段输入脚步声分析模型，得到脚步声分析模型输出的脚步声参数。
其中，脚步声分析模型为基于预设训练集对深度学习模型进行训练得到的模型，预设训练集包括预先采集的包含脚步声的音频片段，以及音频片段对应的脚步声参数。电子设备可以通过训练深度学习模型，以使深度学习模型更准确的分析包含脚步声的音频片段。在深度学习模型离线训练时，用户可以对训练集内的音频数据进行标注，得到较为准确的脚步声参数，并将该音频数据输入至深度学习模型中，将深度学习模型输出的预测的脚步声参数与较为准确的脚步声参数进行比较，利用损失函数对深度学习模型进行训练。
步骤204、若脚步声参数满足预设条件，则触发预警模式。
其中，预警模式为安防系统的一种模式，在预警模式下，用户可以通过终端观看发生突发情况位置的实时监控视频以及脚步声位置等信息。
本申请实施例提供的一种监控方法，电子设备可以获取音频采集组件采集到的音频数据，并检测音频数据，若从音频数据中检测到脚步声，则电子设备可以向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态。电子设备可以分析包含脚步声的音频片段，得到脚步声参数。若脚步声参数满足预设条件，则电子设备可以触发预警模式。这样，电子设备可以同时通过脚步声以及监控视频，实现监控目标位置中的安全隐患，进而实现提高安防系统监控目标位置时的效果。
可选的，若脚步声满足以下一个或多个预设条件，则电子设备可以触发预警模式：
条件一、步伐频率大于预设的步伐频率阈值。
本申请实施例中，若目标区域中的行人的步伐频率大于预设的步伐频率阈值，则表示目标区域中的行人在奔跑或者急促的行走(表示可能发生了突发情况)，电子设备则触发预警模式。
条件二、步伐响度大于预设的步伐响度阈值。
本申请实施例中，若目标区域中的行人的步伐响度大于预设的步伐响度阈值，则表示目标区域中的行人步伐很重(表示可能发生了突发情况)，电子设备则触发预警模式。
条件三、步伐持续时间大于预设的步伐持续时间阈值。
本申请实施例中，若目标区域中的行人的步伐持续时间大于预设的步伐持续时间阈值，则表示目标区域中长时间有行人通过(表示可能发生了突发情况)，电子设备则触发预警模式。
可选的，在触发预警模式之后，电子设备还可以通过以下两种方式解除预警模式：
方式一、当电子设备接收到终端发送的解除预警模式指令后，解除预警模式。
本申请实施例中，当电子设备处于预警模式中时，用户可以向终端输入解除预警模式指令，当终端接收到该指令后，终端可以向电子设备发送解除预警模式指令，当电子设备接收到解除预警模式指令后，电子设备可以解除预警模式。
方式二、在触发预警模式之后，若电子设备在预设的时间(比如30分钟)内未检测到脚步声，则电子设备解除预警模式。
可选的，在触发预警模式之后，电子设备还可以执行：向终端发送位置信息和目标摄像头实时拍摄的监控视频。
本申请实施例中，终端接收到位置信息和目标摄像头实时拍摄的监控视频后，终端可以通过终端的显示部件显示在显示屏中。当发生突发情况时，用户可以通过终端的显示屏，观看发生突发情况的具体位置，以及该具体位置的监控视频。
在另一种可实施的方案中，电子设备还可以向终端发送位置信息、目标摄像头实时拍摄的监控视频和目标音频采集设备实时采集的目标音频。
其中，终端接收到目标音频采集设备实时采集的目标音频后，用户既可以通过显示屏观看发生突发情况的具体位置，以及该具体位置的目标摄像头实时拍摄的监控视频，还可以通过终端的音频播放部件，收听该具体位置的实时音频。这样，用户可以更准确地了解具体情况。
可选的，若摄像头处于激活状态，且在预设时间内未检测到脚步声，则向视频监控组件发送休眠指令，以使得视频监控组件中的摄像头切换至休眠状态。
其中，摄像头处于激活状态时，摄像头会消耗部分电量，当目标区域没有任何情况发生时，摄像头会白白浪费消耗的部分电量。本申请实施例中，当目标区域没有任何情况发生时，摄像头会处于休眠状态，当音频采集组件采集到音频数据时(即代表目标区域中可能存在行人)，电子设备可以向视频监控组件发送激活指令。
如图3所示，本申请实施例还提供了一种监控的示例，具体示例包括以下步骤：
步骤301、获取音频采集组件采集到的音频数据。
步骤302、检测音频数据，判断音频数据中是否包含脚步声，若音频数据中包含脚步声，则执行步骤303，若音频数据中不包含脚步声，则执行步骤301。
步骤303、确定包含脚步声的音频片段的音频采集设备的位置信息。
步骤304、向视频监控组件发送激活指令。
步骤305、分析包含脚步声的音频片段，得到脚步声参数，存储脚步声参数并上传至服务器。
步骤306、判断脚步声参数中是否有至少一个参数超过预设阈值。若有至少一个参数超过预设阈值，则执行步骤307，若没有一个参数超过预设阈值，则执行步骤301。
步骤307、触发预警模式。
步骤308、向终端发送实时位置信息和目标摄像头实时拍摄的监控视频。
步骤309、判断是否接收到解除预警模式指令。若接收到解除预警模式指令，则执行步骤310，若未接收到解除预警模式指令，则执行步骤308。
步骤310、解除预警模式。
本申请实施例提供的一种监控方法，电子设备可以获取音频采集组件采集到的音频数据，并检测音频数据，若从音频数据中检测到脚步声，则电子设备可以向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态。电子设备可以分析包含脚步声的音频片段，得到脚步声参数。若脚步声参数满足预设条件，则电子设备可以触发预警模式。这样，电子设备可以同时通过脚步声以及监控视频，实现监控目标位置中的安全隐患，进而实现提高安防系统监控目标位置时的效果。
基于相同的技术构思，本申请实施例还提供了一种监控装置，如图4所示，该装置包括：获取模块401、检测模块402、发送模块403、分析模块404、触发模块405。
获取模块401，用于获取音频采集组件采集到的音频数据；
检测模块402，用于检测音频数据；
发送模块403，用于若检测模块从音频数据中检测到脚步声，则发送模块向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态；
分析模块404，用于分析包含脚步声的音频片段，得到脚步声参数；
触发模块405，用于若脚步声参数满足预设条件，则触发预警模式。
可选的，装置还包括：确定模块；
确定模块，用于若检测模块从音频数据中检测到脚步声，则确定模块确定采集到包含脚步声的音频片段的音频采集设备的位置信息；
发送模块403，用于向视频监控组件发送激活指令，激活指令包括位置信息，以使得视频监控组件中，与位置信息之间的距离小于预设距离的目标摄像头切换至激活状态。
可选的，发送模块403，还用于若检测模块在预设时间段内，未在预设范围内检测到脚步声，则向视频监控组件发送休眠指令，休眠指令包括用于标识预设范围的范围信息，以使得视频监控组件中，预设范围内的摄像头切换至休眠状态。
可选的，分析模块404，具体用于：
将包含脚步声的音频片段输入脚步声分析模型，得到脚步声分析模型输出的脚步声参数，脚步声分析模型为基于预设训练集对深度学习模型进行训练得到的模型，预设训练集包括预先采集的包含脚步声的音频片段，以及音频片段对应的脚步声参数。
可选的，触发模块405，具体用于：
若脚步声满足以下一个或多个预设条件，则触发预警模式；
步伐频率大于预设的步伐频率阈值；
步伐响度大于预设的步伐响度阈值；
步伐持续时间大于预设的步伐持续时间阈值。
可选的，发送模块403，还用于向终端发送位置信息和目标摄像头实时拍摄的监控视频。
本申请实施例提供的一种监控装置，电子设备可以获取音频采集组件采集到的音频数据，并检测音频数据，若从音频数据中检测到脚步声，则电子设备可以向视频监控组件发送激活指令，以使得视频监控组件中的目标摄像头切换至激活状态。电子设备可以分析包含脚步声的音频片段，得到脚步声参数。若脚步声参数满足预设条件，则电子设备可以触发预警模式。这样，电子设备可以同时通过脚步声以及监控视频，实现监控目标位置中的安全隐患，进而实现提高安防系统监控目标位置时的效果。
本申请实施例还提供了一种电子设备，如图5所示，包括处理器501、通信接口502、存储器503和通信总线504，其中，处理器501，通信接口502，存储器503通过通信总线504完成相互间的通信，
存储器503，用于存放计算机程序；
处理器501，用于执行存储器503上所存放的程序时，实现如下步骤：
获取音频采集组件采集到的音频数据；
检测所述音频数据，若从所述音频数据中检测到脚步声，则向视频监控组件发送激活指令，以使得所述视频监控组件中的目标摄像头切换至激活状态；
分析包含脚步声的音频片段，得到脚步声参数；
若所述脚步声参数满足预设条件，则触发预警模式。
需要说明的是，处理器501，用于执行存储器503上所存放的程序时，还用于实现上述方法实施例中描述的其他步骤，可参考上述方法实施例中的相关描述，此处不再赘述。
上述网络设备提到的通信总线可以是外设部件互连标准(英文：PeripheralComponent Interconnect，简称：PCI)总线或扩展工业标准结构(英文：Extended IndustryStandard Architecture，简称：EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述网络设备与其他设备之间的通信。
存储器可以包括随机存取存储器(英文：Random Access Memory，简称：RAM)，也可以包括非易失性存储器(英文：Non-Volatile Memory，简称：NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(英文：Central ProcessingUnit，简称：CPU)、网络处理器(英文：Network Processor，简称：NP)等；还可以是数字信号处理器(英文：Digital Signal Processing，简称：DSP)、专用集成电路(英文：ApplicationSpecific Integrated Circuit，简称：ASIC)、现场可编程门阵列(英文：Field-Programmable Gate Array，简称：FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
基于相同的技术构思，本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述监控方法步骤。
基于相同的技术构思，本申请实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述监控方法步骤。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的较佳实施例而已，并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本申请的保护范围内。

Claims (12)

1.一种监控方法，其特征在于，所述方法包括：
获取音频采集组件采集到的音频数据；
检测所述音频数据，若从所述音频数据中检测到脚步声，则确定采集到包含所述脚步声的音频片段的音频采集设备的位置信息；
向视频监控组件发送激活指令，所述激活指令包括所述位置信息，以使得所述视频监控组件中，与所述位置信息之间的距离小于预设距离的目标摄像头切换至激活状态；
分析包含脚步声的音频片段，得到脚步声参数，其中，所述脚步声参数包括：行人的上下楼状态；
根据所述行人的上下楼状态与所述音频采集设备的位置信息，向所述视频监控组件发送激活指令，以使得所述视频监控组件中部分摄像头切换至激活状态，所述部分摄像头为位于所述行人将要抵达的区域内的摄像头；
若所述脚步声参数满足预设条件，则触发预警模式。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
若在预设时间段内，未在预设范围内检测到脚步声，则向所述视频监控组件发送休眠指令，所述休眠指令包括用于标识所述预设范围的范围信息，以使得所述视频监控组件中，所述预设范围内的摄像头切换至休眠状态。
3.根据权利要求1所述的方法，其特征在于，所述分析包含脚步声的音频片段，得到脚步声参数，包括：
将所述包含脚步声的音频片段输入脚步声分析模型，得到所述脚步声分析模型输出的脚步声参数，所述脚步声分析模型为基于预设训练集对深度学习模型进行训练得到的模型，所述预设训练集包括预先采集的包含脚步声的音频片段，以及音频片段对应的脚步声参数。
4.根据权利要求1或3所述的方法，其特征在于，所述脚步声参数包括：步伐频率、步伐响度、步伐持续时间中的任意一项或多项，所述若所述脚步声参数满足预设条件，则触发预警模式，包括：
若所述脚步声满足以下一个或多个预设条件，则触发所述预警模式；
所述步伐频率大于预设的步伐频率阈值；
所述步伐响度大于预设的步伐响度阈值；
所述步伐持续时间大于预设的步伐持续时间阈值。
5.根据权利要求4所述的方法，其特征在于，在所述触发预警模式之后，所述方法还包括：
向终端发送所述位置信息和所述目标摄像头实时拍摄的监控视频。
6.一种监控装置，其特征在于，所述装置包括：
获取模块，用于获取音频采集组件采集到的音频数据；
检测模块，用于检测所述音频数据；
确定模块，用于若所述检测模块从所述音频数据中检测到脚步声，则所述确定模块确定采集到包含所述脚步声的音频片段的音频采集设备的位置信息；
发送模块，用于向视频监控组件发送激活指令，所述激活指令包括所述位置信息，以使得所述视频监控组件中，与所述位置信息之间的距离小于预设距离的目标摄像头切换至激活状态；
分析模块，用于分析包含脚步声的音频片段，得到脚步声参数，其中，所述脚步声参数包括：行人的上下楼状态；
触发模块，用于根据所述行人的上下楼状态与所述音频采集设备的位置信息，向所述视频监控组件发送激活指令，以使得所述视频监控组件中部分摄像头切换至激活状态，所述部分摄像头为位于所述行人将要抵达的区域内的摄像头；若所述脚步声参数满足预设条件，则触发预警模式。
7.根据权利要求6所述的装置，其特征在于，
所述发送模块，还用于若所述检测模块在预设时间段内，未在预设范围内检测到脚步声，则所述发送模块向所述视频监控组件发送休眠指令，所述休眠指令包括用于标识所述预设范围的范围信息，以使得所述视频监控组件中，所述预设范围内的摄像头切换至休眠状态。
8.根据权利要求6所述的装置，其特征在于，所述分析模块，具体用于：
将所述包含脚步声的音频片段输入脚步声分析模型，得到所述脚步声分析模型输出的脚步声参数，所述脚步声分析模型为基于预设训练集对深度学习模型进行训练得到的模型，所述预设训练集包括预先采集的包含脚步声的音频片段，以及音频片段对应的脚步声参数。
9.根据权利要求6或8所述的装置，其特征在于，所述触发模块，具体用于：
若所述脚步声满足以下一个或多个预设条件，则触发所述预警模式；
步伐频率大于预设的步伐频率阈值；
步伐响度大于预设的步伐响度阈值；
步伐持续时间大于预设的步伐持续时间阈值。
10.根据权利要求9所述的装置，其特征在于，所述发送模块，还用于向终端发送所述位置信息和所述目标摄像头实时拍摄的监控视频。
11.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1-5任一所述的方法步骤。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-5任一所述的方法步骤。
CN201910779022.5A 2019-08-22 2019-08-22 一种监控方法及装置 Active CN112435423B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910779022.5A CN112435423B (zh) 2019-08-22 2019-08-22 一种监控方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910779022.5A CN112435423B (zh) 2019-08-22 2019-08-22 一种监控方法及装置

Publications (2)

Publication Number Publication Date
CN112435423A CN112435423A (zh) 2021-03-02
CN112435423B true CN112435423B (zh) 2022-06-03

Family

ID=74690209

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910779022.5A Active CN112435423B (zh) 2019-08-22 2019-08-22 一种监控方法及装置

Country Status (1)

Country Link
CN (1) CN112435423B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101393660A (zh) * 2008-10-15 2009-03-25 中山大学 一种基于脚步声识别的智能门禁系统
CN106251572A (zh) * 2016-08-26 2016-12-21 深圳大学 基于振动检测的智能家居监控方法及系统
CN108513101A (zh) * 2018-04-14 2018-09-07 钱文浩 基于脚步识别的现场枪体分析系统
CN109447199A (zh) * 2018-10-16 2019-03-08 山东大学 一种基于脚步信息的多模态罪犯识别方法及系统
CN109672853A (zh) * 2018-09-25 2019-04-23 深圳壹账通智能科技有限公司 基于视频监控的预警方法、装置、设备及计算机存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104635639A (zh) * 2013-11-12 2015-05-20 张建 基于光纤传感的楼宇智能监测系统
CN104490398B (zh) * 2014-12-11 2017-12-22 江门市新会区六度软件有限公司 一种新型脚步运动监测系统
CN106908060A (zh) * 2017-02-15 2017-06-30 东南大学 一种基于mems惯性传感器的高精度室内定位方法
CN207158536U (zh) * 2017-04-25 2018-03-30 福建省沃讯网络科技有限公司 基于物联网的智能安防系统
CN109635691A (zh) * 2018-11-30 2019-04-16 泸州与德科技有限公司 一种控制方法、装置、设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101393660A (zh) * 2008-10-15 2009-03-25 中山大学 一种基于脚步声识别的智能门禁系统
CN106251572A (zh) * 2016-08-26 2016-12-21 深圳大学 基于振动检测的智能家居监控方法及系统
CN108513101A (zh) * 2018-04-14 2018-09-07 钱文浩 基于脚步识别的现场枪体分析系统
CN109672853A (zh) * 2018-09-25 2019-04-23 深圳壹账通智能科技有限公司 基于视频监控的预警方法、装置、设备及计算机存储介质
CN109447199A (zh) * 2018-10-16 2019-03-08 山东大学 一种基于脚步信息的多模态罪犯识别方法及系统

Also Published As

Publication number Publication date
CN112435423A (zh) 2021-03-02

Similar Documents

Publication Publication Date Title
US10665072B1 (en) Sensor to characterize the behavior of a visitor or a notable event
US11580847B2 (en) Processing alarm signals
US10424175B2 (en) Motion detection system based on user feedback
US9721457B2 (en) Global positioning system equipped with hazard detector and a system for providing hazard alerts thereby
JP2022529300A (ja) 違反イベント検出方法及び装置、電子デバイス並びに記憶媒体
US20170269901A1 (en) Privacy protection in collective feedforward
US20140167960A1 (en) Detecting Defective Shopping Carts
US10582167B2 (en) Triggering video surveillance using embedded voice, speech, or sound recognition
CN104994335A (zh) 一种报警的方法及终端
CN105100758A (zh) 用于安防监控的方法、设备以及摄像头
KR101321447B1 (ko) 네트워크를 통한 현장 모니터링 방법, 및 이에 사용되는 관리 서버
CN111653067A (zh) 智能家居设备及基于音频的报警方法
CN112435423B (zh) 一种监控方法及装置
CN112153324A (zh) 一种监控视频显示方法、装置及系统
JP6314517B2 (ja) 状態通知方法、装置、およびプログラム
WO2021131024A1 (ja) 処理装置、処理方法及びプログラム
CN112949442A (zh) 一种异常事件预识别方法、装置、电子设备及监控系统
CN114915574A (zh) 一种通过声音自动检测智能门铃响应延迟的方法和系统
KR20190023544A (ko) IoT 센서와 연계된 사운드 기반의 디지털 영상저장 장치 및 방법
CN116913320B (zh) 事故检测方法、装置及服务器
CN114519925A (zh) 一种噪声报警方法、装置、设备、系统及介质
US11941320B2 (en) Electronic monitoring system having modified audio output
CN109819210A (zh) 一种安全监控的方法及装置
JP2015087446A (ja) 情報処理装置
AU2014100095B4 (en) A monitoring system and method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant