CN108259848A - 一种识别装置及监控设备 - Google Patents

一种识别装置及监控设备 Download PDF

Info

Publication number
CN108259848A
CN108259848A CN201810299192.9A CN201810299192A CN108259848A CN 108259848 A CN108259848 A CN 108259848A CN 201810299192 A CN201810299192 A CN 201810299192A CN 108259848 A CN108259848 A CN 108259848A
Authority
CN
China
Prior art keywords
described image
information
main control
control chip
result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810299192.9A
Other languages
English (en)
Inventor
程赟
来先家
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WUHAN LEADER TECHNOLOGY Co Ltd
Original Assignee
WUHAN LEADER TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WUHAN LEADER TECHNOLOGY Co Ltd filed Critical WUHAN LEADER TECHNOLOGY Co Ltd
Priority to CN201810299192.9A priority Critical patent/CN108259848A/zh
Publication of CN108259848A publication Critical patent/CN108259848A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Alarm Systems (AREA)

Abstract

本发明实施例提出一种识别装置及监控设备，涉及电子控制技术领域。该识别装置应用于监控设备，监控设备与一监控终端通信连接，包括光学传感器、声学传感器、主控芯片及通信模块，光学传感器、声学传感器及通信模块均与主控芯片电连接；光学传感器用于采集图像信息，声学传感器用于采集语音信息；主控芯片用于对图像信息和语音信息进行处理以得到图像处理结果和语音处理结果；主控芯片还用于依据图像处理结果及语音处理结果判断是否有异常情况，有异常情况时，通过通信模块向监控终端发送提示信息。该识别装置应用在监控设备，实现了在监控设备上判断监控区域是否有异常情况发生的功能，无需人工监测，进而降低了人工监控成本。

Description

一种识别装置及监控设备
技术领域
本发明涉及电子控制技术领域，具体而言，涉及一种识别装置及监控设备。
背景技术
现有监控区域中的监控设备只是通过摄像头将对应的视音频数据捕获，编码压缩后，通过传输网络送入管理云端。管理云端再解码相关的视音频数据，以传输至CPU服务器进行音视频数据的处理，并通过显示器呈现给管理人员。为了发现监控区域中出现老人、婴儿或病人跌倒、哭喊或抽搐等异常行为，或者出现偷窃或入侵等非法行为，管理人员需要时刻对监视着音视频，识别对应的情况，之后才能采取对应的措施。需要管理人员全天候的对音视频进行监控以发现异常情况，人工监控成本高，且人工值守往往会出现疏忽，对异常情况的监控的准确率不高。
发明内容
本发明的目的在于提供一种识别装置，该识别装置具有判断监控区域是否有异常情况发生的功能，进而降低了人工监控成本。
本发明的另一目的在于提供一种监控设备，该监控设备具有判断监控区域是否有异常情况发生的功能，进而降低了人工监控成本。
为了实现上述目的，本发明实施例采用的技术方案如下：
第一方面，本发明实施例提供了一种识别装置，应用于监控设备，所述监控设备与一监控终端通信连接，包括光学传感器、声学传感器、主控芯片及通信模块，所述光学传感器、所述声学传感器及所述通信模块均与所述主控芯片电连接；
所述光学传感器用于采集图像信息，并将所述图像信息输出至所述主控芯片；
所述声学传感器用于采集语音信息，并将所述语音信息输出至所述主控芯片；
所述主控芯片用于对所述图像信息进行处理以得到图像处理结果，以及对所述语音信息进行处理以得到语音处理结果；
所述主控芯片还用于依据所述图像处理结果及所述语音处理结果判断是否有异常情况，在有异常情况时，通过所述通信模块向所述监控终端发送对应的提示信息及附加图像信息。
进一步地，所述主控芯片包括图像处理单元、语音处理单元及异常分析单元，所述图像处理单元与所述光学传感器、所述异常分析单元电连接，所述语音处理单元与所述声学传感器、所述异常分析单元电连接；
所述图像处理单元用于对所述图像信息进行处理以得到图像处理结果，并将所述图像处理结果发送至所述异常分析单元；
所述语音处理单元用于对所述语音信息进行处理以得到语音处理结果，并将所述语音处理结果发送至所述异常分析单元；
所述异常分析单元用于依据所述图像处理结果及所述语音处理结果判断是否有异常情况，在有异常情况时，通过所述通信模块向所述监控终端发送对应的提示信息及附加图像信息。
进一步地，所述图像处理单元包括图像预处理模块及图像识别模块，所述图像预处理模块与所述光学传感器电连接，用于对所述图像信息进行预处理，得到预处理图像信息；
所述图像识别模块用于识别出所述预处理图像信息中的人体姿态，并根据所述人体姿态得到所述图像处理结果。
进一步地，所述图像识别模块用于检测所述预处理图像信息中的所有运动目标，将每个所述运动目标与预设的人形模板信息进行匹配，提取出所述运动目标中的人体目标，并判断所述人体目标的姿态，从而识别出所述人体姿态。
进一步地，所述装置还包括第一存储器，所述第一存储器与所述图像预处理模块、所述图像识别模块均电连接；
所述第一存储器用于缓存所述预处理图像信息，所述图像识别模块用于从所述第一存储器读取所述预处理图像信息。
进一步地，所述语音处理单元包括语音预处理模块及语音识别模块，所述语音预处理模块与所述声学传感器电连接，用于对所述语音信息进行预处理，得到预处理语音信息；
所述语音识别模块用于提取出所述预处理语音信息中的人体语音信息，并根据所述人体语音信息得到所述语音处理结果。
进一步地，所述异常分析单元用于当所述图像处理结果及所述语音处理结果均为有异常情况时，向所述监控终端发送第一提示信息及附加图像信息；
所述异常分析单元还用于当所述图像处理结果或所述语音处理结果为有异常情况时，向所述监控终端发送第二提示信息及附加图像信息。
进一步地，所述装置还包括电源，所述电源均与所述光学传感器、所述声学传感器、所述主控芯片及所述通信模块电连接，用于为所述光学传感器、所述声学传感器、所述主控芯片及所述通信模块提供工作所需电压。
进一步地，所述装置还包括第二存储器，所述第二存储器与所述主控芯片电连接；
所述第二存储器用于存储用户信息及参数信息。
第二方面，本发明实施例还提供了一种监控设备，所述监控设备包括如第一方面中任一所述的识别装置。
本发明实施例提供的一种识别装置及监控设备，通过主控芯片对光学传感器采集的图像信息和声学传感器采集的语音信息的处理，进而判断是否有异常情况，在有异常情况时，通过通信模块向监控终端发送对应的提示信息及附加图像信息，避免了管理人员需时刻坚守在监控终端来监视是否有异常情况发生，降低了人工监控成本。且因为主控芯片的处理不会出现异常情况的遗漏，极大的提高了监控的准确率。
为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本发明实施例提供的一种监控设备的应用环境图；
图2示出了本发明实施例提供的一种识别装置的结构框图；
图3示出了本发明实施例提供的主控芯片的结构框图；
图4示出了本发明实施例提供的图像处理单元的结构框图；
图5示出了本发明实施例提供的语音处理单元的结构框图。
图标：1-监控设备；10-识别装置；11-光学传感器；12-声学传感器；13-主控芯片；131-图像处理单元；1311-图像预处理模块；1312-图像识别模块；132-语音处理单元；1321-语音预处理模块；1322-语音识别模块；133-异常分析单元；134-传输单元；14-第一存储器；15-第二存储器；16-电源；17-通信模块；2-监控终端。
具体实施方式
下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。同时，在本发明的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
如图1所示，为本发明实施例提供的监控设备1的应用环境图，所述监控设备1与监控终端2通信连接，所述监控设备1用于根据采集的图像信息和语音信息识别监控区域内的异常情况，并根据异常情况向监控终端2发送提示信息及附加图像信息，同时还向监控终端2发送相应的监控录音录像进行显示与保存。
如图2所示，为本发明实施例提供的识别装置10的结构框图，所述识别装置10应用于监控设备1，所述识别装置10包括光学传感器11、声学传感器12、主控芯片13、第一存储器14、第二存储器15、电源16及通信模块17，所述主控芯片13分别与所述光学传感器11、声学传感器12、第一存储器14、第二存储器15、电源16及通信模块17电连接，所述通信模块17与一监控终端2通信连接，所述电源16还与所述光学传感器11、声学传感器12、第一存储器14、第二存储器15及所述通信模块17电连接。所述主控芯片13、光学传感器11、声学传感器12、第一存储器14、第二存储器15、电源16及通信模块17均集成在一块印制线路板(PrintedCircuit Board，PCB)上，使得识别装置10集成度更高，体积更小，更方便安装与维护。
所述光学传感器11用于采集图像信息，并将所述图像信息输出至所述主控芯片13。在本实施例中，该光学传感器11可以采用互补金属氧化物半导体(ComplementaryMetal-Oxide Semiconductor，CMOS)传感器。
所述声学传感器12用于采集语音信息，并将所述语音信息输出至所述主控芯片13。
所述主控芯片13用于对所述图像信息进行处理以得到图像处理结果，以及对所述语音信息进行处理以得到语音处理结果，并依据所述图像处理结果及所述语音处理结果判断是否有异常情况，在有异常情况时，控制所述通信模块17向所述监控终端2发送对应的提示信息及附加图像信息。
在本实施例中，所述主控芯片13是一种由多个CMOS与非门组成的逻辑电路，例如，可以是现场可编程逻辑门阵列(Field－Programmable Gate Array，FPGA)或专用集成电路(Application Specific Integrated Circuit，ASIC)，由于所述逻辑电路为并行流水线模式，故比串行运算的CPU架构的处理速度更快，效率更高。
如图3所示，该主控芯片13包括图像处理单元131、语音处理单元132、异常分析单元133及传输单元134，所述图像处理单元131分别与所述光学传感器11、所述异常分析单元133和所述传输单元134电连接，所述语音处理单元132分别与所述声学传感器12、所述异常分析单元133和所述传输单元134电连接，所述异常分析单元133与所述传输单元134连接。
其中，所述图像处理单元131用于对所述图像信息进行处理以得到图像处理结果，并将所述图像处理结果发送至所述异常分析单元133。可以理解，该图像处理单元131为多个CMOS与非门组成的逻辑电路单元。
如图4所示，该图像处理单元131包括图像预处理模块1311及图像识别模块1312，所述图像预处理模块1311分别与所述光学传感器11、所述第一存储器14和所述传输单元134电连接，所述图像识别模块1312分别与所述异常分析单元133和所述第一存储器14电连接。
所述图像预处理模块1311用于对所述图像信息进行预处理，得到预处理图像信息，所述图像预处理模块1311还用于对所述图像信息进行格式转换处理，得到实时图像信息。在本实施例中，该预处理包括但不限于边缘检测法、特征提取、图像增强、灰度化及二值化等操作，以消除所述图像信息中的无关信息(例如，背景信息)，同时对所述预处理图像信息的颜色及亮度等进行增强。该格式转换处理包括但不限于raw-rgb转换操作，以将raw格式的图像信息转换为rgb格式的实时图像信息。
所述第一存储器14用于缓存所述预处理图像信息和所述实时图像信息，所述图像识别模块1312用于从所述第一存储器14读取所述预处理图像信息和实时图像信息，并识别出所述预处理图像信息中的人体姿态，并根据所述人体姿态得到所述图像处理结果。
所述图像识别模块1312具体用于检测所述预处理图像信息中的所有运动目标，将每个所述运动目标与预设的人形模板信息进行匹配，提取出所述运动目标中的人体目标，并判断所述人体目标的姿态，从而识别出所述人体姿态。
例如，所述图像识别模块1312可先采用尺度不变特征变换(Scale-invariantfeature transform，SIFT)算法或加速稳健特征(Speeded Up Robust Features，SURF)算法将当前图像与前一帧图像进行对比以检测该预处理图像信息中存在变化的部分，从而获取运动目标；将经过运动检测的预处理图像信息进行滤波、灰度化、轮廓提取等操作后，分割出预处理图像信息中各个独立的人形轮廓，并将所述人形轮廓分别保存为单独的轮廓模板，将所述轮廓模板与预设的人形模板信息进行匹配，若所述轮廓模板与预设的人形模板信息匹配成功，则表明所述轮廓模板中的轮廓信息为人的轮廓信息，从而提取出所述运动目标中的人体目标，若所述轮廓模板与预设的人形轮廓模板匹配失败，则表明所述轮廓模板中的轮廓信息不是人的轮廓信息，可能为动物、建筑物或车辆的轮廓信息；最后，根据当前人体目标与上一帧人体目标进行人体目标的姿态识别，判断人体目标处于行走、奔跑、跌倒等状态，即得到所述图像处理结果。因为人在行走、奔跑、跌倒、抽搐或偷窃时，所展现的人体姿态是不同的，故根据人体姿态可以判断出人的具体行为。当检测到老人跌倒、病人抽搐、偷窃或非法入侵等异常行为时，图像处理结果则表示有异常情况产生；当检测到人们正常行走时，则图像处理结果表示无异常情况产生。
可以理解，所述图像预处理模块1311及所述图像识别模块1312均为多个CMOS与非门组成的逻辑电路单元。
所述语音处理单元132用于对所述语音信息进行处理以得到语音处理结果，并将所述语音处理结果发送至所述异常分析单元133。可以理解，所述语音处理单元132为多个CMOS与非门组成的逻辑电路单元。
如图5所示，该语音处理单元132包括语音预处理模块1321及语音识别模块1322，所述语音预处理模块1321分别与所述声学传感器12、所述第一存储器14和传输单元134电连接，所述语音识别模块1322分别与所述异常分析单元133和所述第一存储器14电连接。
所述语音预处理模块1321用于对所述语音信息进行预处理，得到预处理语音信息。
在本实施例中，对语音信息进行预处理是指根据汉语发音的特点，利用短时平均幅度和短时平均过零数检测语音信号的起始端，并截取其后的连续语音信号，将所述语音信息中无声音产生的语音信息滤除，保留有声音产生的语音信息，以得到预处理语音信息。
在本实施例中，所述第一存储器14还用于缓存所述预处理语音信息，所述语音识别模块1322用于从所述第一存储器14读取所述预处理语音信息，并提取出所述预处理语音信息中的人体语音信息，并根据所述人体语音信息得到所述语音处理结果。
在本实施例中，所述语音识别模块1322根据该预处理语音信息进行特征向量提取，以提取预处理语音信息中的人声频谱。例如，通过对所述预处理语音信息进行中通滤波，去除高频与低频的噪声，并保留人体语音信息。
在本实施例中，语音识别模块1322根据提取的所述人体语音信息进行识别，得到所述语音处理结果。例如，由于声学传感器12监测的通常是突发情况，需要识别的语音信号通常较为短促，如“啊！”、“救命！”、“小偷！”等，因此本实施例中采用动态时间规整算法来对孤立词进行语音识别。当检测到的人体语音信息为短促的语音信号时，则得到的语音处理结果为有异常情况产生；当检测到的人体语音信息不是短促的语音信号时，则得到的语音处理结果为无异常情况产生。
可以理解，上述的语音预处理模块1321及语音识别模块1322均为多个CMOS与非门组成的逻辑电路单元。
所述异常分析单元133用于依据所述图像处理结果及所述语音处理结果判断是否有异常情况，在有异常情况时，产生提示信息并传输至所述传输单元134，同时，还根据所述提示信息得到附加图像信息并传输至所述传输单元134，其中，所述附加图像信息是指在有异常情况时，产生所述图像处理结果的预处理图像信息，所述传输单元134通过所述通信模块17向所述监控终端2发送对应的提示信息及附加图像信息。
在本实施例中，所述异常分析单元133用于当所述图像处理结果及所述语音处理结果均为有异常情况时，产生第一提示信息并传输至所述传输单元134，同时，还根据所述第一提示信息得到附加图像信息并传输至所述传输单元134，所述传输单元134通过所述通信模块17向所述监控终端2发送第一提示信息及附加图像信息；当所述图像处理结果或所述语音处理结果为有异常情况时，产生第二提示信息并传输至所述传输单元134，同时，还根据所述第二提示信息得到附加图像信息并传输至所述传输单元134，所述传输单元134通过所述通信模块17向所述监控终端2发送第二提示信息及附加图像信息；当所述图像处理结果和所述语音处理结果均无异常情况时，则无提示信息和附加图像信息通过所述通信模块17向所述监控终端2发送。
因此，在本申请中，异常分析单元133根据图像处理结果及语音处理结果二者至少其一便可进行异常情况的判断，也即是说，图像处理结果及语音处理结果既可以作为独立的判断依据，也可以相互结合，共同作为判断依据以供异常分析单元133分析。例如，当图像处理结果表示有人摔倒，同时语音识别检测到“啊！”，则确定有人发生摔倒，产生第一提示信息并传输至所述传输单元134，同时，还将有人摔倒的附加图像信息传输至所述传输单元134，所述传输单元134通过所述通信模块17向监控终端2发送第一提示信息和附加图像信息。
可以理解，所述异常分析单元133为多个CMOS与非门组成的逻辑电路单元。
所述传输单元134用于将所述实时图像信息、预处理语音信息、所述提示信息和所述附加图像信息传输至所述通信模块17，所述传输单元134通过所述通信模块17向所述监控终端2发送对应的提示信息、附加图像信息和监控录音录像。可以理解，所述传输单元134为多个CMOS与非门组成的逻辑电路单元。
在本实施例中，所述第一存储器14可采用双倍速率同步动态随机存储器(DoubleData Rate，DDR)，DDR存储器通过DDR接口与主控芯片13进行数据传输。具体地，所述第一存储器14用于存储主控芯片13将所述图像信息和所述语音信息进行预处理得到的预处理图像信息和预处理语音信息，同时还用于储存主控芯片13将所述图像信息进行格式转换处理得到的实时图像信息。DDR接口对第一存储器14中存储的预处理图像信息、预处理语音信息和实时图像信息进行打包处理，以使得第一存储器14和主控芯片13之间能够进行数据传输。
在本实施例中，所述第二存储器15采用FLASH存储器(Flash Memory，FLASH)或电可擦可编程只读存储器(Electrically Erasable Programmable read only memory，EEPROM)。所述第二存储器15用于存储用户信息及参数信息，其中，所述用户信息可包括生产厂商信息和ID号；生产厂商信息用于表示所述识别装置10的生产厂商的身份标识；ID号用于防止盗版的识别装置10的使用，主控芯片13上电进行工作时，首先与第二存储器15中的ID号进行匹配，匹配成功后则对监视区域的异常情况进行识别。第二存储器15存储的参数信息包括所述光学传感器11、主控芯片13以及其他的参数信息，其他参数信息可以为识别装置10的安装位置信息，也可以是室内信息或室外信息等；光学传感器11的参数信息可以为曝光参数，主控芯片13参数信息为处理图像信息和语音信息的参数，实际上，第二存储器15存储的参数信息可根据不同应用场景设置不同参数以适应不同场景环境，提高识别装置10的稳定性以及正确率。
在本实施例中，所述电源16用于为所述光学传感器11、所述声学传感器12、所述主控芯片13、所述第一存储器14、所述第二存储器15及所述通信模块17提供工作所需电压。
在本实施例中，所述通信模块17用于将所述传输单元134传输的提示信息和附加图像信息传输至所述监控终端2，还用于将传输单元134传输的实时图像信息和预处理语音信息进行压缩以得到监控录音录像，并将所述监控录音录像发送至所述监控终端2显示与保存。应理解，在本申请中，无论异常分析单元133有没有检测到异常情况，监控设备1都会控制所述传输单元134向所述通信模块17传送实时图像信息和预处理语音信息，所述通信模块17则向监控终端2发送监控录音录像，以便在监控终端2实时显示。
在本实施例中，所述通信模块17包括通信芯片和通信接口，所述通信芯片分别与所述传输单元134和所述通信接口电连接，所述通信接口与所述监控终端2通信连接。
所述通信芯片用于将所述提示信息和附加图像信息通过所述通信接口传输至所述监控终端2，所述通信芯片还用于将所述实时图像信息和预处理语音信息进行压缩以得到监控录音录像，并通过所述通信接口将所述监控录音录像发送至所述监控终端2显示与保存。所述通信芯片可采用数字信号处理技术(Digital Signal Processing，DSP)芯片，所述DSP芯片可采用TI公司达芬奇系列的芯片。
所述通信接口用于将所述提示信息、附加图像信息和所述监控录音录像发送至所述监控终端2，所述通信接口可采用网络接口、无线局域网(WIreless-Fidelity，WIFI)接口、紫蜂协议(ZigBee)接口或通用串行总线(Universal Serial Bus，USB)接口。
在本实施例中，所述监控终端2可包括显示器和告警器，所述显示器和所述告警器均通过通信接口与所述通信芯片通信连接。所述显示器用于显示并保存经过所述通信芯片进行压缩以得到的监控录音录像，所述显示器还用于显示所述通信模块17传输的附加图像信息。所述告警器用于根据所述通信芯片传送的提示信息发出告警信息；若所述提示信息为第一提示信息时，所述告警器发出第一告警信息，同时，所述显示器上显示附加图像信息；若所述提示信息为第二提示信息时，所述告警器发出第二告警信息，同时，所述显示器上显示附加图像信息；若无提示信息产生，所述告警器则无告警信息产生，同时，所述显示器上无附加图像信息显示；其中，第一告警信息和第二告警信息可设置为特定的光提示信息和语音提示信息，即所述第一告警信息可设置为红色光和短促声音，所述第二告警信息可设置为绿色光和平缓声音。
综上所述，本发明实施例所提供的识别装置及监控设备，该识别装置设置在监控设备上，先通过光学传感器和声学传感器分别采集图像信息和语音信息，然后再由所述主控芯片的图像处理单元和语音处理单元分别对所述图像信息和语音信息进行处理，以分别得到图像处理结果和语音处理结果，所述主控芯片的异常分析单元根据所述图像处理结果和语音处理结果判断是否有异常情况，在有异常情况时，产生提示信息和附加图像信息并传输至所述传输单元，所述传输单元通过所述通信模块向所述监控终端发送对应的提示信息和附加图像信息。管理人员则根据提示信息的提醒以及附加图像信息的显示来对异常情况进行判断和处理，避免了需时刻坚守在监控终端来监视是否有异常情况发生，减少了人工监控成本，且通过主控芯片对图像信息和语音信息的处理，来判断是否有异常情况的产生，不会出现异常情况的遗漏，极大的提高了监控的准确率。同时，所述传输单元还接收经过所述图像处理单元格式转换处理的实时图像信息，以及经过语音处理单元预处理的预处理语音信息，并传输至所述通信模块，所述通信模块对所述实时图像信息和预处理语音信息进行压缩以得到监控录音录像，并发送至所述监控终端进行显示与保存。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

Claims (10)

1.一种识别装置，应用于监控设备，所述监控设备与一监控终端通信连接，其特征在于，包括光学传感器、声学传感器、主控芯片及通信模块，所述光学传感器、所述声学传感器及所述通信模块均与所述主控芯片电连接；
所述光学传感器用于采集图像信息，并将所述图像信息输出至所述主控芯片；
所述声学传感器用于采集语音信息，并将所述语音信息输出至所述主控芯片；
所述主控芯片用于对所述图像信息进行处理以得到图像处理结果，以及对所述语音信息进行处理以得到语音处理结果；
所述主控芯片还用于依据所述图像处理结果及所述语音处理结果判断是否有异常情况，在有异常情况时，通过所述通信模块向所述监控终端发送对应的提示信息及附加图像信息。
2.如权利要求1所述的识别装置，其特征在于，所述主控芯片包括图像处理单元、语音处理单元及异常分析单元，所述图像处理单元分别与所述光学传感器和所述异常分析单元电连接，所述语音处理单元分别与所述声学传感器和所述异常分析单元电连接；
所述图像处理单元用于对所述图像信息进行处理以得到图像处理结果，并将所述图像处理结果发送至所述异常分析单元；
所述语音处理单元用于对所述语音信息进行处理以得到语音处理结果，并将所述语音处理结果发送至所述异常分析单元；
所述异常分析单元用于依据所述图像处理结果及所述语音处理结果判断是否有异常情况，在有异常情况时，通过所述通信模块向所述监控终端发送对应的提示信息及附加图像信息。
3.如权利要求2所述的识别装置，其特征在于，所述图像处理单元包括图像预处理模块及图像识别模块，所述图像预处理模块与所述光学传感器电连接，用于对所述图像信息进行预处理，得到预处理图像信息；
所述图像识别模块用于识别出所述预处理图像信息中的人体姿态，并根据所述人体姿态得到所述图像处理结果。
4.如权利要求3所述的识别装置，其特征在于，所述图像识别模块用于检测所述预处理图像信息中的所有运动目标，将每个所述运动目标与预设的人形模板信息进行匹配，提取出所述运动目标中的人体目标，并判断所述人体目标的姿态，从而识别出所述人体姿态。
5.如权利要求3所述的识别装置，其特征在于，所述装置还包括第一存储器，所述第一存储器与所述图像预处理模块、所述图像识别模块均电连接；
所述第一存储器用于缓存所述预处理图像信息，所述图像识别模块用于从所述第一存储器读取所述预处理图像信息。
6.如权利要求2所述的识别装置，其特征在于，所述语音处理单元包括语音预处理模块及语音识别模块，所述语音预处理模块与所述声学传感器电连接，用于对所述语音信息进行预处理，得到预处理语音信息；
所述语音识别模块用于提取出所述预处理语音信息中的人体语音信息，并根据所述人体语音信息得到所述语音处理结果。
7.如权利要求2所述的识别装置，其特征在于，所述异常分析单元用于当所述图像处理结果及所述语音处理结果均为有异常情况时，向所述监控终端发送第一提示信息及附加图像信息；
所述异常分析单元还用于当所述图像处理结果或所述语音处理结果为有异常情况时，向所述监控终端发送第二提示信息及附加图像信息。
8.如权利要求1所述的识别装置，其特征在于，所述装置还包括电源，所述电源均与所述光学传感器、所述声学传感器、所述主控芯片及所述通信模块电连接，用于为所述光学传感器、所述声学传感器、所述主控芯片及所述通信模块提供工作所需电压。
9.如权利要求1所述的识别装置，其特征在于，所述装置还包括第二存储器，所述第二存储器与所述主控芯片电连接；
所述第二存储器用于存储用户信息及参数信息。
10.一种监控设备，其特征在于，所述监控设备包括如权利要求1-9任一项所述的识别装置。
CN201810299192.9A 2018-04-04 2018-04-04 一种识别装置及监控设备 Pending CN108259848A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810299192.9A CN108259848A (zh) 2018-04-04 2018-04-04 一种识别装置及监控设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810299192.9A CN108259848A (zh) 2018-04-04 2018-04-04 一种识别装置及监控设备

Publications (1)

Publication Number Publication Date
CN108259848A true CN108259848A (zh) 2018-07-06

Family

ID=62747749

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810299192.9A Pending CN108259848A (zh) 2018-04-04 2018-04-04 一种识别装置及监控设备

Country Status (1)

Country Link
CN (1) CN108259848A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110662002A (zh) * 2019-10-23 2020-01-07 徐州丰禾智能科技有限公司 一种具有实时图像识别及警示的工厂安防系统
CN110797034A (zh) * 2019-09-23 2020-02-14 重庆特斯联智慧科技股份有限公司 一种用于老人及病患照料的自动语音视频识别对讲系统
CN112044023A (zh) * 2019-06-07 2020-12-08 丰田自动车株式会社 步行训练系统、存储步行训练系统的控制程序的存储介质以及步行训练系统的控制方法
CN115205952A (zh) * 2022-09-16 2022-10-18 深圳市企鹅网络科技有限公司 一种基于深度学习的线上学习图像采集方法及系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112044023A (zh) * 2019-06-07 2020-12-08 丰田自动车株式会社 步行训练系统、存储步行训练系统的控制程序的存储介质以及步行训练系统的控制方法
CN112044023B (zh) * 2019-06-07 2022-04-08 丰田自动车株式会社 步行训练系统、存储步行训练系统的控制程序的存储介质以及步行训练系统的控制方法
CN110797034A (zh) * 2019-09-23 2020-02-14 重庆特斯联智慧科技股份有限公司 一种用于老人及病患照料的自动语音视频识别对讲系统
CN110662002A (zh) * 2019-10-23 2020-01-07 徐州丰禾智能科技有限公司 一种具有实时图像识别及警示的工厂安防系统
CN115205952A (zh) * 2022-09-16 2022-10-18 深圳市企鹅网络科技有限公司 一种基于深度学习的线上学习图像采集方法及系统
CN115205952B (zh) * 2022-09-16 2022-11-25 深圳市企鹅网络科技有限公司 一种基于深度学习的线上学习图像采集方法及系统

Similar Documents

Publication Publication Date Title
CN108259848A (zh) 一种识别装置及监控设备
CN103839373B (zh) 一种突发异常事件智能识别报警装置及报警系统
CN108875708A (zh) 基于视频的行为分析方法、装置、设备、系统及存储介质
US20090195382A1 (en) Video sensor and alarm system and method with object and event classification
KR102195706B1 (ko) 침입 탐지방법 및 그 장치
US20080136934A1 (en) Flame Detecting Method And Device
Cheng et al. Scene analysis for object detection in advanced surveillance systems using Laplacian distribution model
JP6572535B2 (ja) 画像認識システム、サーバ装置及び画像認識方法
EP2549759A1 (en) Method and system for facilitating color balance synchronization between a plurality of video cameras as well as method and system for obtaining object tracking between two or more video cameras
Toreyin et al. Wildfire detection using LMS based active learning
US11164435B1 (en) Audio/video recording and communication doorbell devices with supercapacitors
CN208029012U (zh) 一种识别装置及监控设备
KR20230004421A (ko) 인공지능 기반의 이상행동 감지 시스템
CN113111782A (zh) 基于显著对象检测的视频监控方法及装置
CN109544870A (zh) 用于智能监控系统的报警判断方法与智能监控系统
US20240046701A1 (en) Image-based pose estimation and action detection method and apparatus
Sefat et al. Implementation of vision based intelligent home automation and security system
KR20180099260A (ko) 디바이스 제어를 위한 적외선 시그널링의 자동 설정을 가능하게 하는 기법
Cocorullo et al. Embedded surveillance system using background subtraction and Raspberry Pi
CN113283273B (zh) 基于视觉技术的前方障碍物实时检测方法及系统
CN116912744A (zh) 基于物联网的智能监控系统及其方法
US10834366B1 (en) Audio/video recording and communication doorbell devices with power control circuitry
Zhou et al. Development of a camera-based driver state monitoring system for cost-effective embedded solution
KR101088153B1 (ko) 콤보형 영상 감시 시스템 및 영상 감시 방법
AG et al. Development of a portable community video surveillance system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180706