CN114090696B - 一种环境音大数据可视化系统及方法 - Google Patents
一种环境音大数据可视化系统及方法 Download PDFInfo
- Publication number
- CN114090696B CN114090696B CN202111192480.2A CN202111192480A CN114090696B CN 114090696 B CN114090696 B CN 114090696B CN 202111192480 A CN202111192480 A CN 202111192480A CN 114090696 B CN114090696 B CN 114090696B
- Authority
- CN
- China
- Prior art keywords
- audio data
- environment
- sound
- environmental
- identification information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000007613 environmental effect Effects 0.000 title claims abstract description 129
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000013079 data visualisation Methods 0.000 title claims abstract description 16
- 238000012800 visualization Methods 0.000 claims abstract description 60
- 238000012544 monitoring process Methods 0.000 claims abstract description 10
- 230000008569 process Effects 0.000 claims abstract description 10
- 238000001914 filtration Methods 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 11
- 230000009191 jumping Effects 0.000 claims description 9
- 238000009877 rendering Methods 0.000 claims description 8
- 238000013528 artificial neural network Methods 0.000 claims description 7
- 230000003993 interaction Effects 0.000 claims description 7
- 230000000007 visual effect Effects 0.000 claims description 7
- 230000000694 effects Effects 0.000 claims description 4
- 238000011161 development Methods 0.000 description 7
- 241000238097 Callinectes sapidus Species 0.000 description 6
- 230000009471 action Effects 0.000 description 3
- 238000000638 solvent extraction Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000004806 packaging method and process Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/26—Visual data mining; Browsing structured data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/64—Browsing; Visualisation therefor
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明涉及一种环境音大数据可视化系统及方法,系统包括后端服务器、环境音固定采集装置、环境音移动采集装置、MYSQL数据库、前端服务器、电脑端和移动端,环境音固定采集装置和环境音移动采集装置进行环境音数据采集,并通过后端服务器和前端服务器进行环境音数据处理,将处理后的数据发送电脑端和移动端的环境音可视化页面进行显示。本发明以多端采集的形式对环境音频数据进行采集,通过后端服务器将各个装置进行连接,并通过MYSQL数据库保存各种数据,前端服务器能够构建环境音可视化页面,并对环境音频数据进行识别处理,将识别后的信息显示在环境音可视化页面中,实现了固定以及移动的城市环境音大数据监测观察。
Description
技术领域
本发明主要涉及环境音技术领域,具体涉及一种环境音大数据可视化系统及方法。
背景技术
环境音是现阶段很多研究方向所要涉及到的问题,但目前人们对它的研究有待更进一步且其所产生的应用并不多。目前,对于日常环境的监控主要使用的是视频监控,然而由于光线、安放位置等因素会使其对某些场合的监控效果不理想。对于非专业人士在生活中难以理解音频数据所蕴含的信息,因此,需要一种数据表达方式即数据可视化来帮助人们观察、理解及运用音频数据。
发明内容
本发明所要解决的技术问题是针对现有技术的不足,提供一种环境音大数据可视化系统及方法。
本发明解决上述技术问题的技术方案如下:一种环境音大数据可视化系统,包括后端服务器、环境音固定采集装置、环境音移动采集装置、MYSQL数据库、前端服务器、电脑端和移动端;
所述后端服务器,用于分别搭建与所述环境音固定采集装置、所述环境音移动采集装置、所述MYSQL数据库以及所述前端服务器数据交互的接口;
所述环境音固定采集装置固定安装在指定的采集位置,其用于在采集位置环境中采集环境音频数据V1,并将所述环境音频数据V1发送至所述后端服务器中;
所述移动端装载在用户终端中,所述环境音移动采集装置安装在所述移动端的用户终端中,所述环境音移动采集装置用于在所述用户终端移动过程中采集环境音频数据V2,并将所述环境音频数据V2发送至所述后端服务器中;
所述后端服务器,还用于将接收到所述环境音频数据V1和/或所述环境音频数据V2发送至所述MYSQL数据库中保存,并向所述前端服务器发送信号;
所述前端服务器,用于与所述电脑端和所述移动端建立连接,并在所述电脑端和所述移动端中构建环境音可视化页面;
还用于根据所述信号从所述MYSQL数据库中调用所述环境音频数据V1和/或所述环境音频数据V2,并对所述环境音频数据V1和/或所述环境音频数据V2进行识别处理,并将环境音频数据V1的识别信息和/或环境音频数据V2的识别信息发送至所述电脑端的环境音可视化页面中和所述移动端的环境音可视化页面中显示。
本发明的有益效果是:通过环境音固定采集装置和安装在移动端内的环境音移动采集装置以多端采集的形式对环境音频数据进行采集,通过后端服务器将各个装置进行连接,并通过MYSQL数据库保存各种数据,前端服务器能够构建环境音可视化页面,并对环境音频数据进行识别处理,将识别后的信息显示在环境音可视化页面中,实现了固定以及移动的城市环境音大数据监测观察。
本发明解决上述技术问题的另一技术方案如下:一种境音大数据可视化方法,包括如下步骤:
后端服务器分别搭建与所述环境音固定采集装置、所述环境音移动采集装置、所述MYSQL数据库以及所述前端服务器数据交互的接口;
环境音固定采集装置固定安装在指定的采集位置,在采集位置环境中采集环境音频数据V1,并将所述环境音频数据V1发送至所述后端服务器中;
移动端装载在用户终端中,环境音移动采集装置安装在所述移动端的用户终端中,所述环境音移动采集装置用于在所述用户终端移动过程中采集环境音频数据V2,并将所述环境音频数据V2发送至所述后端服务器中;
所述后端服务器将接收到所述环境音频数据V1和/或所述环境音频数据V2发送至所述MYSQL数据库中保存,并向前端服务器发送信号;
所述前端服务器与所述电脑端和所述移动端建立连接,并在所述电脑端和所述移动端中构建环境音可视化页面;
根据所述信号从所述MYSQL数据库中调用所述环境音频数据V1和/或所述环境音频数据V2,并对所述环境音频数据V1和/或所述环境音频数据V2进行识别处理,并将环境音频数据V1的识别信息和/或环境音频数据V2的识别信息发送至所述电脑端的环境音可视化页面中和所述移动端的环境音可视化页面中显示。
附图说明
图1为本发明实施例提供的环境音大数据可视化系统的结构框图。
具体实施方式
以下结合附图对本发明的原理和特征进行描述,所举实例只用于解释本发明,并非用于限定本发明的范围。
如图1所示,一种环境音大数据可视化系统,包括后端服务器、环境音固定采集装置、环境音移动采集装置、MYSQL数据库、前端服务器、电脑端和移动端;
所述后端服务器,用于分别搭建与所述环境音固定采集装置、所述环境音移动采集装置、所述MYSQL数据库以及所述前端服务器数据交互的接口;
所述环境音固定采集装置固定安装在指定的采集位置,其用于在采集位置环境中采集环境音频数据V1,并将所述环境音频数据V1发送至所述后端服务器中;
所述环境音移动采集装置装载在所述移动端的用户终端中,其用于在所述用户终端移动过程中采集环境音频数据V2,并将所述环境音频数据V2发送至所述后端服务器中;
所述后端服务器,还用于将接收到所述环境音频数据V1和/或所述环境音频数据V2发送至所述MYSQL数据库中保存,并向所述前端服务器发送信号;
所述前端服务器,用于与所述电脑端和所述移动端建立连接,并在所述电脑端和所述移动端中构建环境音可视化页面;
还用于根据所述信号从所述MYSQL数据库中调用所述环境音频数据V1和/或所述环境音频数据V2,并对所述环境音频数据V1和/或所述环境音频数据V2进行识别处理,并将环境音频数据V1的识别信息和/或环境音频数据V2的识别信息发送至所述电脑端的环境音可视化页面中和所述移动端的环境音可视化页面中显示。
具体地,在Node.js运行平台上搭建好Vue框架和Egg框架,来构建前端服务器和后端服务器。前端服务器通过axios库与后端服务端进行数据交互,例如,后端服务端将移动端(如手机)采集到的环境音频数据存放到MYSQL数据库中,并进行一个个的接口封装,方便前端服务器通过调用接口来构建环境音可视化页面的各个部分界面渲染。而后可引入高德地图丰富的JS API,使用其相关类,来丰富可视化平台。
为了避免前端的环境音可视化页面与系统的服务端混合开发使用,每次打开页面,都相当于重启了服务端,这样开发非常耗时,性能会变得很差。当前设计相当于环境音可视化页面是一个文件管理,数据获取是一个文件管理。
本系统可在无线网络环境下进行数据传输,例如,4G网络。
环境音固定采集装置和环境音移动采集装置可包括ARM-A33开发板、4G模块和拾音器,4G模块和拾音器安装在ARM-A33开发板上。
环境音移动采集装置也可为具有声音采集功能的用户的手机APP。
上述实施例中,通过环境音固定采集装置和安装在移动端内的环境音移动采集装置以多端采集的形式对环境音频数据进行采集,通过后端服务器将各个装置进行连接,并通过MYSQL数据库保存各种数据,前端服务器能够构建环境音可视化页面,并对环境音频数据进行识别处理,将识别后的信息显示在环境音可视化页面中,实现了固定以及移动的城市环境音大数据监测观察。
可选地,作为本发明的一个实施例,所述后端服务器中,具体用于:
导出接口信息,所述接口信息包括用于连接所述环境音固定采集装置、所述环境音移动采集装置、所述MYSQL数据库以及所述前端服务器的地址信息和用于定位所述环境音固定采集装置和所述环境音移动采集装置的定位信息,根据所述接口信息构建所述接口。
具体地,后端服务器导出多个管理地址接口,对各个装置进行数据连接。通过封装post/get请求方法,将所需要的数据从MYSQL数据库里获取并封装好接口,环境音可视化页面的界面为Vue界面,环境音可视化页面可使用axios与后端服务端进行交互请求或者发送数据。
上述实施例中,能够快速的构建各个设备之间的数据连接通道。
可选地,作为本发明的一个实施例,所述前端服务器,具体用于:
构建环境音可视化页面;
通过神经网络对所述环境音频数据V1进行识别,得到环境音频数据V1的识别信息,以设定标识形式将所述环境音频数据V1的识别信息显示在所述环境音可视化页面上,所述环境音频数据V1的识别信息包括环境音频数据V1的采集时间、分贝值、声音种类和定位信息;
通过神经网络对所述环境音频数据V2进行识别,得到环境音频数据V2的识别信息,以设定标识形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上,所述环境音频数据V2的识别信息包括环境音频数据V2的采集时间、分贝值、声音种类和定位信息。
上述实施例中,将固定采集到的环境音频数据V1和移动采集到的环境音频数据V2以不同的显示形式进行显示,一目了然。
可选地,作为本发明的一个实施例,所述以设定标识跳动形式将所述环境音频数据V1的识别信息显示在所述环境音可视化页面上,具体为:
所述定位信息包括采集装置标识和采集位置坐标,若采集装置标识为mark1,则为环境音固定采集装置,以蓝色标识跳动及弹框形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上;
所述以设定标识跳动形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上,具体为:
所述定位信息包括采集装置标识和采集位置坐标,若采集装置标识为mark2,则为环境音移动采集装置,以红色标识跳动及弹框形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上。
具体地,蓝点对应着固定的环境音采集单元,红点对应移动的APP采集单元,硬件所传输上来的数据即数据表CHK,包含chk一个属性,实现的是当有环境音事件触发时提醒神经网络读取音频数据进行环境音事件识别,识别完成,后端读取到有新事件传输上来,相对应的红蓝点开始发生跳动,提示用户有该位置有特定的环境音事件发生。
具体地,环境音可视化页面上引入电子地图中,如高德地图,利用高德地图的JSAPI来丰富可视化平台。通过采集位置坐标在电子地图上定位对应的环境音移动采集装置或环境音固定采集装置,并在该点将其对应的环境音频数据V2的识别信息显示在所述环境音可视化页面中。
例如,在电子地图中为红蓝点添加实例化窗体信息,伴随红点和蓝点的跳动,点击跳动的点,有最新事件情况的显示,该地点位于何处,时间是x年x月x日x时x分x秒,发生具体事件是背景噪声或是汽车鸣笛声等,检测到是XXdb分贝值。设备一天都没有检测到环境音事件,则处理显示为“当日暂无噪音事件被检测”。
上述实施例中,能够便捷的让用户查看环境音的相关信息。
优选地,还包括步骤:
将所述环境音固定采集装置对应的蓝色标识作为虚拟点,通过IDW空间插值法将所述虚拟点由单点渲染转换为多点渲染。
固定硬件采集端对应的蓝点在单点渲染的前提下,使用IDW空间插值法,先计算出每每相邻的两个固定点的平面距离,以2m距离作为一个虚拟点在计算的两个蓝点之间进行插值,得出插入点的个数number,然后通过判断是否小于number来确定插值是否结束。能够通过虚拟点对实际的固定点进行连接,从而有热力渲染连接显示。这样可以从单点渲染变成多点的连接渲染。
可选地,作为本发明的一个实施例,所述前端服务器,还用于:
在设定时间段内接收所述后端服务器发送的多个信号,根据每个信号从所述MYSQL数据库中读取与接收时间对应的环境音频数据V1和/或环境音频数据V2,进行识别处理后,分别对多个所述环境音频数据V1的识别信息进行过滤处理,并将过滤后的环境音频数据V1的识别信息以第一信息列表形式显示在所述环境音可视化页面上;以及分别对多个所述环境音频数据V2的识别信息进行过滤处理,并将过滤后的环境音频数据V2的识别信息以第二信息列表形式显示在所述环境音可视化页面上。
具体地,所述设定时间段为距离当前时间前二十分钟的时间段。
上述实施例中,将短时间内重复的数据过滤掉,不再显示,避免重复数据显示过多的情况。
可选地,作为本发明的一个实施例,所述分别对多个所述环境音频数据V1的识别信息进行过滤处理,具体为:
S10、判断当前环境音频数据V1与第一信息列表中最新环境音频数据V1的声音种类是否相同,若是,执行S20,否则,执行S40;
S20、计算当前环境音频数据V1与第一信息列表中最新环境音频数据V1的分贝值的差值,若所述差值小于或等于分贝阈值,则执行S30,否则,执行S40;
S30、过滤掉当前环境音频数据V1的识别信息,执行S50;
S40、将当前环境音频数据V1的识别信息列入第一信息列表中,执行S50;
S50、将下一环境音频数据V1作为当前环境音频数据V1,返回S10,直至过滤完成所有的环境音频数据V1。
可选地,作为本发明的一个实施例,所述分别对多个所述环境音频数据V2的识别信息进行过滤处理,具体为:
S11、判断当前环境音频数据V2与第二信息列表中最新环境音频数据V2的声音种类是否相同,若是,执行S21,否则,执行S41;
S21、计算当前环境音频数据V2与第二信息列表中最新环境音频数据V2的分贝值的差值,若所述差值小于或等于分贝阈值,则执行S31,否则,执行S41;
S31、过滤掉当前环境音频数据V2的识别信息;
S41、将当前环境音频数据V2的识别信息列入第二信息列表中;
S51、将下一环境音频数据V2作为当前环境音频数据V2,返回S11,直至过滤完成所有的环境音频数据V2。
具体地:点跳动、更新弹框的同时,设计事件信息列表,显示相应发生的事件、地点和时间。前端监听getVoice接口,从数据库中获取到时间大于或等于当前时间t的所有数据,添加到列表最前面,其显示的为距离当前时间二十分钟前到当前时间的环境音事件,其中做了过滤处理。因为一个ARM-A33开发板一秒钟可能检测出几十个几乎一模一样的噪音事件,全部显示界面压力太大了,而且看过去几乎都是一模一样的数据。对数据进行过滤处理(即出重处理),显示如下:如果同一个ARM-A33开发板2次事件的时间很近的话,只显示前一次。同一个ARM-A33开发板,0.5s内检测到2个事件,会去对比两次事件的事件类型是不是一样,不一样就显示,一样的话,再去对比声音大小有没有相差一定的值(例如,分贝阈值可为20DB分贝),如果相近,就不显示。
通过setInterval()语句定时地不断检测读取是否有新的数据存入数据库,有就会触发更新相应的环境音固定采集装置和环境音移动采集装置的事件句柄,点的阈值在噪音值前后相差20DB时,才会发生更新。
上述实施例中,将短时间内重复的数据过滤掉,不再显示,避免重复数据显示过多的情况。
可选地,作为本发明的一个实施例,所述前端服务器,还用于:
将所述环境音频数据V1的识别信息和所述环境音频数据V2的识别信息发送至所述MYSQL数据库中保存;
当接收到所述电脑端和/或所述移动端发送的查询信息时,根据所述查询信息中的关键字从所述MYSQL数据库中筛选出与所述关键字对应的环境音频数据V1的识别信息和/或所述环境音频数据V2的识别信息,并发送至所述电脑端的环境音可视化页面中和/或所述移动端的环境音可视化页面中显示。
当用户想要查询某地点或某特殊事件的详细信息时,可以点击数据查询按钮,查询框就会从右侧弹出。查询的时间段默认的是当前时间的两小时前到当前时间,若用户有自己感兴趣的时间段,可以自己设定;然后在查询类型中选择地点查询或特殊事件查询,地点对应的是各个环境音感知单元;最后在后面的选择框中选择相应的地点或特殊事件,点击查询后,系统根据先前条件,在MYSQL数据库经过关键字一一对比最后返回符合的详细信息。
上述实施例中,可根据电脑端或移动端的查询信息快速查找相关的信息,发送至环境音可视化页面中显示。
可选地,作为本发明的一个实施例,所述前端服务器,还用于实时对移动端的活跃度进行监测:
根据所述移动端的imei登录码获取所述移动端的定位信息;
通过定时器在所述MYSQL数据库中定期扫描所述移动端的环境音移动采集装置所采集的环境音频数据V2,若在监听周期内,不存在环境音频数据V2,则得到移动端离线状态信息;
将所述imei登录码、定位信息和移动端离线状态信息一并显示在预设电子地图中,并将所述预设电子地图发送至指定的电脑端中。
前端服务器可以监测到移动用户上传音频的情况,用每台手机都会有一个唯一的imei登录码,用于移动用户登录移动端Web检测系统,添加定时器扫描数据库,有记录的用户会在PC平台的“在线用户”基数上增加,并在电子地图上相应的地理位置显示,如果用户在监听周期内(即半小时内)没有活动轨迹,则置为离线状态。
上述实施例中,能够对移动端的活跃度进行监测,了解移动端的动态。
可选地,作为本发明的一个实施例,一种境音大数据可视化方法,包括如下步骤:
后端服务器分别搭建与所述环境音固定采集装置、所述环境音移动采集装置、所述MYSQL数据库以及所述前端服务器数据交互的接口;
环境音固定采集装置固定安装在指定的采集位置,在采集位置环境中采集环境音频数据V1,并将所述环境音频数据V1发送至所述后端服务器中;
移动端装载在用户终端中,环境音移动采集装置安装在所述移动端的用户终端中,所述环境音移动采集装置用于在所述用户终端移动过程中采集环境音频数据V2,并将所述环境音频数据V2发送至所述后端服务器中;
所述后端服务器将接收到所述环境音频数据V1和/或所述环境音频数据V2发送至所述MYSQL数据库中保存,并向前端服务器发送信号;
所述前端服务器与所述电脑端和所述移动端建立连接,并在所述电脑端和所述移动端中构建环境音可视化页面;
根据所述信号从所述MYSQL数据库中调用所述环境音频数据V1和/或所述环境音频数据V2,并对所述环境音频数据V1和/或所述环境音频数据V2进行识别处理,并将环境音频数据V1的识别信息和/或环境音频数据V2的识别信息发送至所述电脑端的环境音可视化页面中和所述移动端的环境音可视化页面中显示。
上述实施例中,通过环境音固定采集装置和安装在移动端内的环境音移动采集装置以多端采集的形式对环境音频数据进行采集,通过后端服务器将各个装置进行连接,并通过MYSQL数据库保存各种数据,前端服务器能够构建环境音可视化页面,并对环境音频数据进行识别处理,将识别后的信息显示在环境音可视化页面中,实现了固定以及移动的城市环境音大数据监测观察。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统和方法,可以通过其它的方式实现。例如,以上所描述的系统实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种环境音大数据可视化系统,其特征在于,包括后端服务器、环境音固定采集装置、环境音移动采集装置、MYSQL数据库、前端服务器、电脑端和移动端;
所述后端服务器,用于分别搭建与所述环境音固定采集装置、所述环境音移动采集装置、所述MYSQL数据库以及所述前端服务器数据交互的接口;
所述环境音固定采集装置固定安装在指定的采集位置,其用于在采集位置环境中采集环境音频数据V1,并将所述环境音频数据V1发送至所述后端服务器中;
所述移动端装载在用户终端中,所述环境音移动采集装置安装在所述移动端的用户终端中,所述环境音移动采集装置用于在所述用户终端移动过程中采集环境音频数据V2,并将所述环境音频数据V2发送至所述后端服务器中;
所述后端服务器,还用于将接收到所述环境音频数据V1和/或所述环境音频数据V2发送至所述MYSQL数据库中保存,并向所述前端服务器发送信号;
所述前端服务器,用于与所述电脑端和所述移动端建立连接,并在所述电脑端和所述移动端中构建环境音可视化页面;
还用于根据所述信号从所述MYSQL数据库中调用所述环境音频数据V1和/或所述环境音频数据V2,并对所述环境音频数据V1和/或所述环境音频数据V2进行识别处理,并将环境音频数据V1的识别信息和/或环境音频数据V2的识别信息发送至所述电脑端的环境音可视化页面中和所述移动端的环境音可视化页面中显示;
所述前端服务器,具体用于:
构建环境音可视化页面;
通过神经网络对所述环境音频数据V1进行识别,得到环境音频数据V1的识别信息,以设定标识形式将所述环境音频数据V1的识别信息显示在所述环境音可视化页面上,所述环境音频数据V1的识别信息包括环境音频数据V1的采集时间、分贝值、声音种类和定位信息;
通过神经网络对所述环境音频数据V2进行识别,得到环境音频数据V2的识别信息,以设定标识形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上,所述环境音频数据V2的识别信息包括环境音频数据V2的采集时间、分贝值、声音种类和定位信息;
所述以设定标识跳动形式将所述环境音频数据V1的识别信息显示在所述环境音可视化页面上,具体为:
所述定位信息包括采集装置标识和采集位置坐标,若采集装置标识为mark1,则为环境音固定采集装置,以蓝色标识跳动及弹框形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上;
所述以设定标识跳动形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上,具体为:
所述定位信息包括采集装置标识和采集位置坐标,若采集装置标识为mark2,则为环境音移动采集装置,以红色标识跳动及弹框形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上。
2.根据权利要求1所述的环境音大数据可视化系统,其特征在于,所述后端服务器中,具体用于:
导出接口信息,所述接口信息包括用于连接所述环境音固定采集装置、所述环境音移动采集装置、所述MYSQL数据库以及所述前端服务器的地址信息和用于定位所述环境音固定采集装置和所述环境音移动采集装置的定位信息,根据所述接口信息构建所述接口。
3.根据权利要求1所述的环境音大数据可视化系统,其特征在于,还包括步骤:
将所述环境音固定采集装置对应的蓝色标识作为虚拟点,通过IDW空间插值法将所述虚拟点由单点渲染转换为多点渲染。
4.根据权利要求1所述的环境音大数据可视化系统,其特征在于,所述前端服务器,还用于:
在设定时间段内接收所述后端服务器发送的多个信号,根据每个信号从所述MYSQL数据库中读取与接收时间对应的环境音频数据V1和/或环境音频数据V2,进行识别处理后,分别对多个所述环境音频数据V1的识别信息进行过滤处理,并将过滤后的环境音频数据V1的识别信息以第一信息列表形式显示在所述环境音可视化页面上;以及分别对多个所述环境音频数据V2的识别信息进行过滤处理,并将过滤后的环境音频数据V2的识别信息以第二信息列表形式显示在所述环境音可视化页面上。
5.根据权利要求4所述的环境音大数据可视化系统,其特征在于,所述分别对多个所述环境音频数据V1的识别信息进行过滤处理,具体为:
S10、判断当前环境音频数据V1与第一信息列表中最新环境音频数据V1的声音种类是否相同,若是,执行S20,否则,执行S40;
S20、计算当前环境音频数据V1与第一信息列表中最新环境音频数据V1的分贝值的差值,若所述差值小于或等于分贝阈值,则执行S30,否则,执行S40;
S30、过滤掉当前环境音频数据V1的识别信息,执行S50;
S40、将当前环境音频数据V1的识别信息列入第一信息列表中,执行S50;
S50、将下一环境音频数据V1作为当前环境音频数据V1,返回S10,直至过滤完成所有的环境音频数据V1。
6.根据权利要求1所述的环境音大数据可视化系统,其特征在于,所述前端服务器,还用于:
将所述环境音频数据V1的识别信息和所述环境音频数据V2的识别信息发送至所述MYSQL数据库中保存;
当接收到所述电脑端和/或所述移动端发送的查询信息时,根据所述查询信息中的关键字从所述MYSQL数据库中筛选出与所述关键字对应的环境音频数据V1的识别信息和/或所述环境音频数据V2的识别信息,并发送至所述电脑端的环境音可视化页面中和/或所述移动端的环境音可视化页面中显示。
7.根据权利要求1所述的环境音大数据可视化系统,其特征在于,所述前端服务器,还用于实时对移动端的活跃度进行监测:
根据所述移动端的imei登录码获取所述移动端的定位信息;
通过定时器在所述MYSQL数据库中定期扫描所述移动端的环境音移动采集装置所采集的环境音频数据V2,若在监听周期内,不存在环境音频数据V2,则得到移动端离线状态信息;
将所述imei登录码、定位信息和移动端离线状态信息一并显示在预设电子地图中,并将所述预设电子地图发送至指定的电脑端中。
8.一种境音大数据可视化方法,其特征在于,包括如下步骤:
后端服务器分别搭建与环境音固定采集装置、环境音移动采集装置、MYSQL数据库以及前端服务器数据交互的接口;
所述环境音固定采集装置固定安装在指定的采集位置,在采集位置环境中采集环境音频数据V1,并将所述环境音频数据V1发送至所述后端服务器中;
移动端装载在用户终端中,环境音移动采集装置安装在所述移动端的用户终端中,所述环境音移动采集装置用于在所述用户终端移动过程中采集环境音频数据V2,并将所述环境音频数据V2发送至所述后端服务器中;
所述后端服务器将接收到所述环境音频数据V1和/或所述环境音频数据V2发送至所述MYSQL数据库中保存,并向前端服务器发送信号;
所述前端服务器与电脑端和移动端建立连接,并在所述电脑端和所述移动端中构建环境音可视化页面;
根据所述信号从所述MYSQL数据库中调用所述环境音频数据V1和/或所述环境音频数据V2,并对所述环境音频数据V1和/或所述环境音频数据V2进行识别处理,并将环境音频数据V1的识别信息和/或环境音频数据V2的识别信息发送至所述电脑端的环境音可视化页面中和所述移动端的环境音可视化页面中显示;具体包括:
构建环境音可视化页面;
通过神经网络对所述环境音频数据V1进行识别,得到环境音频数据V1的识别信息,以设定标识形式将所述环境音频数据V1的识别信息显示在所述环境音可视化页面上,所述环境音频数据V1的识别信息包括环境音频数据V1的采集时间、分贝值、声音种类和定位信息;
通过神经网络对所述环境音频数据V2进行识别,得到环境音频数据V2的识别信息,以设定标识形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上,所述环境音频数据V2的识别信息包括环境音频数据V2的采集时间、分贝值、声音种类和定位信息;
所述以设定标识跳动形式将所述环境音频数据V1的识别信息显示在所述环境音可视化页面上,具体为:
所述定位信息包括采集装置标识和采集位置坐标,若采集装置标识为mark1,则为环境音固定采集装置,以蓝色标识跳动及弹框形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上;
所述以设定标识跳动形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上,具体为:
所述定位信息包括采集装置标识和采集位置坐标,若采集装置标识为mark2,则为环境音移动采集装置,以红色标识跳动及弹框形式将所述环境音频数据V2的识别信息显示在所述环境音可视化页面上。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111192480.2A CN114090696B (zh) | 2021-10-13 | 2021-10-13 | 一种环境音大数据可视化系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111192480.2A CN114090696B (zh) | 2021-10-13 | 2021-10-13 | 一种环境音大数据可视化系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114090696A CN114090696A (zh) | 2022-02-25 |
CN114090696B true CN114090696B (zh) | 2024-03-29 |
Family
ID=80296809
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111192480.2A Active CN114090696B (zh) | 2021-10-13 | 2021-10-13 | 一种环境音大数据可视化系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114090696B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111121953A (zh) * | 2019-12-12 | 2020-05-08 | 广州地理研究所 | 噪音的动态可视化监测方法、装置及设备 |
CN210741562U (zh) * | 2019-11-19 | 2020-06-12 | 福建省交通科研院有限公司 | 一种用于交通行业的能耗和环境数据采集终端设备 |
CN112714355A (zh) * | 2021-03-29 | 2021-04-27 | 深圳市火乐科技发展有限公司 | 音频可视化的方法、装置、投影设备及存储介质 |
WO2021190145A1 (zh) * | 2020-03-25 | 2021-09-30 | Oppo广东移动通信有限公司 | 站点识别方法、装置、终端及存储介质 |
-
2021
- 2021-10-13 CN CN202111192480.2A patent/CN114090696B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN210741562U (zh) * | 2019-11-19 | 2020-06-12 | 福建省交通科研院有限公司 | 一种用于交通行业的能耗和环境数据采集终端设备 |
CN111121953A (zh) * | 2019-12-12 | 2020-05-08 | 广州地理研究所 | 噪音的动态可视化监测方法、装置及设备 |
WO2021190145A1 (zh) * | 2020-03-25 | 2021-09-30 | Oppo广东移动通信有限公司 | 站点识别方法、装置、终端及存储介质 |
CN112714355A (zh) * | 2021-03-29 | 2021-04-27 | 深圳市火乐科技发展有限公司 | 音频可视化的方法、装置、投影设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
刘鲁滨等.基于群智感知的噪音收集展示系统.计算机工程.2015,全文. * |
甄龙 ; 徐辉 ; 陶李 ; 付江缺 ; 欧阳亚 ; 江桥 ; .电厂"智慧工地"的建设与应用.电力勘测设计.2020,(第S1期),全文. * |
Also Published As
Publication number | Publication date |
---|---|
CN114090696A (zh) | 2022-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106790468B (zh) | 一种分析用户WiFi活动轨迹规律的分布式实现方法 | |
CN105518666B (zh) | 信息处理装置和信息处理方法 | |
CN105335509A (zh) | 一种推荐活动信息的方法、装置及服务器 | |
CN106842193B (zh) | 道路检测信息的处理方法、装置和系统 | |
CN105144117B (zh) | 对调用堆栈和上下文数据的自动相关分析方法 | |
CN105205155A (zh) | 一种大数据犯罪同伙的筛查系统和方法 | |
CN104410907A (zh) | 视频广告的监测方法及监测装置 | |
CN107547922B (zh) | 信息处理方法、装置、系统及计算机可读存储介质 | |
CN111881320A (zh) | 一种视频查询方法、装置、设备及可读存储介质 | |
CN101175066A (zh) | 媒体多类型切换轮播系统及方法 | |
CN112380391A (zh) | 基于物联网的视频处理方法、装置、电子设备和存储介质 | |
CN112835776A (zh) | 页面事件复现方法、采集方法、装置及电子设备 | |
CN103475532A (zh) | 硬件检测方法和系统 | |
CN103778550A (zh) | 获取信息的方法、装置及系统 | |
CN104935888A (zh) | 一种可标记对象的视频监控方法及其视频监控系统 | |
CN114090696B (zh) | 一种环境音大数据可视化系统及方法 | |
CN110929097A (zh) | 录像记录显示方法、装置及存储介质 | |
CN111672128A (zh) | 基于本地保留时长识别的游戏商城游戏推荐方法及系统 | |
CN105630858A (zh) | 热度指数的展示方法、装置、服务器和智能设备 | |
CN110764676B (zh) | 一种信息资源显示方法、装置、电子设备以及存储介质 | |
JP2020009000A (ja) | 再生状況調査システム、再生状況調査方法、及びプログラム | |
CN104484357A (zh) | 数据处理方法及装置和访问频次信息处理方法及装置 | |
CN111597235B (zh) | 数据处理方法、装置和电子设备 | |
CN111026991B (zh) | 数据展示方法及装置、计算机设备 | |
CN112667849A (zh) | 信息索引方法、装置、系统、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |