CN111785032A - 音频信号定位方法、装置、电子设备及智能交通系统 - Google Patents

音频信号定位方法、装置、电子设备及智能交通系统 Download PDF

Info

Publication number
CN111785032A
CN111785032A CN202010577199.XA CN202010577199A CN111785032A CN 111785032 A CN111785032 A CN 111785032A CN 202010577199 A CN202010577199 A CN 202010577199A CN 111785032 A CN111785032 A CN 111785032A
Authority
CN
China
Prior art keywords
coordinate
server
audio
source object
audio signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010577199.XA
Other languages
English (en)
Inventor
黄建
吴任求
李转强
刘林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN202010577199.XA priority Critical patent/CN111785032A/zh
Publication of CN111785032A publication Critical patent/CN111785032A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • G08G1/0175Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves

Abstract

本申请提供一种音频信号定位方法、装置、电子设备及智能交通系统,该方法包括:当检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述来源对象的第一坐标;对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;将所述第二坐标上报给服务器,并向所述服务器发送触发信号,以使所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍,并基于所述第二坐标在抓拍图片中定位所述来源对象。该方法可以提高音频信号定位的准确性。

Description

音频信号定位方法、装置、电子设备及智能交通系统
技术领域
本申请涉及智能交通领域,尤其涉及一种音频信号定位方法、装置、电子设备及智能交通系统。
背景技术
车辆在禁止鸣笛的路段鸣笛属于违法行为,违法鸣笛为文明的城市制造了不和谐的噪声,影响人们正常工作和生活。因此,及时发现违法鸣笛现象并确定出违法鸣笛的车辆成为一个亟待解决的技术问题。
目前,主要抓拍机主要通过视频识别或雷达检测等手段对车辆进行检测抓拍,但是现有抓拍手段无法感知环境声音,对违法鸣笛行为无法取证抓拍。而单纯依靠音频定位,对非机动车鸣笛或噪声误触发无法有效过滤。
发明内容
有鉴于此,本申请提供一种音频信号定位方法、装置、电子设备及智能交通系统。
具体地,本申请是通过如下技术方案实现的:
根据本申请实施例的第一方面,提供一种音频信号定位方法,包括:
当检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述来源对象的第一坐标;
对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
将所述第二坐标上报给服务器,并向所述服务器发送触发信号,以使所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍,并使所述服务器基于所述第二坐标在抓拍图片中定位所述来源对象。
根据本申请实施例的第二方面,提供一种音频信号定位方法,应用于智能交通系统,所述方法包括:
当音频检测设备检测到满足预设条件的音频信号时,对所述音频信号来源对象进行定位,以得到所述来源对象的第一坐标;
所述音频检测设备对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
所述音频检测设备将所述第二坐标上报给服务器,并向所述服务器发送触发信号;
所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍;
所述服务器基于所述第二坐标在抓拍图片中定位所述来源对象。
根据本申请实施例的第三方面,提供一种音频信号定位装置,应用于智能交通系统中的音频检测设备,包括:
检测单元,用于检测音频信号;
定位单元,用于当所述检测单元检测到满足预设条件的音频信号时,对所述音频信号来源对象进行定位,以得到所述音频信号的第一坐标;
变换单元,用于对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
通信单元,用于将所述第二坐标上报给服务器,并向所述服务器发送触发信号,以使所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍,并基于所述第二坐标在抓拍图片中定位所述来源对象。
根据本申请实施例的第四方面,提供一种电子设备,该电子设备包括:
处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;所述处理器用于执行机器可执行指令,以实现第一方面提供的方法。
根据本申请实施例的第五方面,提供一种智能交通系统,包括音频检测设备和服务器;其中:
所述音频检测设备,用于当检测到满足预设条件的音频信号时,对所述音频信号来源对象进行定位,以得到所述来源对象的第一坐标;
所述音频检测设备,还用于对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
所述音频检测设备,还用于将所述第二坐标上报给服务器,并向所述服务器发送触发信号;
所述服务器,用于基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍;
所述服务器,还用于基于所述第二坐标在抓拍图片中定位所述来源对象。
本申请实施例的音频信号定位方法,当检测到满足预设条件的音频信号时,对音频信号来源对象进行定位,以得到音频信号的来源对象的第一坐标,并对第一坐标进行变换,得到音频信号的来源对象在音频检测设备的视频坐标系中的第二坐标,进而,将第二坐标上报给服务器,并向服务器发送触发信号,以使服务器基于该触发信号,控制与音频检测设备对应的抓拍设备进行抓拍,并使服务器基于第二坐标在抓拍图片中定位音频信号的来源对象,提高了音频信号定位的准确性。
附图说明
图1为本申请一示例性实施例示出的一种音频信号定位方法的流程示意图;
图2为本申请一示例性实施例示出的一种将第一坐标变换为第二坐标的流程示意图;
图3为本申请一示例性实施例示出的一种音频信号定位方法的流程示意图;
图4为本申请一示例性实施例示出的一种服务器基于第二坐标在抓拍图片中定位音频信号的来源对象的流程示意图;
图5为本申请一示例性实施例示出的一种违法记录中抓拍图的示意图;
图6为本申请一示例性实施例示出的一种具体应用场景的架构示意图;
图7为本申请一示例性实施例示出的一种音频信号定位装置的结构示意图;
图8为本申请一示例性实施例示出的一种电子设备的硬件结构示意图;
图9为本申请一示例性实施例示出的一种智能交通系统的架构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
为了使本领域技术人员更好地理解本申请实施例提供的技术方案,并使本申请实施例的上述目的、特征和优点能够更加明显易懂,下面结合附图对本申请实施例中技术方案作进一步详细的说明。
请参见图1,为本申请实施例提供的一种音频信号定位方法的流程示意图,其中,该音频信号定位方法可以应用于智能交通系统中的音频检测设备,如麦克风阵列,如图1所示,该音频信号定位方法包括以下步骤:
步骤S100、当检测到满足预设条件的音频信号时,对该音频信号的来源对象进行定位,以得到音频信号的来源对象的第一坐标。
本申请实施例中,音频检测设备可以实时采集所部署区域的音频信号,并利用预设检测算法对采集到的音频信号进行音频分析,根据音频特征信息识别采集到的音频信号是否满足预设条件。
示例性的,满足预设条件的音频信号可以包括但不限于机动车辆的鸣笛声、“炸街车”发出的轰鸣声或其他类似的声音等。
当音频检测设备检测到满足预设条件的音频信号时,可以对该音频信号的来源对象进行定位,以得到音频信号的来源对象的坐标(该坐标为物理坐标系中的坐标,本文中称为第一坐标)。
需要说明的是,音频检测设备对音频信号的来源对象进行定位的具体实现可以参见现有相关技术中的相关描述,本申请实施例对此不做赘述。
此外,若未特殊说明,本申请实施例中所提及的音频检测设备可以为音视频一体机,即既可以进行音频信号获取,又可以进行视频信号获取,但由于音视频一体机获取的视频图像的分辨率通常较低,基于音视频一体机获取的视频图像进行定位的准确率会相对较低,因此,对音频信号的来源对象进行定位时,可以基于抓拍设备获取的抓拍图片进行,其具体实现可以参见下文中的相关描述。
步骤S110、对第一坐标进行变换,得到音频信号的来源对象在音频检测设备的视频坐标系中的第二坐标。
本申请实施例中,音频检测设备定位得到音频信号的来源对象的第一坐标时,可以对第一坐标进行变换,将该第一坐标转换到音频检测设备的视频坐标系中,得到音频信号的来源对象在音频检测设备的视频坐标系中的坐标(本文中称为第二坐标)。
在一个示例中,音频检测设备可以基于预先配置的标定矩阵,实现第一坐标到第二坐标的变换。
示例性的,以音频检测设备用于道路音频检测为例,在音频检测设备出厂前,可以基于音频检测设备的预设的安装高度(本文中称为缺省安装高度)以及俯角(本文中称为缺省俯角),标定出道路平面与音频检测设备的视频平面之间的标定矩阵,并将该标定矩阵配置在音频检测设备中,进而,音频检测设备可以基于该标定矩阵,实现第一坐标到第二坐标的变换。
示例性的,基于音频检测设备的缺省安装高度以及缺省俯角,标定出道路平面与音频检测设备的视频平面之间的标定矩阵的具体实现可以在下文中结合实例进行说明,本申请实施例在此不做赘述。
步骤S120、将第二坐标上报给服务器,并向服务器发送触发信号,以使服务器基于该触发信号,控制与音频检测设备关联的抓拍设备进行抓拍,并基于第二坐标在抓拍图片中定位音频信号的来源对象。
本申请实施例中,音频检测设备确定了音频信号的来源对象在音频检测设备的视频坐标中的坐标(即第二坐标)时,音频检测设备可以将该第二坐标上报给服务器,并向服务器发送触发信号,以通知服务器当前存在满足条件的音频信号。
服务器接收到音频检测设备上报的第二坐标以及触发信号时,可以基于该触发信号,控制与音频检测设备关联的抓拍设备进行抓拍,并基于该第二坐标,以及在该抓拍设备的抓拍图片中定位音频信号的来源对象,其具体实现可以参见图3所示方法流程中的相关描述,本申请实施例在此不做赘述。
本申请实施例中,一个音频检测设备可以关联一个抓拍设备或多个抓拍设备。
在一个示例中,当音频检测设备与多个抓拍设备相关联时,步骤S120中,向服务器发送触发信号,可以包括:
根据第二坐标确定音频信号对应的目标车道信息;
向服务器发送携带目标车道信息的触发信号,以使服务器基于该触发信号,控制该多个抓拍设备中与目标车道信息对应的目标抓拍设备进行抓拍。
示例性的,以音频检测设备用于道路音频检测为例,考虑到音频检测设备的检测范围通常大于抓拍设备的抓拍范围,可以关联音频检测设备部署多个抓拍设备,以提高音频信号来源对象的捕获率,避免抓拍设备无法抓拍到音频信号的来源对象。
示例性的,与音频检测设备对应的多个抓拍设备通常对应不同车道,用于对不同车道进行抓拍。
举例来说,假设音频检测设备A部署的道路包括4条车道(车道1~4),抓拍设备1用于对音频检测设备A的部署点位的车道1和车道2进行抓拍,抓拍设备2用于对音频检测设备A的部署点位的车道3和车道4进行抓拍,即音频检测设备A关联抓拍设备1和抓拍设备2。
当音频检测设备确定了音频信号的第一坐标,并对该第一坐标进行变换得到第二坐标时,音频检测设备可以确定第二坐标在音频检测设备的视频画面中所属的车道的信息(如车道号,本文中称为目标车道信息)。
音频检测设备向服务器上报触发信号时,可以将目标车道信息也上报给服务器。当服务器接收到触发信号时,可以基于接收到的目标车道信息,从与该音频检测设备关联的多个抓拍设备中,确定与该目标车道信息对应的抓拍设备(本文中称为目标抓拍设备),并控制目标抓拍设备进行抓拍。
在一种可能的实施例中,如图2所示,在步骤S110中,对第一坐标进行变换,得到音频信号在音频检测设备的视频坐标系中的第二坐标,可以通过以下步骤实现:
步骤S111、获取音频检测设备的实际安装高度和实际俯角。
步骤S112、比较该实际安装高度与音频检测设备的缺省安装高度,以及比较该实际俯角与音频检测设备的缺省俯角。
步骤S113、当该实际安装高度与缺省安装高度不一致,或/和,该实际俯角与缺省俯角不一致时,基于安装高度差或/和俯角差对第一坐标进行修正;其中,安装高度差为该实际安装高度与缺省安装高度的差值,俯角差为该实际俯角与所述缺省俯角的差值;
步骤S114、对修正后的第一坐标进行变换,得到第二坐标。
示例性的,考虑到实际场景中音频检测设备的安装高度(本文中称为实际安装高度)或/和俯角(本文中称为实际俯角)可能与音频检测设备的缺省安装高度或/和缺省俯角存在差异(包括安装条件限制造成的差异,或/和使用过程中由于外部环境造成的差异),而音频检测设备中预先配置的标定矩阵是基于缺省安装高度和缺省俯角进行标定的,在实际安装高度与缺省安装高度,或/和,实际俯角与缺省俯角之间存在差异的情况下,基于预先配置的标定矩阵进行第一坐标和第二坐标的变换得到的第二坐标可能会存在误差,进而,降低音频信号来源对象定位的准确性。
为了提高音频信号来源对象定位的准确性,当音频检测设备的实际安装高度或/和实际俯角与缺省安装高度或/和缺省俯角存在差异时,可以在进行第一坐标和第二坐标的变换之前,先对第一坐标进行修正。
示例性的,当音频检测设备在对第一坐标进行变换之前,可以获取音频检测设备的实际安装高度和实际俯角,并分别比较该实际安装高度与音频检测设备的缺省安装高度,以及该实际俯角与音频检测设备的缺省俯角。
在一个示例中,音频检测设备的实际安装高度可以由管理员或运维人员配置在音频检测设备;音频检测设备的实际俯角可以通过重力传感器获取。
当音频检测设备确定实际安装高度与缺省安装高度不一致,或/和,实际俯角与缺省俯角不一致时,可以基于安装高度差(如实际安装高度减去缺省安装高度)或/和俯角差(如实际俯角减去缺省俯角)对第一坐标进行修正,并对修正后的第一坐标进行变换,得到第二坐标。
在一个示例中,步骤S113中,基于安装高度差或/和俯角差对所述第一坐标进行修正,可以包括:
通过以下公式对安装高度差进行修正:
Figure BDA0002551400640000081
Figure BDA0002551400640000082
其中,(x,y)为进行安装高度差修正前的第一坐标,(x′,y′)为进行安装高度差修正后的第一坐标,h为实际安装高度,△h为安装高度差;
或/和,通过以下公式对俯角差进行修正:
Figure BDA0002551400640000091
Figure BDA0002551400640000092
其中,(x,y)为进行安装高度差修正前的第一坐标,(x′,y′)为进行安装高度差修正后的第一坐标,h为实际安装高度,θ为俯角差。
示例性的,当实际安装高度与缺省高度不一致时,可以通过公式(1)对安装高度差进行修正;当实际安装俯角与缺省俯角不一致时,可以通过公式(2)对俯角差进行修正。
需要说明的是,当实际安装高度与缺省高度不一致,且实际俯角与缺省俯角不一致时,可以先通过公式(1)对安装高度差进行修正,得到初步修正后的第一坐标,然后通过公式(2)对初步修正后的第一坐标再次进行俯角差的修正,得到最终修正后的第一坐标(即步骤S114中的修正后的第一坐标);或者,也可以先通过公式(2)对俯角差进行修正,得到初步修正后的第一坐标,然后通过公式(2)对初步修正后的第一坐标再次进行安装高度差的修正,得到最终修正后的第一坐标。
请参见图3,为本申请实施例提供的一种音频信号定位方法的流程示意图,如图3所示,该音频信号定位方法包括以下步骤:
步骤S300、当音频检测设备检测到满足预设条件的音频信号时,对该音频信号的来源对象进行定位,以得到音频信号的来源对象的第一坐标。
步骤S310、音频检测设备对第一坐标进行变换,得到音频信号的来源对象在音频检测设备的视频坐标系中的第二坐标。
步骤S320、音频检测设备将第二坐标上报给服务器,并向服务器发送触发信号。
本申请实施例中,步骤S300~S320的具体实现可以参见图1和图2所示方法实施例中的相关描述,本申请实施例在此不再赘述。
步骤S330、服务器基于触发信号,控制与音频检测设备关联的抓拍设备进行抓拍。
本申请实施例中,当服务器接收到音频检测设备上报的触发信号时,可以基于该触发信号,向与该音频检测设备关联的抓拍设备发送抓拍控制信号,控制该抓拍设备进行抓拍。
抓拍设备接收到服务器发送的抓拍控制信号时,进行抓拍,并将抓拍图片上报给服务器。
示例性的,当一个音频检测设备关联一个抓拍设备时,服务器可以维护音频检测设备与抓拍设备的关联关系,当接收到音频检测设备的触发信号时,根据该关联关系确定音频检测设备关联的抓拍设备,并控制该抓拍设备进行抓拍。
当一个音频检测设备关联多个抓拍设备时,音频检测设备上报的触发信号中可以携带目标车道信息,服务器接收到触发信号时,可以基于触发信号中携带的目标车道信息,确定目标抓拍设备,并控制目标抓拍设备进行抓拍(具体实现参见图1所示方法流程中的相关描述)。
步骤S340、服务器基于第二坐标在抓拍图片中定位音频信号的来源对象。
本申请实施例中,当服务器接收到音频检测设备对应的抓拍设备上报的抓拍图片时,可以基于音频检测设备上报的第二坐标,在该抓拍图片中定位音频信号的来源对象。
在一种可能的实施例中,如图4所示,步骤S340中,服务器基于第二坐标在抓拍图片中定位音频信号的来源对象,可以通过以下步骤实现:
步骤S341、服务器对抓拍图片进行分析,以识别抓拍图片中的对象;该对象包括行人、机动车辆或非机动车辆;
步骤S342、服务器基于识别出的对象在抓拍图片中的位置,以及第三坐标,确定音频信号的来源对象;其中,第三坐标为第二坐标在抓拍设备的视频坐标系中对应的坐标。
示例性的,服务器接收到音频检测设备对应的抓拍设备(如目标抓拍设备)上报的抓拍图片时,可以对抓拍图片进行分析,以识别抓拍图片中的对象,该对象可以但不限于行人、机动车辆或非机动车辆。
在一个示例中,服务器可以基于深度学习的方式对抓拍图片进行分析,以识别抓拍图片中的对象。
例如,服务器可以预先利用不同对象的训练样本训练深度学习网络模型,进而,利用训练好的深度学习网络模型识别抓拍图片中的对象。
服务器识别出抓拍图片中的对象时,可以基于各对象在抓拍图片中的位置(可以通过标注框的形式标注),以及第二坐标在抓拍设备的视频坐标系中对应的坐标(本文中称为第三坐标),确定音频信号的来源对象。
示例性的,服务器可以根据各对象在抓拍图片中的位置(以标注框为例),将包括第三坐标的标注框对应的对象,确定为音频信号的来源对象。
需要说明的是,服务器将第二坐标转换为抓拍设备的视频坐标系中的坐标(即第三坐标)可以通过标定矩阵的方式实现,即对于任一抓拍设备,服务器可以确定该抓拍设备的视频坐标系中的坐标与该抓拍设备对应的音频检测设备的视频坐标系中的坐标的变换关系(即标定矩阵),进而,当服务器接收到音频检测设备上报的第二坐标时,可以基于该音频检测设备与对应的抓拍设备之间的标定矩阵,将第二坐标转换为第三坐标。
在一个示例中,上述确定音频信号的来源对象之后,还可以包括:
当音频信号的来源对象为机动车辆时,生成针对所述音频信号的违法记录;该违法记录包括该机动车辆的抓拍图。
示例性的,当服务器确定音频信号的来源为机动车辆时,服务器可以生成针对该音频信号的违法记录,该违法记录可以包括以下至少之一:该机动车辆的抓拍图、音频信号的定位信息以及音频信号对应的音频波形图,以便后续针对该违法行为进行取证。
示例性的,为了提高抓拍图的合理性,以保证更加准确地记录违法车辆的违法行为,违法记录中的抓拍图可以包括但不限于抓拍设备对该机动车辆的抓拍图片(可以包括抓拍时间差大于预设时间阈值的两张抓拍图)、该机动车辆的车牌特写图以及该机动车辆的特写图,其示意图可以如图5所示。
示例性的,音频信号的定位信息可以体现在抓拍设备对机动车辆的抓拍图片中,音频波形可以体现在车牌特写图中。
为了使本领域技术人员更好地理解本申请实施例提供的技术方案,下面结合具体应用场景对本申请实施例提供的技术方案进行说明。
请参见图6,为本申请实施例提供的一种具体应用场景的架构示意图,如图6所示,该应用场景可以包括服务器、音频检测设备以及抓拍设备,服务器可以分别通过网线与部署在禁鸣路段的音频检测设备和抓拍设备连接,并通过有线网络与音频检测设备和抓拍设备进行信息交互。
示例性的,以音频检测设备和抓拍设备一一关联为例,服务器中可以维护音频检测设备与抓拍设备的对应关系。
在该实施例中,对预先基于音频检测设备的缺省安装角度和缺省俯角,对道路平面坐标系(可以称为物理坐标系)的坐标(可以称为物理坐标)到音频检测设备的视频坐标系的坐标之间的变换关系进行标定,得到标定矩阵H1。
示例性的,标定矩阵的计算,可以利用随机采样一致性(RANSC)方法从输入的标定点中选取若干组分别通过SVD分解的方法求解标定矩阵,然后选取误差最小的矩阵作为最终的标定矩阵。
在齐次坐标中,假设点p经过H矩阵变换为p′,即p'=H*p。
Figure BDA0002551400640000121
对于透视变换,令h33=1,此时H矩阵有8个自由度,至少需要4对特征点对求解。由公式(3)可知:
Figure BDA0002551400640000131
当标定点数为4时,将其写成矩阵形式:
Figure BDA0002551400640000132
对于n>4对特征点的情况(超定方程),解方程组可以转化为对齐次方程组的求解,可以通过最小而成的方式求解。通过对系数矩阵A求特征值和特征向量得到。标定矩阵求取后,通过RANSC进行精选。
对于音频检测设备,可以在出厂前确定标定矩阵H1,并配置在音频检测设备中。
抓拍设备的视频坐标系中的坐标和音频检测设备的视频坐标系之间的变换关系(对应的标定矩阵可以称为H2),也可以采用上述方法实现(如在出厂前标定),其也可以在抓拍设备和音频检测设备实际部署后通过在视频中选取特征点的方式实现,即不需要出厂前标定。
基于图6所示场景,本申请实施例提供的音频信号定位方案实现流程如下:
音频检测设备实时采集道路音频,基于预设检测算法对采集到的音频信号进行音频分析,根据声音特征识别鸣笛、炸街车等违法事件。当检测违法事件(即检测到满足预设条件的音频信号)时,对音频信号的来源对象进行定位,得到音频信号的来源对象的第一坐标。
音频检测设备基于实际安装高度和实际俯角,确定实际安装高度与缺省安装高度是否一致,以及,实际俯角与缺省俯角是否一致。
若实际安装高度与缺省安装高度不一致,则通过公式(1)对安装高度差进行修正。
若实际俯角与缺省俯角不一致,则通过公式(2)对俯角差进行修正。
若实际安装高度与缺省安装高度不一致,且实际俯角与缺省俯角不一致,则分别通过公式(1)和公式(2)对安装高度差和俯角差进行修正。
音频检测设备得到修正后的第一坐标后,基于标定矩阵H1,将第一坐标转换为音频检测设备的视频坐标系中的第二坐标。
音频检测设备将该第二坐标上报给服务器,并向服务器上报触发信号。
服务器接收到第二坐标和触发信号时,一方面,可以控制该音频检测设备关联的抓拍设备进行抓拍。抓拍设备进行抓拍得到抓拍图片后,将抓拍图片上报给服务器。
示例性的,为了提高违法记录的可靠性,抓拍设备进行抓拍时,可以按照预设时间间隔进行两次抓拍或两次以上的抓拍。
另一方面,服务器可以基于标定矩阵H2,将第二坐标转换为抓拍设备的视频坐标系中的第三坐标。
进而,服务器可以基于第三坐标,在抓拍图片中定位鸣笛车辆或炸街车辆,并生成对应的违法记录。
本申请实施例中,当检测到满足预设条件的音频信号时,对音频信号进行定位,以得到音频信号的来源对象的第一坐标,并对第一坐标进行变换,得到音频信号的来源对象在音频检测设备的视频坐标系中的第二坐标,进而,将第二坐标上报给服务器,并向服务器发送触发信号,以使服务器基于该触发信号,控制与音频检测设备关联的抓拍设备进行抓拍,并使服务器基于第二坐标在抓拍图片中定位音频信号的来源对象,提高了音频信号定位的准确性。
以上对本申请提供的方法进行了描述。下面对本申请提供的装置进行描述:
请参见图7,为本申请实施例提供的一种音频信号定位装置的结构示意图,如图7所示,该音频信号定位装置可以包括:
检测单元,用于检测音频信号;
定位单元,用于当所述检测单元检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述来源对象的第一坐标;
变换单元,用于对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
通信单元,用于将所述第二坐标上报给服务器,并向所述服务器发送触发信号,以使所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍,并基于所述第二坐标在抓拍图片中定位所述来源对象。
在一个实施例中,所述变换单元对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标,包括:
获取所述音频检测设备的实际安装高度和实际俯角;
比较所述实际安装高度与所述音频检测设备的缺省安装高度,以及比较所述实际俯角与所述音频检测设备的缺省俯角;
当所述实际安装高度与所述缺省安装高度不一致,或/和,所述实际俯角与所述缺省俯角不一致时,基于安装高度差或/和俯角差对所述第一坐标进行修正;其中,所述安装高度差为所述实际安装高度与所述缺省安装高度的差值,所述俯角差为所述实际俯角与所述缺省俯角的差值;
对修正后的所述第一坐标进行变换,得到所述第二坐标。
在一个实施例中,所述变换单元基于安装高度差或/和俯角差对所述第一坐标进行修正,包括:
通过以下公式对安装高度差进行修正:
Figure BDA0002551400640000151
Figure BDA0002551400640000152
其中,(x,y)为进行安装高度差修正前的第一坐标,(x′,y′)为进行安装高度差修正后的第一坐标,h为实际安装高度,△h为安装高度差;
或/和,通过以下公式对俯角差进行修正:
Figure BDA0002551400640000161
Figure BDA0002551400640000162
其中,(x,y)为进行安装高度差修正前的第一坐标,(x′,y′)为进行安装高度差修正后的第一坐标,h为实际安装高度,θ为俯角差。
在一个实施例中,所述音频检测设备与多个抓拍设备相关联;
所述通信单元向所述服务器发送触发信号,包括:
根据所述第二坐标确定所述音频信号对应的目标车道信息;
向所述服务器发送携带所述目标车道信息的触发信号,以使所述服务器基于所述触发信号,控制所述多个抓拍设备中与所述车道信息对应的目标抓拍设备进行抓拍。
对应地,本申请还提供了图7所示装置的硬件结构。参见图8,该硬件结构可包括:处理器和机器可读存储介质,机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;所述处理器用于执行机器可执行指令,以实现本申请上述示例公开的方法。
基于与上述方法同样的申请构思,本申请实施例还提供一种机器可读存储介质,所述机器可读存储介质上存储有若干计算机指令,所述计算机指令被处理器执行时,能够实现本申请上述示例公开的方法。
示例性的,上述机器可读存储介质可以是任何电子、磁性、光学或其它物理存储装置,可以包含或存储信息,如可执行指令、数据,等等。例如,机器可读存储介质可以是:RAM(Radom Access Memory,随机存取存储器)、易失存储器、非易失性存储器、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、dvd等),或者类似的存储介质,或者它们的组合。
请参见图9,为本申请实施例提供的一种智能交通系统的架构示意图,如图9所示,该智能交通系统可以包括音频检测设备和服务器;其中:
所述音频检测设备,用于当检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述来源对象的第一坐标;
所述音频检测设备,还用于对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
所述音频检测设备,还用于将所述第二坐标上报给服务器,并向所述服务器发送触发信号;
所述服务器,用于基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍;
所述服务器,还用于基于所述第二坐标在抓拍图片中定位所述来源对象。
在一个实施例中,所述服务器,具体用于对所述抓拍图片进行分析,以识别所述抓拍图片中的对象;所述对象包括行人、机动车辆或非机动车辆;
基于识别出的对象在所述抓拍图片中的位置,以及所述第三坐标,确定所述来源对象;其中,所述第三坐标为所述第二坐标在所述抓拍设备的视频坐标系中对应的坐标。
在一个实施例中,所述服务器,还用于当所述来源对象为机动车辆时,生成针对所述音频信号的违法记录;所述违法记录包括该机动车辆的抓拍图、所述音频信号的定位信息以及所述音频信号对应的音频波形图。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (10)

1.一种音频信号定位方法,其特征在于,应用于智能交通系统中的音频检测设备,所述方法包括:
当检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述来源对象的第一坐标;
对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
将所述第二坐标上报给服务器,并向所述服务器发送触发信号,以使所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍,并基于所述第二坐标在抓拍图片中定位所述来源对象。
2.根据权利要求1所述的方法,其特征在于,所述对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标,包括:
获取所述音频检测设备的实际安装高度和实际俯角;
比较所述实际安装高度与所述音频检测设备的缺省安装高度,以及比较所述实际俯角与所述音频检测设备的缺省俯角;
当所述实际安装高度与所述缺省安装高度不一致,或/和,所述实际俯角与所述缺省俯角不一致时,基于安装高度差或/和俯角差对所述第一坐标进行修正;其中,所述安装高度差为所述实际安装高度与所述缺省安装高度的差值,所述俯角差为所述实际俯角与所述缺省俯角的差值;
对修正后的所述第一坐标进行变换,得到所述第二坐标。
3.根据权利要求2所述的方法,其特征在于,所述基于安装高度差或/和俯角差对所述第一坐标进行修正,包括:
通过以下公式对安装高度差进行修正:
Figure FDA0002551400630000011
Figure FDA0002551400630000021
其中,(x,y)为进行安装高度差修正前的第一坐标,(x′,y′)为进行安装高度差修正后的第一坐标,h为实际安装高度,△h为安装高度差;
或/和,通过以下公式对俯角差进行修正:
Figure FDA0002551400630000022
Figure FDA0002551400630000023
其中,(x,y)为进行安装高度差修正前的第一坐标,(x′,y′)为进行安装高度差修正后的第一坐标,h为实际安装高度,θ为俯角差。
4.根据权利要求1所述的方法,其特征在于,所述音频检测设备与多个抓拍设备相关联;
所述向所述服务器发送触发信号,包括:
根据所述第二坐标确定所述音频信号对应的目标车道信息;
向所述服务器发送携带所述目标车道信息的触发信号,以使所述服务器基于所述触发信号,控制所述多个抓拍设备中与所述车道信息对应的目标抓拍设备进行抓拍。
5.一种音频信号定位方法,其特征在于,应用于智能交通系统,所述方法包括:
当音频检测设备检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述来源对象的第一坐标;
所述音频检测设备对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
所述音频检测设备将所述第二坐标上报给服务器,并向所述服务器发送触发信号;
所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍;
所述服务器基于所述第二坐标在抓拍图片中定位所述来源对象。
6.根据权利要求5所述的方法,其特征在于,所述服务器基于所述第二坐标在抓拍图片中定位所述来源对象,包括:
所述服务器对所述抓拍图片进行分析,以识别所述抓拍图片中的对象;所述对象包括行人、机动车辆或非机动车辆;
所述服务器基于识别出的对象在所述抓拍图片中的位置,以及所述第三坐标,确定所述来源对象;其中,所述第三坐标为所述第二坐标在所述抓拍设备的视频坐标系中对应的坐标。
7.根据权利要求6所述的方法,其特征在于,所述服务器确定所述来源对象之后,还包括:
当所述来源对象为机动车辆时,所述服务器生成针对所述音频信号的违法记录;所述违法记录包括以下至少之一:该机动车辆的抓拍图、所述音频信号的定位信息以及所述音频信号对应的音频波形图。
8.一种音频信号定位装置,其特征在于,应用于智能交通系统中的音频检测设备,包括:
检测单元,用于检测音频信号;
定位单元,用于当所述检测单元检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述音频信号的第一坐标;
变换单元,用于对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
通信单元,用于将所述第二坐标上报给服务器,并向所述服务器发送触发信号,以使所述服务器基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍,并基于所述第二坐标在抓拍图片中定位所述来源对象。
9.一种电子设备,其特征在于,该电子设备包括:
处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;所述处理器用于执行机器可执行指令,以实现权利要求1-4任一项所述的方法步骤。
10.一种智能交通系统,其特征在于,包括音频检测设备和服务器;其中:
所述音频检测设备,用于当检测到满足预设条件的音频信号时,对所述音频信号的来源对象进行定位,以得到所述来源对象的第一坐标;
所述音频检测设备,还用于对所述第一坐标进行变换,得到所述来源对象在所述音频检测设备的视频坐标系中的第二坐标;
所述音频检测设备,还用于将所述第二坐标上报给服务器,并向所述服务器发送触发信号;
所述服务器,用于基于所述触发信号,控制与所述音频检测设备关联的抓拍设备进行抓拍;
所述服务器,还用于基于所述第二坐标在抓拍图片中定位所述来源对象。
CN202010577199.XA 2020-06-22 2020-06-22 音频信号定位方法、装置、电子设备及智能交通系统 Pending CN111785032A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010577199.XA CN111785032A (zh) 2020-06-22 2020-06-22 音频信号定位方法、装置、电子设备及智能交通系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010577199.XA CN111785032A (zh) 2020-06-22 2020-06-22 音频信号定位方法、装置、电子设备及智能交通系统

Publications (1)

Publication Number Publication Date
CN111785032A true CN111785032A (zh) 2020-10-16

Family

ID=72756995

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010577199.XA Pending CN111785032A (zh) 2020-06-22 2020-06-22 音频信号定位方法、装置、电子设备及智能交通系统

Country Status (1)

Country Link
CN (1) CN111785032A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114966547A (zh) * 2022-05-18 2022-08-30 珠海视熙科技有限公司 一种提高声源定位精度的补偿方法、系统及装置

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201639751U (zh) * 2010-03-11 2010-11-17 成都丹玛尼科技有限公司 基于多麦克风阵列的定向定距语音采集系统
CN104794894A (zh) * 2015-01-29 2015-07-22 青岛智能产业技术研究院 一种汽车鸣笛噪声监视装置、系统及方法
CN107103759A (zh) * 2017-06-14 2017-08-29 合肥工业大学 一种车辆违停检测和车辆鸣笛声监测预警装置及其方法
CN107390205A (zh) * 2017-07-20 2017-11-24 清华大学 一种利用车联网获取前车特征的单目视觉车辆测距方法
CN108231085A (zh) * 2016-12-14 2018-06-29 杭州海康威视数字技术股份有限公司 一种声源定位方法及装置
CN108682161A (zh) * 2018-08-10 2018-10-19 东方智测(北京)科技有限公司 确认车辆鸣笛的方法和系统
CN109345834A (zh) * 2018-12-04 2019-02-15 北京中电慧声科技有限公司 机动车违法鸣笛捕获系统
CN109683135A (zh) * 2018-12-28 2019-04-26 科大讯飞股份有限公司 一种声源定位方法及装置、目标抓拍系统
CN109751547A (zh) * 2019-01-15 2019-05-14 西北工业大学 具有声音定位与识别功能的路灯
CN109900354A (zh) * 2019-02-22 2019-06-18 长沙世邦通信技术有限公司 一种鸣笛声音检测设备、鸣笛声音识别定位方法和系统
CN110033623A (zh) * 2019-04-25 2019-07-19 中国计量大学 一种汽车鸣笛抓拍装置的现场校准方法及系统
CN110632582A (zh) * 2019-09-25 2019-12-31 苏州科达科技股份有限公司 声源定位方法、装置及存储介质
CN110837077A (zh) * 2018-08-16 2020-02-25 杭州海康威视系统技术有限公司 一种声源位置校验方法及装置
CN111243283A (zh) * 2019-09-27 2020-06-05 杭州爱华仪器有限公司 一种基于声阵列的鸣笛车辆自动识别装置及方法

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201639751U (zh) * 2010-03-11 2010-11-17 成都丹玛尼科技有限公司 基于多麦克风阵列的定向定距语音采集系统
CN104794894A (zh) * 2015-01-29 2015-07-22 青岛智能产业技术研究院 一种汽车鸣笛噪声监视装置、系统及方法
CN108231085A (zh) * 2016-12-14 2018-06-29 杭州海康威视数字技术股份有限公司 一种声源定位方法及装置
CN107103759A (zh) * 2017-06-14 2017-08-29 合肥工业大学 一种车辆违停检测和车辆鸣笛声监测预警装置及其方法
CN107390205A (zh) * 2017-07-20 2017-11-24 清华大学 一种利用车联网获取前车特征的单目视觉车辆测距方法
CN108682161A (zh) * 2018-08-10 2018-10-19 东方智测(北京)科技有限公司 确认车辆鸣笛的方法和系统
CN110837077A (zh) * 2018-08-16 2020-02-25 杭州海康威视系统技术有限公司 一种声源位置校验方法及装置
CN109345834A (zh) * 2018-12-04 2019-02-15 北京中电慧声科技有限公司 机动车违法鸣笛捕获系统
CN109683135A (zh) * 2018-12-28 2019-04-26 科大讯飞股份有限公司 一种声源定位方法及装置、目标抓拍系统
CN109751547A (zh) * 2019-01-15 2019-05-14 西北工业大学 具有声音定位与识别功能的路灯
CN109900354A (zh) * 2019-02-22 2019-06-18 长沙世邦通信技术有限公司 一种鸣笛声音检测设备、鸣笛声音识别定位方法和系统
CN110033623A (zh) * 2019-04-25 2019-07-19 中国计量大学 一种汽车鸣笛抓拍装置的现场校准方法及系统
CN110632582A (zh) * 2019-09-25 2019-12-31 苏州科达科技股份有限公司 声源定位方法、装置及存储介质
CN111243283A (zh) * 2019-09-27 2020-06-05 杭州爱华仪器有限公司 一种基于声阵列的鸣笛车辆自动识别装置及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
季昊成等: "基于PreScan平台的单目视觉测距方法研究与虚拟试验", 《测控技术》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114966547A (zh) * 2022-05-18 2022-08-30 珠海视熙科技有限公司 一种提高声源定位精度的补偿方法、系统及装置

Similar Documents

Publication Publication Date Title
US20210074158A1 (en) Vehicular information systems and methods
CN107169402B (zh) 车辆车道定位
CN103675868B (zh) 用于使用视觉数据确定对象位置的方法和系统
CN112017250B (zh) 标定参数确定方法、装置、雷视设备和雷球接力系统
TWI502558B (zh) Traffic Accident Monitoring and Tracking System
CN106297281B (zh) 车辆违章检测的方法及设备
CN106228799B (zh) 监控非法篡改车辆位置信息的方法和装置
MX2014015475A (es) Deteccion movil de disparos.
WO2020022042A1 (ja) 劣化診断装置、劣化診断システム、劣化診断方法、プログラムを記憶する記憶媒体
JPWO2012056655A1 (ja) 交通事故検出装置及び交通事故検出方法
CN111785032A (zh) 音频信号定位方法、装置、电子设备及智能交通系统
CN113093791A (zh) 无人机身份鉴别的控制方法、控制器、设备及介质
CN112906426A (zh) 车辆监控方法、装置及设备、存储介质
CN114283588A (zh) 一种用于车辆鸣笛抓拍系统防误报的方法
US20210398425A1 (en) Vehicular information systems and methods
CN103794051A (zh) 基于停车信息的套牌车辆检测系统及相应的检测方法
JP2019507933A (ja) 車両用インフラ検出装置、信号の発生方法および修理情報の提供方法
CN114419922A (zh) 车位识别方法及装置
CN116127604B (zh) 一种汽车防撞数据处理方法及系统
US10643407B1 (en) Driving event recording method and system for non-image-based car accident cause determination
CN114755676B (zh) 一种雷达视觉协同的目标跟踪方法及系统
CN110745145A (zh) 用于adas的多传感器管理系统
US20220165151A1 (en) Traffic jam information providing device, traffic jam information processing method, and recording medium
US8786671B2 (en) Driving recorder system and method thereof
CN107274513B (zh) 预警式行车记录仪

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20201016