CN110740404A - 一种音频相关性的处理方法及音频处理装置 - Google Patents

一种音频相关性的处理方法及音频处理装置 Download PDF

Info

Publication number
CN110740404A
CN110740404A CN201910931491.4A CN201910931491A CN110740404A CN 110740404 A CN110740404 A CN 110740404A CN 201910931491 A CN201910931491 A CN 201910931491A CN 110740404 A CN110740404 A CN 110740404A
Authority
CN
China
Prior art keywords
audio
audio signals
audio signal
signal
domain
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910931491.4A
Other languages
English (en)
Other versions
CN110740404B (zh
Inventor
李志雄
黄石锋
黄庆杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Leafun Culture Science and Technology Co Ltd
Original Assignee
Guangzhou Leafun Culture Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Leafun Culture Science and Technology Co Ltd filed Critical Guangzhou Leafun Culture Science and Technology Co Ltd
Priority to CN201910931491.4A priority Critical patent/CN110740404B/zh
Publication of CN110740404A publication Critical patent/CN110740404A/zh
Application granted granted Critical
Publication of CN110740404B publication Critical patent/CN110740404B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00Acoustics not otherwise provided for
    • G10K15/08Arrangements for producing a reverberation or echo sound
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/02Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本发明实施例涉及音频处理技术领域,公开了一种音频相关性的处理方法及音频处理装置,该方法包括:获取拾音设备拾取的同一声源下的多个音频信号;将音频信号进行频域变换,以获得多个频域音频信号;更新频域音频信号的相位,以获得多个处理音频信号,其中,多个处理音频信号的相位均不相关;将处理音频信号进行时域变换,以获得多个时域音频信号;通过扩音设备输出时域音频信号。实施本发明实施例,能够减小音频信号的相关性,从而减少有害的声学反馈,提高传声增益。

Description

一种音频相关性的处理方法及音频处理装置
技术领域
本发明涉及音频处理技术领域,尤其涉及一种音频相关性的处理方法及音频处理装置。
背景技术
为了保证各类节目演出具有最佳的听觉效果,国内外建造了许多专业剧场,比如戏剧场、歌剧院和多功能厅等。这些专业剧场通常需要根据不同的节目演出(如歌剧、演唱等)来调整音频信号的混响时间以优化其声学环境。目前,现有的调节方式主要通过继续拾取扩音设备重放的音频信号来进行混响调节,直至该音频信号的能量衰减为零,以达到增加音频信号的混响时间的目的。然而,在实践中发现,当拾取的多个音频信号之间的相关性较强时,将会产生有害的声学反馈(比如啸叫),从而降低了传声增益。
发明内容
本发明实施例公开了一种音频相关性的处理方法及音频处理装置,能够减小音频信号的相关性,从而减少有害的声学反馈,提高传声增益。
本发明实施例第一方面公开一种音频相关性的处理方法,包括:
获取拾音设备拾取的同一声源下的多个音频信号;
将所述音频信号进行频域变换,以获得多个频域音频信号;
更新所述频域音频信号的相位,以获得多个处理音频信号;其中,所述多个处理音频信号的相位均不相关;
将所述处理音频信号进行时域变换,以获得多个时域音频信号;
通过扩音设备输出所述时域音频信号。
作为一种可选的实施方式,在本发明实施例第一方面中,在所述将所述音频信号进行频域变换,以获得多个频域音频信号之后,以及所述更新所述频域音频信号的相位,以获得多个处理音频信号之前,所述方法还包括:
对所述频域音频信号进行均衡滤波处理,以获得多个滤波音频信号;
对所述滤波音频信号进行延时处理,以获得多个延时音频信号;
以及,所述更新所述频域音频信号的相位,以获得多个处理音频信号,包括:
更新所述延时音频信号的相位,以获得多个处理音频信号。
作为一种可选的实施方式,在本发明实施例第一方面中,所述更新所述延时音频信号的相位,以获得多个处理音频信号,包括:
随机设定每个所述延时音频信号对应的相位值和变化频率;
按照所述相位值和变化频率,对所述延时音频信号的相位进行更新处理,以获得多个处理音频信号。
作为一种可选的实施方式,在本发明实施例第一方面中,在所述将所述处理音频信号进行时域变换,以获得多个时域音频信号之后,以及所述通过扩音设备输出所述时域音频信号之前,所述方法还包括:
按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号;
以及,所述通过扩音设备输出所述时域音频信号,包括:
通过扩音设备输出所述输出信号。
作为一种可选的实施方式,在本发明实施例第一方面中,所述音频处理装置通信连接于用于控制所述音频处理装置的终端设备;在所述按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号之后,以及所述通过扩音设备输出所述输出信号之前,所述方法还包括:
获取所述终端设备传送的目标演出模式;
确定所述目标演出模式对应的最佳混响参数;
根据所述最佳混响参数对所述音频处理装置进行配置,以使所述输出信号的混响时间达到最佳混响时间;
以及,所述通过扩音设备输出所述输出信号,包括:
将达到所述最佳混响时间的输出信号通过扩音设备进行输出。
本发明实施例第二方面公开一种音频处理装置,包括:
第一获取单元,用于获取拾音设备拾取的同一声源下的多个音频信号;
第一变换单元,用于将所述音频信号进行频域变换,以获得多个频域音频信号;
更新单元,用于更新所述频域音频信号的相位,以获得多个处理音频信号;其中,所述多个处理音频信号的相位均不相关;
第二变换单元,用于将所述处理音频信号进行时域变换,以获得多个时域音频信号;
输出单元,用于通过扩音设备输出所述时域音频信号。
作为一种可选的实施方式,在本发明实施例第二方面中,所述音频处理装置还包括:
第一处理单元,用于在所述第一变换单元将所述音频信号进行频域变换,以获得多个频域音频信号之后,以及所述更新单元更新所述频域音频信号的相位,以获得多个处理音频信号之前,对所述频域音频信号进行均衡滤波处理,以获得多个滤波音频信号;
第二处理单元,用于对所述滤波音频信号进行延时处理,以获得多个延时音频信号;
所述更新单元,具体用于更新所述延时音频信号的相位,以获得多个处理音频信号。
作为一种可选的实施方式,在本发明实施例第二方面中,所述更新单元包括:
设定子单元,用于随机设定每个所述延时音频信号对应的相位值和变化频率;
更新子单元,用于按照所述相位值和变化频率,对所述延时音频信号的相位进行更新处理,以获得多个处理音频信号。
作为一种可选的实施方式,在本发明实施例第二方面中,所述音频处理装置还包括:
还原单元,用于在所述第二变换单元将所述处理音频信号进行时域变换,以获得多个时域音频信号之后,以及所述输出单元通过扩音设备输出所述时域音频信号之前,按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号;
以及,所述输出单元,具体用于通过扩音设备输出所述输出信号。
作为一种可选的实施方式,在本发明实施例第二方面中,所述音频处理装置通信连接于用于控制所述音频处理装置的终端设备;所述音频处理装置还包括:
第二获取单元,用于在所述还原单元按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号之后,以及所述输出单元通过扩音设备输出所述输出信号之前,获取所述终端设备传送的目标演出模式;
确定单元,用于确定所述目标演出模式对应的最佳混响参数;
配置单元,用于根据所述最佳混响参数对所述音频处理装置进行配置,以使所述输出信号的混响时间达到最佳混响时间;
所述输出单元,具体用于将通过将达到所述最佳混响时间的输出信号通过扩音设备进行输出。
本发明实施例第三方面公开一种音频处理装置,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种音频相关性的处理方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种音频相关性的处理方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,音频处理装置获取拾音设备拾取的同一声源下的多个音频信号,然后将音频信号进行频域变换获得多个频域音频信号,并更新频域音频信号的相位获得多个处理音频信号,接着将处理音频信号进行时域变换获得时域音频信号并通过扩音设备输出时域音频信号。可见,实施本发明实施例,将音频信号进行频域变换获得频域音频信号后,通过更新频域音频信号的相位,使得更新后获得的多个处理音频信号的相位均不相关,再将处理音频信号进行时域变换并通过扩音设备进行输出,能够减小音频信号的相关性,从而减少有害的声学反馈,提高传声增益。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种音频相关性的处理方法的流程示意图;
图2是本发明实施例公开的另一种音频相关性的处理方法的流程示意图;
图3是本发明实施例公开的一种音频处理装置的结构示意图;
图4是本发明实施例公开的另一种音频处理装置的结构示意图;
图5是本发明实施例公开的又一种音频处理装置的结构示意图;
图6是本发明实施例公开的一种适用于音频相关性的处理方法的构架示意图;
图7是本发明实施例公开的一种多通道均衡器示意图;
图8是本发明实施例公开的一种多通道延时器示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本发明中,术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或位置关系。这些术语主要是为了更好地描述本发明及其实施例,并非用于限定所指示的装置、元件或组成部分必须具有特定方位,或以特定方位进行构造和操作。
并且,上述部分术语除了可以用于表示方位或位置关系以外,还可能用于表示其他含义,例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言,可以根据具体情况理解这些术语在本发明中的具体含义。
此外,术语“安装”、“设置”、“设有”、“连接”、“相连”应做广义理解。例如,可以是固定连接,可拆卸连接,或整体式构造;可以是机械连接,或电连接;可以是直接相连,或者是通过中间媒介间接相连,又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
本发明实施例公开了一种减小音频相关性的方法及音频处理装置,能够减小音频的相关性,从而提高混响调节的效果。以下结合附图进行详细描述。
为了更好地理解本发明实施例公开的一种音频相关性的处理方法及音频处理装置,下面先对本发明实施例适用的构架进行描述。请参阅图6,图6是本发明实施例公开的一种适用于音频相关性的处理方法的构架示意图。如图6所示,该适用于音频相关性的处理方法的构架示意图可以包括多个拾音设备(如麦克风)、音频处理装置以及多个扩音设备(如音箱)。其中,拾音设备可以拾取音频信号并将音频信号传输给音频处理装置进行处理,当音频处理装置对音频信号进行处理后,可以将处理后的音频信号传输给扩音设备进行输出。基于图6所示的构架示意图,下面对本发明实施例公开的音频相关性的处理方法及音频处理装置进行说明。
实施例一
请参阅图1,图1是本发明实施例公开的一种音频相关性的处理方法的流程示意图。如图1所示,该方法可以包括以下步骤。
101、音频处理装置获取拾音设备拾取的同一声源下的多个音频信号。
本发明实施例中,音频处理装置连接多个拾音设备,因此,拾音设备拾取音频信号后,可以将音频信号传输给音频处理装置。其中,音频信号可以包括初始音频信号(即原始声源)和经过扩音设备重放的混响音频信号(即次级声源),由于原始声源和次级声源来自同一声源,因此,拾音设备拾取的同一声源下的多个音频信号之间具有相关性。
作为一种可选的实施方式,在步骤101音频处理装置获取拾音设备拾取的同一声源下的多个音频信号之后,还可以执行以下步骤:
获取拾音设备拾取的初始音频信号的振动频率和振动方向;
根据拾音设备拾取的初始音频信号的振动频率和振动方向对音频信号进行识别,以获得多个目标音频信号;
以及,步骤102音频处理装置将音频信号进行频域变换,以获得多个频域音频信号,包括:
将目标音频信号进行频域变换,以获得多个频域音频信号。
本发明实施例中,可以理解的是,振动频率相同、振动方向平行的两个音频信号之间的相关性较强,因此,音频处理装置可以根据振动频率和振动方向对音频信号进行识别,将振动频率相同、振动方向平行的音频信号作为目标音频信号,并对目标音频信号进行频域变换。
实施该可选的实施方式,能够对音频信号进行初步处理,将相关性较强的音频信号筛选出来以便后续进一步处理,提高了工作效率。
102、音频处理装置将音频信号进行频域变换,以获得多个频域音频信号。
本发明实施例中,频域是一个遵循特定规则的数学范畴,有助于数学分析的顺利进行,因此,在对音频信号进行处理之前,音频处理装置可以将音频信号进行频域变换,以获得多个频域音频信号。
103、音频处理装置更新频域音频信号的相位,以获得多个处理音频信号。
本发明实施例中,上述多个处理音频信号的相位均不相关。可选的,多个处理音频信号的相位均不相关可以指任意两个处理音频信号的相位交叉谱之间的差值大于0.5,本发明实施例不作限定。
可以理解的是,因为频域音频信号的相位之间的关系越紧密,频域音频信号的相关性越强,将会产生有害的声学反馈(如啸叫),比如两个频域音频信号的相位相同或两个频域音频信号的相位之间的比值为整数,此时这两个频域音频信号相关性较强,如果直接通过扩音设备进行输出,可能会产生啸叫。再者,人耳对相位的改变敏感度较低,因此,在本发明实施例中,音频处理装置可以对频域音频信号的相位进行更新,从而降低其相关性。
104、音频处理装置将处理音频信号进行时域变换,以获得多个时域音频信号。
本发明实施例中,处理过程中的处理音频信号的域均为频域,因为人们的经历都是在时域中发展和验证的,已经习惯于事件按时间的先后顺序地发生,因此,音频处理装置可以将处理音频信号进行时域变换,以获得多个时域音频信号,再将时域音频信号通扩音设备进行输出。
105、音频处理装置通过扩音设备输出时域音频信号。
本发明实施例中,音频处理装置连接多个扩音设备,因此,音频处理装置可以通过扩音设备输出时域音频信号。
可见,实施图1所描述的方法,将音频信号进行频域变换获得频域音频信号后,通过更新频域音频信号的相位,使得更新后获得的多个处理音频信号的相位均不相关,再将处理音频信号进行时域变换并通过扩音设备进行输出,能够减小音频信号的相关性,从而减少有害的声学反馈,提高传声增益。
实施例二
请参阅图2,图2是本发明实施例公开的另一种音频相关性的处理方法的流程示意图。如图2所示,该音频处理装置通信连接于用于控制音频处理装置的终端设备,该方法可以包括以下步骤。
201、音频处理装置获取拾音设备拾取的同一声源下的多个音频信号。
本发明实施例中,音频处理装置连接多个拾音设备,因此,拾音设备拾取音频信号后,可以将音频信号传输给音频处理装置。其中,音频信号可以包括初始音频信号(即原始声源)和经过扩音设备重放的混响音频信号(即次级声源),由于原始声源和次级声源来自同一声源,因此,拾音设备拾取的同一声源下的多个音频信号之间具有相关性。
202、音频处理装置将音频信号进行频域变换,以获得多个频域音频信号。
本发明实施例中,频域是一个遵循特定规则的数学范畴,有助于数学分析的顺利进行,因此,在对音频信号进行处理之前,音频处理装置可以将音频信号进行频域变换,以获得多个频域音频信号。
203、音频处理装置对频域音频信号进行均衡滤波处理,以获得多个滤波音频信号。
本发明实施例中,音频处理装置可以设有多通道均衡器,相应地音频处理装置可以通过其设置的多通道均衡器对频域音频信号进行均衡滤波处理,能够对频域音频信号的音色进行调整。请一并参阅图7,图7是本发明实施例公开的一种多通道均衡器示意图。如图7所示,该多通道均衡器的通道数量与拾音设备的通道数量一致,每个通道包括一个五段参量均衡器,能够对频域音频信号进行均衡滤波处理,以获得多个滤波音频信号。
204、音频处理装置对滤波音频信号进行延时处理,以获得多个延时音频信号。
本发明实施例中,音频处理装置可以设有多通道延时器,相应地音频处理装置可以通过其设置的多通道延时器对滤波音频信号进行延时处理,能够使声场变得更具空间感。请一并参阅图8,图8是本发明实施例公开的一种多通道延时器示意图。如图8所示,该多通道延时器的通道数量与拾音设备的通道数量一致,每个通道包括一个延时器,能够将滤波音频信号通过延时器进行延时处理,以获得多个延时音频信号。
本发明实施例中,实施步骤203-步骤204,对频域音频信号依次进行均衡滤波处理和延时处理,能够对频域音频信号进行音色的调整,以及使声场变得更具空间感。
205、音频处理装置随机设定每个延时音频信号对应的相位值和变化频率。
206、音频处理装置按照随机设定每个延时音频信号对应的相位值和变化频率,对延时音频信号的相位进行更新处理,以获得多个处理音频信号。
本发明实施例中,为了尽可能地减小每个延时音频信号之间的相关性,因此,对相位值的设定为随机设定,对变化频率的设定也为随机设定,也就是说,变化频率不固定,更新相位时的相位值也不固定。在本发明实施例中,音频处理装置先随机设定每个延时音频信号对应的相位值和变化频率,然后按照随机设定好的每个延时音频信号对应的相位值和变化频率,对延时音频信号的相位进行更新处理,得到多个处理音频信号。可选的,音频处理装置可以以不同变化频率(均低于10Hz)、不同的相位值持续更新多个延时音频信号的相位。
本发明实施例中,实施步骤205-步骤206,提供了一种相位的更新方法,能够极大地减少更新相位后获得的信号之间的相关性。
207、音频处理装置将处理音频信号进行时域变换,以获得多个时域音频信号。
本发明实施例中,处理过程中的处理音频信号的域均为频域,因为人们的经历都是在时域中发展和验证的,已经习惯于事件按时间的先后顺序地发生,因此,音频处理装置可以将处理音频信号进行时域变换,以获得多个时域音频信号,再将时域音频信号通扩音设备进行输出。
208、音频处理装置按照音频信号的信号长度还原时域音频信号的信号长度,以获得多个输出信号。
本发明实施例中,在音频处理装置将音频信号进行频域变换的过程中,可能会导致音频信号的信号长度发生改变,因此,音频处理装置可以按照音频信号的信号长度还原时域音频信号的信号长度。
本发明实施例中,实施步骤208,按照音频信号的信号长度还原时域音频信号的信号长度,能够保证信号的质量。
209、音频处理装置获取终端设备传送的目标演出模式。
其中,终端设备可以包括与该音频处理装置相关联的移动终端设备、遥控设备以及总控服务器等,对此不作限定。目标演出模式可以包括演唱会、音乐剧、戏剧、舞蹈、魔术和综艺等,对此亦不作限定。
210、音频处理装置确定目标演出模式对应的最佳混响参数。
本发明实施例中,可以理解的是,每种目标演出模式与该目标演出模式相匹配的最佳混响参数关联存储,因此,音频处理装置可以确定出目标演出模式对应的最佳混响参数,能够提高音频信号装置的智能化程度;此外,还能够减少多余的人工调试步骤,改善了用户体验。
211、音频处理装置根据最佳混响参数对音频处理装置进行配置,以使输出信号的混响时间达到最佳混响时间。
本发明实施例中,混响时间为以厅堂内声场的声能密度衰减到原始值的百万分之一时所经过的时间,也就是说,混响时间可定义为厅堂内声音已达到稳态后停止声源发声,平均声能密度自原始值衰减60分贝所需的时间。
本发明实施例中,可以理解的是,目标演出模式不同,对应的最佳混响时间也不同,比如音乐剧和演唱会所需要的最佳混响时间就不同。
212、音频处理装置将达到最佳混响时间的输出信号通过扩音设备进行输出。
本发明实施例中,实施步骤209-步骤211,根据最佳混响参数对音频处理装置进行配置,以使输出信号的混响时间达到最佳混响时间,能够保证厅堂具有最佳的听觉效果。
212、音频处理装置将达到最佳混响时间的输出信号通过扩音设备进行输出。
可见,实施图2所描述的方法,将音频信号进行频域变换获得频域音频信号后,通过更新频域音频信号的相位,使得更新后获得的多个处理音频信号的相位均不相关,再将处理音频信号进行时域变换并通过扩音设备进行输出,能够减小音频信号的相关性,从而减少有害的声学反馈,提高传声增益。此外,实施图2所描述的方法,对频域音频信号依次进行均衡滤波处理和延时处理,能够对频域音频信号进行音色的调整,以及使声场变得更具空间感。此外,实施图2所描述的方法,提供了一种相位的更新方法,能够极大地减少更新相位后获得的信号之间的相关性。此外,实施图2所描述的方法,按照音频信号的信号长度还原时域音频信号的信号长度,能够保证信号的质量。此外,实施图2所描述的方法,根据最佳混响参数对音频处理装置进行配置,以使输出信号的混响时间达到最佳混响时间,能够保证厅堂具有最佳的听觉效果。
实施例三
请参阅图3,图3是本发明实施例公开的一种音频处理装置的结构示意图。如图3所示,该音频处理装置可以包括:
第一获取单元301,用于获取拾音设备拾取的同一声源下的多个音频信号。
本发明实施例中,音频处理装置连接多个拾音设备,因此,拾音设备拾取音频信号后,可以将音频信号传输给第一获取单元301。其中,音频信号可以包括初始音频信号(即原始声源)和经过扩音设备重放的混响音频信号(即次级声源),由于原始声源和次级声源来自同一声源,因此,拾音设备拾取的同一声源下的多个音频信号之间具有相关性。
作为一种可选的实施方式,在第一获取单元301获取拾音设备拾取的同一声源下的多个音频信号之后,还可以执行以下步骤:
获取拾音设备拾取的初始音频信号的振动频率和振动方向;
根据拾音设备拾取的初始音频信号的振动频率和振动方向对音频信号进行识别,以获得多个目标音频信号;
以及,第一变换单元302具体用于将目标音频信号进行频域变换,以获得多个频域音频信号。
本发明实施例中,可以理解的是,振动频率相同、振动方向平行的两个音频信号之间的相关性较强,因此,第一获取单元301可以根据振动频率和振动方向对音频信号进行识别,将振动频率相同、振动方向平行的音频信号作为目标音频信号,然后通过更新单元302对目标音频信号进行更频域变换。
实施该可选的实施方式,能够对音频信号进行初步处理,将相关性较强的音频信号筛选出来以便后续进一步处理,提高了工作效率。
第一变换单元302,用于将音频信号进行频域变换,以获得多个频域音频信号。
更新单元303,用于更新频域音频信号的相位,以获得多个处理音频信号。
本发明实施例中,上述多个处理音频信号的相位均不相关,可选的,多个处理音频信号的相位均不相关可以指任意两个处理音频信号的相位交叉谱之间的差值大于0.5,本发明实施例不作限定。
第二变换单元304,用于将处理音频信号进行时域变换,以获得多个时域音频信号。
输出单元305,用于通过扩音设备输出时域音频信号。
本发明实施例中,音频处理装置连接多个扩音设备,因此,输出单元304可以通过扩音设备输出时域音频信号。
可见,实施图3所描述的音频处理装置,将音频信号进行频域变换获得频域音频信号后,通过更新频域音频信号的相位,使得更新后获得的多个处理音频信号的相位均不相关,再将处理音频信号进行时域变换并通过扩音设备进行输出,能够减小音频信号的相关性,从而减少有害的声学反馈,提高传声增益。
实施例四
请参阅图4,图4是本发明实施例公开的另一种音频处理装置的结构示意图。其中,图4所示的音频处理装置是由图3所示的音频处理装置进一步优化得到的。与图3所示的音频处理装置相比较,图4所示的音频处理装置还可以包括:
第一处理单元306,用于在第一变换单元302将音频信号进行频域变换,以获得多个频域音频信号之后,以及更新单元303更新频域音频信号的相位,以获得多个处理音频信号之前,对频域音频信号进行均衡滤波处理,以获得多个滤波音频信号。
本发明实施例中,音频处理装置可以设有多通道均衡器,相应地第一处理单元306可以通过多通道均衡器对音频信号进行均衡滤波处理,能够对音频信号的音色进行调整。
第二处理单元307,用于对滤波音频信号进行延时处理,以获得多个延时音频信号。
本发明实施例中,音频处理装置可以设有多通道延时器,相应地第二处理单元307可以通过多通道延时器对滤波音频信号进行延时处理,能够使声场变得更具空间感。
更新单元303,具体用于更新延时音频信号的相位,以获得多个处理音频信号。
更新单元303包括:
设定子单元3031,用于随机设定每个延时音频信号对应的相位值和变化频率;
更新子单元3032,用于按照随机设定每个延时音频信号对应的相位值和变化频率,对延时音频信号的相位进行更新处理,以获得多个处理音频信号。
本发明实施例中,为了尽可能地减小每个延时音频信号之间的相关性,因此,对相位值的设定为随机设定,对变化频率的设定也为随机设定,也就是说,变化频率不固定,更新相位时的相位值也不固定。在本发明实施例中,设定子单元3031先随机设定每个延时音频信号对应的相位值和变化频率,然后更新子单元3032按照随机设定好的每个延时音频信号对应的相位值和变化频率,对延时音频信号的相位进行更新处理,得到多个处理音频信号。可选的,音频处理装置可以以不同变化频率(均低于10Hz)、不同的相位值持续更新多个延时音频信号的相位。
还原单元308,用于在第二变换单元304将处理音频信号进行时域变换,以获得多个时域音频信号之后,以及输出单元305通过扩音设备输出时域音频信号之前,按照音频信号的信号长度还原时域音频信号的信号长度,以获得多个输出信号。
本发明实施例中,在将音频信号进行频域变换的过程中,可能会导致音频信号的信号长度发生改变,因此,还原单元308可以按照音频信号的信号长度还原时域音频信号的信号长度。
输出单元305,具体用于通过扩音设备输出上述输出信号。
第二获取单元309,用于在还原单元308按照音频信号的信号长度还原时域音频信号的信号长度,以获得多个输出信号之后,以及输出单元305通过扩音设备输出上述输出信号之前,获取终端设备传送的目标演出模式。
其中,终端设备可以包括与该音频处理装置相关联的移动终端设备、遥控设备以及总控服务器等,对此不作限定。目标演出模式可以包括演唱会、音乐剧、戏剧、舞蹈、魔术和综艺等,对此亦不作限定。
确定单元310,用于确定目标演出模式对应的最佳混响参数。
本发明实施例中,可以理解的是,每种目标演出模式与该目标演出模式相匹配的最佳混响参数关联存储,因此,确定单元310可以确定出目标演出模式对应的最佳混响参数,能够提高音频信号装置的智能化程度;此外,还能够减少多余的人工调试步骤,改善了用户体验。
配置单元311,用于根据最佳混响参数对音频处理装置进行配置,以使输出信号的混响时间达到最佳混响时间。
本发明实施例中,混响时间为以厅堂内声场的声能密度衰减到原始值的百万分之一时所经过的时间,也就是说,混响时间可定义为厅堂内声音已达到稳态后停止声源发声,平均声能密度自原始值衰减60分贝所需的时间。
本发明实施例中,可以理解的是,目标演出模式不同,对应的最佳混响时间也不同,比如音乐剧和演唱会所需要的最佳混响时间就不同。
输出单元305,具体用于将达到最佳混响时间的输出信号通过扩音设备进行输出。
可见,实施图4所描述的音频处理装置,将音频信号进行频域变换获得频域音频信号后,通过更新频域音频信号的相位,使得更新后获得的多个处理音频信号的相位均不相关,再将处理音频信号进行时域变换并通过扩音设备进行输出,能够减小音频信号的相关性,从而减少有害的声学反馈,提高传声增益。此外,实施图4所描述的音频处理装置,对频域音频信号依次进行均衡滤波处理和延时处理,能够对频域音频信号进行音色的调整,以及使声场变得更具空间感。此外,实施图4所描述的音频处理装置,提供了一种相位的更新方法,能够极大地减少更新相位后获得的信号之间的相关性。此外,实施图4所描述的音频处理装置,按照音频信号的信号长度还原时域音频信号的信号长度,能够保证信号的质量。此外,实施图4所描述的音频处理装置,根据最佳混响参数对音频处理装置进行配置,以使输出信号的混响时间达到最佳混响时间,能够保证厅堂具有最佳的听觉效果。
实施例五
请参阅图5,图5是本发明实施例公开的又一种音频处理装置的结构示意图。如图5所示,该音频处理装置可以包括:
存储有可执行程序代码的存储器501;
与存储器501耦合的处理器502;
其中,处理器502调用存储器501中存储的可执行程序代码,执行图1~图2任意一种音频相关性的处理方法。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1~图2任意一种音频相关性的处理方法。
本发明实施例公开一种计算机程序产品,该计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,且该计算机程序可操作来使计算机执行图1~图2任意一种音频相关性的处理方法。
本发明实施例还公开一种应用发布平台,其中,应用发布平台用于发布计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本发明所必须的。
在本发明的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。
在本发明所提供的实施例中,应理解,“与A对应的B”表示B与A相关联,根据A可以确定B。但还应理解,根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其他信息确定B。
在本发明的各种实施例中,应理解,“A和/或B”的含义指的是A和B各自单独存在或者A和B同时存在的情况均包括在内。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种音频相关性的处理方法及音频处理装置进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种音频相关性的处理方法,其特征在于,包括:
获取拾音设备拾取的同一声源下的多个音频信号;
将所述音频信号进行频域变换,以获得多个频域音频信号;
更新所述频域音频信号的相位,以获得多个处理音频信号;其中,所述多个处理音频信号的相位均不相关;
将所述处理音频信号进行时域变换,以获得多个时域音频信号;
通过扩音设备输出所述时域音频信号。
2.根据权利要求1所述的方法,其特征在于,在所述将所述音频信号进行频域变换,以获得多个频域音频信号之后,以及所述更新所述频域音频信号的相位,以获得多个处理音频信号之前,所述方法还包括:
对所述频域音频信号进行均衡滤波处理,以获得多个滤波音频信号;
对所述滤波音频信号进行延时处理,以获得多个延时音频信号;
以及,所述更新所述频域音频信号的相位,以获得多个处理音频信号,包括:
更新所述延时音频信号的相位,以获得多个处理音频信号。
3.根据权利要求2所述的方法,其特征在于,所述更新所述延时音频信号的相位,以获得多个处理音频信号,包括:
随机设定每个所述延时音频信号对应的相位值和变化频率;
按照所述相位值和变化频率,对所述延时音频信号的相位进行更新处理,以获得多个处理音频信号。
4.根据权利要求1至3任一项所述的方法,其特征在于,在所述将所述处理音频信号进行时域变换,以获得多个时域音频信号之后,以及所述通过扩音设备输出所述时域音频信号之前,所述方法还包括:
按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号;
以及,所述通过扩音设备输出所述时域音频信号,包括:
通过扩音设备输出所述输出信号。
5.根据权利要求4所述的方法,其特征在于,所述音频处理装置通信连接于用于控制所述音频处理装置的终端设备;在所述按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号之后,以及所述通过扩音设备输出所述输出信号之前,所述方法还包括:
获取所述终端设备传送的目标演出模式;
确定所述目标演出模式对应的最佳混响参数;
根据所述最佳混响参数对所述音频处理装置进行配置,以使所述输出信号的混响时间达到最佳混响时间;
以及,所述通过扩音设备输出所述输出信号,包括:
将达到所述最佳混响时间的输出信号通过扩音设备进行输出。
6.一种音频处理装置,其特征在于,包括:
第一获取单元,用于获取拾音设备拾取的同一声源下的多个音频信号;
第一变换单元,用于将所述音频信号进行频域变换,以获得多个频域音频信号;
更新单元,用于更新所述频域音频信号的相位,以获得多个处理音频信号;其中,所述多个处理音频信号的相位均不相关;
第二变换单元,用于将所述处理音频信号进行时域变换,以获得多个时域音频信号;
输出单元,用于通过扩音设备输出所述时域音频信号。
7.根据权利要求6所述的音频处理装置,其特征在于,所述音频处理装置还包括:
第一处理单元,用于在所述第一变换单元将所述音频信号进行频域变换,以获得多个频域音频信号之后,以及所述更新单元更新所述频域音频信号的相位,以获得多个处理音频信号之前,对所述频域音频信号进行均衡滤波处理,以获得多个滤波音频信号;
第二处理单元,用于对所述滤波音频信号进行延时处理,以获得多个延时音频信号;
所述更新单元,具体用于更新所述延时音频信号的相位,以获得多个处理音频信号。
8.根据权利要求7所述的音频处理装置,其特征在于,所述更新单元包括:
设定子单元,用于随机设定每个所述延时音频信号对应的相位值和变化频率;
更新子单元,用于按照所述相位值和变化频率,对所述延时音频信号的相位进行更新处理,以获得多个处理音频信号。
9.根据权利要求6至8任一项所述的音频处理装置,其特征在于,所述音频处理装置还包括:
还原单元,用于在所述第二变换单元将所述处理音频信号进行时域变换,以获得多个时域音频信号之后,以及所述输出单元通过扩音设备输出所述时域音频信号之前,按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号;
以及,所述输出单元,具体用于通过扩音设备输出所述输出信号。
10.根据权利要求9所述的音频处理装置,其特征在于,所述音频处理装置通信连接于用于控制所述音频处理装置的终端设备;所述音频处理装置还包括:
第二获取单元,用于在所述还原单元按照所述音频信号的信号长度还原所述时域音频信号的信号长度,以获得多个输出信号之后,以及所述输出单元通过扩音设备输出所述输出信号之前,获取所述终端设备传送的目标演出模式;
确定单元,用于确定所述目标演出模式对应的最佳混响参数;
配置单元,用于根据所述最佳混响参数对所述音频处理装置进行配置,以使所述输出信号的混响时间达到最佳混响时间;
所述输出单元,具体用于将达到所述最佳混响时间的输出信号通过扩音设备进行输出。
CN201910931491.4A 2019-09-27 2019-09-27 一种音频相关性的处理方法及音频处理装置 Active CN110740404B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910931491.4A CN110740404B (zh) 2019-09-27 2019-09-27 一种音频相关性的处理方法及音频处理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910931491.4A CN110740404B (zh) 2019-09-27 2019-09-27 一种音频相关性的处理方法及音频处理装置

Publications (2)

Publication Number Publication Date
CN110740404A true CN110740404A (zh) 2020-01-31
CN110740404B CN110740404B (zh) 2020-12-25

Family

ID=69269831

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910931491.4A Active CN110740404B (zh) 2019-09-27 2019-09-27 一种音频相关性的处理方法及音频处理装置

Country Status (1)

Country Link
CN (1) CN110740404B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113808569A (zh) * 2021-11-19 2021-12-17 科大讯飞(苏州)科技有限公司 一种混响构建方法及其相关设备

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1402593A (zh) * 2002-07-23 2003-03-12 华南理工大学 一种5.1通路环绕声的耳机重发的信号处理方法
US20060045275A1 (en) * 2002-11-19 2006-03-02 France Telecom Method for processing audio data and sound acquisition device implementing this method
CN1781338A (zh) * 2003-04-30 2006-05-31 编码技术股份公司 基于复指数调制的滤波器组的高级处理和自适应时间信号传送方法
CN101223820A (zh) * 2005-07-15 2008-07-16 松下电器产业株式会社 信号处理装置
CN101477797A (zh) * 2008-11-24 2009-07-08 广州励丰声光科技有限公司 厅堂声学环境仿真系统
US20090185693A1 (en) * 2008-01-18 2009-07-23 Microsoft Corporation Multichannel sound rendering via virtualization in a stereo loudspeaker system
CN101543098A (zh) * 2007-04-17 2009-09-23 弗劳恩霍夫应用研究促进协会 去相关信号的产生
CN102844808A (zh) * 2010-11-03 2012-12-26 华为技术有限公司 用于编码多通道音频信号的参数编码器
US20130034235A1 (en) * 2011-08-01 2013-02-07 Samsung Electronics Co., Ltd. Signal processing apparatus and method for providing spatial impression
CN103269474A (zh) * 2007-07-19 2013-08-28 弗劳恩霍夫应用研究促进协会 生成具有增强的感知质量的立体声信号的方法和装置
CN104995676A (zh) * 2013-02-14 2015-10-21 杜比实验室特许公司 音频处理系统中的信号去相关
CN106714040A (zh) * 2017-01-17 2017-05-24 宁波音王电声股份有限公司 一种数字可变混响音频系统及其实现方法
CN110082725A (zh) * 2019-03-12 2019-08-02 西安电子科技大学 基于麦克风阵列的声源定位时延估计方法、声源定位系统

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1402593A (zh) * 2002-07-23 2003-03-12 华南理工大学 一种5.1通路环绕声的耳机重发的信号处理方法
US20060045275A1 (en) * 2002-11-19 2006-03-02 France Telecom Method for processing audio data and sound acquisition device implementing this method
CN1781338A (zh) * 2003-04-30 2006-05-31 编码技术股份公司 基于复指数调制的滤波器组的高级处理和自适应时间信号传送方法
CN101223820A (zh) * 2005-07-15 2008-07-16 松下电器产业株式会社 信号处理装置
CN101543098A (zh) * 2007-04-17 2009-09-23 弗劳恩霍夫应用研究促进协会 去相关信号的产生
CN103269474A (zh) * 2007-07-19 2013-08-28 弗劳恩霍夫应用研究促进协会 生成具有增强的感知质量的立体声信号的方法和装置
US20090185693A1 (en) * 2008-01-18 2009-07-23 Microsoft Corporation Multichannel sound rendering via virtualization in a stereo loudspeaker system
CN101477797A (zh) * 2008-11-24 2009-07-08 广州励丰声光科技有限公司 厅堂声学环境仿真系统
CN102844808A (zh) * 2010-11-03 2012-12-26 华为技术有限公司 用于编码多通道音频信号的参数编码器
US20130034235A1 (en) * 2011-08-01 2013-02-07 Samsung Electronics Co., Ltd. Signal processing apparatus and method for providing spatial impression
CN104995676A (zh) * 2013-02-14 2015-10-21 杜比实验室特许公司 音频处理系统中的信号去相关
CN106714040A (zh) * 2017-01-17 2017-05-24 宁波音王电声股份有限公司 一种数字可变混响音频系统及其实现方法
CN110082725A (zh) * 2019-03-12 2019-08-02 西安电子科技大学 基于麦克风阵列的声源定位时延估计方法、声源定位系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
丁雷: "电声可调混响技术在多功能剧院中的应用", 《电声技术》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113808569A (zh) * 2021-11-19 2021-12-17 科大讯飞(苏州)科技有限公司 一种混响构建方法及其相关设备

Also Published As

Publication number Publication date
CN110740404B (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
AU2017272228B2 (en) Signal Enhancement Using Wireless Streaming
CN106664473B (zh) 信息处理装置、信息处理方法和程序
JP2003506984A (ja) 音再生のための補償システムおよび補償方法
JP2003511881A (ja) 音響補正装置
CN101622805A (zh) 用于智能均衡的系统和方法
JP2011010183A (ja) 楽曲再生システム、携帯端末装置および楽曲再生プログラム
CN108886650A (zh) 用于音频再现的子带空间和串扰消除
CN111966322A (zh) 音频信号处理方法、装置、设备及存储介质
CN110268727A (zh) 具有先进的环绕处理功能的可配置的多带压缩器架构
WO2016042410A1 (en) Techniques for acoustic reverberance control and related systems and methods
CN113424558A (zh) 智能个人助理
CN116437268B (zh) 自适应分频的环绕声上混方法、装置、设备及存储介质
CN110740404B (zh) 一种音频相关性的处理方法及音频处理装置
US20080285768A1 (en) Method and System for Modifying and Audio Signal, and Filter System for Modifying an Electrical Signal
JP2023544253A (ja) バイノーラル記録を処理するための方法及びデバイス
JP6798392B2 (ja) 効果付与装置及び効果付与プログラム
CN110740416B (zh) 一种音频信号处理方法及装置
JP2000099039A (ja) 拡声音の明瞭度改善方法及び装置
JP2015070291A (ja) 集音・放音装置、音源分離ユニット及び音源分離プログラム
WO2023286326A1 (ja) 情報処理装置、情報処理方法およびプログラム
CN113286249B (zh) 音信号处理方法及音信号处理装置
CN113286250B (zh) 音信号处理方法及音信号处理装置
JP7403436B2 (ja) 異なる音場の複数の録音音響信号を合成する音響信号合成装置、プログラム及び方法
US10812902B1 (en) System and method for augmenting an acoustic space
CN109586738B (zh) 用于乐器的无线接收机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant