CN112785998B - 信号处理方法、设备及装置 - Google Patents

信号处理方法、设备及装置 Download PDF

Info

Publication number
CN112785998B
CN112785998B CN202011602350.7A CN202011602350A CN112785998B CN 112785998 B CN112785998 B CN 112785998B CN 202011602350 A CN202011602350 A CN 202011602350A CN 112785998 B CN112785998 B CN 112785998B
Authority
CN
China
Prior art keywords
signals
processing
frequency
signal
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011602350.7A
Other languages
English (en)
Other versions
CN112785998A (zh
Inventor
刘欢
方思敏
张菊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Spreadtrum Communications Shanghai Co Ltd
Original Assignee
Spreadtrum Communications Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Spreadtrum Communications Shanghai Co Ltd filed Critical Spreadtrum Communications Shanghai Co Ltd
Priority to CN202011602350.7A priority Critical patent/CN112785998B/zh
Publication of CN112785998A publication Critical patent/CN112785998A/zh
Priority to PCT/CN2021/131330 priority patent/WO2022142833A1/zh
Application granted granted Critical
Publication of CN112785998B publication Critical patent/CN112785998B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1785Methods, e.g. algorithms; Devices
    • G10K11/17853Methods, e.g. algorithms; Devices of the filter
    • G10K11/17854Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083Reduction of ambient noise
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/10Applications
    • G10K2210/108Communication systems, e.g. where useful sound is kept and noise is cancelled
    • G10K2210/1081Earphones, e.g. for telephones, ear protectors or headsets
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/30Means
    • G10K2210/301Computational
    • G10K2210/3028Filtering, e.g. Kalman filters or special analogue or digital filters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本申请实施例提供一种信号处理方法、设备及装置。其中,信号处理方法包括:获取至少两个麦克风采集的初始噪声信号;对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。用于提高目标噪声信号的准确性。

Description

信号处理方法、设备及装置
技术领域
本申请实施例涉及耳机主动降噪技术领域,尤其涉及一种信号处理方法、设备及装置。
背景技术
耳机可以将音频信号转换为用户可以听到的声音。当用户佩戴耳机听声音时,用户听到的声音通常受到外界噪声的干扰。目前为了降低外界噪声对声音的干扰,通常需要获取噪声信号。
在相关技术中,获取噪声信号的方法包括:采集外界噪声;通过预设滤波器对外界噪声进行滤波处理,得到噪声信号。在上述相关技术中,通过预设滤波器对外界噪声进行滤波处理,得到噪声信号,导致得到的噪声信号的准确性较差。
发明内容
本申请实施例提供一种信号处理方法、设备及装置。用于目标噪声信号的准确性。
第一方面,本申请实施例提供一种信号处理方法,包括:
获取至少两个麦克风采集的初始噪声信号;
对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;
对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。
在一种可能的设计中,至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;
初始噪声信号包括:至少一个第一麦克风采集得到的第一初始噪声信号和至少一个第二麦克风采集得到的第二初始噪声信号。
在一种可能的设计中,对初始噪声信号进行频率分级处理,得到至少两个分频信号,包括:
对第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号;
对第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号,至少两个分频信号包括:至少两个第一分频信号和至少两个第二分频信号。
在一种可能的设计中,分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号,包括:
对至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号;
对至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号,至少两个滤波信号包括:至少两个第一滤波信号和至少两个第二滤波信号。
在一种可能的设计中,对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号,包括:
分别对至少两个第一滤波信号进行采样率归一化处理,得到至少两个第一归一化信号;
分别对至少两个第二滤波信号进行采样率归一化处理,得到至少两个第二归一化信号;
对至少两个第一归一化信号和至少两个第二归一化信号进行混音处理和反相处理,得到目标噪声信号。
在一种可能的设计中,对至少两个第一归一化信号和至少两个第二归一化信号进行混音处理和反相处理,得到目标噪声信号,包括:
对至少两个第一归一化信号进行相加处理,得到第一合并信号;
对至少两个第二归一化信号进行相加处理,得到第二合并信号;
对第一合并信号和第二合并信号进行混音处理,得到混音信号;
对混音信号进行反相处理,得到目标噪声信号。
第二方面,本申请实施例提供一种信号处理电路,包括:频率分级电路、至少两个滤波器、至少两个归一化电路、混音电路和反相器,其中,
频率分级电路的输入端用于与至少两个麦克风的输出端连接,频率分级电路的输出端分别与至少两个滤波器的输入端连接;
至少两个滤波器的输出端与至少两个归一化电路中对应的归一化电路连接,至少两个归一化电路的输出端分别与混音电路的输入点连接,混音电路的输出端与反相器连接。
在一种可能的设计中,频率分级电路用于,对至少两个麦克风采集的初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
第i个滤波器用于对第i个分频信号进行不同的滤波处理,得到第i个滤波信号,i为1至N之间的整数,N为至少两个滤波器的数量;
第i个归一化电路用于,对第i个滤波信号进行归一化处理,i为1至N之间的整数;
混音电路用于,对至少两个归一化电路处理后的信号进行混音处理,得到混音信号;
反相器用于,对混音信号进行反相处理,得到目标噪声信号。
在一种可能的设计中,至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;其中,
初始噪声信号包括:至少一个第一麦克风采集得到的第一初始噪声信号和至少一个第二麦克风采集得到的第二初始噪声信号。
在一种可能的设计中,频率分级电路包括:第一频率分级电路和第二频率分级电路,其中,
第一频率分级电路用于对第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号;
第二频率分级电路用于对第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号,至少两个分频信号包括:至少两个第一分频信号和至少两个第二分频信号。
在一种可能的设计中,第一频率分级电路的输出端与至少两个滤波器中的一部分滤波器的输入端连接;
第二频率分级电路的输出端与至少两个滤波器中的另一部分滤波器的输入端连接。
第三方面,本申请实施例提供一种音频设备,包括:至少两个麦克风、扬声器和上述第二方面中任一项的信号处理电路,至少两个麦克风与信号处理电路中的频率分级电路连接;扬声器与信号处理电路中的反相器连接;其中,
至少两个麦克风用于采集初始噪声信号,并向频率分级电路发送初始噪声信号;
扬声器用于从反相器接收目标噪声信号,并播放目标噪声信号。
第四方面,本申请实施例提供一种芯片,包括:上述第二方面中任一项的信号处理电路。
第五方面,本申请实施例提供一种信号处理装置,包括:获取模块、第一处理模块、第二处理模块、第三处理模块,其中,
获取模块用于,获取至少两个麦克风采集的初始噪声信号;
第一处理模块用于,对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
第二处理模块用于,分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;
第三处理模块用于,对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。
在一种可能的设计中,至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;其中,
初始噪声信号包括:至少一个第一麦克风采集得到的第一初始噪声信号和至少一个第二麦克风采集得到的第二初始噪声信号。
在一种可能的设计中,第一处理模块具体用于:
对第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号;
对第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号,至少两个分频信号包括:至少两个第一分频信号和至少两个第二分频信号。
在一种可能的设计中,第二处理模块具体用于:
对至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号;
对至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号,至少两个滤波信号包括:至少两个第一滤波信号和至少两个第二滤波信号。
在一种可能的设计中,第三处理模块具体用于:
分别对至少两个第一滤波信号进行采样率归一化处理,得到至少两个第一归一化信号;
分别对至少两个第二滤波信号进行采样率归一化处理,得到至少两个第二归一化信号;
对至少两个第一归一化信号和至少两个第二归一化信号进行混音处理和反相处理,得到目标噪声信号。
在一种可能的设计中,第三处理模块具体用于:
对至少两个第一归一化信号进行相加处理,得到第一合并信号;
对至少两个第二归一化信号进行相加处理,得到第二合并信号;
对第一合并信号和第二合并信号进行混音处理,得到混音信号;
对混音信号进行反相处理,得到目标噪声信号。
第六方面,本申请实施例提供一种计算机可读存储介质,计算机可读存储介质中存储有计算机执行指令,当处理器执行计算机执行指令时,实现如上第一方面中任一项的信号处理方法。
第七方面,本申请实施例提供一种计算机程序产品,包括:计算机程序,计算机程序被处理器执行时实现如上第一方面中任一项的信号处理方法。
本申请实施例提供一种信号处理方法、设备及装置,其中,信号处理方法包括:获取至少两个麦克风采集的初始噪声信号;对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。在上述方法中,分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号,进而对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,可以得到准确的目标噪声信号,提高目标噪声信号的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请实施例的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的信号处理方法的流程示意图一;
图2为本申请实施例提供的信号处理方法的流程示意图二;
图3为本申请实施例提供的信号处理方法的流程示意图三;
图4为本申请实施例提供的信号处理电路的结构示意图一;
图5为本申请实施例提供的信号处理电路的结构示意图二;
图6为本申请实施例提供的音频设备的结构示意图;
图7为本申请实施例提供的信号处理装置的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括:”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括:没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面以具体地实施例对本申请的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
图1为本申请实施例提供的信号处理方法的流程示意图一。如图1所示,本实施例提供的信号处理方法包括:
S101、获取至少两个麦克风采集的初始噪声信号。
可选地,本申请实施例的执行主体可以为包括至少两个麦克风的电子设备,可以为电子设备中的信号处理装置,可以为图4或者图5所示的信号处理电路,还可以为根据包括信号处理电路的芯片,其中,该信号处理装置可以通过软件和/或硬件的结合来实现。
可选地,电子设备可以为音频设备。其中,音频设备具体可以为降噪耳机,还可以为台式电脑、或者笔记本电脑等设备中的音频播放设备。
可选地,至少两个麦克风可以设置在电子设备的内部,也可以设置在电子设备的外部,还可以同时设置在电子设备的内部和外部。
具体的,每个麦克风可以采集到一个初始噪声信号。可选地,至少两个麦克风通过不同的采样频率对噪声进行采集,以得到各自对应的初始噪声信号。
S102、对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同。
在一种可能的设计中,可以根据至少两个频率范围,对初始噪声信号进行频率分级处理,得到至少两个分频信号。
例如,至少两个频率范围的个数为2,当2个频率范围分别为[a1,a2)、[a2,a3)时,可以得到两个分频信号,其中一个分频信号的频率范围为[a1,a2),另一个分频信号的频率范围为[a1,a2)。具体的,本申请中不对a1、a2、a3的具体取值进行限定。
可选地,可以根据每个麦克风采集得到的初始噪声信号,执行S102,得到每个麦克风对应的至少两个分频信号。
S103、分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号。
具体的,对一个分频信号进行滤波处理,得到一个滤波信号。每个分频信号具有各自对应的自适应滤波器,针对上述一个分频信号,可以通过该分频信号对应的自适应滤波器对该分频信号进行处理,得到该分频信号对应的一个滤波信号。
可选地,可以根据每个麦克风对应的至少两个分频信号,执行S103,得到每个麦克风对应的至少两个滤波信号。
S104、对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。
针对每个麦克风对应的至少两个滤波信号,分别对每个滤波信号进行归一化处理得到,每个滤波信号对应的归一化数据,对每个滤波信号对应的归一化数据进行求和处理,得到第一反相滤波信号。
对至少两个麦克风各自对应的第一反相滤波信号进行混音处理、以及反相处理,得到目标噪声信号。
在图1实施例提供的信号处理方法包括:获取至少两个麦克风采集的初始噪声信号;对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。在上述方法中,分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号,可以实现针对不同的分频信号进行特定的滤波,提高对初始噪声信号的滤波效果。进一步地,进而对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,可以得到准确的目标噪声信号,进而提高目标噪声信号的准确性。
在上述实施例的基础上,下面结合图2对本申请实施例提供的信号处理方法作进一步地说明,具体的,请参见图2。
图2为本申请实施例提供的信号处理方法的流程示意图二。如图2所示,本实施例提供的信号处理方法包括:
S201、获取至少两个麦克风采集的初始噪声信号。
具体的,S201执行方法与S101的执行方法相似,此处不再赘述。
S202、对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;至少两个分频信号包括:至少两个第一分频信号和至少两个第二分频信号。
可选地,当至少两个麦克风包括第一麦克风和第二麦克风时,至少两个第一分频信号可以为对第一麦克风采集得到的初始噪声信号进行频率分级处理之后得到的,至少两个第二分频信号可以为对第二麦克风采集得到的初始噪声信号进行频率分级处理之后得到的。
具体的,对第一麦克风采集得到的初始噪声信号进行频率分级处理,得到的至少两个第一分频信号的方法,以及对第二麦克风采集得到的初始噪声信号进行频率分级处理,得到的至少两个第二分频信号的方法,可以参见S102,此处不再赘述。
S203、对至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号。
具体的,103中的至少两个滤波信号包括:S203中的至少两个第一滤波信号和S204中的至少两个第二滤波信号。
具体的,通过至少两个第一自适应滤波器,对至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号。其中,一个第一自适应滤波器对一个第一分频信号进行滤波处理,得到一个第一滤波信号。
S204、对至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号。
具体的,通过至少两个第二自适应滤波器,对至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号。其中,一个第二自适应滤波器对一个第二分频信号进行滤波处理,得到一个第二滤波信号。
S205、对至少两个第一滤波信号和至少两个第二滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。
可选地,分别对至少两个第一滤波信号进行归一化处理,得到每个第一滤波信号对应的第一归一化信号;分别对至少两个第二滤波信号进行归一化处理,得到每个第二滤波信号对应的第二归一化信号;
对每个第一滤波信号对应的第一归一化信号和每个第二滤波信号对应的第二归一化信号进行混音处理、以及反相处理,得到目标噪声信号。
具体的,对每个第一滤波信号对应的第一归一化信号和每个第二滤波信号对应的第二归一化信号进行混音处理、以及反相处理,得到目标噪声信号,包括:对每个第一滤波信号对应的第一归一化信号进行相加处理,得到第一合并信号;对每个第二滤波信号对应的第二归一化信号进行相加处理,得到第二合并信号;对第一合并信号和第二合并信号进行混音处理,得到混音信号;对混音信号进行反相处理,得到目标噪声信号。
在图2实施例提供的信号处理方法中,由于每个分频信号的频率不同,因此,对至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号,对至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号,可以实现对不同频率的分频信号进行特定的滤波处理,提高对初始噪声信号的滤波效果,提高目标噪声信号的准确性,进而电子设备的主动降噪(Active Noise Cancellation,ANC)性能。
在上述实施例的基础上,下面结合图3对本申请实施例提供的信号处理方法作进一步地说明,具体的,请参见图3。
图3为本申请实施例提供的信号处理方法的流程示意图三。如图3所示,
S301、获取至少一个第一麦克风采集得到的第一初始噪声信号和至少一个第二麦克风采集得到的第二初始噪声信号。
具体的,S101中的至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;其中,至少一个第一麦克风设置在电子设备的外部;至少一个第二麦克风设置在电子设备的内部。
具体的,S101中的初始噪声信号包括:至少一个第一麦克风采集得到的第一初始噪声信号和至少一个第二麦克风采集得到的第二初始噪声信号。
其中,一个第一麦克风采集得到的一个第一初始噪声信号。至少一个第一麦克风通过不同的采样频率对噪声进行采集,得到每个第一麦克风各自对应的第一初始噪声信号。每个第一麦克风各自对应的第一初始噪声信号互不相同。
其中,一个第二麦克风采集得到的一个第二初始噪声信号。至少一个第二麦克风通过不同的采样频率对噪声进行采集,得到每个第二麦克风各自对应的第二初始噪声信号。每个第二麦克风各自对应的第二初始噪声信号互不相同。
S302、对第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号。
其中,S102中的至少两个分频信号包括:S302中的至少两个第一分频信号和S303中的至少两个第二分频信号。
具体的,对每个第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号的方法包括:
根据至少两个预设频率范围,分别对每个第一初始噪声信号进行频率分级处理,得到每个第一初始噪声信号各自对应至少两个分级信号;将每个第一初始噪声信号各自对应的至少两个分级信号中,频率范围相同分级信号进行叠加处理,得到至少两个第一分频信号。
例如,当至少两个预设频率范围为[a1,a2)、[a2,a3)、至少一个第一麦克风的数量为2(即第一麦克风11和第一麦克风12)、第一麦克风11采集得到第一初始噪声信号、第一麦克风12采集得到第一初始噪声信号时,根据[a1,a2)、[a2,a3),对第一麦克风11采集得到的第一初始噪声信号进行频率分级处理,得到分级信号S1和分级信号S2,其中,分级信号S1具有频率范围[a1,a2),分级信号S2具有频率范围[a2,a3);根据[a1,a2)、[a2,a3),对第一麦克风12采集得到的第一初始噪声信号进行频率分级处理,得到分级信号S3和分级信号S4,其中,分级信号S3具有频率范围[a1,a2),分级信号S4具有频率范围[a2,a3);由于分级信号S1和分级信号S3的频率范围相同(即[a1,a2)),因此将分级信号S1和分级信号S3叠加,得到一个第一分频信号;由于分级信号S2和分级信号S4的频率范围相同(即[a2,a3)),因此将分级信号S2和分级信号S2叠加,得到另一个第一分频信号。
S303、对第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号。
需要说明的是,S303的执行方法与S302的执行方法相似,此处不再赘述。
S304、对至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号。
S305、对至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号。
S306、分别对至少两个第一滤波信号进行采样率归一化处理,得到至少两个第一归一化信号。
具体的,对一个第一滤波信号进行采样率归一化处理,得到一个第一归一化信号。
S307、分别对至少两个第二滤波信号进行采样率归一化处理,得到至少两个第二归一化信号。
具体的,对一个第二滤波信号进行采样率归一化处理,得到一个第二归一化信号。
S308、对至少两个第一归一化信号和至少两个第二归一化信号进行混音处理和反相处理,得到目标噪声信号。
在一种可能的设计中,对至少两个第一归一化信号和至少两个第二归一化信号进行混音处理和反相处理,得到目标噪声信号,包括:
对至少两个第一归一化信号进行相加处理,得到第一合并信号;
对至少两个第二归一化信号进行相加处理,得到第二合并信号;
对第一合并信号和第二合并信号进行混音处理,得到混音信号;
对混音信号进行反相处理,得到目标噪声信号。
在图3实施例提供的信号处理方法中,分别对至少两个第一滤波信号进行采样率归一化处理,得到至少两个第一归一化信号;分别对至少两个第二滤波信号进行采样率归一化处理,得到至少两个第二归一化信号;对至少两个第一归一化信号和至少两个第二归一化信号进行混音处理和反相处理,得到目标噪声信号。可以较好地产生与消噪点的相位相反、幅度相同的目标噪声信号,避免现有技术滤波处理之后的得到噪声信号混入混音处理过程,提高电子设备的ANC性能。
图4为本申请实施例提供的信号处理电路的结构示意图一。如图4所示,信号处理电路包括:频率分级电路、至少两个滤波器、至少两个归一化电路、混音电路和反相器,其中,
频率分级电路的输入端用于与至少两个麦克风的输出端连接,频率分级电路的输出端分别与至少两个滤波器的输入端连接;
至少两个滤波器的输出端与至少两个归一化电路中对应的归一化电路连接,至少两个归一化电路的输出端分别与混音电路的输入点连接,混音电路的输出端与反相器连接。
具体的,频率分级电路用于,对至少两个麦克风采集的初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
第i个滤波器用于对第i个分频信号进行不同的滤波处理,得到第i个滤波信号,i为1至N之间的整数,N为至少两个滤波器的数量;
第i个归一化电路用于,对第i个滤波信号进行归一化处理,i为1至N之间的整数;
混音电路用于,对至少两个归一化电路处理后的信号进行混音处理,得到混音信号;
反相器用于,对混音信号进行反相处理,得到目标噪声信号。
本申请实施例提供的信号处理电路可以执行上述方法实施例所示的信号处理方法,其实现原理以及有益效果类似,此处不再进行赘述。
图5为本申请实施例提供的信号处理电路的结构示意图二。如图5所示,至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;其中,
初始噪声信号包括:至少一个第一麦克风采集得到的第一初始噪声信号和至少一个第二麦克风采集得到的第二初始噪声信号。
在一种可能的设计中,频率分级电路包括:第一频率分级电路和第二频率分级电路,其中,
第一频率分级电路用于对第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号;
第二频率分级电路用于对第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号,至少两个分频信号包括:至少两个第一分频信号和至少两个第二分频信号。
在一种可能的设计中,第一频率分级电路的输出端与至少两个滤波器中的一部分滤波器的输入端连接;
第二频率分级电路的输出端与至少两个滤波器中的另一部分滤波器的输入端连接。
可选地,第一频率分级电路中可以包括至少一个第一频率范围,其中,至少一个第一频率范围的总个数与上述一部分滤波器的总个数相同。
可选地,第二频率分级电路中可以包括至少一个第二频率范围,其中,至少二个第一频率范围的总个数与上述另一部分滤波器的总个数相同。
在一种可能的设计中,混音电路包括:两个加法器和混音模块,其中,
一个加法器用于对上述一部分滤波器对应的归一化电路输出的第一归一化信号进行相加处理,得到第一合并信号;
另一个加法器用于对上述另一部分滤波器对应的归一化电路输出的第二归一化信号进行相加处理,得到第二合并信号;
混音模块用于对第一合并信号和第二合并信号进行护混音处理,得到混音信号。
本申请实施例提供的信号处理电路可以执行上述方法实施例所示的信号处理方法,其实现原理以及有益效果类似,此处不再进行赘述。
图6为本申请实施例提供的音频设备的结构示意图。如图6所示,音频设备包括:至少两个麦克风、扬声器、以及上述任意实施例中的信号处理电路,至少两个麦克风与信号处理电路中的频率分级电路连接;扬声器与信号处理电路中的反相器连接;其中,
至少两个麦克风用于采集初始噪声信号,并向频率分级电路发送初始噪声信号;
扬声器用于从反相器接收目标噪声信号,并播放目标噪声信号。
本申请实施例提供的音频设备可以执行上述方法实施例所示的信号处理方法,其实现原理以及有益效果类似,此处不再进行赘述。
本申请实施例还提供一种芯片,包括上述任意实施例中的信号处理电路。
图7为本申请实施例提供的信号处理装置的结构示意图。信号处理装置10应用于电子设备中,电子设备包括:至少两个麦克风。如图7所示,信号处理装置10包括:获取模块11、第一处理模块12、第二处理模块13、第三处理模块14,其中,
获取模块11用于,获取至少两个麦克风采集的初始噪声信号;
第一处理模块12用于,对初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
第二处理模块13用于,分别对至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;
第三处理模块14用于,对至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。
本申请实施例提供的信号处理装置可以执行上述方法实施例所示的信号处理方法,其实现原理以及有益效果类似,此处不再进行赘述。
在一种可能的设计中,至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;其中,
初始噪声信号包括:至少一个第一麦克风采集得到的第一初始噪声信号和至少一个第二麦克风采集得到的第二初始噪声信号。
在一种可能的设计中,第一处理模块12具体用于:
对第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号;
对第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号,至少两个分频信号包括:至少两个第一分频信号和至少两个第二分频信号。
在一种可能的设计中,第二处理模块13具体用于:
对至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号;
对至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号,至少两个滤波信号包括:至少两个第一滤波信号和至少两个第二滤波信号。
在一种可能的设计中,第三处理模块14具体用于:
分别对至少两个第一滤波信号进行采样率归一化处理,得到至少两个第一归一化信号;
分别对至少两个第二滤波信号进行采样率归一化处理,得到至少两个第二归一化信号;
对至少两个第一归一化信号和至少两个第二归一化信号进行混音处理和反相处理,得到目标噪声信号。
在一种可能的设计中,第三处理模块14具体用于:
对至少两个第一归一化信号进行相加处理,得到第一合并信号;
对至少两个第二归一化信号进行相加处理,得到第二合并信号;
对第一合并信号和第二合并信号进行混音处理,得到混音信号;
对混音信号进行反相处理,得到目标噪声信号。
本申请实施例提供的信号处理装置可以执行上述方法实施例所示的信号处理方法,其实现原理以及有益效果类似,此处不再进行赘述。
本申请实施例提供一种计算机可读存储介质,计算机可读存储介质中存储有计算机执行指令,当处理器执行计算机执行指令时,实现如上述的信号处理方法。
本申请实施例提供一种计算机程序产品,包括:计算机程序,计算机程序被处理器执行时实现如上述的信号处理方法。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (14)

1.一种信号处理方法,其特征在于,所述方法包括:
获取至少两个麦克风采集的初始噪声信号;
对所述初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
分别对所述至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;
对所述至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号;
对所述初始噪声信号进行频率分级处理,得到至少两个分频信号,包括:
对第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号;
对第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号,所述至少两个分频信号包括:所述至少两个第一分频信号和所述至少两个第二分频信号。
2.根据权利要求1所述的方法,其特征在于,所述至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;
所述初始噪声信号包括:所述至少一个第一麦克风采集得到的第一初始噪声信号和所述至少一个第二麦克风采集得到的第二初始噪声信号。
3.根据权利要求1所述的方法,其特征在于,分别对所述至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号,包括:
对所述至少两个第一分频信号进行不同的滤波处理,得到至少两个第一滤波信号;
对所述至少两个第二分频信号进行不同的滤波处理,得到至少两个第二滤波信号,所述至少两个滤波信号包括:所述至少两个第一滤波信号和所述至少两个第二滤波信号。
4.根据权利要求3所述的方法,其特征在于,对所述至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号,包括:
分别对所述至少两个第一滤波信号进行采样率归一化处理,得到至少两个第一归一化信号;
分别对所述至少两个第二滤波信号进行采样率归一化处理,得到至少两个第二归一化信号;
对所述至少两个第一归一化信号和所述至少两个第二归一化信号进行所述混音处理和所述反相处理,得到所述目标噪声信号。
5.根据权利要求4所述的方法,其特征在于,对所述至少两个第一归一化信号和所述至少两个第二归一化信号进行所述混音处理和所述反相处理,得到所述目标噪声信号,包括:
对所述至少两个第一归一化信号进行相加处理,得到第一合并信号;
对所述至少两个第二归一化信号进行相加处理,得到第二合并信号;
对所述第一合并信号和所述第二合并信号进行混音处理,得到混音信号;
对所述混音信号进行反相处理,得到所述目标噪声信号。
6.一种信号处理电路,其特征在于,包括:频率分级电路、至少两个滤波器、至少两个归一化电路、混音电路和反相器,其中,
所述频率分级电路的输入端用于与至少两个麦克风的输出端连接,所述频率分级电路的输出端分别与所述至少两个滤波器的输入端连接;
所述至少两个滤波器的输出端与所述至少两个归一化电路中对应的归一化电路连接,所述至少两个归一化电路的输出端分别与所述混音电路的输入点连接,所述混音电路的输出端与所述反相器连接。
7.根据权利要求6所述的信号处理电路,其特征在于,
所述频率分级电路用于,对所述至少两个麦克风采集的初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
第i个滤波器用于对第i个分频信号进行不同的滤波处理,得到第i个滤波信号,所述i为1至N之间的整数,所述N为所述至少两个滤波器的数量;
第i个归一化电路用于,对所述第i个滤波信号进行归一化处理,所述i为1至N之间的整数;
所述混音电路用于,对所述至少两个归一化电路处理后的信号进行混音处理,得到混音信号;
所述反相器用于,对所述混音信号进行反相处理,得到目标噪声信号。
8.根据权利要求7所述的信号处理电路,其特征在于,所述至少两个麦克风包括:至少一个第一麦克风和至少一个第二麦克风;
所述初始噪声信号包括:所述至少一个第一麦克风采集得到的第一初始噪声信号和所述至少一个第二麦克风采集得到的第二初始噪声信号。
9.根据权利要求8所述的信号处理电路,其特征在于,所述频率分级电路包括:第一频率分级电路和第二频率分级电路,其中,
所述第一频率分级电路用于对所述第一初始噪声信号进行频率分级处理,得到至少两个第一分频信号;
所述第二频率分级电路用于对所述第二初始噪声信号进行频率分级处理,得到至少两个第二分频信号,所述至少两个分频信号包括:所述至少两个第一分频信号和所述至少两个第二分频信号。
10.根据权利要求9所述的信号处理电路,其特征在于,
所述第一频率分级电路的输出端与所述至少两个滤波器中的一部分滤波器的输入端连接;
所述第二频率分级电路的输出端与所述至少两个滤波器中的另一部分滤波器的输入端连接。
11.一种音频设备,其特征在于,包括:至少两个麦克风、扬声器和权利要求6-10任一项所述的信号处理电路,所述至少两个麦克风与所述信号处理电路中的频率分级电路连接;所述扬声器与所述信号处理电路中的反相器连接;其中,
所述至少两个麦克风用于采集初始噪声信号,并向所述频率分级电路发送所述初始噪声信号;
所述扬声器用于从所述反相器接收目标噪声信号,并播放所述目标噪声信号。
12.一种芯片,其特征在于,包括:权利要求6-10任一项所述的信号处理电路。
13.一种信号处理装置,其特征在于,所述装置包括:获取模块、第一处理模块、第二处理模块、第三处理模块,其中,
所述获取模块用于,获取至少两个麦克风采集的初始噪声信号;
所述第一处理模块用于,对所述初始噪声信号进行频率分级处理,得到至少两个分频信号,每个分频信号的频率不同;
所述第二处理模块用于,分别对所述至少两个分频信号进行不同的滤波处理,得到至少两个滤波信号;
所述第三处理模块用于,对所述至少两个滤波信号进行归一化处理、混音处理、以及反相处理,得到目标噪声信号。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如权利要求1至5任一项所述的信号处理方法。
CN202011602350.7A 2020-12-29 2020-12-29 信号处理方法、设备及装置 Active CN112785998B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011602350.7A CN112785998B (zh) 2020-12-29 2020-12-29 信号处理方法、设备及装置
PCT/CN2021/131330 WO2022142833A1 (zh) 2020-12-29 2021-11-17 信号处理方法、设备及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011602350.7A CN112785998B (zh) 2020-12-29 2020-12-29 信号处理方法、设备及装置

Publications (2)

Publication Number Publication Date
CN112785998A CN112785998A (zh) 2021-05-11
CN112785998B true CN112785998B (zh) 2022-11-15

Family

ID=75751630

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011602350.7A Active CN112785998B (zh) 2020-12-29 2020-12-29 信号处理方法、设备及装置

Country Status (2)

Country Link
CN (1) CN112785998B (zh)
WO (1) WO2022142833A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112785998B (zh) * 2020-12-29 2022-11-15 展讯通信(上海)有限公司 信号处理方法、设备及装置
CN114390391B (zh) * 2021-12-29 2023-10-27 联想(北京)有限公司 一种音频处理方法以及设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102074246A (zh) * 2011-01-05 2011-05-25 瑞声声学科技(深圳)有限公司 基于双麦克风语音增强装置及方法
CN105788607A (zh) * 2016-05-20 2016-07-20 中国科学技术大学 应用于双麦克风阵列的语音增强方法
CN109448718A (zh) * 2018-12-11 2019-03-08 广州小鹏汽车科技有限公司 一种基于多麦克风阵列的语音识别方法及系统
CN110418233A (zh) * 2019-07-26 2019-11-05 歌尔股份有限公司 一种耳机降噪方法、装置、耳机及可读存储介质
CN110767247A (zh) * 2019-10-29 2020-02-07 支付宝(杭州)信息技术有限公司 语音信号处理方法、声音采集装置和电子设备
CN210200316U (zh) * 2019-06-07 2020-03-27 侯启明 一种主动降噪装置
CN111402913A (zh) * 2020-02-24 2020-07-10 北京声智科技有限公司 降噪方法、装置、设备和存储介质
CN111800688A (zh) * 2020-03-24 2020-10-20 深圳市豪恩声学股份有限公司 一种主动降噪方法、装置、电子设备及存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101449433B1 (ko) * 2007-11-30 2014-10-13 삼성전자주식회사 마이크로폰을 통해 입력된 사운드 신호로부터 잡음을제거하는 방법 및 장치
CN105049976B (zh) * 2015-07-30 2019-10-18 华为技术有限公司 一种声音降噪的方法、耳机和终端
CN107731217B (zh) * 2017-10-18 2020-09-25 恒玄科技(上海)股份有限公司 一种实现不同频率响应拟合的主动降噪系统及方法
CN111083250A (zh) * 2018-10-22 2020-04-28 中兴通讯股份有限公司 移动终端及其降噪方法
US11107453B2 (en) * 2019-05-09 2021-08-31 Dialog Semiconductor B.V. Anti-noise signal generator
CN111009254B (zh) * 2019-12-13 2022-06-10 恒玄科技(上海)股份有限公司 音频回声滤波系统及主动降噪系统
CN111429933B (zh) * 2020-03-06 2022-09-30 北京小米松果电子有限公司 音频信号的处理方法及装置、存储介质
CN111798860B (zh) * 2020-07-17 2022-08-23 腾讯科技(深圳)有限公司 音频信号处理方法、装置、设备及存储介质
CN112785998B (zh) * 2020-12-29 2022-11-15 展讯通信(上海)有限公司 信号处理方法、设备及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102074246A (zh) * 2011-01-05 2011-05-25 瑞声声学科技(深圳)有限公司 基于双麦克风语音增强装置及方法
CN105788607A (zh) * 2016-05-20 2016-07-20 中国科学技术大学 应用于双麦克风阵列的语音增强方法
CN109448718A (zh) * 2018-12-11 2019-03-08 广州小鹏汽车科技有限公司 一种基于多麦克风阵列的语音识别方法及系统
CN210200316U (zh) * 2019-06-07 2020-03-27 侯启明 一种主动降噪装置
CN110418233A (zh) * 2019-07-26 2019-11-05 歌尔股份有限公司 一种耳机降噪方法、装置、耳机及可读存储介质
CN110767247A (zh) * 2019-10-29 2020-02-07 支付宝(杭州)信息技术有限公司 语音信号处理方法、声音采集装置和电子设备
CN111402913A (zh) * 2020-02-24 2020-07-10 北京声智科技有限公司 降噪方法、装置、设备和存储介质
CN111800688A (zh) * 2020-03-24 2020-10-20 深圳市豪恩声学股份有限公司 一种主动降噪方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
WO2022142833A1 (zh) 2022-07-07
CN112785998A (zh) 2021-05-11

Similar Documents

Publication Publication Date Title
CN112785998B (zh) 信号处理方法、设备及装置
JP5718251B2 (ja) 分解されたオーディオ信号の再構成のためのシステムおよび方法
US20160189728A1 (en) Voice Signal Processing Method and Apparatus
CN112562627B (zh) 前馈滤波器设计方法、主动降噪方法、系统及电子设备
CN111951819A (zh) 回声消除方法、装置及存储介质
CN109493877B (zh) 一种助听装置的语音增强方法和装置
CN106251856B (zh) 一种基于移动终端的环境噪声消除系统及方法
CN104581519A (zh) 降噪耳机及其降噪方法
CN112468918A (zh) 主动降噪方法、装置、电子设备以及主动降噪耳机
US20210287650A1 (en) Digital filter, audio signal processing system, and method of designing digital filter
CN102176312A (zh) 一种通过小波陷波来降低突发噪音的系统及方法
CN109119097B (zh) 基音检测方法、装置、存储介质及移动终端
JP5774191B2 (ja) オーディオ信号において卓越周波数を減衰させるための方法および装置
US8831236B2 (en) Generator and generation method of pseudo-bass
CN107967919A (zh) 消除tdd噪声的方法、装置及移动终端
CN111988702B (zh) 音频信号的处理方法、电子设备及存储介质
US20140334639A1 (en) Directivity control method and device
CN109003620A (zh) 一种回音消除方法、装置、电子设备及存储介质
CN113014460B (zh) 语音处理方法、家居主控设备、语音系统及存储介质
CN113766385A (zh) 耳机降噪方法及装置
CN113038349B (zh) 一种音频设备
CN112067927A (zh) 中高频振荡检测方法及装置
US20210012792A1 (en) Method for detecting voice, apparatus for detecting voice, and chip for processing voice
CN112312258B (zh) 一种具有听力防护及听力补偿的智能耳机
CN116072133A (zh) 一种低音增强方法、装置和音频输出设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant