CN107886965B - 游戏背景音的回声消除方法 - Google Patents

游戏背景音的回声消除方法 Download PDF

Info

Publication number
CN107886965B
CN107886965B CN201711220016.3A CN201711220016A CN107886965B CN 107886965 B CN107886965 B CN 107886965B CN 201711220016 A CN201711220016 A CN 201711220016A CN 107886965 B CN107886965 B CN 107886965B
Authority
CN
China
Prior art keywords
echo
signal
far
processing
game background
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711220016.3A
Other languages
English (en)
Other versions
CN107886965A (zh
Inventor
杜红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Youmi Technology Shenzhen Co ltd
Original Assignee
Youmi Technology Shenzhen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Youmi Technology Shenzhen Co ltd filed Critical Youmi Technology Shenzhen Co ltd
Priority to CN201711220016.3A priority Critical patent/CN107886965B/zh
Publication of CN107886965A publication Critical patent/CN107886965A/zh
Application granted granted Critical
Publication of CN107886965B publication Critical patent/CN107886965B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/424—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/54—Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/85—Providing additional services to players
    • A63F13/87—Communicating with other players during game play, e.g. by e-mail or chat
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/57—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of game services offered to the player
    • A63F2300/572—Communication between players during game play of non game information, e.g. e-mail, chat, file transfer, streaming of audio and streaming of video
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/6063—Methods for processing data by generating or executing the game program for sound processing
    • A63F2300/6072—Methods for processing data by generating or executing the game program for sound processing of an input signal, e.g. pitch and rhythm extraction, voice recognition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/6063—Methods for processing data by generating or executing the game program for sound processing
    • A63F2300/6081—Methods for processing data by generating or executing the game program for sound processing generating an output signal, e.g. under timing constraints, for spatialization
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Telephone Function (AREA)

Abstract

本发明涉及一种游戏背景音的回声消除方法，该方法依次包括线性自适应滤波和非线性处理，线性自适应滤波处理包括获得回声馈路函数、获取包含有游戏背景音的远端参考信号、获得远端回声信号的估计值和信号叠加处理；非线性处理包括对线性自适应滤波处理后的信号进行残留回声处理和非线性剪切处理，以进一步消除残留回声。本发明通过在软件层实时获取游戏背景音频数据和远端语音信号，并对游戏背景音频数据进行重采样和音量校准预处理，再通过回声馈路函数计算回声信号的估计值，从而完成回声消除处理；本发明不依靠自带回声消除功能的硬件，能够实现稳定统一的游戏背景音回声消除效果，有利于提高用户体验。

Description

游戏背景音的回声消除方法
技术领域
本发明涉及通信技术领域，具体涉及一种游戏背景音的回声消除方法。
背景技术
随着互联网时代的不断发展，游戏行业也经历着前所未有的快速发展。玩家在体验游戏时，很多游戏需要团队作战，位于不同地点的玩家对实时传输语音质量的要求越来越高，但是在游戏过程中，需要播放游戏背景音乐或音效等游戏背景音，当玩家在游戏中使用语音时，通话一端的麦克风采集环境中的声音，不仅会把玩家的语音采集进来，同时还会将游戏终端播放出来的声音再次采入，扬声器播放的声音，又被麦克风采集，形成回声；通话对端的玩家不但会听到对端玩家发送过来的语音，还会听到自身说话的回声以及对端游戏终端播放的游戏背景音的回声，造成音质嘈杂，玩家体验差。
回声产生的原理：远端的声音信号首先通过扬声器播放出来，然后在房间中经过多个传播和反射路径，最后和近端的声音一起被麦克风采集进去。如果没有做回声消除处理，那么远端就会把重新采集进去的远端声音信号播放出来，而且和原始的远端声音有一定的延迟时间。
为了消除游戏背景音回音的影响，提升游戏语音通话质量，现有技术中目前有两种解决办法：
a.要求玩家带耳机，游戏终端播放的声音从耳机出，则录音不会采集到回声。
缺点：对游戏玩家进行要求是不切实际的，适用范围很小，并没有从根本上解决游戏背景音干扰的问题。
b.使用硬件自带的回声消除功能，比如使用自带回声消除功能的麦克风。
缺点：市面上的硬件型号繁多，自带的回声消除功能效果参差不齐，难以保证游戏玩家的良好体验。
此外，在游戏实时语音过程中，由于远端发送过来的语音信号能够从通信链路上直接获取，现有技术中回声消除主要也是针对语音回声进行消除，对于游戏背景音的消除研究不是很深入。游戏背景音虽然不在远端信号里，但是却会导致远端回声，所以很有必要研究游戏背景音的回声消除方法。
发明内容
有鉴于此，本发明的目的在于克服现有技术的不足，提供一种游戏背景音的回声消除方法，该方法在软件层解决游戏背景音回声消除问题，能够实现稳定统一的游戏背景音消除效果。
为实现以上目的，本发明采用如下技术方案：一种游戏背景音的回声消除方法，依次包括以下两个处理步骤：线性自适应滤波和非线性处理，
其中，所述线性自适应滤波包括：
步骤S1：得到收敛稳定的回声馈路函数fe＝f(fs)；
步骤S2：获取包含有游戏背景音的远端参考信号hs(n)；
步骤S3：将信号hs(n)经过回声馈路函数处理，得到远端回声信号的估计值he(n)，即：
he＝f(hs)；
步骤S4：远端回声信号的估计值he(n)经反相器作用得到反相信号
Figure BDA0001485806240000021
用发送端麦克风采集到的声音信号z(n)叠加该反相信号
Figure BDA0001485806240000022
得到要发送的信号s(n)；
线性自适应滤波并不能完全把回声消除干净，还需要对信号s(n)进行非线性处理以消除残留的回声，最终得到发送端实际要发送的信号s'(n)。
优选地，步骤S1中所述得到收敛稳定的回声馈路函数的具体处理过程为：
步骤S11：通过远端信号fs(n)和远端回声fe(n)对远端回声的语音模型fe＝f(fs)进行求解，得到远端回声的语音模型fe＝f(fs)；
步骤S12：利用远端信号fs(n)和远端回声的语音模型fe＝f(fs)，得到远端回声估计值fe’(n)；
步骤S13：计算远端回声fe(n)与远端回声估计值fe’(n)的最小均方误差，根据该最小均方误差值来调整语音模型fe＝f(fs)的系数，得到收敛稳定的回声馈路函数fe＝f(fs)。
优选地，步骤S2中获取远端参考信号hs(n)的具体步骤为：
步骤S21：发送端在软件层获取游戏背景音频数据x(n)，该游戏背景音频数据x(n)经过预处理后，得到音频数据x’(n)；
步骤S22：发送端在通信链路层获取远端语音信号y(n)，并将预处理后的游戏背景音频数据x’(n)与y(n)进行叠加，叠加后的信号进入延时估计器处理后得到远端参考信号hs(n)；
优选地，对所述游戏背景音频数据x(n)做的预处理包括重采样和音量校准。
优选地，对游戏背景音频数据x(n)进行重采样处理的采样频率为44.1kHz。
优选地，所述非线性处理包括残留回声处理。
优选地，所述残留回声处理包括以下处理过程：
步骤S51：计算信号s(n)与远端语音信号y(n)的相关系数r(s，y)：
Figure BDA0001485806240000031
其中，为s与y的协方差，Var[s]为s的方差，Var[y]为y的方差；
步骤S52：根据相关系数r(s，y)得到一个反映消除程度的衰减因子N；
步骤S53：将信号s(n)乘以衰减因子从而进一步消除残留回声的信号g(n)，
即：g(n)＝s(n)*N。
优选地，所述非线性处理还包括非线性剪切处理。
优选地，所述非线性剪切处理的具体过程为：
设定一个阈值T，将衰减因子N与阈值T进行比较；
Figure BDA0001485806240000041
如果衰减因子N大于或等于阈值T，则将信号g(n)全部消除掉，并填充舒适噪声，防止声音听感起伏；如果衰减因子N小于阈值T，则保持信号g(n)不变。
本发明采用以上技术方案，所述游戏背景音回声消除方法依次包括线性自适应滤波和非线性处理，本发明能够通过获取游戏背景音频数据，并将该数据预处理后叠加到远端信号中，然后根据回声馈路函数获得远端回声信号的估计值，从而完成回声消除；对游戏背景音频数据进行重采样和音量校准预处理操作能够更好地保证游戏背景音信号准确度，有利于降低回声消除后的残留回声；本发明通过在软件层实时获取游戏背景音频数据和远端语音信号，并通过回声馈路函数得到回声信号的估计值，从而完成回声消除处理，无需依靠自带回声消除功能的硬件或者要求玩家带耳机，本发明能够实现稳定统一的游戏背景音回声消除效果，有利于提高玩家的用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明游戏背景音回声消除方法的原理示意图；
图2是本发明游戏背景音回声消除方法的流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将对本发明的技术方案进行详细的描述。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施方式，都属于本发明所保护的范围。
如图1至图2所示，本发明提供了一种游戏背景音的回声消除方法，依次包括以下两个处理步骤：线性自适应滤波和非线性处理，
其中，所述线性自适应滤波包括：
步骤S1：通过远端信号fs(n)和远端回声fe(n)得到收敛稳定的回声馈路函数fe＝f(fs)。远端信号并非等同于远端回声，远端信号从扬声器播放出来，到被发送端麦克风采集，经历过扬声器-房间-麦克风这样的回声馈路，我们可以把这个回声馈路对信号的作用用回声馈路函数表示，即远端信号fs(n)通过回声馈路函数处理后得到远端回声fe(n)，回声馈路函数也可看作是远端信号的滤波器。
步骤S1具体处理步骤为：
步骤S11：通过远端信号fs(n)和远端回声fe(n)对远端回声的语音模型fe＝f(fs)进行求解，得到远端回声的语音模型fe＝f(fs)；
步骤S12：利用远端信号fs(n)和远端回声的语音模型fe＝f(fs)，得到远端回声估计值fe’(n)；
步骤S13：计算远端回声fe(n)与远端回声估计值fe’(n)的最小均方误差，根据该最小均方误差值来调整语音模型fe＝f(fs)的系数，得到收敛稳定的回声馈路函数fe＝f(fs)。
步骤S2：获取包含有游戏背景音的远端参考信号hs(n)，具体处理步骤为：
步骤S21：发送端在软件层获取游戏背景音频数据(例如：在Unity游戏开发平台上调取实时背景音播放数据接口；或是在Cocos游戏开发平台上调取播放背景音频流的接口)，该游戏背景音频数据x(n)经过预处理后，得到音频数据x’(n)；
步骤S22：发送端在通信链路层获取远端语音信号y(n)，并将预处理后的游戏背景音频数据x’(n)与y(n)进行叠加，叠加后的信号进入延时估计器处理后得到远端参考信号hs(n)；
步骤S3：将信号hs(n)经过回声馈路函数处理，得到远端回声信号的估计值he(n)，即：
he＝f(hs)；
步骤S4：远端回声信号的估计值he(n)经反相器作用得到反相信号
Figure BDA0001485806240000062
用发送端麦克风采集到的声音信号z(n)叠加该反相信号
Figure BDA0001485806240000063
得到要发送的信号s(n)，其中，发送端麦克风采集到的声音信号z(n)中包括发送端的语音、噪音和远端回声；
线性自适应滤波并不能完全把回声消除干净，还需要对信号s(n)进行非线性处理以消除残留的回声，最终得到发送端实际要发送的信号s'(n)。
需要说明的是，所述非线性处理包括残留回声处理和非线性剪切处理。
其中，所述残留回声处理包括以下处理过程：
步骤S51：计算信号s(n)与远端语音信号y(n)的相关系数r(s，y)：
Figure BDA0001485806240000061
其中，为s与y的协方差，Var[s]为s的方差，Var[y]为y的方差；
步骤S52：根据相关系数r(s，y)得到一个反映消除程度的衰减因子N；
步骤S53：将信号s(n)乘以衰减因子从而进一步消除残留回声的信号g(n)，
即：
g(n)＝s(n)*N。
相关系数绝对值越大，说明残留回声越多，需要对残留回声进一步消除的程度越大；反之，相关系数绝对值越小，说明残留回声较少，需要对残留回声进一步消除的程度越小。
在完成了上述处理以后，残留的回声一般都比较小了，但不排除仍有一些残留的可以感知的小回声。为了进一步消除这些小回声，要进行非线性剪切处理，具体过程为：
设定一个阈值T，将步骤S52中的衰减因子N与阈值T进行比较：
Figure BDA0001485806240000071
如果衰减因子N大于或等于阈值T，则将信号g(n)全部消除掉，并填充舒适噪声，防止声音听感起伏；如果衰减因子N小于阈值T，则保持信号g(n)不变。
一般来说，阈值T要设定的比较大，如果衰减因子N大于或等于阈值T，表明回声消除量比较大，采集进来的语音信号很可能全部都是回声信号，那么就直接将语音信号g(n)全部消除掉，并填充舒适噪声，防止声音听感起伏；如果衰减因子小于设定的阈值T，那么就不要进一步做回声消除了，保持语音信号g(n)，这种情形要保护本地语音的音质，避免本地语音被当成回声误消除。
进一步地，对所述游戏背景音频数据x(n)做的预处理包括重采样和音量校准。
优选地，对游戏背景音频数据x(n)进行重采样处理的采样频率为44.1kHz。
本发明采用以上技术方案，所述游戏背景音回声消除方法依次包括线性自适应滤波和非线性处理，本发明能够通过获取游戏背景音频数据，并将该数据预处理后叠加到远端信号中，然后根据回声馈路函数获得远端回声信号的估计值，从而完成回声消除；对游戏背景音频数据进行重采样和音量校准预处理操作能够更好地保证游戏背景音信号准确度，有利于降低回声消除后的残留回声；本发明通过在软件层实时获取游戏背景音频数据和远端语音信号，并通过回声馈路函数得到回声信号的估计值，从而完成回声消除处理，无需依靠自带回声消除功能的硬件或者要求玩家带耳机，本发明能够实现稳定统一的游戏背景音回声消除效果，有利于提高用户体验。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (8)

1.一种游戏背景音的回声消除方法，其特征在于，依次包括以下两个处理步骤：线性自适应滤波和非线性处理，
其中，所述线性自适应滤波包括：
步骤S1：根据远端信号fs(n)和远端回声fe(n)得到收敛稳定的回声馈路函数fe′＝f′(fs)；
步骤S2：获取包含有游戏背景音的远端参考信号hs(n)；
步骤S3：将信号hs(n)经过回声馈路函数处理，得到远端回声信号的估计值he(n)，即：he＝f(hs)；
步骤S4：远端回声信号的估计值he(n)经反相器作用得到反相信号，用发送端麦克风采集到的声音信号z(n)叠加该反相信号，得到要发送的信号s(n)；
线性自适应滤波并不能完全把回声消除干净，还需要对信号s(n)进行非线性处理以消除残留的回声，最终得到发送端实际要发送的信号s'(n)；
其中，所述远端信号fs(n)为从扬声器播放出来的信号；
步骤S2中获取远端参考信号hs(n)的具体步骤为：
步骤S21：发送端在软件层获取游戏背景音频数据x(n)，该游戏背景音频数据x(n)经过预处理后，得到音频数据x’(n)；
步骤S22：发送端在通信链路层获取远端语音信号y(n)，并将预处理后的游戏背景音频数据x’(n)与y(n)进行叠加，叠加后的信号进入延时估计器处理后得到远端参考信号hs(n)。
2.根据权利要求1所述的回声消除方法，其特征在于，步骤S1中所述得到收敛稳定的回声馈路函数的具体处理过程为：
步骤S11：通过远端信号fs(n)和远端回声fe(n)对远端回声的语音模型fe＝f(fs)进行求解，得到远端回声的语音模型fe＝f(fs)；
步骤S12：利用远端信号fs(n)和远端回声的语音模型fe＝f(fs)，得到远端回声估计值fe’(n)；
步骤S13：计算远端回声fe(n)与远端回声估计值fe’(n)的最小均方误差，根据该最小均方误差值来调整语音模型fe＝f(fs)的系数，得到收敛稳定的回声馈路函数fe′＝f′(fs)。
3.根据权利要求1所述的回声消除方法，其特征在于，对所述游戏背景音频数据x(n)做的预处理包括重采样和音量校准。
4.根据权利要求3所述的回声消除方法，其特征在于，对游戏背景音频数据x(n)进行重采样处理的采样频率为44.1kHz。
5.根据权利要求1至4任一项所述的回声消除方法，其特征在于，所述非线性处理包括残留回声处理。
6.根据权利要求5所述的回声消除方法，其特征在于，所述残留回声处理包括以下处理过程：
步骤S51：计算信号s(n)与远端语音信号y(n)的相关系数r(s，y)：
Figure FDA0002933695420000021
其中，Cov(s,y)为s与y的协方差，Var[s]为s的方差，Var[y]为y的方差；
步骤S52：根据相关系数r(s，y)得到一个反映消除程度的衰减因子N；
步骤S53：将信号s(n)乘以衰减因子从而进一步消除残留回声，
即：
g(n)＝s(n)*N。
7.根据权利要求6所述的回声消除方法，其特征在于，所述非线性处理还包括非线性剪切处理。
8.根据权利要求7所述的回声消除方法，其特征在于，所述非线性剪切处理的具体过程为：
设定一个阈值T，将衰减因子N与阈值T进行比较：
Figure FDA0002933695420000031
如果衰减因子N大于或等于阈值T，则将信号g(n)全部消除掉，并填充舒适噪声，防止声音听感起伏；如果衰减因子N小于阈值T，则保持信号g(n)不变。
CN201711220016.3A 2017-11-28 2017-11-28 游戏背景音的回声消除方法 Active CN107886965B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711220016.3A CN107886965B (zh) 2017-11-28 2017-11-28 游戏背景音的回声消除方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711220016.3A CN107886965B (zh) 2017-11-28 2017-11-28 游戏背景音的回声消除方法

Publications (2)

Publication Number Publication Date
CN107886965A CN107886965A (zh) 2018-04-06
CN107886965B true CN107886965B (zh) 2021-04-20

Family

ID=61775665

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711220016.3A Active CN107886965B (zh) 2017-11-28 2017-11-28 游戏背景音的回声消除方法

Country Status (1)

Country Link
CN (1) CN107886965B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109003620A (zh) * 2018-05-24 2018-12-14 北京潘达互娱科技有限公司 一种回音消除方法、装置、电子设备及存储介质
CN110176244B (zh) * 2018-06-19 2023-10-03 腾讯科技（深圳）有限公司 回声消除方法、装置、存储介质和计算机设备
CN109166589A (zh) * 2018-08-13 2019-01-08 深圳市腾讯网络信息技术有限公司 应用声音抑制方法、装置、介质以及设备
CN109346096B (zh) * 2018-10-18 2021-07-06 深圳供电局有限公司 一种用于语音识别过程的回声消除方法及装置
CN109545237B (zh) * 2018-10-24 2022-01-28 广东思派康电子科技有限公司 一种计算机可读存储介质和应用该介质的语音交互音箱
CN110138650A (zh) * 2019-05-14 2019-08-16 北京达佳互联信息技术有限公司 即时通讯的音质优化方法、装置及设备
CN110177317B (zh) * 2019-05-17 2020-12-22 腾讯科技（深圳）有限公司 回声消除方法、装置、计算机可读存储介质和计算机设备
CN110956969B (zh) * 2019-11-28 2022-06-10 北京达佳互联信息技术有限公司 直播音频处理方法、装置、电子设备和存储介质
CN112929506B (zh) * 2019-12-06 2023-10-17 阿里巴巴集团控股有限公司 音频信号的处理方法及装置，计算机存储介质及电子设备
CN111372121A (zh) * 2020-03-16 2020-07-03 北京文香信息技术有限公司 一种回声消除方法、装置、存储介质及处理器
CN113963712A (zh) * 2020-07-21 2022-01-21 华为技术有限公司 滤除回声的方法、电子设备和计算机可读存储介质
CN112562709B (zh) * 2020-11-18 2024-04-19 珠海全志科技股份有限公司 一种回声消除信号处理方法及介质
CN114979344A (zh) * 2022-05-09 2022-08-30 北京字节跳动网络技术有限公司 回声消除方法、装置、设备及存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4591670A (en) * 1982-09-30 1986-05-27 Nec Corporation Echo canceller and echo suppressor for frequency divisional attenuation of acoustic echoes
US20060204012A1 (en) * 2002-07-27 2006-09-14 Sony Computer Entertainment Inc. Selective sound source listening in conjunction with computer interactive processing
CN1905919A (zh) * 2004-03-11 2007-01-31 理音株式会社 防迟钝装置及防迟钝方法
CN101132839A (zh) * 2005-05-05 2008-02-27 索尼计算机娱乐公司 结合计算机交互处理的选择性声源监听
JP4395195B1 (ja) * 2009-03-05 2010-01-06 有限会社ケプストラム エコーキャンセラ
CN101765982A (zh) * 2007-07-26 2010-06-30 雅马哈株式会社 回声消除器
US20110300897A1 (en) * 2010-06-04 2011-12-08 Apple Inc. User interface tone echo cancellation
CN103354937A (zh) * 2011-02-10 2013-10-16 杜比实验室特许公司 包括噪声抑制增益的中值滤波的后处理
US20130271647A1 (en) * 2012-04-17 2013-10-17 Panasonic Corporation Sound pickup device and imaging device
US20150371659A1 (en) * 2014-06-19 2015-12-24 Yang Gao Post Tone Suppression for Speech Enhancement
CN106531177A (zh) * 2016-12-07 2017-03-22 腾讯科技（深圳）有限公司 一种音频处理的方法、移动终端以及系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4591670A (en) * 1982-09-30 1986-05-27 Nec Corporation Echo canceller and echo suppressor for frequency divisional attenuation of acoustic echoes
US20060204012A1 (en) * 2002-07-27 2006-09-14 Sony Computer Entertainment Inc. Selective sound source listening in conjunction with computer interactive processing
CN1905919A (zh) * 2004-03-11 2007-01-31 理音株式会社 防迟钝装置及防迟钝方法
CN101132839A (zh) * 2005-05-05 2008-02-27 索尼计算机娱乐公司 结合计算机交互处理的选择性声源监听
CN101765982A (zh) * 2007-07-26 2010-06-30 雅马哈株式会社 回声消除器
JP4395195B1 (ja) * 2009-03-05 2010-01-06 有限会社ケプストラム エコーキャンセラ
US20110300897A1 (en) * 2010-06-04 2011-12-08 Apple Inc. User interface tone echo cancellation
CN103354937A (zh) * 2011-02-10 2013-10-16 杜比实验室特许公司 包括噪声抑制增益的中值滤波的后处理
US20130271647A1 (en) * 2012-04-17 2013-10-17 Panasonic Corporation Sound pickup device and imaging device
US20150371659A1 (en) * 2014-06-19 2015-12-24 Yang Gao Post Tone Suppression for Speech Enhancement
CN106531177A (zh) * 2016-12-07 2017-03-22 腾讯科技（深圳）有限公司 一种音频处理的方法、移动终端以及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
AN ACOUSTIC ECHO CANCELLATION STRUCTURE FOR SYNTHETIC SURROUND SOUND;Trevor Yensen等;《IEEE》;20011231;第3237-3240页 *
噪声环境下自适应方向性与全向性麦克风助听模式对言语分辨率的影响;沈晓丽 等;《听力学及言语疾病杂志》;20121231;第20卷(第6期);第537-540页 *

Also Published As

Publication number Publication date
CN107886965A (zh) 2018-04-06

Similar Documents

Publication Publication Date Title
CN107886965B (zh) 游戏背景音的回声消除方法
US8751224B2 (en) Combined microphone and earphone audio headset having means for denoising a near speech signal, in particular for a “hands-free” telephony system
EP3791565B1 (en) Method and apparatus utilizing residual echo estimate information to derive secondary echo reduction parameters
US9437182B2 (en) Active noise reduction method using perceptual masking
CN111833896B (zh) 融合反馈信号的语音增强方法、系统、装置和存储介质
US9491561B2 (en) Acoustic echo cancellation with internal upmixing
US7773759B2 (en) Dual microphone noise reduction for headset application
US8811624B2 (en) Echo cancellation method and device
JP6243536B2 (ja) エコー打ち消し
CN107017004A (zh) 噪声抑制方法、音频处理芯片、处理模组及蓝牙设备
TW201207845A (en) Method for jointly optimizing noise reduction and voice quality in a mono or multi-microphone system
JP2011511522A (ja) エコー抑制フィルタの制御情報を演算する装置および方法、並びに、ディレイ値を演算する装置および方法
JP2012155339A (ja) 音声状態モデルを使用したマルチセンサ音声高品質化
CN107734412A (zh) 信号处理器、信号处理方法、耳机和计算机可读介质
CN110176244A (zh) 回声消除方法、装置、存储介质和计算机设备
CN108986832A (zh) 基于语音出现概率和一致性的双耳语音去混响方法和装置
JPH11331046A (ja) エコー抑圧方法及び装置並びにエコー抑圧プログラムが記憶されたコンピュータに読取り可能な記憶媒体
JP5762479B2 (ja) 音声スイッチ装置、音声スイッチ方法、及びそのプログラム
JP2024517721A (ja) ノイズの多い環境における音声最適化
TWI234941B (en) Echo canceler, article of manufacture, and method and system for canceling echo
Shusina et al. Unbiased adaptive feedback cancellation in hearing aids by closed-loop identification
JP3724705B2 (ja) 反響抑圧方法・反響抑圧装置
CN108899042A (zh) 一种基于移动平台的语音降噪方法
CN115620737A (zh) 语音信号处理装置、方法、电子设备和扩音系统
TW201506913A (zh) 麥克風系統及其聲音處理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant