CN113726966A - 通讯终端、通讯系统和音频信息处理方法 - Google Patents

通讯终端、通讯系统和音频信息处理方法 Download PDF

Info

Publication number
CN113726966A
CN113726966A CN202110857904.6A CN202110857904A CN113726966A CN 113726966 A CN113726966 A CN 113726966A CN 202110857904 A CN202110857904 A CN 202110857904A CN 113726966 A CN113726966 A CN 113726966A
Authority
CN
China
Prior art keywords
audio information
pickup
sound
audio
communication module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110857904.6A
Other languages
English (en)
Inventor
王惠钰
陈季良
林宥余
李旻轩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Luxshare Precision Industry Co Ltd
Taiwan Luxshare Precision Ltd
Original Assignee
Taiwan Luxshare Precision Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Taiwan Luxshare Precision Ltd filed Critical Taiwan Luxshare Precision Ltd
Priority to CN202110857904.6A priority Critical patent/CN113726966A/zh
Publication of CN113726966A publication Critical patent/CN113726966A/zh
Priority to US17/872,265 priority patent/US20230029845A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/02Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/568Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M9/00Arrangements for interconnection not involving centralised switching
    • H04M9/08Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/08Mouthpieces; Microphones; Attachments therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Multimedia (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Telephone Function (AREA)

Abstract

本公开实施例提供了一种通讯终端、通讯系统和音频信息处理方法,通讯终端包括收音组件和基础通信模块,通过一台通讯终端的基础通信模块以无线方式接收第二拾音音频信息,使该通讯终端根据该通讯终端产生的第一拾音音频信息和接收到的第二拾音音频信息获得返回音频信息,并将返回音频信息向外发送。由此,本公开实施例的技术方案可以实现多个无线收音装置或无线收音部件的同步收音,可以满足多人使用的需求,达到良好的收音效果。

Description

通讯终端、通讯系统和音频信息处理方法
技术领域
本发明涉及信息处理技术领域,具体涉及一种通讯终端、通讯系统和音频信息处理方法。
背景技术
会议是一种普遍存在的为了互相沟通、交流或解决问题而进行的交流活动。会议中常常需要使用通讯终端或通讯系统来进行交流。现有的无线通讯系统中,在存在多个用于收音的无线收音装置或无线收音部件时,通常只能选择单一的无线收音装置或无线收音部件进行收音,而无法同时使用多个无线收音装置或无线收音部件进行收音,这在多人同时讲话时无法实现良好的收音效果。
发明内容
有鉴于此,本发明实施例提供一种通讯终端、通讯系统和音频信息处理方法,能够实现多人使用时的同步收音。
第一方面,本发明实施例提供了一种通讯终端,所述通讯终端包括收音组件以及基础通信模块;所述收音组件包括第一收音单元,所述第一收音单元被配置为拾取声音以生成第一拾音音频信息;所述基础通信模块被配置为通过无线方式接收第二拾音音频信息,并向外发送返回音频信息,所述返回音频信息根据所述第一拾音音频信息和所述第二拾音音频信息获得。
在部分实施例中,所述第一收音单元包括第一声电转换器件以及第一音频处理模块;所述第一声电转换器件被配置为拾取声音生成第一音频信号;所述第一音频处理模块被配置为根据所述第一音频信号生成所述第一拾音音频信息。
在部分实施例中,所述基础通信模块还被配置为将所述第二拾音音频信息发送至所述第一音频处理模块,所述第一音频处理模块还被配置为对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息。
在部分实施例中,所述第一收音单元还包括第一无线通信模块;所述第一无线通信模块与所述第一音频处理模块电连接,所述第一无线通信模块被配置为将所述第一拾音音频信息发送至所述基础通信模块。
在部分实施例中,所述通讯终端还包括第三音频处理模块;所述第三音频处理模块与所述基础通信模块电连接,所述第三音频处理模块被配置为对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息。
在部分实施例中,所述基础通信模块还被配置为接收待播音频信息;所述通讯终端还包括扬声器组件,用于播放所述待播音频信息;所述基础通信模块还被配置为将所述待播音频信息发送至所述第一收音单元,所述第一音频处理模块还被配置为根据所述待播音频信息对所述第一音频信号进行回声消除处理,以生成所述第一拾音音频信息。
在部分实施例中,所述收音组件还包括至少一个第二收音单元,所述第二收音单元包括第二声电转换器件、第二音频处理模块以及第二无线通信模块;所述第二声电转换器件被配置为拾取声音生成所述第二音频信号;所述第二音频处理模块被配置为根据所述第二音频信号生成所述第二拾音音频信息;所述第二无线通信模块被配置为将所述第二拾音音频信息发送至所述基础通信模块。
在部分实施例中,所述基础通信模块还被配置为接收待播音频信息;所述通讯终端还包括扬声器组件,用于播放所述待播音频信息;所述基础通信模块还被配置为将所述待播音频信息发送至所述第二收音单元,所述第二音频处理模块还被配置为根据所述待播音频信息对所述第二音频信号进行回声消除处理,以生成所述第二拾音音频信息。
在部分实施例中,所述基础通信模块还被配置为接收待播音频信息;所述通讯终端还包括扬声器组件,用于播放所述待播音频信息;所述基础通信模块还被配置为以无线方式向外广播所述待播音频信息,所述第一收音单元还被配置为以无线方式接收被向外广播的所述待播音频信息。
第二方面,本发明实施例还提供了另一种通讯终端,包括收音组件以及基础通信模块;所述收音组件被配置为拾取声音以生成第一拾音音频信息;所述基础通信模块被配置为通过无线方式向与所述基础通信模块配对连接的其他通讯终端发送返回音频信息,所述返回音频信息根据所述第一拾音音频信息获得。
第三方面,本发明实施例还提供了一种通讯系统,所述通讯系统包括主通讯终端以及至少一个次级通讯终端;所述主通讯终端包括主基础通信模块和主收音组件,所述主收音组件被配置为拾取声音以生成主拾音音频信息;所述次级通讯终端包括次级基础通信模块和次级收音组件,所述次级收音组件被配置为拾取声音以生成次级拾音音频信息,所述次级基础通信模块被配置为以无线方式将次级返回音频信息发送至所述主基础通信模块,所述次级返回音频信息根据所述次级拾音音频信息获得;其中,所述主基础通信模块被配置为向外发送主返回音频信息,所述返回音频信息根据所述主拾音音频信息和所述次级返回音频信息获得。
在部分实施例中,所述主基础通信模块还被配置为接收待播音频信息,所述主收音组件包括主声电转换器件和主音频处理模块,所述主声电转换器件被配置为拾取声音生成主音频信号,所述主音频处理模块被配置为根据所述待播音频信息对所述主音频信号进行回声消除处理,以生成所述主拾音音频信息;所述次级收音组件包括次级声电转换器件和次级音频处理模块,所述次级声电转换器件被配置为拾取声音生成次级音频信号,所述次级音频处理模块被配置为根据所述待播音频信息对所述次级音频信号进行回声消除处理,以生成所述次级拾音音频信息。
第四方面,本发明实施例还提供了一种音频信息处理方法,应用于通讯终端,所述方法包括如下步骤:由第一收音单元生成第一拾音音频信息;由基础通信模块以无线方式获取第二拾音音频信息;根据所述第一拾音音频信息和所述第二拾音音频信息获得返回音频信息;以及,由基础通信模块向外发送返回音频信息。
在部分实施例中,所述根据所述第一拾音音频信息和所述第二拾音音频信息获得返回音频信息包括:对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息;所述对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息包括:由第一收音单元对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息;或者,由第三音频处理模块对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息,其中,所述第三音频处理模块与所述基础通信模块电连接。
在部分实施例中,所述方法还包括如下步骤:由基础通信模块从外部获取待播音频信息;由扬声器组件播放所述待播音频信息;由基础通信模块以无线方式广播发送待播音频信息;由第二收音单元拾取声音生成第二音频信号;以及,根据所述待播音频信息对所述第二音频信号进行回声消除处理,以获得所述第二拾音音频信息;所述由第一收音单元生成第一拾音音频信息包括:由第一收音单元拾取声音生成第一音频信号;以及,根据所述待播音频信息对所述第一音频信号进行回声消除处理,以获得所述第一拾音音频信息。
本公开实施例提供了一种通讯终端、通讯系统和音频信息处理方法,通讯终端包括收音组件和基础通信模块,通过一台通讯终端的基础通信模块以无线方式接收第二拾音音频信息,使该通讯终端根据该通讯终端产生的第一拾音音频信息和接收到的第二拾音音频信息获得返回音频信息,并将返回音频信息向外发送。由此,本公开实施例的技术方案可以实现多个无线收音装置或无线收音部件的同步收音,可以满足多人使用的需求,达到良好的收音效果。
附图说明
通过以下参照附图对本发明实施例的描述,本发明的上述以及其它目的、特征和优点将更为清楚,在附图中:
图1是本公开部分实施例的通讯终端的一种使用场景示意图;
图2是本公开部分实施例的通讯终端的另一种使用场景示意图;
图3是本公开部分实施例中的第一种通讯终端的结构框图;
图4是本公开部分实施例中的一种第一收音单元的结构框图;
图5是本公开部分实施例中的第一收音单元工作时的一种信息流向示意图;
图6是本公开部分实施例中的另一种第一收音单元的结构框图;
图7是本公开部分实施例中的第二种通讯终端的结构框图;
图8是本公开部分实施例中的第三音频处理模块工作时的信息流向示意图;
图9是本公开部分实施例中的第三种通讯终端的结构框图;
图10是本公开部分实施例中的第二收音单元的结构框图;
图11是本公开部分实施例中的第四种通讯终端的结构框图;
图12是本公开部分实施例中的一种第一收音单元进行回声消除处理的信息流向示意图;
图13是本公开部分实施例中的另一种第一收音单元进行回声消除处理的信息流向示意图;
图14是本公开部分实施例中的第二收音单元进行回声消除处理的信息流向示意图;
图15是本公开部分实施例中的第五种通讯终端的结构框图;
图16是本公开实施例中使用通讯终端实现远程会议的一种基本架构示意图;
图17是本公开部分实施例中的通讯系统的使用场景示意图;
图18是本公开部分实施例的一种通讯系统的结构框图;
图19是本公开部分实施例的通讯系统工作时的信息流向示意图;
图20是本公开部分实施例的另一种通讯系统的结构框图;
图21是本公开部分实施例中的主通讯终端进行回声消除处理时的信息流向示意图;
图22是本公开部分实施例中的次级通讯终端进行回声消除处理时的信息流向示意图;
图23是本公开部分实施例中的一种音频信息处理方法的流程示意图;
图24是本公开部分实施例中的另一种音频信息处理方法的流程示意图。
具体实施方式
以下基于实施例对本发明进行描述,但是本发明并不仅仅限于这些实施例。在下文对本发明的细节描述中,详尽描述了一些特定的细节部分。对本领域技术人员来说没有这些细节部分的描述也可以完全理解本发明。为了避免混淆本发明的实质,公知的方法、过程、流程、元件和电路并没有详细叙述。
此外,本领域普通技术人员应当理解,在此提供的附图都是为了说明的目的,并且附图不一定是按比例绘制的。
除非上下文明确要求,否则在说明书的“包括”、“包含”等类似词语应当解释为包含的含义而不是排他或穷举的含义;也就是说,是“包括但不限于”的含义。
在本发明的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。
图1-图2是本公开部分实施例的通讯终端的两种使用场景示意图。图3是本公开部分实施例中的第一种通讯终端的结构框图。
参照图1-图3,通讯终端1000包括收音组件1002和基础通信模块1006。收音组件1002包括第一收音单元1004,第一收音单元1004用于拾取声音以生成第一拾音音频信息。基础通信模块1002用于以无线方式接收第二拾音音频信息。通讯终端1000根据第一拾音音频信息和第二拾音音频信息获得返回音频信息。基础通信模块1006能够通过有线和/或无线的方式与该通讯终端1000以外的外部设备建立电连接和/或通信连接,并向外部设备ED发送返回音频信息。
在本公开中,该外部设备ED为可以通过有线和/或无线的方式与通讯终端1000的基础通信模块1006之间进行信号传输的设备。该外部设备可以是能够接收返回音频信息并对返回音频信息进行存储和/或处理的各种设备,例如电脑、平板电脑、手机、服务器、其他通讯终端,等等。基础通信模块1006将返回音频信息发送至该外部设备ED,以使该外部设备ED能够对返回音频信息进行存储、处理、向外传输或者其他操作中的一种或多种。
在一种使用场景中,参照图1和图2,该外部设备ED可以是电脑,该电脑可以通过一个或多个有线或无线网络(例如,互联网)与位于其他地理位置的装置彼此通信。该电脑能够将返回音频信息通过该有线或无线网络发送至位于其他地理位置的装置,同时还可以从位于其他地理位置的装置接收信息。例如,位于A地点的外部设备ED可以通过互联网与位于B地点的设备进行信息交流,传输音频、视频、文本、图片或其他信息,从而能够使位于不同地理位置的人们进行远程会议。
在本公开中,基础通信模块1006能够以无线的方式进行通信。该基础通信模块1006的无线通信方式可以包括蓝牙通信、WIFI通信、红外通信、射频通信或其他无线通信方式中的一种或多种。在一种实施方式中,该基础通信模块1006包括多种无线通信方式,基础通信模块1006可根据建立通信连接的设备(例如其他通讯终端)支持的通信方式,在多种无线通信方式之间进行切换,以保证该通讯终端1000的通用性。在部分实施例中,基础通信模块1006还能够通过有线方式进行通信。在一种实施方式中,通讯终端1000还包括一个或多个硬件接口,通过该硬件接口可以将基础通信模块1006与具有对应的接口的外部设备ED或通讯终端上的其他部件连接,以进行信息传输。该硬件接口可以包括USB接口、HDMI接口、光纤接口、数字同轴接口或其他能够进行音频信息传输的硬件接口中的一种或多种。
基础通信模块1006能够以无线方式与该通讯终端1000外的其他设备以及/或者与该通讯终端1000上的其他部分建立无线通信连接,并从该通讯终端1000外以及/或者从该通讯终端1000的其他部分接收第二拾音音频信息。基础通信模块1006接收第二拾音音频信息后,通讯终端1000按照预定的规则或者用户的输入,根据第一拾音音频信息和第二拾音音频信息得到相应的返回音频信息,并使基础通信模块1006将返回音频信息发送至外部设备ED。与使产生第二拾音音频信息的装置直接通过无线方式将第二拾音音频信息发送至外部装置的方式相比,使通讯终端1000接收第二拾音音频信息并由该通讯终端1000生成和向外部装置ED发送返回音频信息,可以减少该外部装置ED接收信息的数量,避免由于无线网络带宽的限制使外部装置ED仅能接收数量较少的无线收音装置发送的音频信息。同时,通讯终端1000可以对来自不同来源的多个音频信息进行处理,从而可以减少该外部装置ED或与该外部装置ED连接的其他计算装置对音频信息进行处理的处理计算量。
在本公开中,第一收音单元1004可以是任意的能够拾取声音并输出能够反映所拾取声音的基础通信模块可读取的信号的装置。第一收音单元1004可以通过有线和/或无线的方式与基础通信模块1006建立通信,从而与基础通信模块1006之间进行信息的传输。在本公开所示意的各个结构框图中,部件之间的连线仅为了示意连线所连接的部件之间示意具有信号传输关系,并非意味着通过连线连接的部件之间必然具有物理上的连接或电连接关系,该信号传输关系可以通过有线的方式实现,也可以通过无线的方式实现。例如,图3中第一收音单元1004与基础通信模块1006之间的连线用于说明第一收音单元1004与基础通信模块1006之间具有信号传输关系,并非意味着第一收音单元1004与基础通信模块1006必然具有物理上的连接或电连接关系,第一收音单元1004与基础通信模块1006之间可以通过有线或无线的方式进行信号传输。
第一收音单元1004可以与通讯终端1000的主体部分集成为一个整体,或者也可以与通讯终端1000的主体部分相分离。在一种实施方式中,参照图2,基础通信模块1006和第一收音单元1004均设置在通讯终端1000的主体部分中,基础通信模块1006与第一收音单元1004电连接。在另一种实施方式中,参照图1,基础通信模块1006设置在通讯终端1000的主体部分中,第一收音单元1004与通讯终端1000的主体部分相分离,例如,第一收音单元1004可以为无线话筒(参照图1),或者设置在无线话筒中,从而能够与通讯终端1000的主体部分相分离而使用。在一种应用场景中,通讯终端1000可以实现为无线耳机,该无线耳机具有一个或多个麦克风,该一个或多个麦克风作为该通讯终端1000的收音组件1002,其中至少一个麦克风作为第一收音单元1004。在一种实施方式中,该一个或多个麦克风与无线耳机的主体部分之间通过可拆分的方式连接,也即麦克风与无线耳机的主体部分之间具有结合和分离两种状态。该无线耳机使用时,可以将麦克风与无线耳机的主体部分相结合而使用,也可以将麦克风从无线耳机的主体部分上拆下,方便用户使用。
图4是本公开部分实施例中的一种第一收音单元的结构框图。图5是本公开部分实施例中的第一收音单元工作时的一种信息流向示意图。
参照图4和图5,在部分实施例中,第一收音单元1004包括第一声电转换器件1008和第一音频处理模块1010,第一音频处理模块1010与第一声电转换器件1008电连接。第一声电转换器件1008能够拾取声音,并将拾取的声信号转换为电信号,生成第一音频信号AS1。第一声电转换器件1008可以包括压电麦克风、电磁麦克风、驻极体麦克风或其他形式的声电转换器件中的一种或多种。第一声电转换器件1008将第一音频信号AS1发送至第一音频处理模块1010,第一音频处理模块1010根据第一音频信号AS1生成相应的第一拾音音频信息PA1。第一音频处理模块1010可以与基础通信模块1006有线连接,以实现与基础通信模块1006之间的信号传输。
在本公开中,各个信息流向示意图仅展示了一种可能的信息流向,在实际应用中,各个信息流向的发生顺序并非必然按照流向示意图中由上至下的排列顺序发生。例如,图5中表示第一拾音音频信息PA1的生成的箭头位于表示第二拾音音频信息PA2从基础通信模块1006传输到第一音频处理模块1010的箭头的上方,但第一拾音音频信息PA1的生成时间并非必然早于第二拾音音频信息PA2从基础通信模块1006到达第一音频处理模块1010的时间,第一拾音音频信息PA1的生成也可能与第二拾音音频信息PA2从基础通信模块1006到达第一音频处理模块1010同时发生,或比第二拾音音频信息PA2从基础通信模块1006到达第一音频处理模块1010更晚。同时,为了展示通讯终端的工作原理便利的需要,信息流向示意图中并未将通讯终端的所有部件列出。
参照图3-图5,在部分实施例中,基础通信模块1006还被配置为将接收到的第二拾音音频信息PA2发送至第一收音单元1004的第一音频处理模块1010。第一音频处理模块1010还被配置为按照预先确定的规则或用户的输入,对第一拾音音频信息PA1和第二拾音音频信息PA2进行混音处理,并根据混音处理的结果,得到相应的返回音频信息TX。第一音频处理模块1010还将返回音频信息TX发送至基础通信模块1006。
在本公开中,混音是指是把多种来源的声音,整合至一个立体音轨或单音音轨中。在混音的过程中,音频处理模块可以对各个拾音音频信息的频率、音质、定位等进行调整,让各音轨最佳化。例如,可以根据不同来源的拾音音频信息的传输时的时间延迟量的差异,调整各个拾音音频信息的定位。又例如,可以对多个拾音音频信息中音量较小的拾音音频信息进行音量增大处理。通过对第一拾音音频信息和第二拾音音频信息进行混音操作,可以使返回音频信息获得较佳的声音效果。
当然,根据需要,通讯终端也可以不对第一拾音音频信息和第二拾音音频信息进行混音处理。
图6是本公开部分实施例中的另一种第一收音单元的结构框图。
参照图6,在部分实施例中,第一收音单元1004通过无线的方式与基础通信模块1006进行通信连接。在一种可行的实施方式中,第一收音单元1004可以包括第一声电转换器件1008、第一音频处理模块1010和第一无线通信模块1012,第一无线通信模块1012与第一音频处理模块1010电连接,并能够通过无线的方式将第一拾音音频信息发送至基础通信模块1006。第一无线通信模块1012的无线通信方式可以包括蓝牙通信、WIFI通信、红外通信、射频通信或其他无线通信方式中的一种或多种。第一无线通信模块1012与基础通信模块1006应当具有至少一种相同的无线通信方式,以使第一无线通信模块1012能够与基础通信模块1006建立无线通信连接。在一种可行的实施方式中,第一无线通信模块1012可以通过短距离无线传输方式(例如,蓝牙)的方式实现通信连接。
图7是本公开部分实施例中的第二种通讯终端的结构框图。图8是本公开部分实施例中的第三音频处理模块工作时的信息流向示意图。
参照图7,在部分实施例中,通讯终端1000还包括第三音频处理模块1014,第三音频处理模块1014与基础通信模块1006电连接。图8示意性地展示了图7中所示的本公开部分实施例中的第二种通讯终端中的第三音频处理模块1014工作时的一种信息流向。参照图7和图8,在部分实施例中,收音组件1002的第一收音单元与基础通信模块1006无线通信连接,并将第一拾音音频信息PA1发送至基础通信模块1006。第一收音单元可以与通讯终端1000的主体部分相分离。在一种实施方式中,基础通信模块1006设置在通讯终端1000的主体部分中,第一收音单元与通讯终端1000的主体部分相分离,例如,第一收音单元可以为无线话筒,或者设置在无线话筒中。基础通信模块1006将接收到的第一拾音音频信息PA1和第二拾音音频信息PA2发送至第三音频处理模块1014,第三音频处理模块1014被配置为按照预先确定的规则或用户的输入,对第一拾音音频信息PA1和第二拾音音频信息PA2进行混音处理,并根据混音处理的结果,得到相应的返回音频信息TX。第三音频处理模块1014还被配置为将返回音频信息TX发送至基础通信模块。
图9是本公开部分实施例中的第三种通讯终端的结构框图。
参照图9,在部分实施例中,收音组件1002还包括第二收音单元1016。第二收音单元1016被配置为拾取声音以生成第二拾音音频信息,并将第二拾音音频信息通过无线方式发送至基础通信模块1006。与第一收音单元1004相类似,第二收音单元1016可以是任意的能够拾取声音并输出能够反映所拾取声音的基础通信模块1006可读取的信号的装置。例如,第二收音单元1016可以为无线话筒(参照图1和图2),或者设置在无线话筒中。在一种实施方式中,参照图1和图2,第二收音单元1016可以与通讯终端1000的主体部分相分离而使用,由此可以提高通讯终端收音时的灵活性。当有多名参与会议的人员时,不同的人员可以分别使用第一收音单元1004和第二收音单元1016进行收音。
在一种应用场景中,通讯终端1000可以实现为如前所述的无线耳机,该无线耳机具有多个麦克风,其中至少一个麦克风作为第一收音单元1004,至少一个麦克风作为第二收音单元1016。例如,该无线耳机包括两个麦克风,其中一个麦克风作为第一收音单元1004,另一个麦克风作为第二收音单元1016。作为第二收音单元1016的麦克风与无线耳机的主体部分之间通过可拆分的方式连接。该无线耳机使用时,可以将作为第二收音单元1016的麦克风与无线耳机的主体部分相结合而使用,也可以将第二收音单元1016从无线耳机的主体部分上拆下,方便用户使用。作为第一收音单元1004的麦克风可以集成在该无线耳机的主体部分中,也可以通过可拆卸的方式与该无线耳机的主体部分连接,可以与该无线耳机的主体部分相分离而使用。
图10是本公开部分实施例中的第二收音单元的结构框图。
参照图10,在部分实施例中,第二收音单元1016包括第二声电转换器件1018、第二音频处理模块1020和第二无线通信模块1022。第二声电转换器件1018拾取声音,并将拾取的声信号转换为电信号,生成第二音频信号。第二声电转换器件1018可以包括压电麦克风、电磁麦克风、驻极体麦克风或其他形式的声电转换器件中的一种或多种。第二音频处理模块1020与第二声电转换器件1018电连接,并根据第二音频信号生成相应的第二拾音音频信息。第二无线通信模块1022与第二音频处理模块1020电连接,将第二拾音音频信息通过无线的方式发送至基础通信模块1006。第二无线通信模块1022的无线通信方式可以包括蓝牙通信、WIFI通信、红外通信、射频通信或其他无线通信方式中的一种或多种。第二无线通信模块1022与基础通信模块1006应当具有至少一种相同的无线通信方式,以使第二无线通信模块1022能够与基础通信模块1006建立无线通信连接。在一种实施方式中,第二无线通信模块1022可以通过短距离无线传输方式(例如,蓝牙)的方式实现通信连接。
第二收音单元1016可以为一个,也可以为多个。在一种实施方式中,第二收音单元1016为多个,多个第二收音单元1016分别与基础通信模块1006通信连接。基础通信模块1006从多个第二收音单元1016分别接收第二拾音音频信息。通讯终端1000根据第一拾音音频信息和多个第二拾音音频信息,获得相应的返回音频信息。
在部分实施例中,基础通信模块1006从第一收音单元1004接收第一拾音音频信息,从第二收音单元1016接收第二拾音音频信息,然后将第一拾音音频信息和第二拾音音频信息发送至外部设备,也即,返回音频信息包括第一拾音音频信息和第二拾音音频信息。第一收音单元1004可以与基础通信模块1006无线连接,也可以与基础通信模块1006有线连接。
在部分实施例中,参照图5以及前文对图5的描述并参照图9,第一收音单元1004与基础通信模块1006电连接。基础通信模块1006从第二收音单元1016以无线方式接收第二拾音音频信息PA2,然后将第二拾音音频信息PA2发送至第一收音单元1004。第一音频处理模块1010按照预先确定的规则或用户的输入,对第一拾音音频信息PA1和第二拾音音频信息PA2进行混音处理,并根据混音处理的结果得到相应的返回音频信息TX,并将返回音频信息TX发送至基础通信模块1006。
在部分实施例中,参照图7-图8以及前文对图7-图8的描述并参照图9-图10,通讯终端还包括第三音频处理模块1004。收音组件1002的第一收音单元1004通过无线方式将第一拾音音频信息PA1发送至基础通信模块1006,收音组件1002的第二收音单元1016通过无线方式将第二拾音音频信息PA2发送至基础通信模块1006,基础通信模块1006将第一拾音音频信息PA1和第二拾音音频信息PA2发送至第三音频处理模块1014。第三音频处理模块1014被配置为按照预先确定的规则或用户的输入,对第一拾音音频信息PA1和第二拾音音频信息PA2进行混音处理,并根据混音处理的结果,得到相应的返回音频信息TX。第三音频处理模块1014还将返回音频信息TX发送至基础通信模块1006。
图11是本公开部分实施例中的第四种通讯终端的结构框图。
参照图11,在部分实施例中,通讯终端1000还可以包括扬声器组件1024,基础通信模块1006还被配置为从外部设备接收待播音频信息。扬声器组件1024与基础通信模块1006有线或无线连接,以接收和播放该待播音频信息。例如,扬声器组件1024与基础通信模块1006之间可以采用电连接的方式实现待播音频信息的传输。
在本公开中,待播音频信息可以是由外部设备生成、从机器可读存储介质中读取、通过有线或无线通信方式获取,或者通过其他方式获取的音频信息。例如,待播音频信息可以是存储在外部设备中的音频资料,在一种应用场景中,用户可以操作外部设备(例如电脑),使外部设备向基础通信模块1006发送待播音频信息,以展示相应的音频资料。又例如,外部设备通过有线或无线网络与其他地理位置的其他用于参与会议的设备连接,并从该其他用于参与会议的设备接收待播音频信息(例如该其他用于参与会议的设备采集的参与会议人员的声音)。
在本公开中,所述扬声器组件1024可以包括电声转换器件和相应的音频处理电路。电声转换器件可以包括压电扬声器、电磁扬声器、静电扬声器或其他形式的电声转换器件中的一种或多种。音频处理电路根据待播音频信息转换为相应的模拟电信号传输至电声转换器件,电声转换器件将该模拟电信号在转换为声信号,以播放待播音频信息。该音频处理电路可以包括功率放大电路,以驱动电声转换器件发声。
在部分实施例中,基础通信模块1006还将接收到的待播音频信息发送到通讯终端1000以外的与之通信的其他设备或者通讯终端1000上的扬声器组件1024以外的其他部分。无线通信系统中,发送方和接收方之间的信号通讯方式包括单播、多播(组播)和广播等方式。在本申请中,单播是指发送方将信号发送给一个特定的接收方,是一种一对一的通信方式;多播是指发送方将信号发送至加入特定组的多个接收方,也即加入了同一个组的接收方可以接受到此组内的所有数据;广播是指发送方将信号发给无线网络中的全部接收方。根据实际应用的需要,基础通信模块1006可以采用单播、多播(组播)或广播中的至少一种方式将待播音频信息发送至通讯终端1000的其他部分或通讯终端1000以外的其他设备。在一种应用场景中,基础通信模块1006可以通过单播或多播的方式将接收到的待播音频信息发送到与之配对连接的特定的其他设备上(例如其他通讯终端或无线音箱,等等),以播放该待播音频信息或对该待播音频信息进行其他处理。在另一种应用场景中,基础通信模块1006可以向一定区域广播待播音频信息,以使在该一定区域内的全部相关设备能够接收到该待播音频信息。例如,基础通信模块1006可以通过蓝牙(Bluetooth)广播的方式向相应的蓝牙网络中的全部设备广播发送待播音频信息。第一收音单元1004可以通过无线方式接收到该被向外广播的待播音频信息。
在部分实施例中,该与之配对连接的其他设备可以根据该待播音频信息对所采集的音频信号进行回声消除处理。
在进行音频会议的过程中,位于自地点的通讯终端或其他收音装置处理采集到自地点的用户声音以外,还能采集到从参与音频会议的对方地点的设备接收到的、并由自地点的扬声器播放的声音。自地点的扬声器再现的对方地点的声音,被自地点的收音装置采集而得到的声音称为回声。在产生回声的情况下,如果不对回声进行消除而向对方地点发送声音,则对方地点的扬声器将以一定的时间差再现对方地点的声音,从而给参与会议的用户的带来交流上的不便和困扰。通过回声消除处理,可以提升用户进行交流的顺畅度。回声消除处理通常可以根据回声传递的特性,根据扬声器所播放的信号得到相应的回声反馈信号,并通过过滤器等从收音装置采集的声音信号中减去回声反馈信号来消除回声。
图12是本公开部分实施例中的一种第一收音单元进行回声消除处理的信息流向示意图。图13是本公开部分实施例中的另一种第一收音单元进行回声消除处理的信息流向示意图。
参照图12和图13,进一步地,在部分实施例中,基础通信模块1006还将接收到的待播音频信息RX发送至第一收音单元1004。在第一收音单元1004与基础通信模块1006有线连接的情况下,基础通信模块1006将待播音频信息RX发送至第一音频处理模块1010,如图12所示。在第一收音单元1004与基础通信模块1006无线通信连接的情况下,基础通信模块1006将待播音频信息RX发送至第一收音单元1004的第一无线通信模块1012,第一无线通信模块1012将待播音频信息RX发送至第一音频处理模块1010,如图13所示。在扬声器组件1024播放待播音频信息RX的情况下,第一声电转换器件1008产生的第一音频信号AS1包含有回声。第一音频处理模块1010还被配置为按照预先确定的规则或用户的输入,根据待播音频信息RX对第一音频信号AS1进行回声消除处理,并根据经过回声消除处理的结果,生成相应的第一拾音音频信息PA1。通讯终端1000还可以测量第一收音单元1004与扬声器组件1024之间的距离,第一音频处理模块1010还可以根据测量得到的第一收音单元1004与扬声器组件1024之间的距离对第一音频信号AS1进行回声消除处理,以得到更好的回声消除效果。
图14是本公开部分实施例中的第二收音单元进行回声消除处理的信息流向示意图。
参照图14,在部分实施例中,基础通信模块1006还将接收到的待播音频信息RX发送至第二收音单元1016。基础通信模块1006将待播音频信息RX发送至第二收音单元1016的第二无线通信模块1022,第二无线通信模块1022将待播音频信息RX发送至第二音频处理模块1020。在扬声器组件1024播放待播音频信息RX的情况下,第二声电转换器件1018产生的第二音频信号AS2包含有回声。第二音频处理模块1020还被配置为按照预先确定的规则或用户的输入,根据待播音频信息RX对第二音频信号AS2进行回声消除处理,并根据经过回声消除处理的结果,生成相应的第二拾音音频信息PA2。通讯终端1000还可以测量第二收音单元1016与扬声器组件1024之间的距离,第二音频处理模块1020还可以根据测量得到的第二收音单元1016与扬声器组件1024之间的距离对第二音频信号AS2进行回声消除处理,以得到更好的回声消除效果。
图15是本公开部分实施例中的第五种通讯终端的结构框图。
参照图15,本公开实施例还提供了另一种通讯终端2000,该通讯终端2000包括收音组件2002和基础通信模块2004。收音组件2002被配置为拾取声音以生成第一拾音音频信息。在部分实施例中,收音组件2002可以与图3-图14以及参照图3-图14描述的收音组件1002相同。基础通信模块2004被配置为通过无线方式与其他通讯终端配对连接,并将返回音频信息发送至该配对连接的其他通讯终端,其中,该返回音频信息根据第一拾音音频信息获得。该其他通讯终端可以是任何能够通过无线方式与该通讯终端进行通信的通讯终端。例如,在一种使用场景下,该其他通讯终端可以是如图3-图14以及前文参照图3-图14所描述的通讯终端1000。
在部分实施例中,图15所示的通讯终端2000可以体现为如图3-图14以及前文参照图3-图14所描述的第一至第四种通讯终端1000。例如,参照图3-图5所描述的第一种通讯终端1000中的基础通信模块1006还被配置为通过无线方式与其他通讯终端配对连接,并将生成的返回音频信息发送至该配对连接的其他通讯终端,则基础通信模块1006具有基础通信模块2004的功能。
图16是本公开实施例中使用通讯终端实现远程会议的一种基本架构示意图。
参照图16,在一种应用场景中,地点A与地点B的用户进行远程会议。地点A使用一台通讯终端1000,通讯终端1000与外部设备ED1(例如,电脑)无线通信连接。地点A的通讯终端1000包括两个第二收音单元1016,两个第二收音单元1016分别与通讯终端1000无线通信连接。地点B使用一台通讯终端1000和一台通讯终端2000,通讯终端1000与外部设备ED2(例如,电脑)无线通信连接,通讯终端2000与通讯终端1000连接。地点A的外部设备ED1与地点B的外部设备ED2分别通过网络与服务器通信,从而实现外部设备ED1与外部设备ED2的信息交流。地点A的通讯终端1000生成返回音频信息后,将返回音频信息发送至外部设备ED1,外部设备ED1将返回音频信息通过服务器发送至外部设备ED2。外部设备ED2将外部设备ED1发送的返回音频信息作为待播音频信息,发送至地点B的通讯终端1000使通讯终端1000播放该待播音频信息。地点B的通讯终端2000生成返回音频信息后,将返回音频信息发送至地点B的通讯终端1000,该通讯终端1000将通讯终端2000发送的返回音频信息作为第二拾音音频信息,该通讯终端1000根据来自于通讯终端2000的该第二拾音音频信息与该通讯终端1000生成的第一拾音音频信息,生成返回音频信息并将生成的返回音频信息发送至外部设备ED2。外部设备ED2将接收到的地点B的通讯终端1000发送的返回音频信息通过服务器发送至地点A的外部设备ED1,由此,可以实现地点A与地点B的用户的远程音频会议。
图17是本公开部分实施例中的通讯系统的使用场景示意图。图18是本公开部分实施例的一种通讯系统的结构框图。图19是本公开部分实施例的通讯系统工作时的信息流向示意图。
参照图17-图19,本公开实施例还提供了一种通讯系统3000。该通讯系统3000包括主通讯终端3002A和至少一个次级通讯终端3002B。主通讯终端3002A包括主基础通信模块3006A和主收音组件3004A,次级通讯终端3002B包括次级基础通信模块3006B和次级收音组件3004B。次级收音组件3002B被配置为拾取声音以生成次级拾音音频信息PAB。次级基础通信模块3006B能够与主基础通信模块3006A建立无线通信连接。次级基础通信模块3006B被配置为以无线方式将次级返回音频信息TXB发送至主基础通信模块3006A,其中,次级返回音频信息TXB根据次级拾音音频信息PAB获得。主收音组件3004A被配置为拾取声音以生成主拾音音频信息PAA。主基础通信模块3006A还被配置为向外部设备ED发送主返回音频信息TXA,其中,主返回音频信息TXA根据主拾音音频信息PAA和次级返回音频信息TXB获得。由此,本公开实施例的通讯系统3000可以实现多个通讯终端的关联,实现多个通讯终端的同步收音,并由主通讯终端对多个通讯终端的收音结果进行处理,使得外部设备ED接收到的外部设备ED发送主返回音频信息具有较好的声音效果,减少了该外部装置ED处理音频信息的处理计算量,同时避免由于网络带宽的限制使外部装置ED仅能接收数量较少的通讯终端发送的音频信息。
次级通讯终端3002B可以为一个,也可以为多个。在部分实施例中,次级通讯终端3002B为多个,多个次级通讯终端3002B分别与主通讯终端3002A无线通信连接以进行信号传输。
在部分实施例中,主通讯终端3002A还被配置为对主拾音音频信息和次级返回音频信息进行混音处理,以获得返回音频信息。
图20是本公开部分实施例的另一种通讯系统的结构框图。
参照图20,在部分实施例中,主通讯终端3002A还包括主扬声器组件3008A,主基础通信模块3006A还被配置为从外部接收待播音频信息。主基础通信模块3006A将接收到的待播音频信息发送至主扬声器组件3008A,主扬声器组件3008A能够播放该待播音频信息。
图21是本公开部分实施例中的主通讯终端进行回声消除处理时的信息流向示意图。
进一步地,主通讯终端3002A还可以利用接收到的待播音频信息对采集到的声音进行回声消除处理,以生成主拾音音频信息PAA。参照图17,在部分实施例中,主收音组件3004A包括主声电转换器件3010A和主音频处理模块3012A。主声电转换器件3010A被配置为拾取声音,并将拾取的声信号转换为电信号,生成主音频信号ASA。主声电转换器件3010A可以包括压电麦克风、电磁麦克风、驻极体麦克风或其他形式的声电转换器件中的一种或多种。主音频处理模块3012A接收主音频信号ASA,并根据待播音频信息RX对主音频信号ASA进行回声消除处理,以生成主拾音音频信息PAA。
请再次参照图20,在部分实施例中,次级通讯终端3002B还包括次级扬声器组件3008B。次级基础通信模块3006B能够接收待播音频信息并将待播音频信息发送至次级扬声器组件3008B,次级扬声器组件3008B能够播放该待播音频信息。次级基础通信模块3006B可以从主通讯终端3002A和/或通讯系统3000外接收该待播音频信息。在一种实施方式中,主基础通信模块3006A还被配置为通过有线或无线的方式从通讯系统3000外获取待播音频信息,并通过无线方式将待播音频信息发送至次级通讯终端3002B,使次级扬声器组件3008B播放该待播音频信息。在通讯系统3000包括多个次级通讯终端3002B,且多个次级通讯终端3002B与主通讯终端3002A分别通信连接时,主通讯终端3002A可以按照预定的规则或用户的输入,向所有与之通信连接的次级通讯终端3002B或该多个次级通讯终端3002B中的一部分发送该待播音频信息。在另一种实施方式中,次级通讯终端3002B也可以从通讯系统3000外获取待播音频信息,例如,外部设备与主通讯终端3002A和次级通讯终端3002B分别通信连接,并分别向主通讯终端3002A和次级通讯终端3002B发送待播音频信息。
图22是本公开部分实施例中的次级通讯终端进行回声消除处理时的信息流向示意图。
进一步地,次级通讯终端3002B可以利用接收到的待播音频信息对采集到的声音进行回声消除处理,以生成次级拾音音频信息。参照图22,在部分实施例中,次级收音组件3004B包括次级声电转换器件3010B和次级音频处理模块3012B。次级声电转换器件3010B被配置为拾取声音,并将拾取的声信号转换为电信号,生成次级音频信号ASB。次级声电转换器件3010B可以包括压电麦克风、电磁麦克风、驻极体麦克风或其他形式的声电转换器件中的一种或多种。次级音频处理模块3012B接收次级音频信号ASB,并根据待播音频信息RX对次级音频信号ASB进行回声消除处理,以生成次级拾音音频信息PAB。
图23是本公开部分实施例中的一种音频信息处理方法的流程示意图。
本公开还提供一种音频信息处理方法,应用于通讯终端。该音频信息处理方法可以应用于如图3-图14所述的通讯终端。参照图23,在部分实施例中,该音频信息处理方法包括如下的步骤S110至步骤S170:
步骤S110、由第一收音单元生成第一拾音音频信息。
通讯终端包括第一收音单元。第一收音单元拾取声音,并基于所拾取的声音生成第一拾音音频信息。
步骤S130、由基础通信模块以无线方式获取第二拾音音频信息。
基础通信模块具有无线通信功能。基础通信模块与其他能够拾音的设备建立无线通信连接,并以无线方式获取第二拾音音频信息,其中,该其他能够拾音的设备能够生成该第二拾音音频信息。该其他能够拾音的设备可以是该通讯终端上的第一收音单元以外的其他拾音装置,也可以是与基础通信模块配对连接的其他通讯终端,或者是其他能够基础通信模块无线连接的能够拾音的设备。基础通信模块可以从一个或多个来源获得一个或多个第二拾音音频信息。例如,基础通信模块可以与多个其他通讯终端分别建立无线通信连接,并从该多个其他通讯终端分别获取第二拾音音频信息,从而获得多个第二拾音音频信息。当基础通信模块从多个来源获得多个第二拾音音频信息时,该多个来源可以是不同类型的来源。
根据基础通信模块获取第二拾音音频信息的来源不同,步骤S130可以包括如下的步骤S130a或步骤S130b中的至少一项:
步骤S130a、由基础通信模块以无线方式从与所述基础通信模块配对连接的其他通讯终端获取所述第二拾音音频信息。
基础通信模块可以与其他通讯终端配对连接,建立无线通信关系,并从其他通讯终端接收其他通讯终端拾音而生成的第二拾音音频信息。例如,基础通信模块可以通过蓝牙等短距离无线通信方式与其他通讯终端通信连接,以进行信号的传输。该其他通讯终端可以与该通讯终端的结构相同,也可以不同。
步骤S130b、由基础通信模块以无线方式从第二收音单元获取所述第二拾音音频信息。
通讯终端还包括第二收音单元,第二收音单元与基础通信模块通过无线方式进行通信。基础通信模块从第二收音单元获取第二拾音音频信息。在一种实施方式中,步骤S130b之前还包括步骤S120:由第二收音单元生成第二拾音音频信息。第二收音单元拾取声音,并根据拾取的声音生成相应的第二拾音音频信息。具体地,步骤S120可以包括如下的步骤S121至步骤S123:
步骤S121、由第二收音单元拾取声音生成第二音频信号。
通讯终端还包括第二收音单元,且第二收音单元被配置为拾取声音,将声信号转换为相应的电信号,生成第二音频信号。
步骤S123、根据所述第二音频信号生成所述第二拾音音频信息。
第二收音单元还根据预先确定的方式或用户的输入,对第二拾音音频信息进行相应的处理,进而得到第二拾音音频信息。
在步骤S120后,通讯终端执行步骤S130b,基础通信模块以无线方式从第二收音单元获取第二拾音音频信息。根据使用场景对于收音的需要,第二收音单元可以包括一个或多个。在一种可行的实施方式中,第二收音单元包括多个,基础通信模块从多个第二收音单元分别获取第二拾音音频信息,从而获得多个第二拾音音频信息。
步骤S130可以既包括步骤S130a也包括步骤S130b。例如,通讯终端包括第二收音单元且基础通信模块与第二收音单元和其他通讯终端均建立通信连接,第二收音单元和其他通讯终端同时进行收音,基础通信模块通过无线方式分别从第二收音单元和其他通讯终端获取多个第二拾音音频信息。
步骤S150、根据所述第一拾音音频信息和所述第二拾音音频信息获得返回音频信息。
通讯终端按照预先确定的规则或用户的输入,根据第一拾音音频信息以及第二拾音音频信息,获得相应的返回音频信息。该返回音频信息可以反映第一拾音音频信息以及第二拾音音频信息,还可以根据实际应用场景的需要,使该返回音频信息可以仅反映第一拾音音频信息或第二拾音音频信息。
在部分实施例中,进一步地,步骤S150可以包括如下的步骤S151:
步骤S151、对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息。
通讯终端包括相应的音频处理模块,该音频处理模块对第一拾音音频信息和第二拾音音频信息,按照预定的规则或者用户的输入进行混音处理,从而得到相应的返回音频信息。
根据进行混音处理的音频处理模块的设置方式的不同,步骤S151可以包括如下的步骤S151a或步骤S151b:
步骤151a、由第一收音单元对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息。
基础通信模块接收到第二拾音音频信息后,将第二拾音音频信息发送至第一收音单元,其中,第一收音单元与基础通信模块之间可以是有线连接,也可以是无线连接。第一收音单元包括第一音频处理模块,第一收音单元的第一音频处理模块对第一拾音音频信息和第二拾音音频信息进行混音处理,并根据混音处理的结果,获得返回音频信息。第一收音单元还将返回音频信息发送至基础通信模块。
步骤S151b、由第三音频处理模块对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息。
在部分实施例中,通讯终端还包括第三音频处理模块,第三音频处理模块与基础通信模块电连接。第一收音单元与基础通信模块之间可以是有线连接,也可以是无线连接。第一收音单元生成第一拾音音频信息后,将第一拾音音频信息直接发送至第三音频处理模块,或者通过基础通信模块发送至第三音频处理模块。基础通信模块接收到第二拾音音频信息后,将第二拾音音频信息发送至第三音频处理模块。第三音频处理模块对接受到的第一拾音音频信息和第二拾音音频信息进行混音处理,并根据混音处理的结果,获得返回音频信息。第三音频处理模块还将返回音频信息发送至基础通信模块。
步骤S170、由基础通信模块向外发送返回音频信息。
基础通信模块可以通过有线或无线的方式向外发送返回音频信息。基础通信模块可以向其他通讯终端、多媒体装置、云端服务器或其他装置中的一种或多种发送返回音频信息。例如,基础通信模块可以向电脑、手机等发送音频信息。在一种实施方式中,基础通信模块通过短距离无线通信方式(例如蓝牙、2.4G)与电脑建立通信连接,并将返回音频信息发送至该电脑,该电脑可以通过互联网或其他通信方式,与对方地点的参与会议人员使用的其他设备进行信息交流,从而可以满足不同地点的人们进行远程会议的需求。
在部分实施例中,进一步地,步骤S110之后、步骤S150之前,还可以包括由基础通信模块从第一收音单元获取第一拾音音频信息的步骤。
具体地,基础通信模块可以与第一收音单元有线连接或无线连接,以进行信号传输。第一收音单元生成第一拾音音频信息后,第一收音单元可主动向基础通信模块发送第一拾音音频信息,也可响应于基础通信模块发送的获取第一拾音音频信息的请求,向基础通信模块发送第一拾音音频信息。基础通信模块从第一收音单元接收第一拾音音频信息。例如,第一收音单元与基础通信模块无线通信连接,第一收音单元生成并向基础通信模块发送第一拾音音频信息,基础通信模块接收到该第一拾音音频信息后,通讯终端可以对该第一拾音音频信息与第二拾音音频信息进行进一步的处理,以获得返回音频信息。
图24是本公开部分实施例中的一种音频信息处理方法的流程示意图。
参照图24,在部分实施例中,在前述的步骤S110至步骤S170之前,音频信息处理方法还可以包括如下的步骤S101至步骤S105。其中,步骤S110至步骤S170与前文参照图23所描述的步骤S110至步骤S170基本相同。
步骤S101、由基础通信模块从外部获取待播音频信息。
基础通信模块通过有线或无线的方式,从通讯终端外获取待播音频信息。该待播音频信息可以是自地点的设备生成并发送的音频信息(例如自地点的人员希望展示的音频资料),也可以是对方地点拾取的参会人员的声音生成的音频信息。
步骤S103、由扬声器组件播放所述待播音频信息。
通讯终端还包括扬声器组件,基础通信模块向扬声器组件发送待播音频信息,扬声器组件播放该待播音频信息。
步骤S105、由基础通信模块以无线方式广播发送待播音频信息。
基础通信模块还将接收到的待播音频信息以无线的方式进行广播,使网络中的所有设备均能接收到待播音频信息,从而将待播音频信息发送至其他设备或该通讯终端上的其他部分。例如,基础通信模块1006可以通过蓝牙(Bluetooth)广播的方式向相应的蓝牙网络中的全部设备广播发送待播音频信息。第一收音单元和第二收音单元可以接收该被广播的待播音频信息。
根据需要,在步骤S101之后,还可以包括如下的步骤S107:
步骤S107、由基础通信模块以单播或多播的方式向其他通讯终端或第二收音单元发送待播音频信息。
在一种实施方式中,基础通信模块通过无线方式与一个或多个其他通讯终端或第二收音单元配对连接,基础通信模块与基础通信模块配对连接的该一个或多个其他通讯终端或或第二收音单元发送该待播音频信息。该其他通讯终端可以具有扬声器,从而可以播放从基础通信模块接受到的待播音频信息。
当该其他通讯终端用于拾取声音生成第二拾音音频信息,且步骤S130包括步骤S130a(即,由基础通信模块以无线方式从与所述基础通信模块配对连接的其他通讯终端获取所述第二拾音音频信息)时,该其他通讯终端可以利用该待播音频信息对拾取的声音进行回声消除处理。在该其他通讯终端不用于播放待播音频信息时,该待播音频信息可以用于作为回声消除处理的参考信号,从而提升该其他通讯终端生成的第二拾音音频信息的质量。
上述的步骤S105和步骤S107可以择一执行,也可以同时执行。
在部分实施例中,步骤S130b之前可以包括如前所述的步骤S120,步骤S120包括如前所述的步骤S121至步骤S123。其中,步骤S123包括如下的步骤S123b:
步骤S123b、根据所述待播音频信息对所述第二音频信号进行回声消除处理,以获得所述第二拾音音频信息。
在步骤S105和步骤S121之后,第二收音单元根据从基础通信模块接收到的待播音频信息,按照预先确定的规则或用户的输入,对步骤S121得到的第二音频信号进行回声消除处理,并根据回声消除处理的结果,得到相应的第二拾音音频信息。当第二收音单元不包括扬声器时,第二收音单元没有播放的音频信息作为回声消除处理时的参考信号。而基础通信模块向第二收音单元发送待播音频信息后,第二收音单元可以将接收到的待播音频信息作为回声消除处理的参考信号,对所拾取的声音进行回声消除处理,从而可以提升第二收音单元生成的第二拾音音频信息的质量。
在部分实施例中,步骤S110可以包括如下的步骤S111和步骤S113:
步骤S111、由第一收音单元拾取声音生成第一音频信号。
第一收音单元拾取声音,将声信号转换为相应的电信号,生成第一音频信号。
步骤S113、根据所述待播音频信息对所述第一音频信号进行回声消除处理,以获得所述第一拾音音频信息。
基础通信模块通过有线或无线的方式将接收到的待播音频信息发送给第一收音单元。第一收音单元根据接收到的待播音频信息,按照预先确定的规则或用户的输入,对步骤S111得到的第一音频信号进行回声消除处理,并根据回声消除处理的结果,得到相应的第一拾音音频信息。当第一收音单元不包括扬声器时,第一收音单元没有播放的音频信息作为回声消除处理时的参考信号。而基础通信模块向第一收音单元发送待播音频信息后,第一收音单元可以将接收到的待播音频信息作为回声消除处理的参考信号,对所拾取的声音进行回声消除处理,从而可以提升第一收音单元生成的第一拾音音频信息的质量。
本领域技术人员应当清楚,音频信息处理方法并非必须严格遵循上述步骤,可以根据实际需要对上述步骤的顺序进行调整、增加新的步骤或删减部分的步骤,例如,步骤S110和步骤S130可以先后进行,也可以同时进行。
本领域技术人员可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序存储在一个存储介质中,包括若干指令用以使得一个通讯终端中的相应设备或处理器(processor)执行本申请各实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本公开实施例的通讯终端、通讯系统和音频信息处理方法,通过一台通讯终端收集来自多个不同来源的拾音音频信息,使该通讯终端接收根据多个来源的拾音音频信息生成返回音频信息,并将返回音频信息发送至外部设备,由此可以实现多人使用时采用多个收音设备或收音部件同步收音的效果。
以上所述仅为本发明的优选实施例,并不用于限制本发明,对于本领域技术人员而言,本发明可以有各种改动和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (15)

1.一种通讯终端,其特征在于,包括:
收音组件,包括第一收音单元,所述第一收音单元被配置为拾取声音以生成第一拾音音频信息;以及
基础通信模块,被配置为通过无线方式接收第二拾音音频信息,并向外发送返回音频信息,所述返回音频信息根据所述第一拾音音频信息和所述第二拾音音频信息获得。
2.根据权利要求1所述的通讯终端,其特征在于,所述第一收音单元包括:
第一声电转换器件,被配置为拾取声音生成第一音频信号;以及
第一音频处理模块,被配置为根据所述第一音频信号生成所述第一拾音音频信息。
3.根据权利要求2所述的通讯终端,其特征在于,所述基础通信模块还被配置为将所述第二拾音音频信息发送至所述第一音频处理模块,所述第一音频处理模块还被配置为对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息。
4.根据权利要求2所述的通讯终端,其特征在于,所述第一收音单元还包括:
第一无线通信模块,与所述第一音频处理模块电连接,所述第一无线通信模块被配置为将所述第一拾音音频信息发送至所述基础通信模块。
5.根据权利要求4所述的通讯终端,其特征在于,所述通讯终端还包括:
第三音频处理模块,与所述基础通信模块电连接,所述第三音频处理模块被配置为对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息。
6.根据权利要求2所述的通讯终端,其特征在于,所述基础通信模块还被配置为接收待播音频信息;
所述通讯终端还包括扬声器组件,用于播放所述待播音频信息;
所述基础通信模块还被配置为将所述待播音频信息发送至所述第一收音单元,所述第一音频处理模块还被配置为根据所述待播音频信息对所述第一音频信号进行回声消除处理,以生成所述第一拾音音频信息。
7.根据权利要求1所述的通讯终端,其特征在于,所述收音组件还包括至少一个第二收音单元,所述第二收音单元包括:
第二声电转换器件,被配置为拾取声音生成所述第二音频信号;
第二音频处理模块,被配置为根据所述第二音频信号生成所述第二拾音音频信息;以及
第二无线通信模块,被配置为将所述第二拾音音频信息发送至所述基础通信模块。
8.根据权利要求7所述的通讯终端,其特征在于,所述基础通信模块还被配置为接收待播音频信息;
所述通讯终端还包括扬声器组件,用于播放所述待播音频信息;
所述基础通信模块还被配置为将所述待播音频信息发送至所述第二收音单元,所述第二音频处理模块还被配置为根据所述待播音频信息对所述第二音频信号进行回声消除处理,以生成所述第二拾音音频信息。
9.根据权利要求1所述的通讯终端,其特征在于,所述基础通信模块还被配置为接收待播音频信息;
所述通讯终端还包括扬声器组件,用于播放所述待播音频信息;
所述基础通信模块还被配置为以无线方式向外广播所述待播音频信息,所述第一收音单元还被配置为以无线方式接收被向外广播的所述待播音频信息。
10.一种通讯终端,其特征在于,包括:
收音组件,被配置为拾取声音以生成第一拾音音频信息;以及
基础通信模块,被配置为通过无线方式向与所述基础通信模块配对连接的其他通讯终端发送返回音频信息,所述返回音频信息根据所述第一拾音音频信息获得。
11.一种通讯系统,其特征在于,包括:
主通讯终端,所述主通讯终端包括主基础通信模块和主收音组件,所述主收音组件被配置为拾取声音以生成主拾音音频信息;以及
至少一个次级通讯终端,所述次级通讯终端包括次级基础通信模块和次级收音组件,所述次级收音组件被配置为拾取声音以生成次级拾音音频信息,所述次级基础通信模块被配置为以无线方式将次级返回音频信息发送至所述主基础通信模块,所述次级返回音频信息根据所述次级拾音音频信息获得;
其中,所述主基础通信模块被配置为向外发送主返回音频信息,所述返回音频信息根据所述主拾音音频信息和所述次级返回音频信息获得。
12.根据权利要求11所述的通讯系统,其特征在于,所述主基础通信模块还被配置为接收待播音频信息,所述主收音组件包括主声电转换器件和主音频处理模块,所述主声电转换器件被配置为拾取声音生成主音频信号,所述主音频处理模块被配置为根据所述待播音频信息对所述主音频信号进行回声消除处理,以生成所述主拾音音频信息;
所述次级收音组件包括次级声电转换器件和次级音频处理模块,所述次级声电转换器件被配置为拾取声音生成次级音频信号,所述次级音频处理模块被配置为根据所述待播音频信息对所述次级音频信号进行回声消除处理,以生成所述次级拾音音频信息。
13.一种音频信息处理方法,应用于通讯终端,其特征在于,所述方法包括:
由第一收音单元生成第一拾音音频信息;
由基础通信模块以无线方式获取第二拾音音频信息;
根据所述第一拾音音频信息和所述第二拾音音频信息获得返回音频信息;以及
由基础通信模块向外发送返回音频信息。
14.根据权利要求13所述的音频信息处理方法,其特征在于,所述根据所述第一拾音音频信息和所述第二拾音音频信息获得返回音频信息包括:
对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息;
所述对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息包括:
由第一收音单元对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息;或者,
由第三音频处理模块对所述第一拾音音频信息和所述第二拾音音频信息进行混音处理,以获得所述返回音频信息,其中,所述第三音频处理模块与所述基础通信模块电连接。
15.根据权利要求13所述的音频信息处理方法,其特征在于,所述方法还包括:
由基础通信模块从外部获取待播音频信息;
由扬声器组件播放所述待播音频信息;
由基础通信模块以无线方式广播发送待播音频信息;
由第二收音单元拾取声音生成第二音频信号;以及
根据所述待播音频信息对所述第二音频信号进行回声消除处理,以获得所述第二拾音音频信息;
所述由第一收音单元生成第一拾音音频信息包括:
由第一收音单元拾取声音生成第一音频信号;以及
根据所述待播音频信息对所述第一音频信号进行回声消除处理,以获得所述第一拾音音频信息。
CN202110857904.6A 2021-07-28 2021-07-28 通讯终端、通讯系统和音频信息处理方法 Pending CN113726966A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110857904.6A CN113726966A (zh) 2021-07-28 2021-07-28 通讯终端、通讯系统和音频信息处理方法
US17/872,265 US20230029845A1 (en) 2021-07-28 2022-07-25 Communication terminal, communication system and audio information processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110857904.6A CN113726966A (zh) 2021-07-28 2021-07-28 通讯终端、通讯系统和音频信息处理方法

Publications (1)

Publication Number Publication Date
CN113726966A true CN113726966A (zh) 2021-11-30

Family

ID=78674173

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110857904.6A Pending CN113726966A (zh) 2021-07-28 2021-07-28 通讯终端、通讯系统和音频信息处理方法

Country Status (2)

Country Link
US (1) US20230029845A1 (zh)
CN (1) CN113726966A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009206671A (ja) * 2008-02-27 2009-09-10 Yamaha Corp 音声会議システム
CN106937009A (zh) * 2017-01-18 2017-07-07 苏州科达科技股份有限公司 一种级联回声抵消系统及其控制方法及装置
CN207410510U (zh) * 2017-09-01 2018-05-25 深圳市台电实业有限公司 一种拾音设备和系统
US20200251121A1 (en) * 2017-11-14 2020-08-06 Nippon Telegraph And Telephone Corporation Voice communication device, voice communication method, and program
CN112055122A (zh) * 2020-08-07 2020-12-08 联想(北京)有限公司 一种会议组件设备、会议设备及数据处理方法
CN112735455A (zh) * 2019-10-28 2021-04-30 阿里巴巴集团控股有限公司 声音信息的处理方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009206671A (ja) * 2008-02-27 2009-09-10 Yamaha Corp 音声会議システム
CN106937009A (zh) * 2017-01-18 2017-07-07 苏州科达科技股份有限公司 一种级联回声抵消系统及其控制方法及装置
CN207410510U (zh) * 2017-09-01 2018-05-25 深圳市台电实业有限公司 一种拾音设备和系统
US20200251121A1 (en) * 2017-11-14 2020-08-06 Nippon Telegraph And Telephone Corporation Voice communication device, voice communication method, and program
CN112735455A (zh) * 2019-10-28 2021-04-30 阿里巴巴集团控股有限公司 声音信息的处理方法和装置
CN112055122A (zh) * 2020-08-07 2020-12-08 联想(北京)有限公司 一种会议组件设备、会议设备及数据处理方法

Also Published As

Publication number Publication date
US20230029845A1 (en) 2023-02-02

Similar Documents

Publication Publication Date Title
US11386912B1 (en) Method and computer program product for allowing a plurality of musicians who are in physically separate locations to create a single musical performance using a teleconferencing platform provided by a host server
US8379076B2 (en) System and method for displaying a multipoint videoconference
US8606249B1 (en) Methods and systems for enhancing audio quality during teleconferencing
US7903828B2 (en) Remote multipoint architecture for full-duplex audio
WO2012142975A1 (zh) 会场终端音频信号处理方法及会场终端和视讯会议系统
JP2010506519A (ja) 通信分野用のサウンドイベントを取得し、伝送し、および、再生するための処理および装置
CN105744022A (zh) 移动终端、语音播放方法及系统
CN114845144A (zh) 一种投屏方法、辅助投屏装置及存储介质
JP5213584B2 (ja) 通話システム
TWI774490B (zh) 通訊終端、通訊系統和音訊資訊處理方法
CN113726966A (zh) 通讯终端、通讯系统和音频信息处理方法
US8526589B2 (en) Multi-channel telephony
JP5097169B2 (ja) 電話会議装置とそれを用いた電話会議システム
CN115243163A (zh) 一种一拖多无线传输的麦克风会议系统及控制方法
US20040192248A1 (en) Shared device, system and method for multiple communication connections thereof
JP2007325201A (ja) 音源分離法
JP2001036881A (ja) 音声伝送システム及び音声再生装置
US11877113B2 (en) Distributed microphone in wireless audio system
CN214544291U (zh) 一种便携通话装置
CN113129915B (zh) 音频共享方法、装置、设备、存储介质及程序产品
CN219459161U (zh) 一种带操作系统的无线智能音视频会议终端
EP4300918A1 (en) A method for managing sound in a virtual conferencing system, a related system, a related acoustic management module, a related client device
EP3944633A1 (en) A method for optimizing speech pickup in a speakerphone system
CN102238363A (zh) 采用蓝牙耳麦的视像会议系统和相应方法
CN117061937A (zh) 麦克风级联扩展系统及麦克风级联扩展方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination