TWI774490B - 通訊終端、通訊系統和音訊資訊處理方法 - Google Patents
通訊終端、通訊系統和音訊資訊處理方法 Download PDFInfo
- Publication number
- TWI774490B TWI774490B TW110127762A TW110127762A TWI774490B TW I774490 B TWI774490 B TW I774490B TW 110127762 A TW110127762 A TW 110127762A TW 110127762 A TW110127762 A TW 110127762A TW I774490 B TWI774490 B TW I774490B
- Authority
- TW
- Taiwan
- Prior art keywords
- audio information
- pickup
- audio
- sound
- communication module
- Prior art date
Links
Images
Landscapes
- Communication Control (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
Abstract
本發明公開了一種通訊終端、通訊系統和音訊資訊處理方法,通訊終端包含收音組件和基礎通訊模組,通過一台通訊終端的基礎通訊模組以無線方式接收第二拾音音訊資訊,使該通訊終端根據該通訊終端產生的第一拾音音訊資訊和接收到的第二拾音音訊資訊獲得返回音訊資訊,並通過基礎通訊模組將返回音訊資訊向外發送。由此,本發明的技術手段可以實現多個無線收音裝置或無線收音部件的同步收音,可以滿足多人同時使用的需求,達到良好的收音效果。
Description
本發明涉及資訊處理技術領域,具體涉及一種通訊終端、通訊系統和音訊資訊處理方法。
會議是一種普遍存在的為了互相溝通、交流或解決問題而進行的交流活動。會議中常常需要使用通訊終端或通訊系統來進行交流。現有的無線通訊系統中,在存在多個用於收音的無線收音裝置或無線收音部件時,通常只能選擇單一的無線收音裝置或無線收音部件進行收音,而無法同時使用多個無線收音裝置或無線收音部件進行收音,這在多人同時講話時無法實現良好的收音效果。
〔發明所欲解決之技術問題〕
本發明實施例提供一種通訊終端、通訊系統和音訊資訊處理方法,能夠解決多人使用時的無法同步收音的問題。
〔技術手段〕
第一方面,本發明實施例提供了一種通訊終端,前述通訊終端包含收音組件以及基礎通訊模組;前述收音組件包含第一收音單元,前述第一收音單元被配置為拾取聲音以生成第一拾音音訊資訊;前述基礎通訊模組被配置為通過無線方式接收第二拾音音訊資訊,並向外發送返回音訊資訊,前述返回音訊資訊根據前述第一拾音音訊資訊和前述第二拾音音訊資訊獲得。
在部分實施例中,前述第一收音單元包含第一聲電轉換器件以及第一音訊處理模組;前述第一聲電轉換器件被配置為拾取聲音生成第一音訊訊號;前述第一音訊處理模組被配置為根據前述第一音訊訊號生成前述第一拾音音訊資訊。
在部分實施例中,前述基礎通訊模組還被配置為將前述第二拾音音訊資訊發送至前述第一音訊處理模組,前述第一音訊處理模組還被配置為對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊。
在部分實施例中,前述第一收音單元還包含第一無線通訊模組;前述第一無線通訊模組與前述第一音訊處理模組電連接,前述第一無線通訊模組被配置為將前述第一拾音音訊資訊發送至前述基礎通訊模組。
在部分實施例中,前述通訊終端還包含第三音訊處理模組;前述第三音訊處理模組與前述基礎通訊模組電連接,前述第三音訊處理模組被配置為對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊。
在部分實施例中,前述基礎通訊模組還被配置為接收待播音訊資訊;前述通訊終端還包含揚聲器組件,用於播放前述待播音訊資訊;前述基礎通訊模組還被配置為將前述待播音訊資訊發送至前述第一收音單元,前述第一音訊處理模組還被配置為根據前述待播音訊資訊對前述第一音訊訊號進行回聲消除處理,以生成前述第一拾音音訊資訊。
在部分實施例中,前述收音組件還包含至少一個第二收音單元,前述第二收音單元包含第二聲電轉換器件、第二音訊處理模組以及第二無線通訊模組;前述第二聲電轉換器件被配置為拾取聲音生成前述第二音訊訊號;前述第二音訊處理模組被配置為根據前述第二音訊訊號生成前述第二拾音音訊資訊;前述第二無線通訊模組被配置為將前述第二拾音音訊資訊發送至前述基礎通訊模組。
在部分實施例中,前述基礎通訊模組還被配置為接收待播音訊資訊;前述通訊終端還包含揚聲器組件,用於播放前述待播音訊資訊;前述基礎通訊模組還被配置為將前述待播音訊資訊發送至前述第二收音單元,前述第二音訊處理模組還被配置為根據前述待播音訊資訊對前述第二音訊訊號進行回聲消除處理,以生成前述第二拾音音訊資訊。
在部分實施例中,前述基礎通訊模組還被配置為接收待播音訊資訊;前述通訊終端還包含揚聲器組件,用於播放前述待播音訊資訊;前述基礎通訊模組還被配置為以無線方式向外廣播前述待播音訊資訊,前述第一收音單元還被配置為以無線方式接收被向外廣播的前述待播音訊資訊。
第二方面,本發明實施例還提供了另一種通訊終端,包含收音組件以及基礎通訊模組;前述收音組件被配置為拾取聲音以生成第一拾音音訊資訊;前述基礎通訊模組被配置為通過無線方式向與前述基礎通訊模組配對連接的其他通訊終端發送返回音訊資訊,前述返回音訊資訊根據前述第一拾音音訊資訊獲得。
第三方面,本發明實施例還提供了一種通訊系統,前述通訊系統包含主通訊終端以及至少一個次級通訊終端;前述主通訊終端包含主基礎通訊模組和主收音組件,前述主收音組件被配置為拾取聲音以生成主拾音音訊資訊;前述次級通訊終端包含次級基礎通訊模組和次級收音組件,前述次級收音組件被配置為拾取聲音以生成次級拾音音訊資訊,前述次級基礎通訊模組被配置為以無線方式將次級返回音訊資訊發送至前述主基礎通訊模組,前述次級返回音訊資訊根據前述次級拾音音訊資訊獲得;其中,前述主基礎通訊模組被配置為向外發送主返回音訊資訊,前述返回音訊資訊根據前述主拾音音訊資訊和前述次級返回音訊資訊獲得。
在部分實施例中,前述主基礎通訊模組還被配置為接收待播音訊資訊,前述主收音組件包含主聲電轉換器件和主音訊處理模組,前述主聲電轉換器件被配置為拾取聲音生成主音訊訊號,前述主音訊處理模組被配置為根據前述待播音訊資訊對前述主音訊訊號進行回聲消除處理,以生成前述主拾音音訊資訊;前述次級收音組件包含次級聲電轉換器件和次級音訊處理模組,前述次級聲電轉換器件被配置為拾取聲音生成次級音訊訊號,前述次級音訊處理模組被配置為根據前述待播音訊資訊對前述次級音訊訊號進行回聲消除處理,以生成前述次級拾音音訊資訊。
第四方面,本發明實施例還提供了一種音訊資訊處理方法,應用於通訊終端,前述方法包含如下步驟:由第一收音單元生成第一拾音音訊資訊;由基礎通訊模組以無線方式獲取第二拾音音訊資訊;根據前述第一拾音音訊資訊和前述第二拾音音訊資訊獲得返回音訊資訊;以及,由基礎通訊模組向外發送返回音訊資訊。
在部分實施例中,前述根據前述第一拾音音訊資訊和前述第二拾音音訊資訊獲得返回音訊資訊包含:對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊;前述對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊包含:由第一收音單元對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊;或者,由第三音訊處理模組對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊,其中,前述第三音訊處理模組與前述基礎通訊模組電連接。
在部分實施例中,前述方法還包含如下步驟:由基礎通訊模組從外部獲取待播音訊資訊;由揚聲器組件播放前述待播音訊資訊;由基礎通訊模組以無線方式廣播發送待播音訊資訊;由第二收音單元拾取聲音生成第二音訊訊號;以及,根據前述待播音訊資訊對前述第二音訊訊號進行回聲消除處理,以獲得前述第二拾音音訊資訊;前述由第一收音單元生成第一拾音音訊資訊之步驟係包含下列步驟:由前述第一收音單元拾取聲音生成第一音訊訊號;以及,根據前述待播音訊資訊對前述第一音訊訊號進行回聲消除處理,以獲得前述第一拾音音訊資訊。
在部分實施例中,前述由基礎通訊模組以無線方式獲取第二拾音音訊資訊包含:由基礎通訊模組以無線方式從第二收音單元獲取前述第二拾音音訊資訊;前述由基礎通訊模組以無線方式發送待播音訊資訊包含:由基礎通訊模組以無線方式向第二收音單元發送前述待播音訊資訊;前述方法還包含:由第二收音單元生成第二拾音音訊資訊;前述由第二收音單元生成第二拾音音訊資訊包含:由第二收音單元拾取聲音生成第二音訊訊號;以及,根據前述待播音訊資訊對前述第二音訊訊號進行回聲消除處理,以獲得前述第二拾音音訊資訊。
〔發明之效果〕
通過一台通訊終端的基礎通訊模組以無線方式接收第二拾音音訊資訊,使該通訊終端根據該通訊終端產生的第一拾音音訊資訊和接收到的第二拾音音訊資訊獲得返回音訊資訊,並將返回音訊資訊向外發送。由此,本發明實施例的技術手段可以實現多個無線收音裝置或無線收音部件的同步收音,可以滿足多人使用的需求,達到良好的收音效果。
以下基於實施例對本發明進行描述,但是本發明並不僅僅限於這些實施例。在下文對本發明的細節描述中,詳盡描述了一些特定的細節部分。對所屬技術領域中具有通常知識者來說沒有這些細節部分的描述也可以完全理解本發明。為了避免混淆本發明的實質,習知的方法、過程、流程、元件和電路並沒有詳細敘述。
此外,所屬技術領域中具有通常知識者應當理解,在此提供的圖式都是為了說明的目的,並且圖式不一定是按比例繪製的。
除非上下文明確要求,否則在說明書的「包括」、「包含」等類似詞語應當解釋為包含的含義而不是排他或窮舉的含義;也就是說,是「包含但不限於」的含義。
在本發明的描述中,需要理解的是,術語「第一」、「第二」等僅用於描述目的,而不能理解為指示或暗示相對重要性。此外,在本發明的描述中,除非另有說明,「多個」的含義是兩個或兩個以上。
以下所述僅為本發明的理想實施例,並不用於限制本發明,對於所屬技術領域中具有通常知識者而言,本發明可以有各種改動和變化。凡在本發明的精神和原理之內所作的任何修改、均等替換、改進等,均應包含在本發明的保護範圍之內。
圖1至圖2是本發明部分實施例的通訊終端的兩種使用場景示意圖。圖1是本發明部分實施例中的第一種通訊終端的結構框圖。
參照圖1至圖3,通訊終端1000包含收音組件1002和基礎通訊模組1006。收音組件1002包含第一收音單元1004,第一收音單元1004用於拾取聲音以生成第一拾音音訊資訊。基礎通訊模組1002用於以無線方式接收第二拾音音訊資訊。通訊終端1000根據第一拾音音訊資訊和第二拾音音訊資訊獲得返回音訊資訊。基礎通訊模組1006能夠通過有線及/或無線的方式與該通訊終端1000以外的外部設備建立電連接及/或通訊連接,並向外部設備ED發送返回音訊資訊。
在本發明中,該外部設備ED為可以通過有線及/或無線的方式與通訊終端1000的基礎通訊模組1006之間進行訊號傳輸的設備。該外部設備可以是能夠接收返回音訊資訊並對返回音訊資訊進行存儲及/或處理的各種設備,例如電腦、平板電腦、手機、伺服器、其他通訊終端,等等。基礎通訊模組1006將返回音訊資訊發送至該外部設備ED,以使該外部設備ED能夠對返回音訊資訊進行存儲、處理、向外傳輸或者其他操作中的一種或多種。
在一種使用場景中,參照圖1和圖2,該外部設備ED可以是電腦,該電腦可以通過一個或多個有線或無線網路(例如,互聯網)與位於其他地理位置的裝置彼此通訊。該電腦能夠將返回音訊資訊通過該有線或無線網路發送至位於其他地理位置的裝置,同時還可以從位於其他地理位置的裝置接收資訊。例如,位於A地點的外部設備ED可以通過互聯網與位於B地點的設備進行資訊交流,傳輸音訊、影片、文本、圖片或其他資訊,從而能夠使位於不同地理位置的人們進行遠端會議。
在本發明中,基礎通訊模組1006能夠以無線的方式進行通訊。該基礎通訊模組1006的無線通訊方式可以包含藍牙通訊、WIFI通訊、紅外通訊、射頻通訊或其他無線通訊方式中的一種或多種。在一種實施方式中,該基礎通訊模組1006包含多種無線通訊方式,基礎通訊模組1006可根據建立通訊連接的設備(例如其他通訊終端)支援的通訊方式,在多種無線通訊方式之間進行切換,以保證該通訊終端1000的通用性。在部分實施例中,基礎通訊模組1006還能夠通過有線方式進行通訊。在一種實施方式中,通訊終端1000還包含一個或多個硬體介面,通過該硬體介面可以將基礎通訊模組1006與具有對應的介面的外部設備ED或通訊終端上的其他部件連接,以進行資訊傳輸。該硬體介面可以包括USB介面、HDMI介面、光纖介面、數位同軸介面或其他能夠進行音訊資訊傳輸的硬體介面中的一種或多種。
基礎通訊模組1006能夠以無線方式與該通訊終端1000外的其他設備以及/或者與該通訊終端1000上的其他部分建立無線通訊連接,並從該通訊終端1000外以及/或者從該通訊終端1000的其他部分接收第二拾音音訊資訊。基礎通訊模組1006接收第二拾音音訊資訊後,通訊終端1000按照預定的規則或者使用者的輸入,根據第一拾音音訊資訊和第二拾音音訊資訊得到相應的返回音訊資訊,並使基礎通訊模組1006將返回音訊資訊發送至外部設備ED。與使產生第二拾音音訊資訊的裝置直接通過無線方式將第二拾音音訊資訊發送至外部裝置的方式相比,使通訊終端1000接收第二拾音音訊資訊並由該通訊終端1000生成和向外部裝置ED發送返回音訊資訊,可以減少該外部裝置ED接收資訊的數量,避免由於無線網路頻寬的限制使外部裝置ED僅能接收數量較少的無線收音裝置發送的音訊資訊。同時,通訊終端1000可以對來自不同來源的多個音訊資訊進行處理,從而可以減少該外部裝置ED或與該外部裝置ED連接的其他計算裝置對音訊資訊進行處理的處理計算量。
在本發明中,第一收音單元1004可以是任意的能夠拾取聲音並輸出能夠反映所拾取聲音的基礎通訊模組可讀取的訊號的裝置。第一收音單元1004可以通過有線及/或無線的方式與基礎通訊模組1006建立通訊,從而與基礎通訊模組1006之間進行資訊的傳輸。在本發明所示意的各個結構框圖中,部件之間的連線僅為了示意連線所連接的部件之間示意具有訊號傳輸關係,並非意味著通過連線連接的部件之間必然具有物理上的連接或電連接關係,該訊號傳輸關係可以通過有線的方式實現,也可以通過無線的方式實現。例如,圖3中第一收音單元1004與基礎通訊模組1006之間的連線用於說明第一收音單元1004與基礎通訊模組1006之間具有訊號傳輸關係,並非意味著第一收音單元1004與基礎通訊模組1006必然具有物理上的連接或電連接關係,第一收音單元1004與基礎通訊模組1006之間可以通過有線或無線的方式進行訊號傳輸。
第一收音單元1004可以與通訊終端1000的主體部分集成為一個整體,或者也可以與通訊終端1000的主體部分相分離。在一種實施方式中,參照圖2,基礎通訊模組1006和第一收音單元1004均設置在通訊終端1000的主體部分中,基礎通訊模組1006與第一收音單元1004電連接。在另一種實施方式中,參照圖1,基礎通訊模組1006設置在通訊終端1000的主體部分中,第一收音單元1004與通訊終端1000的主體部分相分離,例如,第一收音單元1004可以為無線話筒(參照圖1),或者設置在無線話筒中,從而能夠與通訊終端1000的主體部分相分離而使用。
在一種應用場景中,通訊終端1000可以實現為無線耳機,該無線耳機具有一個或多個麥克風,該一個或多個麥克風作為該通訊終端1000的收音組件1002,其中至少一個麥克風作為第一收音單元1004。在一種實施方式中,該一個或多個麥克風與無線耳機的主體部分之間通過可拆分的方式連接,也即麥克風與無線耳機的主體部分之間具有結合和分離兩種狀態。該無線耳機使用時,可以將麥克風與無線耳機的主體部分相結合而使用,也可以將麥克風從無線耳機的主體部分上拆下,方便用戶使用。
圖4是本發明部分實施例中的一種第一收音單元的結構框圖。圖5是本發明部分實施例中的第一收音單元工作時的一種資訊流向示意圖。
參照圖4和圖5,在部分實施例中,第一收音單元1004包含第一聲電轉換器件1008和第一音訊處理模組1010,第一音訊處理模組1010與第一聲電轉換器件1008電連接。第一聲電轉換器件1008能夠拾取聲音,並將拾取的聲訊號轉換為電訊號,生成第一音訊訊號AS1。第一聲電轉換器件1008可以包含壓電麥克風、電磁麥克風、駐極體麥克風或其他形式的聲電轉換器件中的一種或多種。第一聲電轉換器件1008將第一音訊訊號AS1發送至第一音訊處理模組1010,第一音訊處理模組1010根據第一音訊訊號AS1生成相應的第一拾音音訊資訊PA1。第一音訊處理模組1010可以與基礎通訊模組1006有線連接,以實現與基礎通訊模組1006之間的訊號傳輸。
在本發明中,各個資訊流向示意圖僅展示了一種可能的資訊流向,在實際應用中,各個資訊流向的發生順序並非必然按照流向示意圖中由上至下的排列順序發生。例如,圖5中表示第一拾音音訊資訊PA1的生成的箭頭位於表示第二拾音音訊資訊PA2從基礎通訊模組1006傳輸到第一音訊處理模組1010的箭頭的上方,但第一拾音音訊資訊PA1的生成時間並非必然早於第二拾音音訊資訊PA2從基礎通訊模組1006到達第一音訊處理模組1010的時間,第一拾音音訊資訊PA1的生成也可能與第二拾音音訊資訊PA2從基礎通訊模組1006到達第一音訊處理模組1010同時發生,或比第二拾音音訊資訊PA2從基礎通訊模組1006到達第一音訊處理模組1010更晚。同時,為了展示通訊終端的工作原理便利的需要,資訊流向示意圖中並未將通訊終端的所有部件列出。
參照圖3至圖5,在部分實施例中,基礎通訊模組1006還被配置為將接收到的第二拾音音訊資訊PA2發送至第一收音單元1004的第一音訊處理模組1010。第一音訊處理模組1010還被配置為按照預先確定的規則或使用者的輸入,對第一拾音音訊資訊PA1和第二拾音音訊資訊PA2進行混音處理,並根據混音處理的結果,得到相應的返回音訊資訊TX。第一音訊處理模組1010還將返回音訊資訊TX發送至基礎通訊模組1006。
在本發明中,混音是指是把多種來源的聲音,整合至一個立體音軌或單音音軌中。在混音的過程中,音訊處理模組可以對各個拾音音訊資訊的頻率、音質、定位等進行調整,讓各音軌最佳化。例如,可以根據不同來源的拾音音訊資訊的傳輸時的時間延遲量的差異,調整各個拾音音訊資訊的定位。又例如,可以對多個拾音音訊資訊中音量較小的拾音音訊資訊進行音量增大處理。通過對第一拾音音訊資訊和第二拾音音訊資訊進行混音操作,可以使返回音訊資訊獲得較佳的聲音效果。
當然,根據需要,通訊終端也可以不對第一拾音音訊資訊和第二拾音音訊資訊進行混音處理。
圖6是本發明部分實施例中的另一種第一收音單元的結構框圖。
參照圖6,在部分實施例中,第一收音單元1004通過無線的方式與基礎通訊模組1006進行通訊連接。在一種可行的實施方式中,第一收音單元1004可以包含第一聲電轉換器件1008、第一音訊處理模組1010和第一無線通訊模組1012,第一無線通訊模組1012與第一音訊處理模組1010電連接,並能夠通過無線的方式將第一拾音音訊資訊發送至基礎通訊模組1006。第一無線通訊模組1012的無線通訊方式可以包含藍牙通訊、WIFI通訊、紅外通訊、射頻通訊或其他無線通訊方式中的一種或多種。第一無線通訊模組1012與基礎通訊模組1006應當具有至少一種相同的無線通訊方式,以使第一無線通訊模組1012能夠與基礎通訊模組1006建立無線通訊連接。在一種可行的實施方式中,第一無線通訊模組1012可以通過短距離無線傳輸方式(例如,藍牙)的方式實現通訊連接。
圖7是本發明部分實施例中的第二種通訊終端的結構框圖。圖8是本發明部分實施例中的第三音訊處理模組工作時的資訊流向示意圖。
參照圖7,在部分實施例中,通訊終端1000還包含第三音訊處理模組1014,第三音訊處理模組1014與基礎通訊模組1006電連接。圖8示意性地展示了圖7中所示的本發明部分實施例中的第二種通訊終端中的第三音訊處理模組1014工作時的一種資訊流向。參照圖7和圖8,在部分實施例中,收音組件1002的第一收音單元與基礎通訊模組1006無線通訊連接,並將第一拾音音訊資訊PA1發送至基礎通訊模組1006。第一收音單元可以與通訊終端1000的主體部分相分離。在一種實施方式中,基礎通訊模組1006設置在通訊終端1000的主體部分中,第一收音單元與通訊終端1000的主體部分相分離,例如,第一收音單元可以為無線話筒,或者設置在無線話筒中。基礎通訊模組1006將接收到的第一拾音音訊資訊PA1和第二拾音音訊資訊PA2發送至第三音訊處理模組1014,第三音訊處理模組1014被配置為按照預先確定的規則或使用者的輸入,對第一拾音音訊資訊PA1和第二拾音音訊資訊PA2進行混音處理,並根據混音處理的結果,得到相應的返回音訊資訊TX。第三音訊處理模組1014還被配置為將返回音訊資訊TX發送至基礎通訊模組。
圖9是本發明部分實施例中的第三種通訊終端的結構框圖。
參照圖9,在部分實施例中,收音組件1002還包含第二收音單元1016。第二收音單元1016被配置為拾取聲音以生成第二拾音音訊資訊,並將第二拾音音訊資訊通過無線方式發送至基礎通訊模組1006。與第一收音單元1004相類似,第二收音單元1016可以是任意的能夠拾取聲音並輸出能夠反映所拾取聲音的基礎通訊模組1006可讀取的訊號的裝置。例如,第二收音單元1016可以為無線話筒(參照圖1和圖2),或者設置在無線話筒中。在一種實施方式中,參照圖1和圖2,第二收音單元1016可以與通訊終端1000的主體部分相分離而使用,由此可以提高通訊終端收音時的靈活性。當有多名參與會議的人員時,不同的人員可以分別使用第一收音單元1004和第二收音單元1016進行收音。
在一種應用場景中,通訊終端1000可以實現為如前所述的無線耳機,該無線耳機具有多個麥克風,其中至少一個麥克風作為第一收音單元1004,至少一個麥克風作為第二收音單元1016。例如,該無線耳機包括兩個麥克風,其中一個麥克風作為第一收音單元1004,另一個麥克風作為第二收音單元1016。作為第二收音單元1016的麥克風與無線耳機的主體部分之間通過可拆分的方式連接。該無線耳機使用時,可以將作為第二收音單元1016的麥克風與無線耳機的主體部分相結合而使用,也可以將第二收音單元1016從無線耳機的主體部分上拆下,方便用戶使用。作為第一收音單元1004的麥克風可以集成在該無線耳機的主體部分中,也可以通過可拆卸的方式與該無線耳機的主體部分連接,可以與該無線耳機的主體部分相分離而使用。
圖10是本發明部分實施例中的第二收音單元的結構框圖。
參照圖10,在部分實施例中,第二收音單元1016包含第二聲電轉換器件1018、第二音訊處理模組1020和第二無線通訊模組1022。第二聲電轉換器件1018拾取聲音,並將拾取的聲訊號轉換為電訊號,生成第二音訊訊號。第二聲電轉換器件1018可以包含壓電麥克風、電磁麥克風、駐極體麥克風或其他形式的聲電轉換器件中的一種或多種。第二音訊處理模組1020與第二聲電轉換器件1018電連接,並根據第二音訊訊號生成相應的第二拾音音訊資訊。第二無線通訊模組1022與第二音訊處理模組1020電連接,將第二拾音音訊資訊通過無線的方式發送至基礎通訊模組1006。第二無線通訊模組1022的無線通訊方式可以包含藍牙通訊、WIFI通訊、紅外通訊、射頻通訊或其他無線通訊方式中的一種或多種。第二無線通訊模組1022與基礎通訊模組1006應當具有至少一種相同的無線通訊方式,以使第二無線通訊模組1022能夠與基礎通訊模組1006建立無線通訊連接。在一種實施方式中,第二無線通訊模組1022可以通過短距離無線傳輸方式(例如,藍牙)的方式實現通訊連接。
第二收音單元1016可以為一個,也可以為多個。在一種實施方式中,第二收音單元1016為多個,多個第二收音單元1016分別與基礎通訊模組1006通訊連接。基礎通訊模組1006從多個第二收音單元1016分別接收第二拾音音訊資訊。通訊終端1000根據第一拾音音訊資訊和多個第二拾音音訊資訊,獲得相應的返回音訊資訊。
在部分實施例中,基礎通訊模組1006從第一收音單元1004接收第一拾音音訊資訊,從第二收音單元1016接收第二拾音音訊資訊,然後將第一拾音音訊資訊和第二拾音音訊資訊發送至外部設備,也即,返回音訊資訊包含第一拾音音訊資訊和第二拾音音訊資訊。第一收音單元1004可以與基礎通訊模組1006無線連接,也可以與基礎通訊模組1006有線連接。
在部分實施例中,參照圖5以及前文對圖5的描述並參照圖9,第一收音單元1004與基礎通訊模組1006電連接。基礎通訊模組1006從第二收音單元1016以無線方式接收第二拾音音訊資訊PA2,然後將第二拾音音訊資訊PA2發送至第一收音單元1004。第一音訊處理模組1010按照預先確定的規則或使用者的輸入,對第一拾音音訊資訊PA1和第二拾音音訊資訊PA2進行混音處理,並根據混音處理的結果得到相應的返回音訊資訊TX,並將返回音訊資訊TX發送至基礎通訊模組1006。
在部分實施例中,參照圖7至圖8以及前文對圖7至圖8的描述並參照圖9至圖10,通訊終端還包含第三音訊處理模組1004。收音組件1002的第一收音單元1004通過無線方式將第一拾音音訊資訊PA1發送至基礎通訊模組1006,收音組件1002的第二收音單元1016通過無線方式將第二拾音音訊資訊PA2發送至基礎通訊模組1006,基礎通訊模組1006將第一拾音音訊資訊PA1和第二拾音音訊資訊PA2發送至第三音訊處理模組1014。第三音訊處理模組1014被配置為按照預先確定的規則或使用者的輸入,對第一拾音音訊資訊PA1和第二拾音音訊資訊PA2進行混音處理,並根據混音處理的結果,得到相應的返回音訊資訊TX。第三音訊處理模組1014還將返回音訊資訊TX發送至基礎通訊模組1006。
圖11是本發明部分實施例中的第四種通訊終端的結構框圖。
參照圖11,在部分實施例中,通訊終端1000還可以包含揚聲器組件1024,基礎通訊模組1006還被配置為從外部設備接收待播音訊資訊。揚聲器組件1024與基礎通訊模組1006有線或無線連接,以接收和播放該待播音訊資訊。例如,揚聲器組件1024與基礎通訊模組1006之間可以採用電連接的方式實現待播音訊資訊的傳輸。
在本發明中,待播音訊資訊可以是由外部設備生成、從機器可讀存儲介質中讀取、通過有線或無線通訊方式獲取,或者通過其他方式獲取的音訊資訊。例如,待播音訊資訊可以是存儲在外部設備中的音訊資料,在一種應用場景中,用戶可以操作外部設備(例如電腦),使外部設備向基礎通訊模組1006發送待播音訊資訊,以展示相應的音訊資料。又例如,外部設備通過有線或無線網路與其他地理位置的其他用於參與會議的設備連接,並從該其他用於參與會議的設備接收待播音訊資訊(例如該其他用於參與會議的設備採集的參與會議人員的聲音)。
在本發明中,前述揚聲器組件1024可以包含電聲轉換器件和相應的音訊處理電路。電聲轉換器件可以包含壓電揚聲器、電磁揚聲器、靜電揚聲器或其他形式的電聲轉換器件中的一種或多種。音訊處理電路根據待播音訊資訊轉換為相應的類比電訊號傳輸至電聲轉換器件,電聲轉換器件將該類比電訊號在轉換為聲訊號,以播放待播音訊資訊。該音訊處理電路可以包含功率放大電路,以驅動電聲轉換器件發聲。
在部分實施例中,基礎通訊模組1006還將接收到的待播音訊資訊發送到通訊終端1000以外的與之通訊的其他設備或者通訊終端1000上的揚聲器組件1024以外的其他部分。無線通訊系統中,發送方和接收方之間的訊號通訊方式包括單播、多播(組播)和廣播等方式。在本發明中,單播是指發送方將訊號發送給一個特定的接收方,是一種一對一的通訊方式;多播是指發送方將訊號發送至加入特定組的多個接收方,也即加入了同一個組的接收方可以接受到此組內的所有數據;廣播是指發送方將訊號發給無線網絡中的全部接收方。根據實際應用的需要,基礎通訊模組1006可以採用單播、多播(組播)或廣播中的至少一種方式將待播音訊資訊發送至通訊終端1000的其他部分或通訊終端1000以外的其他設備。在一種應用場景中,基礎通訊模組1006可以通過單播或多播的方式將接收到的待播音訊資訊發送到與之配對連接的特定的其他設備上(例如其他通訊終端或無線音箱,等等),以播放該待播音訊資訊或對該待播音訊資訊進行其他處理。在另一種應用場景中,基礎通訊模組1006可以向一定區域廣播待播音訊資訊,以使在該一定區域內的全部相關設備能夠接收到該待播音訊資訊。舉例來說,前述第一收音單元1004可以通過無線方式接收該被向外廣播的待播音訊資訊。例如,基礎通訊模組1006可以通過藍牙(Bluetooth)廣播的方式向相應的藍牙網絡中的全部設備廣播發送待播音訊資訊。第一收音單元1004可以通過無線方式接收到該被向外廣播的待播音訊資訊。
在部分實施例中,該與之配對連接的其他設備可以根據該待播音訊資訊對所採集的音訊訊號進行回聲消除處理。
在進行音訊會議的過程中,位於自地點的通訊終端或其他收音裝置處理採集到自地點的用戶聲音以外,還能採集到從參與音訊會議的對方地點的設備接收到的、並由自地點的揚聲器播放的聲音。自地點的揚聲器再現的對方地點的聲音,被自地點的收音裝置採集而得到的聲音稱為回聲。在產生回聲的情況下,如果不對回聲進行消除而向對方地點發送聲音,則對方地點的揚聲器將以一定的時間差再現對方地點的聲音,從而給參與會議的用戶的帶來交流上的不便和困擾。通過回聲消除處理,可以提升用戶進行交流的順暢度。回聲消除處理通常可以根據回聲傳遞的特性,根據揚聲器所播放的訊號得到相應的回聲回饋訊號,並通過篩檢程式等從收音裝置採集的聲音訊號中減去回聲回饋訊號來消除回聲。
圖12是本發明部分實施例中的一種第一收音單元進行回聲消除處理的資訊流向示意圖。圖13是本發明部分實施例中的另一種第一收音單元進行回聲消除處理的資訊流向示意圖。
參照圖12和圖13,進一步地,在部分實施例中,基礎通訊模組1006還將接收到的待播音訊資訊RX發送至第一收音單元1004。在第一收音單元1004與基礎通訊模組1006有線連接的情況下,基礎通訊模組1006將待播音訊資訊RX發送至第一音訊處理模組1010,如圖12所示。在第一收音單元1004與基礎通訊模組1006無線通訊連接的情況下,基礎通訊模組1006將待播音訊資訊RX發送至第一收音單元1004的第一無線通訊模組1012,第一無線通訊模組1012將待播音訊資訊RX發送至第一音訊處理模組1010,如圖13所示。在揚聲器組件1024播放待播音訊資訊RX的情況下,第一聲電轉換器件1008產生的第一音訊訊號AS1包含有回聲。第一音訊處理模組1010還被配置為按照預先確定的規則或使用者的輸入,根據待播音訊資訊RX對第一音訊訊號AS1進行回聲消除處理,並根據經過回聲消除處理的結果,生成相應的第一拾音音訊資訊PA1。通訊終端1000還可以測量第一收音單元1004與揚聲器組件1024之間的距離,第一音訊處理模組1010還可以根據測量得到的第一收音單元1004與揚聲器組件1024之間的距離對第一音訊訊號AS1進行回聲消除處理,以得到更好的回聲消除效果。
圖14是本發明部分實施例中的第二收音單元進行回聲消除處理的資訊流向示意圖。
參照圖14,在部分實施例中,基礎通訊模組1006還將接收到的待播音訊資訊RX發送至第二收音單元1016。基礎通訊模組1006將待播音訊資訊RX發送至第二收音單元1016的第二無線通訊模組1022,第二無線通訊模組1022將待播音訊資訊RX發送至第二音訊處理模組1020。在揚聲器組件1024播放待播音訊資訊RX的情況下,第二聲電轉換器件1018產生的第二音訊訊號AS2包含有回聲。第二音訊處理模組1020還被配置為按照預先確定的規則或使用者的輸入,根據待播音訊資訊RX對第二音訊訊號AS2進行回聲消除處理,並根據經過回聲消除處理的結果,生成相應的第二拾音音訊資訊PA2。通訊終端1000還可以測量第二收音單元1016與揚聲器組件1024之間的距離,第二音訊處理模組1020還可以根據測量得到的第二收音單元1016與揚聲器組件1024之間的距離對第二音訊訊號AS2進行回聲消除處理,以得到更好的回聲消除效果。在另一種應用場景中,基礎通訊模組1006可以向一定區域廣播待播音訊資訊,以使在該一定區域內的相關設備能夠接收到該待播音訊資訊。舉例來說,第一收音單元1004和第二收音單元1016可以同時通過無線方式接收被向外廣播的待播音訊資訊。
圖15是本發明部分實施例中的第五種通訊終端的結構框圖。
參照圖15,本發明實施例還提供了另一種通訊終端2000,該通訊終端2000包含收音組件2002和基礎通訊模組2004。收音組件2002被配置為拾取聲音以生成第一拾音音訊資訊。在部分實施例中,收音組件2002可以與圖3至圖14以及參照圖3至圖14描述的收音組件1002相同。基礎通訊模組2004被配置為通過無線方式與其他通訊終端配對連接,並將返回音訊資訊發送至該配對連接的其他通訊終端,其中,該返回音訊資訊根據第一拾音音訊資訊獲得。該其他通訊終端可以是任何能夠通過無線方式與該通訊終端進行通訊的通訊終端。例如,在一種使用場景下,該其他通訊終端可以是如圖3至圖14以及前文參照圖3至圖14所描述的通訊終端1000。
在部分實施例中,圖15所示的通訊終端2000可以體現為如圖3至圖14以及前文參照圖3至圖14所描述的第一至第四種通訊終端1000。例如,參照圖3至圖5所描述的第一種通訊終端1000中的基礎通訊模組1006還被配置為通過無線方式與其他通訊終端配對連接,並將生成的返回音訊資訊發送至該配對連接的其他通訊終端,則基礎通訊模組1006具有基礎通訊模組2004的功能。
圖16是本發明實施例中使用通訊終端實現遠端會議的一種基本架構示意圖。
參照圖16,在一種應用場景中,地點A與地點B的用戶進行遠端會議。地點A使用一台通訊終端1000,通訊終端1000與外部設備ED1(例如,電腦)無線通訊連接。地點A的通訊終端1000包含兩個第二收音單元1016,兩個第二收音單元1016分別與通訊終端1000無線通訊連接。地點B使用一台通訊終端1000和一台通訊終端2000,通訊終端1000與外部設備ED2(例如,電腦)無線通訊連接,通訊終端2000與通訊終端1000連接。地點A的外部設備ED1與地點B的外部設備ED2分別通過網路與伺服器通訊,從而實現外部設備ED1與外部設備ED2的資訊交流。地點A的通訊終端1000生成返回音訊資訊後,將返回音訊資訊發送至外部設備ED1,外部設備ED1將返回音訊資訊通過伺服器發送至外部設備ED2。外部設備ED2將外部設備ED1發送的返回音訊資訊作為待播音訊資訊,發送至地點B的通訊終端1000使通訊終端1000播放該待播音訊資訊。地點B的通訊終端2000生成返回音訊資訊後,將返回音訊資訊發送至地點B的通訊終端1000,該通訊終端1000將通訊終端2000發送的返回音訊資訊作為第二拾音音訊資訊,該通訊終端1000根據來自於通訊終端2000的該第二拾音音訊資訊與該通訊終端1000生成的第一拾音音訊資訊,生成返回音訊資訊並將生成的返回音訊資訊發送至外部設備ED2。外部設備ED2將接收到的地點B的通訊終端1000發送的返回音訊資訊通過伺服器發送至地點A的外部設備ED1,由此,可以實現地點A與地點B的用戶的遠端音訊會議。
圖17是本發明部分實施例中的通訊系統的使用場景示意圖。圖18是本發明部分實施例的一種通訊系統的結構框圖。圖19是本發明部分實施例的通訊系統工作時的資訊流向示意圖。
參照圖17至圖19,本發明實施例還提供了一種通訊系統3000。該通訊系統3000包含主通訊終端3002A和至少一個次級通訊終端3002B。主通訊終端3002A包含主基礎通訊模組3006A和主收音組件3004A,次級通訊終端3002B包含次級基礎通訊模組3006B和次級收音組件3004B。次級收音組件3002B被配置為拾取聲音以生成次級拾音音訊資訊PAB。次級基礎通訊模組3006B能夠與主基礎通訊模組3006A建立無線通訊連接。次級基礎通訊模組3006B被配置為以無線方式將次級返回音訊資訊TXB發送至主基礎通訊模組3006A,其中,次級返回音訊資訊TXB根據次級拾音音訊資訊PAB獲得。主收音組件3004A被配置為拾取聲音以生成主拾音音訊資訊PAA。主基礎通訊模組3006A還被配置為向外部設備ED發送主返回音訊資訊TXA,其中,主返回音訊資訊TXA根據主拾音音訊資訊PAA和次級返回音訊資訊TXB獲得。由此,本發明實施例的通訊系統3000可以實現多個通訊終端的關聯,實現多個通訊終端的同步收音,並由主通訊終端對多個通訊終端的收音結果進行處理,使得外部設備ED接收到的外部設備ED發送主返回音訊資訊具有較好的聲音效果,減少了該外部裝置ED處理音訊資訊的處理計算量,同時避免由於網路頻寬的限制使外部裝置ED僅能接收數量較少的通訊終端發送的音訊資訊。
次級通訊終端3002B可以為一個,也可以為多個。在部分實施例中,次級通訊終端3002B為多個,多個次級通訊終端3002B分別與主通訊終端3002A無線通訊連接以進行訊號傳輸。
在部分實施例中,主通訊終端3002A還被配置為對主拾音音訊資訊和次級返回音訊資訊進行混音處理,以獲得返回音訊資訊。
圖20是本發明部分實施例的另一種通訊系統的結構框圖。
參照圖20,在部分實施例中,主通訊終端3002A還包含主揚聲器組件3008A,主基礎通訊模組3006A還被配置為從外部接收待播音訊資訊。主基礎通訊模組3006A將接收到的待播音訊資訊發送至主揚聲器組件3008A,主揚聲器組件3008A能夠播放該待播音訊資訊。
圖21是本發明部分實施例中的主通訊終端進行回聲消除處理時的資訊流向示意圖。
進一步地,主通訊終端3002A還可以利用接收到的待播音訊資訊對採集到的聲音進行回聲消除處理,以生成主拾音音訊資訊PAA。參照圖17,在部分實施例中,主收音組件3004A包含主聲電轉換器件3010A和主音訊處理模組3012A。主聲電轉換器件3010A被配置為拾取聲音,並將拾取的聲訊號轉換為電訊號,生成主音訊訊號ASA。主聲電轉換器件3010A可以包含壓電麥克風、電磁麥克風、駐極體麥克風或其他形式的聲電轉換器件中的一種或多種。主音訊處理模組3012A接收主音訊訊號ASA,並根據待播音訊資訊RX對主音訊訊號ASA進行回聲消除處理,以生成主拾音音訊資訊PAA。
請再次參照圖20,在部分實施例中,次級通訊終端3002B還包含次級揚聲器組件3008B。次級基礎通訊模組3006B能夠接收待播音訊資訊並將待播音訊資訊發送至次級揚聲器組件3008B,次級揚聲器組件3008B能夠播放該待播音訊資訊。次級基礎通訊模組3006B可以從主通訊終端3002A及/或通訊系統3000外接收該待播音訊資訊。在一種實施方式中,主基礎通訊模組3006A還被配置為通過有線或無線的方式從通訊系統3000外獲取待播音訊資訊,並通過無線方式將待播音訊資訊發送至次級通訊終端3002B,使次級揚聲器組件3008B播放該待播音訊資訊。在通訊系統3000包含多個次級通訊終端3002B,且多個次級通訊終端3002B與主通訊終端3002A分別通訊連接時,主通訊終端3002A可以按照預定的規則或使用者的輸入,向所有與之通訊連接的次級通訊終端3002B或該多個次級通訊終端3002B中的一部分發送該待播音訊資訊。在另一種實施方式中,次級通訊終端3002B也可以從通訊系統3000外獲取待播音訊資訊,例如,外部設備與主通訊終端3002A和次級通訊終端3002B分別通訊連接,並分別向主通訊終端3002A和次級通訊終端3002B發送待播音訊資訊。
圖22是本發明部分實施例中的次級通訊終端進行回聲消除處理時的資訊流向示意圖。
進一步地,次級通訊終端3002B可以利用接收到的待播音訊資訊對採集到的聲音進行回聲消除處理,以生成次級拾音音訊資訊。參照圖22,在部分實施例中,次級收音組件3004B包含次級聲電轉換器件3010B和次級音訊處理模組3012B。次級聲電轉換器件3010B被配置為拾取聲音,並將拾取的聲訊號轉換為電訊號,生成次級音訊訊號ASB。次級聲電轉換器件3010B可以包含壓電麥克風、電磁麥克風、駐極體麥克風或其他形式的聲電轉換器件中的一種或多種。次級音訊處理模組3012B接收次級音訊訊號ASB,並根據待播音訊資訊RX對次級音訊訊號ASB進行回聲消除處理,以生成次級拾音音訊資訊PAB。
圖23是本發明部分實施例中的一種音訊資訊處理方法的流程示意圖。
本發明還提供一種音訊資訊處理方法,應用於通訊終端。該音訊資訊處理方法可以應用於如圖3至圖14所述的通訊終端。參照圖23,在部分實施例中,該音訊資訊處理方法包含如下的步驟S110至步驟S170:
步驟S110、由第一收音單元生成第一拾音音訊資訊。
通訊終端包含第一收音單元。第一收音單元拾取聲音,並基於所拾取的聲音生成第一拾音音訊資訊。
步驟S130、由基礎通訊模組以無線方式獲取第二拾音音訊資訊。
基礎通訊模組具有無線通訊功能。基礎通訊模組與其他能夠拾音的設備建立無線通訊連接,並以無線方式獲取第二拾音音訊資訊,其中,該其他能夠拾音的設備能夠生成該第二拾音音訊資訊。該其他能夠拾音的設備可以是該通訊終端上的第一收音單元以外的其他拾音裝置,也可以是與基礎通訊模組配對連接的其他通訊終端,或者是其他能夠基礎通訊模組無線連接的能夠拾音的設備。基礎通訊模組可以從一個或多個來源獲得一個或多個第二拾音音訊資訊。例如,基礎通訊模組可以與多個其他通訊終端分別建立無線通訊連接,並從該多個其他通訊終端分別獲取第二拾音音訊資訊,從而獲得多個第二拾音音訊資訊。當基礎通訊模組從多個來源獲得多個第二拾音音訊資訊時,該多個來源可以是不同類型的來源。
根據基礎通訊模組獲取第二拾音音訊資訊的來源不同,步驟S130可以包含如下的步驟S130a或步驟S130b中的至少一項:
步驟S130a、由基礎通訊模組以無線方式從與前述基礎通訊模組配對連接的其他通訊終端獲取前述第二拾音音訊資訊。
基礎通訊模組可以與其他通訊終端配對連接,建立無線通訊關係,並從其他通訊終端接收其他通訊終端拾音而生成的第二拾音音訊資訊。例如,基礎通訊模組可以通過藍牙等短距離無線通訊方式與其他通訊終端通訊連接,以進行訊號的傳輸。該其他通訊終端可以與該通訊終端的結構相同,也可以不同。
步驟S130b、由基礎通訊模組以無線方式從第二收音單元獲取前述第二拾音音訊資訊。
通訊終端還包括第二收音單元,第二收音單元與基礎通訊模組通過無線方式進行通訊。基礎通訊模組從第二收音單元獲取第二拾音音訊資訊。在一種實施方式中,步驟S130b之前還包括步驟S120:由第二收音單元生成第二拾音音訊資訊。第二收音單元拾取聲音,並根據拾取的聲音生成相應的第二拾音音訊資訊。具體地,步驟S120可以包含如下的步驟S121至步驟S123:
步驟S121、由第二收音單元拾取聲音生成第二音訊訊號。
通訊終端還包含第二收音單元,且第二收音單元被配置為拾取聲音,將聲訊號轉換為相應的電訊號,生成第二音訊訊號。
步驟S123、根據前述第二音訊訊號生成前述第二拾音音訊資訊。
第二收音單元還根據預先確定的方式或使用者的輸入,對第二拾音音訊資訊進行相應的處理,進而得到第二拾音音訊資訊。
在步驟S120後,通訊終端執行步驟S130b,基礎通訊模組以無線方式從第二收音單元獲取第二拾音音訊資訊。根據使用場景對於收音的需要,第二收音單元可以包含一個或多個。在一種可行的實施方式中,第二收音單元包含多個,基礎通訊模組從多個第二收音單元分別獲取第二拾音音訊資訊,從而獲得多個第二拾音音訊資訊。
步驟S130可以既包含步驟S130a也包含步驟S130b。例如,通訊終端包含第二收音單元且基礎通訊模組與第二收音單元和其他通訊終端均建立通訊連接,第二收音單元和其他通訊終端同時進行收音,基礎通訊模組通過無線方式分別從第二收音單元和其他通訊終端獲取多個第二拾音音訊資訊。
步驟S150、根據前述第一拾音音訊資訊和前述第二拾音音訊資訊獲得返回音訊資訊。
通訊終端按照預先確定的規則或使用者的輸入,根據第一拾音音訊資訊以及第二拾音音訊資訊,獲得相應的返回音訊資訊。該返回音訊資訊可以反映第一拾音音訊資訊以及第二拾音音訊資訊,還可以根據實際應用場景的需要,使該返回音訊資訊可以僅反映第一拾音音訊資訊或第二拾音音訊資訊。
在部分實施例中,進一步地,步驟S150可以包含如下的步驟S151:
步驟S151、對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊。
通訊終端包含相應的音訊處理模組,該音訊處理模組對第一拾音音訊資訊和第二拾音音訊資訊,按照預定的規則或者使用者的輸入進行混音處理,從而得到相應的返回音訊資訊。
根據進行混音處理的音訊處理模組的設置方式的不同,步驟S151可以包含如下的步驟S151a或步驟S151b:
步驟151a、由第一收音單元對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊。
基礎通訊模組接收到第二拾音音訊資訊後,將第二拾音音訊資訊發送至第一收音單元,其中,第一收音單元與基礎通訊模組之間可以是有線連接,也可以是無線連接。第一收音單元包含第一音訊處理模組,第一收音單元的第一音訊處理模組對第一拾音音訊資訊和第二拾音音訊資訊進行混音處理,並根據混音處理的結果,獲得返回音訊資訊。第一收音單元還將返回音訊資訊發送至基礎通訊模組。
步驟S151b、由第三音訊處理模組對前述第一拾音音訊資訊和前述第二拾音音訊資訊進行混音處理,以獲得前述返回音訊資訊。
在部分實施例中,通訊終端還包含第三音訊處理模組,第三音訊處理模組與基礎通訊模組電連接。第一收音單元與基礎通訊模組之間可以是有線連接,也可以是無線連接。第一收音單元生成第一拾音音訊資訊後,將第一拾音音訊資訊直接發送至第三音訊處理模組,或者通過基礎通訊模組發送至第三音訊處理模組。基礎通訊模組接收到第二拾音音訊資訊後,將第二拾音音訊資訊發送至第三音訊處理模組。第三音訊處理模組對接受到的第一拾音音訊資訊和第二拾音音訊資訊進行混音處理,並根據混音處理的結果,獲得返回音訊資訊。第三音訊處理模組還將返回音訊資訊發送至基礎通訊模組。
步驟S170、由基礎通訊模組向外發送返回音訊資訊。
基礎通訊模組可以通過有線或無線的方式向外發送返回音訊資訊。基礎通訊模組可以向其他通訊終端、多媒體裝置、雲端伺服器或其他裝置中的一種或多種發送返回音訊資訊。例如,基礎通訊模組可以向電腦、手機等發送音訊資訊。在一種實施方式中,基礎通訊模組通過短距離無線通訊方式(例如藍牙、2.4G)與電腦建立通訊連接,並將返回音訊資訊發送至該電腦,該電腦可以通過互聯網或其他通訊方式,與對方地點的參與會議人員使用的其他設備進行資訊交流,從而可以滿足不同地點的人們進行遠端會議的需求。
在部分實施例中,進一步地,步驟S110之後、步驟S150之前,還可以包含由基礎通訊模組從第一收音單元獲取第一拾音音訊資訊的步驟。
具體地,基礎通訊模組可以與第一收音單元有線連接或無線連接,以進行訊號傳輸。第一收音單元生成第一拾音音訊資訊後,第一收音單元可主動向基礎通訊模組發送第一拾音音訊資訊,也可回應於基礎通訊模組發送的獲取第一拾音音訊資訊的請求,向基礎通訊模組發送第一拾音音訊資訊。基礎通訊模組從第一收音單元接收第一拾音音訊資訊。例如,第一收音單元與基礎通訊模組無線通訊連接,第一收音單元生成並向基礎通訊模組發送第一拾音音訊資訊,基礎通訊模組接收到該第一拾音音訊資訊後,通訊終端可以對該第一拾音音訊資訊與第二拾音音訊資訊進行進一步的處理,以獲得返回音訊資訊。
圖24是本發明部分實施例中的一種音訊資訊處理方法的流程示意圖。
參照圖24,在部分實施例中,在前述的步驟S110至步驟S170之前,音訊資訊處理方法還可以包含如下的步驟S101至步驟S105。其中,步驟S110至步驟S170與前文參照圖23所描述的步驟S110至步驟S170基本相同。
步驟S101、由基礎通訊模組從外部獲取待播音訊資訊。
基礎通訊模組通過有線或無線的方式,從通訊終端外獲取待播音訊資訊。該待播音訊資訊可以是自地點的設備生成並發送的音訊資訊(例如自地點的人員希望展示的音訊資料),也可以是對方地點拾取的參會人員的聲音生成的音訊資訊。
步驟S103、由揚聲器組件播放前述待播音訊資訊。
通訊終端還包含揚聲器組件,基礎通訊模組向揚聲器組件發送待播音訊資訊,揚聲器組件播放該待播音訊資訊。
步驟S105、由基礎通訊模組以無線方式廣播發送待播音訊資訊。
基礎通訊模組還將接收到的待播音訊資訊以無線的方式進行廣播,使網絡中的所有設備均能接收到待播音訊資訊,從而將待播音訊資訊發送至其他設備或該通訊終端上的其他部分。例如,基礎通訊模組1006可以通過藍牙(Bluetooth)廣播的方式向相應的藍牙網絡中的全部設備廣播發送待播音訊資訊。第一收音單元和第二收音單元可以接收該被廣播的待播音訊資訊。
根據需要,在步驟S101之後,還可以包括如下的步驟S107:
步驟S107、由基礎通訊模組以單播或多播的方式向其他通訊終端或第二收音單元發送待播音訊資訊。
基礎通訊模組通過無線方式與一個或多個其他通訊終端配對連接,基礎通訊模組與基礎通訊模組配對連接的該一個或多個其他通訊終端發送該待播音訊資訊。該其他通訊終端可以具有揚聲器,從而可以播放從基礎通訊模組接受到的待播音訊資訊。
當該其他通訊終端用於拾取聲音生成第二拾音音訊資訊,且步驟S130包含步驟S130a(即,由基礎通訊模組以無線方式從與前述基礎通訊模組配對連接的其他通訊終端獲取前述第二拾音音訊資訊)時,該其他通訊終端可以利用該待播音訊資訊對拾取的聲音進行回聲消除處理。在該其他通訊終端不用於播放待播音訊資訊時,該待播音訊資訊可以用於作為回聲消除處理的參考訊號,從而提升該其他通訊終端生成的第二拾音音訊資訊的品質。
上述的步驟S105和步驟S107可以擇一執行,也可以同時執行。
在部分實施例中,步驟S130b之前可以包括如前所述的步驟S120,步驟S120包括如前所述的步驟S121至步驟S123。其中,步驟S123包括如下的步驟S123b:
步驟S123b、根據前述待播音訊資訊對前述第二音訊訊號進行回聲消除處理,以獲得前述第二拾音音訊資訊。
在步驟S105和步驟S121之後,第二收音單元根據從基礎通訊模組接收到的待播音訊資訊,按照預先確定的規則或使用者的輸入,對步驟S121得到的第二音訊訊號進行回聲消除處理,並根據回聲消除處理的結果,得到相應的第二拾音音訊資訊。當第二收音單元不包含揚聲器時,第二收音單元沒有播放的音訊資訊作為回聲消除處理時的參考訊號。而基礎通訊模組向第二收音單元發送待播音訊資訊後,第二收音單元可以將接收到的待播音訊資訊作為回聲消除處理的參考訊號,對所拾取的聲音進行回聲消除處理,從而可以提升第二收音單元生成的第二拾音音訊資訊的品質。
在部分實施例中,步驟S110可以包括如下的步驟S111和步驟S113:
步驟S111、由第一收音單元拾取聲音生成第一音訊訊號。
第一收音單元拾取聲音,將聲訊號轉換為相應的電訊號,生成第一音訊訊號。
步驟S113、根據所述待播音訊資訊對所述第一音訊訊號進行回聲消除處理,以獲得所述第一拾音音訊資訊。
基礎通訊模組通過有線或無線的方式將接收到的待播音訊資訊發送給第一收音單元。第一收音單元根據接收到的待播音訊資訊,按照預先確定的規則或使用者的輸入,對步驟S111得到的第一音訊訊號進行回聲消除處理,並根據回聲消除處理的結果,得到相應的第一拾音音訊資訊。當第一收音單元不包括揚聲器時,第一收音單元沒有播放的音訊資訊作為回聲消除處理時的參考訊號。而基礎通訊模組向第一收音單元發送待播音訊資訊後,第一收音單元可以將接收到的待播音訊資訊作為回聲消除處理的參考訊號,對所拾取的聲音進行回聲消除處理,從而可以提升第一收音單元生成的第一拾音音訊資訊的品質。
所屬技術領域中具有通常知識者應當清楚,音訊資訊處理方法並非必須嚴格遵循上述步驟,可以根據實際需要對上述步驟的順序進行調整、增加新的步驟或刪減部分的步驟,例如,步驟S110和步驟S130可以先後進行,也可以同時進行。
所屬技術領域中具有通常知識者可以理解,實現上述實施例方法中的全部或部分步驟是可以通過程式來指令相關的硬體來完成,該程式存儲在一個存儲介質中,包含若干指令用以使得一個通訊終端中的相應設備或處理器(processor)執行本發明各實施例所述方法的全部或部分步驟。而前述的存儲介質包含:U盤、移動硬碟、唯讀記憶體(ROM,Read-Only Memory)、隨機存取記憶體(RAM,Random Access Memory)、磁碟或者光碟等各種可以存儲程式碼的介質。
本發明實施例的通訊終端、通訊系統和音訊資訊處理方法,通過一台通訊終端收集來自多個不同來源的拾音音訊資訊,使該通訊終端接收根據多個來源的拾音音訊資訊生成返回音訊資訊,並將返回音訊資訊發送至外部設備,由此可以實現多人使用時採用多個收音設備或收音部件同步收音的效果。
以上所述僅為本發明的理想實施例,並不用於限制本發明,對於所屬技術領域中具有通常知識者而言,本發明可以有各種改動和變化。凡在本發明的精神和原理之內所作的任何修改、均等替換、改進等,均應包含在本發明的保護範圍之內。
〔產業利用性〕
本發明提供的通訊終端、通訊系統和音訊資訊處理方法可以實現多人使用時的多個收音設備或收音部件的同步收音從而達到良好的收音效果。
1000、2000:通訊終端
1002、2002:收音組件
1004:第一收音單元
1006、2004:基礎通訊模組
1008:第一聲電轉換器件
1010:第一音訊處理模組
1012:第一無線通訊模組
1014:第三音訊處理模組
1016:第二收音單元
1018:第二聲電轉換器件
1020:第二音訊處理模組
1022:第二無線通訊模組
1024:揚聲器組件
3000:通訊系統
3002A:主通訊終端
3002B:次級通訊終端
3004A:主收音組件
3004B:次級收音組件
3006A:主基礎通訊模組
3006B:次級基礎通訊模組
3008A:主揚聲器組件
3008B:次級揚聲器組件
3010A:主聲電轉換器件
3010B:次級聲電轉換器件
3012A:主音訊處理模組
3012B:次級音訊處理模組
ED、ED1、ED2:外部設備
PA1:第一拾音音訊資訊
PA2:第二拾音音訊資訊
TX:返回音訊資訊
RX:待播音訊資訊
AS1:第一音訊訊號
AS2:第二音訊訊號
PAA:主拾音音訊資訊
PAB:次級拾音音訊資訊
TXA:主返回音訊資訊
TXB:次級返回音訊資訊
ASA:主音訊訊號
ASB:次級音訊訊號
〔圖1〕本發明部分實施例的通訊終端的一種使用場景示意圖。
〔圖2〕本發明部分實施例的通訊終端的另一種使用場景示意圖。
〔圖3〕本發明部分實施例中的第一種通訊終端的結構框圖。
〔圖4〕本發明部分實施例中的一種第一收音單元的結構框圖。
〔圖5〕本發明部分實施例中的第一收音單元工作時的一種資訊流向示意圖。
〔圖6〕本發明部分實施例中的另一種第一收音單元的結構框圖。
〔圖7〕本發明部分實施例中的第二種通訊終端的結構框圖。
〔圖8〕本發明部分實施例中的第三音訊處理模組工作時的資訊流向示意圖。
〔圖9〕本發明部分實施例中的第三種通訊終端的結構框圖。
〔圖10〕本發明部分實施例中的第二收音單元的結構框圖。
〔圖11〕本發明部分實施例中的第四種通訊終端的結構框圖。
〔圖12〕本發明部分實施例中的一種第一收音單元進行回聲消除處理的資訊流向示意圖。
〔圖13〕本發明部分實施例中的另一種第一收音單元進行回聲消除處理的資訊流向示意圖。
〔圖14〕本發明部分實施例中的第二收音單元進行回聲消除處理的資訊流向示意圖。
〔圖15〕本發明部分實施例中的第五種通訊終端的結構框圖。
〔圖16〕本發明實施例中使用通訊終端實現遠端會議的一種基本架構示意圖。
〔圖17〕本發明部分實施例中的通訊系統的使用場景示意圖。
〔圖18〕本發明部分實施例的一種通訊系統的結構框圖。
〔圖19〕本發明部分實施例的通訊系統工作時的資訊流向示意圖。
〔圖20〕本發明部分實施例的另一種通訊系統的結構框圖。
〔圖21〕本發明部分實施例中的主通訊終端進行回聲消除處理時的資訊流向示意圖。
〔圖22〕本發明部分實施例中的次級通訊終端進行回聲消除處理時的資訊流向示意圖。
〔圖23〕本發明部分實施例中的一種音訊資訊處理方法的流程示意圖。
〔圖24〕本發明部分實施例中的另一種音訊資訊處理方法的流程示意圖。
1000:通訊終端
1002:收音組件
1004:第一收音單元
1006:基礎通訊模組
Claims (12)
- 一種通訊終端,其特徵係包含:收音組件,包含第一收音單元,該第一收音單元被配置為拾取聲音以生成第一拾音音訊資訊,第一收音單元被配置為能夠與通訊終端的主體部分相分離;基礎通訊模組,被配置為通過無線方式接收第二拾音音訊資訊,並向外發送返回音訊資訊,該返回音訊資訊根據對該第一拾音音訊資訊和該第二拾音音訊資訊進行混音處理獲得,該基礎通訊模組還被配置為接收待播音訊資訊和將該待播音訊資訊發送至該第一收音單元,該基礎通訊模組設置在該通訊終端的主體部分中;以及揚聲器組件,用於播放該待播音訊資訊;其中,該第一收音單元包含:第一聲電轉換器件,被配置為拾取聲音生成第一音訊訊號;以及第一音訊處理模組,被配置為根據該待播音訊資訊和該第一收音單元與揚聲器組件之間的距離對該第一音訊訊號進行回聲消除處理,以生成該第一拾音音訊資訊。
- 如請求項1所述之通訊終端,其中,該基礎通訊模組還被配置為將該第二拾音音訊資訊發送至該第一音訊處理模組,該第一音訊處理模組還被配置為對該第一拾音音訊資訊和該第二拾音音訊資訊進行混音處理,以獲得該返回音訊資訊。
- 如請求項1所述之通訊終端,其中,該第一收音單元還包含:第一無線通訊模組,與該第一音訊處理模組電連接,該第一無線通訊模組被配置為將該第一拾音音訊資訊發送至該基礎通訊模組。
- 如請求項3所述之通訊終端,其中,該通訊終端還包含:第三音訊處理模組,與該基礎通訊模組電連接,該第三音訊處理模組被配置為對該第一拾音音訊資訊和該第二拾音音訊資訊進行混音處理,以獲得該返回音訊資訊。
- 如請求項1所述之通訊終端,其中,該收音組件還包含至少一個第二收音單元,該第二收音單元包含:第二聲電轉換器件,被配置為拾取聲音生成該第二音訊訊號;第二音訊處理模組,被配置為根據該第二音訊訊號生成該第二拾音音訊資訊;以及第二無線通訊模組,被配置為將該第二拾音音訊資訊發送至該基礎通訊模組。
- 如請求項5所述之通訊終端,其中,該基礎通訊模組還被配置為將該待播音訊資訊發送至該第二收音單元,該第二音訊處理模組還被配置為根據該待播音訊資訊對該第二音訊訊號進行回聲消除處理,以生成該第二拾音音訊資訊。
- 如請求項1所述之通訊終端,其中,該基礎通訊模組還被配置為接收待播音訊資訊;該通訊終端還包含揚聲器組件,用於播放該待播音訊資訊;該基礎通訊模組還被配置為以無線方式向外廣播該待播音訊資訊,該第一收音單元還被配置為以無線方式接收被向外廣播的該待播音訊資訊。
- 一種通訊系統,其特徵係包含: 主通訊終端,該主通訊終端包含主基礎通訊模組和主收音組件,該主收音組件被配置為拾取聲音以生成主拾音音訊資訊;以及至少一個次級通訊終端,該次級通訊終端包含次級基礎通訊模組和次級收音組件,該次級收音組件被配置為拾取聲音以生成次級拾音音訊資訊,該次級基礎通訊模組被配置為以無線方式將次級返回音訊資訊發送至該主基礎通訊模組,該次級返回音訊資訊根據該次級拾音音訊資訊獲得;其中,該主基礎通訊模組被配置為向外發送主返回音訊資訊,該返回音訊資訊根據對該主拾音音訊資訊和該次級返回音訊資訊進行混音處理獲得。
- 如請求項8所述之通訊系統,其中,該主基礎通訊模組還被配置為接收待播音訊資訊,該主收音組件包含主聲電轉換器件和主音訊處理模組,該主聲電轉換器件被配置為拾取聲音生成主音訊訊號,該主音訊處理模組被配置為根據該待播音訊資訊對該主音訊訊號進行回聲消除處理,以生成該主拾音音訊資訊;該次級收音組件包含次級聲電轉換器件和次級音訊處理模組,該次級聲電轉換器件被配置為拾取聲音生成次級音訊訊號,該次級音訊處理模組被配置為根據該待播音訊資訊對該次級音訊訊號進行回聲消除處理,以生成該次級拾音音訊資訊。
- 一種音訊資訊處理方法,其特徵係應用於通訊終端,該方法包含之步驟為:由基礎通訊模組從外部獲取待播音訊資訊;由揚聲器組件播放該待播音訊資訊;由第一收音單元生成第一拾音音訊資訊; 由基礎通訊模組以無線方式獲取第二拾音音訊資訊;根據該第一拾音音訊資訊和該第二拾音音訊資訊獲得返回音訊資訊;以及由基礎通訊模組向外發送返回音訊資訊;其中,該由第一收音單元生成第一拾音音訊資訊之步驟係包含下列步驟:由該第一收音單元拾取聲音生成第一音訊訊號;以及根據該待播音訊資訊對該第一音訊訊號進行回聲消除處理,以獲得該第一拾音音訊資訊;該根據該第一拾音音訊資訊和該第二拾音音訊資訊獲得返回音訊資訊之步驟係包含下列步驟:對該第一拾音音訊資訊和該第二拾音音訊資訊進行混音處理,以獲得該返回音訊資訊。
- 如請求項10所述之方法,其中,該對該第一拾音音訊資訊和該第二拾音音訊資訊進行混音處理,以獲得該返回音訊資訊之步驟係包含下列步驟:由第一收音單元對該第一拾音音訊資訊和該第二拾音音訊資訊進行混音處理,以獲得該返回音訊資訊;或者,由第三音訊處理模組對該第一拾音音訊資訊和該第二拾音音訊資訊進行混音處理,以獲得該返回音訊資訊,其中,該第三音訊處理模組與該基礎通訊模組電連接。
- 如請求項10所述之方法,其中,該方法還包含下列步驟:由基礎通訊模組以無線方式廣播發送待播音訊資訊;由第二收音單元拾取聲音生成第二音訊訊號;以及 根據該待播音訊資訊對該第二音訊訊號進行回聲消除處理,以獲得該第二拾音音訊資訊。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW110127762A TWI774490B (zh) | 2021-07-28 | 2021-07-28 | 通訊終端、通訊系統和音訊資訊處理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW110127762A TWI774490B (zh) | 2021-07-28 | 2021-07-28 | 通訊終端、通訊系統和音訊資訊處理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW202207218A TW202207218A (zh) | 2022-02-16 |
TWI774490B true TWI774490B (zh) | 2022-08-11 |
Family
ID=81323375
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW110127762A TWI774490B (zh) | 2021-07-28 | 2021-07-28 | 通訊終端、通訊系統和音訊資訊處理方法 |
Country Status (1)
Country | Link |
---|---|
TW (1) | TWI774490B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201626817A (zh) * | 2015-01-12 | 2016-07-16 | 芋頭科技(杭州)有限公司 | 多聲道的數位麥克風 |
US20190108838A1 (en) * | 2014-09-10 | 2019-04-11 | Crestron Electronics, Inc. | System for audio distribution including network microphones for voice applications |
TWI699120B (zh) * | 2019-04-30 | 2020-07-11 | 陳筱涵 | 會議記錄系統與會議記錄方法 |
CN112995838A (zh) * | 2021-03-01 | 2021-06-18 | 支付宝(杭州)信息技术有限公司 | 拾音设备、拾音系统和音频处理方法 |
-
2021
- 2021-07-28 TW TW110127762A patent/TWI774490B/zh active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190108838A1 (en) * | 2014-09-10 | 2019-04-11 | Crestron Electronics, Inc. | System for audio distribution including network microphones for voice applications |
TW201626817A (zh) * | 2015-01-12 | 2016-07-16 | 芋頭科技(杭州)有限公司 | 多聲道的數位麥克風 |
TWI699120B (zh) * | 2019-04-30 | 2020-07-11 | 陳筱涵 | 會議記錄系統與會議記錄方法 |
CN112995838A (zh) * | 2021-03-01 | 2021-06-18 | 支付宝(杭州)信息技术有限公司 | 拾音设备、拾音系统和音频处理方法 |
Also Published As
Publication number | Publication date |
---|---|
TW202207218A (zh) | 2022-02-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11386912B1 (en) | Method and computer program product for allowing a plurality of musicians who are in physically separate locations to create a single musical performance using a teleconferencing platform provided by a host server | |
US8379076B2 (en) | System and method for displaying a multipoint videoconference | |
US8606249B1 (en) | Methods and systems for enhancing audio quality during teleconferencing | |
US20160205262A1 (en) | Acoustic echo cancellation for audio system with bring your own devices (byod) | |
WO2012142975A1 (zh) | 会场终端音频信号处理方法及会场终端和视讯会议系统 | |
CN104010226A (zh) | 基于音频的多终端互动播放的方法和系统 | |
CN114531425B (zh) | 一种处理方法和处理装置 | |
JP2010506519A (ja) | 通信分野用のサウンドイベントを取得し、伝送し、および、再生するための処理および装置 | |
CN105744022A (zh) | 移动终端、语音播放方法及系统 | |
US20160112574A1 (en) | Audio conferencing system for office furniture | |
CN114845144A (zh) | 一种投屏方法、辅助投屏装置及存储介质 | |
TWI774490B (zh) | 通訊終端、通訊系統和音訊資訊處理方法 | |
US8526589B2 (en) | Multi-channel telephony | |
CN113726966A (zh) | 通讯终端、通讯系统和音频信息处理方法 | |
TW202228446A (zh) | 聲源追蹤系統及其方法 | |
CN113556503A (zh) | 会议系统、远程会议平台及音频处理方法 | |
JP2010288114A (ja) | 電話会議装置とそれを用いた電話会議システム | |
JP2001036881A (ja) | 音声伝送システム及び音声再生装置 | |
CN113129915B (zh) | 音频共享方法、装置、设备、存储介质及程序产品 | |
US11877113B2 (en) | Distributed microphone in wireless audio system | |
US11425258B2 (en) | Audio conferencing in a room | |
EP4300918A1 (en) | A method for managing sound in a virtual conferencing system, a related system, a related acoustic management module, a related client device | |
US20220201408A1 (en) | Speakerphone hearing device integration | |
JP4052147B2 (ja) | インターネット電話装置、インターネット電話システム、及びインターネット電話装置用プログラム | |
CN116939509A (zh) | 具广播机制的多人语音通话系统 |