TWI825810B - 用來對多個電子裝置的播放進行同步的方法以及控制電路 - Google Patents

用來對多個電子裝置的播放進行同步的方法以及控制電路 Download PDF

Info

Publication number
TWI825810B
TWI825810B TW111124069A TW111124069A TWI825810B TW I825810 B TWI825810 B TW I825810B TW 111124069 A TW111124069 A TW 111124069A TW 111124069 A TW111124069 A TW 111124069A TW I825810 B TWI825810 B TW I825810B
Authority
TW
Taiwan
Prior art keywords
audio data
slave
data
master
delay amount
Prior art date
Application number
TW111124069A
Other languages
English (en)
Other versions
TW202401407A (zh
Inventor
洪佃玖
朱仲石
丁煒中
林澤恩
Original Assignee
瑞昱半導體股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 瑞昱半導體股份有限公司 filed Critical 瑞昱半導體股份有限公司
Priority to TW111124069A priority Critical patent/TWI825810B/zh
Priority to US18/214,511 priority patent/US20230421954A1/en
Application granted granted Critical
Publication of TWI825810B publication Critical patent/TWI825810B/zh
Publication of TW202401407A publication Critical patent/TW202401407A/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/12Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/301Automatic calibration of stereophonic sound system, e.g. with test microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • H04R29/001Monitoring arrangements; Testing arrangements for loudspeakers
    • H04R29/002Loudspeaker arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/005Audio distribution systems for home, i.e. multi-room use
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Telephonic Communication Services (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)

Abstract

本發明提供一種用來對多個電子裝置的播放進行同步的方法及控制電路,其中該多個電子裝置包含一主裝置及一僕裝置。該方法包含:利用該主裝置自一遠端裝置接收音訊資料以作為主端音訊資料,並且將該主端音訊資料傳送至該僕裝置以作為僕端音訊資料,其中該僕裝置依據該僕端音訊資料產生超聲波資料以使該僕裝置播放該僕端音訊資料以及該超聲波資料;利用一校正電路估計該主裝置的麥克風接收到的該超聲波資料相對於該主端音訊資料的延遲量;以及利用一延遲電路依據該延遲量控制該主端音訊資料的延遲,以產生主端輸出音訊資料以供該主裝置播放。

Description

用來對多個電子裝置的播放進行同步的方法以及控制電路
本發明是關於播放同步,尤指一種用來對多個電子裝置的播放進行同步的方法以及控制電路。
在進行電話會議(conference-call)時,多個與會者可處於同一間會議室並分別以自身的設備(例如筆記型電腦)執行電話會議軟體。當這些設備同時播放聲音而並未共用同一個電話會議揚聲器時,就可能發生各設備播放的聲音互相干擾的問題。例如,當遠端(far end)的與會者說話並透過電話會議軟體將語音訊息傳送至會議室中的各台筆記型電時,這些筆電會因為網際網路或是筆記型電腦的系統因素而造成播放聲音的時間點不一致。某些情況下,不同台筆記型電腦之間的播放時間差異可高達數秒鐘,使得在會議室中播放出來的語音內容此起彼落而導致播放清晰度變差。
因此,需要一種新穎的方法以及相關控制電路,以解決在同一環境中的多個設備同時播放相同來源的語音內容但播放時間點不一致的問題。
本發明的目的在於提供一種用來對多個電子裝置的播放進行同步的方法以及控制電路,以在沒有副作用或較不會帶來副作用的情況下解決相關技術的問題。
本發明至少一實施例提供一種用來對多個電子裝置的播放進行同步 的方法。該方法可包含:利用該多個電子裝置中的一主裝置(master device)自該多個電子裝置以外的一遠端裝置接收音訊資料以作為主端音訊資料,並且將該主端音訊資料傳送至該多個電子裝置中的至少一僕裝置(slave device)以作為僕端音訊資料,其中該至少一僕裝置依據該僕端音訊資料產生超聲波資料以使該至少一僕裝置的揚聲器播放該僕端音訊資料以及該超聲波資料;利用該主裝置的麥克風接收該超聲波資料;利用該主裝置的一校正電路估計該主裝置的該麥克風所接收到的該超聲波資料相對於該主端音訊資料的一延遲量;以及利用該主裝置的一延遲電路依據該延遲量控制該主端音訊資料的一延遲,以產生主端輸出音訊資料以供該主裝置的揚聲器播放。
本發明至少一實施例提供一種用來對多個電子裝置的播放進行同步的控制電路,其中該多個電子裝置可包含一主裝置以及至少一僕裝置,以及該主裝置可包含該控制電路。該控制電路可包含一校正電路以及一延遲電路,其中該延遲電路耦接至該校正電路。具體來說,該校正電路可用來利用該主裝置的一網路接收器所接收到的音訊資料作為主端音訊資料,並且依據該主端音訊資料以及該主裝置的麥克風所接收到的超聲波資料估計該超聲波資料相對於該主端音訊資料的一延遲量,其中該至少一僕裝置可自該主裝置接收該主端音訊資料以作為僕端音訊資料,並且依據該僕端音訊資料產生該超聲波資料以使該至少一僕裝置的揚聲器播放該僕端音訊資料以及該超聲波資料。另外,該延遲電路可用來依據該延遲量控制該主端音訊資料的一延遲,以產生主端輸出音訊資料以供該主裝置的一揚聲器播放。
本發明至少一實施例提供一種用來對多個電子裝置的播放進行同步的控制電路,其中該多個電子裝置可包含一主裝置以及一僕裝置,以及該僕裝置可包含該控制電路。該控制電路可包含一升頻電路,其中該升頻電路可用來對僕端音訊資料進行升頻以產生超聲波資料。例如,該僕裝置可接收主端音訊 資料以作為該僕端音訊資料,以及該控制電路可將該僕端音訊資料以及該超聲波資料傳送至該僕裝置的揚聲器以供播放。另外,在該主裝置的麥克風接收到該超聲波資料以後,該主裝置可估計該主裝置的該麥克風所接收到的該超聲波資料相對於該主端音訊資料的一延遲量,並且依據該延遲量控制該主端音訊資料的一延遲,以產生主端輸出音訊資料以供該主裝置的揚聲器播放。
本發明的實施例所提供的方法以及控制電路能藉助於超聲波的傳遞與偵測來估計各個電子裝置的播放延遲差異,再據以進行補償。透過上述機制,各個電子裝置的播放能趨於同步,且本發明的實施例不會大幅地增加額外成本。因此,本發明能在沒有副作用或較不會帶來副作用的情況下解決相關技術的問題。
10:遠端使用者裝置
100,200,300,400:使用者裝置
110,210,410:音訊控制晶片
111,411:升頻電路
212,412:校正電路
213,413:降頻電路
214,414:延遲電路
120,220,420:網路接收器
130,230,430:揚聲器
240,440:麥克風
12:資料傳輸介面
VM0,VM1,VM2,VM3,VM4,VM5:音訊資料
BB1,BB2,BB3:音訊資料
UB1,UB2,UB3:超聲波資料
S910~S940,S110~S170:步驟
第1圖為依據本發明一實施例之多個電子裝置在同一環境中進行電話會議的示意圖。
第2圖為依據本發明另一實施例之多個電子裝置在同一環境中進行電話會議的示意圖。
第3圖為依據本發明一實施例之對多個電子裝置的播放進行同步的示意圖。
第4圖為依據本發明一實施例之可選擇性地充當一主裝置及一僕裝置的其中一者的電子裝置的示意圖。
第5圖為依據本發明一實施例之音訊資料的頻譜的示意圖。
第6圖為依據本發明一實施例之一第一僕裝置的揚聲器播放的音訊資料的頻譜的示意圖。
第7圖為依據本發明一實施例之一第二僕裝置的揚聲器播放的音訊資料的頻譜 的示意圖。
第8圖為依據本發明一實施例之一第三僕裝置的揚聲器播放的音訊資料的頻譜 的示意圖。
第9圖為依據本發明一實施例之一種用來對多個電子裝置的播放進行同步的方 法的工作流程。
第10圖為第9圖所示之方法的例子。
第1圖為依據本發明一實施例之多個電子裝置諸如使用者裝置100、200及300在同一環境中進行電話會議的示意圖。在本實施例中,多個使用者可分別利用使用者裝置100、200及300在同一會議室中與在該會議室外的遠端使用者(例如使用遠端使用者裝置10的使用者)進行電話會議,其中遠端使用者裝置10以及使用者裝置100、200及300可為桌上型電腦、筆記型電腦、智慧型手機或任意可執行電話會議軟體的電子裝置。如第1圖所示,當遠端使用者的語音訊息透過遠端使用者裝置10傳送至網際網路後,使用者裝置100、200及300可使用各自的網路介面(例如各自的有線/無線網路介面)自網際網路取得來自遠端使用者裝置10的語音訊息,再接著各自進行播放。為便於理解,第1圖以不同類型的虛線呈現使用者裝置100、200及300各自取得音訊資料再各自播放的配置。然而,由於使用者裝置100、200及300可為不同製造商的產品,因此使用者裝置100、200及300內的有線/無線網路介面以及相關的處理電路、播放設備可具有不同的規格及效能。因此,在使用者裝置100、200及300各自取得音訊資料再各自播放的配置下,儘管使用者裝置100、200及300播放的是相同的音訊內容,但裝置間的播放時間點可能不一致。
第2圖為依據本發明另一實施例之使用者裝置100、200及300在同一 環境中進行電話會議的示意圖。在本實施例中,使用者裝置200在本實施例中可充當一主裝置(master device)而其餘裝置諸如使用者裝置100及300則充當僕裝置(slave device)。相較於第1圖的實施例,使用者裝置200除了會將自網際網路取得的音訊資料播放出來以外,還另外將該音訊資料傳遞給使用者裝置100及300。儘管使用者裝置100及300依然可各自從網際網路取得來自遠端使用者裝置的音訊資料,但使用者裝置100及300是播放自使用者裝置200接收的音訊資料而並非播放各自從網際網路取得的音訊資料。如此一來,有線/無線網路介面等網路延遲的差異所造成的問題即得以被解決。另外,為了更進一步減少使用者裝置100、200及300內部系統差異所導致的播放延遲差異,使用者裝置100、200及300的每一者可包含對應的控制電路,以同步使用者裝置100、200及300的播放。
第3圖為依據本發明一實施例之對使用者裝置100及200的播放進行同步的示意圖。在本實施例中,使用者裝置100可充當一僕裝置而使用者裝置200可充當一主裝置。如第3圖所示,使用者裝置100可包含一音訊控制晶片110、一網路接收器120、以及一揚聲器,以及使用者裝置200可包含一音訊控制晶片210、一網路接收器220、一揚聲器230以及一麥克風240,其中使用者裝置100與使用者裝置200可透過一資料傳輸介面12互相耦接。需注意的是,第3圖所示之資料傳輸介面12只是為了說明之目的,並非對本發明的限制。例如,資料傳輸介面12可為實體的纜線。又例如,資料傳輸介面12可透過有線或無線的區域網路來實施。只要使用者裝置200能透過資料傳輸介面12將資料傳送至使用者裝置100,資料傳輸介面12的詳細實施方式可予以變化。
在本實施例中,使用者裝置200的網路接收器220可透過網際網路自遠端使用者裝置10接收音訊資料以作為主端音訊資料VM0,其中使用者裝置200可將主端音訊資料VM0透過資料傳輸介面12傳送至使用者裝置100以作為僕端 音訊資料VM1。需注意的是,雖然使用者裝置100的網路接收器120也能自遠端使用者裝置10取得音訊資料,但音訊控制晶片110可直接捨棄自網路接收器120取得的音訊資料。在本實施例中,使用者裝置100可依據僕端音訊資料VM1產生超聲波資料VM2以使揚聲器130播放僕端音訊資料VM1以及超聲波資料VM2,例如揚聲器130播放的音訊資料VM3可包含僕端音訊資料VM1以及超聲波資料VM2。詳細來說,音訊控制晶片110可包含一升頻電路111,其中升頻電路111可用來對僕端音訊資料VM1進行升頻以產生超聲波資料VM2。需注意的是,主端音訊資料VM0以及僕端音訊資料VM1均是在一聽頻範圍(例如20赫茲與20000赫茲之間的頻帶)內,以及該超聲波資料是在一超聲波頻帶(例如20000赫茲以上的頻帶)內。
在使用者裝置200的麥克風240接收到音訊資料VM3(尤指其中的超聲波資料VM2)以後,使用者裝置200可估計麥克風240接收到的音訊資料VM3(例如其內的超聲波資料VM2)相對於主端音訊資料VM0的一延遲量,並且依據該延遲量控制主端音訊資料VM0的一延遲,以產生主端輸出音訊資料VM5以供使用者裝置200的揚聲器230播放。在本實施例中,使用者裝置200的音訊控制晶片210可包含一校正電路212、一降頻電路213以及一延遲電路214,其中校正電路212耦接至降頻電路213,以及延遲電路214耦接至校正電路212。在本實施例中,降頻電路213可用來對麥克風240接收到的音訊資料VM3中的超聲波資料VM2進行降頻以產生基頻資料VM4,其中基頻資料VM4是在該聽頻範圍內。校正電路212可依據主端音訊資料VM0以及麥克風240接收到的音訊資料VM3中的超聲波資料VM2估計音訊資料VM3中的超聲波資料VM2(或音訊資料VM3中的僕端音訊資料VM1)相對於主端音訊資料VM0的一延遲量,尤其可對基頻資料VM4與主端音訊資料VM0作比較以估計該延遲量。另外,延遲電路214可依據該延遲量控制主端音訊資料VM0的延遲,以產生主端輸出音訊資料VM5以供揚聲 器230播放。例如,延遲電路214可將該延遲量施加於主端音訊資料VM0以產生主端輸出音訊資料VM5,以使得揚聲器130播放的音訊資料VM3中的僕端音訊資料VM1與揚聲器230播放的主端輸出音訊資料VM5同步。
第3圖的實施例是以使用者裝置100及200為例,其中使用者裝置100及300之間的同步運作可依此類推。另外,第3圖的實施例是以使用者裝置200作為該主裝置並且以使用者裝置100(或使用者裝置300)作為該僕裝置,因此充當該主裝置的使用者裝置200具備的音訊控制晶片210與充當該僕裝置的使用者裝置100具備的音訊控制晶片110可具有相異的架構。然而,這只是為了說明之目的,並非對本發明的限制。例如,使用者裝置100、200及300可具備相同架構的音訊控制晶片,其中使用者裝置100、200及300中的任一者均可充當該主裝置,而其餘的每一者可充當該僕裝置。
第4圖為依據本發明一實施例之可選擇性地充當該主裝置及該僕裝置的其中一者的使用者裝置400的示意圖,其中使用者裝置400可作為在同一環境中的多個電子裝置諸如使用者裝置100、200及300的任一者(例如每一者)的例子。如第4圖所示,使用者裝置400可包含一音訊控制晶片410、一網路接收器420、一揚聲器430以及一麥克風440,其中網路接收器420、揚聲器430以及麥克風440的運作與第3圖的實施例中的網路接收器120及220、揚聲器130及230、以及麥克風240的運作類似,為簡明起見在此不重複贅述。在本實施例中,音訊控制晶片410可包含升頻電路411、校正電路412、降頻電路413以及延遲電路414。當使用者裝置400充當該主裝置時,使用者裝置400可將網路接收器420接收到的音訊資料(例如第3圖的實施例的主端音訊資料VM0)傳送至充當該僕裝置的一或多個使用者裝置,並且在麥克風440接收到該一或多個使用者裝置播放的音訊資料(例如第3圖的實施例的音訊資料VM3中的超聲波資料VM2)後,音訊控制晶片410可利用校正電路412、降頻電路413及延遲電路414依據進行延遲估計及 補償,以使得揚聲器430播放的音訊資料能與該一或多個使用者裝置播放的音訊資料趨於同步。校正電路412、降頻電路413及延遲電路414的相關細節與第3圖的實施例中的校正電路212、降頻電路213及延遲電路214類似,為簡明起見在此不重複贅述。當使用者裝置400充當該僕裝置時,使用者裝置400可捨棄網路接收器420接收到的音訊資料,並且自充當該主裝置的一使用者裝置接收音訊資料(例如第3圖的實施例的VM1),其中音訊控制晶片410可利用升頻電路411對來自該主裝置的音訊資料進行相關處理後再控制揚聲器430播放處理後的音訊資料(例如第3圖的實施例的音訊資料VM3),以容許該主裝置的麥克風接收到揚聲器430播放的音訊資料以供進行延遲估計及補償。升頻電路411的相關細節與第3圖的實施例中的升頻電路111類似,為簡明起見在此不重複贅述。
在第3圖的實施例中是以兩個電子裝置的同步為例進行說明,但本發明不限於此。如第2圖所示,當使用者裝置200充當該主裝置時,充當該僕裝置的使用者裝置可包含使用者裝置100以及使用者裝置300。在此情況下,使用者裝置100以及使用者裝置300可分別充當一第一僕裝置以及一第二僕裝置,其中使用者裝置100可自使用者裝置200接收主端音訊資料(例如第3圖所示之主端音訊資料VM0)以作為第一僕端音訊資料,使用者裝置300可自使用者裝置200接收該主端音訊資料以作為第二僕端音訊資料。
第5圖為依據本發明一實施例之音訊資料的頻譜的示意圖,其中第5圖所示之音訊資料可作為使用者裝置200的主端音訊資料、使用者裝置100的第一僕端音訊資料以及使用者裝置300的第二僕端音訊資料的任一者(例如每一者)的例子。詳細來說,使用者裝置100可依據該第一僕端音訊資料的第一部分(諸如位於一第一頻帶內的音訊資料BB1)產生第一超聲波資料諸如第6圖所示之超聲波資料UB1,以使得使用者裝置100的揚聲器播放在超聲波頻帶內的超聲波資料UB1以及在聽頻範圍內的該第一僕端音訊資料。另外,使用者裝置300可 依據該第二僕端音訊資料的第二部分(諸如位於一第二頻帶內的音訊資料BB2)產生第二超聲波資料諸如第7圖所示之超聲波資料UB2,以使得使用者裝置300的揚聲器播放在超聲波頻帶內的超聲波資料UB2以及在聽頻範圍內的該第二僕端音訊資料。具體來說,該第一頻帶可異於該第二頻帶,其中使用者裝置100是藉由將音訊資料BB1升頻以產生超聲波資料UB1,以及使用者裝置300是藉由將音訊資料BB2升頻以產生超聲波資料UB2。在使用者裝置200的麥克風接收到使用者裝置100的揚聲器播放的音訊資料(如第6圖所示之超聲波資料UB1以及該第一僕端音訊資料)後,使用者裝置200可利用其內的校正電路212估計使用者裝置200的麥克風接收到的超聲波資料UB1(例如超聲波資料UB1被降頻電路213降頻後產生的基頻資料)相對於該主端音訊資料中的音訊資料BB1的一第一延遲量。另外,在使用者裝置200的麥克風接收到使用者裝置300的揚聲器播放的音訊資料(如第7圖所示之超聲波資料UB2以及該第二僕端音訊資料)後,使用者裝置200可利用其內的校正電路212估計使用者裝置200的麥克風接收到的超聲波資料UB2(例如超聲波資料UB2被降頻電路213降頻後產生的基頻資料)相對於該主端音訊資料中的音訊資料BB2的一第二延遲量。因此,使用者裝置200可依據該第一延遲量以及該第二延遲量決定該主端音訊資料需被施加的延遲量。
當該第一延遲量大於該第二延遲量時,使用者裝置200可將該主端音訊資料需被施加的延遲量設定為該第一延遲量,使得使用者裝置200的揚聲器播放的音訊資料能與使用者裝置100的揚聲器播放的音訊資料同步。另外,使用者裝置200的校正電路212可計算該第一延遲量與該第二延遲量之間的一延遲差異,並且將該延遲差異施加於該第二僕端音訊資料以產生僕端輸出音訊資料以供使用者裝置300的揚聲器播放。例如,使用者裝置200可將該延遲差異施加於該主端音訊資料以產生一延遲音訊資料,再將此延遲音訊資料傳送給使用者裝置300。又例如,使用者裝置200可將該主端音訊資料以及與載有該延遲差異的 資訊的訊號一併傳送至使用者裝置300,以容許使用者裝置300將該延遲差異施加於該第二僕端音訊資料以產生一延遲音訊資料以供使用者裝置300的揚聲器播放。換言之,本發明能從多個僕裝置中找出延遲最嚴重的僕裝置,並且將主裝置以及其餘的僕裝置的音訊資料的播放時間與延遲最嚴重的僕裝置對齊,藉此達到同步的效果。
另外,若該第一延遲量以及該第二延遲量中的任一延遲量超過一閾值,使用者裝置200可將使用者裝置100以及使用者裝置300中之對應於所述任一延遲量的僕裝置設為靜音。例如,當該第一延遲量超過該閾值且該第二延遲量並未超過該閾值時,使用者裝置200可發送一靜音請求至使用者裝置100,以使得使用者裝置100被設為靜音,其中使用者裝置200可將該主端音訊資料需被施加的延遲量設為該第二延遲量,以使得使用者裝置200播放的音訊內容能與使用者裝置300播放的音訊內容同步。又例如,當該第一延遲量以及該第二延遲量均超過該閾值時,使用者裝置200可發送一靜音請求至使用者裝置100及300的每一者,以使得使用者裝置100及300均被設為靜音。
另外,若有三個以上的僕裝置,相關運作可依此類推。例如,第三僕裝置可依據音訊資料的第三部分(諸如位於一第三頻帶內的音訊資料BB3)產生第三超聲波資料諸如第8圖所示之超聲波資料UB3以供播放。本領域中具通常知識者理應可依據上述說明得知如何依據超聲波資料UB3估計該第三僕裝置的延遲狀況,為簡明起見在此不重複贅述。需注意的是,由於音訊資料BB1、BB2及BB3可為相異的頻帶(例如第一頻帶、第二頻帶及第三頻帶)中的資料,因此充當該主裝置的使用者裝置能依據當下接收到的超聲波資料(或其降頻後的結果)所屬的頻帶來判斷當下估計得到的延遲量是哪一個僕裝置的播放延遲。
第9圖為依據本發明一實施例之一種用來對多個電子裝置的播放進行同步的方法的工作流程,其中使用者裝置100、200及300可為該多個電子裝置 的例子。需注意的是,一或多個步驟可在第9圖所示之工作流程中被新增、刪除或修改。另外,只要不妨礙整體結果,這些步驟並非必須完全依照第9圖所示之順序來執行。
在步驟S910中,該多個電子裝置中的一主裝置(例如第2圖所示之使用者裝置200)可自該多個電子裝置以外的一遠端裝置接收音訊資料以作為主端音訊資料,並且將該主端音訊資料傳送至該多個電子裝置中的至少一僕裝置(例如第2圖所示之使用者裝置100及300的任一者)以作為僕端音訊資料,其中該至少一僕裝置可依據該僕端音訊資料產生超聲波資料以使該至少一僕裝置的揚聲器播放該僕端音訊資料以及該超聲波資料。
在步驟S920中,該主裝置可利用其麥克風接收該超聲波資料。
在步驟S930中,該主裝置可利用其校正電路估計該主裝置的麥克風接收到的該超聲波資料相對於該主端音訊資料的一延遲量。
在步驟S940中,該主裝置可利所其延遲電路依據該延遲量控制該主端音訊資料的一延遲,以產生主端輸出音訊資料以供該主裝置的揚聲器播放。
第10圖為第9圖所示之方法的例子,其中一或多個步驟可在第10圖所示之工作流程中被新增、刪除或修改。另外,只要不妨礙整體結果,這些步驟並非必須完全依照第10圖所示之順序來執行。
在步驟S110中,一主裝置(例如第2圖所示之使用者裝置200)可傳送音訊資料(例如上述主端音訊資料)至一僕裝置(例如第2圖所示之使用者裝置100及300中的任一者)。
在步驟S120中,該僕裝置可接收該音訊資料以作為僕端音訊資料。
在步驟S130中,僕裝置可將該僕端音訊資料中之特定頻帶的資料升頻為超聲波資料。
在步驟S140中,僕裝置可透過其揚聲器播放該超聲波資料以及該僕 端音訊資料。
在步驟S150中,該主裝置可透過其麥克風接收該超聲波資料以及該僕端音訊資料。
在步驟S160中,該主裝置可將該超聲波資料與自身的音訊資料(例如上述主端音訊資料)作比較以估計延遲量。
在步驟S170中,該主裝置可依據該延遲量調整自身的音訊資料的播放延遲。
總結來說,本發明的實施例提供的方法以及控制電路藉由將資料載於超聲波後自僕裝置播放,以供主裝置透過麥克風接收到該超聲波後能據以估計僕裝置的播放延遲。因此,在估計出僕裝置的播放延遲後,主裝置可對自身或各個僕裝置進行對應的補償,以使得在同一環境下的多個電子裝置的播放能趨於同步。另外,本發明的實施例不會大幅地增加額外成本。因此,本發明能在沒有副作用或較不會帶來副作用的情況下解決相關技術的問題。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
10:遠端使用者裝置
100,200:使用者裝置
110,210:音訊控制晶片
111:升頻電路
212:校正電路
213:降頻電路
214:延遲電路
120,220:網路接收器
130,230:揚聲器
240:麥克風
12:資料傳輸介面
VM0,VM1,VM2,VM3,VM4,VM5:音訊資料

Claims (10)

  1. 一種用來對多個電子裝置的播放進行同步的方法,包含:利用該多個電子裝置中的一主裝置(master device)自該多個電子裝置以外的一遠端裝置接收音訊資料以作為主端音訊資料,並且將該主端音訊資料傳送至該多個電子裝置中的至少一僕裝置(slave device)以作為僕端音訊資料,其中該至少一僕裝置依據該僕端音訊資料產生超聲波資料以使該至少一僕裝置的揚聲器播放該僕端音訊資料以及該超聲波資料;利用該主裝置的麥克風接收該超聲波資料;利用該主裝置的一校正電路估計該主裝置的該麥克風所接收到的該超聲波資料相對於該主端音訊資料的一延遲量;以及利用該主裝置的一延遲電路依據該延遲量控制該主端音訊資料的一延遲,以產生主端輸出音訊資料以供該主裝置的揚聲器播放,使得該主裝置的該揚聲器播放的該主端輸出音訊資料與該至少一僕裝置的該揚聲器播放的該僕端音訊資料同步。
  2. 如申請專利範圍第1項所述之方法,其中該至少一僕裝置對該僕端音訊資料的至少一部分進行升頻以產生該超聲波資料。
  3. 如申請專利範圍第2項所述之方法,其中利用該主裝置的該校正電路估計該主裝置的麥克風接收到的該超聲波資料相對於該主端音訊資料的該延遲量包含:利用該主裝置的一降頻電路對該主裝置的麥克風接收到的該超聲波資料進行降頻以產生基頻資料;以及 利用該校正電路對該基頻資料與該主端音訊資料作比較以估計該延遲量。
  4. 如申請專利範圍第1項所述之方法,其中該至少一僕裝置包含多個僕裝置,該多個僕裝置中的一第一僕裝置自該主裝置接收該主端音訊資料以作為第一僕端音訊資料,該多個僕裝置中的一第二僕裝置自該主裝置接收該主端音訊資料以作為第二僕端音訊資料,該第一僕裝置依據該第一僕端音訊資料的第一部分產生第一超聲波資料以使該第一僕裝置播放該第一超聲波資料以及該第一僕端音訊資料,以及該第二僕裝置依據該第二僕端音訊資料的第二部分產生第二超聲波資料以使該第二僕裝置播放該第二超聲波資料以及該第二僕端音訊資料,其中該第一僕端音訊資料的第一部分對應於該主端音訊資料的第一部分,該第二僕端音訊資料的第二部分對應於該主端音訊資料的第二部分,以及利用該校正電路估計該主裝置的麥克風接收到的該超聲波資料相對於該主端音訊資料的該延遲量包含:利用該校正電路估計該主裝置的麥克風接收到的該第一超聲波資料相對於該主端音訊資料的一第一延遲量;利用該校正電路估計該主裝置的麥克風接收到的該第二超聲波資料相對於該主端音訊資料的一第二延遲量;以及依據該第一延遲量以及該第二延遲量決定該延遲量。
  5. 如申請專利範圍第4項所述之方法,其中依據該第一延遲量以及該第二延遲量決定該延遲量包含:因應該第一延遲量大於該第二延遲量,將該延遲量設定為該第一延遲量。
  6. 如申請專利範圍第4項所述之方法,另包含: 因應該第一延遲量大於該第二延遲量,利用該校正電路計算該第一延遲量與該第二延遲量之間的一延遲差異,並且將該延遲差異施加於該第二僕端音訊資料以產生僕端輸出音訊資料以供該第二僕裝置的揚聲器播放。
  7. 如申請專利範圍第4項所述之方法,另包含:因應該第一延遲量以及該第二延遲量中的任一延遲量超過一閾值,將該第一僕裝置以及該第二僕裝置中之對應於所述任一延遲量的僕裝置設為靜音。
  8. 如申請專利範圍第1項所述之方法,其中該主端音訊資料以及該僕端音訊資料是在一聽頻範圍內,以及該超聲波資料是在一超聲波頻帶內。
  9. 一種用來對多個電子裝置的播放進行同步的控制電路,該多個電子裝置包含一主裝置以及至少一僕裝置,該主裝置包含該控制電路,該控制電路包含:一校正電路,用來利用該主裝置的一網路接收器所接收到的音訊資料作為主端音訊資料,並且依據該主端音訊資料以及該主裝置的麥克風所接收到的超聲波資料估計該超聲波資料相對於該主端音訊資料的一延遲量,其中該至少一僕裝置自該主裝置接收該主端音訊資料以作為僕端音訊資料,並且依據該僕端音訊資料產生該超聲波資料以使該至少一僕裝置的揚聲器播放該僕端音訊資料以及該超聲波資料;以及一延遲電路,耦接至該校正電路,用來依據該延遲量控制該主端音訊資料的一延遲,以產生主端輸出音訊資料以供該主裝置的一揚聲器播放, 使得該主裝置的該揚聲器播放的該主端輸出音訊資料與該至少一僕裝置的該揚聲器播放的該僕端音訊資料同步。
  10. 一種用來對多個電子裝置的播放進行同步的控制電路,該多個電子裝置包含一主裝置以及一僕裝置,該僕裝置包含該控制電路,該控制電路包含:一升頻電路,用來對僕端音訊資料進行升頻以產生超聲波資料,其中該僕裝置自該主裝置接收主端音訊資料以作為該僕端音訊資料,以及該控制電路將該僕端音訊資料以及該超聲波資料傳送至該僕裝置的揚聲器以供播放;其中該主裝置的麥克風接收到該超聲波資料以後,該主裝置估計該主裝置的該麥克風所接收到的該超聲波資料相對於該主端音訊資料的一延遲量,並且依據該延遲量控制該主端音訊資料的一延遲,以產生主端輸出音訊資料以供該主裝置的揚聲器播放,使得該主裝置的該揚聲器播放的該主端輸出音訊資料與該僕裝置的該揚聲器播放的該僕端音訊資料同步。
TW111124069A 2022-06-28 2022-06-28 用來對多個電子裝置的播放進行同步的方法以及控制電路 TWI825810B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW111124069A TWI825810B (zh) 2022-06-28 2022-06-28 用來對多個電子裝置的播放進行同步的方法以及控制電路
US18/214,511 US20230421954A1 (en) 2022-06-28 2023-06-26 Method and control circuit for performing synchronization on playback of multiple electronic devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW111124069A TWI825810B (zh) 2022-06-28 2022-06-28 用來對多個電子裝置的播放進行同步的方法以及控制電路

Publications (2)

Publication Number Publication Date
TWI825810B true TWI825810B (zh) 2023-12-11
TW202401407A TW202401407A (zh) 2024-01-01

Family

ID=89322698

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111124069A TWI825810B (zh) 2022-06-28 2022-06-28 用來對多個電子裝置的播放進行同步的方法以及控制電路

Country Status (2)

Country Link
US (1) US20230421954A1 (zh)
TW (1) TWI825810B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1905600A (zh) * 2005-07-26 2007-01-31 中国科学院声学研究所 消除免持电话通信中声学回声的方法和装置
US20120069989A1 (en) * 2007-03-14 2012-03-22 Clearone Communications, Inc. Personal speakerphone device
US20160171988A1 (en) * 2014-12-15 2016-06-16 Wire Swiss Gmbh Delay estimation for echo cancellation using ultrasonic markers
US20180132038A1 (en) * 2016-11-04 2018-05-10 Dolby Laboratories Licensing Corporation Intrinsically Safe Audio System Management for Conference Rooms

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1905600A (zh) * 2005-07-26 2007-01-31 中国科学院声学研究所 消除免持电话通信中声学回声的方法和装置
US20120069989A1 (en) * 2007-03-14 2012-03-22 Clearone Communications, Inc. Personal speakerphone device
US20160171988A1 (en) * 2014-12-15 2016-06-16 Wire Swiss Gmbh Delay estimation for echo cancellation using ultrasonic markers
US20180132038A1 (en) * 2016-11-04 2018-05-10 Dolby Laboratories Licensing Corporation Intrinsically Safe Audio System Management for Conference Rooms

Also Published As

Publication number Publication date
TW202401407A (zh) 2024-01-01
US20230421954A1 (en) 2023-12-28

Similar Documents

Publication Publication Date Title
JP2017517922A (ja) リアルタイムトランスポートプロトコルのためのストリーミング制御
TWI671737B (zh) 回音消除裝置以及回音消除方法
JP2019531670A (ja) 接続されたマルチメディアデバイスの制御
KR101845186B1 (ko) 공통 타이밍 프레임워크를 이용한 다중 멀티미디어 디바이스들의 무선 동기화를 위한 장치들 및 방법들
WO2020098411A1 (zh) 电磁干扰控制方法及相关装置
US9538299B2 (en) Acoustic echo cancellation (AEC) with conferencing environment templates (CETs)
WO2021205235A1 (en) Low latency bluetooth earbuds
TWI825810B (zh) 用來對多個電子裝置的播放進行同步的方法以及控制電路
US20200322818A1 (en) Obtention of latency information in a wireless audio system
US10142521B2 (en) System and method for using HDMI arc for estimating latency
CN112866970B (zh) 一种通信连接方法、装置,电子设备及无线传输系统
JP2005202052A (ja) チャンネル数可変オーディオ配信システム、オーディオ配信装置、オーディオ受信装置
US11876847B2 (en) System and method for synchronizing networked rendering devices
EP1759292A1 (en) Video and audio synchronization
CN117412078A (zh) 用来对多个电子装置的播放进行同步的方法以及控制电路
WO2016095510A1 (zh) 一种路径选择方法、设备及系统
TWI790718B (zh) 會議終端及用於會議的回音消除方法
CN112073890B (zh) 音频数据处理方法、装置和终端设备
TWI735890B (zh) 音訊播放系統與方法
TWI813499B (zh) 在視訊設備和無線音訊設備之間進行音視訊同步的方法及設備
TWI792205B (zh) 基於超聲波的音訊播放方法及基於超聲波的電子裝置
TWI798890B (zh) 用於產生立體聲語音效果的藍牙語音通信系統及相關的電腦程式產品
CN114401432B (zh) Mv播放方法、播放终端、服务器设备及娱乐设备系统
TWI757729B (zh) 雙聲道平衡方法及應用其之電子裝置
WO2023206506A1 (zh) 近距离通信的确定方法及其装置、计算机可读存储介质