JP2018515009A5 - - Google Patents

Download PDF

Info

Publication number
JP2018515009A5
JP2018515009A5 JP2017551618A JP2017551618A JP2018515009A5 JP 2018515009 A5 JP2018515009 A5 JP 2018515009A5 JP 2017551618 A JP2017551618 A JP 2017551618A JP 2017551618 A JP2017551618 A JP 2017551618A JP 2018515009 A5 JP2018515009 A5 JP 2018515009A5
Authority
JP
Japan
Prior art keywords
buffer
audio
mobile device
conference
audio stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017551618A
Other languages
English (en)
Other versions
JP2018515009A (ja
JP6827950B2 (ja
Filing date
Publication date
Priority claimed from US15/083,974 external-priority patent/US10225814B2/en
Application filed filed Critical
Publication of JP2018515009A publication Critical patent/JP2018515009A/ja
Publication of JP2018515009A5 publication Critical patent/JP2018515009A5/ja
Application granted granted Critical
Publication of JP6827950B2 publication Critical patent/JP6827950B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (15)

  1. カンファレンス中のオーディオを管理するための方法であって、
    モバイルデバイスの第1のバッファにおいて、前記カンファレンスの第1の参加者に関連付けられた第1のデバイスから第1のオーディオストリームを受信するステップと、
    前記モバイルデバイスの第2のバッファにおいて、前記カンファレンスの第2の参加者に関連付けられた第2のデバイスから第2のオーディオストリームを受信するステップと、
    前記モバイルデバイスの遅延コントローラにおいて制御信号を生成するステップであって、前記制御信号が、前記第1のバッファおよび前記第2のバッファに供給され、前記第1のバッファから出力される第1のバッファリング済みオーディオが、前記第2のバッファから出力される第2のバッファリング済みオーディオと同期される、ステップと
    を含む、方法。
  2. 前記モバイルデバイスにおいて、前記第1のオーディオストリームの第1のタイムスタンプを前記第2のオーディオストリームの第2のタイムスタンプと比較するステップであって、前記第1のタイムスタンプおよび前記第2のタイムスタンプが共通クロックソースに基づく、ステップと、
    前記モバイルデバイスにおいて、前記第1のタイムスタンプと前記第2のタイムスタンプとの間の時間差を決定するステップと
    をさらに含む、請求項1に記載の方法。
  3. 前記第1のタイムスタンプが前記第2のタイムスタンプよりも早い時刻を示す場合、前記制御信号が、前記第1のバッファリング済みオーディオの出力を前記時間差だけ遅延するように前記第1のバッファに指示する、または、
    前記第2のタイムスタンプが前記第1のタイムスタンプよりも早い時刻を示す場合、前記制御信号が、前記第2のバッファリング済みオーディオの出力を前記時間差だけ遅延するように前記第2のバッファに指示する、請求項2に記載の方法。
  4. 前記モバイルデバイスの第1のデコーダにおいて、前記第1のバッファリング済みオーディオを復号化して、第1の復号化オーディオを生成するステップと、
    前記モバイルデバイスの第2のデコーダにおいて、前記第2のバッファリング済みオーディオを復号化して、第2の復号化オーディオを生成するステップと
    を含む、請求項1に記載の方法。
  5. 前記モバイルデバイスにおいて、前記第1の復号化オーディオに対する第1の空間ステアリング演算を実施して、前記第1の復号化オーディオをスピーカから第1の角度に投射するステップと、
    前記モバイルデバイスにおいて、前記第2の復号化オーディオに対する第2の空間ステアリング演算を実施して、前記第2の復号化オーディオを前記スピーカから第2の角度に投射するステップと
    をさらに含む、請求項4に記載の方法。
  6. 前記第1の空間ステアリング演算を実施する前記ステップが、前記第1の復号化オーディオに第1の頭部伝達関数(HRTF)を適用するステップを含み、前記第2の空間ステアリング演算を実施する前記ステップが、前記第2の復号化オーディオに第2のHRTFを適用するステップを含む、請求項5に記載の方法。
  7. 前記第1の角度および前記第2の角度が、ユーザ定義の設定に基づく、請求項5に記載の方法。
  8. モバイルデバイスのユーザに関連する頭部移動を検出したことに応答して、前記第1の角度および前記第2の角度をシフト量だけシフトするステップをさらに含む、請求項7に記載の方法。
  9. 前記第1の復号化オーディオの第1の利得を調整するステップと、
    前記第2の復号化オーディオの第2の利得を調整するステップと
    をさらに含み、
    前記第1の利得および前記第2の利得が、ユーザ定義の設定に基づいて調整される、請求項4に記載の方法。
  10. 前記第1のオーディオストリームが、ネットワークデバイスを介して前記第1のデバイスから前記第1のバッファに経路指定され、前記第2のオーディオストリームが、前記ネットワークデバイスを介して前記第2のデバイスから前記第2のバッファに経路指定される、請求項1に記載の方法。
  11. 前記ネットワークデバイスに第1の信号を供給して、前記第1のオーディオストリームの第1のビットレートを調整するステップと、
    前記ネットワークデバイスに第2の信号を供給して、前記第2のオーディオストリームの第2のビットレートを調整するステップと
    をさらに含む、請求項10に記載の方法。
  12. 前記第1のビットレートおよび前記第2のビットレートが、ユーザ定義の設定、前記モバイルデバイスのハードウェア能力、またはそれらの組合せに基づいて調整される、請求項11に記載の方法。
  13. 前記モバイルデバイス、前記第1のデバイス、および前記第2のデバイスがそれぞれ、Third Generation Partnership Project(3GPP)規格と互換性のあるユーザ機器(UE)を含む、または、
    前記第1のオーディオストリームが、前記モバイルデバイスのアンテナを介して受信される、または、
    前記第1のバッファ、前記第2のバッファ、および遅延コントローラが、前記モバイルデバイスのモデム内に含まれる、または、
    前記第1のバッファが第1のデジッタバッファを含み、前記第2のバッファが第2のデジッタバッファを含む、請求項1に記載の方法。
  14. カンファレンス中のオーディオを管理するためのモバイルデバイスであって、
    カンファレンスの第1の参加者に関連付けられた第1のデバイスから第1のオーディオストリームを受信するように構成された第1のバッファと、
    前記カンファレンスの第2の参加者に関連付けられた第2のデバイスから第2のオーディオストリームを受信するように構成された第2のバッファと、
    制御信号を生成するように構成された遅延コントローラであって、前記制御信号が、前記第1のバッファおよび前記第2のバッファに供給され、前記第1のバッファから出力される第1のバッファリング済みオーディオが、前記第2のバッファから出力される第2のバッファリング済みオーディオと同期される、遅延コントローラと
    を備える、モバイルデバイス。
  15. カンファレンス中のオーディオを管理するための命令を含むコンピュータ可読記憶媒体であって、前記命令が、モバイルデバイス内のプロセッサによって実行されるとき、前記プロセッサに、
    第1のバッファにおいて、前記カンファレンスの第1の参加者に関連付けられた第1のデバイスから第1のオーディオストリームを受信すること、
    第2のバッファにおいて、前記カンファレンスの第2の参加者に関連付けられた第2のデバイスから第2のオーディオストリームを受信すること、および
    遅延コントローラにおいて制御信号を生成することであって、前記制御信号が、前記第1のバッファおよび前記第2のバッファに供給され、前記第1のバッファから出力される第1のバッファリング済みオーディオが、前記第2のバッファから出力される第2のバッファリング済みオーディオと同期される、生成すること
    を含む動作を実施させる、コンピュータ可読記憶媒体。
JP2017551618A 2015-04-05 2016-03-30 カンファレンスオーディオ管理 Active JP6827950B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201562143154P 2015-04-05 2015-04-05
US62/143,154 2015-04-05
US201562144033P 2015-04-07 2015-04-07
US62/144,033 2015-04-07
US15/083,974 US10225814B2 (en) 2015-04-05 2016-03-29 Conference audio management
US15/083,974 2016-03-29
PCT/US2016/025058 WO2016164233A1 (en) 2015-04-05 2016-03-30 Conference audio management

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021006465A Division JP2021067956A (ja) 2015-04-05 2021-01-19 カンファレンスオーディオ管理

Publications (3)

Publication Number Publication Date
JP2018515009A JP2018515009A (ja) 2018-06-07
JP2018515009A5 true JP2018515009A5 (ja) 2019-04-25
JP6827950B2 JP6827950B2 (ja) 2021-02-10

Family

ID=57017761

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017551618A Active JP6827950B2 (ja) 2015-04-05 2016-03-30 カンファレンスオーディオ管理
JP2021006465A Pending JP2021067956A (ja) 2015-04-05 2021-01-19 カンファレンスオーディオ管理

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021006465A Pending JP2021067956A (ja) 2015-04-05 2021-01-19 カンファレンスオーディオ管理

Country Status (11)

Country Link
US (2) US10225814B2 (ja)
EP (2) EP3512186B1 (ja)
JP (2) JP6827950B2 (ja)
KR (1) KR102430838B1 (ja)
CN (1) CN107408395B (ja)
AU (1) AU2016244809B2 (ja)
BR (1) BR112017021350A2 (ja)
ES (2) ES2736878T3 (ja)
HU (1) HUE044919T2 (ja)
TW (1) TWI713511B (ja)
WO (1) WO2016164233A1 (ja)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015126301A1 (en) * 2014-02-21 2015-08-27 Telefonaktiebolaget L M Ericsson (Publ) Low latency media mixing in packet networks
US10225814B2 (en) * 2015-04-05 2019-03-05 Qualcomm Incorporated Conference audio management
JP6582589B2 (ja) * 2015-06-16 2019-10-02 ヤマハ株式会社 オーディオ機器
US9407989B1 (en) 2015-06-30 2016-08-02 Arthur Woodrow Closed audio circuit
JP6701573B2 (ja) * 2016-08-03 2020-05-27 株式会社リコー 音声処理装置、音声映像出力装置、及び遠隔会議システム
EP3301896B1 (en) * 2016-09-28 2019-07-24 British Telecommunications public limited company Streamed communication
US10796484B2 (en) * 2017-06-14 2020-10-06 Anand Babu Chitavadigi System and method for interactive multimedia and multi-lingual guided tour/panorama tour
US10432543B2 (en) * 2017-09-18 2019-10-01 Microsoft Technology Licensing, Llc Dual jitter buffers
US10404862B1 (en) 2018-08-22 2019-09-03 8X8, Inc. Encoder pools for conferenced communications
CN109474604A (zh) * 2018-11-27 2019-03-15 视联动力信息技术股份有限公司 一种视联网音频流处理方法及系统
US11765094B2 (en) * 2018-12-12 2023-09-19 Telefonaktiebolaget Lm Ericsson (Publ) Communication system with de-jitter buffer for reducing jitter
CN109814406B (zh) * 2019-01-24 2021-12-24 成都戴瑞斯智控科技有限公司 一种轨道模型电控仿真系统的数据处理方法及解码器架构
CN110085252A (zh) * 2019-03-28 2019-08-02 体奥动力(北京)体育传播有限公司 赛事制作中心集中控制系统的声画延时调整方法
US10652655B1 (en) 2019-04-30 2020-05-12 International Business Machines Corporation Cognitive volume and speech frequency levels adjustment
US11233836B2 (en) * 2019-05-31 2022-01-25 Apple Inc. Concurrent audio streaming to multiple wireless audio output devices
US11909795B1 (en) * 2019-11-25 2024-02-20 Amazon Technologies, Inc. Input switching for streaming content
CN113079267B (zh) * 2020-01-06 2023-05-05 波音频有限公司 房间内的音频会议
US11616589B2 (en) * 2020-06-25 2023-03-28 Sony Interactive Entertainment LLC Methods and systems for performing and recording live music near live with no latency
ES2952452T3 (es) * 2020-08-19 2023-10-31 Televic Conference Nv Un sistema de conferencias inalámbrico con detección temprana de pérdida de paquetes
CN112203102A (zh) * 2020-09-27 2021-01-08 平安国际智慧城市科技股份有限公司 网络监控的方法、装置、电子设备及介质
US11662975B2 (en) * 2020-10-06 2023-05-30 Tencent America LLC Method and apparatus for teleconference
US20220256028A1 (en) * 2021-02-08 2022-08-11 Samsung Electronics Co., Ltd. System and method for simultaneous multi-call support capability on compatible audio devices
US11522936B2 (en) * 2021-04-30 2022-12-06 Salesforce, Inc. Synchronization of live streams from web-based clients
JP2022182019A (ja) * 2021-05-27 2022-12-08 シャープ株式会社 会議システム、会議方法、及び会議プログラム
US11991232B2 (en) * 2021-05-28 2024-05-21 Spotify Ab Command buffering
US11916982B2 (en) * 2021-11-05 2024-02-27 Tencent America LLC Techniques for signaling multiple audio mixing gains for teleconferencing and telepresence for remote terminals using RTCP feedback
US11652655B1 (en) 2022-01-31 2023-05-16 Zoom Video Communications, Inc. Audio capture device selection for remote conference participants

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5844600A (en) * 1995-09-15 1998-12-01 General Datacomm, Inc. Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network
US5953049A (en) * 1996-08-02 1999-09-14 Lucent Technologies Inc. Adaptive audio delay control for multimedia conferencing
FI106998B (fi) * 1999-01-15 2001-05-15 Nokia Mobile Phones Ltd Bittinopeuden ohjaus multimedialaitteessa
JP2001231035A (ja) * 2000-02-14 2001-08-24 Nec Corp 復号同期制御装置、復号装置、及び復号同期制御方法
US6850496B1 (en) * 2000-06-09 2005-02-01 Cisco Technology, Inc. Virtual conference room for voice conferencing
RU2293368C2 (ru) 2001-05-10 2007-02-10 Поликом Израиль Лтд. Способ (варианты) и система (варианты) для управления конференциями и блок управления для многоточечной мультимедийной/речевой системы
US7079658B2 (en) * 2001-06-14 2006-07-18 Ati Technologies, Inc. System and method for localization of sounds in three-dimensional space
US6870916B2 (en) * 2001-09-14 2005-03-22 Lucent Technologies Inc. Targeted and intelligent multimedia conference establishment services
US6865264B2 (en) * 2001-10-31 2005-03-08 International Business Machines Corporation Apparatus and method for providing conference call roster information with speaker voice identification
US7280650B2 (en) * 2002-08-28 2007-10-09 Intel Corporation Method and apparatus to manage a conference
US7180997B2 (en) * 2002-09-06 2007-02-20 Cisco Technology, Inc. Method and system for improving the intelligibility of a moderator during a multiparty communication session
US6839417B2 (en) * 2002-09-10 2005-01-04 Myriad Entertainment, Inc. Method and apparatus for improved conference call management
US7394833B2 (en) * 2003-02-11 2008-07-01 Nokia Corporation Method and apparatus for reducing synchronization delay in packet switched voice terminals using speech decoder modification
KR100619812B1 (ko) * 2003-09-06 2006-09-08 엘지전자 주식회사 휴대단말기의 멀티미디어 신호 분할 전송장치 및 방법
JP2005151044A (ja) * 2003-11-13 2005-06-09 Japan Science & Technology Agency 音声ミキシング方法、音声ミキシングシステム及び音声ミキシングのためのプログラム
US20050147261A1 (en) * 2003-12-30 2005-07-07 Chiang Yeh Head relational transfer function virtualizer
US7773581B2 (en) * 2004-03-19 2010-08-10 Ericsson Ab Method and apparatus for conferencing with bandwidth control
JP2005354351A (ja) * 2004-06-10 2005-12-22 Nippon Telegr & Teleph Corp <Ntt> 多地点コミュニケーションの通信端末装置および遅延同期制御方法
EP1775996A4 (en) * 2004-06-30 2011-08-10 Pioneer Corp REVERB-SETTING DEVICE, REVERB-SETTING METHOD, REVERB-SETTING PROGRAM, RECORDING MEDIUM CONTAINING THE PROGRAM, AND SOUND FIELD CORRECTION SYSTEM
US7720212B1 (en) * 2004-07-29 2010-05-18 Hewlett-Packard Development Company, L.P. Spatial audio conferencing system
US8718301B1 (en) * 2004-10-25 2014-05-06 Hewlett-Packard Development Company, L.P. Telescopic spatial radio system
JP4369957B2 (ja) * 2005-02-01 2009-11-25 パナソニック株式会社 再生装置
JP2006254064A (ja) * 2005-03-10 2006-09-21 Pioneer Electronic Corp 遠隔会議システム、音像位置割当方法および音質設定方法
JP2006279492A (ja) * 2005-03-29 2006-10-12 Tsuken Denki Kogyo Kk 電話会議システム
JP2006319779A (ja) * 2005-05-13 2006-11-24 Sumitomo Electric Ind Ltd テレビ会議制御装置、テレビ会議制御方法およびそのコンピュータ・プログラム
WO2008082276A1 (en) * 2007-01-05 2008-07-10 Lg Electronics Inc. A method and an apparatus for processing an audio signal
US20080187143A1 (en) * 2007-02-01 2008-08-07 Research In Motion Limited System and method for providing simulated spatial sound in group voice communication sessions on a wireless communication device
EP1954019A1 (en) 2007-02-01 2008-08-06 Research In Motion Limited System and method for providing simulated spatial sound in a wireless communication device during group voice communication sessions
US7792674B2 (en) * 2007-03-30 2010-09-07 Smith Micro Software, Inc. System and method for providing virtual spatial sound with an audio visual player
US9060094B2 (en) * 2007-09-30 2015-06-16 Optical Fusion, Inc. Individual adjustment of audio and video properties in network conferencing
US8509454B2 (en) * 2007-11-01 2013-08-13 Nokia Corporation Focusing on a portion of an audio scene for an audio signal
CN101188525B (zh) * 2007-11-27 2011-10-26 成都市华为赛门铁克科技有限公司 一种语音流的处理方法及装置
WO2009111798A2 (en) * 2008-03-07 2009-09-11 Sennheiser Electronic Gmbh & Co. Kg Methods and devices for reproducing surround audio signals
US8321214B2 (en) * 2008-06-02 2012-11-27 Qualcomm Incorporated Systems, methods, and apparatus for multichannel signal amplitude balancing
EP2160005A1 (en) 2008-08-28 2010-03-03 BRITISH TELECOMMUNICATIONS public limited company Decentralised spatialized audio processing
CN103474076B (zh) * 2008-10-06 2017-04-12 爱立信电话股份有限公司 用于输送对齐的多通道音频的方法和设备
ES2570967T4 (es) * 2008-10-06 2017-08-18 Telefonaktiebolaget Lm Ericsson (Publ) Método y aparato para proporcionar audio alineado de múltiples canales
JP5340296B2 (ja) * 2009-03-26 2013-11-13 パナソニック株式会社 復号化装置、符号化復号化装置および復号化方法
EP4398249A3 (en) * 2010-04-13 2024-07-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Decoding sample-accurate representation of an audio signal
CN101902649A (zh) * 2010-07-15 2010-12-01 浙江工业大学 一种基于h.264标准的音视频同步控制方法
US20130022189A1 (en) * 2011-07-21 2013-01-24 Nuance Communications, Inc. Systems and methods for receiving and processing audio signals captured using multiple devices
US9584385B2 (en) * 2012-01-19 2017-02-28 Comcast Cable Communications, Llc Adaptive buffer control
WO2013142657A1 (en) * 2012-03-23 2013-09-26 Dolby Laboratories Licensing Corporation System and method of speaker cluster design and rendering
EP2829049B1 (en) * 2012-03-23 2021-05-26 Dolby Laboratories Licensing Corporation Clustering of audio streams in a 2d/3d conference scene
JP6339997B2 (ja) * 2012-03-23 2018-06-06 ドルビー ラボラトリーズ ライセンシング コーポレイション 2dまたは3d会議シーンにおける語り手の配置
TW201347507A (zh) * 2012-05-03 2013-11-16 Acer Inc 遠程電話會議系統及方法
US20140032649A1 (en) * 2012-07-24 2014-01-30 Academic Networking and Services (ANS), LLC Method and system for educational networking and services
WO2014100374A2 (en) * 2012-12-19 2014-06-26 Rabbit, Inc. Method and system for content sharing and discovery
CN103237191B (zh) * 2013-04-16 2016-04-06 成都飞视美视频技术有限公司 在视频会议中同步推送音视频的方法
CN103295610B (zh) * 2013-05-22 2016-03-02 华为技术有限公司 一种播放音频的方法及装置
CN104244164A (zh) * 2013-06-18 2014-12-24 杜比实验室特许公司 生成环绕立体声声场
ES2755349T3 (es) * 2013-10-31 2020-04-22 Dolby Laboratories Licensing Corp Renderización binaural para auriculares utilizando procesamiento de metadatos
US20150382129A1 (en) * 2014-06-30 2015-12-31 Microsoft Corporation Driving parametric speakers as a function of tracked user location
CN104269182B (zh) * 2014-09-18 2017-05-31 歌尔股份有限公司 一种音频同步播放的方法、装置和系统
US9521057B2 (en) * 2014-10-14 2016-12-13 Amazon Technologies, Inc. Adaptive audio stream with latency compensation
US10225814B2 (en) * 2015-04-05 2019-03-05 Qualcomm Incorporated Conference audio management

Similar Documents

Publication Publication Date Title
JP2018515009A5 (ja)
US10453474B2 (en) Wireless audio synchronization
US11910344B2 (en) Conference audio management
TWI788744B (zh) 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束
JP7391500B2 (ja) 再生同期
EP2752023B1 (en) Method to match input and output timestamps in a video encoder and advertisement inserter
TWI760981B (zh) 在媒體串流播放之間進行轉換的同時動態播放轉換訊框
US20150113576A1 (en) Method and apparatus for ip video signal synchronization
RU2008149526A (ru) Улучшения производительности для видеоконференции
JP2016514394A5 (ja)
US20240021218A1 (en) Systems and methods for wireless real-time audio and video capture at a live event
EP2137927B1 (en) Techniques for unidirectional disabling of audio-video synchronization
JP2015529059A5 (ja)
Jung et al. A client-driven media synchronization mechanism for RTP packet-based video streaming
WO2024212122A1 (en) Audio synchronization in an audio distribution system
US20230275824A1 (en) Jitter buffer size management
Lauri et al. Synchronization of streamed audio between multiple playback devices over an unmanaged IP network
WO2021255327A1 (en) Managing network jitter for multiple audio streams
Malmgren et al. Synchronization of streamed audio between multiple playback devices over an unmanaged IP network