JP2015534315A - オーディオ転送デバイス及び対応する方法 - Google Patents

オーディオ転送デバイス及び対応する方法 Download PDF

Info

Publication number
JP2015534315A
JP2015534315A JP2015529146A JP2015529146A JP2015534315A JP 2015534315 A JP2015534315 A JP 2015534315A JP 2015529146 A JP2015529146 A JP 2015529146A JP 2015529146 A JP2015529146 A JP 2015529146A JP 2015534315 A JP2015534315 A JP 2015534315A
Authority
JP
Japan
Prior art keywords
audio
stream
display
mobile computing
transfer device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015529146A
Other languages
English (en)
Other versions
JP6509116B2 (ja
JP2015534315A5 (ja
Inventor
クリストフ ポーラ エー ルサッフル
クリストフ ポーラ エー ルサッフル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2015534315A publication Critical patent/JP2015534315A/ja
Publication of JP2015534315A5 publication Critical patent/JP2015534315A5/ja
Application granted granted Critical
Publication of JP6509116B2 publication Critical patent/JP6509116B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091Details not provided for in groups H04R1/1008 - H04R1/1083
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41415Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance involving a public display, viewable by several users in a public space outside their home, e.g. movie theatre, information kiosk
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones

Abstract

オーディオ転送デバイスは、オーディオストリームがビデオストリームと同期される、前記ビデオストリーム及び前記オーディオストリームを有するメディアストリームを受信するように構成されたメディアインタフェース122と、前記ビデオストリームの表示のためのディスプレイ130に前記ビデオストリームを送信するように構成されたディスプレイインタフェース124と、ヘッドホンインタフェース上で前記オーディオストリームを再生するためにモバイル計算デバイスのためのデジタルワイヤレスデータ接続162を介して前記モバイル計算デバイス140にデジタルデータの形で前記オーディオストリームを流すように構成されたワイヤレスデータネットワークインターフェース126とを有する。

Description

本発明は、オーディオストリームがビデオストリームと同期される、ビデオストリーム及びオーディオストリームを有するメディアストリームを受信するように構成されたメディアインタフェースと、ビデオストリームの表示のためのディスプレイにビデオストリームを送信するように構成されたディスプレイインタフェースとを有するオーディオ転送デバイスに関する。
本発明は、更に、オーディオ転送のための方法及び対応するソフトウェアに関する。
ホームエンターテイメントシステムは、通常、3つのコンポーネント、即ち、コンテンツを生成するためのメディアソースと、ビデオを表示するためのディスプレイと、対応するオーディオを再生するための外部ラウドスピーカとから成る。
しかしながら、オーディオは、現在テレビを見ることに興味がない人々を妨害するかもしれない。人々がスクリーンを見るのを避け得るのに対して、オーディオについては部屋を出ることなくこれを可能にできない。パーソナルメディアの出現によって、ますます多くの人々は、彼らの私的なエンターテイメントで忙しく、同じディスプレイを必ずしも見るというわけではない。それ故、ディスプレイ上に表示されるビデオに対応するオーディオの分配をよりよく制御するという必要性がある。
ビデオに対応するヘッドホンでオーディオを受信する既存の手段は、限定され、柔軟性がないことに留意されたい。テレビ受像器は、ヘッドホンが接続され得る1又はそれ以上のオーディオジャックを備えてもよい。これは、ディスプレイからユーザにオーディオを転送する直接的な問題を解決するが、不満な点が多い。
改良されたオーディオ転送デバイスを有することが有利であるだろう。
オーディオ転送デバイスは、メディアストリームを受信するように構成されたメディアインタフェースを有し、前記メディアストリームは、ビデオストリーム及びオーディオストリームを有し、前記オーディオストリームは、前記ビデオストリームと同期され、当該オーディオ転送デバイスは、前記ビデオストリームの表示のためのディスプレイに前記ビデオストリームを送信するように構成されたディスプレイインタフェースと、ヘッドホンインタフェース上で前記オーディオストリームを再生するためにモバイル計算デバイスのためのデジタルワイヤレスデータ接続を介して前記モバイル計算デバイスにデジタルデータの形でオーディオストリームを流すように構成されたワイヤレスデータネットワークインターフェースとを有する。
オーディオ転送デバイスは、ユーザがディスプレイ上でビデオストリームを見るのを可能にする一方で対応するオーディオをモバイル計算デバイスから聴くのを可能にする。ディスプレイ及びモバイル計算デバイスは、異なるデバイスである。ユーザは、モバイル計算デバイスのヘッドホンインタフェースに接続されたヘッドホンを有してもよい。これは、オーディオが私的な態様において消費されることを可能にする。モバイル計算デバイスは、タブレット又はモバイルフォン(とりわけスマートフォン)であってもよい。ユーザは、ホームエンターテイメントシステムのオーディオチャネルをワイヤレスで聴くためにスマートフォンを用いてもよい。多くの人々は、スマートフォンを持っている。各スマートフォンユーザは、別個のワイヤレスヘッドホンを買う必要なくワイヤレスでオーディオを聴くことができる。
これは、とりわけディスプレイがオーディオストリームを再生しないように構成される場合に、オーディオが誰をも妨害しないという利点を有する。例えば、オーディオ転送デバイスは、オーディオストリームをディスプレイに転送しないように構成されてもよく、それ故、ディスプレイを介したオーディオの再生を完全に回避する。典型的に、ディスプレイはテレビであるだろう。
また、モバイル計算デバイスとは異なるサウンドレベル(即ちボリューム)でオーディオストリームを再生するようにディスプレイを構成することも可能である。この場合、オーディオ転送デバイスは、オーディオストリームをディスプレイにも転送する。例えば、モバイル計算デバイスは、ボリュームコントロール及びアンプを含んでもよい。昔から、外部ラウドスピーカのボリュームレベルは、ホームエンターテイメントシステムを用いている全てのユーザに対して同じである。しかしながら、オーディオ転送デバイスは、難聴者がより高いサウンドレベルでオーディオストリームを個人的に聴くのを可能にする。モバイル計算デバイスは、電子難聴補助具において一体化されてもよい。外部ラウドスピーカ及びワイヤレスヘッドセットを介して同時に聴くことは、聴覚障害者がパーソナルボリュームレベルを選択することを可能にする。それ故、難聴者は、難聴補助具を認可しないような僅かなものである場合でも、難聴を伴わない家族にとって快適なボリューム設定で、彼らの家族とともにテレビを見続けることができ、彼らの家族は、例えばディスプレイの、ラウドスピーカを使用してオーディオストリームを聴く一方で、難聴者は、彼らのスマートフォンを介して聴くだろう。また、モバイル計算デバイスは、ワイヤレス通信のために構成されたモバイルデジタルデータ処理デバイスと呼ばれてもよい。
メディアインタフェースは、アナログのオーディオ及びビデオとしてのメディアストリームを受信するように構成されてもよいが、好ましくはデジタルメディアストリームである。例えば、メディアストリームは、インターネットプロトコル(IP)を介して流されてもよい。メディアストリームは、HDMIを介して取得されてもよい。メディアストリームインタフェースは、メディアストリームが示される方法に対応する。例えば、メディアストリームインタフェースは、HDMIポート、USBポート、イーサネットポート等であってもよい。メディアストリームソース、言わばブルーレイプレーヤは、オーディオ転送器と組み合わせられてもよい。例えば、ブルーレイのような光学ディスクプレーヤは、オーディオ転送器に含まれ得る。好ましくは、オーディオ及びビデオは、メディアソースにおいて互いに同期される。
同期は、メディアストリームインタフェースで受信したオーディオストリームとビデオストリームとの間の同期も、ビデオストリーム及びオーディオストリームの表示の間も、完全である必要はない。同期がユーザをいらいらさせないか、又は、より好ましくは、気がつかれないのに十分である場合に十分である。好ましくは、オーディオストリームの再生は、ビデオストリームの表示と同期される。一実施形態において、メディアインタフェースで受信した場合の同期と比較される、オーディオストリームの再生とビデオの表示との間の相対的タイミングは、予め決められた境界の範囲内のままである。例えば、オーディオ及びビデオストリームの相対的タイミングは、+40ms及び−60ms(それぞれ、ビデオの前/後のオーディオ)の範囲内にあるべきである。より好ましくは、オーディオストリームとビデオストリームとの間の差は、+5ms及び−15msの範囲内にあるべきである。
オーディオストリームは、少なくとも2つの異なる手段においてメディアストリームから取得されてもよい。オーディオストリームがビデオストリームから分離して取得されることに留意されたい。これは、ビデオストリームを送信することなくオーディオストリームの送信を可能にする。最初に、オーディオストリームは、メディアストリームから取得されてもよい。例えば、オーディオ転送デバイスは、ビデオストリームとは別個のメディアストリームからオーディオストリームを取得するように構成されたオーディオセパレータを有してもよい。例えば、メディアストリームは、場合により信号が劣化された場合であっても伝送完全性を維持するためのストリーム同期フィーチャ及び/又は誤り訂正を伴う、パケット化されたオーディオ及びビデオストリームを有してもよい。例えば、メディアストリームは、例えばISO/IEC規格13818−1に応じた、MPEGトランスポートストリームであってもよい。
オーディオストリームは、ディスプレイから受信されてもよい。例えば、オーディオ転送デバイスは、ビデオストリームとは別個のメディアストリームからディスプレイにより取得されるオーディオストリームをディスプレイから受信するためのオーディオ受信インタフェースを有し、受信したオーディオストリームが、ディスプレイ上に表示されるビデオストリームと同期されてもよい。これは、例えばビデオの処理(例えば画像改善)のための、ディスプレイにより取り込まれる遅延に対して補償が必要とされないという利点を有する一方で、これは、無線通信における遅延に対する補償は可能ではないという欠点を有する。しかしながら、ワイヤレス接続を介した伝送によりもたらされる遅延は、良好な状況においては十分低いものであり、随時の再送信を伴う状況においても、典型的には依然として25msより低くなるだろう。これは、この状況において、ビデオとオーディオとの間の同期が依然として保持され得ることを意味する。実際には、30msのバッファリングがモバイル計算デバイスに取り込まれる場合及び悪い状態であっても、遅延は、典型的には、60msの制限を満たすだろう。
ディスプレイは、典型的にはテレビである。例えば、テレビがリビングルームの中央に配置される。家族の幾つか又は全てのメンバーは、彼ら自身の優先度のオーディオ設定(例えば、ボリューム、言語設定、及び/又は、イコライザ設定のようなオーディオプロファイル)によって更に同じビデオを見てもよい。
ワイヤレスデータネットワークインターフェースは、無線LAN(例えば、Wi−Fi)のために構成されてもよい。ワイヤレスデータネットワークインターフェースは、パケット化されたデジタルデータ伝送のために構成されてもよい。ワイヤレスデータネットワークインターフェースは、IEEE802.11b−1999規格のために構成されてもよい。例えば、ワイヤレスデータネットワークインターフェースは、言わば周波数変移符合化(FSK;frequency shift keying)よりもむしろ無線信号におけるデジタル情報の符号化のためのいわゆる位相変移変調(PSK;phase-shift keying)を用いてもよい。
モバイル計算デバイスは、モバイルフォン(例えば、スマートフォン又はタブレット等)であってもよい。モバイル計算デバイスは、ヘッドホン用のインタフェースを有する。ヘッドホンは、ヘッドバンドにより耳の近くにラウドスピーカを配置してもよい。ヘッドホンは、耳自体にラウドスピーカを配置するイヤホンタイプのものであってもよい。ヘッドホンは、ヘッドセットであってもよい。ヘッドホンは、補聴器であってもよい。モバイル計算デバイスは、典型的には、コンピュータコード(例えばアプリ)を格納するための電子メモリをと、前記コンピュータコードを実行するためのプロセッサとを有する。コンピュータコードは、オーディオストリームを受信し、ヘッドホンインタフェースに対して再生するように構成される。アプリは、同期を実行してもよい。例えば、モバイル計算デバイスは、ディスプレイにおける遅延を補償するようにオーディオを遅延させてもよい。例えば、モバイル計算デバイスは、他の同期化データを用いてもよい。
好ましくは、モバイル計算デバイスで再生されるプライベートオーディオストリームは、ディスプレイで表示されるビデオストリームと同期してある。例えば、異なる場所でビデオ及びオーディオストリームを再生するときに、メディアストリームにおける同期は、ある程度は少なくとも保護される。オーディオストリームもディスプレイで再生された場合には、外部ラウドスピーカ、例えばディスプレイのラウドスピーカで再生されるオーディオストリームは、モバイル計算デバイスで再生されるオーディオストリームと同期してある。
例えば、オーディオ転送デバイスは、ディスプレイによりビデオストリームを受信することとディスプレイ上にビデオストリームを表示することとの間の遅延を表す遅延値をディスプレイからデジタル形式で受信するように構成された遅延値インタフェースを有してもよい。遅延値は、モバイル計算デバイスに送信されてもよい。例えば、ワイヤレスデータネットワークインターフェースは、遅延値をモバイル計算デバイスに転送するように構成されてもよく、従って、モバイル計算デバイスは、ビデオストリームの表示と同期させるためにオーディオストリームの再生を遅延させるためにオーディオディレイヤを用い得る。遅延値は、オーディオの無線伝送を遅延させるためにオーディオ転送デバイス自体で用いられてもよい。
また、無線伝送により、モバイル計算デバイスに、及び場合により、モバイル計算デバイスでのオーディオの処理に取り込まれる遅延が決定されてもよい。例えば、オーディオ転送デバイス及びモバイル計算デバイスは、無線遅延値を確立するために遅延決定プロトコルを実行するように構成されてもよい。そして、オーディオの遅延は、ディスプレイの遅延値引く決定された無線遅延値まで低減されてもよい。例えば、無線遅延値は、平均遅延であってもよい。例えば、遅延値は、往復時間の半分であってもよい。
オーディオ転送デバイスは、ディスプレイ上のビデオストリームの表示を伴ってモバイル計算デバイス上で再生している間、オーディオストリームを同期させるための同期データストリームを生成するように構成されるシンクロナイザを有してもよく、ワイヤレスデータネットワークインターフェースは、同期データストリームをオーディオストリームと共にデジタルワイヤレスデータ接続を介してモバイル計算デバイスに流すように構成される。
同期データは、モバイル計算デバイスに流されてもよく、場合により、ディスプレイに流されてもよい。同期データは、例えばディスプレイの遅延値と共に、モバイル計算デバイスにのみ流されてもよい。ディスプレイは、概して、より一定の遅延をもつだろう。例えば、同期データストリームは、タイムスタンプを有してもよい。オーディオ転送デバイス及びモバイル計算デバイスは、これらのクロックを同期させるためにプロトコルを実行してもよい。同期データをディスプレイに送ることを回避することは、オーディオ転送部がより多くのディスプレイと互換性があるという利点をもつ。他方、モバイル計算デバイスは、例えば新たなソフトウェアをダウンロードすることにより、アップグレードをより容易にする。更に、ディスプレイの遅延が概してより一定であるので、同期データを送信することは必ずしも必要とは限らず、その代わりに、遅延値がディスプレイから取得され得る。ディスプレイ値が他のソースから決定されてもよいことに留意されたい。例えば、遅延値は、規格から得られてもよく(即ち、30msで固定される)、又は、ユーザにより入力されてもよい。
メディアストリームは、複数のオーディオストリームを含んでもよく、各オーディオストリームはビデオストリームと同期され、ワイヤレスデータネットワークインターフェースは、複数のオーディオストリームをデジタルデータの形でデジタルワイヤレスデータ接続を介してモバイル計算デバイスに流すように構成され、モバイル計算デバイスは、ヘッドホンインタフェース上で再生するために複数のオーディオストリームからオーディオストリームを選択するように構成される。また、オーディオ転送デバイスが2つの異なるオーディオストリームを2つの異なるモバイル計算デバイスに送ることも可能である。また、オーディオ転送デバイスが1又は複数のオーディオストリームを複数のモバイル計算デバイスに送るために無線放送プロトコルを用いることも可能である。
複数のオーディオチァンネルを異なるスマートフォンに流すことは、プライベートなオーディオストリーム(例えば、各ユーザが自己の言語のオーディオチャネルを聴くこと)を可能にする。幾つかのユーザがコメントトラックを伴う動画を見るのを好む一方で、他のものはオリジナルサウンドトラックを好む。昔から、ホームエンターテイメントシステムにおいてコンテンツを再生しているときに、ヘッドホンを用いるときであっても、1つのオーディオストリームだけがレンダリングされる。これは、ユーザに単一の言語を選択するのを強いる。オーディオ転送デバイスは、1又はそれ以上のモバイル計算デバイスに転送するための1又はそれ以上のオーディオストリームを選択するためのセレクタを有してもよい。セレクタは、例えば無線通信を介して、モバイル計算デバイスのユーザからの入力を受信してもよい。
オーディオ転送デバイスは、複数のオーディオストリームが複数のスマートフォンに同時に送られるのを可能にしてもよい。人々は、同じテレビスクリーンを見ることができ、異なるオーディオフィードを得ることができる。更に、誰もが、彼らのオーディオに同期される同じディスプレイ上の同じビデオストリームを見る。
オーディオ転送デバイスは、ディスプレイに含まれてもよい。
本発明の一態様は、オーディオストリームがビデオストリームと同期される、ビデオストリーム及びオーディオストリームを有するメディアストリームを生成するためのメディアソースと、オーディオ転送デバイスのメディアインタフェースにおいて前記メディアソースから前記メディアストリームを受信するように構成されるオーディオ転送デバイスと、前記ビデオストリームの表示のために前記オーディオ転送デバイスのディスプレイインタフェースから前記ビデオストリームを受信するように構成されるディスプレイと、モバイル計算デバイスとを有し、前記モバイル計算デバイスは、前記オーディオ転送デバイスから前記オーディオストリームを受信するためのワイヤレスデータネットワークインターフェースと、ヘッドホンを前記モバイル計算デバイスに接続するためのヘッドホンインタフェースと、前記モバイル計算デバイスの前記ワイヤレスデータネットワークインターフェースから前記オーディオストリームを取得し、前記ヘッドホンインタフェース上で前記オーディオストリームを再生するためのオーディオプレーヤとを有する、オーディオ/ビデオシステムに関する。
本発明は、(TV)スクリーン上に表示されるビデオストリームと同期して、ホームエンターテイメントシステムのオーディオのスマートフォンへのストリーミングを可能にする。
一実施形態において、ホームエンターテイメントシステムは、Wi−Fi技術を用いてオーディオチャネルをワイヤレスで送る。スマートフォンアプリは、Wi−Fiオーディオストリームを受信し、スマートフォンでのこのストリームの再生を可能にする。スマートフォンで再生されるオーディオチャネルは、TV又は他のディスプレイスクリーン上で再生されるテレビチャンネルと同期される。これを達成するために、オーディオ信号をWi−Fiを介して送る遅延及びビデオ処理によりもたらされる遅延は、互いに計算及び比較される。
ディスプレイ(例えばメイン(TV)スクリーン)上に示されるビデオストリームと同期したオーディオコンテンツのモバイルデバイスへのストリーミングは、ユーザがテレビを共有する一方でプライベートなオーディオを楽しむことを可能にする。ユーザに関して、彼らは、コンピュータコードを彼らのモバイル計算デバイス上にインストールする(例えばアプリをダウンロードする)ことだけを必要とし、これは、モバイルデバイスが、オーディオ転送デバイスからオーディオストリームを受信するために、及び、これをヘッドホンで再生するために、オーディオ転送デバイスに接続するのを可能にする。加えて、コンピュータコードは、同期、ボリュームコントロール、言語選択等のようなサービスを実行してもよい。
オーディオ転送デバイスは、電子デバイス、即ち、セットトップボックス、コンピュータ、テレビ、光学ディスクプレーヤ等であってもよい。
本発明の一態様は、オーディオストリームがビデオストリームと同期される、ビデオストリーム及びオーディオストリームを有するメディアストリームを受信するステップと、前記ビデオストリームを、前記ビデオストリームの表示のためのディスプレイに送信するステップと、前記オーディオストリームをデジタルデータの形でデジタルワイヤレスデータ接続を介してモバイル計算デバイスに流すステップとを有する、オーディオ転送のための方法に関する。
本発明の方法は、コンピュータ実装された方法としてコンピュータに、専用のハードウェアに、又は、両方の組み合わせにおいて実装されてもよい。本発明の方法のための実行コードは、コンピュータプログラム製品上に格納されてもよい。コンピュータプログラム製品の例は、メモリデバイス、光学ストレージデバイス、集積回路、サーバ、オンラインソフト等を含む。好ましくは、コンピュータプログラム製品は、このコンピュータプログラム製品がコンピュータ上で実行されたときに本発明の方法を実行するためのコンピュータ可読媒体上に格納された非一時的プログラムコード手段を有する。
好ましい実施形態において、コンピュータプログラムは、コンピュータプログラムがコンピュータ上で実行されたときに本発明の方法の全てのステップを実行するように適合されたコンピュータプログラムコード手段を有する。好ましくは、コンピュータプログラムは、コンピュータ可読媒体上に具現化される。
既知のワイヤレスヘッドホンは、プライベートな聴取体験(誰も妨害しない)及び場合によりプライベートなボリューム設定の利点も有することに留意されたい。しかしながら、これらは、別々に購入される必要があり、非常に高価であり、複数のヘッドセットが同時に用いられるのを可能とするものではなく、ホームエンターテイメントシステムのオーディオジャッキへの接続を必要とし、それ故、1又は少数のヘッドホンしか用いられ得ない。
しかしながら、モバイル計算デバイスにおけるワイヤレスデータネットワークインターフェースを用いることにより、オーディオ転送デバイスとヘッドホンとの間の接続は、オーディオジャッキを介しては行わない。これは、接続を簡素化し、複数の接続を可能にし、家庭における追加のワイヤレスシステムを必要としない。
本発明のこれらの及び他の態様は、以下で述べられる実施形態から明らかになり、これらを参照して説明されるだろう。
オーディオ/ビデオシステムを示すブロック図である。 オーディオ/ビデオシステムを示すブロック図である。 オーディオ/ビデオシステムを示すブロック図である。 オーディオ/ビデオシステムを示すブロック図である。 オーディオ/ビデオシステムを示すブロック図である。 オーディオ/ビデオシステムを示すブロック図である。 オーディオ/ビデオシステムを示すブロック図である。 オーディオ/ビデオシステムを示すブロック図である。 オーディオ転送方法を示すフローチャートである
異なる図面において同一の参照番号を有するアイテムは、同じ構造的なフィーチャ及び同じ機能を有するか、又は、同じ信号であることに留意されるべきである。斯様なアイテムの機能及び/又は構造が説明された場合、詳細な説明においてその反復説明の必要がない。
本発明は、多くの異なる形式における実施形態を可能とする一方で、これらは、図面において示され、本開示が、本発明の原理の例示的なものであるとみなされ、本発明を示され述べられた特定の実施形態に限定することを意図しないという理解のもとで、1又はそれ以上の特定の実施形態がここで詳細に述べられるだろう。
図1は、オーディオ/ビデオシステム100を示している。システム100は、ブルーレイプレーヤのような光学ディスクプレーヤ、USBスティックのようなメモリデバイス、又は、インターネットに接続されたコンピュータ等のようなメディアストリームソース110を有する。システム100は、オーディオ転送デバイス120を有する。オーディオ転送デバイス120は、メディアストリームを受信するためのメディアストリームソース110に接続される。メディアストリームは、ビデオと少なくとも1つのオーディオストリームとを有する。また、メディアストリームは、複数のビデオストリームを有してもよい。オーディオ/ビデオシステム100は、ディスプレイ130を有する。ディスプレイ130は、テレビ(例えば、液晶テレビ)又はモニタ(例えば、コンピュータモニタ)であってもよい。典型的には、ディスプレイ130は、ホームエンターテイメントシステムの部分であるだろう。例えば、ディスプレイ130は、複数の人々により見られ得るリビングルームにあってもよい。オーディオ/ビデオシステム100は、モバイル計算デバイス140を有する。モバイル計算デバイス140は、モバイルフォン(例えば、スマートフォン)又はタブレット等であってもよい。モバイル計算デバイス140は、ヘッドホン150に接続可能である。図1は、ヘッドホン150に現在接続されているモバイル計算デバイス140を示している。ヘッドホン150は、2つの耳のそれぞれに対して1つ又は通常2つのラウドスピーカを配置するためのヘッドバンドを有するヘッドセットであってもよい。ヘッドホン150は、2つの耳のそれぞれにおける配置のための1つ又は通常2つのラウドスピーカを有するイヤーセットであってもよい。好ましくは、ヘッドホン150は、自由に接続及び切断されてもよい。しかしながら、ヘッドホン150とモバイル計算デバイス140との間の接続が恒久的に行われてもよい。
オーディオ転送デバイス120は、ビデオ接続164を介してディスプレイ130に接続される。典型的には、ビデオ接続164は、有線接続、即ち、オーディオ転送デバイス120とディスプレイ130との間を走るケーブル(例えば、HDMIケーブル)である。オーディオ転送デバイス120は、ワイヤレスデータネットワーク接続162を介してモバイル計算デバイス140に接続される。ワイヤレスデータネットワーク接続は、典型的には伝送エラーの場合において場合により再送信システムを有する誤り検出を有する、パケット化されたデジタル接続であってもよい。好ましくは、PSKエンコーディングのような、高データ伝送のためのエンコーディングが用いられる。例えば、ワイヤレスデータネットワーク接続162は、WI−FI接続であってもよい。
動作の間、オーディオ転送デバイス120は、メディアストリームソース110からメディアストリームを受信する。メディアストリームは、オーディオ及びビデオを含む。オーディオ及びビデオストリームは、少なくともある程度は同期される。例えば、ビデオ及びオーディオがインターリーブされ、それ故にどのオーディオがどのビデオと進行するかを示すので、同期は黙示的であってもよい。また、同期は明示的であってもよく、例えば、ビデオ及びオーディオストリームがタイムスタンプを含んでもよい。例えば、ビデオストリームにおけるタイムスタンプは、ビデオの対応する部分が同じタイムスタンプに対応するオーディオストリームにおける部分に対応することを示してもよい。
オーディオ転送デバイス120は、メディアストリームの少なくともビデオストリームをディスプレイ130に転送する。オーディオ転送デバイス120は、メディアストリーム全体をディスプレイ130に転送してもよい。オーディオ転送デバイス120は、メディアストリームからオーディオストリームを取得する。オーディオ転送デバイス120は、モバイル計算デバイス140への無線伝送に適したフォーマットでオーディオストリームをエンコードする。オーディオ転送デバイス120はモバイル計算デバイス140にビデオを転送せず、これは帯域幅を大きく低減することに留意されたい。それ故、待ち時間及び信頼性は増大される。オーディオ転送デバイス120は、無線伝送によりもたらされる遅延を低減するために、即ちモバイル計算デバイス140に送信されるべきデータの量を低減するために、オーディオを再符号化してもよいことに留意されたい。例えば、オーディオ転送デバイス120は、より高い圧縮によって、より低いサンプリング周波数によって、及び/又は、ステレオのモノラルへの低減によって再符号化してもよい。再符号化により取り込まれた遅延は、好ましくは、より少ないビットを送信することにより進められた時間よりも低いものであり、これは直接の実験により確認され得る。比較的少しだけの処理によりデータの量を低減する動作は、最も大きな影響(例えば、ステレオのモノラルへの低減)を与える可能性がある。モバイル計算デバイスは、ワイヤレス接続によりもたらされる遅延が同期を維持するにはあまりにも大きすぎることを示すメッセージをオーディオ転送デバイス120に送ってもよい。その場合、デバイス120はサイズ削減を増大してもよく、例えば、オーディオストリームからのより多くの言語を破棄する。
オーディオ転送デバイス120は、オーディオストリームをワイヤレス接続162を介してモバイル計算デバイス140に送る。オーディオ転送デバイス120とモバイル計算デバイス140との間のワイヤレス接続は、以前に確立されていてもよい。モバイル計算デバイス140は、オーディオストリームを受信し、必要に応じて、モバイル計算デバイス140は、例えばボリューム、イコライザ設定等を制御するために、受信したストリームを処理し、ストリームをヘッドホン150対して再生する。
典型的には、モバイル計算デバイス140は、オーディオ転送デバイス120との接続、オーディオストリームの受信、オプショナルな処理、及び、再生を制御するソフトウェアを実行するだろう。例えば、再生しているソフトウェアは、ユーザが処理を制御するのを可能にしてもよい。例えば、モバイル計算デバイス140は、音を一時的にミュートする等を可能にしてもよい。
図2a及び2bは、オーディオ/ビデオシステム101及び102におけるメディアストリームソース110、オーディオ転送デバイス120及びディスプレイ130の代替の構成を示している。図2aは、メディアストリームソース110を有するオーディオ転送デバイス120を示している。この場合、メディアストリームは、オーディオ転送デバイス120において直接生成されてもよい。図2bは、ディスプレイ130に含まれるオーディオ転送デバイス120を示している。接続ビデオ接続164は、ディスプレイ130の内部にある。
図2aは、追加の機能、即ちビデオに対応するオーディオをモバイル計算デバイス140(例えば、スマートフォン)に流すことを有するメディアプレーヤ(即ち、光学ディスクプレーヤ)を可能にするので、有利である。斯様なプレーヤは、ユーザがプライベートなオーディオにより任意の動画を楽しみ得るので、この機能をもたないプレーヤにとって好ましいだろう。
また、図2bは、ディスプレイ(即ち、テレビ)が、流されるべき、現在表示されているビデオに対応する任意のオーディオを、モバイル計算デバイス(即ち、スマートフォン)に流すのを可能にするので、有利である。ディスプレイ130は全ての音を抑制してもよく、その音は最も少ない妨害であることに留意されたい。しかしながら、これは、1又はそれ以上の選択されたユーザに対してのみ流されてもよい。彼らは代替手段、例えば増大したボリューム設定又はディスプレイ130の他のユーザとは異なる言語を要求するためである。
図2a及び2bは組み合わせられてもよい、即ち、メディアストリームソース110がディスプレイ130に含まれてもよいことに留意されたい。
図3は、オーディオ/ビデオシステム103(オーディオ/ビデオシステム100の更に他の変形例)を示している。図3は、複数のモバイル計算デバイス140、140´及び140´´を示しているが、2又は3よりも多い態様も可能である。オーディオ転送デバイス120は、複数のモバイル計算デバイスのそれぞれにワイヤレス接続される。オーディオ転送デバイス120は、複数の個々の接続を介して接続されてもよい。オーディオ転送デバイス120は、複数のデバイスに放送してもよい。
例えば、メディアストリームは、複数の言語のための複数のオーディオストリームを含んでもよい。オーディオ転送デバイス120は、異なるオーディオストリームを異なるデバイスに送ってもよい。例えば、モバイル計算デバイスは、どのオーディオストリームを受信したいかをオーディオ転送デバイス120に通信してもよい。オーディオ転送デバイス120は、全てのオーディオストリームを全てのデバイスに転送してもよい。この場合、ユーザは、どのストリームをモバイル計算デバイス上で局所的に聴取するべきかについて選択を行ってもよい。オーディオ転送デバイス120は、幾つかのストリーム(即ち、誰も興味を起こさないストリーム)を破棄してもよく、他のストリームを複数のデバイスに放送する。これは、複数の接続を回避し、更に、各ユーザがその選んだ方のオーディオストリームを聴取するのを可能にするので、帯域幅を低減して、待ち時間を最適化する。
有利な実装において、オーディオ転送デバイスは、デフォルト言語によって構成される。オーディオ転送デバイスは、オリジナル言語及びデフォルト言語を転送し、他の全てのものを破棄する。その状況において、それぞれ個々のユーザは、オーディオものの吹き替えられた又はオリジナルのバージョンを選択してもよい。
複数のモバイル計算デバイスは、全てが同じタイプのものである必要はない。これらは、オーディオ転送デバイス120に接続するための異なるソフトウェアを実行してもよい。
図4は、システム100の考えられる実装であるシステム104を示している。適切に変更されて、システム104のために与えられる実装の詳細は、システム100−103において用いられてもよい。
オーディオ転送デバイス120は、メディアストリームソース110からメディアストリームを受信するためのメディアインタフェースを有する。例えば、インタフェース110は、ケーブルを接続するためのジャッキを有してもよい。オーディオ転送デバイス120は、オーディオ転送デバイス120を、ビデオをディスプレイに流すためにディスプレイ130に接続するためのディスプレイインタフェースを有する。オーディオ転送デバイス120は、モバイル計算デバイスへのワイヤレスデジタル接続のためのワイヤレスデータネットワークインターフェース126を有する。モバイル計算デバイス140は、対応するワイヤレスデータネットワークインターフェース142を有する。オーディオ転送デバイス120により送られたオーディオストリームがモバイル計算デバイス140により受信され得るという点で、インタフェース126及び142は互換性がある。モバイル計算デバイス140は、ヘッドホンインタフェース144(即ち、ヘッドホン150のプラグを受けるためのヘッドフォンジャック)を有する。ヘッドホンインタフェース144は、モバイル計算デバイス140をBluetoothヘッドホンと接続するためのBluetoothインタフェースであってもよい。モバイル計算デバイス140及びヘッドホン150は、ワイヤを介して接続されてもよい。
動作の間、オーディオ転送デバイス120は、メディアインタフェース122でメディアストリームを受信し、そこからオーディオストリームを取得する。オーディオストリームは、ワイヤレスデータネットワークインターフェース126を介してモバイル計算デバイス140に転送される。ビデオストリームは、ディスプレイインタフェース124を介してディスプレイ130に転送される。モバイル計算デバイス140は、ワイヤレスデータネットワークインターフェース142を介してオーディオストリームを受信し、ヘッドホンインタフェース144を介して再生する。
例えば、オーディオ転送デバイス102は、ビデオストリームから分離してメディアストリームからオーディオストリームを取得するように構成されるオーディオセパレータ(別々には示されない)を有し得る。例えば、セパレータは、インタフェース122において一体化され得る。
図5は、システム100の考えられる実装であるシステム105を示している。適切に変更されて、システム104のために与えられる実装の詳細はシステム100−103において用いられてもよい。
オーディオ転送デバイス120は、オーディオ受信インタフェースを有する。メディアインタフェース122は、オーディオ及びビデオストリームの双方を含むメディアストリームをディスプレイ130に転送するように構成される。それ故、ビデオ及びオーディオストリーム間のメディアストリームにおける同期が維持される。ディスプレイ130は、メディアストリームを処理するように構成され、メディアストリームの受信とビデオストリームの表示との間の遅延を取り込む。例えば、遅延は、色の向上、ノイズの低減等のための画像に対する処理によりもたらされ得る。オーディオストリームは、同じ量によりディスプレイ130により遅れ、オーディオ転送デバイス120に転送される。ディスプレイデバイス130は、オーディオストリームを再生してもよいし、再生しなくてもよい。オーディオ転送デバイス120は、オーディオ受信インタフェース128でオーディオストリームを受信する。オーディオ受信インタフェース128で受信されるオーディオストリームは、ディスプレイ130で現在表示されているビデオと同期される。そして、オーディオ転送デバイス120は、オーディオストリームをワイヤレスデータネットワークインターフェース126を介してモバイル計算デバイス140に転送する。ワイヤレス接続は、遅延を取り込むだろう。適切に動作するワイヤレス接続において、この遅延は、通常のユーザにより知覚できない範囲内にあり得る。しかしながら、無線伝送が最適なものより小さい場合であっても、遅延は、許容可能な境界内にとどまり得る。後者の場合、伝送は、オーディオストリームにおけるデータの量を低減することにより向上され得ることに留意されたい。
図6は、システム100の考えられる実装であるシステム106を示している。適切に変更して、システム104のために与えられる実装の詳細は、システム100−103において用いられ得る。オーディオ転送デバイス120は、遅延値インタフェース129を有する。ディスプレイ130は、ディスプレイによるビデオストリームの受信とディスプレイ上のビデオストリームの表示との間の遅延を表すデジタル形式の値をオーディオ転送デバイス120に送るように構成される。
オーディオ転送デバイス120は、遅延値インタフェース129を介してこの値を受信するように構成される。遅延値は、種々の手段において用いられ得る。例えば、オーディオ転送デバイス120は、遅延値をワイヤレスデータネットワークインターフェース126を介してモバイル計算デバイス140に送ってもよい。モバイル計算デバイス140は、ビデオストリームの表示と同期するようにオーディオストリームの再生を遅延させるためのオーディオデライヤ146を有してもよい。オーディオデライヤ146は、遅延値引く無線接続遅延によりオーディオストリームを遅延させる。無線接続遅延は、適切なプロトコルを実行するオーディオ転送デバイス120及びモバイル計算デバイス140により決定され得る。例えば、モバイル計算デバイス140は、モバイル計算デバイス140からオーディオ転送デバイス120へ行って戻って来るパケットの往復時間を見つけるために(接続試験用;ping)プロトコルを実行してもよい(又は、オーディオ転送デバイス120がこのプロトコルを実行してもよい)。半分の往復時間は、典型的には、ワイヤレス接続により取り込まれた遅延に対応するだろう。オーディオ転送デバイス120又はモバイル計算デバイス140は、(予め決められた時間毎、即ち5分毎)にプロトコルを繰り返し得る。往復回数は、平均して複数の往復(即ち、5つの往復)であってもよい。
有利には、無線遅延を決定することは、オーディオストリームを流すことと組み合わせられてもよい。例えば、オーディオストリームのパケットを受信すると、モバイル計算デバイス140は、前記パケットをオーディオ転送デバイス120に通知することにより応答し得る。通知は、パケット(即ち、パケットの部分)を識別するデータ、又は、パケットに渡るハッシュを含んでもよい。オーディオ転送デバイス120が通知を受信する時間及びオーディオ転送デバイス120がパケットを送信する時間を差し引くことにより、オーディオ転送デバイス120は、往復時間を決定してもよい。往復時間の半分(又は、平均の半分)は、無線遅延に対応する。無線遅延は、ワイヤレスデータネットワークインターフェース126を介してオーディオ転送デバイス120に送信され得る。そして、オーディオデライヤ146は、ディスプレイ130の遅延引く無線遅延により遅延し得る。後者の差し引きが否定的である場合、モバイル計算デバイス140は、全く遅延しないことを選択してもよい。
図7は、オーディオデライヤ146が、差し引きが否定的であることをメディアインタフェース122に報告する変形例を示している。この場合、メディアインタフェース122は、例えば(場合により安全対策として予め決められた割合によって増大される)対応する量により、ビデオストリームのディスプレイ130への転送を遅延させる。
最後に、オーディオ転送デバイス120は、モバイル計算デバイス上で再生している間におけるオーディオストリームを、ディスプレイ上でのビデオストリームの表示と同期させるための同期データストリームを生成するように構成されたシンクロナイザを含んでもよい。例えば、場合によりオーディオ及びビデオストリームの一方又は双方において又はそれに沿って、タイムスタンプが導入されてもよい。
同期化データは、メディアストリーム内にあってもよい。この場合、オーディオ転送デバイス120は、既存の同期化データをディスプレイ130及びモバイル計算デバイス140に転送してもよい。
典型的には、オーディオ転送デバイス120及びモバイル計算デバイス140は、各々がマイクロプロセッサ(図示省略)を有し、これは、デバイスオーディオ転送デバイス120及びモバイル計算デバイス140において格納される適切なソフトウェアを実行し、例えば、ソフトウェアは、ダウンロードされ、対応するメモリ(例えば、RAM(図示省略))又はフラッシュのような不揮発メモリに格納され得る。例えば、モバイル計算デバイス140は、いわゆる"app"としてソフトウェアをダウンロードしてもよい。デバイス110及び130は、マイクロプロセッサ及びメモリ(図示省略)を備えていてもよい。
図8は、概略フロー図として、オーディオを転送する方法800を示している。図8は、オーディオストリームがビデオストリームと同期される、ビデオストリーム及びオーディオストリームを有するメディアストリームを受信することを有するステップ810と、ビデオストリームの表示のためにビデオストリームをディスプレイに送信することを有するステップ820と、オーディオストリームをデジタルデータの形でデジタルワイヤレスデータ接続を介してモバイル計算デバイスに流すことを有するステップ830とを示している。ステップ810,820及び830は、オーディオ転送デバイス120により典型的に実行される。
当業者にとって明らかなように、前記方法を実行する多くの異なる手段が考えられる。例えば、ステップの順序は変えられてもよく、又は、幾つかのステップが並行して実行されてもよい。更に、ステップの間に、他の方法ステップが挿入されてもよい。挿入されたステップは、ここで記述されたような方法の改良を表してもよく、又は、前記方法に無関係であってもよい。例えば、ステップ810,820及び830が少なくとも部分的に並行して実行されてもよい。更に、所与のステップは、次のステップが始まる前に完全に終えていなくてもよい。
本発明の方法は、プロセッサシステムが方法800を実行することをもたらすための命令を有するソフトウェアを用いて実行されてもよい。ソフトウェアは、システムの特定のサブエンティティにより得られたこれらのステップのみを含んでいてもよい。ソフトウェアは、適切なストレージ媒体(例えば、ハードディスク、フロッピー、メモリ等)に格納されていてもよい。ソフトウェアは、有線又は無線に沿った信号として送られてもよく、又は、データネットワーク(例えば、インターネット)を用いて送られてもよい。ソフトウェアは、ダウンロードのために及び/又はサーバ上での遠隔使用のために利用可能であってもよい。
本発明は、本発明を実現するために適合される、コンピュータプログラム、とりわけ担体上の又はそれにおけるコンピュータプログラムにも拡張することはいうまでもないだろう。プログラムは、部分的にコンパイルされた形式のような、ソースコード、オブジェクトコード、コード中間ソース及びオブジェクトコードの形式、又は、本発明の方法の実装における使用に適した任意の他の形式であってもよい。コンピュータプログラムプロダクトに関する一実施形態は、記載された方法のうち少なくとも1つの処理ステップのそれぞれに対応するコンピュータ実行可能な命令を有する。これらの命令は、サブルーチンに再分割されてもよく、及び/又は、静的又は動的に連結され得る1又はそれ以上のファイルに格納されてもよい。コンピュータプログラムプロダクトに関する他の実施形態が、記載されたシステ及び/又はプロダクトのうち少なくとも1つの手段のそれぞれに対応するコンピュータ実行可能な命令を有する。
上述の実施形態は、本発明を限定するよりはむしろ例示であり、当業者は、多くの代替実施形態を設計することが可能であることが留意されるべきである。
請求項において、括弧間に配置された任意の参照符号は、請求項を限定するものとして考慮されるべきではない。"有する"という動詞の使用及びその活用は、請求項に記載されたもの以外の要素又はステップの存在を除外するものではない。要素の単数標記は、斯様な要素の複数の存在を除外するものではない。本発明は、幾つかの異なる要素を有するハードウェアによって、及び、適切にプログラムされたコンピュータによって実装されてもよい。幾つかの手段を列挙している装置に係る請求項において、これらの手段の幾つかは、ハードウェアの全く同一のアイテムにより具現化されてもよい。特定の手段が相互に異なる従属請求項に記載されるという単なる事実は、これらの手段の組み合わせが有効に用いられ得ないことを示すものではない。
100−107 オーディオ/ビデオシステム
110 メディアストリームソース
120 オーディオ転送デバイス
122 メディアインタフェース
124 ディスプレイインタフェース
126 ワイヤレスデータネットワークインターフェース
128 オーディオ受信インタフェース
129 遅延値インタフェース
130 ディスプレイ
140 モバイル計算デバイス
140´,140´´ モバイル計算デバイス
142 ワイヤレスデータネットワークインターフェース
144 ヘッドホンインタフェース
146 オーディオディレイヤ
150 ヘッドホン
150´,150´´ ヘッドホン
162 ワイヤレスデータネットワーク接続
164 ビデオ接続

Claims (15)

  1. オーディオストリームがビデオストリームと同期される、前記ビデオストリーム及び前記オーディオストリームを有するメディアストリームを受信するように構成されたメディアインタフェースと、
    前記ビデオストリームの表示のためのディスプレイに前記ビデオストリームを送信するように構成されたディスプレイインタフェースと、
    ヘッドホンインタフェース上で前記オーディオストリームを再生するためにモバイル計算デバイスのためのデジタルワイヤレスデータ接続を介して前記モバイル計算デバイスにデジタルデータの形で前記オーディオストリームを流すように構成されたワイヤレスデータネットワークインターフェースとを有する、オーディオ転送デバイス。
  2. 前記ビデオストリームとは分離して前記メディアストリームから前記オーディオストリームを取得するように構成されたオーディオセパレータを有する、請求項1に記載のオーディオ転送デバイス。
  3. 前記ビデオストリームとは分離して前記メディアストリームから前記ディスプレイにより取得された前記オーディオストリームを前記ディスプレイから受信するためのオーディオ受信インタフェースを有し、
    前記の受信したオーディオストリームは、前記ディスプレイ上に表示される前記ビデオストリームと同期される、請求項1に記載のオーディオ転送デバイス。
  4. 前記ディスプレイによる前記ビデオストリームの受信と前記ディスプレイ上の前記ビデオストリームの表示との間の遅延を表すデジタル形式の遅延値を前記ディスプレイから受信するように構成された遅延値インタフェースを有し、
    前記ワイヤレスデータネットワークインターフェースは、前記遅延値を前記モバイル計算デバイスに転送するように構成され、
    前記モバイル計算デバイスは、前記ビデオストリームの表示と同期させるために前記オーディオストリームの再生を遅延させるためのオーディオデライヤを有する、請求項2に記載のオーディオ転送デバイス。
  5. 前記ワイヤレス接続を介した前記オーディオストリームの遅延を表す無線遅延値を確立するために前記計算デバイスにより遅延決定プロトコルを実行するように構成される、請求項1−4のうちいずれか一項に記載のオーディオ転送デバイス。
  6. 前記モバイル計算デバイス上で再生している間における前記オーディオストリームを前記ディスプレイ上の前記ビデオストリームの表示と同期させるための同期データストリームを生成するように構成されたシンクロナイザを有し、
    前記ワイヤレスデータネットワークインターフェースは、前記同期データストリームを、前記オーディオストリームと共に、前記デジタルワイヤレスデータ接続を介して前記モバイル計算デバイスに流すように構成される、請求項1−5のうちいずれか一項に記載のオーディオ転送デバイス。
  7. 前記同期データを前記ビデオストリームと共に前記ディスプレイに流すように構成される、請求項6に記載のオーディオ転送デバイス。
  8. 前記同期データストリームは、タイムスタンプを有する、請求項6又は請求項7に記載のオーディオ転送デバイス。
  9. 前記メディアストリームは、複数のオーディオストリームを有し、
    各オーディオストリームは前記ビデオストリームと同期され、
    前記ワイヤレスデータネットワークインターフェースは、前記複数のオーディオストリームをデジタルデータの形で前記デジタルワイヤレスデータ接続を介して前記モバイル計算デバイスに流すように構成され、
    前記モバイル計算デバイスは、前記ヘッドホンインタフェース上で再生するために前記複数のオーディオストリームからオーディオストリームを選択するように構成される、請求項1−8のうちいずれか一項に記載のオーディオ転送デバイス。
  10. 前記メディアストリームを生成するためのメディアストリームソースを有する、請求項1−9のうちいずれか一項に記載のオーディオ転送デバイス。
  11. 請求項1−10のうちいずれか一項に記載のオーディオ転送デバイスを有する、前記ビデオストリーム表示するように構成されたディスプレイ。
  12. オーディオストリームがビデオストリームと同期される、前記ビデオストリーム及び前記オーディオストリームを有するメディアストリームを生成するためのメディアソースと、
    前記オーディオ転送デバイスのメディアインタフェースにおいて前記メディアソースから前記メディアストリームを受信するように構成された、請求項1−11のうちいずれか一項に記載のオーディオ転送デバイスと、
    前記ビデオストリームの表示のために前記オーディオ転送デバイスのディスプレイインタフェースから前記ビデオストリームを受信するように構成されたディスプレイと、
    モバイル計算デバイスとを有し、
    前記モバイル計算デバイスは、
    前記オーディオ転送デバイスから前記オーディオストリームを受信するためのワイヤレスデータネットワークインターフェースと、
    ヘッドホンを前記モバイル計算デバイスに接続するためのヘッドホンインタフェースと、
    前記モバイル計算デバイスの前記ワイヤレスデータネットワークインターフェースから前記オーディオストリームを取得し、前記ヘッドホンインタフェース上で前記オーディオストリームを再生するためのオーディオプレーヤとを有する、オーディオ/ビデオシステム。
  13. オーディオストリームがビデオストリームと同期される、前記ビデオストリーム及び前記オーディオストリームを有するメディアストリームを受信するステップと、
    前記ビデオストリームを、前記ビデオストリームの表示のためのディスプレイに送信するステップと、
    前記オーディオストリームをデジタルデータの形でデジタルワイヤレスデータ接続を介してモバイル計算デバイスに流すステップとを有する、オーディオ転送のための方法。
  14. コンピュータプログラムがコンピュータ上で実行されたときに請求項13の全てのステップを実行するように適合されたコンピュータプログラムコード手段を有する、コンピュータプログラム。
  15. コンピュータ読み取り可能な媒体上に具現化された、請求項14に記載のコンピュータプログラム。
JP2015529146A 2012-08-28 2013-08-08 オーディオ転送デバイス及び対応する方法 Active JP6509116B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261693833P 2012-08-28 2012-08-28
US61/693,833 2012-08-28
PCT/IB2013/056492 WO2014033570A1 (en) 2012-08-28 2013-08-08 Audio forwarding device and corresponding method.

Publications (3)

Publication Number Publication Date
JP2015534315A true JP2015534315A (ja) 2015-11-26
JP2015534315A5 JP2015534315A5 (ja) 2016-09-15
JP6509116B2 JP6509116B2 (ja) 2019-05-08

Family

ID=49356474

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015529146A Active JP6509116B2 (ja) 2012-08-28 2013-08-08 オーディオ転送デバイス及び対応する方法

Country Status (7)

Country Link
US (1) US10200779B2 (ja)
EP (1) EP2891315B1 (ja)
JP (1) JP6509116B2 (ja)
CN (1) CN104584567B (ja)
BR (1) BR112015004056A2 (ja)
RU (1) RU2015111194A (ja)
WO (1) WO2014033570A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022050516A (ja) * 2017-08-08 2022-03-30 マクセル株式会社 端末、音声連携再生システム及びコンテンツ表示装置

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150296247A1 (en) * 2012-02-29 2015-10-15 ExXothermic, Inc. Interaction of user devices and video devices
US8495236B1 (en) 2012-02-29 2013-07-23 ExXothermic, Inc. Interaction of user devices and servers in an environment
US9584871B2 (en) 2013-12-19 2017-02-28 Echostar Technologies L.L.C. Smartphone bluetooth headset receiver
GB2525912B (en) 2014-05-08 2018-02-28 Mewt Ltd Synchronisation of audio and video playback
GB2525914B (en) 2014-05-08 2018-07-18 Mewt Ltd Synchronisation of audio and video playback
GB2541785B (en) 2014-05-08 2018-03-28 Mewt Ltd Synchronisation of audio and video playback
US9338391B1 (en) 2014-11-06 2016-05-10 Echostar Technologies L.L.C. Apparatus, systems and methods for synchronization of multiple headsets
US11044386B1 (en) * 2014-12-18 2021-06-22 The Directv Group, Inc. Method and system for synchronizing playback of independent audio and video streams through a network
JP6520242B2 (ja) * 2015-03-12 2019-05-29 ソニー株式会社 情報処理装置、通信システム、情報処理方法およびプログラム
US20180098180A1 (en) * 2015-04-08 2018-04-05 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving data in wireless communication system
CN105187969B (zh) * 2015-09-21 2019-11-19 深圳市冠旭电子股份有限公司 一种用于同声翻译的耳机
US10158905B2 (en) * 2016-09-14 2018-12-18 Dts, Inc. Systems and methods for wirelessly transmitting audio synchronously with rendering of video
EP3319331B1 (en) 2016-11-04 2020-01-29 Nagravision S.A. Transmission of audio streams
US10291964B2 (en) 2016-12-06 2019-05-14 At&T Intellectual Property I, L.P. Multimedia broadcast system
US10892833B2 (en) 2016-12-09 2021-01-12 Arris Enterprises Llc Calibration device, method and program for achieving synchronization between audio and video data when using Bluetooth audio devices
CN107045849B (zh) * 2017-02-20 2020-09-04 昆山龙腾光电股份有限公司 时序控制装置、方法及显示装置
US10297127B1 (en) * 2017-12-18 2019-05-21 Arris Enterprises Llc Home security systems and Bluetooth Wi-Fi embedded set-tops and modems
US11282546B2 (en) 2018-03-01 2022-03-22 Sony Group Corporation Dynamic lip-sync compensation for truly wireless bluetooth devices
US10771866B2 (en) 2018-05-24 2020-09-08 Google Llc Methods, systems, and media synchronizing audio and video content on multiple media devices
WO2020060551A1 (en) * 2018-09-20 2020-03-26 Oohms Ny Llc Method and system for synchronization of audio content for a remotely displayed video
CA3118044A1 (en) 2018-10-24 2020-04-30 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Source devices, sink devices, methods and computer programs
US10575094B1 (en) 2018-12-13 2020-02-25 Dts, Inc. Combination of immersive and binaural sound
CN110545454A (zh) * 2019-08-27 2019-12-06 北京奇艺世纪科技有限公司 一种数据同步播放方法及装置
US11553254B2 (en) * 2019-12-11 2023-01-10 Google Llc Methods, systems, and media for providing dynamic media sessions with audio stream expansion features
CN111263173B (zh) * 2020-01-09 2021-10-19 安徽文香信息技术有限公司 一种数据资源添加方法及装置
WO2021189070A1 (en) * 2020-03-19 2021-09-23 Sonos, Inc. Cloud-based video user interfaces
CN116250243A (zh) 2020-10-16 2023-06-09 三星电子株式会社 用于控制无线音频输出装置的连接的方法和设备
CN114268911B (zh) * 2021-09-23 2023-06-20 珠海市杰理科技股份有限公司 通信方法及装置、可读存储介质、tws系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004282667A (ja) * 2003-03-19 2004-10-07 Matsushita Electric Ind Co Ltd 再生同期ずれ補正機能を備えた送信機及び受信機、並びにそれらを有する伝送装置
JP2008028599A (ja) * 2006-07-20 2008-02-07 Nec Corp マルチメディアデータの再生方法及びこの方法を実施するための主通信機及び従通信機ならびにプログラム
JP2008141631A (ja) * 2006-12-05 2008-06-19 Seiko Epson Corp コンテンツ再生システムおよびこれに用いられる再生装置、並びにコンテンツ再生方法
JP2009272945A (ja) * 2008-05-08 2009-11-19 Victor Co Of Japan Ltd 同期再生装置
JP2010273078A (ja) * 2009-05-21 2010-12-02 Sharp Corp Avシステム、オーディオシステム及び映像表示装置
US20120200774A1 (en) * 2011-02-07 2012-08-09 Ehlers Sr Gregory Allen Audio and video distribution system with latency delay compensator

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6665000B1 (en) * 1998-11-13 2003-12-16 Fleetwood Group, Inc. Remote site interactive system
SE517245C2 (sv) * 2000-09-14 2002-05-14 Ericsson Telefon Ab L M Synkronisering av audio- och videosignaler
JP2002165148A (ja) * 2000-11-29 2002-06-07 Sony Corp データ処理装置および方法、並びに記録媒体
EP2375676B1 (en) * 2004-03-10 2013-06-26 Qualcomm Incorporated High data rate interface apparatus and method
DE102004051091B4 (de) * 2004-10-19 2018-07-19 Sennheiser Electronic Gmbh & Co. Kg Verfahren zum Übertragen von Daten mit einem drahtloser Kopfhörer
EP1657929A1 (fr) * 2004-11-16 2006-05-17 Thomson Licensing Dispositif et méthode de synchronisation de différentes parties d'un service numérique
US20060140265A1 (en) 2004-12-29 2006-06-29 Adimos Inc. System circuit and method for transmitting media related data
WO2006118106A1 (ja) * 2005-04-28 2006-11-09 Matsushita Electric Industrial Co., Ltd. リップシンク補正装置及びリップシンク補正方法
US8743284B2 (en) 2007-10-08 2014-06-03 Motorola Mobility Llc Synchronizing remote audio with fixed video
KR101450100B1 (ko) * 2007-11-22 2014-10-15 삼성전자주식회사 멀티미디어기기 및 그의 동기설정방법
JP4958748B2 (ja) * 2007-11-27 2012-06-20 キヤノン株式会社 音声処理装置、映像処理装置及びそれらの制御方法
EP2091230A1 (en) * 2008-02-14 2009-08-19 Sony Corporation Method, device and system for synchronizing audi/video signals
US8654988B2 (en) * 2008-05-05 2014-02-18 Qualcomm Incorporated Synchronization of signals for multiple data sinks
US8731370B2 (en) * 2009-01-12 2014-05-20 At&T Intellectual Property I, L.P. Method and device for transmitting audio and video for playback
US20120154679A1 (en) * 2010-12-21 2012-06-21 Comcast Cable Communications, Llc User-controlled synchronization of audio and video
US8838722B2 (en) * 2011-02-16 2014-09-16 Masque Publishing, Inc. Communications adaptable to mobile devices

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004282667A (ja) * 2003-03-19 2004-10-07 Matsushita Electric Ind Co Ltd 再生同期ずれ補正機能を備えた送信機及び受信機、並びにそれらを有する伝送装置
JP2008028599A (ja) * 2006-07-20 2008-02-07 Nec Corp マルチメディアデータの再生方法及びこの方法を実施するための主通信機及び従通信機ならびにプログラム
JP2008141631A (ja) * 2006-12-05 2008-06-19 Seiko Epson Corp コンテンツ再生システムおよびこれに用いられる再生装置、並びにコンテンツ再生方法
JP2009272945A (ja) * 2008-05-08 2009-11-19 Victor Co Of Japan Ltd 同期再生装置
JP2010273078A (ja) * 2009-05-21 2010-12-02 Sharp Corp Avシステム、オーディオシステム及び映像表示装置
US20120200774A1 (en) * 2011-02-07 2012-08-09 Ehlers Sr Gregory Allen Audio and video distribution system with latency delay compensator

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022050516A (ja) * 2017-08-08 2022-03-30 マクセル株式会社 端末、音声連携再生システム及びコンテンツ表示装置
JP7467513B2 (ja) 2017-08-08 2024-04-15 マクセル株式会社 端末、音声連携再生システム及びコンテンツ表示装置

Also Published As

Publication number Publication date
US20150208161A1 (en) 2015-07-23
RU2015111194A (ru) 2016-10-20
WO2014033570A1 (en) 2014-03-06
JP6509116B2 (ja) 2019-05-08
BR112015004056A2 (pt) 2017-07-04
EP2891315B1 (en) 2018-05-30
CN104584567A (zh) 2015-04-29
US10200779B2 (en) 2019-02-05
CN104584567B (zh) 2018-11-20
EP2891315A1 (en) 2015-07-08

Similar Documents

Publication Publication Date Title
JP6509116B2 (ja) オーディオ転送デバイス及び対応する方法
US10992451B2 (en) Audio and video playback system and method for playing audio data applied thereto
US10034035B2 (en) Methods, devices and systems for audiovisual synchronization with multiple output devices
US8477950B2 (en) Home theater component for a virtualized home theater system
KR102393798B1 (ko) 오디오 신호 처리 방법 및 장치
CN109906613A (zh) 音频和视频的多模式同步渲染
EP3188180B1 (en) Enhancing an audio recording
CN109565662B (zh) 控制连接的多媒体装置
US20130089026A1 (en) Wireless Audio Transmission
US20070039034A1 (en) System and method of adjusting audiovisual content to improve hearing
JP2013187765A (ja) 映像音声処理装置
US20240007792A1 (en) Bluetooth device and method for controlling a plurality of wireless audio devices with a bluetooth device
US11089496B2 (en) Obtention of latency information in a wireless audio system
JP6720566B2 (ja) オーディオ機器
US20240022783A1 (en) Multimedia playback synchronization
US20190182557A1 (en) Method of presenting media
BR102020025848A2 (pt) Equipamento decodificador com dois links de áudio
US20220382535A1 (en) Consumer device firmware updating via hdmi
KR102279395B1 (ko) 디지털방송 출력 시스템, 셋톱박스 및 그 디지털방송신호 출력방법, 이동통신단말기 및 그 오디오신호 출력방법
JP5470407B2 (ja) 通信制御装置及びプログラム
JP6508831B2 (ja) 受信装置、受信方法、放送システムおよびプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160728

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160728

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20170214

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170822

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170926

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20171220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181029

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190305

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190402

R150 Certificate of patent or registration of utility model

Ref document number: 6509116

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250