JP2014161020A - テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減 - Google Patents

テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減 Download PDF

Info

Publication number
JP2014161020A
JP2014161020A JP2014046783A JP2014046783A JP2014161020A JP 2014161020 A JP2014161020 A JP 2014161020A JP 2014046783 A JP2014046783 A JP 2014046783A JP 2014046783 A JP2014046783 A JP 2014046783A JP 2014161020 A JP2014161020 A JP 2014161020A
Authority
JP
Japan
Prior art keywords
information
transport stream
white space
capturing
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014046783A
Other languages
English (en)
Other versions
JP5872606B2 (ja
Inventor
R Ravindran Vijayalakshmi
ビジャヤラクシュミ・アール.・ラビーンドラン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2014161020A publication Critical patent/JP2014161020A/ja
Application granted granted Critical
Publication of JP5872606B2 publication Critical patent/JP5872606B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4381Recovering the multiplex stream from a specific network, e.g. recovering MPEG packets from ATM cells
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/24Systems for the transmission of television signals using pulse code modulation
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/06Consumer Electronics Control, i.e. control of another device by a display or vice versa
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L5/00Arrangements affording multiple use of the transmission path
    • H04L5/003Arrangements for allocating sub-channels of the transmission path

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】テレビジョンホワイトスペースを介したユーザデバイスから受信デバイスへの情報の通信に関し、より詳細には、そのような通信のためのエンドツーエンドレイテンシを低減するためのシステムおよび方法を提供する。
【解決手段】システムは、ホワイトスペースを介して補助データとしてヒューマンインターフェースデータ(HID)をテレビジョン受信機に送信する。ユーザモバイルデバイス上のコンテンツは外部ディスプレイデバイス上にワイヤレス表示され得る。HIDは、ビデオデータとは別々にキャプチャされ、処理され得る。HIDは、ホワイトスペースを介した送信のためのトランスポートストリーム中に形成され得る。HIDはトランスポートストリーム中に補助データとして含まれ得る。テレビジョン受信機によって受信されたとき、HIDの送信ならびにそれの処理を調整するためにタイムスタンプが使用され得る。
【選択図】図7

Description

関連出願の相互参照
本出願は、その全体が参照により本明細書に明確に組み込まれる、RAVEENDRANという名称で、2010年3月2日に出願された米国仮特許出願第61/309,658号の利益を主張する。
本開示は、一般に、テレビジョンホワイトスペースを介したユーザデバイスから受信デバイスへの情報の通信に関し、より詳細には、そのような通信のためのエンドツーエンドレイテンシを低減するためのシステムおよび方法に関する。
テレビジョン(TV)および他のモニタにコンテンツをワイヤレス配信することが望ましい。一例として、いくつかの事例では、TVデバイス上に出力するためにユーザデバイスからコンテンツを配信させることが望ましいことがある。たとえば、多くのTVデバイス出力能力と比較して、携帯電話、個人情報端末(PDA)、メディアプレーヤデバイス(たとえば、Apple(登録商標) iPOD(登録商標)デバイス、他のMP3プレーヤデバイスなど)、ラップトップコンピュータ、ノートブックコンピュータなど、多くのポータブルユーザデバイスは、小さいディスプレイサイズなど、出力能力が限定/制約されている。たとえば、ポータブルユーザデバイス上でビデオを閲覧することを望んでいるユーザは、ビデオコンテンツがTVデバイス上に出力するために配信された場合、改善されたオーディオビジュアルエクスペリエンスを得ることがある。したがって、いくつかの事例では、ユーザは、コンテンツを受信(閲覧および/または聴取)する際の改善されたオーディオビジュアルエクスペリエンスを求めて、ATSCチューナー(たとえば、HDTVデバイス)をもつモニタ上に出力するために、ユーザデバイスからコンテンツを配信することを望むことがある。
方法が提供される。本方法は、テレビジョン受信機と通信しているホワイトスペースデバイスによって、ユーザ入力デバイスからの情報をキャプチャすることを含む。本方法はまた、ホワイトスペースデバイスによって、ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するためにキャプチャされた情報を処理することであって、キャプチャされた情報の少なくとも一部分がトランスポートストリーム内に補助データとして含まれる、処理することを含む。本方法は、ホワイトスペースデバイスから、ホワイトスペースを介してトランスポートストリームをテレビジョン受信機に送信することをさらに含む。
装置が提供される。本装置は、ユーザ入力デバイスからの情報をキャプチャするための手段を含む。本装置はまた、ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するためにキャプチャされた情報を処理するための手段であって、キャプチャされた情報の少なくとも一部分がトランスポートストリーム内に補助データとして含まれる、処理するための手段を含む。本装置は、ホワイトスペースを介してトランスポートストリームをテレビジョン受信機に送信するための手段をさらに含む。
コンピュータプログラム製品が提供される。本コンピュータプログラム製品は、プログラムコードを記録したコンピュータ可読媒体を含む。プログラムコードは、ユーザ入力デバイスからの情報をキャプチャするためのプログラムコードを含む。プログラムコードはまた、ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するためにキャプチャされた情報を処理するためのプログラムコードであって、キャプチャされた情報の少なくとも一部分がトランスポートストリーム内に補助データとして含まれる、処理するためのプログラムコードを含む。プログラムコードは、ホワイトスペースを介してトランスポートストリームをテレビジョン受信機に送信するためのプログラムコードをさらに含む。
装置が提供される。本装置は、(1つまたは複数の)プロセッサと(1つまたは複数の)プロセッサに結合されたメモリとを含む。(1つまたは複数の)プロセッサは、ユーザ入力デバイスからの情報をキャプチャするように構成される。(1つまたは複数の)プロセッサはまた、ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するためにキャプチャされた情報を処理することであって、キャプチャされた情報の少なくとも一部分がトランスポートストリーム内に補助データとして含まれる、処理することを行うように構成される。(1つまたは複数の)プロセッサは、ホワイトスペースを介してトランスポートストリームをテレビジョン受信機に送信するようにさらに構成される。
システムが提供される。本システムは、ユーザデバイスに通信可能に結合され、ユーザデバイスからの情報をキャプチャするためのホワイトスペースデバイスを含む。ホワイトスペースデバイスは、ホワイトスペースを介した送信のためのトランスポートストリームを形成するためにキャプチャされた情報を処理するプロセッサであって、キャプチャされた情報の少なくとも一部分がトランスポートストリーム内に補助データとして含まれる、プロセッサを含む。ホワイトスペースデバイスはまた、ホワイトスペースを介してトランスポートストリームを送信する送信機を含む。
本開示のより完全な理解のために、次に添付の図面とともに行われる以下の説明を参照する。
本開示の態様が実装され得る例示的なシステムの図。 典型的なATSCシステムの図。 例示的なATSCタイミングモデルの図。 ATSCにおける典型的なチャネル関連付けの図。 ユーザデバイスからキャプチャされた情報(たとえば、HDMI(登録商標)、DP、VGAなど)を、ATSCホワイトスペース帯域を介した送信のためのMPEG−2 TSストリームに変換するための例示的なデータフローの図。 ビデオ、オーディオのための、およびMPEG−2 TSストリームのための典型的なATSCデータレートの図。 本開示の態様による、ヒューマンインターフェースデバイス(HID:human interface device)データがユーザデバイスからキャプチャされ、ホワイトスペースデバイスによって生成されたトランスポートストリーム内に補助データとして含まれる例示的な態様を示す、本開示の態様が実装され得る別の例示的なシステムの図。 本開示の一態様による、ホワイトスペース中のユーザ入力データの送信を示す図。
「例示的」という単語は、本明細書では、「例、事例、または例示の働きをすること」を意味するために使用する。「例示的」として本明細書で説明するいかなる態様も、必ずしも他の態様よりも好適または有利なものと解釈すべきではない。
ホワイトスペースデバイスは、概して、テレビジョン帯域中の未使用のスペクトルを介して通信する無認可ワイヤレストランシーバを指す。これらのデバイスは、概して、デバイスが、最初に、認可された1次ユーザからのTV帯域信号(たとえば、Advanced Television Systems Committee(ATSC)、National Television Systems Committee(NTSC)、およびいくつかのワイヤレスマイクロフォンプロトコル)を検出するために走査し、次いで、認可信号との干渉を回避するために未使用のチャネルを選択するコグニティブ(cognitive)方式で動作する。
ホワイトスペースデバイスは、ユーザデバイスに通信可能に結合されるか、またはユーザデバイス内に組み込まれ得、したがって、ホワイトスペースデバイスは、TVホワイトスペースを介して、ユーザデバイスからTVデバイス(たとえば、HDTVデバイス)に情報(たとえば、マルチメディアコンテンツ)を配信し得る。ホワイトスペースデバイスの例示的な実装形態について、本明細書でさらに説明する。ただし、そのようなホワイトスペースデバイスの様々な実装形態が可能であり、ホワイトスペースを介してユーザデバイスからの情報を配信するように動作可能であるホワイトスペースデバイスのいかなる実装形態も、本開示の範囲内である。
ホワイトスペースデバイスを介したユーザデバイスから受信デバイス(たとえば、HDTVデバイス)への情報の配信に関連するエンドツーエンドレイテンシを低減することが望ましくなる。本開示の態様は、そのようなエンドツーエンドレイテンシを低減するかまたは最小限に抑えるための技法を提供する。以下でさらに説明するように、いくつかの態様では、ワイヤレスに送信されたストリーム内に含まれている(すなわち、帯域内ホワイトスペース送信中に含まれている)補助データは、ユーザデバイスからキャプチャされたヒューマンインターフェースデバイス(HID)情報などのいくつかの情報を送信することに関連するエンドツーエンドレイテンシを低減するために使用される。一例として、マウス移動および/または他のユーザ入力コマンドは補助データとして効率的に通信され得る。以下でさらに説明するように、ATSCは、補助データが送信中に含まれていることを可能にするMPEG−2 TS(トランスポートストリーム)をサポートし、そのような補助データは、従来、クローズドキャプションまたはサブタイトル情報を通信するためにATSC/MPEG−2 TS通信内で採用される。本開示の態様は、HID情報などのユーザデバイスからの情報を効率的に通信するためにそのような補助データを活用する。したがって、受信デバイスのディスプレイ上に表示されるべき、マウス移動などのHID情報のビデオフレームデータとしての送信に単に依拠するのではなく、そのようなHID情報は、本開示のいくつかの態様による補助データとしてより効率的に通信され得る。
本開示では、ホワイトスペースデバイスの例示的な実装形態を含む例示的なシステムについて説明する。本開示はまた、ユーザデバイスからキャプチャされたHID情報などのユーザデバイスからのいくつかの情報を効率的に通信するために、ホワイトスペースを介して送信されるストリーム中に含まれている補助データを利用する例示的な態様について説明する。ホワイトスペースデバイスの例示的なシステムおよび例示的な実装形態が説明のために記載されているが、レイテンシを低減するために補助データを利用するために説明される概念は、そのような例示的なシステム/デバイスへの適用に限定されるものではなく、ホワイトスペースを介してユーザデバイスからの情報を配信するためのシステム/デバイスの様々な他の実装形態内で同様に採用され得ることを、当業者は諒解されたい。
図1は、本開示の態様が実装され得る例示的なシステム100の図である。システム100は、ブロック図の形式で示され、「ホスト」デバイスと呼ばれることがあるユーザデバイス101を含む。図示の例では、ユーザデバイス101がモバイルデバイスとして示されているが、他の態様では、ユーザデバイスはモバイルデバイスである必要はない。デバイス101は、メディアプロセッサ、ディスプレイプロセッサ、オーディオ出力プロセッサを含み得、埋込みディスプレイおよび(1つまたは複数の)埋込みスピーカーなどの埋込み入出力デバイスを有し得る。ユーザデバイス101は、概して、それの埋込み出力デバイス(たとえば、埋込みディスプレイおよび埋込みスピーカー)を介して出力され得るコンテンツを生成するように動作可能である。ユーザデバイス上に出力されるための様々なタイプのコンテンツが当技術分野でよく知られており、いずれのそのようなコンテンツも所与のアプリケーションにおいてユーザデバイス101上に出力され得る。たとえば、マルチメディアコンテンツ(たとえば、テレビジョンプログラム、ムービーなど)を出力するためにユーザデバイス101上でマルチメディアプレーヤアプリケーションが実行していることがある。もちろん、テキストコンテンツおよび/または他のグラフィカル/画像および/またはオーディオコンテンツ(たとえば、電子メール、ウェブブラウジングコンテンツ、ビデオゲーム、ワードプロセシングコンテンツなど)などの他のコンテンツが、ユーザがユーザデバイス101を介して対話していることがある所与のアプリケーションにおいて出力されることがある。
ユーザは、ポインタデバイス(たとえば、マウス)、ジョイスティック、キーボード、タッチスクリーンインターフェース、マイクロフォンなど、1つまたは複数のヒューマンインターフェース入力デバイス(図1に図示せず)を介して、(たとえば、その上で実行しているアプリケーションと対話するために)ユーザデバイス101に情報を入力していることがある。いくつかの事例では、そのようなユーザ入力情報により、何らかの出力が生成または修正されることになり得る。たとえば、ユーザのマウス移動の入力により、ユーザデバイスの出力ディスプレイ上のポインタが対応して移動することになり得る。別の例では、ビデオゲームをプレイしているユーザが、ユーザデバイス101上のボタンおよび/またはタッチインターフェースによって、またはユーザデバイス101の物理的操作によって(たとえば、ユーザデバイス101を振ること、回転させることなどによって)ゲームを制御し得る。ユーザによるこれらの対話は、出力ディスプレイに組み込まれたポインタ、ターゲット、カラット、または他のアイコンのロケーションを変更し得る。
また、例示的なシステム100にはホワイトスペースデバイス102が含まれ、それの例示的な実装形態が図1にブロック図の形式で示されている。ホワイトスペースデバイス102は、ユーザデバイス101からの情報を受信するために、そのようなユーザデバイス101に通信可能に結合される。一態様では、ホワイトスペースデバイス102は、USB接続を介してユーザデバイス101に通信可能に結合されるが、ホワイトスペースデバイス102およびユーザデバイス101は、本明細書でさらに説明するように、ユーザデバイス101からの情報がホワイトスペースデバイス102によってキャプチャされることを可能にする任意の好適な方法で通信可能に結合され得る。たとえば、ホワイトスペースデバイスは、別のタイプのワイヤード接続を介して、またはワイヤレスUSB(WUSB)、Bluetooth(登録商標)、802.11など、ワイヤレス通信接続を介してユーザデバイス101に通信可能に結合され得る。代替的に、いくつかの態様では、ホワイトスペースデバイス102は、ユーザデバイス101内に組み込まれ/埋め込まれ得、したがって、たとえば、ユーザデバイス101からの情報のキャプチャのために内部通信バスを介して通信可能に結合され得る。したがって、一態様では、ユーザデバイス101およびホワイトスペースデバイス102は、同じ物理デバイスに組み込まれ得る。
ホワイトスペースデバイス102は、ユーザデバイス101から情報をキャプチャする。たとえば、キャプチャされた情報は、「ビデオ出力(video out)」および「オーディオ出力(audio out)」などの出力デバイスを介して出力される「ペイロードコンテンツ」を含む。本明細書でさらに説明するように、いくつかの態様では、「ヒューマンインターフェースデバイス」(HID)データ、たとえば、ユーザ入力コマンド(たとえば、マウス移動、ジョイスティック移動、キーボード入力、タッチ入力、移動入力、および/または(1つまたは複数の)ヒューマンインターフェースデバイスを介して受信された他のコマンド)などの他の情報も、ホワイトスペースデバイス102によってキャプチャされ得る。ホワイトスペースデバイス102は、たとえば、ユーザデバイス101からキャプチャされたコンテンツ(たとえば、マルチメディアコンテンツ)が、HDTVとして図1に示すディスプレイデバイス103によって受信され、出力されることを可能にするために、ホワイトスペースを介して、ユーザデバイス101からキャプチャされた情報をワイヤレス送信するように動作可能である。ユーザ入力コマンドは、関連するオーディオデータまたはビデオデータとの対応を与えるために、タイミング情報とともに、送信されたデータ中に含まれ得る。
図1の図示の例では、ホワイトスペースデバイス102は、Advanced Television Systems Committee(ATSC)信号をホワイトスペースチャネル上で無線で送信し、それにより事実上テレビ局送信機として働く。したがって、ブロック図の形式で示すように、図1の例示的なホワイトスペースデバイス102はATSCベースバンドプロセッサと送信機とを含む。当技術分野で知られているように、ATSCは、よく知られているMPEG−2トランスポートストリーム(TS)に適合し、したがって、例示的なホワイトスペースデバイス102は、ユーザデバイス101からキャプチャされた情報を、ホワイトスペースを介したワイヤレス送信のためのMPEG−2 TSストリームに符号化するためのMPEG−2 TSエンコーダを含み得る。
ディスプレイデバイス103は、ディスプレイデバイスのディスプレイおよび/またはスピーカーへの出力のためのATSC信号(たとえば、MPEG−2 TSストリーム)を受信し、処理することができるように、(標準テレビジョンの場合と同様に)埋め込まれ得るか、またはディスプレイデバイス103に接続された異なる構成要素であり得るATSCチューナー/受信機(たとえば、従来のテレビジョンチューナー)を含む。ATSCは明確な規格であり、典型的なATSCシステムの例示的な概観およびATSCタイミングを、それぞれ図2〜図3に示す。ATSCにおける典型的なチャネル関連付けを図4に示す。各ATSC「チャネル」はMPEG−2「プログラム」に対応する。プログラム関連付けテーブル(PAT:Program Association Table)は、トランスポートストリーム中の各プログラムにプログラムマップテーブル(PMT:Program Map Table)のプログラムID(PID:Program ID)を与える。PATは、よく知られているPID(PIDゼロ)に関する唯一のテーブルとして送信される。PMTは、プログラムに関連する各エレメンタリーストリームのPIDを定義する。複数のオーディオストリームが定義され得る。受信機は言語記述子について検査しなければならない。閲覧者が言語選好を変更する場合、PMTは、一致するオーディオエレメンタリーストリームについて検査するために再パースされなければならない。ATSCに関するさらなる詳細は、公開されたATSC規格において発見され得る。
もちろん、ATSCは、ホワイトスペースデバイス102によって採用され得るテレビジョン伝送規格セットの一例にすぎない。他の態様では、本開示の教示を使用してホワイトスペースを介してメディアコンテンツを送信するために、ATSC規格、Digital Video Broadcasting(DVB)規格、Integrated Services Digital Broadcasting(ISDB)規格、Digital Multimedia Broadcast(DMB)規格など、様々なテレビジョン規格のいずれかが採用され得る。
例示的なホワイトスペースデバイス102は、TVホワイトスペースを感知するための(たとえば、認可放送事業者によって使用されていないTV帯域内でチャネルを感知するための)ホワイトスペーススペクトルセンサを有する制御モジュールをさらに含む。そのようなセンサは利用可能なTVホワイトスペースを判断するために感知を周期的に実行し得、判断されたホワイトスペース内でホワイトスペースデバイスの送信を維持する必要があるとき、周波数マネージャ論理がチャネルを調整し得る。
上述のように、例示的なホワイトスペースデバイス102は、ユーザデバイス101からキャプチャされた情報を、ATSCに適合し、したがってディスプレイデバイス103のATSC受信機/チューナーによって受信され、処理され得る、送信のためのMPEG−2 TSストリームに変換し得る。ユーザデバイス101からキャプチャされた情報(たとえば、HDMI、DP、VGAなど)を、ATSCホワイトスペース帯域を介した送信のためのMPEG−2 TSストリームに変換するための例示的なデータフローを図5に示す。また、ビデオ、オーディオのための、およびMPEG−2 TSストリームのための典型的なATSCデータレートを図6に示す。
ビデオおよびオーディオ通信は、エンコーダへの信号入力からデコーダからの信号出力までのエンドツーエンド遅延が一定であるタイミングモデルを一般に有する。ATSCでは、たとえば、エンコーダへの信号入力からデコーダからの信号出力までのエンドツーエンド遅延が一定である厳密なタイミングモデルがある。エンドツーエンド遅延は、送信側から受信側への通信を介して遭遇した遅延の合計であり、符号化、エンコーダバッファリング、多重化、通信またはストレージ、多重分離、デコーダバッファリング、復号、後処理、および提示の遅延のような遅延を含み得る。ATSCタイミングモデルの一部として、すべてのビデオピクチャおよびオーディオサンプルが正確に1回提示される。
複数のエレメンタリーストリームの間の同期は、トランスポートストリーム中の提示タイムスタンプ(PTS:Presentation Time Stamp)を用いて、ATSC(MPEG−2 TS)において達成される。タイムスタンプは、一般に90kHzの単位であるが、システムクロックリファレンス(SCR:System Clock Reference)、プログラムクロックリファレンス(PCR:Program Clock Reference)および随意のエレメンタリーストリームクロックリファレンス(ESCR:Elementary Stream Clock Reference)は、27MHzの解像度をもつ拡張を有する。
図7に、本開示の態様が実装され得る別の例示的なシステム700を示す。システム700は、図1のシステム100に類似するが、レイテンシを低減するために補助データを使用するための1つの例示的な態様の説明を助けるために示されるブロックを含む。図1の例示的なシステム100の場合のように、システム700は、(上記で説明したユーザデバイス101であり得る)ユーザデバイス701と、(上記で説明したホワイトスペースデバイス102であり得る)ホワイトスペースデバイス720と、(上記で説明したディスプレイデバイス103であり得る)受信デバイス726とを含む。
例示的なユーザデバイス701は、中央処理ユニット(CPU)702と、メモリ703と、マルチメディアサブシステム709とを含み得る。図示の例では、メディアプレーヤアプリケーションなどのソフトウェアアプリケーション704がユーザデバイス701上で実行している。図7では実行しているものとして示されている例示的なアプリケーション704は、パーサ705と、ビデオデコーダ706と、オーディオデコーダ708と、レンダラ707とを含み、そのようなアプリケーション704は、ムービーなど、マルチメディアコンテンツを出力するために実行していることがある。そのようなメディアプレーヤアプリケーション704の例は、WINDOWS(登録商標) MEDIA PLAYER、WINAMP(登録商標)、REALPLAYER(登録商標)、QUICKTIME(登録商標) PLAYER、iTunes(登録商標)、AMAROK(登録商標)、ALLPLAYER、VLC、MPLAYER(登録商標)、XINE(登録商標)、TOTEM(登録商標)などとして商業的に知られるアプリケーションを含む。
マルチメディアサブシステム709は、コーデック710と、グラフィックス処理ユニット(GPU)711と、ディスプレイプロセッサ712と、オーディオプロセッサ713とを含み得る。マルチメディアサブシステム709は、ディスプレイ、スピーカーへの出力、またはユーザデバイス701の他の出力(図7に図示せず)のために、アプリケーション704によって生成され得るようなビデオデータ715および/またはオーディオデータ716を出力するために採用される。ユーザデバイス701は、マウス、キーボード、ジョイスティック、タッチスクリーンインターフェース、マイクロフォン、動きセンサなど、1つまたは複数の入力デバイス(または「ヒューマンインターフェースデバイス」)714をさらに含む。(1つまたは複数の)ヒューマンインターフェースデバイス(「HID」)714は、ユーザデバイス701上で実行している対応するデバイスドライバを含み得る。
ビデオデータ715およびオーディオデータ716などの出力ペイロードコンテンツは、USBインターフェースなどの通信インターフェースまたはバス719を介してホワイトスペースデバイス720によってキャプチャされる。ホワイトスペースデバイス720は、キャプチャされた情報を(たとえば、MPEG−2 TSストリーム中にそれを形成するように)処理し、送信機725から、HDTVデバイスなどの受信デバイス726による受信のためにTVホワイトスペースを介してそれを送信するように動作可能である。
本開示の一態様によれば、HIDデータ717もホワイトスペースデバイス720によってキャプチャされる。図7の図示の例では、HIDデバイス714からの入力コマンドのためのタイムスタンプ情報などのコマンド情報は、HIDデータ717としてキャプチャされる。たとえば、ポインタ移動コマンドおよび対応するタイムスタンプは、マウスデバイス、タッチスクリーンインターフェースなどからキャプチャされ得る。いくつかの事例では、ユーザ入力コマンドにより、何らかの出力が生成または修正されることになり得る。たとえば、ユーザのマウス移動の入力により、ユーザデバイスの出力ディスプレイ上でポインタの対応する移動が生じることになり得る。したがって、HIDデータ717としても含まれ得るGPU711からの対応するディスプレイデータも(たとえば、ピクセルデータなどの静止画像として)キャプチャされ得る。HIDデータ717のための例示的なフォーマットは、キャプチャされたコマンドタイムスタンプ情報を含んでいるヘッダ部分とキャプチャされたピクセルデータを含んでいるペイロード部分とを含むフォーマット718として示される。
ユーザ入力を認識する際の遅延がアプリケーションの操作性に影響を及ぼし得るビデオゲームまたは他のアプリケーションなどのいくつかのアプリケーションでは、HIDデータ717の送信に影響を及ぼすことによりディスプレイデータの送信に影響を及ぼし得るレイテンシ問題を回避するために、ディスプレイデータとは別個にHIDデータ717を送信することが望ましいことがある。これに対処するために、一態様では、ホワイトスペースデバイス720は、インターフェース/バス719を介してHIDデータ717をキャプチャし、ホワイトスペースデバイス720は、生成されたトランスポートストリーム(たとえば、MPEG−2 TSストリーム)724内に補助データ723として含むためにHIDデータ717を処理する。したがって、たとえば、ホワイトスペースデバイス720は、キャプチャされたビデオデータ715を処理するためのビデオエンコーダ721を含み、ホワイトスペースデバイス720は、キャプチャされたオーディオデータ716を処理するためのオーディオエンコーダ722を含む。ビデオおよびオーディオエンコーダは、MPEG−2 TS(トランスポートストリーム)などのトランスポートストリーム724を生成するためにキャプチャされたビデオおよびオーディオデータを処理する。さらに、HIDデータは、生成されたストリーム724中に補助データ723として含まれる。HIDデータ717は、ペイロードデータ(たとえば、ピクセルデータ)を含んでいる補助データ723を生成するためにホワイトスペースデバイス720によって処理され得、補助データ723は、HIDデータ717中に含まれるタイムスタンプに従って(たとえば、他のビデオおよびオーディオデータに対する)適切な時点で、生成されたトランスポートストリーム724内に埋め込まれる。さらに、ディスプレイデータに関連するフレーム中のHIDピクセルの位置またはロケーションまたは座標情報が通信され得る。MPEG−2 TSは送信機725によって送信され得る。
このようにして、HIDデータ717は、ディスプレイデータから分離され、トランスポートストリーム724中で補助データ723として送信される。受信されると、HIDデータ717は、ホワイトスペースデバイス720によって(任意のタイムスタンプ情報とともに)処理され、任意のディスプレイデバイス上で適切に表示するためにレンダリングされる。このようにしてHIDデータ717を分離することは、一般的なビデオデータ715とは別個にHIDデータ717を送信することによって、ユーザデバイスで生成されるユーザコマンドのディスプレイデバイス726上でのより応答的な表示(たとえば、アプリケーション中のマウスポインタを移動することまたはビデオゲーム中のターゲットを移動すること)を可能にする。
一実装形態のための一例として、ATSCは、補助データが送信中に含まれていることを可能にするMPEG−2 TSをサポートする。そのような補助データは、従来、クローズドキャプション情報を通信するためにATSC/MPEG−2 TS通信内で採用される。本開示の態様は、HIDデータ717などのユーザデバイス701からの情報を効率的に通信するためにそのような補助データを活用する。したがって、ビデオフレームデータとしての、マウス移動などのHID情報の送信に単に依拠するのではなく、そのようなHID情報は、本開示のいくつかの態様による補助データ723としてより効率的に通信され得る。
受信デバイス726は、それの出力中に受信したピクセルデータをオーバーレイするために、たとえば、その中に含まれる従来のATSC受信機/チューナーを使用して、補助データを処理し得る。補助データは、ビデオおよびオーディオデータと比較してサイズが比較的小さく、したがって、補助データは、よりしばしばおよび/またはより効率的に通信され得る。たとえば、一態様では、補助データ723は、77マイクロ秒ごとに1回トランスポートストリーム内に埋め込まれ得る。したがって、マウス移動などのHID情報は、ユーザにとって良好なオーディオビジュアルエクスペリエンスが生じるように、(ビデオストリームデータにおいて可能であるようなミリ秒程度ではなく、マイクロ秒程度の)極めて低遅延で効率的に通信され得る。たとえば、ユーザのマウス移動から生じるディスプレイ上のポインタの移動などのHIDデータのユーザ入力から生じるディスプレイ変化は、適当なときに出力される滑らかな移動として、受信デバイス726(たとえば、HDTVディスプレイ)において表示され得、それによって、ユーザが、受信デバイス726上の出力を閲覧しながら、アプリケーション704および/または(ユーザデバイス701のHIDデバイス714を介して)出力されるコンテンツと対話することがより容易になる。
図8に、本開示の一態様による、ホワイトスペース中のユーザ入力データの送信を示す。ブロック802に示すように、テレビジョン受信機と通信しているホワイトスペースデバイスがユーザ入力デバイスからの情報をキャプチャする。ブロック804に示すように、次いで、ホワイトスペースデバイスは、ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するためにキャプチャされた情報を処理する。キャプチャされた情報のうちの少なくとも一部分がトランスポートストリーム内に補助データとして含まれる。ブロック806に示すように、次いで、ホワイトスペースデバイスは、ホワイトスペースを介してトランスポートストリームをテレビジョン受信機に送信する。
一態様では、装置が、ユーザ入力デバイスからの情報をキャプチャするための手段と、トランスポートストリームを形成するためにキャプチャされた情報を処理するための手段と、ホワイトスペースを介してテレビジョン受信機にトランスポートストリームを送信するための手段とを含む。本デバイスはまた、ユーザ入力コマンドのためのタイムスタンプをキャプチャするための手段と、ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャするための手段とを含み得る。一態様では、上述の手段は、ヒューマンインターフェースデバイス714、マルチメディアサブシステム709、コーデック710、GPU711、HIDデータ717、バス719、ホワイトスペースデバイス720、デコーダ721および/または722、補助データ723、変換されたデータストリーム724、および/または送信機725であり得る。
本開示およびその利点について詳細に説明したが、添付の特許請求の範囲によって規定される本開示の技術から逸脱することなく様々な変更、置換および改変を本明細書で行うことができることを理解されたい。さらに、本出願の範囲は、本明細書で説明するプロセス、機械、製造、組成物、手段、方法およびステップの特定の態様に限定されるものではない。当業者が容易に諒解するように、本明細書で説明する対応する態様と実質的に同じ機能を実行するか、または実質的に同じ結果を達成する、現存するかまたは後で展開される、プロセス、機械、製造、組成物、手段、方法、またはステップは本開示に従って利用され得る。したがって、添付の特許請求の範囲は、それらの範囲内にそのようなプロセス、機械、製造、組成物、手段、方法、またはステップを含むものとする。
本開示およびその利点について詳細に説明したが、添付の特許請求の範囲によって規定される本開示の技術から逸脱することなく様々な変更、置換および改変を本明細書で行うことができることを理解されたい。さらに、本出願の範囲は、本明細書で説明するプロセス、機械、製造、組成物、手段、方法およびステップの特定の態様に限定されるものではない。当業者が容易に諒解するように、本明細書で説明する対応する態様と実質的に同じ機能を実行するか、または実質的に同じ結果を達成する、現存するかまたは後で展開される、プロセス、機械、製造、組成物、手段、方法、またはステップは本開示に従って利用され得る。したがって、添付の特許請求の範囲は、それらの範囲内にそのようなプロセス、機械、製造、組成物、手段、方法、またはステップを含むものとする。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
[C1]
テレビジョン受信機と通信しているホワイトスペースデバイスによって、ユーザ入力デバイスからの情報をキャプチャすることと、
前記ホワイトスペースデバイスによって、ホワイトスペースを介した前記テレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理することであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理することと、
前記ホワイトスペースデバイスから、ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信することとを備える方法。
[C2]
前記情報がヒューマンインターフェースデバイス(HID)情報を備える、C1に記載の方法。
[C3]
HID情報をキャプチャすることが、
ユーザ入力コマンドのためのタイムスタンプをキャプチャすることと、
前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャすることとを備える、C2に記載の方法。
[C4]
HID情報をキャプチャすることが、
前記ディスプレイデータに関連するフレーム中のユーザ入力コマンドから生じるディスプレイデータの位置、ロケーション、および座標情報のうちの少なくとも1つをキャプチャすることを備える、C2に記載の方法。
[C5]
前記処理することが、
前記タイムスタンプに少なくとも部分的に基づいて判断された前記トランスポートストリーム中の位置において前記トランスポートストリーム内に前記補助データとして前記ディスプレイデータを含めることを備える、C3に記載の方法。
[C6]
前記キャプチャすることが、前記ユーザ入力デバイス上に出力されるビデオデータおよびオーディオデータのうちの少なくとも1つをキャプチャすることをさらに備え、前記処理することが、前記トランスポートストリーム中のビデオデータおよびオーディオデータのうちの前記キャプチャされた少なくとも1つを含むことを備える、C5に記載の方法。
[C7]
前記トランスポートストリームがMPEG−2 TS(トランスポートストリーム)を備える、C1に記載の方法。
[C8]
前記補助データが、キャプチャされたマルチメディアまたはディスプレイデータに関連する補助データを備える、C1に記載の方法。
[C9]
ユーザ入力デバイスからの情報をキャプチャするための手段と、
ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理するための手段であって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理するための手段と、
ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信するための手段とを備える装置。
[C10]
前記情報がヒューマンインターフェースデバイス(HID)情報を備える、C9に記載の装置。
[C11]
HID情報をキャプチャするための前記手段が、
ユーザ入力コマンドのためのタイムスタンプをキャプチャするための手段と、
前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャするための手段とを備える、C10に記載の装置。
[C12]
プログラムコードを記録したコンピュータ可読媒体であって、前記プログラムコードが、
ユーザ入力デバイスからの情報をキャプチャするためのプログラムコードと、
ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理するためのプログラムコードであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理するためのプログラムコードと、
ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信するためのプログラムコードとを備えるコンピュータ可読媒体を備えるコンピュータプログラム製品。
[C13]
前記情報がヒューマンインターフェースデバイス(HID)情報を備える、C12に記載のコンピュータプログラム製品。
[C14]
HID情報をキャプチャするための前記プログラムコードが、
ユーザ入力コマンドのためのタイムスタンプをキャプチャするためのプログラムコードと、
前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャするためのプログラムコードとを備える、C13に記載のコンピュータプログラム製品。
[C15]
少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサに結合されたメモリであって、前記少なくとも1つのプロセッサが、
ユーザ入力デバイスからの情報をキャプチャすることと、
ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理することであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理することと、
ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信することとを行うように構成されている、メモリとを備える装置。
[C16]
前記情報がヒューマンインターフェースデバイス(HID)情報を備える、C15に記載の装置。
[C17]
前記少なくとも1つのプロセッサが、
ユーザ入力コマンドのためのタイムスタンプをキャプチャすることと、
前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャすることとによってHID情報をキャプチャするように構成された、C16に記載の装置。
[C18]
前記少なくとも1つのプロセッサが、前記ディスプレイデータに関連するフレーム中のユーザ入力コマンドから生じるディスプレイデータの位置、ロケーション、および座標情報のうちの少なくとも1つをキャプチャすることによってHID情報をキャプチャするように構成された、C16に記載の装置。
[C19]
前記少なくとも1つのプロセッサが、前記タイムスタンプに少なくとも部分的に基づいて判断された前記トランスポートストリーム中の位置において前記トランスポートストリーム内に前記補助データとして前記ディスプレイデータを含めることによって処理するように構成された、C18に記載の装置。
[C20]
前記キャプチャすることが、前記ユーザ入力デバイス上に出力されるビデオデータおよびオーディオデータのうちの少なくとも1つをキャプチャすることをさらに備え、前記処理することが、前記トランスポートストリーム中のビデオデータおよびオーディオデータのうちの前記キャプチャされた少なくとも1つを含むことを備える、C19に記載の装置。
[C21]
前記トランスポートストリームがMPEG−2 TS(トランスポートストリーム)を備える、C15に記載の装置。
[C22]
前記ユーザ入力デバイスがポータブルデバイスを備える、C15に記載の装置。
[C23]
前記補助データが、キャプチャされたマルチメディアまたはディスプレイデータに関連する補助データを備える、C15に記載の装置。
[C24]
ユーザデバイスに通信可能に結合され、前記ユーザデバイスからの情報をキャプチャするためのホワイトスペースデバイスを備えるシステムであって、前記ホワイトスペースデバイスが、
ホワイトスペースを介した送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理するプロセッサであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、プロセッサと、
ホワイトスペースを介して前記トランスポートストリームを送信する送信機とを備える、システム。

Claims (24)

  1. テレビジョン受信機と通信しているホワイトスペースデバイスによって、ユーザ入力デバイスからの情報をキャプチャすることと、
    前記ホワイトスペースデバイスによって、ホワイトスペースを介した前記テレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理することであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理することと、
    前記ホワイトスペースデバイスから、ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信することと
    を備える方法。
  2. 前記情報がヒューマンインターフェースデバイス(HID)情報を備える、請求項1に記載の方法。
  3. HID情報をキャプチャすることが、
    ユーザ入力コマンドのためのタイムスタンプをキャプチャすることと、
    前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャすることと
    を備える、請求項2に記載の方法。
  4. HID情報をキャプチャすることが、
    前記ディスプレイデータに関連するフレーム中のユーザ入力コマンドから生じるディスプレイデータの位置、ロケーション、および座標情報のうちの少なくとも1つをキャプチャすること
    を備える、請求項2に記載の方法。
  5. 前記処理することが、
    前記タイムスタンプに少なくとも部分的に基づいて判断された前記トランスポートストリーム中の位置において前記トランスポートストリーム内に前記補助データとして前記ディスプレイデータを含めること
    を備える、請求項3に記載の方法。
  6. 前記キャプチャすることが、前記ユーザ入力デバイス上に出力されるビデオデータおよびオーディオデータのうちの少なくとも1つをキャプチャすることをさらに備え、前記処理することが、前記トランスポートストリーム中のビデオデータおよびオーディオデータのうちの前記キャプチャされた少なくとも1つを含むことを備える、請求項5に記載の方法。
  7. 前記トランスポートストリームがMPEG−2 TS(トランスポートストリーム)を備える、請求項1に記載の方法。
  8. 前記補助データが、キャプチャされたマルチメディアまたはディスプレイデータに関連する補助データを備える、請求項1に記載の方法。
  9. ユーザ入力デバイスからの情報をキャプチャするための手段と、
    ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理するための手段であって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理するための手段と、
    ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信するための手段と
    を備える装置。
  10. 前記情報がヒューマンインターフェースデバイス(HID)情報を備える、請求項9に記載の装置。
  11. HID情報をキャプチャするための前記手段が、
    ユーザ入力コマンドのためのタイムスタンプをキャプチャするための手段と、
    前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャするための手段と
    を備える、請求項10に記載の装置。
  12. プログラムコードを記録したコンピュータ可読媒体であって、前記プログラムコードが、
    ユーザ入力デバイスからの情報をキャプチャするためのプログラムコードと、
    ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理するためのプログラムコードであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理するためのプログラムコードと、
    ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信するためのプログラムコードと
    を備えるコンピュータ可読媒体
    を備えるコンピュータプログラム製品。
  13. 前記情報がヒューマンインターフェースデバイス(HID)情報を備える、請求項12に記載のコンピュータプログラム製品。
  14. HID情報をキャプチャするための前記プログラムコードが、
    ユーザ入力コマンドのためのタイムスタンプをキャプチャするためのプログラムコードと、
    前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャするためのプログラムコードと
    を備える、請求項13に記載のコンピュータプログラム製品。
  15. 少なくとも1つのプロセッサと、
    前記少なくとも1つのプロセッサに結合されたメモリであって、前記少なくとも1つのプロセッサが、
    ユーザ入力デバイスからの情報をキャプチャすることと、
    ホワイトスペースを介したテレビジョン受信機への送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理することであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、処理することと、
    ホワイトスペースを介して前記トランスポートストリームを前記テレビジョン受信機に送信することと
    を行うように構成されている、メモリと
    を備える装置。
  16. 前記情報がヒューマンインターフェースデバイス(HID)情報を備える、請求項15に記載の装置。
  17. 前記少なくとも1つのプロセッサが、
    ユーザ入力コマンドのためのタイムスタンプをキャプチャすることと、
    前記ユーザ入力コマンドから生じる対応するディスプレイデータをキャプチャすることと
    によってHID情報をキャプチャするように構成された、請求項16に記載の装置。
  18. 前記少なくとも1つのプロセッサが、前記ディスプレイデータに関連するフレーム中のユーザ入力コマンドから生じるディスプレイデータの位置、ロケーション、および座標情報のうちの少なくとも1つをキャプチャすることによってHID情報をキャプチャするように構成された、請求項16に記載の装置。
  19. 前記少なくとも1つのプロセッサが、前記タイムスタンプに少なくとも部分的に基づいて判断された前記トランスポートストリーム中の位置において前記トランスポートストリーム内に前記補助データとして前記ディスプレイデータを含めることによって処理するように構成された、請求項18に記載の装置。
  20. 前記キャプチャすることが、前記ユーザ入力デバイス上に出力されるビデオデータおよびオーディオデータのうちの少なくとも1つをキャプチャすることをさらに備え、前記処理することが、前記トランスポートストリーム中のビデオデータおよびオーディオデータのうちの前記キャプチャされた少なくとも1つを含むことを備える、請求項19に記載の装置。
  21. 前記トランスポートストリームがMPEG−2 TS(トランスポートストリーム)を備える、請求項15に記載の装置。
  22. 前記ユーザ入力デバイスがポータブルデバイスを備える、請求項15に記載の装置。
  23. 前記補助データが、キャプチャされたマルチメディアまたはディスプレイデータに関連する補助データを備える、請求項15に記載の装置。
  24. ユーザデバイスに通信可能に結合され、前記ユーザデバイスからの情報をキャプチャするためのホワイトスペースデバイスを備えるシステムであって、前記ホワイトスペースデバイスが、
    ホワイトスペースを介した送信のためのトランスポートストリームを形成するために前記キャプチャされた情報を処理するプロセッサであって、前記キャプチャされた情報の少なくとも一部分が前記トランスポートストリーム内に補助データとして含まれる、プロセッサと、
    ホワイトスペースを介して前記トランスポートストリームを送信する送信機と
    を備える、システム。
JP2014046783A 2010-03-02 2014-03-10 テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減 Expired - Fee Related JP5872606B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US30965810P 2010-03-02 2010-03-02
US61/309,658 2010-03-02
US13/038,323 2011-03-01
US13/038,323 US10009647B2 (en) 2010-03-02 2011-03-01 Reducing end-to-end latency for communicating information from a user device to a receiving device via television white space

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012556219A Division JP5543620B2 (ja) 2010-03-02 2011-03-02 テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減

Publications (2)

Publication Number Publication Date
JP2014161020A true JP2014161020A (ja) 2014-09-04
JP5872606B2 JP5872606B2 (ja) 2016-03-01

Family

ID=44531030

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2012556219A Expired - Fee Related JP5543620B2 (ja) 2010-03-02 2011-03-02 テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減
JP2014046783A Expired - Fee Related JP5872606B2 (ja) 2010-03-02 2014-03-10 テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2012556219A Expired - Fee Related JP5543620B2 (ja) 2010-03-02 2011-03-02 テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減

Country Status (7)

Country Link
US (1) US10009647B2 (ja)
EP (1) EP2543190B1 (ja)
JP (2) JP5543620B2 (ja)
KR (1) KR101436958B1 (ja)
CN (1) CN102783175B (ja)
BR (1) BR112012021773A2 (ja)
WO (1) WO2011109547A1 (ja)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9198084B2 (en) 2006-05-26 2015-11-24 Qualcomm Incorporated Wireless architecture for a traditional wire-based protocol
US8667144B2 (en) 2007-07-25 2014-03-04 Qualcomm Incorporated Wireless architecture for traditional wire based protocol
US8811294B2 (en) 2008-04-04 2014-08-19 Qualcomm Incorporated Apparatus and methods for establishing client-host associations within a wireless network
US9398089B2 (en) 2008-12-11 2016-07-19 Qualcomm Incorporated Dynamic resource sharing among multiple wireless devices
US9264248B2 (en) 2009-07-02 2016-02-16 Qualcomm Incorporated System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment
US9582238B2 (en) 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
EP2513774A4 (en) * 2009-12-18 2013-09-04 Nokia Corp METHOD AND APPARATUS FOR PROJECTING USER INTERFACE WITH A CONTINUOUS FLOW OF SHEET MUSIC
US20110271195A1 (en) * 2010-04-30 2011-11-03 Nokia Corporation Method and apparatus for allocating content components to different hardward interfaces
US8964783B2 (en) 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US9065876B2 (en) 2011-01-21 2015-06-23 Qualcomm Incorporated User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US8677029B2 (en) 2011-01-21 2014-03-18 Qualcomm Incorporated User input back channel for wireless displays
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US10108386B2 (en) 2011-02-04 2018-10-23 Qualcomm Incorporated Content provisioning for wireless back channel
US8674957B2 (en) 2011-02-04 2014-03-18 Qualcomm Incorporated User input device for wireless back channel
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
WO2012123616A1 (en) * 2011-03-11 2012-09-20 Nokia Corporation Configuring cellular connectivity
US9525998B2 (en) 2012-01-06 2016-12-20 Qualcomm Incorporated Wireless display with multiscreen service
CN104813309A (zh) * 2012-11-28 2015-07-29 辉达公司 用于远程显示器的基于云的虚拟化图形处理方法和系统
US10754537B2 (en) 2015-09-16 2020-08-25 Lg Electronics Inc. Method and apparatus for processing human interface device (HID)-based data using high-speed interface
US11451854B2 (en) * 2021-01-13 2022-09-20 Sony Corporation Dongle to convert formats to ATSC 3.0 low power wireless

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000300849A (ja) * 1999-04-26 2000-10-31 Matsushita Joho System Kk 観戦番組受信システム
EP1858238A2 (en) * 2006-05-18 2007-11-21 Samsung Electronics Co., Ltd. Display method and system for portable device using external display device
JP2012500531A (ja) * 2008-08-15 2012-01-05 クゥアルコム・インコーポレイテッド ローカルエリアネットワーク中のデバイス間で多重信号からのマルチメディアデータの提示を制御するための方法および装置
JP2012509608A (ja) * 2008-11-19 2012-04-19 ウィ−ラン・インコーポレイテッド ホワイトスペースを使用したホームゲートウェイのためのシステムおよびエチケット

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6584153B1 (en) * 1998-07-23 2003-06-24 Diva Systems Corporation Data structure and methods for providing an interactive program guide
US6263503B1 (en) 1999-05-26 2001-07-17 Neal Margulis Method for effectively implementing a wireless television system
EP1307062A1 (en) 2001-10-24 2003-05-02 Nokia Corporation User interface for transmitting video data from a mobile device to an external display
US7274740B2 (en) 2003-06-25 2007-09-25 Sharp Laboratories Of America, Inc. Wireless video transmission system
US20050036557A1 (en) * 2003-08-13 2005-02-17 Jeyendran Balakrishnan Method and system for time synchronized forwarding of ancillary information in stream processed MPEG-2 systems streams
US8494546B2 (en) 2006-10-16 2013-07-23 Stmicroelectronics, Inc. Method of inter-system communications dynamic spectrum access network systems-logical control connections
US8031807B2 (en) 2006-11-10 2011-10-04 Qualcomm, Incorporated Systems and methods for detecting the presence of a transmission signal in a wireless channel
FI20080277L (fi) 2008-04-09 2009-10-10 Lh Comm Oy Menetelmä video-elokuvan tilaamiseksi matkapuhelimella ja sen siirtämiseksi TV-hen
EP2283421B1 (en) * 2008-05-20 2019-08-14 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
US20100218207A1 (en) * 2009-02-23 2010-08-26 Advanced Micro Devices, Inc. Method and apparatus to detect preview of encrypted content

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000300849A (ja) * 1999-04-26 2000-10-31 Matsushita Joho System Kk 観戦番組受信システム
EP1858238A2 (en) * 2006-05-18 2007-11-21 Samsung Electronics Co., Ltd. Display method and system for portable device using external display device
JP2012500531A (ja) * 2008-08-15 2012-01-05 クゥアルコム・インコーポレイテッド ローカルエリアネットワーク中のデバイス間で多重信号からのマルチメディアデータの提示を制御するための方法および装置
JP2012509608A (ja) * 2008-11-19 2012-04-19 ウィ−ラン・インコーポレイテッド ホワイトスペースを使用したホームゲートウェイのためのシステムおよびエチケット

Also Published As

Publication number Publication date
JP2013521715A (ja) 2013-06-10
CN102783175A (zh) 2012-11-14
CN102783175B (zh) 2016-08-03
KR20120125657A (ko) 2012-11-16
US20110216239A1 (en) 2011-09-08
JP5543620B2 (ja) 2014-07-09
JP5872606B2 (ja) 2016-03-01
WO2011109547A1 (en) 2011-09-09
EP2543190B1 (en) 2017-08-09
BR112012021773A2 (pt) 2016-05-17
EP2543190A1 (en) 2013-01-09
KR101436958B1 (ko) 2014-09-02
US10009647B2 (en) 2018-06-26

Similar Documents

Publication Publication Date Title
JP5872606B2 (ja) テレビジョンホワイトスペースを介してユーザデバイスから受信デバイスに情報を通信するためのエンドツーエンドレイテンシの低減
JP5752152B2 (ja) 遠隔ディスプレイモードでのマルチメディアデバイスの制御
US20150104144A1 (en) Electronic apparatus and communication control method
US20230333591A1 (en) Electronic apparatus and method of controlling the same
CN114073098A (zh) 流媒体同步方法及显示设备
EP3152910B1 (en) Minimizing input lag in a remote gui tv application
KR20220018849A (ko) 디스플레이장치 및 그 제어방법
KR101501075B1 (ko) 전송 갭들을 가능하게 하기 위한 전송 계층 변경
US9942606B2 (en) Application layer modification to enable transmission gaps
US20130155067A1 (en) Method of providing image and display apparatus applying the same
EP2947843B1 (en) Server apparatus, display apparatus, system, and controlling methods thereof
TW201308131A (zh) 減少數位廣播內容游標反應時間的方法與其裝置
KR20160011158A (ko) 화면 공유 시스템 및 방법
JP5591954B2 (ja) ホワイトスペースデバイス中の送信機の静穏化のための方法および装置
US20170257679A1 (en) Multi-audio annotation
US20170374243A1 (en) Method of reducing latency in a screen mirroring application and a circuit of the same
KR20130020310A (ko) 영상표시장치 및 그 동작방법
JP2016032126A (ja) 表示処理装置、テレビジョン受像機、情報生成装置、放送システム、表示処理方法、プログラム、および記録媒体
JP5591953B2 (ja) ホワイトスペースデバイス中の送信機の静穏化のための方法および装置
CN113596546A (zh) 一种多流节目的播放方法及显示设备
JP2010041220A (ja) データ処理装置、データ処理方法、及びプログラム
KR20110002193A (ko) 방송 수신 장치 및 방법, 그를 이용한 디스플레이 장치

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150210

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150511

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160113

R150 Certificate of patent or registration of utility model

Ref document number: 5872606

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees