JP6034697B2 - ビデオフレームの同期化 - Google Patents

ビデオフレームの同期化 Download PDF

Info

Publication number
JP6034697B2
JP6034697B2 JP2012555046A JP2012555046A JP6034697B2 JP 6034697 B2 JP6034697 B2 JP 6034697B2 JP 2012555046 A JP2012555046 A JP 2012555046A JP 2012555046 A JP2012555046 A JP 2012555046A JP 6034697 B2 JP6034697 B2 JP 6034697B2
Authority
JP
Japan
Prior art keywords
port
video frame
source
video
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012555046A
Other languages
English (en)
Other versions
JP2013520931A (ja
Inventor
ウィリアム コンラッド アルトマン
ウィリアム コンラッド アルトマン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lattice Semiconductor Corp
Original Assignee
Lattice Semiconductor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lattice Semiconductor Corp filed Critical Lattice Semiconductor Corp
Publication of JP2013520931A publication Critical patent/JP2013520931A/ja
Application granted granted Critical
Publication of JP6034697B2 publication Critical patent/JP6034697B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/44Colour synchronisation
    • H04N9/475Colour synchronisation for mutually locking different synchronisation sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明の実施形態は、概してデータ通信の分野に関し、具体的には、ビデオフレームの同期化に関する。
あるシステムにおいて、データのストリームは、ストリームデータを使用し又は再送信するシンク(sink)又はリピータ(repeater)装置を含むデータソース装置と受信装置との間のデータリンクを介して送信されうる。ある実施例では、シンク又はリピータ装置は、多重ポートを備え、2つ以上のそのようなポートでデータストリームを受信する。例えば、ビデオシステムは、別々のポートでデータストリームを受信する。
しかし、装置の変動、距離、及び送信プロトコルのため、ビデオストリームは、シンク又はリピータ装置にビデオストリームが到達した時にお互いに適切に整合されず、または同期されない場合がある。タイミングにおける不整合は、ビデオストリームを利用する上で困難性又はエラーを引き起こし、不整合はオーバータイムを変えうる。お互いにおけるソース装置の同期化は、一般に、このようなソース装置間の通信を必要とし、ソース装置のための膨大な量の計算オーバーヘッドを必要とする。
本発明の実施形態は、概して、ビデオフレームの同期化に関する。
本発明の第1の態様において、方法の実施形態は、多重ポート装置の第1のポートで第1のソースからの第1のデータストリームを受信し、その第1のデータストリームの第1のフレームが第1の到達時間で第1のポートに到達し、多重ポート装置の第2のポートで第2のソースからの第2のデータストリームを受信し、その第2のデータストリームの第2のフレームが第2の到達時間で第2のポートに到達することを含む。この方法は、さらに、第1の到達時間と第2の到達時間との間のオフセットを判定し、少なくとも部分的にそのオフセットに基づいて1つ又は複数の補正ファクタを決定することを含み、その1つ又は複数の補正ファクタは、第1のソースの第1の補正ファクタを含み、第1のソースに第1のコマンドを送信し、その補正ファクタを使用して、第1のフレームに続く第3のフレームの第1のソースによる送信時間を変更する。
本発明の第2の態様において、方法の実施形態は、多重ポート装置のポートに送信するためのビデオフレームのデータストリームを生成し、出力タイミングジェネレータでのビデオフレームのタイミング送信を含む多重ポート装置にビデオフレームを送信することを含む。その方法は、さらに、多重ポート装置からの1つ又は複数のアライメントコマンドを受信することを含み、各アライメントコマンドは、多重ポート装置の1つ又は複数の他のポートに到達するビデオフレームとの整合を調整するために、次に続くビデオフレームの送信のための補正ファクタを含み、各コマンド内に含まれる補正ファクタに基づいて次に続くビデオフレームのための送信時間を調整することを含む。
本発明の実施形態が、実例として示されるが、類似の参照符号が同様の要素に表示されている添付図面の図に限定されない。
閉ループコマンドを使用する多重ポートのベデオフレーム同期化の実施形態を示す図である。 ベデオフレーム同期化の処理の実施形態を示すフローチャートである。 当該フレームの到達を同期化するためにビデオフレームの送信の時間を変更する処理の実施形態を示すフローチャートである。 多重ポートから生成された表示画像の生成の同期化の実施形態を示す図である。 シンク又はリピータ装置の実施形態を示す図である。 ソース装置の実施形態を示す図である。 ベデオフレーム同期化の実施形態のアライメントコマンドを示す図である。 ベデオフレーム同期化の実施形態のインターフェイスを示す図である。 ベデオフレーム同期化に供される装置の実施形態のエレメントを示す図である。
本発明の実施形態は、概して、ビデオフレームの同期化に関する。
ある実施形態において、方法、装置、又はシステムは、多重ポートすべてにわたってデータアライメントの調整を可能にするビデオフレーム同期化を提供する。ある実施形態において、方法、装置、又はシステムは、装置又はシステムの多重ポートすべてにわたってビデオフレームの同期化を提供するために閉ループデジタルタイミングコマンドを使用しうる。ここで使用されるように、同期化とは、データ到達に関するタイミングの調整を意味し、ビデオフレームの到達を共通時間に整合させるための調整、またはビデオフレームの到達における所望のオフセットを提供するための調整を含む。
多重ポート間のフレームタイミングの閉ループ制御を提供する方法、装置、又はシステムにより、DTV(digital television)のような装置において、ポストスイッチング時間(post-switching time)が改善し、ピクチャインピクチャ表示(picture-in-picture display)のような他の性能が改善する。ある実施形態において、方法、装置、又はシステムは、多重ポートを有するDTVの制御下のA/V(audio/visual)データストリームの同期化のような、受信装置の制御下のデジタル接続のためのビデオフレームの同期化を提供する。ある実施形態において、受信装置は、受信データを利用する装置(以下、「シンク(sink)」という。)、または仲介の装置又はスイッチ(以下、「リピータ(repeater)」という。)でありうる。
ビデオフレームのストリームの形態のビデオデータは、装置によって受信される。ビデオデータストリームは、例えば、MPEG−2(Moving Pictures Expert Group)、MPEG−4、又はビジュアルコーディングエクスパートグループ(VCEG)のH.264のような標準を含む圧縮されたデータを有するデコーディングコンプレストビデオ(decoding compressed video)によって生成される。一実施形態において、ソースシステム内のデコーダは、圧縮されたビデオ情報の連続的なブロックを読み取り、圧縮されていないビデオを次のリピータ又はシンク装置へ出力するために、ピクセル情報の実際のフレーム及びHSYNC(horizontal synchronization)及びVSYNC(vertical synchronization)タイミングを生成する。
しかし、デコーダにおいて、復号化ロジックは、1セットのクロックで動作するが、フレーム出力エレメント(フレーム出力ステートマシン)は、異なるクロックセットで動作する。このようなデコーダにおいて、フレーム出力ステートマシンは、送信されるべきビデオフレームデータ(以下、「ピクセルデータ」という。)を、デコーダのメモリアーキテクチャの一部であるラストフレームバッファ(last frame buffer)からフレームごとに読み出す。ある実施形態において、フレーム出力ステートマシンは、デコーダステートマシンのタイミングにロックされないので、ラストフレームバッファから読み出される時に応じてフレームの開始時間を調整することが可能である。ある実施形態において、この柔軟性により、フレーム出力ステートマシンは、いずれかの絶対的時間と比較して、任意に早い又は遅い時点にそのVSYNCエッジを有する圧縮されていないビデオストリームを生成しうる。
本明細書において、ソースは、ビデオデータストリームを提供する装置であり、シンク装置は、ビデオデータストリームを利用する装置であり、リピータは、ビデオデータストリームを他の装置へ転送する(又は繰り返す)装置である。一実施例において、絶対時間(ここでTZEROとして表す)が、DTV(digital television)又はビデオデータ用の他の同様な構成要素のようなシンク又はリピータ装置上の多重入力ポートの1つにおけるビデオフレームの最近の到達時間である場合、すべての他の入力ポートにおけるビデオフレームの到達時間は、TZEROよりも早くなるであろう。すべてのストリームがTZERO近辺で到達するように、またはすべてのストリームがお互いに所定のオフセットを持って到達するように、各ポートの到達時間を所定量だけ遅らせることによって、ポートのビデオストリームの到達時間をお互いに同期化させることが可能になる。
しかし、VSYNCの立ち上がりエッジに基づくフレームタイミングは、例えば、1つのビデオ解像度でのビデオの連続的なストリームであっても一定ではない。例えば、全フレーム時間が60分の1秒(1/60)の場合(60ヘルツの垂直リフレッシュレートに対応する)、理想的な条件のもと、N番目のフレームは、1番目のフレームの到達時間に対して、正確にN/60秒で到達するであろう。しかし、ビデオパイプラインの変動は、このタイミングの変動をもたらし、したがって、ビデオフレームの到達時間の変動をもたらす。
ある実施形態において、ポートフレームタイミングの調整が、1回の補正ではなく、連続的に提供される。ある実施形態において、連続的な補正を実行するために、ビデオソースからシンク(又はリピータ)上の入力ポートへのインターフェイスが、タイミング補正の閉ループコマンド通信を提供する。動作中、各ソース装置からのビデオフレームが、シンク又はリピータの多重入力ポートの1つに到達する。ある実施形態において、シンク又はリピータのロジックが、一定クロック信号に対する各フレームの到達時間を測定する。ある実施形態において、シンク又はリピータが、補正ファクタを決定し、コマンド又は他の同様なデータを各ソースに返送し、多重ポートのそれぞれにおけるビデオフレームの到達時間の必要なアライメント(整合)を提供するために、ビデオフレームの送信時間が、どの程度調整されるべきかをソースに知らせる。したがって、一実施形態による方法、装置、又はシステムは、複数の同時並行的な圧縮されていないビデオストリームのような複数のビデオデータストリームの閉ループタイミング補正を提供する。
ビデオデータストリームを受信するポートに関連するリンククロック(ビデオストリームデータのピクセルクロックとも称される)は、他のポートのビデオストリームのリンクククロックに関して非同期でありうる。ある実施形態において、シンク又はリピータにおけるビデオフレームの到達時間は、入力されるピクセルクロックの1つを使用して、または、入力されるピクセルクロックの1つとして同一周波数のシンク又はリピータで生成されたクロックを使用して測定される。ピクセルクロック周波数の使用は、ソース装置がその出力ビデオフレームを、ピクセルクロック周期の整数倍だけ進ませたり遅らせたりすることを可能にし、それは、適切な調整感度を提供するのに利用される。ある実施形態において、非同期ポートのタイミングの間の残存ミスマッチが、マルチポートメモリ、FIFO(First In First Out)バッファ、又はシンク又はリピータの他のメモリエレメントを使用して補正される。
ある実施形態において、すべてのビデオストリームが、VSYNC立ち上がりエッジとほぼ同時に到達するような、多重ポートのビデオストリームの到達時間の補正は、シンク又はリピータが、関連フレームタイミングを気にする必要なく、ポートのビデオコンテンツのいずれか1つをサンプリングし、一方から他方へスイッチングすることを可能にする。したがって、すべてのポートのビデオフレームは、ゆるやかに一緒にロックされる。
ある実施形態において、追加的なタイミング調整は、1つのポートのフレームタイミングと他のポートのフレームタイミングを意図的にオフセットするのに使用される。一例において、リピータが4つの入力ポート(ポート#1−4)を含み、ポート#1からのビデオが出力フレームの右上4分の1で出力される;ポート#2からのビデオは左上で;ポート#3からのビデオは左下で;ポート#4からのビデオは右下で。ある実施形態において、ポート#1からのポート#2,#3及び#4のオフセット(この例では、もっとも早いストリーム)は、スイッチが各ポートのビデオをオンザフライ(on-the-fly)でサンプリングし、各入力フレームのコンテンツの左上4分の1からなる1つの出力フレームを構成することを提供する。しかし、実施形態は、出力がこれらの複数の出力エレメントを含む方法、装置、又はシステムに限定されない。他の実施形態は、柔軟な入力タイミング調整を有する追加的な構成を備えうる。ある実施形態において、タイミング補正情報を各ソースへ送り返す閉ループ構成は、他への1つのデジタルインターコネクト標準とは異なる。一例において、HDMI(登録商標)(High-Definition Multimedia Interface)データの送信用に、リピータ又はシンクからソースへ遅延調整値を送信するのにCEC(Consumer Electronics Control)バスコマンドが使用される。2番目の例において、MHL(登録商標)(Mobile High-Definition Link)データ用に、リピータ又はシンクからソースへ遅延調整値を送信するのにCBUSコマンドが使用される。種々のインターコネクト標準の使用は、各データストリーム用に異なるタイミングを必要とするかもしれない。
ある実施形態において、使用される各通信チャンネルは、例えば60ヘルツのスピードでインターフェイスが動作するようにフレームごとに少なくとも1回のコマンドを送信することを可能にするために、少ないレイテンシー(latency;待ち時間)(フレームタイムより非常に小さい)と十分な帯域を有する。しかし、実施形態は、このような通信チャンネルに限定されない。ある実施形態において、フレームからフレームへ高速なフレームレートがよく変化しないで、Nフレームごとに1つのコマンドを伝送し、そのコマンドは、フレームの立ち上がりエッジVSYNCのドリフトの制御を維持するのに十分な頻度で送られることが仮定される。ある実施形態において、コマンドの頻度は、シンク又はリピータのメモリ構成によって影響される。シンク又はリピータ内のマルチポートメモリ又はFIFOバッファのようなメモリエレメントの深さは、制御の度数に影響し、より深いメモリが、浅いメモリより大きくフレームがドリフトすることを可能にするところの、フレーム間のタイミングにおけるオーバードリフトを有することがシステムは必要とされる。
ある実施形態において、ソース側のメモリコントローラは、出力フレームタイミングを補正するレイテンシーを最小化するために、送られたコマンドに対して即座に反応可能である。ある実施形態において、そのメモリコントローラは、個々のピクセルクロックカウントのような小さいインクリメントで「フレームスタート」タイミング(フレームバッファへの)を移動するようにプログラム可能である。
ある実施形態において、方法、装置又はシステムは、入力ビデオストリームが、720p/60(60ヘルツ・リフレッシュレートで720水平順次(ノンインターレース)スキャンラインを有するHDTV(High Definition Television)モード)又は1080p/60モードのようなすべて同じビデオモードにあるときに、シンク又はリピータ上の多重ポートに適用されている。ある実施形態において、ビデオストリームを受信する各ポートは、共通の周波数ピクセル(又はリンク)クロックを有するが、位相、ドリフト、及びジッターがポート間で異なるかもしれない。同じ周波数の独立したシンク側クロックを有するマルチポートメモリ又はFIFOバッファのようなメモリエレメントは、ピクセルストリームをさらに再同期化にするのに使用される。
ある実施形態において、方法、装置又はシステムは、入力ストリームが、異なるピクセルクロック周波数を有する異なるビデオモードのときに、シンク又はリピータ上の多重ポートに適用されているが、さらなる再同期化が、ピクセル繰り返し(低い解像度ビデオモードで書かれたFIFOバッファから1回以上、同一のピクセルを読み出す)で、またはデータのスケーリングで実施される。
ある実施形態において、タイミング補正ファクタを伝送するフィードバックコマンドは、データストリームを識別するためのストリームネーム、ポートインデックス(シンク又はリピータの観点から)、調整される絶対時間(例えば、ピクセルクロックサイクルの単位)、及び調整の維持に関する他のフィールド(調整期間のような)を含む。ある実施形態において、それらのパラメータのそれぞれは、シンク側ロジックによって確認されるので、ソースシステムの負担が少ない。ある実施形態において、各ソースシステムは、入力フィードバックコマンドを読み、出力タイミングジェネレータを調整して新しいフレームタイミングを作成する。
例えば、チャンネルの変更又はユーザリクエスト上のビデオモードの変更によって、ソースシステムがそのビデオストリームを変更するとき、出力ビデオストリームは通常、新しいフレームタイミングと新しいピクセル周波数を有するであろう。ある実施形態において、シンク又はリピータ装置は、この変更を認識して反応し、フィードバックコマンドを各ソースに送信し、フレーム同期化を再調整する。あるデジタルインターフェイスのために、新しいビデオモード又は新しいチャンネルへの変更の通知が先を見越して通信され、シンク又はリピータが、必要な測定及び補正の決定を準備することを可能にする。ある実施形態において、シンク又はリピータが、ドリフトを見積もるためにポートからポートへのフレームタイミングをモニターする責任を負うので、シンクは、同様に、チャンネル変更又はビデオモード変更に反応するのに同じメカニズムを使用する。
HDMI、DVI(Digital Visual Interface)、及びMHLデータのストリームのようなビデオデータのストリームが暗号化されうる。ある実施形態において、データストリーム内に含まれるビデオフレームは、ストリームのビデオコンテンツにアクセスすることなく、暗号化されたフォームで、測定されて同期化される。ある実施形態において、ビデオフレームの暗号化は、到達時間の測定と、多重ポート装置又はシステムの異なるポートに到達するフレーム間のオフセットの補正に影響を与えない。
ある実施形態において、シンクの入力ポートのいずれかが「マスター」として選択され、シンクの他のすべてのポートのフレームタイミングがマスターポートに同期化させる。ある実施形態において、フレームタイミングが「垂直リフレッシュレート」で繰り返されるので、他のポートと比較して到達するのが最も遅いと思われるポートは、その代わりに、次ぎのフレームと比較したときに、最も早く到達するものと考えられる。このようにして、各ポートタイミングは、マスターポートのタイミングに対して測定されて調整される。
一実施形態による方法、装置、又はシステムは、フレームロック及びジェンロック(Generator Lock)のような、従来のアナログシステムとは違うデジタル補正を提供し、その実施形態は、以下のものを備える。
(a)ソース装置のリンククロックを使用するフレームタイミングオフセットのクロックデジタル測定;
(b)各ソースへ補正ファクタを伝達するコマンドバスの利用;
(c)シンク又はリピータで、フレームの異なる部分がオーバーラップするように、タイミングを意図的にオフセットする機能;
(d)単一、デジタル測定及び通信フィードバックループを使用した、変化する信号態様(ビデオ解像度又はフレームレート)を有する入力への適応。
図1は、閉ループコマンドを使用する多重ポート用のビデオフレーム同期化の一実施形態を示す図である。この実施形態において、種々のソースが、ソース#1(110)、ソース#2(120)、ソース#3(130)及びソース#4(140)として、ここで示されている。図1は、各ビデオデータストリーム用の個別のソースを示しているが、ある実施形態においては、1つのソースが複数のビデオデータストリームを多重ポートに提供するかもしれない。図1に示されるように、リピータ又はシンク装置150は、4つのポートを備えているが、ソース又はリピータは任意の数の複数のポートを有していてもよい。図1には、ビデオフレームのストリームをポート#1(160)へ供給するソース#1(110)、ビデオフレームのストリームをポート#2(170)へ供給するソース#1(120)、ビデオフレームのストリームをポート#3(180)へ供給するソース#1(130)、及びビデオフレームのストリームをポート#4(190)へ供給するソース#1(140)が図示されている。
図1に示された実施例において、各ソースによって送信された第1のビデオフレームは、それぞれ異なるタイミングで到達し、ソース#1(110)からのフレーム1A(112)がT1に到達し、ソース#3(130)からのフレーム3A(132)がT2に到達し、ソース#2(120)からのフレーム2A(122)とソース#4(140)からのフレーム4A(142)がT3に到達している。ビデオフレームは、暗号化フォームであっても非暗号化フォームであってもよい。ある実施形態において、リピータ又はシンク150及びソースは、フレームの望ましいアライメント(整合)を提供するために、ビデオフレームの到達を同期化するのに閉ループコマンドを使用する。ある実施形態において、リピータ又はシンク150は、アライメントを変更するために、ソースの1つ又は複数にフィードバックアライメントコマンドを送信し、そのようなソースからのビデオフレームの送信時間を修正する。この実施例において、コマンド1(165)がソース#1(110)に送信され、コマンド2(175)がソース#2(120)に送信され、コマンド3(185)がソース#3(130)に送信され、コマンド4(195)がソース#4(140)に送信される。ある実施形態において、ソースは、受信したコマンドに従って、次の(第2の)ビデオフレームの送信を修正する。ある実施形態において、リピータ及びシンクは、続いて、第2のビデオフレームのために到達時間を測定し、1つ又は複数の新しいアライメントコマンドをソースに送信し、閉フィードバックループを継続する。アライメントコマンドの結果は、ここでT4として示された統一時間に近づいて到達するフレーム1B(114)、フレーム2B(124)、フレーム3B(134)、フレーム4B(144)として示された、次のフレーム・セットの近いアライメントをもたらす同期化における補正でありうる。図1に示された実施例におけるビデオフレームの同期化及びアライメントは、同時に又は同時近くに到達するフレームを提供するが、本発明の実施形態は、このアライメントのみに限定されるものではない。異なる実施例のために異なるアライメントが望まれ、例えば、図4で説明されるアライメントも含まれる。図1は、すべてのソースにアライメントを送信するリピータ又はシンク150を示しているが、ある実施形態において、アライメントコマンドは、同期化の変更を必要とするソースのみに送信されうる。
図2は、ビデオフレームの同期化のプロセスの一実施形態を示すフローチャートである。ある実施形態において、複数のビデオデータストリームが、1つ又は複数のソースで生成され(202)、各データストリームのビデオフレームが、多重ポートのシンク又はリピータ装置のポートで受信される(204)。各ポートにおける各フレームの到達時間が、多重ポートのシンク又はリピータ装置によって検出される(206)。シンク又はリピータ装置は、フレーム到達時間と、絶対時間値のような時間リファレンスとの間の差を確認する(208)。シンク又はリピータ装置は、各ソース用に補正ファクタを決定し、各ポートにおけるビデオフレームのアライメントを修正する。ある実施形態において、補正ファクタは、ソースによる送信ポイントの調整を単純化するためにデータ期間の整数でありうる(210)。
ある実施形態において、シンク又はリピータ装置は、各ソース装置におけるビデオフレームの送信用の補正ファクタに関するコマンドを1つ又は複数のソース装置へ送信する(212)。データのアライメントのために追加の補正が必要な場合(214)、シンク又はリピータ装置のマルチポートの記憶エレメントを使用してタイミング補正が提供される(216)。そして、閉フィードバックループが、多重ポートのシンク又はリピータ装置の各ポートにおける各ビデオフレームの到達時間の検出に戻る(206)。
図3は、フレームの到達を同期化するためにビデオフレームの送信時間を修正するためのプロセスの一実施形態を示すフローチャートである。ある実施形態において、ビデオデータフレームのストリームがソース装置で生成される(302)。ある実施形態において、データフレームの生成は、デバイスデコーディング圧縮ビデオデータ(device decoding compressed video data)のようなデータ符号化されたデータを復号するデコーダの使用を含む。他の実施形態において、ソースは、例えば、ゲームコンソール又は同様の装置又はシステムによるビデオフレームの生成のようなデコーディングなしのビデオフレームを生成する。生成されたビデオフレームは、次のフレームバッファ内にビデオフレームを記憶するなどして、送信用にメモリに記憶される(304)。ある実施形態において、次の送信用のフレームが、次のフレームバッファから取得され(306)、ビデオフレームが、多重ポート装置又はシステムへ送信されることが意図され、その多重ポート装置又はシステムは、シンク又はリピータ・エレメントである。アライメントコマンドが受信されない場合(308)、プロセスが継続され、次のビデオフレームの送信時間を確立し(312)、決定された送信時間でフレームが送信される(314)。そして、プロセスは、次のビデオフレームについて継続する(306)。しかし、アライメントコマンドが受信された場合(308)、ビデオフレームの送信時間の確立(312)に使用されるアライメントコマンドから補正ファクタが取得され(310)、それによって、ソース装置が他のソース装置とデータ送信を調整する必要なく、多重ポート装置におけるデータフレームの到達の同期化が可能になる。
図4は、多重ポートから生成された表示画像の生成のための同期化の一実施形態を示す図である。この図において、リピータ装置400が、ソース#1(450)からデータポート#1(410)に到達するビデオフレーム、ソース#2(452)からデータポート#2(412)に到達するビデオフレーム、ソース#3(454)からデータポート#3(414)に到達するビデオフレーム、及びソース#4(456)からデータポート#4(416)に到達するビデオフレームなどのビデオフレームのストリームを多重ポートで受信する。この図において、ビデオフレームがディスプレイ430に供給され、各ポートからのデータストリームは、ディスプレイ430の一部を生成するのに利用される。この図において、データポート#1(410)は、右上部分Q1(440)用のビデオデータを供給し、データポート#2(412)は、左上部分Q2(442)用のビデオデータを供給し、データポート#3(414)は、左下部分Q3(444)用のビデオデータを供給し、データポート#4(416)は、右下部分Q4(446)用のビデオデータを供給する。ある実施形態において、リピータ装置400は、1つ又は複数のソースに閉ループアライメントコマンド460〜466を供給する。ある実施形態において、アライメントコマンドは、各ポートのフレームタイミングを意図的にオフセットするのに利用され、出力を作成する過程で各フレームからサンプリングするのを可能にする。
図5は、シンク又はリピータ装置の一実施形態を示す図である。この図において、シンク又は、データポート#1(510)からデータポート#n(515)として図示されているリピータ装置500複数のデータポートを備えている(nは2以上の任意の整数である。)。各データポートは、データポート#1(510)用のピクセルクロック#1(520)、データポート#n(515)用のピクセルクロック#n(525)などのビデオデータ用のピクセルクロック(Pixel Clock)と称されるクロックを有する。ある実施形態において、各ポートは、ソースからのデータストリームを受信するものであり、装置500は、ビデオフレームの到達時間と送信される閉ループコマンドとの差を確認し、入力されるビデオフレーム間のアライメントを調整・維持する。このことは、ソース#1(550)が、データポート#1(510)にデータストリームを供給し、アライメントコマンド(555)を受信し、ソース#n(560)が、データポート#n(515)にデータストリームを供給し、アライメントコマンド(565)を受信するものとして、図5に図示されている。
ある実施形態において、装置500は、さらに、データ受信用の1つ又は複数の受信機530、到達するビデオフレーム間のタイミングの差を確認し、1つ又は複数のソースの必要な補正を確認するためのフィードバックロジック534、ビデオフレームの到達時間の差を確認するのに使用されるクロック536、データのアライメントのさらなる修正を提供するマルチポートメモリ又はFIFOバッファ532などのメモリエレメント(クロック536と同じ周波数の独立のクロック533からクロック信号を受信する。)を有する。メモリエレメント532は、これに限定されるものではないが、ビデオデータのラインを記憶するためのラインバッファなど、ビデオフレームのすべて又は一部を記憶するためのバッファを有する。一実施形態において、ラインバッファは、ビデオデータのラインの送信の時間に基づいてタイミングを同期化することを可能にするために実装される(例えば、+/−ライン時間の半分)。当該装置は、必要なデータを記憶するためのデータストレージ502、装置500の動作を制御するためのコントローラ又はプロセッサ504、他のエレメントにデータを送信(1つ又は複数のポート544からシンク装置570への送信など)するための1つ又は複数の送信機506など、他のエレメントを備えていてもよい。暗号化データを処理するために、装置500は、受信データを解読するための解読エンジン546、送信の前にデータを暗号化するための暗号化エンジン548を備えていてもよい。装置500がシンク装置の場合、装置500は、例えば、マルチメディアデータの提示のためのビデオディスプレイ540及びオーディオスピーカ542などの1つ又は複数の提示装置を備えていてもよい。
図6は、ソース装置の一実施形態を示す図である。この図において、ソース装置610は、1つ又は複数のデータポート620から、図5に図示されたシンク又はリピータ装置500のようなシンク又はリピータ装置650にビデオフレームのビデオデータストリームを供給する。ソース装置610は、最後のフレームバッファ626内にバッファされるビデオフレームを生成するためにデコーダクロックによってクロックされるデコーダ624を有する。他の実施形態において、ソース装置610は、デコーダ無しでビデオフレームを生成する。ある実施形態において、ソース装置610は、伝送からのフレームを用意するための出力ステートマシン628、ビデオフレームの伝送の時間を合わせるための出力クロック632からのクロック信号を使用する出力タイミングジェネレータ634を有する。ある実施形態において、出力タイミングジェネレータ634は、シンク又はリピータ650から受信された閉ループアライメントコマンド652に基づいてビデオフレームの伝送のためのタイミングを修正する。ある実施形態において、出力タイミングジェネレータは、ビデオフレームのアライメントを他のデータストリームのビデオフレームと調整・維持するために、アライメントコマンド652を使用してタイミングを絶えず調整するであろう。ソース装置610は、必要に応じてあるデータを記憶するためのデータストレージ612、装置610の動作を制御するためのコントローラ又はプロセッサ614、他のエレメントにデータを送信するための1つ又は複数の送信機614など、他のエレメントを備えていてもよい。暗号化されたデータを処理するために、装置610は、受信されたデータを解読するための解読エンジン619、伝送の前にデータを暗号化するための暗号化エンジン618を備えていてもよい。装置610は、さらに、外部のデータソース640からデータを受信するための1つ又は複数の受信機630を備えていてもよい。
図7は、ビデオフレームの同期化の一実施形態のためのアライメントコマンドを示す図である。ある実施形態において、ソース装置は、閉ループフィードバック内の一連のアライメントコマンドを送信し、シンク又はリピータ装置の多重ポートに到達するビデオフレームの維持アライメントを調整する。ある実施形態において、コマンド705は、データストリームを特定するためのストリーム名715、データストリームが受信されるところのシンク又はリピータ装置のポートを特定するためのポートインデックス720、調整されるべきビデオフレームの送信のための絶対時間値(例えば、ピクセルクロック単位での調整)、及び調整期間などのビデオフレーム送信の調整の維持に関する他のフィールド730を有する。
図8は、ビデオフレームの同期化の一実施形態のためのインターフェイスを示す図である。この実施形態において、インターフェイスケーブル#1(820)を介してポート#1(860)と接続されたソース#1(810)、インターフェイスケーブル#2(822)を介してポート#2(862)と接続されたソース#2(812)、及びインターフェイスケーブル#n(826)を介してポート#n(866)と接続されたソース#n(816)などのインターフェイスを介して、1つ又は複数のソースが、多重ポートのシンク又はリピータ装置850の1つ又は複数のポートにリンクしている。リピータ装置850は、さらに、1つ又は複数のポートを介して、シンク装置870と接続されている。
この図において、ソース810〜816は、種々のプロトコルを使用してポート860〜866とデータ及びコマンドを交換する。この実施例において、ソース#1(810)は、HDMIインターフェイス820によってポート#1(860)と接続されている。この図において、インターフェイス820は、データ0+線831、データ0−線832、データ1+線833、データ1−線834、データ2+線835、データ2−線836を介して送信されたHDMI差分信号を含む。インターフェイスは、さらに、差分クロック線(クロック+837及びクロック−838);家電コントロール(CEC)コントロールバス839;表示データチャンネル(DDC)バス840;+5ボルト電源841、CEC/DDCグランド842;ホットプラグ(活線挿抜)検知843;及び差分信号用の4本のシールド線844を含む。ある実施形態において、シンク又はリピータ装置850は、ソース#1(810)へ閉ループフィードバックコマンドを送信するためにCECコントロールバス839を使用する。
他の実施形態において、ソース#2(812)は、MHLインターフェイス822でポート#2(862)と接続されている。この図において、インターフェイス822は、データ+線845及びデータ−線846、差分クロック線(クロック+847及びクロック−848);及びコントロールバスCBUS849を介して送信されたMHL差分信号を含む。
図9は、ビデオフレームの同期化用に供される装置の実施形態のエレメントを示す図である。この図において、本明細書に密接に関係がない標準的及び周知の部品は示されていない。ある実施形態において、装置900は、ソース装置、リピータ装置、又はシンク装置である。
ある実施形態において、装置900は、インターコネクト(interconnect)又はクロスバー905、又はデータ伝送用の他の通信手段を有する。データは、オーディオビジュアルデータ及び関連制御データを含む。装置900は、インターコネクト905に接続された情報処理用の1つ又は複数のプロセッサ910などの処理手段を有する。プロセッサ910は、1つ又は複数の物理的なプロセッサ及び1つ又は複数の論理的なプロセッサを含む。さらに、各プロセッサ910は、多重プロセッサコアを有する。インターコネクト905は、簡単化のために単一のインターコネクトとして示されているが、複数の異なるインターコネクト又はバスであってもよく、このようなインターコネクトへの部品接続は、種々変更可能である。図9に示されたインターコネクト905は、任意の1つ又は複数の個別の物理的バス、ポイント・ツー・ポイント接続、又は適当なブリッジ、アダプタ、又はコントローラによって接続されたその両方を表す概念図である。インターコネクト905は、例えば、システムバス、PCI又はPCIeバス、ハイパートランスポート(HyperTransport)又はインダストリスタンダードアーキテクチャ(ISA;industry standard architecture)バス、スモールコンピュータシステムインターフェイス(SCSI;small computer system interface)バス、IIC(I2C)バス、又は時々「ファイアワイア(Firewire)」として称されるインスティテュートオブエレクトリカルアンドエレクトロニクスエンジニア(IEEE;Institute of Electrical and Electronics Engineers)標準1394バス(「ハイパフォーマンスシリアルアバスの標準」1394−1995、IEEE、1996年8月30日発行、及び補足)を含む。装置900は、さらに、1つ又は複数のUSB互換性接続に取り付けられるUSBバス970のようなシリアルバスを有する。
ある実施形態において、装置900は、さらに、情報、又はプロセッサ910によって実行される命令を記憶するメインメモリ920として、ランダムアクセスメモリ(RAM)又は他のダイナミック記憶装置を有する。メインメモリ920は、また、データストリームのデータを記憶するのに使用される。RAMメモリには、メモリ内容のリフレッシュが必要なダイナミックランダムアクセスメモリ(DRAM)、及び内容のリフレッシュが不必要であるがコスト増加となるスタティックランダムアクセスメモリ(SRAM)が含まれる。DRAMメモリには、信号を制御するクロック信号を有する同期式ダイナミックランダムアクセスメモリ(SDRAM)、及びエクテンディドデータオウトダイナミックランダムアクセスメモリ(EDO−DRAM)が含まれる。ある実施形態において、システムのメモリは、特定のレジスタ又は他の特定用途のメモリである。装置900は、また、リードオンリーメモリ(ROM)925、又は静的な情報又はプロセッサ910用の命令を記憶するための他の静的記憶装置を有する。装置900は、特定の要素を記憶するための1つ又は複数の不揮発性のメモリエレメント930を有する。
また、データ記憶装置935が、情報及び命令を記憶するために、装置900のインターコネクト905に接続されている。データ記憶装置935には、磁気ディスク、光ディスク及びその対応ドライブ、又は他のメモリ装置が含まれる。このようなエレメントは、一緒の又は別個の部品であり、装置900の他のエレメントの部分を利用する。
また、装置900は、インターコネクト905を介して表示又は提示の装置940に接続されている。ある実施形態において、表示装置には、液晶ディスプレイ(LCD)、プラズマディスプレイ、カソードレイチューブ(CRT)ディスプレイ、又は情報又はコンテンツをエンドユーザに向けて表示するための任意の他のディスプレイ技術が含まれる。ある実施形態において、ディスプレイ940は、テレビ番組を表示するのに利用される。ある実施形態において、ディスプレイ940は、入力デバイスの少なくとも一部としても利用されるタッチスクリーンを有する。ある実施形態において、ディスプレイ940は、テレビ番組のオーディオ部分を含むオーディオ情報を提供するためのスピーカのようなオーディオ装置であり、又はそのオーディオ装置を有する。入力装置945が、情報通信及び/又はプロセッサ910に対するコマンド選択のためにインターコネクト905に接続されている。種々の実施形態において、入力装置945は、キーボード、キーパッド、タッチスクリーン及びスタイラス、音声起動システム、又は他の入力装置、又はそのような装置の組み合わせである。含まれる可能性のある他の種類のユーザ入力装置は、マウス、トラックボール、又は方向情報及び1つ又は複数のプロセッサ910に対するコマンド選択を通信するための、またはディスプレイ940上のカーソルの動きを制御するためのカーソル方向キーなどのカーソル制御装置950である。
また、1つ又は複数の送信機又は受信機955が、インターコネクト905に接続されている。ある実施形態において、装置900は、データの受信又は送信のための1つ又は複数のポート980を有する。受信又は送信されるデータには、HDMI、DVI、及びMHLデータのようなビデオデータ又はオーディオビデオデータが含まれ、HDCP(High-Bandwidth Digital-Content Protection)暗号化データのように送信のために暗号化される。ある実施形態において、装置は、コンテンツデータ985の転送のためのデータの送信及び/又は受信のための1つ又は複数のポート980を有する。さらに、装置900は、USB(Universal Serial Bus)970を有する。
さらに、装置900は、無線信号を介してデータを受信するための1つ又は複数のアンテナ958を有する。また、装置900は、電源、バッテリ、太陽電池、燃料電池、又は電力を供給し又は電力を生成するための他のシステム又は装置を備えた電力装置又は電力システム960を有する。電力装置又は電力システム960によって供給される電力は、装置900のエレメントに必要に応じて分配される。
上記において、説明目的のために、本発明の十分な理解を提供するために多くの特定の説明が記載された。しかし、当業者にとって、本発明が、それらのいくつかの特定の説明なしに実施されうることが明らかであろう。他の例において、周知の構造又は装置がブロック図の形態で示されている。図示された部品間で中間的な構造が存在しうる。本明細書に記載された部品又は図示された部品は、図示又は記載されていない追加の入力又は出力を有しうる。また、図示されたエレメント又は部品は、任意の領域の再配列又は領域サイズの修正を含む、異なる編成又は配列で構成されうる。
本発明は、種々のプロセスを含む。本発明のプロセスは、ハードウェア部品によって実施され、またはコンピュータが読み取り可能な命令で具体化されうるが、それは、一般的な目的又は特定目的のプロセッサ又はロジック回路がそのプロセスを実行する命令でプログラムされるのに使用されうる。もしくは、そのプロセスは、ハードウェア及びソフトウェアの組み合わせによって実施されうる。
本発明の一部分は、コンピュータプログラム命令が記憶されたコンピュータ読み取り可能な媒体を含み、本発明によるプロセスを実施するようにコンピュータ(又は他の電子装置)をプログラムするのに使用される、コンピュータプログラム製品として提供されうる。これに限定されるものではないが、コンピュータ読み取り可能な媒体には、フロッピー(登録商標)ディスケット、光ディスク、CD−ROM(compact disk read-only memory)、及び磁気光ディスク、ROM(read-only memory)、RAM(random access memory)、EPROM(erasable programmable read-only memory)、EEPROM(electrically-erasable programmable read-only memory)、磁気カード、光カード、フラッシュメモリ、又は電子命令を記憶するのに適した他の種類の媒体/コンピュータ読み取り可能な媒体が含まれる。さらにまた、本発明は、コンピュータプログラム製品としてダウンロードされうるが、その場合、リモート(遠隔)コンピュータからリクエスティング(要求)コンピュータへプログラムが転送されうる。
最も基本的な形態で、多くの方法が説明されたが、本発明の基本的な範囲から逸脱することなく、どんな方法に対してもプロセスが追加又は省略され、どんな詳細メッセージに対しても情報が追加又は省略されうる。多くの更なる変更及び適応がなされうることは、当業者にとって明らかであろう。特定の実施形態は、本発明を限定するために提供されたものではなく、例示するために提供されたものである。
エレメント「A」がエレメント「B」に接続されていると記載されている場合、エレメントAは、エレメントBに直接的に接続され、または、例えばエレメントCを介して間接的に接続されている。本明細書において、部品、特徴、構造、プロセス又は特性Aが、部品、特徴、構造、プロセス又は特性Bを「もたらす(causes)」と記載されているとき、「A」が「B」の少なくとも部分的な原因であることを意味するが、「B」をもたらすことを助ける少なくとも1つの他の部品、特徴、構造、プロセス又は特性が存在しうる。本明細書において、部品、特徴、構造、プロセス又は特性が含まれ「うる(may)」、「かもしれない(might)」又は「る可能性がある(could)」と示されているとき、その特定の部品、特徴、構造、プロセス又は特性は、必須ではない。本明細書において、「1つの(a)」、「1つの(an)」エレメントと称されている場合、これは、記載されたエレメントがたった1つだけ存在することを意味するものではない。
一実施形態は、本発明の一実現化又は一例である。本明細書において、「一実施形態(an embodiment)」、「1つの実施形態(one embodiment)」、「ある実施形態(some embodiments)」又は「他の実施形態(other embodiments)」という語句は、実施形態に関連して記載された特定の特徴、構造、又は特性が、必ずしもすべての実施形態ではなく、少なくともいくつかの実施形態に含まれることを意味する。「一実施形態(an embodiment)」、「1つの実施形態(one embodiment)」又は「ある実施形態(some embodiments)」の態様は、必ずしもすべて同一の実施形態に言及しているわけではない。当然のことながら、本発明の例示的実施形態の上記説明において、開示の簡素化を目的として、かつ1つ又は複数の種々の進歩的様相の理解を容易にするため、本発明の種々の特徴が、時々、1つの実施形態、図面、又はそれらの説明に一緒にグループ化されている。

Claims (20)

  1. 多重ポート装置の第1のポートで第1のソースからの第1のデータストリームを受信するステップであって、前記第1のデータストリームの第1のビデオフレームが第1の到達時間で前記第1のポートに到達する、ステップと、
    前記多重ポート装置の第2のポートで第2のソースからの第2のデータストリームを受信するステップであって、前記第2のデータストリームの第2のビデオフレームが第2の到達時間で前記第2のポートに到達する、ステップと、
    前記第1の到達時間と前記第2の到達時間との間のオフセットを判定するステップと、
    少なくとも部分的に前記オフセットに基づいて1つ又は複数の補正ファクタを決定するステップであって、前記1つ又は複数の補正ファクタは、前記第1のソースの第1の補正ファクタを含む、ステップと、
    前記第1のソースによって前記第1のビデオフレームの後に送信される第3のビデオフレームの送信時間を変更するために使用される前記補正ファクタを示すデジタルコマンドであり、かつ前記第1のビデオフレームが特定されているデジタルコマンドを、前記第1のソースに送信するステップと、を有し、
    前記補正ファクタは、前記第3のビデオフレームの送信時間の変更量を含む、ことを特徴とする方法。
  2. ビデオデータは、HDMI(登録商標)(High-Definition Multimedia Interface)互換性データ及びMHL(Mobile High-Definition Link)互換性データの1つ又は2つ以上であることを特徴とする請求項1に記載の方法。
  3. 前記デジタルコマンドは、前記多重ポート装置と前記第1のソースとの間で、コマンドバスを介して送信されることを特徴とする請求項1に記載の方法。
  4. 前記デジタルコマンドは、前記第2のソースによって送信された前記第2のビデオフレームの後の第4のビデオフレームの到達と、前記第3のビデオフレームの到達の整合を調整するものであることを特徴とする請求項1に記載の方法。
  5. 前記デジタルコマンドは、前記第1のポートにおける前記第3のビデオフレームの前記到達と、前記第2のポートにおける前記第4のビデオフレームの前記到達との共通時間での同期化を提供するものであることを特徴とする請求項4に記載の方法。
  6. 前記デジタルコマンドは、前記第1のポートにおける前記第3のビデオフレームの前記到達と、前記第2のポートにおける前記第4のビデオフレームの前記到達との特定のオフセットを有する同期化を提供するものであることを特徴とする請求項4に記載の方法。
  7. 前記第3のビデオフレームは第3の到達時間で前記第1のポートに到達し、前記第4のビデオフレームは第4の到達時間で前記第2のポートに到達し、
    さらに、前記第3の到達時間と前記第4の到達時間との間の第2のオフセットを判定するステップを有することを特徴とする請求項4に記載の方法。
  8. さらに、少なくとも部分的に前記第2のオフセットに基づいて、1つ又は複数の補正ファクタを決定するステップを有し、
    前記1つ又は複数の補正ファクタは、前記第1のソースのための1つ又は複数の第2の補正ファクタと、前記第2のソースのための第3の補正ファクタとを含むことを特徴とする請求項7に記載の方法。
  9. 前記第1のビデオフレーム及び前記第2のビデオフレームの1つ又は2つ以上は、暗号化されており、
    オフセットの判定及び1つ又は複数の補正ファクタの決定が、前記第1のビデオフレーム又は前記第2のビデオフレームを解読することなく実施されることを特徴とする請求項1に記載の方法。
  10. 第1のデータソースか第1のビデオデータストリームを受信する第1のポートと、
    第2のデータソースから第2のビデオデータストリームを受信する第2のポートと、
    前記第1のビデオデータストリームの第1のビデオフレームが前記第1のポートに到達する第1の到達時間、及び前記第2のビデオデータストリームの第2のビデオフレームが前記第2のポートに到達する第2の到達時間の計測に利用されるクロック信号と、
    前記第1の到達時間と前記第2の到達時間との間のオフセットを判定し、少なくとも部分的に前記オフセットに基づいて1つ又は複数の補正ファクタを生成するロジック回路と、
    前記第1のデータソース及び前記第2のデータソースのセットに対する1つ又は複数のバス接続を有するインターフェイスと、を有し、
    前記1つ又は複数の補正ファクタは、前記第1のデータソースの第1の補正ファクタを含み、
    前記1つ又は複数の補正ファクタに基づいて、前記第1のデータソースによって前記第1のビデオフレームの後に送信される第3のビデオフレームの送信時間を変更するために使用される前記補正ファクタを示すデジタルコマンドであり、かつ前記第1のビデオフレームが特定されているデジタルコマンドを、前記1つ又は複数のバス接続を介して、前記第1のデータソース送信し、
    前記補正ファクタは、前記第3のビデオフレームの送信時間の変更量を含む、ことを特徴とする装置。
  11. 前記第1のデータソース及び前記第2のデータソースに閉ループフィードバックを提供するために一連の前記デジタルコマンドを送信する、ことを特徴とする請求項10に記載の装置。
  12. 記デジタルコマンドは、前記第2のデータソースによって送信された前記第2のビデオフレームの後の第4のビデオフレームの到達と、前記第3のビデオフレームの到達を共通時間に整合させるものである、ことを特徴とする請求項10に記載の装置。
  13. 記デジタルコマンドは、前記第1のポート及び前記第2のポートのそれぞれにおけるビデオフレームの到達を互いに特定のオフセットをもって整合させるものである、ことを特徴とする請求項10に記載の装置。
  14. 第1のポート及び前記第2のポートのそれぞれのためのリンククロックを有し、
    前記クロック信号は、前記第1のポート及び前記第2のポートの内のいずれか1つのリンククロックによって生成される、ことを特徴とする請求項10に記載の装置。
  15. 通クロックを有し、
    前記クロック信号は、前記共通クロックによって生成され、
    前記共通クロックは、前記第1のポート及び前記第2のポートの内のいずれか1つのリンククロックと同じ周波数を有する、ことを特徴とする請求項10に記載の装置。
  16. 前記1つ又は複数の補正ファクタのそれぞれは、時間ファクタによって、ビデオフレームの伝送を早める又は遅くするものである、ことを特徴とする請求項10に記載の装置。
  17. 前記時間ファクタはリンククロック期間の回数を示す整数値である、ことを特徴とする請求項16に記載の装置。
  18. デオフレーム又はビデオフレームの一部分を記憶するためのメモリエレメントを有し、
    前記装置は、前記第1のポート及び前記第2のポートにおけるビデオフレームの到達時間の残留するミスマッチを補正するために前記メモリエレメントを使用する、ことを特徴とする請求項10に記載の装置。
  19. 前記装置は、1つ又は複数の暗号化されたビデオフレームを受信するように構成され、
    前記ロジック回路は、ビデオフレームの到達時間を比較し、オフセット値を判定し、前記1つ又は複数の暗号化されたビデオフレームを解読することなく前記補正ファクタを生成するように構成されている、ことを特徴とする請求項10に記載の装置。
  20. 命令シーケンスを表すデータが記録されたコンピュータ読み取り可能な媒体であって、
    プロセッサによって前記命令シーケンスが実行されたときに、前記プロセッサに、
    多重ポート装置の第1のポートで第1のソースからの第1のデータストリームを受信するステップであって、前記第1のデータストリームの第1のビデオフレームが第1の到達時間で前記第1のポートに到達する、ステップと、
    前記多重ポート装置の第2のポートで第2のソースからの第2のデータストリームを受信するステップであって、前記第2のデータストリームの第2のビデオフレームが第2の到達時間で前記第2のポートに到達する、ステップと、
    前記第1の到達時間と前記第2の到達時間との間のオフセットを判定するステップと、
    少なくとも部分的に前記オフセットに基づいて1つ又は複数の補正ファクタを決定するステップであって、前記1つ又は複数の補正ファクタは、前記第1のソースの第1の補正ファクタを含む、ステップと、
    前記第1のソースによって前記第1のビデオフレームの後に送信される第3のビデオフレームの送信時間を変更するために使用される前記第1の補正ファクタを含むデジタルコマンドであり、かつ前記第1のビデオフレームが特定されているデジタルコマンドを、前記第1のソースに送信するステップと、を含む動作を実行させ、
    前記第1の補正ファクタは、前記第3のビデオフレームの変更量を示す、ことを特徴とするコンピュータ読み取り可能な媒体。
JP2012555046A 2010-02-25 2011-02-17 ビデオフレームの同期化 Active JP6034697B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/712,933 US8692937B2 (en) 2010-02-25 2010-02-25 Video frame synchronization
US12/712,933 2010-02-25
PCT/US2011/025199 WO2011106228A2 (en) 2010-02-25 2011-02-17 Video frame synchronization

Publications (2)

Publication Number Publication Date
JP2013520931A JP2013520931A (ja) 2013-06-06
JP6034697B2 true JP6034697B2 (ja) 2016-11-30

Family

ID=44476213

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012555046A Active JP6034697B2 (ja) 2010-02-25 2011-02-17 ビデオフレームの同期化

Country Status (7)

Country Link
US (2) US8692937B2 (ja)
EP (1) EP2540078A4 (ja)
JP (1) JP6034697B2 (ja)
KR (1) KR20130036204A (ja)
CN (1) CN102771136B (ja)
TW (1) TWI523527B (ja)
WO (1) WO2011106228A2 (ja)

Families Citing this family (65)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9198084B2 (en) 2006-05-26 2015-11-24 Qualcomm Incorporated Wireless architecture for a traditional wire-based protocol
US8667144B2 (en) 2007-07-25 2014-03-04 Qualcomm Incorporated Wireless architecture for traditional wire based protocol
US9936143B2 (en) 2007-10-31 2018-04-03 Google Technology Holdings LLC Imager module with electronic shutter
US8811294B2 (en) 2008-04-04 2014-08-19 Qualcomm Incorporated Apparatus and methods for establishing client-host associations within a wireless network
US9398089B2 (en) 2008-12-11 2016-07-19 Qualcomm Incorporated Dynamic resource sharing among multiple wireless devices
US9264248B2 (en) 2009-07-02 2016-02-16 Qualcomm Incorporated System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment
US8786670B2 (en) * 2010-10-14 2014-07-22 Cisco Technology, Inc. Network synchronization video for composite video streams
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US8964783B2 (en) 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
US9065876B2 (en) 2011-01-21 2015-06-23 Qualcomm Incorporated User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US10108386B2 (en) 2011-02-04 2018-10-23 Qualcomm Incorporated Content provisioning for wireless back channel
US8674957B2 (en) 2011-02-04 2014-03-18 Qualcomm Incorporated User input device for wireless back channel
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US8989280B2 (en) * 2011-06-30 2015-03-24 Cable Television Laboratories, Inc. Frame identification
US8989277B1 (en) 2011-11-03 2015-03-24 Xilinx, Inc. Reducing artifacts within a video processing system
WO2013081600A1 (en) * 2011-11-30 2013-06-06 Intel Corporation Reducing power for 3d workloads
CN102497527B (zh) * 2011-12-16 2013-11-27 杭州海康威视数字技术股份有限公司 多处理器视频处理系统及其中的视频图像同步传输与显示方法
US9525998B2 (en) 2012-01-06 2016-12-20 Qualcomm Incorporated Wireless display with multiscreen service
US8792643B1 (en) * 2012-02-16 2014-07-29 Google Inc. System and methodology for decrypting encrypted media
US9537644B2 (en) * 2012-02-23 2017-01-03 Lattice Semiconductor Corporation Transmitting multiple differential signals over a reduced number of physical channels
US9392322B2 (en) 2012-05-10 2016-07-12 Google Technology Holdings LLC Method of visually synchronizing differing camera feeds with common subject
WO2013168288A1 (ja) * 2012-05-11 2013-11-14 パイオニアデジタルデザインアンドマニュファクチャリング株式会社 中継装置
US9230505B2 (en) 2013-02-25 2016-01-05 Lattice Semiconductor Corporation Apparatus, system and method for providing clock and data signaling
CN103338204B (zh) * 2013-07-05 2016-12-28 深圳市云动创想科技有限公司 一种音频同步输出方法及系统
US9357127B2 (en) 2014-03-18 2016-05-31 Google Technology Holdings LLC System for auto-HDR capture decision making
TWI604432B (zh) * 2014-03-18 2017-11-01 緯創資通股份有限公司 顯示器及其視訊畫面顯示方法
CN106464491B (zh) * 2014-04-14 2019-11-19 新思公司 硬件接收器装置
US9729784B2 (en) 2014-05-21 2017-08-08 Google Technology Holdings LLC Enhanced image capture
US9813611B2 (en) 2014-05-21 2017-11-07 Google Technology Holdings LLC Enhanced image capture
US9628702B2 (en) 2014-05-21 2017-04-18 Google Technology Holdings LLC Enhanced image capture
US9774779B2 (en) 2014-05-21 2017-09-26 Google Technology Holdings LLC Enhanced image capture
WO2015182189A1 (ja) * 2014-05-28 2015-12-03 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
US9871516B2 (en) 2014-06-04 2018-01-16 Lattice Semiconductor Corporation Transmitting apparatus with source termination
US9413947B2 (en) 2014-07-31 2016-08-09 Google Technology Holdings LLC Capturing images of active subjects according to activity profiles
JP6467822B2 (ja) * 2014-08-29 2019-02-13 セイコーエプソン株式会社 表示システム、送信装置、及び、表示システムの制御方法
US9654700B2 (en) 2014-09-16 2017-05-16 Google Technology Holdings LLC Computational camera using fusion of image sensors
EP3200450A4 (en) * 2014-09-26 2018-05-30 Olympus Corporation Transmission system and processing device
CN104333771B (zh) * 2014-11-10 2017-11-24 硅谷数模半导体(北京)有限公司 视频流的同步控制方法和装置
DE102015001622A1 (de) * 2015-02-09 2016-08-11 Unify Gmbh & Co. Kg Verfahren zur Übertragung von Daten in einem Multimedia-System, sowie Softwareprodukt und Vorrichtung zur Steuerung der Übertragung von Daten in einem Multimedia-System
CN105141876B (zh) * 2015-09-24 2019-02-22 京东方科技集团股份有限公司 视频信号转换方法、视频信号转换装置以及显示系统
US10021438B2 (en) 2015-12-09 2018-07-10 Comcast Cable Communications, Llc Synchronizing playback of segmented video content across multiple video playback devices
CN105681816B (zh) * 2015-12-31 2019-01-29 深圳市瑞彩电子技术有限公司 一种视频数据传输装置和方法
US10764473B2 (en) * 2016-01-14 2020-09-01 Disney Enterprises, Inc. Automatically synchronizing multiple real-time video sources
US20170223382A1 (en) * 2016-02-03 2017-08-03 Sigma Designs, Inc. Method of reducing latency and a video decoder of the same
CN107517404A (zh) * 2016-06-17 2017-12-26 晨星半导体股份有限公司 电子装置及相关的信号处理方法
CN107071559A (zh) * 2017-05-11 2017-08-18 大连动感智慧科技有限公司 基于关键帧同步的多视频对比系统
JP6838148B2 (ja) * 2017-05-30 2021-03-03 シャープNecディスプレイソリューションズ株式会社 表示装置、表示方法、及びプログラム
JP2019004401A (ja) * 2017-06-19 2019-01-10 セイコーエプソン株式会社 プロジェクションシステム、プロジェクター及びプロジェクションシステムの制御方法
US10671553B2 (en) * 2017-12-29 2020-06-02 Texas Instuments Incorporated Link width scaling across multiple retimer devices
US11039041B2 (en) * 2018-04-03 2021-06-15 Intel Corporation Display panel synchronization for a display device
CN109728894B (zh) * 2018-11-13 2021-08-17 合肥奕斯伟集成电路有限公司 差分数据的处理方法、数据处理设备以及计算机存储介质
CN109587546B (zh) * 2018-11-27 2020-09-22 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
US10536666B1 (en) * 2019-01-22 2020-01-14 Facebook Technologies, Llc Systems and methods for transmitting aggregated video data
US11533534B2 (en) * 2019-02-20 2022-12-20 Huawei Technologies Co., Ltd. Techniques for enabling ultra-high definition alliance specified reference mode (UHDA-SRM)
US10797854B1 (en) * 2019-09-30 2020-10-06 Infineon Technologies Ag Synchronization system for controller area networks
US11323766B2 (en) * 2019-10-03 2022-05-03 Dolby International Ab Method and device for providing audio/video content to a rendering device
CN110933253B (zh) * 2019-11-25 2022-04-19 广州市奥威亚电子科技有限公司 一种数据帧同步的信源端、主机端、同步装置及方法
SE544753C2 (en) * 2020-01-14 2022-11-01 Net Insight Ab Network offset adjustment in remote media production
CN113596348B (zh) * 2021-04-29 2023-11-03 青岛信芯微电子科技股份有限公司 图像处理方法及设备
CN114257739B (zh) * 2021-12-11 2024-04-26 苏州华兴源创科技股份有限公司 视频数据速率调整方法和装置
US11776507B1 (en) 2022-07-20 2023-10-03 Ivan Svirid Systems and methods for reducing display latency
CN116193057B (zh) * 2023-04-26 2023-07-07 广东视腾电子科技有限公司 一种多端口传输的光纤视频延长方法及系统

Family Cites Families (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5717469A (en) * 1994-06-30 1998-02-10 Agfa-Gevaert N.V. Video frame grabber comprising analog video signals analysis system
US5592488A (en) 1995-06-07 1997-01-07 Micron Technology, Inc. Method and apparatus for pipelined multiplexing employing analog delays for a multiport interface
US5995140A (en) * 1995-08-28 1999-11-30 Ultrak, Inc. System and method for synchronization of multiple video cameras
US5914757A (en) * 1997-04-21 1999-06-22 Philips Electronics North America Corporation Synchronization of multiple video and graphic sources with a display using a slow PLL approach
KR100287728B1 (ko) * 1998-01-17 2001-04-16 구자홍 영상프레임동기화장치및그방법
JP3684525B2 (ja) * 1998-02-19 2005-08-17 富士通株式会社 多画面合成方法及び多画面合成装置
US6317166B1 (en) * 1998-08-31 2001-11-13 Immersive Media Company Synchronization frame generator for multichannel imaging system
JP3595745B2 (ja) * 1999-01-29 2004-12-02 キヤノン株式会社 画像処理装置
JP4292690B2 (ja) * 2000-06-27 2009-07-08 ソニー株式会社 画像記録再生装置及び方法
DE10031355A1 (de) * 2000-06-28 2002-01-17 Grundig Ag Verfahren und Vorrichtung zur zeitsynchronen Weiterleitung von Signalen
JP3739274B2 (ja) * 2000-10-31 2006-01-25 Kddi株式会社 2系統映像の位置ずれ補正装置
US7346698B2 (en) * 2000-12-20 2008-03-18 G. W. Hannaway & Associates Webcasting method and system for time-based synchronization of multiple, independent media streams
EP1423778A2 (en) 2001-09-06 2004-06-02 Qualcomm, Incorporated Generating and implementing a communication protocol and interface for high data rate signal transfer
JP2004165772A (ja) * 2002-11-11 2004-06-10 Matsushita Electric Ind Co Ltd ビデオ信号伝送装置
JP2005123789A (ja) * 2003-10-15 2005-05-12 Matsushita Electric Ind Co Ltd Av同期システム
GB2415852B (en) 2004-07-02 2010-07-14 Filmlight Ltd Method and apparatus for image processing
EP1657929A1 (fr) * 2004-11-16 2006-05-17 Thomson Licensing Dispositif et méthode de synchronisation de différentes parties d'un service numérique
US20080007616A1 (en) * 2004-12-06 2008-01-10 Ftd Technology Pte. Ltd. Universal multimedia display adapter
JP4660184B2 (ja) * 2004-12-27 2011-03-30 株式会社東芝 信号中継装置及び信号中継方法
KR100789548B1 (ko) * 2005-04-15 2007-12-28 엘지전자 주식회사 티브이의 오디오 출력 동기화 장치 및 방법
JP4912296B2 (ja) * 2005-04-28 2012-04-11 パナソニック株式会社 リップシンク補正システム、リップシンク補正装置及びリップシンク補正方法
US7636126B2 (en) * 2005-06-22 2009-12-22 Sony Computer Entertainment Inc. Delay matching in audio/video systems
US7423693B2 (en) * 2005-07-28 2008-09-09 Cole James R Video delay stabilization system and method
US7844762B2 (en) * 2006-02-24 2010-11-30 Silicon Image, Inc. Parallel interface bus to communicate video data encoded for serial data links
US7746969B2 (en) * 2006-03-28 2010-06-29 Entropic Communications, Inc. High definition multi-media interface
JP4544190B2 (ja) * 2006-03-31 2010-09-15 ソニー株式会社 映像音声処理システム、映像処理装置、音声処理装置、映像音声の出力装置および映像と音声の同期処理方法
JP4799254B2 (ja) * 2006-04-12 2011-10-26 シャープ株式会社 表示装置及び表示システム
US20080117984A1 (en) * 2006-11-16 2008-05-22 Analogix Semiconductor, Inc. Pre-Clock/Data Recovery Multiplexing of Input Signals in a HDMI Video Receiver
JP5119655B2 (ja) * 2006-12-13 2013-01-16 株式会社日立製作所 マルチスクリーン表示装置
JP5086632B2 (ja) * 2006-12-22 2012-11-28 株式会社東芝 映像表示装置、映像表示システムおよび映像表示方法
US7765323B2 (en) * 2006-12-29 2010-07-27 Intel Corporation Sink device addressing mechanism
US7809972B2 (en) * 2007-03-30 2010-10-05 Arm Limited Data processing apparatus and method for translating a signal between a first clock domain and a second clock domain
US8320410B2 (en) * 2007-05-23 2012-11-27 Broadcom Corporation Synchronization of media data streams with separate sinks using a relay
JP5091578B2 (ja) * 2007-07-26 2012-12-05 株式会社東芝 映像処理装置及び映像処理方法
JP5145812B2 (ja) * 2007-08-01 2013-02-20 ソニー株式会社 データ送受信システム、データ送信装置、データ受信装置、クロック生成方法
JP5050807B2 (ja) * 2007-11-22 2012-10-17 ソニー株式会社 再生装置、表示装置、再生方法および表示方法
JP2009141720A (ja) * 2007-12-07 2009-06-25 Hitachi Ltd 映像表示装置、表示パネル及び映像処理装置
US8090030B2 (en) * 2008-01-04 2012-01-03 Silicon Image, Inc. Method, apparatus and system for generating and facilitating mobile high-definition multimedia interface
JP5283914B2 (ja) * 2008-01-29 2013-09-04 キヤノン株式会社 表示制御装置及び表示制御方法
US8102470B2 (en) * 2008-02-22 2012-01-24 Cisco Technology, Inc. Video synchronization system
WO2009110897A1 (en) * 2008-03-05 2009-09-11 Hewlett-Packard Development Company, L.P. Synchronizing and windowing external content in digital display systems
JP4535159B2 (ja) * 2008-04-01 2010-09-01 ソニー株式会社 信号切換装置、信号切換装置の制御方法、プログラム、及び、記録媒体
US20100142723A1 (en) * 2008-12-08 2010-06-10 Willard Kraig Bucklen Multimedia Switching Over Wired Or Wireless Connections In A Distributed Environment
US8832844B2 (en) * 2009-12-04 2014-09-09 Parade Technologies, Ltd. Fast switching for multimedia interface system having content protection
US8331561B2 (en) * 2009-12-17 2012-12-11 Analog Devices, Inc. Fast switching between digital video sources
WO2011084340A1 (en) * 2009-12-17 2011-07-14 Analog Devices, Inc. Selective switching between data sources
US8242940B2 (en) * 2009-12-17 2012-08-14 Analog Devices, Inc. Transitioning digital data processors between power savings and non-power savings modes
US20110157473A1 (en) * 2009-12-30 2011-06-30 Hoon Choi Method, apparatus, and system for simultaneously previewing contents from multiple protected sources
US20110164118A1 (en) * 2010-01-06 2011-07-07 Samsung Electronics Co., Ltd. Display apparatuses synchronized by one synchronization signal
JP2012029214A (ja) * 2010-07-27 2012-02-09 Rohm Co Ltd インタフェース回路およびそれを用いた電子機器

Also Published As

Publication number Publication date
TW201146009A (en) 2011-12-16
JP2013520931A (ja) 2013-06-06
WO2011106228A3 (en) 2012-01-12
US8692937B2 (en) 2014-04-08
KR20130036204A (ko) 2013-04-11
EP2540078A4 (en) 2014-02-26
EP2540078A2 (en) 2013-01-02
TWI523527B (zh) 2016-02-21
WO2011106228A2 (en) 2011-09-01
CN102771136B (zh) 2016-05-11
US20110205433A1 (en) 2011-08-25
US20140168514A1 (en) 2014-06-19
CN102771136A (zh) 2012-11-07

Similar Documents

Publication Publication Date Title
JP6034697B2 (ja) ビデオフレームの同期化
US10613812B2 (en) System, control apparatus and control method for distributed video display
US10079963B1 (en) Display method and display system for video wall
US11544029B2 (en) System and method for synchronized streaming of a video-wall
US8930692B2 (en) Mechanism for internal processing of content through partial authentication on secondary channel
US20110134330A1 (en) Fast switching for multimedia interface system having content protection
KR100902013B1 (ko) 타일드 디스플레이 시스템 및 상기 시스템에서의 동기화방법
KR102025026B1 (ko) Lvds 영상신호를 dp 영상신호로 변환하기 위한 방법 및 시스템
KR20120096944A (ko) 다수의 보호 소스로부터의 컨텐츠를 동시에 미리 보기 위한 방법, 장치, 및 시스템
US20130187832A1 (en) Display apparatus and method for controlling the same
JP6038046B2 (ja) パケット通信ネットワークを介して伝送されるコンテンツをストリーミングするためのクロックリカバリ機構
JP2000322039A (ja) 表示装置、制御装置および多画面表示システム
TWI361615B (en) Video and audio data synchronization method and related apparatus for a multimedia interface
JP2001265313A (ja) 信号処理装置、信号処理方法及びコンピュータ読み取り可能な記憶媒体
TWI520577B (zh) 立體影像輸出裝置與相關的立體影像輸出方法
US8606040B2 (en) Method and apparatus for image conversion
JP4661674B2 (ja) 画像処理装置および方法
JP2018019284A (ja) 映像受信装置
CN112188181A (zh) 图像显示设备、立体图像处理电路及其同步信号校正方法
TW201351975A (zh) 類比影像訊號調整模組及類比影像訊號調整方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140117

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20140228

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20140228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141022

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150630

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150925

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20160115

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160805

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20160816

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161025

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161028

R150 Certificate of patent or registration of utility model

Ref document number: 6034697

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250