JP2015207287A - 映像表示システム - Google Patents

映像表示システム Download PDF

Info

Publication number
JP2015207287A
JP2015207287A JP2015082753A JP2015082753A JP2015207287A JP 2015207287 A JP2015207287 A JP 2015207287A JP 2015082753 A JP2015082753 A JP 2015082753A JP 2015082753 A JP2015082753 A JP 2015082753A JP 2015207287 A JP2015207287 A JP 2015207287A
Authority
JP
Japan
Prior art keywords
video
data
touch
display system
accelerator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015082753A
Other languages
English (en)
Other versions
JP6545996B2 (ja
Inventor
文 山 朴
Moon-San Park
文 山 朴
元 準 崔
Weon-Jun Choe
元 準 崔
明 洙 金
Myung-Su Kim
明 洙 金
基 賢 南
Mototaka Minami
基 賢 南
宰 完 朴
Jae-Wan Park
宰 完 朴
正 賢 白
Jung-Hyun Baik
正 賢 白
柳 鳳 鉉
Hogen Ryu
鳳 鉉 柳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Display Co Ltd
Original Assignee
Samsung Display Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Display Co Ltd filed Critical Samsung Display Co Ltd
Publication of JP2015207287A publication Critical patent/JP2015207287A/ja
Application granted granted Critical
Publication of JP6545996B2 publication Critical patent/JP6545996B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/10Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G09G2340/125Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/10Display system comprising arrangements, such as a coprocessor, specific for motion video images
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/08Cursor circuits
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/395Arrangements specially adapted for transferring the contents of the bit-mapped memory to the screen
    • G09G5/397Arrangements specially adapted for transferring the contents of two or more bit-mapped memories to the screen simultaneously, e.g. for mixing or overlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】タッチイベント及び前記タッチイベントに対する表示応答の間の待機時間(Latency)を減少させられる映像表示システムを提供する。【解決手段】ホスト150と、タッチパネル110から出力されるタッチ信号に基づいてタッチイベント情報を生成し、タッチイベント情報を加速器180に供給するタッチ制御部120と、タッチ制御部120から供給されたタッチイベント情報に基づいてタッチイベントに係わる出力映像データを生成する加速器180と、加速器180によって生成された出力映像データを表示パネル130に供給する表示制御部140と、を含む。【選択図】図2

Description

本発明は、映像表示システムに関する。
近年、ユーザーとの円滑な相互作用のために、モバイル電話機(Mobilephone)、タブレット(Tablet)、ラップトップコンピューター(Laptop Computers)、デスクトップコンピューター(Desktop Computers)、テレビなどのような映像表示システムにタッチ機能を付け加えている。例えば、図1を参照すれば、従来の映像表示システム1は、タッチパネル2、タッチ制御部3、表示パネル5、表示制御部6、及びホスト8を含む。
表示パネル5に所定の映像が表示されれば、ユーザーはスタイラスまたは指のような身体の一部を使ってスクリーンをタッチすることで、所望の入力を遂行することができる。この時、タッチ制御部3は、タッチパネル2に発生されたタッチイベントを検出し、これについての情報をホスト8に供給する。
ホスト8は、タッチ制御部3から受信された情報を基礎として、前記タッチイベントに対応する所定の映像をレンダリングして表示制御部6に出力することができ、表示制御部6は、ホスト8から供給された映像を、表示パネル5を通じてユーザーに提供することができる。
上述したように、従来の場合には、タッチイベントに対する応答過程がホスト8を経て行われたため、ホスト8の状態(例えば、他の業務によるホスト8の負荷が増加される場合など)によってタッチイベントに対する応答が遅延される。この場合、ユーザーのタッチ入力に対する迅速なフィードバックを提供することができないので、ユーザーの不満が増加されうる。
したがって、本発明は、上記の問題を解決するために案出されたもので、その目的は、タッチイベント及び前記タッチイベントに対する表示応答の間の待機時間(Latency)を減少させられる映像表示システムを提供することである。
上記の目的を達成するために本発明の一実施例によれば、ホスト、タッチパネルから出力されるタッチ信号に基づいてタッチイベント情報を生成し、前記タッチイベント情報を加速器に供給するタッチ制御部と、前記タッチ制御部から供給されたタッチイベント情報に基づいて、タッチイベントに係わる出力映像データを生成する加速器及び前記加速器によって生成された出力映像データを表示パネルに供給する表示制御部と、を含む。
また、前記加速器は、前記ホスト、前記タッチパネル、前記タッチ制御部、前記表示パネル及び前記表示制御部と別個で分離して存在することを特徴とする。
また、前記加速器は、前記表示制御部内に含まれたことを特徴とする。
また、前記加速器は、前記タッチ制御部内に含まれたことを特徴とする。
また、前記加速器は、前記ホスト内に含まれたことを特徴とする。
また、前記タッチ制御部と前記加速器は、前記表示制御部内に含まれたことを特徴とする。
また、前記加速器は、前記タッチイベント情報を受信し、前記タッチイベント情報に基づいてマスクデータを生成するマスク生成ロジッグ及び前記マスクデータに応じてビデオ映像データとオーバレイデータとを結合させて出力映像データを生成するレンダリングロジッグを含む。
また、前記加速器は、前記オーバレイデータを保存するオーバレイバッファーをさらに含む。
また、前記マスク生成ロジッグは、前記タッチイベント情報に基づいて推定タッチ経路を計算し、前記推定タッチ経路に沿って前記マスクデータを生成することを特徴とする。
また、前記マスクデータは、前記出力映像データ内のピクセルに対応する位置を示す多数の値を含む。
また、前記レンダリングロジッグは、前記出力映像データ内のそれぞれのピクセルごとに、前記マスクデータ内の対応する位置での値に応じて前記ビデオ映像データの対応するピクセルまたは前記オーバレイデータを出力するかどうかを決定することで、前記ビデオ映像データを前記オーバレイデータと結合するように構成される。
また、前記レンダリングロジッグは、前記出力映像データ内のそれぞれのピクセルごとに、前記マスクデータ内の対応する位置での値に応じて前記ビデオ映像データの対応するピクセル及び前記オーバレイデータを混合することで、前記ビデオ映像データを前記オーバレイデータと結合するように構成される。
また、前記マスクデータのそれぞれの値は、前記出力映像データ内のそれぞれのピクセルに対応することを特徴とする。
また、前記マスクデータのそれぞれの値は、前記出力映像データ内の一つ以上のピクセルに対応することを特徴とする。
また、前記タッチパネルは、前記タッチ制御部にタッチ信号を供給し、前記タッチ制御部は、前記タッチパネルから供給されたタッチ信号を利用して前記タッチイベント情報を生成することを特徴とする。
また、前記タッチパネルは、静電容量方式のタッチパネル、抵抗膜方式のタッチパネル、光タッチパネル、表面弾性波タッチパネル、圧力タッチパネル及びハイブリッド方式のタッチパネルのうちいずれか一つによって具現される。
また、前記ホストは、前記ビデオ映像データを生成することを特徴とする。
また、前記オーバレイデータは、前記ビデオ映像データと同一の色相を有することを特徴とする。
また、前記オーバレイデータは、多数のページを含む。
また、前記マスクデータは、前記オーバレイデータに含まれた多数のページのうち、少なくともいずれか一つを識別する情報を含む。
また、前記オーバレイデータは、ビットマップされた映像を含む。
また、前記オーバレイデータは、単一色相値を有することを特徴とする。
また、前記オーバレイバッファーは、前記ホストから供給されたオーバレイデータを保存することを特徴とする。
また、前記タッチイベント情報は、第n期間に発生されたタッチイベントに対する第1タッチイベント情報と、第n+1期間に発生されたタッチイベントに対する第2タッチイベント情報を含む。
また、前記タッチ制御部は、前記タッチイベント情報を前記ホストに供給することを特徴とする。
また、前記マスク生成ロジッグは、前記第2タッチイベント情報に基づいて前記マスクデータを生成し、前記ホストは、前記第1タッチイベント情報に基づいて前記ビデオ映像データを生成することを特徴とする。
また、前記ホストは、中央処理装置及びグラフィック処理装置を含む。
また、前記中央処理装置は、オーバレイデータを前記加速器に供給し、前記グラフィック処理装置は、ビデオ映像データを前記加速器に供給することを特徴とする。
また、前記出力映像データは、オーバレイデータと前記ホストから供給されたビデオ映像データが結合されたものである。
以上のように、本発明の実施例によれば、タッチイベント及び前記タッチイベントに対する表示応答の間の待機時間(Latency)を減少させられる映像表示システムを提供することができるという効果を奏する。
従来の映像表示システムを示した図面である。 本発明の第1実施例による映像表示システムを示した図面である。 本発明の実施例によるホストを示した図面である。 本発明の実施例による加速器を示した図面である。 本発明の実施例による加速器の動作について説明した図面である。 本発明の実施例による加速器の動作について説明した図面である。 本発明の第2実施例による映像表示システムを示した図面である。 本発明の第3実施例による映像表示システムを示した図面である。 本発明の第4実施例による映像表示システムを示した図面である。 本発明の第5実施例による映像表示システムを示した図面である。
以下、本発明の好ましい実施例について図面を参照しながら説明する。
映像表示システムに対するよくある不満は、ユーザーインターフェース(User Interface;UI)の遅延である。例えば、現在のモバイル電話機では典型的にタッチ行為に応答してディスプレイをアップデートするのに50ないし200ミリ秒が必要である。
実際に、Samsung(登録商標)Galaxy Note(登録商標)2の場合、タッチイベントに対する典型的なディスプレイの応答時間は、1秒当たり60フレーム(Frames Per Second;FPS)のリフレッシュ率(Refresh Rate)に基づき、100ミリ秒よりもっと大きいか、またはおおよそ6フレーム以上のビデオ映像でありえるし、これは、相当数のユーザーによって認知されることができる。
例えば、ユーザーがスタイラスを利用して線からなる特定パターンをドローイングする動作を行う場合、実際に表示されたパターンの最後の部分とスタイラスとの間には所定の格差(gap)が存在するようになり、ユーザーはこのような表示遅延(Display lag)を認知するようになる。
本発明の実施例では、ホスト(例えば、アプリケーション・プロセッサ;Application Processor)によってレンダリングされる映像に先立って、タッチ経路で映像をオーバレイすることで、ユーザーがより早いタッチ応答を感知するようにする。
スクリーン上におけるユーザーのタッチ地点(指、スタイラスまたは他の道具を使うか否かを問わず)と、実際に表示パネルに表示されるドローイングとの間の差を狭めることで、表示遅延が減少されることができる。
本発明の実施例で示されたように、動詞として使われる時の用語「オーバレイ(Overlay)」は、ビデオ映像(例えば、ホストがレンダリングする映像)及び追加映像データを結合して追加映像データが元のビデオ映像の一部分を代替(または「オーバレイ」、「重畳」)するようにしたことを称する。また、名詞として使われる時の用語「オーバレイ」は、結合された映像での前記追加映像データの外形を称することができる。
さらに、オーバレイ方法を用いることで、アプリケーションソフトウェアはまたタッチイベントに対して表示される応答の領域(例えば、表示パネル上の位置)、カラー及びレンダリング動作を制御することができる。
図2は、本発明の第1実施例による映像表示システムを示した図、図3は、本発明の実施例によるホストを示した図面である。図2を参照すれば、本発明の第1実施例による映像表示システム100は、タッチパネル110、タッチ制御部120、表示パネル130、表示制御部140、ホスト150及び加速器180を含む。
タッチパネル110は、ユーザーによるタッチを検出するように構成され、タッチ制御部120に供給されるタッチ信号Tsを生成することができる。このために、タッチパネル110は、タッチ制御部120に接続されることができる。この時、タッチパネル110は、身体の一部(例えば、指)、スタイラスなどのような任意の類型のポインティング道具(Pointing Implement)を使用するユーザーのタッチを検出することができる。
本発明の実施例で示されたように、用語「ポインティング道具」は、スタイラスのような装置及び指のような身体の一部を含み、タッチパネル110によって検出されることができる物体等を称する。例えば、タッチパネル110は、静電容量方式のタッチパネル(Capacitive type touch panel)、抵抗膜方式のタッチパネル(Resistive type touch panel)、光タッチパネル(Optical touch panel)、表面弾性波タッチパネル(Surface acoustic wave touch panel)、圧力タッチパネル(Pressure touch panel)、及びハイブリッド方式のタッチパネル(Hybrid touch panel)のうちいずれか一つによって具現されることができる。ここで、ハイブリッド方式のタッチパネルは、同種のタッチパネルが相互結合されるか、又は異種のタッチパネルが相互結合されることで具現されることができる。
但し、本発明の実施例で使われるタッチパネル110は、前記種類に限定されるものではなく、種類に関係なくポインティング道具によるタッチを検出できるように構成されたパネルであれば十分である。例えば、タッチパネル110から出力されるタッチ信号Tsは、タッチパネル110内のそれぞれの位置に対する静電容量、電圧または電流の測定値に対応されることができる。
タッチ制御部120は、タッチパネル110から供給されたタッチ信号Tsを利用して、タッチパネル110に発生されたタッチイベントについての情報Tiを生成することができる。この時、タッチ制御部120は、生成されたタッチイベント情報Tiを加速器180に供給することができる。また、タッチ制御部120は、前記タッチイベント情報Tiを加速器180とホスト150に同時に供給することも可能である。このために、タッチ制御部120は、加速器180とホスト150に接続されることができる。
タッチイベント情報Tiは、ユーザーによるタッチイベントの発生位置(例えば、座標)に対応するデータでありえる。他の実施例では、前記タッチイベント情報Tiは、タッチパネル110に加えられた圧力に対応する圧力データをさらに含むことができる。
ホスト150は、タッチ制御部120から供給されるタッチイベント情報Tiを受信し、前記タッチイベント情報Tiを参照してビデオ映像データDvを生成することができる。また、ホスト150は、生成されたビデオ映像データDvを加速器180に供給することができる。また、ホスト150はタッチイベントと関連性のない一般的な映像データを表示制御部140に供給することで、タッチと関係ない映像を表示パネル130に表示することができる。このために、ホスト150は、加速器180と表示制御部140とに接続されることができる。
図3を参照すれば、本発明の一実施例によるホスト150は、中央処理装置151(CPU)とグラフィック処理装置153(GPU)と、を含むことができる。また、本発明の一実施例によるホスト150は、中央処理装置151とグラフィック処理装置153の他にもメモリー155を追加的にさらに含むことができる。この時、中央処理装置151は、タッチイベント情報Tiを受信することができ、グラフィック処理装置153を制御することで、グラフィック処理装置153によって発生されたタッチイベントに対応するビデオ映像データDvを生成するようにすることができる。
グラフィック処理装置153は、生成されたビデオ映像データDvを加速器180に供給することができる。一方、ホスト150は、オーバレイデータDr及び/またはパラメーターPaを加速器180に供給することができる。例えば、ホスト150に含まれた中央処理装置151は、オーバレイデータDr及び/またはパラメーターPaを加速器180に供給することができる。
表示制御部140は、表示パネル130の駆動を制御する役目を遂行する。すなわち、表示パネル130に所定の映像を表示するために、外部から供給された映像データを特定タイミングに同期させて表示パネル130に供給することができる。例えば、表示制御部140は、加速器180によって生成された出力映像データDiを受信し、受信された出力映像データDiを所定の制御信号に同期させて表示パネル130に供給することができる。
また、表示制御部140は、加速器180から生成された出力映像データDiと別途の一般的な映像データをホスト150から供給を受けて、前記映像データを所定の制御信号に同期させて表示パネル130に供給することができる。
表示パネル130は、表示制御部140から供給される映像データに対応して所定の映像を表示することができる。例えば、表示パネル130は、加速器180から表示制御部140を介して供給される出力映像データDiに対応する映像を表示することができる。
また、表示パネル130は、ホスト150から表示制御部140を介して供給される一般的な映像データに対応する映像を表示することができる。例えば、表示パネル130は、液晶表示パネル(Liquid Crystal Display)、プラズマ表示パネル(Plasma Display Panel)、有機電界発光表示パネル(Organic Light Emitting Display Panel)などのような多様な表示パネルによって具現されることができる。
また、本発明の実施例による表示パネル130は、特定の映像を表示するための多数の画素(図示せず)、前記画素に走査信号を供給するための走査駆動部(図示せず)、及び表示制御部140から供給された映像データに対応するデータ信号を前記画素に供給するためのデータ駆動部を含むことができる。
加速器180は、タッチ制御部120からタッチイベント情報Tiを受信し、前記タッチイベント情報Tiを参考にして表示パネル130に発生されたタッチイベントに係わる出力映像データDiを生成することができる。また、加速器180は、生成された出力映像データDiを表示制御部140に出力することができる。すなわち、加速器180は、タッチイベントに対する視覚的応答をより早く具現できるようにタッチイベント情報Tiを出力映像データDiに処理する。
図4は、本発明の実施例による加速器を示した図面である。図4を参照すれば、本発明の実施例による加速器180は、マスク生成ロジッグ181及びレンダリングロジッグ183を含む。
マスク生成ロジッグ181は、タッチ制御部120からタッチイベント情報Tiを受信し、前記タッチイベント情報Tiに基づいてマスクデータDmを生成することができる。例えば、マスク生成ロジッグ181は、タッチイベント情報Tiに応じて推定タッチ経路(Pe;図5を参照)を計算し、前記推定タッチ経路Peに沿って前記マスクデータDmを生成することができる。
レンダリングロジッグ183は、マスク生成ロジッグ181から伝達されたマスクデータDmに応じて、ビデオ映像データDvとオーバレイデータDrとを結合させて出力映像データDiを生成することができる。また、レンダリングロジッグ183は、生成された出力映像データDiを表示制御部140に出力することができる。この時、ビデオ映像データDvは、ホスト150から供給されることができる。例えば、ホスト150に含まれたグラフィック処理装置153は、ビデオ映像データDvをレンダリングロジッグ183に供給することができる。
また、オーバレイデータDrは、ホスト150から供給されることができる。しかし、本発明の実施例はこれに限定されない。例えば、いずれかの一実施例では、オーバレイデータDrは、加速器180の内部で生成されることができる。また、他の実施例では、オーバレイデータDrは、加速器180の内部で作られたデータ、及びホスト150から供給されたデータの結合でありえる。
本発明の実施例による加速器180は、オーバレイバッファー185をさらに含むことができる。オーバレイバッファー185は、ホスト150から供給されたオーバレイデータDrを保存するメモリーである。この時、オーバレイバッファー185は、保存されたオーバレイデータDrをレンダリングロジッグ183に供給するように構成されることができる。
本発明の第1実施例による映像表示システム100では、加速器180がホスト150、タッチパネル110、タッチ制御部120、表示パネル130及び表示制御部140と別個で分離して位置する。例えば、いずれか一つの実施例で、マスク生成ロジッグ181、レンダリングロジッグ183及びオーバレイバッファー185は、それぞれ異なる注文型半導体(Application Specific Integrated Circuit;ASIC)等を使用して具現されることができる。
本発明の他の実施例では、マスク生成ロジッグ181、レンダリングロジッグ183及びオーバレイバッファー185は、単一ASICを使用して具現されることができる。
本発明のまた他の実施例では、フィールド・プログラマブル・ゲートアレイ(Fieldprogrammable gate array;FPGA)は、マスク生成ロジッグ181、レンダリングロジッグ183及びオーバレイバッファー185の機能等を遂行するようにプログラムされることができる。
代案としては、汎用プロセッサーはマスク生成ロジッグ181、レンダリングロジッグ183及びオーバレイバッファー185のそれぞれの機能を遂行するようにプログラムされることができる(例えば、汎用プロセッサーに接続されるメモリー内に保存される命令等で)。
図5及び図6は、本発明の実施例による加速器の動作について説明した図面である。特に、図5及び図6では、ビデオ映像データDvとオーバレイデータDrとを結合して、出力映像データDiを生成する加速器180の動作について詳しく説明する。
まず、図5を参照して本発明の実施例による加速器180の動作について説明する。本発明の実施例による映像表示システム100でユーザーによるタッチイベントが発生された場合、タッチ制御部120はタッチパネル110から供給されたタッチ信号Tsを利用し、前記タッチイベントについての情報Tiを算出する。例えば、ユーザーが特定のパターンを描く場合、前記特定のパターンはタッチ制御部120によって多数のタッチイベントの組み合わせとして認識されることができる。すなわち、図5に示されたように、タッチ制御部120はユーザーのドローイング動作を6個のポイントに対するタッチイベントとして認識することができる。例えば、ユーザーが第k期間と第k+1期間の間、所定の線を描く場合、タッチイベントは第k期間に発生したタッチイベント(図5においてXで表示)と、第k+1期間に発生したタッチイベント(図5において+で表示)に区分されることができる。
タッチ制御部120は、このような多数のタッチイベントについての情報Ti(例えば、位置または座標)を生成し、生成されたタッチイベント情報Tiをマスク生成ロジッグ181に供給することができる。この時、タッチイベント情報Tiは、第k期間に発生したタッチイベントXについての情報(第1タッチイベント情報)と、第k+1期間に発生したタッチイベント(+)についての情報(第2タッチイベント情報)に区分されることができる。
タッチ制御部120は、生成されたタッチイベント情報Tiを加速器180とホスト150とに供給することができる。この時、ホスト150は、第k期間に発生したタッチイベントXについての情報(第1タッチイベント情報)を利用して、第k期間に発生したタッチイベントXに対応する映像セグメント606を表示するためのビデオ映像データDvを生成することができる。
前記映像セグメント606を表示するためのビデオ映像データDvは、ホスト150によってレンダリングロジッグ183に供給されることができる。
マスク生成ロジッグ181は、タッチ制御部120から供給されたタッチイベント情報Tiを利用して、推定タッチ経路Peを生成することができる。例えば、マスク生成ロジッグ181は、第k+1期間に発生したタッチイベント(+)についての情報(第2タッチイベント情報)を内挿(Interpolation)及び/または外挿(Extrapolation)をすることで、図5に示されたような推定タッチ経路Peを生成することができる。
前記推定タッチ経路Peは、マスク生成ロジッグ181によって再びマスクデータDmを生成するために使用されることができる。例えば、マスク生成ロジッグ181は、生成された推定タッチ経路Peを反映してマスクデータDmを生成することができる。
マスクデータDmは、多数の値を含んで構成されることができる。例えば、マスクデータDmは、多数の値を含むマトリックスの形式を持つことができる。この時、マスクデータDmに含まれた値の位置は、表示パネル130内のピクセルの位置に対応し、値の相手位置は表示パネル130内のピクセルの相手位置に対応することができる。例えば、マスクデータDmは結合された出力映像Ic内のピクセル位置の2次元マップに対応する2次元マトリックスと見なされることができる。
また、いずれか一つの実施例によれば、マスクデータDmのそれぞれの値は、単一ビットで表現され、マスクデータDm内での値の位置は、結合された出力映像Ic内の位置に対応されることができる。例えば、結合された出力映像IcでオーバレイデータDrが見えなければならない位置は第1値(例えば、「1」)にセットされた値を有し、オーバレイデータDrが見えてはならない(例えば、ビデオ映像データDvが見えなければならない)位置は、第1値と異なる第2値(例えば、「0」)にセットされた値を有することができる。
また、いずれか一つの実施例によれば、マスクデータDmのそれぞれの値は、多数のビット(例えば、8ビット)によって表現され、ここで、マスクデータDmの値は、映像内のそれぞれの場所でオーバレイデータDrの「透明度」を指称することができる。
本発明の実施例で使われるところのように、用語「透明度」は、オーバレイデータDrとビデオ映像データDvとを混合して結合された出力映像IcがオーバレイデータDr及びビデオ映像データDv両方すべての特性を取るようにすることを示す。
マスク生成ロジッグ181に供給されるパラメーターPaは、推定タッチ経路Peの生成の時、前記推定タッチ経路Peの特性を制御することができる。
前記パラメーターPaは、起動デフォルト(Start up default)を有することができるが、ソフトウェアまたは他の手段によってランタイムの間に必要に応じて調整されることができる。例えば、パラメーターPaは、ホスト150から供給されることができ、特にホスト150内に含まれた中央処理装置151から供給されることができる。
例えば、前記パラメーターPaは、生成される推定タッチ経路Peの幅、スタイル、形状など、推定タッチ経路Peが許容される領域(例えば、活性ドローイング領域)を制御することができるが、これに限定されない。また、本発明の実施例がドローイング用ソフトウェアアプリケーション(例えば、デジタルスケッチブック)の状況で使用される時、結合された出力映像Icの一部であるオーバレイ映像セグメント608は、もっぱら活性ドローイング領域に対応する表示パネル130の部分に適用されることができる。加速器180は、一般的に活性ドローイング領域の外部にある表示パネル130の部分に対してはオーバレイデータDrを適用しない。このように、パラメーターPaは、推定タッチ経路Peを活性ドローイング領域に対応する表示パネル130の部分に制限するようにセットされることができる。
また、他の実施例では、前記パラメーターPaは描かれるラインの幅を制御することができる。
マスク生成ロジッグ181は、ホスト150からの生成された映像セグメント700に先立って、マスクデータDmにラインの形状をレンダリングするためにこのパラメーターPaをタッチイベント情報Tiに含まれた圧力データとともに利用することができる。
出力映像データDiのそれぞれのピクセルがレンダリングロジッグ183によってプロセッシングされる時、レンダリングロジッグ183は、前記ピクセルの位置に対応するマスクデータDm内の位置(例えば、マトリックス内の位置)での値を検索し、所望の視覚效果(例えば、透明及び/またはアンチ−エイリアシング;anti−aliasing)を達成するために、マスクデータDm内の値に応じてビデオ映像データDvのピクセル及びオーバレイデータDrを混合するか、またはビデオ映像データDvのピクセルをオーバレイデータDrに代替することを遂行し、オーバレイデータDrまたはビデオ映像データDvのピクセルを表示パネル130に出力するか、またはオーバレイデータDrとビデオ映像データDvの混合を表示制御部140に出力する。
言い換えれば、レンダリングロジッグ183は、マスクデータDmによってビデオ映像データDvとオーバレイデータDrとを結合(混合または代替)して出力映像データDiを生成することができる。
また、生成された出力映像データDiは、表示制御部140を介して表示パネル130に供給されることで、前記表示パネル130は結合された出力映像Icを表示することができる。例えば、レンダリングロジッグ183のレンダリング動作は、単一ビットに規定されたマスクデータDmでの値によって制御されることができる。すなわち、レンダリング動作は、出力映像データDiに含まれたピクセルの位置に対応するマスクデータDm内の位置での値に基づき、各ピクセルに対する出力データを決定することができる。
本発明の一実施例では、マスクデータDmに含まれた値の個数(または大きさ)は、一フレームのビデオ映像データDvに含まれたピクセルの個数と同一であり、これは結果的に結合された出力映像Icに含まれたピクセルの個数(または出力映像データDiに含まれたピクセルの個数)と同一である。
そこで、マスクデータDmでのそれぞれの値とビデオ映像データDvでのそれぞれのピクセルの間には、一対一の関係が存在することができる。また、マスクデータDmでのそれぞれの値は、出力映像データDi内のそれぞれのピクセルに対応することができる。すなわち、レンダリングロジッグ183の代替実施例は、マスクデータDmのそれぞれの値をビデオ映像データDv内の対応するピクセルと整合させ、ビデオ映像データDvのピクセルまたはオーバレイデータDrを表示制御部140に出力することで遂行されることができる。例えば、一実施例では、レンダリングロジッグ183の動作は、マスクデータDmのそれぞれの値を通じて繰り返されることができる。
「0」の値がマスクデータDm内の特定の位置に存在すれば、レンダリングロジッグ183は、ビデオ映像データDvの中で前記「0」値に対応するピクセルを出力する。また、「1」の値がマスクデータDm内の特定の位置に存在すれば、レンダリングロジッグ183はオーバレイデータDrを出力することができる。
このような繰り返しプロセスの結果として、レンダリングロジッグ183は、出力映像データDiを表示制御部140に供給することができ、表示パネル130は、前記出力映像データDiに対応する結合された出力映像Icを表示することができる。したがって、第k期間に発生したタッチイベントXに対応する映像セグメント606と、第k+1期間に発生したタッチイベント(+)に対応するオーバレイ映像セグメント608が結合された出力映像Icが表示パネル130に表示されることができるようになる。
オーバレイ映像セグメント608の場合、ホスト150(例えば、中央処理装置151及びグラフィック処理装置153)を介して処理されないため、より速かに表示パネル130に表示されることができる。
本発明の他の実施例では、マスクデータDmに含まれた値の個数は、一フレームのビデオ映像データDvに含まれたピクセルの個数より少ないことがある。そこで、マスクデータDmでのそれぞれの値とビデオ映像データDvでのそれぞれのピクセルとの間には、一対多の関係が存在することができる。また、マスクデータDmでのそれぞれの値は、出力映像データDi内の一つ以上のピクセルに対応することができる。したがって、マスクデータDmの特定値がビデオ映像データDvに含まれた多数のピクセルに対応するようになることで、マスクデータDmの大きさが縮小され、マスクデータDmが保存されるバッファーのメモリー要件が減少されることができる。
しかし、本発明の実施例はこれに限定されない。例えば、本発明の代替実施例では、レンダリングロジッグ183のレンダリング動作は、多重ビットに規定されたマスクデータDmの値によって制御されることができる。例えば、マスクデータDmの値は、レンダリングロジッグ183によってレンダリングされる混合のレベル(例えば透明度のレベル)を識別することができる。
本発明の他の実施例では、レンダリングロジッグ183によって多数のレンダリング動作が支援される場合、マスクデータDmに含まれた値の一つ以上のビットは、所望のレンダリング動作を規定するために使用されることができ、一方、他のビットは、前記レンダリング動作の仕様を調整するために使用されることができる。
レンダリングロジッグ183は、エッジ−向上(edge−enhance)、ダッジ(dodge;明るくする)、バーン(burn;暗くする)などのように、ビデオ映像データDv及びオーバレイデータDrを利用して多様なレンダリング動作を遂行することができる。
本発明の他の実施例では、レンダリング動作は、ビデオ映像データDvの部分のカラーまたは白色度(luminosity)を変更することで、透明カラーリング{(Transparent coloring;またはハイライター(highlighter))效果またはアルファ合成の效果を発生させることができる。
本発明の一実施例では、レンダリングロジッグ183は2個の入力を受信することができる。例えば、第1入力は、ホスト150から供給されるビデオ映像データDvを含み、第2入力はオーバレイバッファー185から供給されるオーバレイデータDrを含むことができる。
オーバレイバッファー185は、レンダリングロジッグ183によってプロセッシングされるオーバレイデータDrを保存する。
オーバレイデータDrは、ホスト150から提供されるか、加速器180で内部的に生成されることができる。
オーバレイデータDrの特性は、ビデオ映像データDvの特性に整合されることで、マスクデータDmによってレンダリングされる時、結合された出力映像Icは、映像セグメント606及びオーバレイ映像セグメント608の間の切れ目のない転換を具現することができるようになる。例えば、前記特性は色相を含むことができる。
例えば、アプリケーションソフトウェアが黒いラインをドローイングすれば、オーバレイデータDrは、ソフトウェアがドローイングしたラインと同一の黒いカラー(例えば、ピクセル全てが黒いビットマップにされた映像)を含むようにホスト150によって提供されるか、加速器180によって内部的に生成されるであろう。
レンダリングロジッグ183は、マスクデータDmによってオーバレイデータDrとビデオ映像データDvとを結合することで結合された出力映像データDiを生成することができ、前記出力映像データDiを表示制御部140に供給することで結合された出力映像Icを表示パネル130に表示することができる。この時、結合された出力映像Icは、ホスト150からの映像セグメント606(例えば、ソフトウェアがドローイングしたライン)とオーバレイ映像セグメント608が隣接されることで形成される黒いラインを含むことができる。
オーバレイデータDrは、テクスチャー化またはカラー化されることができる。また、オーバレイデータDrは、ビットマップされた映像データを含むことができる。
オーバレイデータDrのコンテンツは、時間に対して動的でありえるし、ホスト150によって更新されたり、加速器180内のメカニズムによって更新されたりすることができる。また、オーバレイデータDrのコンテンツは大きさ及び形状において動的でありえる。
本発明の一実施例では、オーバレイデータDrは多数のオーバレイ映像を表現する多数の異なる「ページ」を含むことができる。例えば、多数のページは、互いに異なるカラー、異なる映像または異なるテックスチャーを有することができる。この場合、マスクデータDmに含まれた値は、レンダリングロジッグ183によってオーバレイデータDrの特定のページを識別し、レンダリング動作の間に識別されたページのみを使用することを可能にさせる情報を含むことができる。
また、マスクデータDmに含まれた値は、レンダリングロジッグ183によってレンダリング動作の間にオーバレイデータDrの異なるページの間で切り替えることが可能になるようにオーバレイデータDrのページに対するインデックスを含むことができる。
本発明の一実施例では、オーバレイデータDrの各ページに含まれた値の個数(または大きさ)は、一フレームのビデオ映像データDvに含まれたピクセルの個数と同一であり、これは結果的に結合された出力映像Icに含まれたピクセルの個数(または出力映像データDiに含まれたピクセルの個数)と同一である。そこで、オーバレイデータDrの各ページに含まれた値とビデオ映像データDvに含まれたピクセルの間には、それぞれ一対一の関係が存在しえる。
本発明の他の実施例では、オーバレイデータDrの各ページに含まれた値の個数(または大きさ)は、一フレームのビデオ映像データDvに含まれたピクセルの個数より少ないことがある。そこで、オーバレイデータDrの各ページに含まれた値とビデオ映像データDvに含まれたピクセルとの間には一対多の関係が存在しえる。したがって、オーバレイデータDrの特定値がビデオ映像データDvに含まれた多数のピクセルと対応するようになることで、オーバレイデータDrの大きさが縮小され、オーバレイバッファー185のメモリー要件が減少されることができる。例えば、一部の実施例では、オーバレイデータDrは、RGB(Red、Green、Blue)カラー値のような単一カラー値を含み、ここで、全体オーバレイ映像(またはオーバレイ映像セグメント608)は、前記単一カラー値によってドローイングされることができる。
本発明の他の実施例では、オーバレイデータDrの異なるページは、単一カラー(例えば、異なるカラー)に対応する単一値で構成されることができる。さらに、本発明の他の実施例では、単一値はビットマップされた映像を含む他のページと混在(Intermingle)されることができる。
図6を参照して本発明の実施例による加速器180の動作を追加的に説明する。特に、図6は、第k+1期間以後、第k+2期間の間に追加的なタッチイベントが発生した場合を示した。例えば、第k期間の間に発生したタッチイベントは「X」で表示しており、第k+1期間の間に発生したタッチイベントは、「+」で表示し、第k+2期間の間に発生したタッチイベントは「0」で表示した。
タッチ制御部120は、このような多数のタッチイベントについての情報Ti(例えば、位置または座標)を生成し、生成されたタッチイベント情報Tiをマスク生成ロジッグ181に供給することができる。この時、タッチイベント情報Tiは、第k+1期間に発生したタッチイベント(+)についての情報(第1タッチイベント情報)と、第k+2期間に発生したタッチイベント(0)についての情報(第2タッチイベント情報)に区分されることができる。
タッチ制御部120は、生成されたタッチイベント情報Tiを加速器180とホスト150に供給することができる。この時、ホスト150は、第k+1期間に発生したタッチイベント(+)についての情報(第1タッチイベント情報)を利用して、第k+1期間に発生したタッチイベント(+)に対応する映像セグメント700を追加的に表示するためのビデオ映像データDv’を生成することができる。例えば、ビデオ映像データDv’は、図5に示された映像セグメント606と新しい映像セグメント700とを共に含むビデオ映像データDv’を生成することができる。生成されたビデオ映像データDv’は、ホスト150によってレンダリングロジッグ183に供給されることができる。
マスク生成ロジッグ181は、タッチ制御部120から供給されたタッチイベント情報Tiを利用して、図5に示された推定タッチ経路Peと異なる推定タッチ経路Pe’を生成することができる。例えば、マスク生成ロジッグ181は、第k+2期間に発生したタッチイベント(0)についての情報(第2タッチイベント情報)を内挿及び/または外挿入することで、図6に示されたような推定タッチ経路Pe’を生成することができる。
前記推定タッチ経路Pe’は、マスク生成ロジッグ181によって再び新しいマスクデータDm’を生成するために使用されることができる。例えば、マスク生成ロジッグ181は、生成された推定タッチ経路Pe’を反映して、図5に示されたマスクデータDmと異なるマスクデータDm’を生成することができる。
レンダリングロジッグ183は、マスクデータDm’に応じて更新されたビデオ映像データDv’とオーバレイデータDrとを結合(混合または代替)して出力映像データDi’を生成することができる。
これによって、以前に表示されたオーバレイ映像セグメント608は、ホスト150で処理された(より精度が高い)映像セグメント700によって取り替えられ、第k+2期間に発生したタッチイベント(0)に対応するオーバレイ映像セグメント708が表示パネル130に表示されることができる。すなわち、更新された出力映像Ic’は、第k期間に発生したタッチイベントXに対応する映像セグメント606、第k+1期間に発生したタッチイベント(+)に対応する映像セグメント700、及び第k+2期間に発生したタッチイベント(0)に対応するオーバレイ映像セグメント708を含む。
図7は、本発明の第2実施例による映像表示システムを示した図面である。図7を参照すれば、本発明の第2実施例による映像表示システム200は、タッチパネル210、タッチ制御部220、表示パネル230、表示制御部240、ホスト250及び加速器280を含む。
この時、本発明の第2実施例による映像表示システム200は、上述した第1実施例と異なり、加速器280が表示制御部240内に含まれる。すなわち、加速器280は、表示制御部240とともに一つの構成要素として統合されることができる。例えば、加速器280と表示制御部240とは、統合された一つの集積回路によって具現されることができる。
本発明の第2実施例による映像表示システム200に含まれたタッチパネル210、タッチ制御部220、表示パネル230、表示制御部240、ホスト250及び加速器280についての説明は上述した実施例と重複する範囲については省略する。
図8は、本発明の第3実施例による映像表示システムを示した図面である。図8を参照すれば、本発明の第3実施例による映像表示システム300は、タッチパネル310、タッチ制御部320、表示パネル330、表示制御部340、ホスト350及び加速器380を含む。
この時、本発明の第3実施例による映像表示システム300は、上述した実施例と異なり、加速器380がタッチ制御部320内に含まれる。すなわち、加速器380は、タッチ制御部320とともに一つの構成要素として統合されることができる。例えば、加速器380とタッチ制御部320とは、統合された一つの集積回路によって具現されることができる。
本発明の第3実施例による映像表示システム300に含まれたタッチパネル310、タッチ制御部320、表示パネル330、表示制御部340、ホスト350、及び加速器380についての説明は上述した実施例と重複する範囲については省略する。
図9は、本発明の第4実施例による映像表示システムを示した図面である。図9を参照すれば、本発明の第4実施例による映像表示システム400は、タッチパネル410、タッチ制御部420、表示パネル430、表示制御部440、ホスト450及び加速器480を含む。
この時、本発明の第4実施例による映像表示システム400は、上述した実施例と異なり、加速器480がホスト450内に含まれる。すなわち、加速器480はホスト450とともに一つの構成要素として統合されることができる。
この時、加速器480は、ホスト450に含まれた別途の構成要素(例えば、中央処理装置451、グラフィック処理装置453及びメモリー455)と機能的に分離して具現されることが望ましい。したがって、タッチイベントが発生した場合、ホスト450に含まれた中央処理装置451とグラフィック処理装置453とを使用しなくとも、別途の加速器480によって前記タッチイベントに対する表示応答を処理することができるので、表示応答の時間を減少させることができる。例えば、加速器480とホスト450とは、統合された一つの集積回路として具現されることができる。
本発明の第4実施例による映像表示システム400に含まれたタッチパネル410、タッチ制御部420、表示パネル430、表示制御部440、ホスト450及び加速器480についての説明は上述した実施例と重複する範囲については省略する。
図10は、本発明の第5実施例による映像表示システムを示した図面である。図10を参照すれば、本発明の第5実施例による映像表示システム500は、タッチパネル510、タッチ制御部520、表示パネル530、表示制御部540、ホスト550及び加速器580を含む。
この時、本発明の第5実施例による映像表示システム500は、上述した実施例と異なり、加速器580とタッチ制御部520とが表示制御部540内に含まれる。すなわち、加速器580とタッチ制御部520は、表示制御部540とともに一つの構成要素として統合されることができる。例えば、加速器580、タッチ制御部520及び表示制御部540は、統合された一つの集積回路として具現されることができる。
本発明の第5実施例による映像表示システム500に含まれたタッチパネル510、タッチ制御部520、表示パネル530、表示制御部540、ホスト550及び加速器580についての説明は上述した実施例と重複する範囲については省略する。
以上のように、本発明では具体的な構成要素などのような特定事項と限定された実施例及び図面によって説明されたが、これは本発明のより全般的な理解のために提供されたものであるだけで、本発明は上記実施例に限定されるものではなく、本発明の属する分野における通常の知識を有する者であれば、上記の記載より多様な修正及び変形が可能である。したがって、本発明の思想は、説明された実施例に限定されてはならず、後述する特許請求の範囲のみならず、特許請求の範囲と均等または等価的変形のあるすべてのものは、本発明の思想の範疇に属するといえる。
100、200、300、400、500 映像表示システム、
110、210、310、410、510 タッチパネル、
120、220、320、420、520 タッチ制御部、
130、230、330、430、530 表示パネル、
140、240、340、440、540 表示制御部、
150、250、350、450、550 ホスト、
180、280、380、480、580 加速器、
151、451 中央処理装置、
153、453 グラフィック処理装置、
155、455 メモリー、
181 マスク生成ロジック、
183 レンダリングロジック、
185 オーバレイバッファー。

Claims (29)

  1. ホストと、
    タッチパネルから出力されるタッチ信号に基づいてタッチイベント情報を生成し、
    前記タッチイベント情報を加速器に供給するタッチ制御部と、
    前記タッチ制御部から供給されたタッチイベント情報に基づいてタッチイベントに係わる出力映像データを生成する加速器と、
    前記加速器によって生成された出力映像データを表示パネルに供給する表示制御部と、を含むことを特徴とする映像表示システム。
  2. 前記加速器は、前記ホスト、前記タッチパネル、前記タッチ制御部、前記表示パネル及び前記表示制御部と別個で分離して存在することを特徴とする請求項1に記載の映像表示システム。
  3. 前記加速器は、前記表示制御部内に含まれたことを特徴とする請求項1に記載の映像表示システム。
  4. 前記加速器は、前記タッチ制御部内に含まれたことを特徴とする請求項1に記載の映像表示システム。
  5. 前記加速器は、前記ホスト内に含まれたことを特徴とする請求項1に記載の映像表示システム。
  6. 前記タッチ制御部と前記加速器は、前記表示制御部内に含まれたことを特徴とする請求項1に記載の映像表示システム。
  7. 前記加速器は、前記タッチイベント情報を受信し、前記タッチイベント情報に基づいてマスクデータを生成するマスク生成ロジッグと、
    前記マスクデータに応じてビデオ映像データとオーバレイデータとを結合させて出力映像データを生成するレンダリングロジッグと、
    を含むことを特徴とする請求項1〜6のいずれか一項に記載の映像表示システム。
  8. 前記加速器は、前記オーバレイデータを保存するオーバレイバッファーをさらに含むことを特徴とする請求項7に記載の映像表示システム。
  9. 前記マスク生成ロジッグは、前記タッチイベント情報に基づいて推定タッチ経路を計算し、前記推定タッチ経路に沿って前記マスクデータを生成することを特徴とする請求項7または請求項8に記載の映像表示システム。
  10. 前記マスクデータは、前記出力映像データ内のピクセルに対応する位置を示す多数の値を含むことを特徴とする請求項7〜9のいずれか一項に記載の映像表示システム。
  11. 前記レンダリングロジッグは、
    前記出力映像データ内のそれぞれのピクセルごとに、前記マスクデータ内の対応する位置での値に応じて前記ビデオ映像データの対応するピクセルまたは前記オーバレイデータを出力するかどうかを決定することで、前記ビデオ映像データを前記オーバレイデータと結合するように構成されることを特徴とする請求項10に記載の映像表示システム。
  12. 前記レンダリングロジッグは、前記出力映像データ内のそれぞれのピクセルごとに、前記マスクデータ内の対応する位置での値に応じて前記ビデオ映像データの対応するピクセル及び前記オーバレイデータを混合することで、前記ビデオ映像データを前記オーバレイデータと結合するように構成されることを特徴とする請求項10に記載の映像表示システム。
  13. 前記マスクデータのそれぞれの値は、前記出力映像データ内のそれぞれのピクセルに対応することを特徴とする請求項10〜12のいずれか一項に記載の映像表示システム。
  14. 前記マスクデータのそれぞれの値は、前記出力映像データ内の一つ以上のピクセルに対応することを特徴とする請求項10〜12のいずれか一項に記載の映像表示システム。
  15. 前記タッチパネルは、前記タッチ制御部にタッチ信号を供給し、前記タッチ制御部は、前記タッチパネルから供給されたタッチ信号を利用して前記タッチイベント情報を生成することを特徴とする請求項1〜14のいずれか一項に記載の映像表示システム。
  16. 前記タッチパネルは、静電容量方式のタッチパネル、抵抗膜方式のタッチパネル、光タッチパネル、表面弾性波タッチパネル、圧力タッチパネル及びハイブリッド方式のタッチパネルのうちいずれか一つによって具現されることを特徴とする請求項15に記載の映像表示システム。
  17. 前記ホストは、前記ビデオ映像データを生成することを特徴とする請求項7〜14のいずれか一項に記載の映像表示システム。
  18. 前記オーバレイデータは、前記ビデオ映像データと同一の色相を有することを特徴とする請求項7〜14のいずれか一項に記載の映像表示システム。
  19. 前記オーバレイデータは、多数のページを含むことを特徴とする請求項7〜14のいずれか一項に記載の映像表示システム。
  20. 前記マスクデータは、前記オーバレイデータに含まれた多数のページのうち、少なくともいずれか一つを識別する情報を含むことを特徴とする請求項19に記載の映像表示システム。
  21. 前記オーバレイデータは、ビットマップされた映像を含むことを特徴とする請求項7〜14のいずれか一項に記載の映像表示システム。
  22. 前記オーバレイデータは、単一色相値を有することを特徴とする請求項7〜14のいずれか一項に記載の映像表示システム。
  23. 前記オーバレイバッファーは、前記ホストから供給されたオーバレイデータを保存することを特徴とする請求項8〜14のいずれか一項に記載の映像表示システム。
  24. 前記タッチイベント情報は、第n期間に発生されたタッチイベントに対する第1タッチイベント情報と、第n+1期間に発生されたタッチイベントに対する第2タッチイベント情報とを含むことを特徴とする請求項7〜14のいずれか一項に記載の映像表示システム。
  25. 前記タッチ制御部は、前記タッチイベント情報を前記ホストに供給することを特徴とする請求項24に記載の映像表示システム。
  26. 前記マスク生成ロジッグは、前記第2タッチイベント情報に基づいて前記マスクデータを生成し、
    前記ホストは、前記第1タッチイベント情報に基づいて前記ビデオ映像データを生成することを特徴とする請求項25に記載の映像表示システム。
  27. 前記ホストは、中央処理装置及びグラフィック処理装置を含むことを特徴とする請求項1〜26のいずれか一項に記載の映像表示システム。
  28. 前記中央処理装置は、オーバレイデータを前記加速器に供給し、
    前記グラフィック処理装置は、ビデオ映像データを前記加速器に供給することを特徴とする請求項27に記載の映像表示システム。
  29. 前記出力映像データは、オーバレイデータと、前記ホストから供給されたビデオ映像データが結合されたものであることを特徴とする請求項1〜28のいずれか一項に記載の映像表示システム。
JP2015082753A 2014-04-21 2015-04-14 映像表示システム Active JP6545996B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0047628 2014-04-21
KR1020140047628A KR102171389B1 (ko) 2014-04-21 2014-04-21 영상 표시 시스템

Publications (2)

Publication Number Publication Date
JP2015207287A true JP2015207287A (ja) 2015-11-19
JP6545996B2 JP6545996B2 (ja) 2019-07-17

Family

ID=54322041

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015082753A Active JP6545996B2 (ja) 2014-04-21 2015-04-14 映像表示システム

Country Status (4)

Country Link
US (1) US9851835B2 (ja)
JP (1) JP6545996B2 (ja)
KR (1) KR102171389B1 (ja)
CN (1) CN105022580B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023219052A1 (ja) * 2022-05-09 2023-11-16 株式会社ワコム コンピュータ

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102314110B1 (ko) * 2014-09-16 2021-10-18 삼성디스플레이 주식회사 시각화 가속부를 포함하는 터치 표시 장치
US20170123622A1 (en) * 2015-10-28 2017-05-04 Microsoft Technology Licensing, Llc Computing device having user-input accessory
KR102411703B1 (ko) * 2015-10-30 2022-06-23 삼성디스플레이 주식회사 영상 표시 시스템
KR102523421B1 (ko) * 2016-03-03 2023-04-20 삼성디스플레이 주식회사 표시 장치 및 그 구동 방법
KR101897627B1 (ko) * 2017-02-22 2018-09-12 서경대학교 산학협력단 터치처리장치 및 이를 구비하는 디스플레이 모듈
CN110771160A (zh) * 2018-07-23 2020-02-07 深圳市大疆创新科技有限公司 视频均匀显示方法、终端设备、机器可读存储介质
CN109725802B (zh) * 2018-12-17 2021-02-23 浙江口碑网络技术有限公司 页面交互方法及装置
KR102166684B1 (ko) * 2019-04-30 2020-10-16 서경대학교 산학협력단 터치처리장치 및 이를 구비하는 디스플레이 기기

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0473680A (ja) * 1990-07-13 1992-03-09 Canon Inc 表示制御装置
JPH05204588A (ja) * 1992-01-28 1993-08-13 Casio Comput Co Ltd カーソルパターン表示制御装置
JPH09185454A (ja) * 1996-01-08 1997-07-15 Canon Inc 座標入力方法及びその装置
JPH09190276A (ja) * 1996-01-12 1997-07-22 Canon Inc データ出力方法とその装置
JP2000056753A (ja) * 1998-08-07 2000-02-25 Nec Yonezawa Ltd 表示入力装置及び表示入力方法
JP2002262169A (ja) * 2001-02-27 2002-09-13 Sony Corp 撮像装置および方法
JP2010165269A (ja) * 2009-01-19 2010-07-29 Renesas Electronics Corp コントローラドライバ、表示装置及び制御方法
US20100241957A1 (en) * 2009-03-19 2010-09-23 Samsung Electronics Co., Ltd. System with ddi providing touch icon image summing
US20100277429A1 (en) * 2009-04-30 2010-11-04 Day Shawn P Operating a touch screen control system according to a plurality of rule sets
JP2011199450A (ja) * 2010-03-18 2011-10-06 Konica Minolta Business Technologies Inc 会議システム、情報処理装置、表示方法および表示プログラム
JP2013064818A (ja) * 2011-09-16 2013-04-11 Ricoh Co Ltd 画像表示装置
JP2013137368A (ja) * 2011-12-28 2013-07-11 Hitachi Consumer Electronics Co Ltd 投写表示装置およびその画像表示制御方法
WO2014069249A1 (ja) * 2012-11-02 2014-05-08 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6806883B2 (en) * 2002-03-11 2004-10-19 Sun Microsystems, Inc. System and method for handling display device requests for display data from a frame buffer
CA2601792C (en) * 2005-03-30 2016-02-09 United Video Properties, Inc. Systems and methods for video-rich navigation
JP2007011837A (ja) * 2005-07-01 2007-01-18 Nec Corp 電子機器、認証情報入力方法及び認証情報入力プログラム
JP2007264123A (ja) * 2006-03-27 2007-10-11 Otsuka Denshi Co Ltd カラーディスプレイの動画質改善方法及びプログラム
JP5216495B2 (ja) * 2008-09-16 2013-06-19 株式会社ジャパンディスプレイウェスト 接触検出装置および表示装置
JP5252427B2 (ja) * 2008-10-01 2013-07-31 株式会社ジャパンディスプレイウェスト 入力装置および表示装置
US8633904B2 (en) * 2009-04-24 2014-01-21 Cypress Semiconductor Corporation Touch identification for multi-touch technology
US20110161620A1 (en) * 2009-12-29 2011-06-30 Advanced Micro Devices, Inc. Systems and methods implementing shared page tables for sharing memory resources managed by a main operating system with accelerator devices
US9189147B2 (en) * 2010-06-22 2015-11-17 Microsoft Technology Licensing, Llc Ink lag compensation techniques
JP5593980B2 (ja) * 2010-09-02 2014-09-24 株式会社ニコン 電子機器及びデータ送信方法
KR20120047055A (ko) * 2010-11-03 2012-05-11 삼성전자주식회사 디스플레이 장치 및 이에 적용되는 그래픽 영상 제공방법
US9229567B2 (en) * 2012-01-27 2016-01-05 Blackberry Limited Electronic device including touch-sensitive display
US9612739B2 (en) * 2012-02-02 2017-04-04 Microsoft Technology Licensing, Llc Low-latency touch-input device
US9250700B2 (en) * 2013-02-28 2016-02-02 Apple Inc. System and method for virtual displays
US9383840B2 (en) * 2013-04-22 2016-07-05 Samsung Display Co., Ltd. Method and apparatus to reduce display lag using image overlay
US9483176B2 (en) * 2013-07-08 2016-11-01 Samsung Display Co., Ltd. Method and apparatus to reduce display lag of soft keyboard presses

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0473680A (ja) * 1990-07-13 1992-03-09 Canon Inc 表示制御装置
JPH05204588A (ja) * 1992-01-28 1993-08-13 Casio Comput Co Ltd カーソルパターン表示制御装置
JPH09185454A (ja) * 1996-01-08 1997-07-15 Canon Inc 座標入力方法及びその装置
JPH09190276A (ja) * 1996-01-12 1997-07-22 Canon Inc データ出力方法とその装置
JP2000056753A (ja) * 1998-08-07 2000-02-25 Nec Yonezawa Ltd 表示入力装置及び表示入力方法
JP2002262169A (ja) * 2001-02-27 2002-09-13 Sony Corp 撮像装置および方法
JP2010165269A (ja) * 2009-01-19 2010-07-29 Renesas Electronics Corp コントローラドライバ、表示装置及び制御方法
US20100241957A1 (en) * 2009-03-19 2010-09-23 Samsung Electronics Co., Ltd. System with ddi providing touch icon image summing
US20100277429A1 (en) * 2009-04-30 2010-11-04 Day Shawn P Operating a touch screen control system according to a plurality of rule sets
JP2011199450A (ja) * 2010-03-18 2011-10-06 Konica Minolta Business Technologies Inc 会議システム、情報処理装置、表示方法および表示プログラム
JP2013064818A (ja) * 2011-09-16 2013-04-11 Ricoh Co Ltd 画像表示装置
JP2013137368A (ja) * 2011-12-28 2013-07-11 Hitachi Consumer Electronics Co Ltd 投写表示装置およびその画像表示制御方法
WO2014069249A1 (ja) * 2012-11-02 2014-05-08 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023219052A1 (ja) * 2022-05-09 2023-11-16 株式会社ワコム コンピュータ
US12002409B2 (en) 2022-05-09 2024-06-04 Wacom Co., Ltd. Computer

Also Published As

Publication number Publication date
US20150301678A1 (en) 2015-10-22
CN105022580A (zh) 2015-11-04
KR102171389B1 (ko) 2020-10-30
US9851835B2 (en) 2017-12-26
KR20150121781A (ko) 2015-10-30
JP6545996B2 (ja) 2019-07-17
CN105022580B (zh) 2020-06-09

Similar Documents

Publication Publication Date Title
JP6560484B2 (ja) イメージオーバレイを用いてディスプレイ遅延を低減する方法及び装置
JP6545996B2 (ja) 映像表示システム
US9710098B2 (en) Method and apparatus to reduce latency of touch events
KR102240294B1 (ko) 터치 입력을 이용하여 디스플레이 오버레이 파라미터를 생성하는 시스템 및 그 방법
US10110832B2 (en) Method and apparatus to reduce display lag using scaling
US9811301B2 (en) Terminal and apparatus and method for reducing display lag
KR102304891B1 (ko) 터치 경로에 대응하는 디스플레이 패널에 대한 마스크 오버레이를 생성하기 위한 방법 및 시스템
WO2021061163A1 (en) Routing input to on-screen display
KR20160032766A (ko) 시각화 가속부를 포함하는 터치 표시 장치
RU2566975C2 (ru) Система, способ и компьютерная программа для функционирования множества вычислительных устройств
CN104820489B (zh) 管理低延时的直接控制反馈的系统和方法
CN116382555A (zh) 投屏窗口化反向触控方法及智慧屏、存储介质
JP2020088648A (ja) 表示装置、及び表示方法

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20170421

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20170519

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180411

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20180810

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20181102

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190521

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190620

R150 Certificate of patent or registration of utility model

Ref document number: 6545996

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250