JP2004517391A - 画面上の透明なキーボードインターフェース - Google Patents
画面上の透明なキーボードインターフェース Download PDFInfo
- Publication number
- JP2004517391A JP2004517391A JP2002539939A JP2002539939A JP2004517391A JP 2004517391 A JP2004517391 A JP 2004517391A JP 2002539939 A JP2002539939 A JP 2002539939A JP 2002539939 A JP2002539939 A JP 2002539939A JP 2004517391 A JP2004517391 A JP 2004517391A
- Authority
- JP
- Japan
- Prior art keywords
- interface
- processor
- transparent
- transparent keyboard
- text
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 claims description 32
- 239000000872 buffer Substances 0.000 description 108
- 238000002156 mixing Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 8
- 238000013479 data entry Methods 0.000 description 6
- 238000012546 transfer Methods 0.000 description 5
- 230000003139 buffering effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
- G09G5/026—Control of mixing and/or overlay of colours in general
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04804—Transparency, e.g. transparent or translucent windows
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Input From Keyboards Or The Like (AREA)
- Silver Salt Photography Or Processing Solution Therefor (AREA)
- Electrophonic Musical Instruments (AREA)
- Position Input By Displaying (AREA)
- Auxiliary Devices For Music (AREA)
- Liquid Crystal Display Device Control (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Abstract
Description
[背景]
本発明は、概して、プロセッサベースのシステム用のディスプレイ装置に関する。
【0002】
多数のプロセッサベースのシステムの入力/出力の能力は比較的限定されている。例えば、手持ち式コンピュータシステムによっては、関連するキーボードが付いていないものがある。テキスト入力は、1つの例では、タッチスクリーンを用いて行われる。ユーザは、スタイラス又は指を用いて各キーに対する適当な領域をタッチすることにより、画面上のキーボードを介してデータを入力する。
【0003】
インターネット用タブレット及び個人用携帯情報端末(PDA)を含む多数の他の手持ち式コンピュータ装置には、データ入力を容易にするより優れた方法に対する要求がある。画面上に専用のキーボードを設けるには、極めて多くの利用可能な表示空間を必要とする。このことは、多くの場合、データ入力は必要ではないが、表示の一部がキーボードを収容するために欠けることがあるため特にそう言える。
【0004】
ユーザは、ダイアログボックス又はウェブページのフィールドにデータを入力したいと思うことがある。このため、このユーザは、ダイアログボックス及びキーボードを同時に見たいと思うことがある。多くの限定された表示画面では、これは可能ではない。例えば、画面上のキーボードを介してデータ入力をできるようにする、及び利用可能な情報を全て見ることができるようにする十分な表示空間がない。
【0005】
多くの装置のキーボードは、テキスト情報のデータ入力を行うには多少難しいぐらい大きさが非常に縮小されている。これらの場合も同様に、テキストデータをプロセッサベースのシステムに入力するより優れた方法が望まれる。
【0006】
従って、物理的なキーボードを用いることなしに、データ入力を容易にするより良い方法に対する継続する要望がある。
【0007】
[詳細な説明]
ディスプレイ500は、図1に示すように、インターネット用タブレット、個人用携帯情報端末、手持ち式プロセッサベースのシステム又はその他のプロセッサベースのシステムなどのプロセッサベースのシステムに接続されている。図示した実施形態では、グラフィカルユーザーインターフェース502は、インターネットのウェブサイトに接続されたウェブページ504を示すブラウザの表示である。この場合、インターネットのウェブサイトは、ユーザが行うための多数のテキスト入力ボックス506を備えている。
【0008】
あたかもページ504上に重ね合わされたように見えるものは、透明なキーボードインターフェース508である。このインターフェース508は点線で表示され、ユーザがキーイメージ510及びキーイメージ510上に記入された符号512を見ることができるようにするだけでなく、キーイメージ510を「通過(through)」して明らかに下側のテキスト及びグラフィックスを効果的に見ることができるようにする比較的透明な表示を行う。その結果、ユーザがキーイメージ510を選択して透明なキーボードインターフェース508上にデータを入力すると同時に、ユーザはテキスト入力ボックス506に関連した情報を読むことができる。「透明(transparent)」にすることにより、「透明」なテキスト又はグラフィックスの下に又はそれを通過してテキスト又はグラフィックスが見えるように現れる機能について触れることを目的にする。
【0009】
本発明のいくつかの実施形態では、ディスプレイ500はタッチスクリーン式ディスプレイとすることができる。別の実施形態では、マウスを使用してテキストを入力するために特定のキーイメージ510を選択する、液晶ディスプレイのような従来のディスプレイを使用することができる。さらに別の選択肢では、音声入力機能を使用して、音声でもキーを選択できるようにする。
【0010】
このようにして、ユーザは透明なキーイメージ510を選択することによってデータを選択的に入力し、これによりテキストを選択されたデータ入力ボックス506の中に入力させることができる。本発明のいくつかの実施形態では、インターフェース502をキーボードモード又は非キーボードモードのいずれかの中に配置する。キーボードモードでは、キーイメージ510のいずれかを選択することにより、テキストをテキスト入力ボックス506の中に入力させる。非キーボードモードでは、キーイメージ510は非活動状態であり、実施例として、ユーザはテキストを入力するためにテキスト入力ボックス506の1つを選択することができる。このことは、インターフェース508が関連するテキスト入力ボックス506に重なり合うように見える場合でさえ行われる。この方法では、プロセッサベースのシステムの中心は、実施例として、キーボードインターフェース508又はテキスト入力ボックス506に置かれる。モードの選択は、本発明の1つの実施形態では、マウス又はスタイラスのようなポインティング装置を用いて適当なアイコン514を選択することにより行われる。別の実施形態では、ハードウェアのボタンを用いて、中心(focus)を変化させることができる。
【0011】
混合動作によって、キーボードインターフェース508及びテキスト入力ボックス506のような2つの比較的はっきりした画面のイメージを示す信号は、一方の画面のイメージが他方に重なり合って見えるように電子的に混合される。実際に、どちらのイメージも他方の上又は下になることはない。その代わり、第1及び第2のイメージの電子的表示は混合されて、ユーザが一方のイメージを通して他方のイメージを見ていると信じているため、一方の層が他方に重なり合っているという印象をユーザに与える。
【0012】
キーボードインターフェース508及びテキスト入力ボックス506のような所定のイメージの透明性(transparency)は、動的に変更することができる。例えば、ユーザが所定の時間の後でキーボードインターフェース508を用いてテキストを入力することに失敗する場合、キーボードインターフェース508の透明性を増加する一方、テキスト入力ボックス506の透明性を減少することができる。その結果、キーボードインターフェース508よりも太くて目立つように思われるテキスト入力ボックス506に、中心が変化するように見える。このように、様々な環境において、透明性の自動的で動的な変化は、2つの別個のイメージの表示の相対的な混合を調整することによって実現することができる。
【0013】
オペレーティングシステムの出力フレームバッファは、コンピュータシステムの現在の表示データを記憶するために使用されるメモリの領域である。このオペレーティングシステムの出力フレームバッファは、オペレーティングシステムが利用できる任意のメモリに割り当てることができる。フレームバッファは、画素データの二次元配列を記憶する記憶位置の組である。オペレーティングシステムの出力フレームバッファは、コンピュータのモニタ上のデータ信号の生成及び表示を制御する、コンピュータシステムのオペレーティングシステムのソフトウェアに対応付けられる。
【0014】
透明フレームバッファは、図1に示した透明なキーボードインターフェース508の表示データを記憶するために使用されるメモリの領域である。この表示データは、テキスト又はグラフィックスの他の従来の透明でない表示データ信号とほぼ同時に同じページ504上に表示される。従来のテキスト及びグラフィックスは、オペレーティングシステムの出力フレームバッファから引き出される。透明フレームバッファは、システムで使用可能な任意のメモリ内に割り当てることができる。
【0015】
オペレーティングシステムの出力フレームバッファ及び透明フレームバッファの表示要素は、いくつかの実施形態では、各バッファの対応する画素を色混合することにより結合され、同時に色混合動作の結果として生じた画素をオペレーティングシステムの出力フレームバッファの画素とインターリーブすることにより可視の表示フレームバッファの表示要素が形成される。
【0016】
本発明の実施形態によれば、透明性効果を生ずる方法では、低減された表示要素の混合が使用される。その代わりに、その方法は、コンピュータのモニタ上の隣接する画素の色の間を見分けることが人の眼ではできないことに依存する(本質的に、人の眼は各画素をその隣の画素と平均する)。コンピュータのモニタが大きいこと及び表示分解能が低いことは、画素がこのようにインターリーブされる場合、結果として「チェッカーボード(checkerboard)」効果を生ずるため、何らかの混合が行われる。
【0017】
1つの実施形態では、2つのフレームバッファの画素が、データが現在ディスプレイ上で視覚化されている表示バッファにインターリーブされる場合、第1のフレームバッファ(オペレーティングシステムの出力フレームバッファなど)からの画素の半分は、第2のフレームバッファ(透明フレームバッファなど)からの画素の半分と平均化される。画素の一部を平均化することにより、透明性の効果を与える場合に使用される処理パワーが減少される。別の実施形態では、画素の種々の割合が平均され(例えば、画素の1/4、画素の1/8、画素の1/16、画素の1/32、又は画素の1/N、ここでNは正の整数)、それらの割合を動的に変えることができる。
【0018】
図2は、本発明に基づいて透明性表示を発生する方法により動作することができる見本のシステムを例証する図である。見本のシステム100は、例えば、本願で説明される方法の処理を実行するために使用することができる。見本のシステム100は、Intel Corporationから購入できるPENTIUM(登録商標)、PENTIUM(登録商標)Pro、及びPENTIUM(登録商標)IIマイクロプロセッサをベースにしたコンピュータシステムを示すが、他のシステムも使用することができる。見本のシステム100は、マイクロプロセッサ102及びプロセッサバス105を介して互いに接続されたキャッシュメモリ104を含む。見本のシステム100は、第1のI/Oバス108及び第2のI/Oバス118も含む。プロセッサバス105及び第1のI/Oバス108は、ホストブリッジ106によってブリッジされ、一方、第1のI/Oバス及び第2のI/Oバス118は、I/Oバスブリッジ110によってブリッジされる。メインメモリ112及びビデオメモリ114は、第1のI/Oバス108に接続される。ビデオディスプレイ122は、ビデオメモリ114に接続される。大容量記憶装置120及びマウス又は他のポインティング装置122は、第2のI/Oバス118に接続される。
【0019】
大容量記憶装置120は、本発明の実施形態に基づいて透明なキーボードインターフェースを提供する方法に対する実行可能な命令の長期間の記憶を行うために使用され、一方メインメモリ112は、マイクロプロセッサ102が実行する間に、本発明の実施形態に基づいて透明な表示を提供する方法の実行可能な命令を短期間記憶するために使用される。さらに、命令は、例えばコンパクトディスクのリードオンリーメモリ(CD−ROM)、ディジタル多用途ディスク(DVD)、及びフロッピーディスクなどの、システムがアクセス可能な機械可読媒体上に記憶することができる。
【0020】
図3は、本発明の1つの実施形態に基づいて透明なグラフィックスを実現するための、ソフトウェア及びハードウェアのスタックの図である。アプリケーションプログラム200は、透明性支援ソフトウェア202が提供する透明な表示オブジェクト呼出し機能を使用するために特に設計され、透明な表示オブジェクトを形成及び更新する。すなわち、透明性表示機能を使用するために、そのような機能に対するいくつかの呼出しがアプリケーションプログラムの中にプログラムされる。画面上の透明なキーボードインターフェースのアプリケーションは、そのようなアプリケーションプログラムの1つの実施例である。
【0021】
透明性支援ソフトウェア202は、起動されると、この実施形態では、オペレーティングシステムのグラフィックスレンダリングアプリケーションプログラミングインターフェース(graphics rendering application programming interface)(グラフィックスAPI)204を呼び出す。例えば、Windows 95(登録商標)及びWindows 98(登録商標)のオペレーティングシステムでは、これはグラフィックスディバイスインターフェース(Graphics Device Interface)(GDI)である。この実施形態では、透明性支援ソフトウェア202は、オペレーティングシステムのビデオハードウェア制御抽出アプリケーションプログラミングインターフェース(video hardware control abstraction application programming interface)(ビデオ制御API)も呼び出す。Windows 95(登録商標)及びWindows 98(登録商標)のオペレーティングシステムでは、これはMicrosoft Corporationから入手可能なDirectDraw APIとなる。いくつかのオペレーティングシステムでは、グラフィックスAPI204及びビデオ制御API206は、同じアプリケーションプログラミングインターフェース内にあるため、互いに区別することができない。
【0022】
グラフィックスAPI204は、要求されたグラフィックスを透明グラフィックスフレームバッファ18に与えるために使用することができる。ビデオ制御API206は、フレームバッファの可視性を制御し、全てのフレームバッファの内容にアクセスするために使用することができる。この実施形態において、グラフィックスAPI204及びビデオ制御API206は、表示ドライバソフトウェア208と相互に作用してビデオカード210と通信する。このビデオカード210は、図2のシステムのビデオディスプレイを制御する。ビデオカード210は、ビデオメモリ114にアクセスして表示データを取得する。
【0023】
一般に、例えば、ビデオメモリ114内に画素データのフレームバッファを作ることによって、液晶ディスプレイ(LCD)のようなディスプレイ上にイメージを表示することができる。このフレームバッファを、ビデオ制御API206によってビデオメモリの可視部分として指定することができる。十分な量の使用可能なビデオメモリがある場合、複数のフレームバッファを形成して、一度にその1つだけを(ビデオカード210が)使用して、現在の可視表示を形成するデータ信号を得ることができる。
【0024】
周知のダブルバッファリング方式では、第1のフレームバッファが「可視の(visible)」バッファと考えられ、ビデオカード210はそこからデータ信号を読み取って、現在の表示データ信号を取得し、その間に第2のフレームバッファ(すなわち、「不可視の(non−visible)」バッファ)に新しい表示データが書き込まれる。この実施形態では、次に、ビデオ制御APIが呼び出されて、第2のフレームバッファを可視のバッファに指定し、第1のフレームバッファを不可視のバッファに指定することによって、フレームバッファの状態を「反転(flip)」させる。この技術を使用することにより、表示データの円滑な更新が提供されて、結果としてユーザに対して美的に満足な表示が行われる。本発明の実施形態は、この考え方を拡張して特別なフレームバッファを使用し、通常の表示データと共に透明な表示データ信号を提供する。
【0025】
図4は、透明なグラフィックスを提供するために使用される複数のフレームバッファの実施形態を例証する図である。ビデオメモリ114の1つの指定された部分は、コンピュータのモニタ上に一度に可視のグラフィックスとして表示されるように割り当てられる。これは「可視表示」と呼ばれる。すなわち、ユーザが見るために現在表示されている可視表示は、ビデオメモリ114の領域からの表示データを含む。一般に、この実施形態では、オペレーティングシステムのソフトウェアのグラフィックスAPI204は、表示ドライバ208及び/又はビデオ制御API206を用いて、オペレーティングシステムの出力フレームバッファ10にデータ信号を書き込む。ごく最近のシステムでは、ビデオメモリ114内にあるオペレーティングシステムの出力フレームバッファ10は、可視表示に使用される。しかしながら、本発明の実施形態では、他のフレームバッファを可視表示として使用することができる。
【0026】
第1の作業フレームバッファ300及び第2の作業フレームバッファ302は、両方ともビデオメモリ114又は他のアクセス可能なメモリ内にあり、本発明の実施形態に基づいて表示データを記憶する。この実施形態では、各フレームバッファ300又は302は、画素データ信号の配列を記憶する。各画素は、1つの実施形態では、赤(R)、緑(G)、青(B)、及び不透明(A)な要素を含む。別の方法では、YUV又はYUVAなどの他の色空間も使用することができる。メインメモリ112の中にある透明フレームバッファ18は、この実施形態では、透明性支援ソフトウェア202、ビデオ制御API206、及びグラフィックスAPI204によって作られた透明な表示データを記憶する。
【0027】
1つの実施形態では、透明フレームバッファ18からのデータ信号は、オペレーティングシステムの出力フレームバッファ10からのデータ信号と色混合及びインターリーブされ、次に、作業フレームバッファ302に記憶される。この混合及びインターリーブされたデータは、作業フレームバッファ302が「不可視」状態にある場合は、作業フレームバッファ302に記憶される(すなわち、この実施形態では、フレームバッファに記憶されるデータは現在表示されない)。作業フレームバッファ302が不可視状態に書き込みされている間は、作業フレームバッファ300は「可視」状態にあり、現在の表示データのソースとして使用される。
【0028】
色混合及びインターリーブ動作が作業フレームバッファ302に対して完了すると、不可視の作業フレームバッファ302は可視の作業フレームバッファに指定され、この逆の場合も同様である。このダブルバッファリング処理は、1つの実施形態では、毎秒5回以上の割合で繰り返されて、ユーザに目に見える表示を提供する。
【0029】
本発明の実施形態では、透明フレームバッファ18及びオペレーティングシステムの出力フレームバッファ10の画素のインターリーブは、次のように行われる。1つの実施形態では、選択された作業フレームバッファ302における画素の交替は、透明フレームバッファ18の画素値及び空間的に対応するオペレーティングシステムの出力フレームバッファ10の画素値を混合することによって書き込まれる。選択された作業フレームバッファ302内の他の画素は、オペレーティングシステムの出力フレームバッファ10からの画素が書き込まれる。
【0030】
図4Aは、本発明の1つの実施形態の画素混合配列の概略図である。要素312は作業フレームバッファを示し、一方ブロック310及び311はフレームバッファ内の特定の画素を示す。透明フレームバッファ18とオペレーティングシステムの出力フレームバッファ10との間の交替画素混合(alternating pixel mixing)の1つの方法の1つの実施形態では、選択された作業フレームバッファ内の「T+OS混合」画素311は、透明フレームバッファ18からの画素(T値)及びオペレーティングシステムの出力フレームバッファ10からの画素(OS値)の色平均化混合から成る。選択された作業フレームバッファ302内の「OS」画素310は、オペレーティングシステムの出力フレームバッファ10からコピーされた空間的に対応する画素を含む。このため、T+OS画素は、図4Aに示すように、OS画素を散在させて、所望の透明性効果を達成する。
【0031】
この実施形態では、色平均化は、2つのフレームバッファ18及び10内の対応する位置からの各画素の各色成分に対して加重平均法を行うことにより実行される。しかし他の実施形態では、種々の色混合方法も使用される。1つの実施形態では、第1の画素の成分値を重み値で乗算し、第2の画素の同じ成分値を異なる重み値で乗算することによって行われる。次に、2つの重み付けられた色成分は合算され、結果として生じた合計は2つの重み値の合計により割算される。この方法は、アルファブレンディング(alpha blending)として周知である。
【0032】
図5は、透明なグラフィックスを提供するためにシステムを初期化する実施形態を例証するソフトウェア399用のフローチャートである。ブロック400において、オペレーティングシステムの表示出力制御情報が決定される。この制御情報は、表示の大きさ、色分解能、及び他のデータを含む。次に、、この実施形態では、ブロック402で2つの作業フレームバッファ300,302がビデオメモリ114の中に割り当てられる。これらの動作は、この実施形態では、ビデオ制御API206を呼び出すことによって行われる。ブロック404において、ブロック転送動作が行われて、通常は可視のオペレーティングシステムの出力フレームバッファ10からのデータを2つの作業フレームバッファ300,302の選択された1つにコピーする。この実施例では、作業フレームバッファ300が最初に選択されると仮定する。ブロック転送は、この実施形態では、ビデオ制御API206を呼び出すことによって行われる。ブロック406では、オペレーティングシステムの出力フレームバッファ10は、ビデオ制御API206を呼び出すことによって、「不可視」状態に設定される。ブロック408では、選択された作業フレームバッファ300は、この実施形態ではビデオ制御API206を呼び出すことによって、可視状態にされる(ブロック408)。いくつかの実施形態では、ブロック406及び408は、ビデオ制御APIに対する1つの呼出しによって実行される。この時点で、ビデオカードの現在の表示出力データは、オペレーティングシステムの出力フレームバッファ10からではなく、選択された作業フレームバッファ300から得られる。
【0033】
図6は、ダブルバッファリングソフトウェア410の実施形態を示すフローチャートである。この実施形態では、ブロック転送動作がブロック412で行われて、ビデオ制御API206に対する呼出しにより、オペレーティングシステムの出力フレームバッファ10を不可視の第2の作業フレームバッファ302にコピーする。ブロック414において、不可視の第2の作業フレームバッファ302及び透明フレームバッファ18の混合及びインターリーブされた内容を第2の作業フレームバッファ302に書き込む動作が行われる。ブロック416では、第2の作業フレームバッファ302が可視状態にされ、第1の作業フレームバッファ300が不可視状態にされて、事実上、現在の表示出力データのソースとして2つのフレームバッファの状態を反転する。
【0034】
ブロック418において、この実施形態では、ビデオ制御API206への呼出しにより、ブロック転送動作を実行して、オペレーティングシステムの出力フレームバッファ10を不可視の第1の作業フレームバッファ300にコピーする。ブロック420では、第1の作業フレームバッファ300及び透明フレームバッファ18の色混合及びインターリーブされた内容を第1の作業フレームバッファ300に書き込む動作を実行する。ブロック422では、第1の作業フレームバッファ300が可視状態にされ、第2の作業フレームバッファ302が不可視状態にされて、事実上、現在の表示出力データのソースとして2つのフレームバッファの状態を反転する。この処理は、ブロック412に戻ることによって繰り返される。前のブロックのそれぞれの間に、オペレーティングシステムのソフトウェアは、付加的な表示データをオペレーティングシステムの出力フレームバッファに同時に書き込む。
【0035】
ブロック414及び420の色混合及びインターリーブ動作を、図7を参照してさらに説明する。ブロック426において、現在の不可視の(第1又は第2のいずれかの)作業フレームバッファ内のメモリ位置が、透明グラフィックス用フレームバッファの基準点に対して決定される。ブロック428では、現在の不可視の作業フレームバッファからの画素に対するデータ信号値が読み取られて、透明グラフィックス用フレームバッファからの空間的に対応する画素が決定される。透明グラフィックス用フレームバッファのイメージは、作業フレームバッファの部分に適合するように拡大又は縮小されることがあるため、この対応は必ずしも1:1の比率とは限らない。この画素対応の決定はこの分野では周知であり、オペレーティングシステムのソフトウェアでは拡大ブロック転送において使用される(例えば、Windows 95(登録商標)のオペレーティングシステムにおけるストレッチビット(StretchBit)機能)。
【0036】
次に、ブロック430において、この実施形態では、作業フレームバッファからの画素及び透明グラフィックス用フレームバッファからの画素の加重平均が計算される。個々の画素成分の加重平均が、色成分のベースで色成分に対して決定される。すなわち、赤成分が平均され、青成分が平均され、また緑成分が平均される。各成分に与えられる重みは、結果として画素の透明性を決定するが、同じ重み値を所定の画素の全ての成分に対して使用することができる。それは、透明性のレベルに少なくとも部分的に影響する画素に関連した重みである。これらの重みを透明性を用いるアプリケーションプログラムが操作して、様々な混合比率を作ることができる。さらに、透明性を使用するアプリケーションプログラムは、ユーザが混合比率を直接又は間接的に制御することを可能にするユーザインターフェースの要素を提供することができる。
【0037】
ブロック432において、加重平均の計算結果は、処理される現在の画素として、作業フレームバッファの同じ位置に配置される。ブロック434では、処理すべき作業フレームバッファ内の次の位置が、現在のインターリーブするパターンを考慮して決定される(例えば、全ての第2の画素、全ての第4の画素、水平又は垂直な交替する線など用いて)。ダイヤモンド436では、作業フレームバッファ及び透明グラフィックス用フレームバッファの別の画素を処理する場合は、処理が次の画素に対してブロック428で継続される。そうでない場合は、色の混合及びインターリーブ処理は終了する。
【0038】
本発明を限られた数の実施形態に関して説明してきたが、当業者はこれらの実施形態からの多くの修正例及び変更例を理解されよう。添付した特許請求の範囲が、全てのそのような修正例や変更例を本発明の真の精神及び範囲の中に入るものとしてカバーするものとする。
【図面の簡単な説明】
【図1】
本発明の1つの実施形態による画面表示を示す図である。
【図2】
本発明の実施形態による透明性方法(transparency method)を用いて動作することができる見本のシステムを例証する図である。
【図3】
本発明の実施形態による透明なグラフィックスを実現するソフトウェア及びハードウェアのスタックの図である。
【図4】
本発明の1つの実施形態に基づいて、透明なグラフィックス(transparent graphics)を提供するバッファの図である。
【図4A】
本発明の1つの実施形態による画素混合配列の概略図である。
【図5】
本発明の1つの実施形態に基づいて、透明なグラフィックスを提供するシステムを初期化するフローチャートである。
【図6】
本発明の1つの実施形態によるダブルバッファリング制御処理を示すフローチャートである。
【図7】
本発明の1つの実施形態による色混合及びインターリーブ処理のフローチャートである。
Claims (30)
- コンピュータ画面上に表示を生成するステップと、
前記コンピュータ画面上にキーイメージを含む透明なキーボードインターフェースを生成するステップと、
前記透明なキーボードインターフェースを通して行われたキーの選択を認識するステップと、
を含むことを特徴とする方法。 - 前記コンピュータ画面上にテキスト表示を生成するステップ及び前記テキスト表示の上に前記透明なキーボードインターフェースを重ね合わせるステップを含むことを特徴とする請求項1に記載の方法。
- テキスト入力ユーザインターフェースの要素を生成するステップ及び前記透明なキーボードインターフェースを前記テキスト入力ユーザインターフェースの要素上に重ね合わせるステップを含むことを特徴とする請求項2に記載の方法。
- 前記透明なキーボードインターフェースと前記コンピュータ画面上に表示される他の情報との間のコンピュータシステムの中心を選択的に変更するステップを含むことを特徴とする請求項3に記載の方法。
- 前記キーの選択を認識するステップがタッチスクリーンとの接触を認識するステップを含むことを特徴とする請求項1に記載の方法。
- 前記キーの選択を認識するステップが前記透明なキーボードインターフェースに関連するキーイメージのポインティング装置による選択を認識するステップを含むことを特徴とする請求項1に記載の方法。
- 前記透明なキーボードインターフェース又は他のインターフェースを介して情報を入力することを選択的に可能にするステップを含むことを特徴とする請求項1に記載の方法。
- 前記透明なキーボードインターフェース又は他のインターフェースを介してデータが入力されるかどうかをユーザが選択することができるユーザが選択可能な要素を提供するステップを含むことを特徴とする請求項7に記載の方法。
- ユーザが前記透明なキーボードインターフェースを用いてテキスト入力ユーザインターフェースの要素の中にデータを入力することを可能にするステップを含むことを特徴とする請求項1に記載の方法。
- 前記テキスト入力ユーザインターフェースの要素と前記透明なキーボードインターフェースとの間に中心を変更するステップを含むことを特徴とする請求項9に記載の方法。
- プロセッサベースのシステムに対して、
コンピュータ画面上に表示を生成すること、
前記コンピュータ画面上にキーイメージを含む透明なキーボードインターフェースを生成すること、
前記透明なキーボードインターフェースを通して行われたキーの選択を認識すること、
を可能にさせる命令を記憶する媒体を含むことを特徴とする物件。 - 前記プロセッサベースのシステムに対して、前記コンピュータ画面上にテキスト表示を生成すること及び前記テキスト表示の上に前記透明なキーボードインターフェースを重ね合わせることを可能にさせる命令をさらに記憶することを特徴とする請求項11に記載の物件。
- 前記プロセッサベースのシステムに対して、テキスト入力ユーザインターフェースの要素を生成すること及び前記透明なキーボードインターフェースを前記テキスト入力ユーザインターフェースの要素上に重ね合わせることを可能にさせる命令をさらに記憶することを特徴とする請求項12に記載の物件。
- 前記プロセッサベースのシステムに対して、前記透明なキーボードインターフェースと前記コンピュータ画面上に表示される他の情報との間のプロセッサベースのシステムの中心を選択的に変更することを可能にさせる命令をさらに記憶することを特徴とする請求項13に記載の物件。
- 前記プロセッサベースのシステムに対して、タッチスクリーンとの接触を認識することを可能にさせる命令をさらに記憶することを特徴とする請求項11に記載の物件。
- 前記プロセッサベースのシステムに対して、前記透明なキーボードインターフェースに関連するキーイメージのポインティング装置による選択を認識することを可能にさせる命令をさらに記憶することを特徴とする請求項11に記載の物件。
- 前記プロセッサベースのシステムに対して、前記透明なキーボードインターフェース又は他のインターフェースを介して情報を入力することを選択的に可能にする命令をさらに記憶することを特徴とする請求項11に記載の物件。
- 前記プロセッサベースのシステムに対して、前記透明なキーボードインターフェース又は他のインターフェースを介してデータが入力されるかどうかをユーザが選択することができるユーザが選択可能な要素を提供することを可能にさせる命令をさらに記憶することを特徴とする請求項17に記載の物件。
- 前記プロセッサベースのシステムに対して、ユーザが前記透明なキーボードインターフェースを用いてテキスト入力ユーザインターフェースの要素の中にデータを入力することを可能にする命令をさらに記憶することを特徴とする請求項11に記載の物件。
- 前記プロセッサベースのシステムに対して、前記テキスト入力ユーザインターフェースの要素と前記透明なキーボードインターフェースとの間に中心を変更することを可能にさせる命令をさらに記憶することを特徴とする請求項19に記載の物件。
- プロセッサベースの装置と、
前記プロセッサベースの装置に対して、コンピュータ画面上に表示を生成すること、前記コンピュータ画面上にキーイメージを含む透明なキーボードインターフェースを生成すること、及び前記透明なキーボードインターフェースを通して行われたキーの選択を認識することを可能にさせる命令を記憶する、前記プロセッサベースの装置に接続された記憶装置と、
を備えることを特徴とするシステム。 - 表示画面を含むことを特徴とする請求項21に記載のシステム。
- 前記プロセッサベースの装置に接続されたポインティング装置を含むことを特徴とする請求項22に記載のシステム。
- 前記記憶装置が、前記プロセッサベースの装置に対して、前記コンピュータ画面上にテキスト表示を生成すること及び前記テキスト表示の上に前記透明なキーボードインターフェースを重ね合わせることを可能にさせる命令をさらに記憶することを特徴とする請求項21に記載のシステム。
- 前記記憶装置が、前記プロセッサベースの装置に対して、テキスト入力ユーザインターフェースの要素を生成すること及び前記透明なキーボードインターフェースを前記テキスト入力ユーザインターフェースの要素の上に重ね合わせることを可能にさせる命令をさらに記憶することを特徴とする請求項21に記載のシステム。
- プロセッサベースのシステムに対するグラフィカルユーザーインターフェースであって、
キーボードのキーに対応する複数の透明なキーイメージと、
所定のキーに対応するテキスト文字を示す前記キー上の符号と、
を備え、
前記キーイメージが前記コンピュータ画面上に文字を表示するためにユーザが選択可能である、
ことを特徴とするグラフィカルユーザーインターフェース。 - 前記透明なグラフィカルユーザーインターフェースが透明でないテキスト又はグラフィックスに重なり合うことを特徴とする請求項26に記載のグラフィカルユーザーインターフェース。
- ユーザが前記グラフィカルユーザーインターフェースを介するテキスト入力又は別の方法のテキスト入力との間を選択することができる要素を含むことを特徴とする請求項26に記載のグラフィカルユーザーインターフェース。
- 前記キーイメージがコンピュータ画面上の別のテキストの上に重なることを特徴とする請求項26に記載のグラフィカルユーザーインターフェース。
- ユーザが前記グラフィカルユーザーインターフェースを通して下側のテキスト及びグラフィックスを見ることができることを特徴とする請求項26に記載のグラフィカルユーザーインターフェース。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/703,159 US6501464B1 (en) | 2000-10-31 | 2000-10-31 | On-screen transparent keyboard interface |
PCT/US2001/031533 WO2002037254A1 (en) | 2000-10-31 | 2001-10-09 | On-screen transparent keyboard interface |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006240493A Division JP2007048300A (ja) | 2000-10-31 | 2006-09-05 | 画面上の透明なキーボードインターフェース |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004517391A true JP2004517391A (ja) | 2004-06-10 |
JP2004517391A5 JP2004517391A5 (ja) | 2005-04-21 |
Family
ID=24824263
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002539939A Withdrawn JP2004517391A (ja) | 2000-10-31 | 2001-10-09 | 画面上の透明なキーボードインターフェース |
JP2006240493A Pending JP2007048300A (ja) | 2000-10-31 | 2006-09-05 | 画面上の透明なキーボードインターフェース |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006240493A Pending JP2007048300A (ja) | 2000-10-31 | 2006-09-05 | 画面上の透明なキーボードインターフェース |
Country Status (12)
Country | Link |
---|---|
US (1) | US6501464B1 (ja) |
EP (2) | EP2284661B1 (ja) |
JP (2) | JP2004517391A (ja) |
KR (1) | KR100509198B1 (ja) |
CN (1) | CN1267809C (ja) |
AT (1) | ATE534070T1 (ja) |
AU (1) | AU2001296743A1 (ja) |
DE (1) | DE10196846B4 (ja) |
ES (1) | ES2377196T3 (ja) |
GB (1) | GB2384899B (ja) |
TW (1) | TW591503B (ja) |
WO (1) | WO2002037254A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011105087A1 (ja) * | 2010-02-26 | 2011-09-01 | 株式会社カプコン | コンピュータ装置、記録媒体、及び制御方法 |
Families Citing this family (82)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9239673B2 (en) | 1998-01-26 | 2016-01-19 | Apple Inc. | Gesturing with a multipoint sensing device |
US8479122B2 (en) | 2004-07-30 | 2013-07-02 | Apple Inc. | Gestures for touch sensitive input devices |
US20060033724A1 (en) * | 2004-07-30 | 2006-02-16 | Apple Computer, Inc. | Virtual input device placement on a touch screen user interface |
US7614008B2 (en) | 2004-07-30 | 2009-11-03 | Apple Inc. | Operation of a computer with touch screen interface |
US9292111B2 (en) | 1998-01-26 | 2016-03-22 | Apple Inc. | Gesturing with a multipoint sensing device |
US6964022B2 (en) * | 2000-12-22 | 2005-11-08 | Xerox Corporation | Electronic board system |
US6781069B2 (en) * | 2000-12-27 | 2004-08-24 | Hewlett-Packard Development Company, L.P. | Method and apparatus for virtual interaction with physical documents |
US7036086B2 (en) * | 2001-01-04 | 2006-04-25 | Intel Corporation | Displaying software keyboard images |
US20020171684A1 (en) * | 2001-05-16 | 2002-11-21 | Christianson Eric P. | Using icon-based input cues |
US20030038821A1 (en) * | 2001-08-27 | 2003-02-27 | Kraft Joshua Dickinson | Computer controlled interactive touch display pad with transparent full character keyboard overlaying displayed text and graphics |
US7177902B2 (en) * | 2001-12-28 | 2007-02-13 | Nokia, Inc. | Remotely controlling a computer via simulated keyboard events |
US6882337B2 (en) * | 2002-04-18 | 2005-04-19 | Microsoft Corporation | Virtual keyboard for touch-typing using audio feedback |
US7154480B2 (en) * | 2002-04-30 | 2006-12-26 | Kazuho Iesaka | Computer keyboard and cursor control system with keyboard map switching system |
US7096432B2 (en) * | 2002-05-14 | 2006-08-22 | Microsoft Corporation | Write anywhere tool |
US20040046742A1 (en) * | 2002-09-06 | 2004-03-11 | Deanna Johnson | Keyboard for tablet computers |
JP4173114B2 (ja) * | 2004-02-23 | 2008-10-29 | 株式会社国際電気通信基礎技術研究所 | 体感作画装置 |
KR100792284B1 (ko) | 2004-03-10 | 2008-01-07 | 삼성전자주식회사 | 이미지장치의 드라이버 프로그램에 대한 유저 인터페이스설정방법 및 트랜스패런트 기능을 적용한 이미지 처리시스템 |
US7515135B2 (en) | 2004-06-15 | 2009-04-07 | Research In Motion Limited | Virtual keypad for touchscreen display |
US8381135B2 (en) | 2004-07-30 | 2013-02-19 | Apple Inc. | Proximity detector in handheld device |
JP2006053678A (ja) | 2004-08-10 | 2006-02-23 | Toshiba Corp | ユニバーサルヒューマンインタフェースを有する電子機器 |
US8334837B2 (en) * | 2004-11-10 | 2012-12-18 | Nokia Corporation | Method for displaying approached interaction areas |
US7561145B2 (en) * | 2005-03-18 | 2009-07-14 | Microsoft Corporation | Systems, methods, and computer-readable media for invoking an electronic ink or handwriting interface |
KR100870179B1 (ko) * | 2005-08-17 | 2008-11-25 | 삼성전자주식회사 | 그래픽 디스플레이 제어장치 및 그 방법 |
US20070061722A1 (en) * | 2005-09-13 | 2007-03-15 | International Business Machines Corporation | Transparency learning aide skin for GUI-based applications |
JP4341627B2 (ja) * | 2006-01-25 | 2009-10-07 | セイコーエプソン株式会社 | キーボードを有さない装置における文字入力 |
TW200802043A (en) * | 2006-06-23 | 2008-01-01 | Inventec Corp | Electronic device and method of setting key |
KR20080006666A (ko) * | 2006-07-13 | 2008-01-17 | 삼성전자주식회사 | 소프트 키보드를 이용한 데이터 처리 장치 및 그의 데이터처리 방법 |
US20080084395A1 (en) * | 2006-10-05 | 2008-04-10 | Christopher James Dawson | Motion based adjustment of display transparency |
KR100764652B1 (ko) * | 2006-10-25 | 2007-10-08 | 삼성전자주식회사 | 터치스크린을 가지는 단말기의 키 입력 장치 및 방법 |
US8161395B2 (en) * | 2006-11-13 | 2012-04-17 | Cisco Technology, Inc. | Method for secure data entry in an application |
KR20080068491A (ko) | 2007-01-19 | 2008-07-23 | 엘지전자 주식회사 | 터치 방식 정보 입력 단말기 및 그 방법 |
KR20080078291A (ko) | 2007-02-23 | 2008-08-27 | 엘지전자 주식회사 | 브라우저 디스플레이 방법 및 이를 구현할 수 있는 단말기 |
KR100881952B1 (ko) * | 2007-01-20 | 2009-02-06 | 엘지전자 주식회사 | 터치스크린을 구비하는 이동통신 단말기 및 그 동작제어방법 |
US7779364B2 (en) * | 2007-01-26 | 2010-08-17 | Kabushiki Kaisha Toshiba | System and method for generating a graphical user input interface via an associated display |
US8078984B2 (en) | 2007-06-19 | 2011-12-13 | Microsoft Corporation | Virtual keyboard text replication |
KR101388152B1 (ko) * | 2007-07-26 | 2014-04-22 | 엘지전자 주식회사 | 휴대단말기 및 그 메뉴 아이콘 디스플레이 방법 |
US8635543B2 (en) * | 2007-09-07 | 2014-01-21 | Microsoft Corporation | Multiple UI paradigms within a single application |
KR101484776B1 (ko) * | 2007-12-13 | 2015-01-20 | 엘지전자 주식회사 | 휴대 단말기 및 이를 이용한 문자입력방법 |
JP5252910B2 (ja) * | 2007-12-27 | 2013-07-31 | キヤノン株式会社 | 入力装置、入力装置の制御方法、及びプログラム |
CN101598987B (zh) * | 2008-06-02 | 2012-09-05 | 华硕电脑股份有限公司 | 组态式指向操作装置与计算机系统 |
US9041660B2 (en) * | 2008-12-09 | 2015-05-26 | Microsoft Technology Licensing, Llc | Soft keyboard control |
US9195317B2 (en) | 2009-02-05 | 2015-11-24 | Opentv, Inc. | System and method for generating a user interface for text and item selection |
KR101140508B1 (ko) * | 2009-02-24 | 2012-04-30 | 김용환 | 터치스크린을 이용한 휴대단말기의 문자입력방법 |
KR101587102B1 (ko) * | 2009-03-02 | 2016-01-20 | 엘지전자 주식회사 | 이동 단말기 |
US8521821B2 (en) * | 2009-03-17 | 2013-08-27 | Brigham Young University | Encrypted email based upon trusted overlays |
US20100275126A1 (en) * | 2009-04-27 | 2010-10-28 | Scott David Lincke | Automatic On-Screen Keyboard |
CN101714053A (zh) * | 2009-04-27 | 2010-05-26 | 翁印嵩 | 一种改进的触摸显示屏式的计算机键盘输入设备及其实现方法 |
US9367216B2 (en) | 2009-05-21 | 2016-06-14 | Sony Interactive Entertainment Inc. | Hand-held device with two-finger touch triggered selection and transformation of active elements |
US8019390B2 (en) * | 2009-06-17 | 2011-09-13 | Pradeep Sindhu | Statically oriented on-screen transluscent keyboard |
US9024908B2 (en) * | 2009-06-30 | 2015-05-05 | Microsoft Technology Licensing, Llc | Tactile feedback display screen overlay |
CN102087572A (zh) * | 2009-12-02 | 2011-06-08 | 乐金电子(中国)研究开发中心有限公司 | 移动终端的中文输入窗显示方法及装置 |
US8947355B1 (en) | 2010-03-25 | 2015-02-03 | Amazon Technologies, Inc. | Motion-based character selection |
US8390573B2 (en) * | 2010-04-26 | 2013-03-05 | Chris Trout | Data processing device |
US8797283B2 (en) | 2010-11-22 | 2014-08-05 | Sony Computer Entertainment America Llc | Method and apparatus for performing user-defined macros |
US8907903B2 (en) | 2011-01-13 | 2014-12-09 | Sony Computer Entertainment America Llc | Handing control of an object from one touch input to another touch input |
US8941601B2 (en) * | 2011-04-21 | 2015-01-27 | Nokia Corporation | Apparatus and associated methods |
US9176608B1 (en) | 2011-06-27 | 2015-11-03 | Amazon Technologies, Inc. | Camera based sensor for motion detection |
US9720583B2 (en) | 2011-09-22 | 2017-08-01 | Microsoft Technology Licensing, Llc | User interface for editing a value in place |
CN102439556A (zh) * | 2011-10-20 | 2012-05-02 | 华为终端有限公司 | 一种软键盘显示方法和移动终端 |
EP2776909A4 (en) * | 2011-11-11 | 2015-09-02 | Qualcomm Inc | PROVIDING SHORTCUTS ASSOCIATED WITH A KEYBOARD |
US9207852B1 (en) * | 2011-12-20 | 2015-12-08 | Amazon Technologies, Inc. | Input mechanisms for electronic devices |
CN104160361A (zh) * | 2012-02-06 | 2014-11-19 | 迈克尔·K·科尔比 | 字符串完成 |
CN103365582A (zh) * | 2012-04-03 | 2013-10-23 | 深圳富泰宏精密工业有限公司 | 触摸式电子设备输入系统及方法 |
KR101169374B1 (ko) * | 2012-04-04 | 2012-07-30 | 서주홍 | 스마트 기기용 키패드 표시 방법 |
US20130298071A1 (en) * | 2012-05-02 | 2013-11-07 | Jonathan WINE | Finger text-entry overlay |
USD712421S1 (en) * | 2012-06-06 | 2014-09-02 | Apple Inc. | Display screen or portion thereof with graphical user interface |
DE202012102329U1 (de) * | 2012-06-25 | 2012-08-08 | Keba Ag | Mobiles Handbediengerät für eine industrielle Steuerung |
WO2014008670A1 (zh) | 2012-07-13 | 2014-01-16 | 华为技术有限公司 | 确定操作对象的方法和终端 |
JP5522755B2 (ja) * | 2012-09-14 | 2014-06-18 | Necシステムテクノロジー株式会社 | 入力表示制御装置、シンクライアントシステム、入力表示制御方法およびプログラム |
KR101437128B1 (ko) * | 2012-09-21 | 2014-11-03 | (주)원더피플 | 채팅키패드 제공 방법 및 장치 |
US9448694B2 (en) | 2012-11-09 | 2016-09-20 | Intel Corporation | Graphical user interface for navigating applications |
USD734343S1 (en) * | 2012-12-27 | 2015-07-14 | Nissan Jidosha Kabushiki Kaisha | Display screen or portion thereof with graphical user interface |
KR102306899B1 (ko) | 2013-01-21 | 2021-09-30 | 키포인트 테크놀로지스 인디아 프라이비트 리미티드 | 텍스트 입력 시스템 및 방법 |
IN2013CH00469A (ja) | 2013-01-21 | 2015-07-31 | Keypoint Technologies India Pvt Ltd | |
US20150020012A1 (en) * | 2013-07-11 | 2015-01-15 | Htc Corporation | Electronic device and input method editor window adjustment method thereof |
US9170736B2 (en) | 2013-09-16 | 2015-10-27 | Microsoft Corporation | Hover controlled user interface element |
US9645651B2 (en) | 2013-09-24 | 2017-05-09 | Microsoft Technology Licensing, Llc | Presentation of a control interface on a touch-enabled device based on a motion or absence thereof |
US9501163B2 (en) * | 2014-05-06 | 2016-11-22 | Symbol Technologies, Llc | Apparatus and method for activating a trigger mechanism |
US9594489B2 (en) | 2014-08-12 | 2017-03-14 | Microsoft Technology Licensing, Llc | Hover-based interaction with rendered content |
US20160246466A1 (en) * | 2015-02-23 | 2016-08-25 | Nuance Communications, Inc. | Transparent full-screen text entry interface |
US10956033B2 (en) * | 2017-07-13 | 2021-03-23 | Hand Held Products, Inc. | System and method for generating a virtual keyboard with a highlighted area of interest |
CN109542382B (zh) * | 2017-12-26 | 2020-07-28 | 掌阅科技股份有限公司 | 手写输入内容的显示方法、电子设备及计算机存储介质 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2027103A1 (en) * | 1989-10-13 | 1991-04-14 | William A. Clough | Method and apparatus for displaying simulated keyboards on touch-sensitive displays |
US5581243A (en) * | 1990-06-04 | 1996-12-03 | Microslate Inc. | Method and apparatus for displaying simulated keyboards on touch-sensitive displays |
US5283560A (en) * | 1991-06-25 | 1994-02-01 | Digital Equipment Corporation | Computer system and method for displaying images with superimposed partially transparent menus |
EP0605945B1 (en) * | 1992-12-15 | 1997-12-29 | Sun Microsystems, Inc. | Method and apparatus for presenting information in a display system using transparent windows |
US5638501A (en) | 1993-05-10 | 1997-06-10 | Apple Computer, Inc. | Method and apparatus for displaying an overlay image |
WO1997009270A1 (en) | 1995-09-08 | 1997-03-13 | Monsanto Company | Process for preparing hemipotassium phosphate |
CA2264167A1 (en) * | 1996-08-28 | 1998-03-05 | Via, Inc. | Touch screen systems and methods |
US6130665A (en) | 1998-04-01 | 2000-10-10 | Telefonaktiebolaget Lm Ericsson | Touch screen handling |
-
2000
- 2000-10-31 US US09/703,159 patent/US6501464B1/en not_active Expired - Lifetime
-
2001
- 2001-10-09 GB GB0305692A patent/GB2384899B/en not_active Expired - Lifetime
- 2001-10-09 AU AU2001296743A patent/AU2001296743A1/en not_active Abandoned
- 2001-10-09 DE DE10196846.9T patent/DE10196846B4/de not_active Expired - Lifetime
- 2001-10-09 CN CNB018181031A patent/CN1267809C/zh not_active Expired - Lifetime
- 2001-10-09 WO PCT/US2001/031533 patent/WO2002037254A1/en not_active Application Discontinuation
- 2001-10-09 EP EP10012281.1A patent/EP2284661B1/en not_active Expired - Lifetime
- 2001-10-09 KR KR10-2003-7005930A patent/KR100509198B1/ko not_active IP Right Cessation
- 2001-10-09 JP JP2002539939A patent/JP2004517391A/ja not_active Withdrawn
- 2001-10-09 AT AT01977638T patent/ATE534070T1/de active
- 2001-10-09 EP EP01977638A patent/EP1332425B1/en not_active Expired - Lifetime
- 2001-10-09 ES ES01977638T patent/ES2377196T3/es not_active Expired - Lifetime
- 2001-10-12 TW TW090125309A patent/TW591503B/zh not_active IP Right Cessation
-
2006
- 2006-09-05 JP JP2006240493A patent/JP2007048300A/ja active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011105087A1 (ja) * | 2010-02-26 | 2011-09-01 | 株式会社カプコン | コンピュータ装置、記録媒体、及び制御方法 |
JP4937421B2 (ja) * | 2010-02-26 | 2012-05-23 | 株式会社カプコン | コンピュータプログラム及びコンピュータ装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2002037254A1 (en) | 2002-05-10 |
KR20030044059A (ko) | 2003-06-02 |
GB2384899A (en) | 2003-08-06 |
EP2284661A1 (en) | 2011-02-16 |
CN1505778A (zh) | 2004-06-16 |
GB2384899B (en) | 2005-03-30 |
AU2001296743A1 (en) | 2002-05-15 |
GB0305692D0 (en) | 2003-04-16 |
CN1267809C (zh) | 2006-08-02 |
EP2284661B1 (en) | 2017-08-23 |
JP2007048300A (ja) | 2007-02-22 |
TW591503B (en) | 2004-06-11 |
DE10196846B4 (de) | 2021-02-25 |
DE10196846T1 (de) | 2003-09-11 |
KR100509198B1 (ko) | 2005-08-17 |
ATE534070T1 (de) | 2011-12-15 |
US6501464B1 (en) | 2002-12-31 |
EP1332425A1 (en) | 2003-08-06 |
EP1332425B1 (en) | 2011-11-16 |
ES2377196T3 (es) | 2012-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6501464B1 (en) | On-screen transparent keyboard interface | |
US6151030A (en) | Method of creating transparent graphics | |
JP3598303B2 (ja) | オーバーラップする複数のディスプレイオブジェクトをディスプレイ上に選択的にディスプレイしてアクティブ化する方法、および、コンピュータシステム | |
US7705864B2 (en) | User selectable hardware zoom in a video display system | |
US7114129B2 (en) | Method and system for controlling an application displayed in an inactive window | |
US6246407B1 (en) | Method and apparatus for overlaying a window with a multi-state window | |
JP2759700B2 (ja) | イメージ・エディタを作動する方法 | |
JP3586351B2 (ja) | ウインドウ表示装置および方法、並びにウインドウ表示制御プログラムを記録した記録媒体 | |
US8856682B2 (en) | Displaying a user interface in a dedicated display area | |
US20060005146A1 (en) | System and method for using selective soft focus as a user interface design element | |
JPS6232527A (ja) | 表示画面制御方式 | |
JP2009537903A (ja) | 表示画面の一部分を選択表示するためのユーザーインターフェースシステムと方法 | |
WO2018198703A1 (ja) | 表示装置 | |
CA2417250C (en) | Scaling images | |
JPH0863135A (ja) | 情報処理装置 | |
JP5057895B2 (ja) | 画像出力装置および画面構成方法 | |
Blenkhorn et al. | Screen magnifiers: Evolution and evaluation | |
JPH07175628A (ja) | カーソルの表示方式 | |
JPH04270384A (ja) | 等倍または拡大画像の部分的な表示方法 | |
US20060187239A1 (en) | System and method for improving visual appearance of efficient rotation algorithm | |
JPH07210700A (ja) | マルチウィンドウ表示方式 | |
Blenkhorn et al. | Full-screen magnification for windows using DirectX overlays | |
JPH11272846A (ja) | 図形表示装置 | |
Blenkhorn et al. | A screen magnifier using “high level” implementation techniques | |
JP2004133283A (ja) | 画像表示装置、画像表示方法および画像表示プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051011 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051014 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20060116 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20060125 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060414 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060509 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060905 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20061027 |