JP2018535462A - タッチヒートマップ - Google Patents
タッチヒートマップ Download PDFInfo
- Publication number
- JP2018535462A JP2018535462A JP2018507687A JP2018507687A JP2018535462A JP 2018535462 A JP2018535462 A JP 2018535462A JP 2018507687 A JP2018507687 A JP 2018507687A JP 2018507687 A JP2018507687 A JP 2018507687A JP 2018535462 A JP2018535462 A JP 2018535462A
- Authority
- JP
- Japan
- Prior art keywords
- touch
- user
- item
- input
- heat map
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0412—Digitisers structurally integrated in a display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Air Conditioning Control Device (AREA)
Abstract
電子コンピュータデバイスを動作させるためのシステムおよび方法は、デバイスのタッチスクリーンディスプレイのタッチセンシティブ面上のタッチ入力の受け付けに応答して、タッチヒートマップにアクセスすることを備え得る。タッチヒートマップは、アプリケーションと関連付けられたタッチスクリーン表示装置によって表示されたスクリーンに行なわれたタッチ入力と関連付けられたタッチ入力データを含み得る。タッチヒートマップにおいて収集されたタッチ入力データを使用して、タッチセンシティブ面上で受け付けられたタッチ入力と関連付けられた選択を予測し得る。
Description
関連の出願の相互参照
本特許出願は、2015年11月25日に出願された米国特許出願第14/952,394号の継続出願であって、その優先権を主張するものであり、その開示が本明細書に引用により援用される。
本特許出願は、2015年11月25日に出願された米国特許出願第14/952,394号の継続出願であって、その優先権を主張するものであり、その開示が本明細書に引用により援用される。
分野
この文書は、一般に、タッチセンシティブ入力面を備える電子デバイスに関する。
この文書は、一般に、タッチセンシティブ入力面を備える電子デバイスに関する。
背景
電子デバイス、特に携帯型電子デバイスは、タッチセンシティブ入力装置すなわちタッチスクリーンを備え得る。タッチスクリーンは、画像を表示可能であり、それ自体のタッチセンシティブ面上のユーザタッチ入力を受け付け可能である。タッチスクリーンの特定領域において受け付けられたタッチ入力は、例えば、タッチ入力に応答して起動されるべきアプリケーションを示すアイコン、およびタッチ入力に応答して実行されるべきリンクなどに対応し得る。このような種類の電子デバイスと関連付けられた能力が拡張し続け、ますます多くの異なるフォーマットの情報が選択のためにタッチスクリーン上に提示されるにつれて、タッチスクリーン上のディスプレイからのユーザによる項目の正確な選択を容易にする方法によって、ユーザの利便性が向上し得る。
電子デバイス、特に携帯型電子デバイスは、タッチセンシティブ入力装置すなわちタッチスクリーンを備え得る。タッチスクリーンは、画像を表示可能であり、それ自体のタッチセンシティブ面上のユーザタッチ入力を受け付け可能である。タッチスクリーンの特定領域において受け付けられたタッチ入力は、例えば、タッチ入力に応答して起動されるべきアプリケーションを示すアイコン、およびタッチ入力に応答して実行されるべきリンクなどに対応し得る。このような種類の電子デバイスと関連付けられた能力が拡張し続け、ますます多くの異なるフォーマットの情報が選択のためにタッチスクリーン上に提示されるにつれて、タッチスクリーン上のディスプレイからのユーザによる項目の正確な選択を容易にする方法によって、ユーザの利便性が向上し得る。
概要
一態様では、電子コンピュータデバイスを動作させる方法は、タッチセンシティブデバイスのタッチセンシティブ面上で受け付けられた複数のタッチ入力に基づいて、タッチセンシティブデバイスの実行可能なアプリケーションと関連付けられたタッチヒートマップを生成し、タッチヒートマップをタッチセンシティブデバイスのメモリに格納することと、アプリケーションを実行することと、格納されたタッチヒートマップにアクセスすることと、タッチセンシティブデバイスのタッチセンシティブ面上で第1のタッチ入力を受け付けることと、第1のタッチ入力とタッチヒートマップによって提供されるタッチ入力履歴とに基づいて第2のタッチ入力を予測することとを備え得る。
一態様では、電子コンピュータデバイスを動作させる方法は、タッチセンシティブデバイスのタッチセンシティブ面上で受け付けられた複数のタッチ入力に基づいて、タッチセンシティブデバイスの実行可能なアプリケーションと関連付けられたタッチヒートマップを生成し、タッチヒートマップをタッチセンシティブデバイスのメモリに格納することと、アプリケーションを実行することと、格納されたタッチヒートマップにアクセスすることと、タッチセンシティブデバイスのタッチセンシティブ面上で第1のタッチ入力を受け付けることと、第1のタッチ入力とタッチヒートマップによって提供されるタッチ入力履歴とに基づいて第2のタッチ入力を予測することとを備え得る。
別の態様では、電子コンピュータデバイスを動作させる方法は、タッチスクリーン表示装置のタッチセンシティブ面上で第1のタッチ入力を受け付けることと、第1のタッチ入力に応答して、タッチヒートマップにアクセスすることとを備え得る。タッチヒートマップは、受け付けられた第1のタッチ入力と関連付けられたユーザ入力インターフェースに対応するタッチ入力データを含む。方法はさらに、タッチヒートマップに含まれるタッチ入力データに基づいて、ユーザ入力インターフェースを介して利用可能な複数の項目からユーザの選択を予測することを備え得る。
別の態様では、電子コンピュータデバイスは、タッチセンシティブ面を有するタッチスクリーンディスプレイを備える表示装置と、実行可能な命令を格納するメモリと、命令を実行するように構成されたプロセッサとを備え得る。命令は、電子コンピュータデバイスに、デバイスによって実行可能なアプリケーションと関連付けられたタッチヒートマップを、タッチスクリーンディスプレイのタッチセンシティブ面上で受け付けられる複数のタッチ入力に基づいて生成することと、メモリにタッチヒートマップを格納することと、タッチスクリーンディスプレイのタッチセンシティブ面上の第1のタッチ入力に応答してアプリケーションを実行することと、第1のタッチ入力とタッチヒートマップによって提供されるタッチ履歴とに基づいて第2のタッチ入力を予測することとを行なわせる。
1つ以上の実施態様の詳細は、添付の図面および以下の記載において説明される。他の特徴は、記載および図面、ならびに特許請求の範囲から明らかになる。
詳細な説明
例えばラップトップ、ノートパソコン、タブレットデバイス、スマートフォンデバイス、および他のそのようなデバイスなどの電子コンピュータデバイスは、ユーザに対して情報を表示するように、かつ、タッチスクリーンのタッチセンシティブ面を通してユーザのタッチ入力を受け付けるように構成されたタッチスクリーン表示装置を備え得る。例えば有線接続または無線接続を通じたインターネットへのアクセスを含むように拡張されたこれらの電子デバイスの使用法、他の電子デバイスとのペアリングおよび情報の交換、多数のアプリケーションの同時実行などは、タッチスクリーン上でユーザに対して表示される情報量の増加につながり、ユーザによるタッチ入力を通じた選択に利用可能なアイコンおよびリンクなどで混み合っているディスプレイ上での正確な選択が困難になる場合がある。例えば、タッチスクリーン上に順番に表示された複数のリンク内から1つのリンクを正確に選択することは、タッチ入力の使用では難しい場合がある。なぜなら、タッチ入力は、選択されるべきリンクに隣接した複数のリンクと重なっていることがあるからである。これは、比較的小さなタッチスクリーン領域を有するスマートフォンなどのデバイスによって、さらに難しくなり得る。
例えばラップトップ、ノートパソコン、タブレットデバイス、スマートフォンデバイス、および他のそのようなデバイスなどの電子コンピュータデバイスは、ユーザに対して情報を表示するように、かつ、タッチスクリーンのタッチセンシティブ面を通してユーザのタッチ入力を受け付けるように構成されたタッチスクリーン表示装置を備え得る。例えば有線接続または無線接続を通じたインターネットへのアクセスを含むように拡張されたこれらの電子デバイスの使用法、他の電子デバイスとのペアリングおよび情報の交換、多数のアプリケーションの同時実行などは、タッチスクリーン上でユーザに対して表示される情報量の増加につながり、ユーザによるタッチ入力を通じた選択に利用可能なアイコンおよびリンクなどで混み合っているディスプレイ上での正確な選択が困難になる場合がある。例えば、タッチスクリーン上に順番に表示された複数のリンク内から1つのリンクを正確に選択することは、タッチ入力の使用では難しい場合がある。なぜなら、タッチ入力は、選択されるべきリンクに隣接した複数のリンクと重なっていることがあるからである。これは、比較的小さなタッチスクリーン領域を有するスマートフォンなどのデバイスによって、さらに難しくなり得る。
このような種類の電子デバイスのなかには、ズームモードを実現可能なものもある。このモードでは、ユーザは、例えばタッチスクリーン上でのピンチおよびズームタッチおよびドラッグ入力、ならびにタッチスクリーン上に表示されるズームアイコンなどを用いて、選択された特定の領域をズームイン可能である。このようにタッチスクリーン上に表示される情報のズームインによって、確かにユーザは目的のリンクまたは項目により容易にタッチ入力を行なうことができるが、この種類のズームインによって、とりわけズーム量に比例して、特定の情報量はもはやスクロールなしではユーザに可視でなくなってしまう。これらの種類の電子デバイスのなかには、ユーザがタッチスクリーン上のアイコンおよびリンクなどをより容易に眺めることができるように、ユーザがフォントおよび/またはアイコン表示サイズを拡大できるものもある。しかしながら、このようなフォント/アイコンサイズの拡大は、フォント/アイコンサイズの拡大によって、特定の情報量がスクリーン上でもはやユーザに可視でなくなるという点で、同様の影響を有し得る。
本明細書に記載の実施態様に係る電子デバイスは、タッチ入力情報を収集して、ユーザの電子デバイスの異なるアプリケーションとのインタラクションのヒートマップ(1つまたは複数)および関連付けられたユーザのプロファイル(1つまたは複数)を生成可能である。その後、電子デバイスは、ヒートマップとユーザプロファイルとに基づいて特定のアプリケーションに存在する間にユーザが次にタッチする可能性のある場所を予測し得る。いくつかの実施態様では、電子デバイスは、例えばこの予測に基づいて特定のアイコンまたはリンクを拡大して、ユーザが他の表示された項目を拡大することなくアイコンまたはリンクを選択することを容易にする。これにより、ユーザが予測に基づいて拡大されたアイコンまたはリンク以外のアイコンやリンクを選択する場合に、他の表示された項目が表示されたままになる。いくつかの実施態様では、電子デバイスは、ヒートマップおよびユーザプロファイルを使用して、曖昧なユーザのタッチ入力、すなわち、タッチスクリーン上に表示されている複数の可能な選択にわたって延びる、ユーザの意図が曖昧なユーザのタッチ入力を区別し得る。いくつかの実施態様では、電子デバイスは付加的なタッチ入力データを収集し得、付加的なタッチ入力を使用してヒートマップ(1つまたは複数)およびユーザプロファイルをアップデートし得、それによって、ヒートマップ(1つまたは複数)に基づいた予測が改善され得る。
さまざまな種類の例示的な電子コンピュータデバイスを、図1A〜図1Dに示す。例えば、図1Aは、基部140に結合されたディスプレイ110を備え、基部140は、例えばキーボード120およびタッチセンシティブパッド130などのさまざまな入力装置を含む基、ラップトップコンピュータデバイス100を示す。ディスプレイ110は、タッチスクリーン表示装置110でもよく、ユーザに対する情報の表示およびユーザからのタッチ入力の受け付けの双方に関するインターフェースを提供する。図1Bは、キーボードを有さず、例えばユーザに対する情報の表示およびユーザからのタッチ入力の受け付けの双方に関するインターフェースを提供するタッチスクリーンディスプレイ152を有するタブレットコンピュータデバイス150を示す。いくつかの実施態様では、図1Bに示すタブレットコンピュータデバイス150は、図1Cに示すように、基部170またはドッキングステーション170と選択的に結合され得る。基部170は、さまざまな機能、例えばテキスト入力の代替方法を提供するキーボード172などを提供し得る。基部170は、タブレットコンピュータデバイス150の電力ポート(1つまたは複数)155または端子(1つまたは複数)155と基部170の電力ポート(1つまたは複数)175または端子(1つまたは複数)175との間の接続を介した充電などを容易にし得る。図1Dは、スマートフォンコンピュータデバイス190を示す。スマートフォンコンピュータデバイス190は、例えば、ユーザに対する情報の表示およびユーザからのタッチ入力の受け付けの双方に関するインターフェースを提供するタッチスクリーンディスプレイ195を備える。電子デバイス、例えば、図1A〜図1Dに示す例示的なコンピュータデバイス100、150、および190は、それぞれ、バッテリ160A、160B、および160Dなどの電力貯蔵装置を備えてもよく、外部電源に接続されていない場合に動作中の使用のために電力を貯蔵する。
図2は、コンピュータデバイスの例のブロック図である。コンピュータデバイスは、本明細書で説明される実施態様に従って、タッチ入力情報を収集し得、タッチヒートマップおよび関連付けられたユーザプロファイルを生成し得る。いくつかの実施態様では、コンピュータデバイス200は、例えば、オペレーティングシステム210およびメモリ220を呼び出してさまざまなアプリケーション230を実行するプロセッサ/コントローラ205を備え得る。コンピュータデバイス200は、ユーザに対する画像の表示およびタッチスクリーン表示装置240のタッチセンシティブ面上のタッチ入力の形態の入力の受け付けの双方の実行を可能なタッチスクリーン表示装置240であり得るディスプレイ240と、例えばスピーカおよび/またはヘッドフォンポートを含む音声出力装置250と、例えばマイクを含む音声入力装置260と、例えばカメラまたはウェブカメラなどの、静止画像および/または動画を撮像する画像装置270と、例えば、1つ以上のUSBポートおよびHDMI(登録商標)ポートなどの通信ポートおよび/またはインターフェースポートを含むインターフェースデバイス280と、他のそのようなコンポーネントとを備え得る。コンピュータデバイス200は、電力貯蔵装置290またはバッテリ290も備え得る。
いくつかの実施態様では、コンピュータデバイス200の例は、タッチスクリーン表示装置240を介して受け付けられたタッチ入力情報を自動的に収集するように、かつ、コンピュータデバイス200のアプリケーション(1つまたは複数)230とのユーザのインタラクションのヒートマップおよび関連付けられたユーザプロファイル(1つまたは複数)を生成するように構成し得る。例えば、ユーザプロファイルAXが、ユーザAのアプリケーションXの使用で生成されたヒートマップMに基づいて生成されてもよく、ユーザプロファイルAYが、ユーザAのアプリケーションYの使用によるヒートマップNに基づいて生成されてもよい。これにより、コンピュータデバイス200のユーザAは、アプリケーションXおよびYの各々について個別のプロファイルを有することが可能になり、ユーザAの目的とする使用および個々のアプリケーションXおよびYの選択を、ユーザA自身の当該特定のアプリケーションの個人的な使用と使用履歴とに基づいて予測可能になる。同様に、同じコンピュータデバイス200の第2のユーザBについて、ユーザプロファイルBXがユーザBのアプリケーションXの使用からなるヒートマップRに基づいて使用されてもよく、ユーザプロファイルBYがユーザBのアプリケーションYの使用からなるヒートマップSに基づいて生成されてもよい。これにより、同じコンピュータデバイス200の複数のユーザ(本例では、ユーザAおよびユーザB)は、ユーザ自身の特定のアプリケーションの個人的な使用および使用履歴に基づいて、アプリケーションごとに個別のプロファイルを有することが可能になる。
モバイル電子コンピュータデバイスの実施態様の例を、図3A〜図3Dに示す。図3A〜図3Dでは、本明細書に記載の実施態様に従って、タッチ予測に関するタッチヒートマップ(1つまたは複数)およびユーザプロファイル(1つまたは複数)の実施態様の説明および図示を簡単にするために、モバイル電子コンピュータデバイスの例がスマートフォンとして示されている。しかしながら、本明細書に記載の原則は、選択に関する項目の表示および表示された項目の選択に関するタッチ入力を受け付けるように構成されたタッチセンシティブ面、すなわちタッチスクリーンを有する多数の他の種類の電子コンピュータデバイスに適用可能である。
図3Aに示すように、複数の項目、例えば、コンピュータデバイス200による選択および実行に利用可能な複数のアプリケーション230をそれぞれ表す複数のアイコン235を、デバイス200のディスプレイ240上に表示可能である。ディスプレイ240は、タッチセンシティブ面を含むタッチスクリーンディスプレイ240でもよく、タッチスクリーンディスプレイ240は、例えば、図3Aに示すアプリケーション230を表すアイコン235を含むスクリーン240Aの表示、および、対応するアプリケーション230の実行に関してアイコン235のうちの1つを選択するユーザのタッチ入力を受け付けるように構成されている。
図3Aに示すアイコン235のうちの1つに行なわれたユーザのタッチ入力に応答して、エンターテイメントアプリケーション230が起動可能になり、図3Bに示すように、エンターテイメントアプリケーションと関連付けられた、選択に関して利用可能な付加的な項目へのリンクを、タッチスクリーンディスプレイ240によってスクリーン240B上に表示可能である。アイコン235がタッチスクリーンディスプレイ240によってスクリーン240A上に表示されて現在表示されているスクリーン240Aから特定のユーザAによって選択が行なわれると、スクリーン240A上のユーザAのタッチ入力を、例えば、メモリ220に格納し得、ユーザAのスクリーン240Aとのインタラクションの履歴を示すタッチヒートマップにおいて収集し得、ユーザAのスクリーン240Aとの将来のインタラクションを予測するために使用可能になる。
図3Bに示すように、スクリーン240Bからエンターテイメントアプリケーションと関連付けられたビデオリンクに対して行なわれたユーザのタッチ入力に応答して、図3Cに示すように、エンターテイメントアプリケーションのビデオコンポーネントと関連付けられた、選択に関して利用可能な付加的な項目へのリンクが、タッチスクリーンディスプレイ240によってスクリーン240C上に表示される。リンクがタッチスクリーンディスプレイ240によってスクリーン240B上に表示され、現在表示されているスクリーン240BからユーザAによって選択が行なわれると、スクリーン240B上のユーザAのタッチ入力を、例えばメモリ220に格納し得、ユーザAのスクリーン240Bとのインタラクション履歴を示すタッチヒートマップにおいて収集し得、ユーザAのスクリーン240Bとの将来のインタラクションを予測するために使用可能になる。
図3Cに示すように、エンターテイメントアプリケーションのビデオコンポーネントと関連付けられた上映中リンクに対して行なわれたユーザのタッチ入力に応答して、図3Dに示すように、上映中コンポーネントと関連付けられた、選択に関して利用可能な付加的な項目へのリンクが、タッチスクリーンディスプレイ240上に表示される。タッチスクリーンディスプレイ240によってスクリーン240C上にリンクが表示され、現在表示されているスクリーン240CからユーザAによって選択が行なわれると、ユーザAのスクリーン240C上のタッチ入力を、例えばメモリ220に格納し得、ユーザAのスクリーン240Cとのインタラクション履歴を示すタッチヒートマップにおいて収集し得、ユーザAのスクリーン240Cとの将来のインタラクションを予測するために使用可能になる。
図3Dに示す例では、タッチスクリーンディスプレイ240によって表示されたスクリーン240D上に複数のリンクが表示され、映画館で現在視聴可能な映画に関連する、ユーザに利用可能な異なる種類の情報へのリンクを提示する。図3Dに示す例では、上述したように、ユーザAはチケット購入リンクにタッチ入力を行ない、スクリーン240D上のユーザAのタッチ入力を例えばメモリ220に記憶し得、ユーザAのスクリーン240Dとのインタラクション履歴を示すタッチヒートマップにおいて収集し得、ユーザAのスクリーン240Dとの将来のインタラクションを予測するために使用可能である。
いくつかの実施態様では、スクリーン240A〜240Dの各々についてのタッチヒートマップを、例えばデバイス200のプロセッサ205によってメモリ220からアクセスして、表示されるべきスクリーンからユーザAによって、タッチ入力領域、関心領域、または行なわれるべき選択を予測することが可能になる。いくつかの実施態様では、この予測に基づいて、デバイス200はそれぞれのスクリーン240A〜240D上で情報が表示される態様を変更して、ユーザAのスクリーン240A〜240Dのうちの特定の1つとの過去のインタラクションに基づいて、ユーザAの情報へのアクセスおよび/または特定のリンクの選択を容易にし得る。
例えば、図3Cに示すように、上映中リンクに行なわれたスクリーン240C上のユーザのタッチ入力に応答して、コントローラ205は、スクリーン240Dの表示に先立って、図4Aに示すように、メモリ220にこの情報を格納されていてもよいタッチヒートマップ400Dにおいて収集された情報にアクセスしてもよい。図4Aに示すタッチヒートマップ400Dの例において収集された情報は、上映中リンクと関連付けられた、ユーザAの使用法およびスクリーン240Dとのインタラクションに対応し得る。ヒートマップ400Dからアクセスされ、コントローラ205によって処理された情報に基づいて、デバイス200は、スクリーン240D上でユーザAに対して表示されるユーザを変更し得る。当該変更は、本明細書では外観をユーザに合わせて適合させることも意味しており、以下でより詳細に説明される。この変更は、例えば、以下で詳しく説明されるように、タッチスクリーンインターフェース上のユーザのインタラクションに反応するユーザインターフェースコンポーネントの位置および/またはサイズの変更を含む。
例えば、タッチヒートマップ400Dに表れているタッチ入力データに基づいて、第1の領域410が、最も頻繁にユーザAからのタッチ入力を受け付けるスクリーン240Dの領域である可能性がある。タッチヒートマップから判断されたこの情報に基づいて、デバイス200は、スクリーン240D上でユーザAに対して提示され表示される情報の外観を変更可能である。図4Bに示す例では、タッチヒートマップ400Dにおいて収集された情報に基づいて、ユーザAは最も頻繁にディスプレイ240Dから購入チケットリンクを選択するため、スクリーン240D上に表示されている他のリンクと比較して、チケット購入リンクが拡大されている。これによって、ユーザの現在表示されているスクリーン240Dとの効率的で正確なインタラクションが容易になり、チケット購入リンクの選択が容易になる。特に、この配列によって、チケット購入リンク(タッチヒートマップにおいて収集されたデータに基づいて予測された)のみが自動的に拡大される。例えば、チケット購入リンクを含むスクリーンの部分をズームインするためにユーザによるピンチおよびズームアクションを必要とすることなく、チケット購入リンクのみを自動的に拡大できる。むしろ、残りの情報の一部のスクリーン外への移動と関連して、チケット購入リンクのみを自動的に拡大でき、それにより、他の情報にアクセスするために、または他の情報の表示サイズを縮小させることによって、ディスプレイにおけるスクローリングが必要になる。ユーザの次の選択の予測および予測された選択の拡大によって、代替的な選択を表示されたままの状態にかつ容易にアクセス可能な状態にしつつユーザの予測された選択の選択が容易になり、ユーザに対するユーティリティおよび機能性が拡張される。
いくつかの実施態様では、図3Dに示すタッチ入力に応答して、スクリーン240Dに関するタッチヒートマップ400Dに含まれるタッチ入力データによって、プロセッサ205は図4Bに示すスクリーン240Dに示されるようにチケット購入リンクを拡大し得、ユーザは、タッチ入力が購入手続きに先立ってチケット購入リンクを意図したものであると確認できる、または、修正されたタッチ入力を行なえる。このように、デバイス200は、タッチ入力が意図された領域(アイコン、リンクなど)に対して、特定のスクリーンに行なわれたタッチ入力だけでなく入力が受け付けられたスクリーンの領域に関連するタッチ入力データも考慮した、ユーザに関するタッチ入力データを収集し続けることができる。このタッチ入力データは、スクリーンに関してタッチヒートマップにおいて収集可能であり、ユーザ固有の入力習慣およびスタイルなどに基づいて予測をさらに洗練されたものにするために使用可能である。
この例では、図4Aに示すタッチヒートマップ400Dは、スクリーン240D上に提示された情報と関連付けられたユーザAのタッチ履歴の視覚的な表現を提供する。タッチヒートマップ400Dは必ずしもユーザAに対して表示されるわけではなく、ユーザAのスクリーン240Dとのインタラクションに関連するタッチ入力データに関する収集ツールを提供可能である。タッチヒートマップ400Dの例では、図4Aの第1の網掛けパターンで示される第1の領域410は、ユーザAによって最も頻繁にタッチされるスクリーン240Dの領域に対応し得る。図4Aでドットパターンで示される第2の領域240は、第1の領域410と比べてユーザAによって頻繁にタッチされないスクリーン240Dの領域に対応し得る。図4Aで第2の網掛けパターンで示される第3の領域430は、第2の領域420と比べてユーザAによって頻繁にタッチされないスクリーン240Dの領域に対応し得る。第1、第2または第3の領域によって覆われていないタッチヒートマップ400Dの領域または部分は、スクリーン240Dのこれらの部分に行なわれるタッチが頻繁ではないこと、またはタッチがないことを示し得る。
図3A〜図3Dおよび図4A、図4Bに示す実施態様の例では、タッチヒートマップ400Dは、ユーザAが最も頻繁にスクリーン240D上でタッチ入力を導く3つのタッチ入力領域410、420、および430の識別を含む。しかしながら、いくつかの実施態様では、タッチヒートマップ400Dは、例えば収集されたタッチ入力データ、特定のスクリーン上に提示された情報の種類、特定のスクリーンが表示されるべきタッチスクリーンディスプレイのサイズ、および他のそのような要素に応じて、より多いまたはより少ない数のタッチ入力領域の収集および識別が可能である。スクリーン240Dに関する付加的なタッチ入力データが収集されると、タッチヒートマップ400Dは、ユーザAによるスクリーン240Dのより直近の使用およびスクリーン240Dからの選択を考慮するようにアップデート可能である。
いくつかの実施態様では、タッチヒートマップ400D上の第1の領域(1つまたは複数)410、第2の領域(1つまたは複数)420、第3の領域(1つまたは複数)430を決定し表す際のタッチヒートマップ400Dにおけるタッチ入力データの順序付けまたはグループ分けは、相対的な閾値に基づいて確立可能である。例えば、スクリーン上で受け付けられた全タッチ入力のパーセンテージとして表現され、第1の閾値を超える、スクリーンの一領域における多くのタッチ入力は、その領域を、ユーザAによって最も頻繁にタッチされた、または最も頻繁に選択された項目に対応する第1の領域(1つまたは複数)410のうちの1つと指定し得る。スクリーンの他の領域の指定に際しても同様のアプローチが適用可能である。他のアプローチは、タッチヒートマップ400Dにおけるタッチ入力データを収集し表す際に採ることが可能である。
いくつかの実施態様では、タッチヒートマップに含まれるタッチ入力データを、特定のスクリーンからの項目のユーザの意図した選択を明らかにする、または確認するために使用可能である。例えば、図5Aに示すように、ユーザはゲームスクリーン240Eからカードゲームを選択可能であり、この選択に応答して、図5Bに示すように、最初のカードゲームスクリーン240Fを表示可能である。図5Bに示すスクリーン240Fの例では、設定アイコン、ヒントアイコン、プレイアイコン、および取消しアイコンを含む複数のアイコンが、スクリーン240Fの下側縁部に沿って表示されている。少なくとも部分的にスクリーン240Fの下側縁部に沿ったアイコンのサイズが比較的小さくアイコンが比較的近接して配置されているために、これらのアイコンのうちの1つを選択するユーザのタッチ入力が誤った場所に配置されることもある、目的のアイコン上に完全に配置されないこともある、または他の意図しないアイコンと重なる場合がある。
例えば、図5Bに示すように、ユーザはプレイアイコンにタッチ入力を行なって、ゲームを開始しカードを配ろうとする場合がある。しかしながら、プレイアイコンおよび取消しアイコンのサイズが比較的小さく、これらのアイコンが近接しているために、ユーザのタッチ入力が、誤ってプレイアイコンおよび取消しアイコンに重なることがある。このような例では、デバイス200はユーザのスクリーン240Fとのインタラクションに関連付けられたタッチヒートマップへのアクセスを有するため、デバイス200は、ユーザの目的の選択を識別するために、タッチヒートマップに含まれるタッチ入力情報を参照可能である。
例えば、いくつかの実施態様では、図5Bに示すタッチ入力に応答して、スクリーン240Fに関するタッチヒートマップに含まれるタッチ入力データによって、プロセッサ205は、プレイの開始をユーザからさらに確認することなくタッチ入力がプレイアイコンの選択というユーザの意図だと予測し、カードの組を配ってプレイを開始可能である。いくつかの実施態様では、この判断、すなわち、ユーザの意図の予測は、ユーザがプレイアイコンを選択する頻度に基づいて、例えばタッチヒートマップにおいて収集されたデータに基づいて、カードゲームアプリケーションを起動した直後にプロセッサ205によって行なうことが可能である。ここで、ヒートマップは、カードアプリケーションの起動直後にプレイアイコンが他のアイコンまたは可能性のある過去の選択よりもより頻繁に選択されていると特定する。したがって、当該予測から得られた情報は、カードゲームアプリケーションを起動するときに、デバイスが効率的でより速いユーザのデバイスとのインタラクションを提供できるという効果を有する。
いくつかの実施態様では、図5Bに示すタッチ入力に応答して、スクリーン240Fに関するタッチヒートマップに含まれるタッチ入力データによって、プロセッサ205は、図5Cに示すスクリーン240Gに示すようにプレイアイコンを拡大させることができ、タッチ入力がプレイを続けるに先立ってプレイアイコンを意図したものであると確認可能になる、または、修正されたタッチ入力を行なうことが可能になる。このように、デバイス200は、特定のスクリーンに行なわれたタッチ入力のみでなく、タッチ入力が意図された領域(アイコン、リンクなど)に対して、タッチ入力が受け付けられたスクリーンの領域に関連するタッチ入力データも反映した、ユーザに関するタッチ入力データを収集し続けることが可能になる。このタッチ入力データは、スクリーンに関してタッチヒートマップにおいて収集可能であり、ユーザ固有の入力習慣およびインタラクションスタイルなどに基づいてさらに予測を洗練するために使用可能である。
いくつかの実施態様では、デバイス200は、例えばタッチヒートマップにおいて収集されたデータに基づいて、プレイアイコンがゲームアプリケーション起動直後にユーザによって最も頻繁に選択されると判断可能であり、図5Aに示すスクリーン240Eからのカードゲームの選択に応答して、図5Cに示すようにタッチ入力を受け付けてアイコンのうちの1つを選択する前に、プレイアイコンを自動的に拡大し、拡大されたプレイアイコンを含む図5Cに示すスクリーン240Gを表示可能である。プレイアイコンの拡大によって、ユーザによってタッチスクリーン上で、特に小さなタッチスクリーン領域を有するデバイス上でプレイアイコンを選択する際の精度が高くなる。
また、いくつかの実施態様では、本明細書で述べるような実施態様に従って、同じような態様で、タッチスクリーン表示装置のタッチセンシティブ面上でのタッチおよびドラッグ入力に関するユーザの意図を予測して洗練されたものにするためにも、タッチヒートマップを使用可能である。
いくつかの実施態様では、デバイス200によって生成されたタッチヒートマップに含まれるタッチ入力データを定期的にアプリケーション開発者に戻して、ユーザのアプリケーションとのインタラクションおよびユーザのユーザインターフェースとのインタラクションを改善可能である。
図6は、本明細書で説明される実施態様に従って、デバイスのタッチスクリーンディスプレイのタッチセンシティブ面上でのユーザ入力の予測および/または洗練を行なうためにタッチヒートマップにアクセスするように構成された、例えば図1A〜図1Dに示す電子コンピュータデバイス100、150、および190のうちの一つなどの電子コンピュータデバイス、および/または図2に示す電子コンピュータデバイスを動作させる例示的な方法のフローチャートである。
図6に示すように、デバイスが動作可能なとき、デバイスはブロック610において、デバイスのタッチスクリーンディスプレイのタッチセンシティブ面上のタッチ入力を受け付けし得る。タッチ入力は、例えば、図3A〜図3Dおよび図5A〜図5Cに関して上述したような、リンクまたはアイコンの選択であり得る。ブロック610でのタッチ入力の受け付けに応答して、デバイスは、ブロック620で、タッチスクリーンディスプレイによって表示され、受け付けられたタッチ入力と関連付けられた入力スクリーンに対応するタッチヒートマップにアクセスし得る。デバイスはその後、ブロック630で、タッチヒートマップにおいて収集されたタッチ入力データを使用して、受け付けられたタッチ入力によって意図された選択を予測し得る。
特に、いくつかの実施態様では、デバイスは、タッチヒートマップにおいて収集されたタッチ入力データを使用して、ユーザが受け付けられたタッチ入力に基づいて表示されるべきスクリーン上で選択する可能性のあるアイコン(リンクおよびアイコンなど)を予想し得る。例えば、いくつかの実施態様では、デバイスは、タッチヒートマップにおいて収集されたタッチ入力データを使用してユーザが選択する可能性のあるリンクまたはアイコンを予測し得、その後、図4Bおよび図5Cに示すように、対応する入力スクリーンを表示するときに予測されたリンクまたはアイコンを拡大して、ユーザによるそのリンクまたはアイコンの正確な選択を容易にし得る。いくつかの実施態様では、デバイスは、図5Bに示すように、選択可能な1つより多いリンクまたはアイコンをタッチ入力が誤って覆ってしまったときに、タッチヒートマップにおいて収集されたタッチ入力データを使用して選択に関して意図されたリンクまたはアイコンを予測し得る。
ブロック640で項目の選択が確認されると、デバイスは、ブロック650でその選択を実行し得る。いくつかの実施態様では、項目の選択の確認は、例えば、拡大されたリンクまたはアイコンに対応するタッチスクリーンディスプレイのタッチセンシティブ面の領域において受け付けられたタッチ入力を含み得る。いくつかの実施態様では、確認は、例えば、選択された項目の実行を続けるために、ヒートマップに含まれるタッチ入力データに基づいたデバイスによる確認を含み得る。これは、例えば、予測された選択を逆にするために前画面に戻るユーザからタッチ入力が受け付けられていないという確認も含み得る。
本明細書で説明される実施態様に従った、電子デバイスおよび電子デバイスを動作させる方法は、ユーザの電子デバイスの異なるアプリケーションとのインタラクションのタッチヒートマップ(1つまたは複数)および関連するユーザプロファイル(1つまたは複数)を用いて、デバイスのタッチスクリーンディスプレイのタッチセンシティブ面上のユーザのタッチ入力によって意図されるユーザの選択を予測することができる。これにより、ユーザのデバイス利便性、ならびにデバイスによってユーザに提供されるユーティリティおよび機能性が高められ得る。
図7は、図1A〜図1Dにそれぞれ示すコンピュータデバイス100、150、および190に類似の汎用コンピュータデバイス700および汎用モバイルコンピュータデバイス780の例を示し、それぞれのコンピュータデバイスのコンポーネントのいくつかを示す。コンピュータデバイス700は、ラップトップ、コンバーチブル、タブレット、デスクトップ、ワークステーション、携帯情報端末、サーバ、ブレードサーバ、メインフレーム、および他の適切なコンピュータといった、様々な形態のデジタルコンピュータを表わすことを意図している。コンピュータデバイス780は、携帯情報端末、セルラー電話、スマートフォン、および他の同様のコンピュータデバイスといった、様々な形態のモバイルデバイスを表わすことを意図している。ここに示すコンポーネント、それらの接続および関係、ならびにそれらの機能は例示であることが意図されているに過ぎず、本文書に記載のおよび/または請求項に記載の本発明の実施態様を限定することを意図されたものではない。
コンピュータデバイス700は、プロセッサ702、メモリ704、記憶装置706、メモリ704および高速拡張ポート710に接続している高速インターフェース708、ならびに低速バス714および記憶装置706に接続している低速インターフェース712を含む。コンポーネント702、704、706、708、710、および712の各々は、さまざまなバスを用いて相互接続されており、共通のマザーボード上にまたは他の態様で適宜搭載可能である。プロセッサ702は、コンピュータデバイス700内で実行される命令を処理可能であり、この命令には、GUIのためのグラフィック情報を高速インターフェース708に結合されているディスプレイ716などの外部入出力デバイス上に表示するためにメモリ704または記憶装置706に記憶されている命令が含まれる。他の実施態様では、複数のプロセッサおよび/または複数のバスが、複数のメモリおよび複数種類のメモリとともに必要に応じて用いられ得る。また、複数のコンピュータデバイス700が接続され得、各デバイスは、(例えばサーババンク、ブレードサーバのグループ、またはマルチプロセッサシステムとして)必要な動作の一部を提供する。
メモリ704は、情報をコンピュータデバイス700内に格納する。一実施態様では、メモリ704は1つまたは複数の揮発性メモリユニットである。別の実施態様では、メモリ704は1つまたは複数の不揮発性メモリユニットである。また、メモリ704は、磁気ディスクまたは光ディスクといった別の形態のコンピュータ読取可能媒体であってもよい。
記憶装置706は、コンピュータデバイス700に大容量記憶を提供可能である。一実施態様では、記憶装置706は、フロッピー(登録商標)ディスクデバイス、ハードディスクデバイス、光ディスクデバイス、またはテープデバイス、フラッシュメモリもしくは他の同様のソリッドステートメモリデバイス、またはストレージエリアネットワークもしくは他のコンフィギュレーションにおけるデバイスを含む多数のデバイスといった、コンピュータ読取可能媒体であってもよく、または当該コンピュータ読取可能媒体を含んでいてもよい。コンピュータプログラムプロダクトが情報担体内に有形に具体化され得る。また、コンピュータプログラムプロダクトは、実行されると上述のような1つ以上の方法を実行する命令を含み得る。情報担体は、メモリ704、記憶装置706、またはプロセッサ702上のメモリといった、コンピュータ読取可能媒体または機械読取可能媒体である。
高速コントローラ708はコンピュータデバイス800のための帯域幅集約的な動作を管理するのに対して、低速コントローラ712はより低い帯域幅集約的な動作を管理する。そのような機能の割当ては例示に過ぎない。一実施態様では、高速コントローラ708は、メモリ704、ディスプレイ716に(例えばグラフィックスプロセッサまたはアクセラレータを介して)、および様々な拡張カード(図示せず)を受け付け得る高速拡張ポート710に結合される。本実施態様では、低速コントローラ712は、記憶装置706および低速拡張ポート714に結合される。様々な通信ポート(例えばUSB、ブルートゥース(登録商標)、イーサネット(登録商標)、無線イーサネット)を含み得る低速拡張ポートは、キーボード、ポインティングデバイス、スキャナ、またはスイッチもしくはルータといったネットワーキングデバイスなどの1つ以上の入出力デバイスに、例えばネットワークアダプタを介して結合され得る。
コンピュータデバイス700は、図に示すように多数の異なる形態で実現されてもよい。例えば、コンピュータデバイス700は、標準的なサーバ720として、またはそのようなサーバのグループ内で複数回実現されてもよい。また、コンピュータデバイス700は、ラックサーバシステム724の一部として実現されてもよい。さらに、コンピュータデバイス700は、ラップトップコンピュータ722などのパーソナルコンピュータにおいて実現されてもよい。あるいは、コンピュータデバイス700からのコンポーネントは、デバイス780などのモバイルデバイス(図示せず)内の他のコンポーネントと組合されてもよい。そのようなデバイスの各々がコンピュータデバイス700、780の1つ以上を含んでいてもよく、システム全体が、互いに通信する複数のコンピュータデバイス700、780で構成されてもよい。
コンピュータデバイス780は、数あるコンポーネントの中でも特に、プロセッサ782、メモリ764、ディスプレイ784などの入出力デバイス、通信インターフェース766、およびトランシーバ768を含む。また、デバイス780には、マイクロドライブまたは他のデバイスなどの記憶装置が提供されて付加的なストレージが提供されてもよい。コンポーネント780、782、764、784、766および768の各々は様々なバスを用いて相互に接続されており、当該コンポーネントのいくつかは共通のマザーボード上にまたは他の態様で適宜搭載され得る。
プロセッサ782は、メモリ764に記憶されている命令を含む、コンピュータデバイス780内の命令を実行可能である。プロセッサは、別個の複数のアナログおよびデジタルプロセッサを含むチップのチップセットとして実現されてもよい。プロセッサは、例えば、ユーザインターフェース、デバイス780が実行するアプリケーション、およびデバイス780による無線通信の制御といった、デバイス780の他のコンポーネントの協調を提供し得る。
プロセッサ782は、ディスプレイ784に結合された制御インターフェース788およびディスプレイインターフェース786を介してユーザと通信し得る。ディスプレイ784は、例えば、TFT LCD(薄膜トランジスタ液晶ディスプレイ)もしくはOLED(有機発光ダイオード)ディスプレイ、または他の適切なディスプレイ技術であり得る。ディスプレイインターフェース786は、ディスプレイ784を駆動してグラフィックおよび他の情報をユーザに提示するための適切な回路を含み得る。制御インターフェース788はユーザからコマンドを受け付け、当該コマンドをプロセッサ782に送信するために変換し得る。例えば、制御インターフェース788は、例えばキーボード780を介してユーザによって入力された入力を受け付けし得、その入力を処理、例えば表示されたテキストボックスへの対応するテキストの入力のために、プロセッサ782に送信し得る。さらに、外部インターフェース762が、デバイス780と他のデバイスとの隣接通信を可能にするために、プロセッサ782と通信した状態で提供されてもよい。外部インターフェース762は、例えば、ある実施態様では有線通信を提供し、他の実施態様では無線通信を提供してもよく、複数のインターフェースが用いられてもよい。
メモリ764は、情報をコンピュータデバイス780内に格納する。メモリ764は、1つもしくは複数のコンピュータ読取可能媒体、1つもしくは複数の揮発性メモリユニット、または1つもしくは複数の不揮発性メモリユニットの1つ以上として実現され得る。さらに、拡張メモリ774が提供され、例えばSIMM(Single In Line Memory Module)カードインターフェースを含み得る拡張インターフェース772を介してデバイス880に接続されてもよい。このような拡張メモリ774は、デバイス780に余分のストレージスペースを提供し得るか、またはデバイス780のためのアプリケーションもしくは他の情報をさらに記憶し得る。具体的には、拡張メモリ774は上述のプロセスを実行または補足するための命令を含み得、さらにセキュア情報を含み得る。ゆえに、例えば、拡張メモリ774はデバイス880のためのセキュリティモジュールとして提供されてもよく、デバイス880のセキュアな使用を許可する命令でプログラムされてもよい。さらに、ハッキング不可能なようにSIMMカード上に識別情報を置くといったように、セキュアなアプリケーションが付加的な情報とともにSIMMカードを介して提供されてもよい。
メモリは、以下に記載のように、例えばフラッシュメモリおよび/またはNVRAMメモリを含み得る。一実施態様では、コンピュータプログラムプロダクトが情報担体内に有形に具体化される。コンピュータプログラムプロダクトは、実行されると上述のような1つ以上の方法を実行する命令を含む。情報担体は、メモリ764、拡張メモリ874、またはプロセッサ782上のメモリといった、コンピュータ読取可能媒体または機械読取可能媒体であり、これは、例えばトランシーバ768または外部インターフェース762上で受け付けされ得る。
デバイス780は、必要に応じてデジタル信号処理回路を含み得る通信インターフェース766を介して無線通信し得る。通信インターフェース766は、とりわけ、GSM(登録商標)音声通話、SMS、EMS、またはMMSメッセージング、CDMA、TDMA、PDC、WCDMA(登録商標)、CDMA2000、またはGPRSといった、様々なモードまたはプロトコル下の通信を提供し得る。そのような通信は、例えば無線周波数トランシーバ768を介して起こり得る。さらに、ブルートゥース、Wi−Fi、または他のそのようなトランシーバ(図示せず)を用いるなどして、短距離通信が起こり得る。さらに、GPS(全地球測位システム)レシーバモジュール770が付加的なナビゲーション関連および位置関連の無線データをデバイス780に提供し得、当該データはデバイス780上で実行されるアプリケーションによって適宜用いられ得る。
また、デバイス780は、ユーザから口頭情報を受け付けて当該情報を使用可能なデジタル情報に変換し得る音声コーデック760を用いて可聴的に通信し得る。音声コーデック760も同様に、例えばデバイス780のハンドセット内で、スピーカを介すなどしてユーザに可聴音を生成し得る。そのような音は音声電話からの音を含んでいてもよく、録音された音(例えば音声メッセージ、音楽ファイル等)を含んでいてもよく、さらに、デバイス780上で実行されるアプリケーションが生成する音を含んでいてもよい。
コンピュータデバイス780は、図に示すように多数の異なる形態で実現されてもよい。例えば、コンピュータデバイス780はセルラー電話780として実現されてもよい。また、コンピュータデバイス780は、スマートフォン782、携帯情報端末、または他の同様のモバイルデバイスの一部として実現されてもよい。
本明細書で説明される様々な技術の実施態様は、デジタル電子回路、もしくはコンピュータハードウェア、ファームウェア、ソフトウェア、またはそれらの組合わせで実現されてもよい。実施態様は、データ処理装置、例えばプログラム可能なプロセッサ、コンピュータ、または複数のコンピュータによる処理のために、またはそれらの動作を制御するために、コンピュータプログラム製品、すなわち例えば機械可読記憶装置(コンピュータ可読媒体)などの情報担体に有形で実施されるコンピュータプログラムとして実現されてもよい。したがって、コンピュータ可読記憶媒体は、実行されるとプロセッサ(例えば、ホストデバイスのプロセッサ、クライアントデバイスのプロセッサ)にプロセスを実行させる命令を格納するように構成することができる。上述したコンピュータプログラムのようなコンピュータプログラムは、コンパイルまたは解釈された言語を含む任意の形式のプログラミング言語で書かれ得、スタンドアロンプログラムとして、または、モジュール、コンポーネント、サブルーチン、もしくは、コンピューティング環境で使用するのに好適な他のユニットとして任意の形態で展開され得る。コンピュータプログラムは、1つのコンピュータまたは1つの場所に位置するかもしくは複数の場所にわたって分散され通信ネットワークによって相互接続される複数のコンピュータ上で処理されるように展開され得る。
方法ステップは、入力データ上で動作し出力を生成することにより機能を実行するよう1つ以上のプログラマブルプロセッサがコンピュータプログラムを実行することによって実行されてもよい。方法ステップの実行および装置の実施は、例えばFPGA(フィールドプログラマブルゲートアレイ)またはASIC(特定用途向け集積回路)といった特殊目的論理回路系で行われてもよい。
コンピュータプログラムの処理に好適であるプロセッサは、例として、汎用マイクロプロセッサおよび特殊目的マイクロプロセッサの両方、ならびに任意の種類のデジタルコンピュータの任意の1つ以上のプロセッサを含む。一般に、プロセッサは、リードオンリメモリもしくはランダムアクセスメモリまたはその両方から命令およびデータを受け付けることになる。コンピュータの要素は、命令を実行するための少なくとも1つのプロセッサと、命令およびデータを格納するための1つ以上のメモリデバイスとを含んでもよい。一般に、コンピュータはさらに、例えば磁気ディスク、光磁気ディスクまたは光ディスクといった、データを格納するための1つ以上の大容量記憶装置を含むか、当該1つ以上の大容量記憶装置からデータを受け取るかもしくは当該1つ以上の大容量記憶装置にデータを転送するよう動作可能に結合されるか、またはその両方を行ってもよい。コンピュータプログラム命令およびデータを実施するのに好適である情報担体は、例として、半導体メモリデバイス、例えばEPROM、EEPROMおよびフラッシュメモリデバイスを含む全ての形態の不揮発性メモリと、例えば内部ハードディスクまたはリムーバブルディスクといった磁気ディスクと、光磁気ディスクと、CD−ROMおよびDVD−ROMディスクとを含む。プロセッサおよびメモリは、特殊目的論理回路系によって補足され得るか、またはこの論理回路系に組み込まれ得る。
ユーザとのインタラクションを提供するために、実施態様は、例えば陰極線管(CRT)、発光ダイオード(LED)または液晶ディスプレイ(LCD)モニタといったユーザに対して情報を表示するための表示装置と、ユーザがコンピュータに入力を提供可能であるキーボードおよびポインティングデバイス、例えばマウスまたはトラックボールとを有するコンピュータ上で実現されてもよい。他の種類のデバイスが同様に、ユーザとのインタラクションを提供するために使用され得る。例えば、ユーザに提供されるフィードバックは、例えば視覚フィードバック、聴覚フィードバックまたは触覚フィードバックといった任意の形態の感覚フィードバックであり得る。ユーザからの入力は、音響入力、発話入力、または触覚入力を含む任意の形態で受け付けされ得る。
実施態様は、例えばデータサーバなどのバックエンドコンポーネントを含むコンピューティングシステム、またはアプリケーションサーバなどのミドルウェアコンポーネントを含むコンピューティングシステム、または例えばユーザが実施態様とインタラクション可能なグラフィカルユーザインターフェースもしくはウェブブラウザを有するクライアントコンピュータなどのフロントエンドコンポーネントを含むコンピューティングシステム、またはそのようなバックエンド、ミドルウェア、もしくはフロントエンドコンポーネントの任意の組合わせにおいて実現されてもよい。コンポーネントは、例えば通信ネットワークといったデジタルデータ通信の任意の形態または媒体によって相互接続されてもよい。通信ネットワークの例は、ローカルエリアネットワーク(LAN)およびワイドエリアネットワーク(WAN)、例えばインターネットを含む。
本明細書を通じて「1つの実施態様」または「実施態様」という言及は、実施態様と関連して記載される特定の特色、構造、または特徴が少なくとも1つの実施態様に含まれていることを意味する。したがって、本明細書を通じてさまざまな場所における「1つの実施態様において」または「実施態様において」というフレーズの出現は、必ずしも同一の実施態様を示すわけではない。さらに、「または」という用語は排他的な「または」ではなく包括的な「または」を意味すると意図されている。
記載された実施態様の特定の特色は本明細書に記載されているように示されているが、当業者には多くの修正、置換、変更および均等物がここで思い浮かぶであろう。したがって、特許請求の範囲は、実施態様の範囲内にあるすべてのそのような修正および変更を包含するように意図されていることを理解されたい。それらは限定ではなく単なる例として提示されたものであり、形態および細部の様々な変更がなされ得ることを理解されたい。相互排他的な組合わせを除いて、本明細書に記載の装置および/または方法の任意の部分を、任意の組合わせで組合わせることができる。本明細書で説明される実施態様は、説明される異なる実施態様の機能、構成要素、および/または特色の様々な組合せおよび/または下位組合せを含むことができる。
記載された実施態様の特定の特徴は本明細書に記載されているように示されているが、当業者には多くの修正、置換、変更および均等物がここで思い浮かぶであろう。したがって、特許請求の範囲は、実施態様の範囲内にあるすべてのそのような修正および変更を包含するように意図されていることを理解されたい。それらは限定ではなく単なる例として提示されたものであり、形態および細部の様々な変更がなされ得ることを理解されたい。相互排他的な組合わせを除いて、本明細書に記載の装置および/または方法の任意の部分を、任意の組合わせで組合わせることができる。本明細書で説明される実施態様は、説明される異なる実施態様の機能、構成要素、および/または特色の様々な組合せおよび/または下位組合せを含むことができる。
さらなる実施態様が、以下の例において要約される。
例1:デバイスを動作させる方法は、デバイスのタッチスクリーンの表示領域上に複数の項目を表示することと、グラフィカルユーザインタフェースが表示されるタッチスクリーン上にユーザから受け付けた複数のタッチ入力と複数のリリース入力とに基づいてユーザに固有のタッチヒートマップを生成し、タッチヒートマップをメモリに格納することとを備える。タッチヒートマップは、デバイスの実行可能なアプリケーションと関連付けられている。方法はさらに、アプリケーションを実行することと、メモリから格納されたタッチヒートマップにアクセスすることと、タッチスクリーン上で第1のタッチ入力を受け付けることと、格納されたタッチヒートマップとタッチヒートマップによって提供されたタッチ入力履歴とに基づいてユーザに合わせた外観を有するグラフィカルユーザインターフェースを表示することとを備える。
例1:デバイスを動作させる方法は、デバイスのタッチスクリーンの表示領域上に複数の項目を表示することと、グラフィカルユーザインタフェースが表示されるタッチスクリーン上にユーザから受け付けた複数のタッチ入力と複数のリリース入力とに基づいてユーザに固有のタッチヒートマップを生成し、タッチヒートマップをメモリに格納することとを備える。タッチヒートマップは、デバイスの実行可能なアプリケーションと関連付けられている。方法はさらに、アプリケーションを実行することと、メモリから格納されたタッチヒートマップにアクセスすることと、タッチスクリーン上で第1のタッチ入力を受け付けることと、格納されたタッチヒートマップとタッチヒートマップによって提供されたタッチ入力履歴とに基づいてユーザに合わせた外観を有するグラフィカルユーザインターフェースを表示することとを備える。
例2:ユーザに合わせたグラフィカルユーザインターフェースを表示することは、第1のタッチ入力とタッチヒートマップによって提供されたタッチ入力履歴とに基づいてタッチスクリーン上の第2のタッチ入力を予測することと、選択に関してタッチスクリーンの表示領域上に表示された複数の項目のうちの1つの項目の外観を変更することとを含む、例1の方法。
例3:第2のタッチ入力の予測に応答して、第2のタッチ入力が当該1つの項目を含む確率が、第2のタッチ入力が複数の項目のうちの他のいずれか1つの項目を含む確率よりも高いと判断することをさらに備える、例2の方法。
例4:アプリケーションのユーザに関するユーザプロファイルを定義するように、ユーザに固有のタッチヒートマップによって提供されるタッチ入力履歴を特定のユーザと関連付けることと、ユーザプロファイルを、アプリケーションの入力インターフェースと関連付けることとをさらに備える、例1〜3の1つの方法。
例5:アプリケーションは、タッチスクリーン上に表示される複数の入力スクリーンに対応する複数の入力インターフェースを含み、方法はさらに、タッチヒートマップおよび関連付けられたユーザプロファイルを、複数の入力インターフェースおよびアプリケーションの対応する入力スクリーンの各々について生成することをさらに備える、例1〜3の1つの方法。
例6:複数の項目のうちの1つの項目の外観を変更することは、タッチスクリーン上に表示された複数の項目のうちの1つの項目を拡大すること、またはタッチスクリーン上に表示された複数の項目のうちの1つの項目を強調することを含む、例2〜5の1つの方法。
例7:複数の項目のうちの変更された外観を有する1つの項目の表示が変更される一方で、複数の項目のうちの当該1つの項目以外の項目のサイズおよび外観を維持することをさらに備える、例2〜6の1つの方法。
例8:タッチスクリーン上で第1のタッチ入力を受け付けることは、第1の項目および第2の項目の双方に接触するタッチスクリーンの領域上の第1のタッチ入力を受け付けることを含む、例1〜7の1つに記載の方法。
例9:第1のタッチ入力とタッチヒートマップによって提供されるタッチ入力履歴とに基づいて第2のタッチ入力を予測することは、タッチヒートマップによって提供されるタッチ入力履歴に基づいて、第1の項目または第2の項目のうちの一方に対応する目的タッチ領域を予測することと、予測に基づいて、第1の項目または第2の項目のうちの一方と関連付けられたアプリケーションのコンポーネントを実行することとをさらに含む、例8の方法。
例10:予測に基づいて第1の項目または第2の項目のうちの一方の表示を拡大することと、第2のタッチ入力に応答して、第1の項目または第2の項目のうちの一方と関連付けられたコンポーネントを実行することとをさらに備え、第2のタッチ入力は、第1の項目または第2の項目のうちの一方の拡大された表示に対応するタッチスクリーンの領域において受け付けられる、例9の方法。
例11:アプリケーションと関連付けられた複数の付加的なタッチ入力およびリリース入力をタッチスクリーン上でユーザから収集することと、複数の付加的なタッチ入力に基づいてユーザに固有のタッチヒートマップをアップデートすることと、アップデートされたタッチヒートマップを格納することとをさらに備える、例1〜10の1つの方法。
例12:方法は、電子コンピュータデバイスのタッチスクリーン上で第1のタッチ入力を受け付けることと、第1のタッチ入力のリリースに応答してユーザに固有のタッチヒートマップにアクセスすることとを備える。タッチヒートマップは、受け付けられた第1のタッチ入力と関連付けられた入力インターフェースに対応する、ユーザに関するタッチ入力データを含む。方法はさらに、ユーザに固有のタッチヒートマップに含まれるユーザに関するタッチ入力データに基づいて、入力インターフェースを介して利用可能な複数の項目からユーザによって行なわれるべき選択を予測することと、予測に基づいてユーザに関するユーザ入力インターフェースを表示することとをさらに備える。
例13:タッチヒートマップに含まれるユーザに関するタッチ入力データに基づいてユーザ入力インターフェースを介して利用可能な複数の項目のうちの1つの項目の選択をユーザに関して予測することは、タッチヒートマップに含まれるタッチ入力データに基づいて、ユーザ入力インターフェースに関するタッチ入力履歴およびユーザ入力インターフェースのユーザに関して関連付けられたユーザプロファイルを定義することと、タッチ入力履歴と関連付けられたユーザプロファイルとに基づいて、ユーザによって行なわれるべき選択がユーザ入力インターフェースを介して利用可能な複数の項目のうちの1つの項目を含む確率が、ユーザによって行なわれるべき選択が複数の項目のうちの他の項目を含む確率よりも高いと判断することとをさらに含む、例12の方法。
例14:予測に基づいてユーザに関するユーザ入力インターフェースを表示することは、ユーザ入力インターフェース内の複数の項目のうちの決定された項目の表示サイズを拡大することと、項目の拡大された表示に対応するタッチスクリーンの領域内で受け付けられた第2のタッチ入力に応答して、当該項目と関連付けられたアプリケーションのコンポーネントを実行することとを含む、例12または13の方法。
例15: 第1のタッチ入力を受け付けることは、ユーザ入力インターフェースに含まれる複数の項目のうちの第1の項目および第2の項目の双方に接触するタッチスクリーンの領域上で第1のタッチ入力を受け付けることを含む、例12〜14の1つの方法。
例16:タッチヒートマップに含まれるユーザに関するタッチ入力データに基づいて、ユーザ入力インターフェースを介して利用可能な複数の項目からユーザによって行なわれるべき選択を予測することは、タッチヒートマップによって提供されるタッチ入力履歴と対応するユーザプロファイルとに基づいて、第1の項目または第2の項目のうちの一方に対応する目的タッチ領域を予測することと、予測に基づいて、第1の項目または第2の項目のうちの一方と関連付けられたアプリケーションのコンポーネントを実行することとを含む、例12〜15の1つの方法。
例17:予測に基づいて第1の項目または第2の項目のうちの一方の表示を拡大することと、第1の項目または第2の項目のうちの一方の拡大された表示に対応するタッチスクリーンの領域において受け付けられた第2のタッチ入力に応答して、第1の項目または第2の項目のうちの一方と関連付けられたアプリケーションのコンポーネントを実行することとをさらに備える、例16の方法。
例18:電子コンピュータデバイスは、タッチセンシティブ面を有するタッチスクリーンを備える表示装置と、実行可能な命令を格納するメモリと、命令を実行するように構成されたプロセッサとを備える。命令は、電子コンピュータデバイスに、ユーザおよびデバイスによって実行可能なアプリケーションと関連付けられたタッチヒートマップを、タッチスクリーンのタッチセンシティブ面上で受け付けられた複数のタッチ入力に基づいて生成することと、メモリにタッチヒートマップを格納することと、タッチスクリーンのタッチセンシティブ面上の第1のタッチ入力および第1のタッチ入力のリリースに応答してアプリケーションを実行することと、第1のタッチ入力およびタッチヒートマップによって提供されるアプリケーション内のユーザに関するタッチ入力履歴に基づいて第2のタッチ入力を予測することとを行なわせる。
例19:命令はさらに、電子コンピュータデバイスに、第2のタッチ入力がタッチスクリーンの表示領域に表示される複数の項目のうちの1つの項目を含む確率が第2のタッチ入力が複数の項目のうちの他のいずれかの項目を含む確率よりも高いと判断することと、タッチスクリーンの表示領域において1つの項目の表示を拡大することとを行なわせる、例18のデバイス。
例20:第1のタッチ入力はタッチスクリーンの表示領域に表示された複数の項目のうちの第1の項目および第2の項目の双方に接触し、命令は電子コンピュータデバイスにさらに、タッチヒートマップによって提供されるユーザに関するタッチ入力履歴に基づいて、第1の項目または第2の項目のうちの一方に対応する目的タッチ領域を予測することと、予測に基づいて、第1の項目または第2の項目のうちの一方に関連付けられたアプリケーションのコンポーネントを実行することとをさらに行なわせる、例18または19のデバイス。
Claims (20)
- デバイスを動作させる方法であって、
前記デバイスのタッチスクリーンの表示領域上に複数の項目を表示することと、
グラフィカルユーザインタフェースが表示される前記タッチスクリーン上にユーザから受け付けた複数のタッチ入力と複数のリリース入力とに基づいて前記ユーザに固有のタッチヒートマップを生成し、前記タッチヒートマップをメモリに格納することとを備え、前記タッチヒートマップは、前記デバイスの実行可能なアプリケーションと関連付けられており、前記方法はさらに、
前記アプリケーションを実行することと、
前記メモリから前記格納されたタッチヒートマップにアクセスすることと、
前記タッチスクリーン上で第1のタッチ入力を受け付けることと、
前記格納されたタッチヒートマップと前記タッチヒートマップによって提供されたタッチ入力履歴とに基づいて、変更されたグラフィカルユーザインターフェースを表示することとを備える、方法。 - 変更されたグラフィカルユーザインターフェースを表示することは、
前記第1のタッチ入力と前記タッチヒートマップによって提供された前記タッチ入力履歴とに基づいて前記タッチスクリーン上の第2のタッチ入力を予測することと、
選択に関して前記タッチスクリーンの前記表示領域に表示された前記複数の項目のうちの1つの項目の外観を変更することとを含む、請求項1に記載の方法。 - 前記第2のタッチ入力の予測に応答して、前記第2のタッチ入力が前記1つの項目を含む確率が前記第2のタッチ入力が前記複数の項目のうちの他のいずれか1つの項目を含む確率よりも高いと判断することをさらに備える、請求項2に記載の方法。
- 前記アプリケーションのユーザに関するユーザプロファイルを定義するために、前記ユーザに固有のタッチヒートマップによって提供される前記タッチ入力履歴を特定のユーザと関連付けることと、
前記ユーザプロファイルを、前記アプリケーションの入力インターフェースと関連付けることとをさらに備える、請求項3に記載の方法。 - 前記アプリケーションは、前記タッチスクリーン上に表示される複数の入力スクリーンに対応する複数の入力インターフェースを含み、
前記方法はさらに、タッチヒートマップおよび関連付けられたユーザプロファイルを、前記複数の入力インターフェースおよび前記アプリケーションの対応する入力スクリーンの各々について生成することをさらに備える、請求項4に記載の方法。 - 前記複数の項目のうちの1つの項目の外観を変更することは、前記タッチスクリーン上に表示された前記複数の項目のうちの前記1つの項目を拡大すること、または前記タッチスクリーン上に表示された前記複数の項目のうちの前記1つの項目を強調することを含む、請求項2に記載の方法。
- 前記複数の項目のうちの変更された外観を有する前記1つの項目の表示が変更される一方で、前記複数の項目のうちの前記1つの項目以外の項目のサイズおよび外観を維持することをさらに備える、請求項6に記載の方法。
- 前記タッチスクリーン上で第1のタッチ入力を受け付けることは、第1の項目および第2の項目の双方に接触する前記タッチスクリーンの領域上で前記第1のタッチ入力を受け付けることを含む、請求項2に記載の方法。
- 前記第1のタッチ入力と前記タッチヒートマップによって提供される前記タッチ入力履歴とに基づいて第2のタッチ入力を予測することは、
前記タッチヒートマップによって提供される前記タッチ入力履歴に基づいて、前記第1の項目または前記第2の項目のうちの一方に対応する目的タッチ領域を予測することと、
前記予測に基づいて、前記第1の項目または前記第2の項目のうちの前記一方と関連付けられた前記アプリケーションのコンポーネントを実行することとを含む、請求項8に記載の方法。 - 前記予測に基づいて、前記第1の項目または前記第2の項目のうちの前記一方の表示を拡大することと、
前記第2のタッチ入力に応答して、前記第1の項目または前記第2の項目のうちの前記一方と関連付けられた前記コンポーネントを実行することとをさらに備え、前記第2のタッチ入力は、前記第1の項目または前記第2の項目のうちの前記一方の前記拡大された表示に対応する前記タッチスクリーンの領域内において受け付けられる、請求項9に記載の方法。 - 複数の付加的なタッチ入力およびリリース入力を前記タッチスクリーン上でユーザから収集することをさらに備え、前記複数の付加的なタッチ入力は、前記アプリケーションと関連付けられており、
前記複数の付加的なタッチ入力に基づいて前記ユーザに固有のタッチヒートマップをアップデートすることと、
前記アップデートされたタッチヒートマップを格納することとをさらに備える、請求項1に記載の方法。 - 電子コンピュータデバイスのタッチスクリーン上で第1のタッチ入力を受け付けることと、
前記第1のタッチ入力のリリースに応答して、ユーザに固有のタッチヒートマップにアクセスすることとを備え、前記タッチヒートマップは、前記受け付けられた第1のタッチ入力と関連付けられた入力インターフェースに対応する、前記ユーザのためのタッチ入力データを含み、さらに、
前記ユーザに固有のタッチヒートマップに含まれる前記ユーザに関する前記タッチ入力データに基づいて、前記入力インターフェースを介して利用可能な複数の項目から前記ユーザによって行なわれるべき選択を予測することと、
前記予測に基づいて前記ユーザに関するユーザ入力インターフェースを表示することとを備える、方法。 - 前記タッチヒートマップに含まれる前記ユーザに関する前記タッチ入力データに基づいて前記ユーザ入力インターフェースを介して利用可能な複数の項目のうちの1つの項目の選択を前記ユーザに関して予測することは、
前記タッチヒートマップに含まれる前記タッチ入力データに基づいて、前記ユーザ入力インターフェースに関するタッチ入力履歴および前記ユーザ入力インターフェースの前記ユーザに関する関連付けられたユーザプロファイルを定義することと、
前記タッチ入力履歴と前記関連付けられたユーザプロファイルとに基づいて、前記ユーザによって行なわれるべき選択が前記ユーザ入力インターフェースを介して利用可能な前記複数の項目のうちの1つの項目を含む確率が前記ユーザによって行なわれるべき選択が前記複数の項目のうちの他の項目を含む確率よりも高いと判断することと、
をさらに含む、請求項12に記載の方法。 - 前記予測に基づいて前記ユーザに関するユーザ入力インターフェースを表示することは、
前記ユーザ入力インターフェース内の前記複数の項目のうちの前記決定された項目の表示サイズを拡大することと、
前記項目の前記拡大された表示に対応する前記タッチスクリーンの領域内で受け付けた第2のタッチ入力に応答して、前記項目と関連付けられた前記アプリケーションのコンポーネントを実行することとを含む、請求項13に記載の方法。 - 第1のタッチ入力を受け付けることは、前記ユーザ入力インターフェースに含まれる前記複数の項目のうちの第1の項目および第2の項目の双方に接触する前記タッチスクリーンの領域上で前記第1のタッチ入力を受け付けることを含む、請求項12に記載の方法。
- 前記タッチヒートマップに含まれる前記ユーザのための前記タッチ入力データに基づいて、前記ユーザ入力インターフェースを介して利用可能な複数の項目から前記ユーザによって行なわれるべき選択を予測することは、
前記タッチヒートマップによって提供されるタッチ入力履歴と対応するユーザプロファイルとに基づいて、前記第1の項目または前記第2の項目のうちの一方に対応する目的タッチ領域を予測することと、
前記予測に基づいて、前記第1の項目または前記第2の項目のうちの前記一方と関連付けられたアプリケーションのコンポーネントを実行することとをさらに含む、請求項15に記載の方法。 - 前記予測に基づいて前記第1の項目または前記第2の項目のうちの前記一方の表示を拡大することと、
前記第1の項目または前記第2の項目のうちの前記一方の前記拡大された表示に対応する前記タッチスクリーンの領域において受け付けられた第2のタッチ入力に応答して、前記第1の項目または前記第2の項目のうちの前記一方と関連付けられた前記アプリケーションの前記コンポーネントを実行することとをさらに備える、請求項16に記載の方法。 - タッチセンシティブ面を有するタッチスクリーンを備える表示装置と、
実行可能な命令を格納するメモリと、
前記命令を実行するように構成されたプロセッサとを備える電子コンピュータデバイスであって、前記命令は、前記電子コンピュータデバイスに、
ユーザおよび前記デバイスによって実行可能なアプリケーションと関連付けられたタッチヒートマップを、前記タッチスクリーンの前記タッチセンシティブ面上で受け付けられる複数のタッチ入力に基づいて生成することと、
前記メモリに前記タッチヒートマップを格納することと、
前記タッチスクリーンの前記タッチセンシティブ面上の第1のタッチ入力および前記第1のタッチ入力のリリースに応答して前記アプリケーションを実行することと、
前記第1のタッチ入力と前記タッチヒートマップによって提供される前記アプリケーション内の前記ユーザに関するタッチ入力履歴とに基づいて第2のタッチ入力を予測することとを行なわせる、電子コンピュータデバイス。 - 前記命令は前記電子コンピュータデバイスにさらに、
前記第2のタッチ入力が前記タッチスクリーンの表示領域に表示される複数の項目のうちの1つの項目を含む確率が前記第2のタッチ入力が前記複数の項目のうちの他のいずれかの項目を含む確率よりも高いと判断することと、
前記タッチスクリーンの表示領域において前記1つの項目の表示を拡大することとを行なわせる、請求項18に記載のデバイス。 - 前記第1のタッチ入力は前記タッチスクリーンの表示領域に表示された複数の項目のうちの第1の項目および第2の項目の双方に接触し、前記命令は前記電子コンピュータデバイスにさらに、
前記タッチヒートマップによって提供される前記ユーザに関する前記タッチ入力履歴に基づいて、前記第1の項目または前記第2の項目のうちの一方に対応する目的タッチ領域を予測することと、
前記予測に基づいて、前記第1の項目または前記第2の項目のうちの前記一方に関連付けられたアプリケーションのコンポーネントを実行することとをさらに行なわせる、請求項18に記載のデバイス。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/952,394 US20170147164A1 (en) | 2015-11-25 | 2015-11-25 | Touch heat map |
US14/952,394 | 2015-11-25 | ||
PCT/US2016/062204 WO2017091405A1 (en) | 2015-11-25 | 2016-11-16 | Touch heat map |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018535462A true JP2018535462A (ja) | 2018-11-29 |
JP2018535462A5 JP2018535462A5 (ja) | 2019-05-09 |
Family
ID=57460614
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018507687A Withdrawn JP2018535462A (ja) | 2015-11-25 | 2016-11-16 | タッチヒートマップ |
Country Status (8)
Country | Link |
---|---|
US (1) | US20170147164A1 (ja) |
EP (1) | EP3380915A1 (ja) |
JP (1) | JP2018535462A (ja) |
KR (1) | KR20180032591A (ja) |
CN (1) | CN107924263A (ja) |
DE (1) | DE112016005388T5 (ja) |
GB (1) | GB2556583A (ja) |
WO (1) | WO2017091405A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10963098B1 (en) * | 2017-09-29 | 2021-03-30 | Apple Inc. | Methods and apparatus for object profile estimation |
US10955985B2 (en) * | 2017-10-11 | 2021-03-23 | International Business Machines Corporation | Optimizing an arrangement of content on a display of a user device based on user focus |
WO2019118034A1 (en) * | 2017-12-12 | 2019-06-20 | Google Llc | Disambiguating gesture input types using multiple heatmaps |
JP7183613B2 (ja) * | 2018-07-30 | 2022-12-06 | 株式会社リコー | 操作情報提供装置、操作情報提供システム、およびプログラム |
US10956507B2 (en) * | 2018-08-16 | 2021-03-23 | Rovi Guides, Inc. | Reaction compensated result selection |
WO2020071545A1 (ja) * | 2018-10-04 | 2020-04-09 | パロニム株式会社 | 情報処理装置 |
US20210326155A1 (en) * | 2020-04-15 | 2021-10-21 | Capital One Services, Llc | Systems and methods for assistive user interfaces |
CN112733044B (zh) * | 2021-03-30 | 2021-07-16 | 腾讯科技(深圳)有限公司 | 推荐图像处理方法、装置、设备及计算机可读存储介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6259436B1 (en) * | 1998-12-22 | 2001-07-10 | Ericsson Inc. | Apparatus and method for determining selection of touchable items on a computer touchscreen by an imprecise touch |
US8704775B2 (en) * | 2008-11-11 | 2014-04-22 | Adobe Systems Incorporated | Biometric adjustments for touchscreens |
US20100293457A1 (en) * | 2009-05-15 | 2010-11-18 | Gemstar Development Corporation | Systems and methods for alphanumeric navigation and input |
US20100302212A1 (en) * | 2009-06-02 | 2010-12-02 | Microsoft Corporation | Touch personalization for a display device |
KR101680665B1 (ko) * | 2010-06-08 | 2016-11-29 | 엘지전자 주식회사 | 이동단말기 및 그 제어방법 |
US20140040772A1 (en) * | 2011-12-12 | 2014-02-06 | Adobe Systems Incorporated | Highlighting graphical user interface components based on usage by other users |
KR20140106287A (ko) * | 2013-02-26 | 2014-09-03 | 삼성전자주식회사 | 단말에서 문자 입력을 위한 방법 및 장치 |
WO2014134817A1 (zh) * | 2013-03-07 | 2014-09-12 | 东莞宇龙通信科技有限公司 | 终端和终端操控方法 |
CN104714948A (zh) * | 2013-12-11 | 2015-06-17 | 部落邦(北京)科技有限责任公司 | 一种回放用户网页操作行为的方法、系统及热图展现装置 |
US20170039076A1 (en) * | 2014-04-30 | 2017-02-09 | Empire Technology Development Llc | Adjusting tap position on touch screen |
US10083050B2 (en) * | 2014-07-13 | 2018-09-25 | Shift 6 Ltd. | User interface usage simulation generation and presentation |
-
2015
- 2015-11-25 US US14/952,394 patent/US20170147164A1/en not_active Abandoned
-
2016
- 2016-11-16 CN CN201680048281.5A patent/CN107924263A/zh active Pending
- 2016-11-16 WO PCT/US2016/062204 patent/WO2017091405A1/en active Application Filing
- 2016-11-16 KR KR1020187004547A patent/KR20180032591A/ko not_active Application Discontinuation
- 2016-11-16 JP JP2018507687A patent/JP2018535462A/ja not_active Withdrawn
- 2016-11-16 EP EP16805254.6A patent/EP3380915A1/en not_active Withdrawn
- 2016-11-16 DE DE112016005388.6T patent/DE112016005388T5/de not_active Withdrawn
- 2016-11-16 GB GB1802085.9A patent/GB2556583A/en not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
US20170147164A1 (en) | 2017-05-25 |
DE112016005388T5 (de) | 2018-08-02 |
EP3380915A1 (en) | 2018-10-03 |
GB201802085D0 (en) | 2018-03-28 |
KR20180032591A (ko) | 2018-03-30 |
GB2556583A (en) | 2018-05-30 |
CN107924263A (zh) | 2018-04-17 |
WO2017091405A1 (en) | 2017-06-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10841265B2 (en) | Apparatus and method for providing information | |
JP2018535462A (ja) | タッチヒートマップ | |
US9519397B2 (en) | Data display method and apparatus | |
US11973723B2 (en) | Method for transmitting message and electronic device thereof | |
US11809705B2 (en) | Touch control method and apparatus | |
EP2735133B1 (en) | Method and apparatus for providing data entry content to a remote environment | |
US10346359B2 (en) | Electronic device and method providing an object management user interface | |
US9372613B2 (en) | Scrolling method and electronic device thereof | |
KR101600999B1 (ko) | 문자를 선택하는 방법, 장치, 단말기장치, 프로그램 및 기록매체 | |
US20140215364A1 (en) | Method and electronic device for configuring screen | |
EP3196744A1 (en) | Method and portable electronic device having a double screen | |
US20160196043A1 (en) | Method for selecting content and electronic device thereof | |
US20140365958A1 (en) | Object editing method and electronic device thereof | |
JP6625312B2 (ja) | タッチ情報認識方法及び電子装置 | |
US20160291844A1 (en) | Method and apparatus for opening a data processing page | |
WO2017177436A1 (zh) | 一种锁定列表对象的方法、装置及终端设备 | |
AU2014293863B2 (en) | Method for displaying and an electronic device thereof | |
US9479888B2 (en) | Methods and apparatus for implementing sound events | |
US20140201745A1 (en) | Method and apparatus for executing application program in electronic device | |
KR20140103580A (ko) | 전자 기기, 이의 동작 방법 및 프로그램을 기록한 컴퓨터로 판독 가능한 매체 | |
US20150121296A1 (en) | Method and apparatus for processing an input of electronic device | |
JP6576688B2 (ja) | 電子機器および接続制御方法 | |
KR20150108591A (ko) | 웨어러블 디바이스의 제어 방법 및 그 장치 | |
KR101471619B1 (ko) | 사용자 단말 및 그 제어 방법 | |
KR20150063864A (ko) | 표시 대상 페이지 분할 전송 기능을 가지는 사용자 단말 및 그 제어 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190319 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190319 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20190409 |