JP2013537992A - 携帯用電子デバイスおよびそれを制御する方法 - Google Patents

携帯用電子デバイスおよびそれを制御する方法 Download PDF

Info

Publication number
JP2013537992A
JP2013537992A JP2013530153A JP2013530153A JP2013537992A JP 2013537992 A JP2013537992 A JP 2013537992A JP 2013530153 A JP2013530153 A JP 2013530153A JP 2013530153 A JP2013530153 A JP 2013530153A JP 2013537992 A JP2013537992 A JP 2013537992A
Authority
JP
Japan
Prior art keywords
touch
command
display
display area
meta
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013530153A
Other languages
English (en)
Other versions
JP5667301B2 (ja
Inventor
ジャン ヘンドリック ルーカス バッカー,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BlackBerry Ltd
Original Assignee
BlackBerry Ltd
Research in Motion Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BlackBerry Ltd, Research in Motion Ltd filed Critical BlackBerry Ltd
Publication of JP2013537992A publication Critical patent/JP2013537992A/ja
Application granted granted Critical
Publication of JP5667301B2 publication Critical patent/JP5667301B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10Architectures or entities
    • H04L65/1059End-user terminal functionalities specially adapted for real-time communication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/161Indexing scheme relating to constructional details of the monitor
    • G06F2200/1614Image rotation following screen orientation, e.g. switching from landscape to portrait mode
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Position Input By Displaying (AREA)

Abstract

ユーザ機器(UE)のための方法は、少なくとも部分的に、タッチセンサ式ディスプレイアクションのためのATtention(AT)コマンドに応答して、ディスプレイ面積および非ディスプレイ面積を含む、タッチセンサ式入力のためのメタナビゲーションジェスチャをエミュレートまたはレポートするステップを含む。ユーザ機器(UE)のための方法であって、少なくとも部分的に、タッチセンサ式入力デバイスアクションのためのATtention(AT)コマンドに応答して、ディスプレイ面積および非ディスプレイ面積を含む、タッチセンサ式入力デバイスのためのメタナビゲーションジェスチャをエミュレートするステップを含む、方法。
【選択図】図7

Description

本開示は、タッチセンサ式ディスプレイを有する、携帯用電子デバイスを含むが、これに限定されない、電子デバイスに関する。
携帯用電子デバイスを含む電子デバイスは、幅広い用途を占めており、例えば、電話、電子メッセージング、および他の個人情報マネージャ(PIM)アプリケーション機能を含む、多様な機能を提供することができる。携帯用電子デバイスとして、ワイヤレスネットワーク通信またはBluetooth(登録商標)対応機能等の近距離通信接続を伴う、単純な携帯電話、スマートフォン、携帯端末(PDA)、タブレットコンピュータ、およびラップトップコンピュータ等の移動局を含む、いくつかのタイプのデバイスが挙げられる。
PDAまたはタブレットコンピュータ等の携帯用電子デバイスは、概して、手持ち使用および携帯の容易さを目的とする。携帯性のために、より小型のデバイスが、概して、所望される。タッチセンサ式ディスプレイは、タッチスクリーンディスプレイとも呼ばれるが、小型で、ユーザ入力および出力のための限定されたスペースを有する、ハンドヘルドデバイス上で特に有用である。タッチセンサ式ディスプレイ上に表示される情報は、実施されている機能および操作に応じて、修正されてもよい。
タッチセンサ式ディスプレイを伴う電子デバイスにおける改良が、所望される。
以下は、ユーザ機器(UE)と、少なくとも部分的に、タッチセンサ式ディスプレイアクションのためのATtention(AT)コマンドに応答して、ディスプレイ面積および非ディスプレイ面積を備える、タッチセンサ式入力のためのメタナビゲーションジェスチャデバイスをエミュレートするステップを含む、方法を説明する。
説明の簡易性および明確性のために、図中では、対応または同類の要素を示すために参照番号が繰り返される場合がある。本明細書に説明される実施形態の理解を実現するために、多数の詳細が記載される。実施形態は、これらの詳細なく実践されてもよい。他の事例において、周知の方法、手順、および構成要素は、説明される実施形態の不明瞭化を回避するために詳細に説明されない。説明は、本明細書に説明される実施形態の範囲を制限するとみなされてはならない。
本開示は、概して、携帯用電子デバイス等の電子デバイスに関する。携帯用電子デバイスの実施例として、ポケットベル、携帯電話、スマートフォン、ワイヤレスオーガナイザ、PDA、ノートブックコンピュータ、ネットブックコンピュータ、タブレットコンピュータ等が挙げられる。携帯用電子デバイスはまた、無線通信能力を伴わない、携帯用電子デバイスであってもよい。実施例として、ハンドヘルド電子ゲームデバイス、デジタル写真アルバム、デジタルカメラ、ノートブックコンピュータ、ネットブックコンピュータ、タブレットコンピュータ、または他のデバイスが挙げられる。
次に、本開示の実施形態が、単なる一例として、添付の図面を参照して、説明される。
図1は、例示的実施形態による、携帯用電子デバイスのブロック図である。 図2は、携帯用電子デバイスの実施例の正面図である。 図3は、図2の携帯用電子デバイス上でのタッチの実施例を例証する。 図4は、本開示による、携帯用電子デバイスを制御する方法を例証する、流れ図である。 図5は、メタナビゲーションジェスチャと種々のアプリケーションまたはアプリケーション機能からの情報との間の関連付けの実施例を例証する。 図6は、図1の携帯用電子デバイス等のユーザ機器の機能構成要素の実施例を例証する。 図7は、配向に対して、ジェスチャをエミュレートするためのATコマンドの使用の実施例を例証する、シーケンス図である。
携帯用電子デバイス100の実施例のブロック図が、図1に示される。携帯用電子デバイス100は、携帯用電子デバイス100の全体的動作を制御する、プロセッサ102等の複数の構成要素を含む。説明される本携帯用電子デバイス100は、随意に、通信サブシステム104および短距離通信132モジュールを含み、データおよび音声通信を含む、種々の通信機能を実施する。本実施例では、短距離通信が、含まれる。任意の好適なタイプの無線通信が、短距離通信の代わりに、またはそれに加え、利用されてもよい。携帯用電子デバイス100によって受信されるデータは、デコーダ106によって解凍され、解読される。通信サブシステム104は、ワイヤレスネットワーク150からメッセージを受信し、ワイヤレスネットワーク150へメッセージを送信する。ワイヤレスネットワーク150は、データワイヤレスネットワーク、音声ワイヤレスネットワーク、ならびに音声およびデータ両方の通信をサポートするネットワークを含むが、これらに限定されない、任意のタイプのワイヤレスネットワークであってもよい。1つ以上の充電池または外部電源へのポート等の電源142は、携帯用電子デバイス100に電力を供給する。
プロセッサ102は、ランダムアクセスメモリ(RAM)108、メモリ110、合わせてタッチセンサ式ディスプレイ118のためのタッチセンサ式入力デバイスを成す、電子コントローラ116に動作可能に接続されるタッチセンサ式オーバーレイ114を伴う、ディスプレイ112、1つ以上のアクチュエータ120、1つ以上の力センサ122、補助入力/出力(I/O)サブシステム124、データポート126、スピーカ128、マイク130、短距離通信132、および他のデバイスサブシステム134等の他の構成要素と相互作用する。グラフィックユーザインターフェースとのユーザ相互作用は、タッチセンサ式オーバーレイ114を介して実施される。プロセッサ102は、電子コントローラ116を介して、タッチセンサ式オーバーレイ114と相互作用する。携帯用電子デバイス上で表示またはレンダリングされてもよい、テキスト、文字、シンボル、画像、アイコン、および他の項目等の情報は、プロセッサ102を介して、タッチセンサ式ディスプレイ118上に表示される。プロセッサ102は、加速度計等の配向センサ136と相互作用し、例えば、携帯用電子デバイス100の配向を判定するように、重力または重力誘導反応力の方向を検出してもよい。
ネットワークアクセスの加入者を識別するために、携帯用電子デバイス100は、UICC(汎用集積回路カード)を利用してもよい。UICCは、GSM(登録商標)(モバイル通信用グローバルシステム)およびUMTS(汎用モバイル電気連通システム)ネットワークにおいて、携帯用電子デバイス100等のユーザ機器(UE)内で利用される。UICCは、パーソナルデータの完全性および安全性を保証するために利用されるスマートカードである。例えば、GSM(登録商標)ネットワークでは、UICCは、SIM(加入者識別モジュール)アプリケーションを含有する。UMTSネットワークでは、UICCは、USIM(汎用加入者識別モジュール)アプリケーションを利用する。CDMA(符号分割多重アクセス)ネットワークでは、UEは、リムーバブルユーザ識別モジュール(RUIM)を含んでもよい。携帯用電子デバイス100は、無線ネットワーク150等のネットワークとの通信のために、SIM/USIM/RUIM138を使用してもよい。代替として、利用者識別情報は、メモリ110内にプログラムされてもよい。
携帯用電子デバイス100は、プロセッサ102によって実行され、典型的には、メモリ110等の永続的更新可能記憶に記憶される、オペレーティングシステム146およびソフトウェアプログラムまたは構成要素148を含む。付加的アプリケーションまたはプログラムが、ワイヤレスネットワーク150、補助I/Oサブシステム124、データポート126、短距離通信サブシステム132、または任意の他の好適なサブシステム134を介して、携帯用電子デバイス100にロードされてもよい。
テキストメッセージ、電子メールメッセージ、またはウェブページダウンロード等の受信信号は、通信サブシステム104によって処理され、プロセッサ102へ入力される。プロセッサ102は、ディスプレイ112および/または補助I/Oサブシステム124へ出力するために、受信信号を処理する。加入者は、データ項目、例えば、電子メールメッセージを生成することができ、通信サブシステム104を介して、ワイヤレスネットワーク150を経由して伝送されてもよい。
タッチセンサ式ディスプレイ118は、当該分野において周知の、容量性、抵抗性、赤外線、弾性表面波(SAW)タッチセンサ式ディスプレイ、歪みゲージ、光学撮像、分散信号技術、音響パルス認識等の任意の好適なタッチセンサ式ディスプレイであってもよい。説明される本例示的実施形態では、タッチセンサ式ディスプレイ118は、容量性タッチセンサ式オーバーレイ114を含む、容量性タッチセンサ式ディスプレイである。オーバーレイ114は、例えば、基板、接地シールド層、バリア層、基板または他のバリアによって分離される1つ以上の容量性タッチセンサ層、およびカバーを含む、スタック内の複数層のアセンブリであってもよい。容量性タッチセンサ層は、パターン化された酸化インジウム錫(ITO)等の任意の好適な材料であってもよい。
タッチセンサ式ディスプレイ118のディスプレイ112は、情報が表示され得る、ディスプレイ面積206と、ディスプレイ面積206の周縁の周囲に延在する、非ディスプレイ面積208と、を含む。情報は、例えば、電子トレースまたは電気接続、接着剤または他の封止剤、および/またはディスプレイ面積206の縁周囲の保護コーティングを収容するために利用される、非ディスプレイ面積208には表示されない。
1つ以上のタッチは、タッチ接触またはタッチイベントとも呼ばれるが、タッチセンサ式ディスプレイ118によって検出されてもよい。プロセッサ102は、タッチの場所を含む、タッチの属性を判定してもよい。タッチ場所データは、接触の面積、あるいは重心として知られる、接触の面積の中心または近接の点等の接触の単一点を含んでもよい。タッチの検出に応答して、信号がコントローラ116に提供される。タッチセンサ式ディスプレイ118の性質に応じて、指、親指、付属器、あるいは他のアイテム、例えば、スタイラス、ペン、または他のポインタ等の任意の好適な物体からのタッチが検出されてもよい。タッチの場所は、タッチの間、検出された物体が移動するのに伴って、移動する。コントローラ116および/またはプロセッサ102は、タッチセンサ式ディスプレイ118上の任意の好適な接触部材によって、タッチを検出してもよい。同様に、複数の同時タッチが、検出される。複数の同時タッチが、例えば、アプリケーションプログラミングインターフェース(API)を介して、デバイス内の構成要素間においてエミュレートまたは示されると、一意の識別子が、同時タッチと関連付けられてもよい。例えば、一意の識別子は、タッチセンサ式ディスプレイ118上で実施される、N番目の同時タッチアクションを表す、非ゼロ整数値Nであってもよい。タッチは、複数のイベントを含んでもよい。例えば、タッチは、ディスプレイ面積206または非ディスプレイ面積208であり得る、画面が、タッチセンサ式ディスプレイ118上の第1の座標場所において、押下される(タッチが、検出される)ことを示す、第1のイベントと、タッチセンサ式ディスプレイ118上の第2の座標場所において、画面の押下が、停止(すなわち、解放)される(タッチが、停止または中断される)ことを示す、第2のイベントと、を含んでもよい。中断時のタッチの第2の座標場所は、タッチが、最初に検出される時のタッチの第1の座標場所と異なってもよい。第1および第2のイベントが、同時タッチまたは多重タッチジェスチャを表す場合、イベントは、相関されてもよく、またはタッチは、同一の一意の識別子によって識別されてもよい。
1つ以上のジェスチャもまた、タッチセンサ式ディスプレイ118によって検出される。ジェスチャは、原点から開始し、終点まで継続する、タッチセンサ式ディスプレイ118上の特定のタイプのタッチである。ジェスチャは、例えば、原点、終点、進行距離、持続時間、速度、および方向を含む、ジェスチャの属性によって識別されてもよい。ジェスチャは、距離および/または持続時間が長いあるいは短くてもよい。ジェスチャの2点を利用して、ジェスチャの方向を判定してもよい。いくつかの実装では、タッチセンサ式ディスプレイ118上の場所または点を識別するために利用される座標系は、固定されてもよい、すなわち、座標系の原点座標(0,0)は、携帯用電子デバイス100の配向に応じて、変化しない。
ジェスチャの実施例は、スワイプ(また、フリックとしても知られる)である。スワイプは、単一方向を有する。タッチセンサ式オーバーレイ114は、ジェスチャの持続時間にわたっての接触の場所または点のそれぞれを使用して、方向を決定するのではなく、接触が、最初に、タッチセンサ式オーバーレイ114と行われた原点と、タッチセンサ式オーバーレイ114との接触が終了する、終点に対して、スワイプを評価してもよい。
スワイプの実施例としては、水平スワイプ、垂直スワイプ、および対角線スワイプを含む。水平スワイプは、典型的には、タッチセンサ式オーバーレイ114の左または右側に向かって、原点を備え、ジェスチャを開始し、タッチセンサ式オーバーレイ114との連続的接触およびタッチセンサ式オーバーレイ114との接触の断続を維持しながらのタッチセンサ式オーバーレイ114の右または左側に向かっての原点から終点までの検出された物体の水平移動である。同様に、垂直スワイプは、典型的には、タッチセンサ式オーバーレイ114の上部または下部に向かっての原点を備え、ジェスチャを開始し、タッチセンサ式オーバーレイ114との連続的接触およびタッチセンサ式オーバーレイ114との接触の断続を維持しながらのタッチセンサ式オーバーレイ114の下部または上部に向かっての原点から終点への検出された物体の垂直移動である。
用語「上部」、「下部」、「右」、および「左」は、本明細書では、基準を提供する目的のために利用され、アプリケーションと関連付けられた情報が表示される配向に対する、携帯用電子デバイス100のタッチセンサ式ディスプレイ118の縁または辺を指す。
前述のように、加速度計等の配向センサ136を利用して、例えば、携帯用電子デバイス100の配向を判定し、1つの配向から別の配向への変化を検出するように、重力または重力誘導反応力の方向を検出してもよい。代替として、配向および配向変化を検出するための他の手段が、利用されてもよい。例えば、4つの配向が、利用されてもよい。携帯用電子デバイス100の配向が、アプリケーションまたはアプリケーション機能あるいはプログラムによって利用され、例えば、スワイプが、水平スワイプまたは垂直スワイプであるかどうか、およびタッチセンサ式ディスプレイ118のどの辺が、上部、下部、左側、および右側であるかどうかを判定してもよい。携帯用電子デバイス100の配向は、配向センサ136からの出力に基づいて、判定されてもよく、配向は、例えば、基準として、タッチセンサ式ディスプレイ118の特徴を識別することによって、識別されてもよい。例えば、非ディスプレイ面積208の角の座標値は、左上角として識別されてもよい。代替として、タッチセンサ式ディスプレイ118の1つの辺は、上部として識別されてもよい。辺は、例えば、左上角の座標値および右上角の座標値を識別することによって、識別されてもよい。他の角または辺が、代替として、識別されてもよい。角または1つの辺を識別することによって、スワイプの方向および配向が、携帯用電子デバイス100の配向およびアプリケーションと関連付けられた情報が表示される、配向に対して、判定されてもよい。
代替として、タッチセンサ式ディスプレイ118の辺は、4辺が、静的標識によって標識されるように、「正常」配向を有してもよい。静的標識は、例えば、「上部」、「下部」、「右側」、および「左側」を含んでもよく、これらの標識は、携帯用電子デバイス100が、位置付けられる、または保持される、正常または直角配向における、辺の場所に対応してもよい。したがって、クエリが行われる時、配向は、「右」と標識された辺が、左側にある、または「上部」と標識された辺が、下部にあるようなものであってもよい。配向は、例えば、「正常」配向からの角度の度を表す、単一値を利用して判定されてもよい。180度の配向は、携帯用電子デバイス100の現在の配向が、左における物理的座標(x、y)を伴う辺が、携帯用電子デバイス100が、位置付けられる、または保持される、配向において、上部における辺であるようなものであることを示してもよい。代替として、2つの値を利用して、配向を識別してもよい。2つの値は、原点座標に対する角度を表してもよい。各値は、異なる方向における角度に対応し、3次元におけるデバイスの配向の表現を促進する。2つの値を利用して、正常配向に対する角度の度および携帯用電子デバイス100の傾斜が、示されてもよい。
スワイプは、種々の長さであることができ、タッチセンサ式オーバーレイ114上の種々の場所から開始されてもよく、タッチセンサ式オーバーレイ114の全寸法に及ぶ必要はない。加えて、スワイプの断続接触は、スワイプが、依然として、進行中である間、タッチセンサ式オーバーレイ114との接触が、徐々に減少されるという点において、段階的であり得る。
メタナビゲーションジェスチャはまた、タッチセンサ式オーバーレイ114によって検出されてもよい。メタナビゲーションジェスチャは、タッチセンサ式オーバーレイ114のディスプレイ面積206外にある原点を有し、タッチセンサ式ディスプレイ118のディスプレイ面積206上の位置に移動する、ジェスチャである。ジェスチャの他の属性が、検出され、メタナビゲーションジェスチャを検出するために利用されてもよい。メタナビゲーションジェスチャはまた、ジェスチャが、時間内に、同時または重複し、タッチのうちの少なくとも1つが、ディスプレイ面積206外にある原点を有し、タッチセンサ式オーバーレイ114のディスプレイ面積206上の位置へ移動する、多重タッチジェスチャを含んでもよい。したがって、2本の指が、メタナビゲーションジェスチャのために利用されてもよい。さらに、多重タッチメタナビゲーションジェスチャは、単一タッチメタナビゲーションジェスチャと区別されてもよく、付加的またはさらなる機能性を提供してもよい。
いくつかの例示的実施形態では、随意の力センサ122または複数の力センサが、任意の好適な場所、例えば、タッチセンサ式ディスプレイ118と携帯用電子デバイス100の裏側との間に配置され、タッチセンサ式ディスプレイ118上のタップによって付与される力を検出する。力センサ122は、力センサ式抵抗器、歪みゲージ、圧電またはピエゾ抵抗デバイス、圧力センサ、あるいは他の好適なデバイスであってもよい。明細書を通して利用される力とは、圧力、変形、応力、歪み、力密度、力−面積関係、推力、トルク、および力または関連数量を含む、他の影響等、力の測定、予測、および/または計算を指す。
検出されたタッチに関連する力情報は、タッチの場所と関連付けられた情報等の情報を選択するために利用されてもよい。例えば、力閾値に満たないタッチは、選択オプションをハイライトしてもよい一方、力閾値を満たすタッチは、選択オプションの選択またはその入力であってもよい。選択オプションとして、例えば、キーボードの表示または仮想キー、選択ボックスまたはウィンドウ、例えば、「キャンセル」、「削除」、または「ロック解除」、機能ボタン、例えば、音楽プレーヤ上の再生または停止等が挙げられる。異なる力の大きさは、異なる機能または入力と関連付けられてもよい。例えば、より小さい力は、パニングをもたらしてもよく、より大きな力は、ズームをもたらしてもよい。
携帯用電子デバイス100の実施例の正面図は、図2に示される。携帯用電子デバイス100は、図1に示されるような構成要素を封入する、筐体202を含む。筐体202は、タッチセンサ式ディスプレイ118を構成する、背面、側壁、および正面204を含んでもよい。
図2の示される実施例では、タッチセンサ式ディスプレイ118は、概して、タッチセンサ式オーバーレイ114のディスプレイ面積206が、概して、筐体202の正面204に対して、中心となるように、筐体202の中心に置かれる。タッチセンサ式オーバーレイ114の非ディスプレイ面積208は、ディスプレイ面積206の周囲に延在する。本説明される例示的実施形態では、非ディスプレイ面積208の幅は、4mmである。
本実施例の目的のために、タッチセンサ式オーバーレイ114は、ディスプレイ面積206および非ディスプレイ面積208を被覆するように延在する。ディスプレイ面積206上のタッチが、検出されてもよく、例えば、表示された選択可能特徴と関連付けられてもよい。非ディスプレイ面積208上のタッチは、例えば、メタナビゲーションジェスチャを検出するために、検出されてもよい。代替として、メタナビゲーションジェスチャは、非ディスプレイ面積208およびディスプレイ面積206の両方によって判定されてもよい。タッチセンサの密度は、ディスプレイ面積206と非ディスプレイ面積208で異なってもよい。例えば、相互容量性タッチセンサ式ディスプレイ内のノードの密度、または1つの層の電極が、別の層の電極を交差する、場所の密度は、ディスプレイ面積206と非ディスプレイ面積208との間で異なってもよい。
タッチセンサ式ディスプレイ118上で受信されたジェスチャは、属性に基づいて分析され、メタナビゲーションジェスチャと他のタッチ、または非メタナビゲーションジェスチャと区別してもよい。メタナビゲーションジェスチャは、ジェスチャが、ディスプレイ面積206と非ディスプレイ面積208との間の境界210等、ディスプレイ112の周縁近傍の境界を乗り越えると、識別されてもよい。図2の実施例では、メタナビゲーションジェスチャの原点が、非ディスプレイ面積208を被覆する、タッチセンサ式オーバーレイ114の面積を利用して、判定されてもよい。
ジェスチャ等のタッチは、複数のイベントを含んでもよい。これらのイベントは、レポートされてもよい(例えば、携帯用電子デバイス100またはUEの構成要素間において)。メタナビゲーションジェスチャは、例えば、ジェスチャが、ディスプレイ面積206外にある原点、またはディスプレイ面積206と非ディスプレイ面積208との間の境界と、境界内側にある終点とを有することを判定することによって、検出されてもよい。境界は、タッチセンサ式オーバーレイ114の座標サイズならびにディスプレイ面積206のサイズおよび座標場所を取得することによって、判定されてもよい。タッチセンサ式オーバーレイ114の座標サイズは、例えば、(0,0)座標値から開始し、最大x座標値および最大y座標値を利用して、取得されてもよい。ディスプレイ面積206境界は、例えば、ディスプレイ面積206の左上角に対するxおよびy座標値と、ディスプレイ面積206の右下角に対するxおよびy座標値を利用して、判定されてもよい。
境界の場所の判定は、メタナビゲーションジェスチャが、アプリケーションのために判定されるように、遂行されてもよい。メタナビゲーションジェスチャは、異なるサイズの非ディスプレイ面積および/または異なるサイズのディスプレイ面積を含む、異なるサイズの電子デバイスによって、判定および利用されてもよい。したがって、同一アプリケーションまたはプログラムは、異なるサイズのディスプレイ面積および/または異なるサイズの非ディスプレイ面積を有する、電子デバイス上で起動してもよい。
ディスプレイ面積206と非ディスプレイ面積208との間の境界210の周囲に延在する、バッファ領域212または帯域は、タッチが、境界210およびバッファ領域212外に原点を有し、バッファ領域212を通って、境界210内の点へと、境界210を乗り越えると、メタナビゲーションジェスチャが、識別されるように利用されてもよい。図2に例証されるが、バッファ領域212は、可視でなくてもよい。代わりに、バッファ領域212は、例えば、所定の数の画素に匹敵する幅に延在する、境界210の周囲の領域であってもよい。代替として、境界210は、所定の数のタッチセンサに延在してもよく、またはディスプレイ面積206から所定の距離だけ延在してもよい。境界210は、タッチセンサ式領域であってもよく、またはタッチが検出されない領域であってもよい。境界は、前述のように、タッチセンサ式オーバーレイ114の座標サイズならびにディスプレイ面積206のサイズおよび座標場所を取得することによって、判定されてもよい。バッファ領域の幅はまた、メタナビゲーションジェスチャを検出するために利用されてもよい。
例えば、バッファ領域212内に原点を有する、ジェスチャは、非メタナビゲーションジェスチャとして識別されてもよい。随意に、そのようなジェスチャからのデータは、アプリケーションによって、非メタナビゲーションジェスチャとして、利用されてもよい。代替として、そのようなジェスチャからのデータは、バッファ領域212上に原点を有するタッチが、携帯用電子デバイス100における入力として利用されないように、破棄されてもよい。
図3は、タッチセンサ式ディスプレイ118上のタッチの実施例を例証する。バッファ領域212は、説明の目的のために、ハッシュマークによって、図3に例証される。示されるように、バッファ領域212は、ユーザに可視でなくてもよい。説明の目的のために、タッチは、その原点において、円形によって例証される。円形から延在する矢印は、ジェスチャであるタッチの経路を例証する。
タッチ302は、境界210外およびバッファ領域212外の原点から開始する。タッチ302の経路は、バッファ領域212および境界210を越え、したがって、メタナビゲーションジェスチャとして識別される。同様に、タッチ304、306、308、310、312、314、316はそれぞれ、境界210およびバッファ領域212外に原点を有し、その経路は、バッファ領域212および境界210を越える。したがって、タッチ304、306、308、310、312、314、316はそれぞれ、メタナビゲーションジェスチャとして識別される。しかしながら、タッチ318は、バッファ領域212内にある原点を有し、したがって、タッチ318は、メタナビゲーションジェスチャとして識別されない。タッチ320は、境界210およびバッファ領域212外の原点から開始する。しかしながら、タッチ320の経路は、境界210を越えておらず、したがって、メタナビゲーションジェスチャとして識別されない。タッチ322はまた、境界210およびバッファ領域212外の原点を有するが、ジェスチャではなく、したがって、境界210を越えず、メタナビゲーションジェスチャとして識別されない。
携帯用電子デバイス100等の電子デバイスを制御する方法を例証する、流れ図が、図4に示される。本方法は、例えば、プロセッサ102によって実行されるコンピュータ可読コードによって実行されてもよい。このような方法を遂行するためのソフトウェアのコーディングは、本説明を前提として、当業者の範囲内である。本方法は、付加的プロセス、あるいは図示および/または説明されるものより少ないプロセスを含有してもよく、異なる順番で実施されてもよい。
プロセスは、ホーム画面アプリケーション、電子メールアプリケーション、テキストメッセージングアプリケーション、カレンダアプリケーション、タスクアプリケーション、アドレスブックアプリケーション、ウェブブラウザアプリケーション、または任意の他の好適なアプリケーション等、任意の好適なアプリケーションにおいて遂行されてもよい。第1のアプリケーションと称される、アプリケーションからの情報は、402において、携帯用電子デバイス100のタッチセンサ式ディスプレイ118上に表示される。タッチが、404において、検出されると、プロセスは、406において、継続し、タッチが、メタナビゲーションジェスチャであるかどうかの判定が行われる。前述のように、タッチの属性に基づいて、判定が行われる。408では、タッチが、タッチセンサ式ディスプレイ118上のタップであり得る、または非メタナビゲーションジェスチャであり得る、メタナビゲーションジェスチャではないことの判定に応答して、タッチデータは、ジェスチャが受信された時、情報が、タッチセンサ式ディスプレイ118上に表示される、第1のアプリケーションと関連して利用される。406において、メタナビゲーションジェスチャとして、タッチを識別することに応答して、タッチデータは、第2のアプリケーションにおいて利用され、第2またはさらなるアプリケーションと関連付けられた情報が、410において、タッチセンサ式ディスプレイ118上に表示される。第2のアプリケーションと関連付けられた情報は、第1のアプリケーションと関連付けられた情報上にオーバーレイされ、例えば、第1のアプリケーションと関連付けられた情報にナビゲーションを戻すのを促進してもよい。代替として、第2のアプリケーションと関連付けられた情報は、例えば、システムレベルナビゲーションインターフェース、構成インターフェース、通知インターフェース、ステータスインターフェース、メニューインターフェースからの情報、または任意の他のインターフェースと関連付けられた情報を含んでもよい。
再び、図3を参照すると、メタナビゲーションジェスチャとして識別されたタッチ302、304、306、308、310、312、314、316はそれぞれ、メタナビゲーションジェスチャが、どのアプリケーションと関連付けられているかを判定するために、原点等のメタナビゲーションジェスチャの属性が、利用され得るように、アプリケーションからの情報と関連付けられてもよい。図5は、メタナビゲーションジェスチャと、ジェスチャが受信された時、タッチセンサ式ディスプレイ118上に表示される情報と関連付けられたアプリケーション以外のアプリケーションからの情報との間の関連付けの実施例を例証する。図5に示される関係は、例証的目的のためだけに示され、互換可能である。さらなるアプリケーションおよび代替関連付けが、利用されてもよい。
本実施例では、タッチセンサ式ディスプレイ118の下部中心近傍から生じ、現在のアプリケーション502からの情報が表示される配向に、略垂直経路を辿る、メタナビゲーションジェスチャ302は、ルートナビゲーションアプリケーション510と関連付けられたホーム画面を現在のアプリケーション502と関連付けられた情報に置き換えさせる。ホーム画面は、ディスプレイの上部に示される、現在アクティブなアプリケーションを示す、カルーセルを含む。故に、現在アクティブなアプリケーションは、ホーム画面の上部におけるブラウズ可能なカルーセルに示される。カルーセルは、ホーム画面の上部に位置する。本実施例では、上部は、ホーム画面の約1/3のみ利用し、非アクティブアプリケーションのためのアプリケーションアイコンは、選択の容易性のために、ホーム画面の下部に提供される。
タッチセンサ式ディスプレイ118の左中心近傍から生じ、略側方経路を辿る、メタナビゲーションジェスチャ304は、現在のアプリケーション502と関連付けられた情報を、グループ化内の以前のアプリケーションであり得る、または以前に表示された情報と関連付けられたアプリケーションであり得る、以前のアプリケーション506と関連付けられた情報に置き換える。タッチセンサ式ディスプレイ118の右中心近傍から生じ、略側方経路を辿る、メタナビゲーションジェスチャ306は、現在のアプリケーション502と関連付けられた情報を、グループ化内の次のアプリケーションであり得る、次のアプリケーション508と関連付けられた情報に置き換える。
側方ジェスチャは、本実施例では、タッチセンサ式ディスプレイ118の左側または右からのいずれかから生じ、現在のアプリケーション502と関連付けられた情報のサイズを縮小させ、情報を以前のアプリケーション506または次のアプリケーション508と置き換える前に、他のアクティブアプリケーションの視覚的合図を提供してもよい。例えば、以前のアプリケーション506の情報の一部が、ジェスチャの間および現在のアプリケーション502と関連付けられた情報の置き換え前に、ディスプレイ面積206の縁または複数の縁に隣接する細いスライバ内に表示されてもよい。現在のアプリケーション502と関連付けられた情報は、ジェスチャが継続するのに伴って、以前のまたは次のアプリケーション508と置き換えられてもよい。代替実施例では、以前のアプリケーション506の情報の一部または次のアプリケーション508のための情報の一部が、第1の側方ジェスチャの受信に応答して、ディスプレイ面積206の縁に隣接する細いスライバ内に表示されてもよい。本実施例では、細いスライバ内のスワイプは、リスト内の次のおよび最後のアプリケーションのスクロールを生じさせてもよい。ジェスチャ304、306等の第2の側方メタナビゲーションジェスチャは、情報のサイズが縮小された現在のアプリケーション502と関連付けられた情報に置き換えさせるために利用されてもよい。
タッチセンサ式ディスプレイ118の上部中心近傍から生じ、略垂直経路を辿る、メタナビゲーションジェスチャ308は、現在のアプリケーション502と関連付けられた情報をアプリケーション設定アプリケーション504と関連付けられた情報と置き換えさせる。
タッチセンサ式ディスプレイ118の左上角近傍から生じる、メタナビゲーションジェスチャ310は、通知アプリケーション512と関連付けられた情報を現在のアプリケーション502と関連付けられた情報上にタイル表示させる。同様に、本実施例では、タッチセンサ式ディスプレイ118の右上角近傍から生じる、メタナビゲーションジェスチャ312は、通知アプリケーション512と関連付けられた情報を現在のアプリケーション502と関連付けられた情報上にタイル表示させる。
本実施例では、タッチセンサ式ディスプレイ118の左下角近傍から生じる、メタナビゲーションジェスチャ314は、ステータスアプリケーション514と関連付けられた情報を現在のアプリケーション502と関連付けられた情報上にタイル表示させる。同様に、本実施例では、タッチセンサ式ディスプレイ118の右下角近傍から生じる、メタナビゲーションジェスチャ316は、ステータスアプリケーション514と関連付けられた情報を現在のアプリケーション502と関連付けられた情報上にタイル表示させる。
ATtention(AT)コマンドは、ターミナルアダプタ(TA)を通して、端末機器(TE)から、モバイル端末(MT)機能およびネットワークサービスを制御するために利用されてもよい。ATは、TEからTAに送信される、コマンドラインを開始するために利用される、2文字の略語である。例えば、タッチスクリーンアクション制御コマンド(+CTSA)は、MTのタッチセンサ式ディスプレイを動作させるために利用されてもよい。携帯用電子デバイス100のx、y座標は、携帯用電子デバイス100が、側方に向けられる、あるいは横方向から縦方向配向または縦方向から横方向配向に変化する時でも固定されてもよく、もしくは配向は、別様に変化する(例えば、エミュレーションを介して)。タッチセンサ式ディスプレイ118上のメタナビゲーションジェスチャは、エミュレートされてもよい。以下の実施例では、ATコマンドは、MTに送信され、タッチセンサ式ディスプレイ118のユーザタッチをエミュレートする。タッチセンサ式ディスプレイ118は、場所(10,10)においてタッチされ、タッチ場所は、(50,50)に移動され、次いで、(100,100)に移動される。タッチは、タッチセンサ式ディスプレイ118から除去される、または場所(100,100)において中断される。
・AT+CTSA=1,10,10
・AT+CTSA=1,50,50
・+CTSA=0,100,100
加えて、タッチセンサ式ディスプレイ118上のメタナビゲーションジェスチャは、非請求イベントを提供することによって、または非請求コードを提供することによって、レポートされてもよい。イベントまたはコードを受信すると、メタナビゲーションジェスチャが、判定されてもよい。
前述の実施例は、TEを通した動作に関する。MTが、MTのキーパッドを通して、またはMTのタッチセンサ式ディスプレイ118を利用して動作される時、あるいはディスプレイ要素のステータの変化が存在する時、これらのアクションに関する情報は、TEに提供される。情報は、キーパッド、ディスプレイテキストおよびインジケータ、ならびにタッチセンサ式ディスプレイイベントを返す、非請求結果コードまたは非請求ATコマンド応答を介して、提供されてもよい。例えば、ATコマンド+CKEV(3GPPTS27.007[http://www.3gpp.org/ftp/Specs/archive/27_series/27.007/27007−a40.zip]参照)は、キーが、押下(1)または解放(0)されると、キーコードおよび指示を返し、ATコマンド+CTEVは、タッチセンサ式ディスプレイ118上で実施されたアクションの場所を返す。以下の実施例では、番号1と関連付けられたキーが押下され、ディスプレイが、更新され、キーが、解放される。
・+CKEV:49,1
・+CDEV:1,”1”
・+CKEV:49,0
前述のように、非ディスプレイ208面積の角は、左上角であるように識別されてもよい。ATコマンド、コマンド画面配向(CSO)は、タッチセンサ式ディスプレイ118の配向を設定またはリードバックするために利用されてもよい。表1は、CSOコマンドおよびCSOコマンドに対する例示的応答を例証する。以下の構文定義が、適用される。
・<CR>復帰改行文字、値は、コマンドS3によって指定される。
・<LF>改行文字、値は、コマンドS4によって指定される。
・<...>山括弧内に封入される名称は、構文要素。括弧は、コマンドラインに現れない。
・[...]コマンドの随意のサブパラメータまたはTA情報応答の随意の部分が、括弧内に封入される。括弧は、コマンドラインに現れない。サブパラメータが、パラメータタイプコマンド内に与えられない時、新しい値は、以前の値に等しい。
Figure 2013537992
左上Xは、左上画素のx座標を表す、正の整数であってもよく、左上Yは、左上画素のy座標を表す、正の整数であってもよい。CSOコマンドは、基準配向を設定するために利用されてもよく、試験目的のために利用されてもよい。
代替として、また、前述の配向は、それぞれ、例えば、座標または角、例えば、左上角に対する角度を表す、1つ以上のスカラーにおいて表されてもよい。再び、ATコマンド、例えば、コマンド画面配向(CSO)は、タッチセンサ式ディスプレイ118の配向を設定またはリードバックするために利用されてもよい。表2は、CSOコマンドおよびCSOコマンドに対する例示的応答を例証する。
Figure 2013537992
degrees_orientationおよびdegrees_tiltedは、原点座標および座標軸を伴う角度を伴う角度を表す、正の整数でってもよい。degrees_orientationおよびdegrees_tiltedは、degrees_orientationおよび/またはdegrees_tiltedの角度が、0度に対して、固定インクリメントであるように、固定数の値を利用してもよい。例えば、90度のインクリメントが、利用されてもよい。他のインクリメントが、デバイスに応じて、利用されてもよい。CSOコマンドは、基準配向を設定するために利用されてもよく、試験目的のために利用されてもよい。デバイスは、角括弧表記によって表されるように、degrees_tilted値を提供または許容可能である必要はない。
前述のように、配向は、4つの値、例えば、「上部」、「下部」、「左側」、「右側」において表されてもよい。再び、ATコマンド、例えば、固有コマンド画面配向(CSO)が、ディスプレイ112およびタッチセンサ式オーバーレイ114の配向を設定またはリードバックするために利用してもよい。
メタナビゲーションジェスチャは、例えば、タッチセンサ式オーバーレイ114の座標サイズならびにディスプレイ面積206のサイズおよび座標場所を判定することによって、検出されてもよい。ATコマンド、例えば、固有コマンド画面サイズ(CSS)が、タッチセンサ式オーバーレイ114の座標サイズ、またはディスプレイ面積206および非ディスプレイ面積208の総サイズを判定するために利用されてもよい。ATコマンドCSSは、最大x座標値および最大y座標値を与えてもよい。
ディスプレイ面積206のサイズおよび座標場所が、取得されてもよい。ATコマンド、例えば、ディスプレイ画面境界(DSB)を利用して、左上x座標、左上y座標、右下x座標および右下y座標を取得してもよい。本コマンドは、ディスプレイ面積206と非ディスプレイ面積208との間の境界の識別を促進する。左上x座標は、ディスプレイ面積206の左上画素のx座標を表す、正の整数であってもよく、左上y座標は、左上画素のy座標を表す、正の整数であってもよい。右下x座標は、ディスプレイ面積206の右下画素のx座標を表す、正の整数であってもよく、右下y座標は、右下画素のy座標を表す、正の整数であってもよい。タッチセンサ式オーバーレイが、非ディスプレイ面積208にわたって延在しない、電子デバイスの場合、DSB座標値は、CSS値に整合する。CSSおよびDSBコマンドを利用して、ディスプレイ面積206と非ディスプレイ面積208との間の境界を検出してもよく、試験目的のために利用されてもよい。例えば、CSSおよびDSBコマンドを利用して、境界を越える、ジェスチャをエミュレートしてもよい。越えられる境界は、1画素の幅であってもよい。いくつかの実施形態では、本境界サイズは、異なる幅またはサイズであってもよい。例えば、いくつかの実施形態では、上部における境界の幅は、下部における境界の幅と異なる。また、境界は、随意に、タッチセンサ式ディスプレイ118のディスプレイ面積206の一部であってもよい。
UEは、したがって、コマンドをUEに提供し、メタナビゲーションジェスチャをエミュレートすることによって、試験されてもよい。コマンドが、ATコマンドである場合、CSS、DSB、およびCSOのようなATコマンドが、デバイスによって受信されてもよい。1つ以上のコマンドが、メタナビゲーションジェスチャを構成してもよい。
図6は、図1の携帯用電子デバイス100等のユーザ機器(UE)の機能構成要素の実施例を例証する。UE600は、UICCを含み、パーソナルデータを含有してもよい。存在する場合、UICCは、モバイル機器(ME)604に連結される。ME604は、TE606およびMT608を含み、その間において、ATコマンドが、パスまたは通信される。MEまたはATは、ATコマンドシンクの実施例であって、TEは、ATコマンドソースの実施例である。
図7は、配向に対して、メタナビゲーションジェスチャをエミュレートする、ATコマンドの使用の実施例を例証する、シーケンス図を示す。図7は、ATコマンドシンク702およびATコマンドソース704を含む。TAは、シンク702等のシンクの実施例である。TAは、MTに関与する前に、ATコマンドおよびATコマンド応答に適応してもよい。TEは、ソース704等のソースの実施例である。ソースは、ATコマンドを送信し、TEは、ATコマンド応答を受信してもよい。ソースは、706において、例えば、AT+CSOコマンドを利用して、配向を判定し、応答708が、受信される。応答708は、例えば、タッチセンサ式ディスプレイ118が、「正常」配向にあることを示してもよい。ソースは、710において、例えば、AT+CSSコマンドを送信し、応答712を受信することによって、タッチセンサ式ディスプレイ118のサイズを判定する。応答712は、例えば、サイズXmax=200、Ymax=100を示してもよい。ソースは、714において、例えば、AT+DSBコマンドを送信することによって、タッチセンサ式ディスプレイ118のディスプレイ面積206の存在およびディスプレイ面積206のサイズを判定する。ソースは、716において、例えば、Xtl=10、Ytl=10、Xtl=190、YTL=90を示し得る、応答を受信する。いくつかの例示的実施形態では、MEのタッチセンサ式ディスプレイ118上の境界の座標が、判定される。例えば、整数値が、既知である、または受信され、整数値が、境界のサイズまたは幅を表し、値が、正である時、境界は、タッチセンサ式ディスプレイ118のディスプレイ面積206の一部であってもよい。整数値が、負である時、境界は、タッチセンサ式ディスプレイ118の非ディスプレイ面積208の一部であってもよい。ソースは、718において、タッチセンサ式ディスプレイ118の非ディスプレイ面積208内のジェスチャの原点座標を提供し、タッチセンサ式ディスプレイ118のディスプレイ面積206内の終点座標を提供することによって、配向に対して、メタナビゲーションジェスチャを生成またはエミュレートする。例証される実施例では、エミュレートされるメタナビゲーションジェスチャは、複数の同時タッチを含む、多重タッチジェスチャである。タッチは、例えば、上部にある辺から離れ、かつそれに対して垂直である、垂直スワイプである。図7は、相互作用およびATコマンドまたは応答の実施例を例証する。非請求メッセージはまた、ATコマンドソースとATコマンドシンクとの間でパスされ(例えば、+CMER:1,25,5;+CMER:1,30,5,...,1;+CMER:0,30,25,...,1;+CMER:0,25,25)、メタナビゲーションジェスチャを表すジェスチャが発生したことの受信を知らせてもよい。
図2の実施例に例証される携帯用電子デバイス100は、非ディスプレイ面積208と、ディスプレイ面積206の周囲に延在または巻着する、境界210と、を含む。ジェスチャのエミュレーションまたは指示は、ディスプレイ面積206の周囲全体に延在する、非ディスプレイ面積208に限定されない。例えば、ジェスチャのエミュレーションは、非ディスプレイ面積208に隣接する、ディスプレイ面積206を含む、または4つ未満の辺に隣接する、非ディスプレイ面積206を有する、電子デバイスに対して遂行されてもよい。
さらに、本開示は、単一ディスプレイの隣接するディスプレイ面積206および非ディスプレイ面積208に対して、単一の共通座標系を使用する、ジェスチャのエミュレーションまたは指示に限定されない。例えば、UEは、複数の非隣接ディスプレイ面積または非ディスプレイ面積を含んでもよい。別の実施例によると、UEは、複数のディスプレイ面積および/または非ディスプレイ面積を含んでもよく、これらの面積のいくつかは、単一原点を共有しなくてもよい。さらなる実施例によると、複数のディスプレイ面積および/または非ディスプレイ面積は、相互にオーバーレイし得る、複数の座標系を含んでもよい。
前述の実施例では、タッチセンサ式ディスプレイのディスプレイ面積または非ディスプレイ面積の付加的指示または識別子、あるいは押下またはタッチが、エミュレートされる、座標系は、ATコマンドが、例えば、座標(25,45)において、タッチセンサ式ディスプレイ118上で検出されたタッチをエミュレートするために利用される時、有益である。同様に、タッチイベントが、例えば、非請求結果コード+CTEV:1,25,45を使用して、レポートされる時、どのディスプレイ面積206または非ディスプレイ面積208、あるいはどの座標系内において、タッチイベントが発生したかの指示は、有益である。ディスプレイ面積206および非ディスプレイ面積208はそれぞれ、本明細書では、画面と称される。
複数の相互作用面積またはタッチセンサ式面積が、存在する時、これらの面積は、非ディスプレイ面積208またはディスプレイ面積206であるという性質等の性質を有してもよい。相互作用面積に対する情報は、レポートされたタッチイベントをエミュレートする時、またはそれを理解するために利用されてもよい。性質は、面積と相互作用する前に、各面積に対して提供されてもよい。相互作用は、ジェスチャをエミュレートする、またはイベントをレポートする、ATコマンドの受信を含む。例えば、コマンドは、相互作用のための面積を識別する識別子を含む、リストが、コマンドに応答して提供されるように、MTまたはTAによってサポートされてもよい。ATコマンドは、MTまたはTAによってサポートされ相互作用面積と関連付けられた性質をリスト化してもよい。そのようなコマンドは、パラメータとして、相互作用面積を識別する、識別子を利用してもよい。相互作用面積と関連付けられた性質のリストは、ATコマンドに応答して、提供されてもよい。そのような性質の実施例として、面積が、ディスプレイ面積206または非ディスプレイ面積208であるかどうかの指示、面積が、別の相互作用面積に隣接するかどうかの指示、相互作用面積が、UE上にあるまたはないかどうかの指示が挙げられる。相互作用面積が、同一UE上にない場合、面積は、UEに通信可能に接続または連結されてもよい。相互作用面積が、UE上にないかどうかの指示は、通信プロトコル名、通信プロトコルポート、または通信アドレス、例えば、「USB」、「USB1」、「HDMI(登録商標)」、「HDMI5」、「BLUETOOTH(登録商標)」、「SIP:interactive−tv−screen@home.nl」を介して、面積を識別してもよい。
相互作用面積の性質の他の実施例として、面積分解能またはサイズ(例えば、画素単位)が挙げられる。
前述のように、性質の一実施例は、相互作用面積が、別の相互作用面積に隣接するかどうかの指示である。境界は、相互作用面積が、別の相互作用面積に隣接する場所に存在する。メタナビゲーションジェスチャは、メタナビゲーションジェスチャが、境界を越える、例えば、ジェスチャは、ある相互作用面積上で生じ、別の相互作用面積上で終了すると、提供、識別、または検出されてもよい。メタナビゲーションジェスチャは、タッチイベントの開始を示す、第1のエミュレーションコマンドによって、エミュレートされてもよく、そのタッチイベントは、第1の相互作用面積上にある、またはそれと関連付けられた識別子によって、識別されてもよい。続いて、第2の相互作用面積における解放を示す、またはタッチイベントの終了を示す、第2のエミュレーションコマンドが、提供される。タッチイベントが、識別子によって識別される時、識別子は、第1のタッチイベントを識別するために使用される、同一識別子であってもよい。典型的には、メタナビゲーションジェスチャのエミュレーションは、複数のコマンド、例えば、第1のエミュレーションコマンドおよび第2のエミュレーションコマンドを含む。そのようなエミュレーションコマンドは、ATコマンドであり得る。
メタナビゲーションジェスチャはまた、メタナビゲーションジェスチャが、非隣接相互作用面積上で生じる場合、識別、検出、エミュレート、またはレポートされてもよい。そのようなメタナビゲーションジェスチャに対してレポートされたタッチイベントおよびタッチコマンドは、相互作用面積を識別する、少なくとも1つのパラメータを含む。タッチコマンドのレポート、エミュレーション、または受信前に、相互作用面積を識別する識別子を伴うリストが、提供される。一実装では、各相互作用面積に対する性質は、ATコマンドの受信に応答して、提供されてもよい。
他のコマンドおよびレポートされたイベントはまた、コマンドまたはイベントが関与する、相互作用面積を示してもよい。例えば、1つ以上の文字を表示する時、表示を開始するコマンドは、相互作用面積を示してもよい。同様に、文字の印刷をレポートする時、レポートイベントは、相互作用面積を示してもよい。UE上のキーボードの増設に伴って、相互作用面積はまた、例えば、キーボードが、仮想キーボードである時、コマンドまたはレポートイベント内に提供されてもよい。
コマンドは、全非請求結果コードが、TEによって受信されないように、フィルタを構成するために利用されてもよい。例えば、コマンドは、キー押下またはタッチ、ディスプレイ変化、タッチイベント、およびバッテリインジケータまたは無線強度インジケータ等のインジケータ状態変化の場合、TAまたはMTからの非請求結果コードの送信を有効または無効にしてもよい。送信を有効または無効にするATコマンドの実施例は、Mobile Termination event reporting:+CMERである。
相互作用面積に応じた、非請求結果コードの送信または非請求イベントの送信の有効化あるいは無効化は、有利であり得る。コマンドが、相互作用面積に応じて、非請求結果コードの送信を有効化する、または非請求イベントの送信を有効化するために受信される時、コマンドは、相互作用面積を識別する、少なくとも1つの識別子を含んでもよい。コマンドが、相互作用面積に応じて、非請求結果コードの送信を無効化する、または非請求イベントの送信を無効化するために受信される時、コマンドは、相互作用面積を識別する、少なくとも1つの識別子を含んでもよい。非請求結果コードの受信前または非請求イベントの受信前に、相互作用面積に応じて、非請求結果コードの送信を有効化する、または非請求イベントの送信を有効化するコマンドが、提供されてもよい。加えて、非請求結果コードの送信前または非請求イベントの送信前に、相互作用面積に応じて、非請求結果コードの送信を有効化する、または非請求イベントの送信を有効化するコマンドが、受信されてもよい。本開示は、非ディスプレイ面積208にわたって延在する、タッチセンサ式オーバーレイ114を利用した、メタナビゲーションジェスチャの識別に限定されない。メタナビゲーションジェスチャは、例えば、表示可能面積の余白にあり得る、タッチセンサ式オーバーレイ114の余白における、第1の検出されたタッチ場所に基づいて、随意に、タッチが検出される時のジェスチャスピードまたは方向、あるいは経路ジェスチャによって横断される経路に基づいて、検出されてもよい。メタナビゲーションジェスチャの識別はまた、タッチ属性に基づく、発見的アルゴリズムを利用して実行され、ジェスチャの原点、スピード、方向、距離、および経路のうちの1つ以上等のタッチ属性に応答してもよい。
随意に、電子デバイスは、タッチセンサ式オーバーレイ114を囲む、筐体またはタッチセンサ式ベゼルのタッチセンサ式フレームを含んでもよい。メタナビゲーションジェスチャは、タッチセンサ式フレームまたはベゼル上で検出された原点に基づいて、識別されてもよい。
さらに、メタナビゲーションジェスチャによって越えられる境界は、タッチセンサ式ディスプレイ118のディスプレイ面積206と非ディスプレイ面積208との間の境界に限定されない。他の好適な境界が利用されてもよく、タッチセンサ式オーバーレイ114の余白に沿った領域または帯域、タッチセンサ式ディスプレイ118上の所定のラインまたは複数のライン、あるいは電子デバイスのベゼルまたはフレームが、タッチセンサ式ディスプレイ118に整合する境界を含んでもよい。
したがって、メタナビゲーションジェスチャの識別は、ディスプレイの非ディスプレイ面積208を被覆するタッチセンサ式オーバーレイ114を含む、タッチセンサ式ディスプレイを伴う、電子デバイスに限定されない。メタナビゲーションジェスチャの識別は、他の電子デバイスを利用して実行されてもよい。さらに、図を参照して説明された電子デバイスは、電子デバイスの実施例として提供される。他の電子デバイスが、利用されてもよく、特に、図1を参照して説明された電子デバイスの特徴の多くは、随意である。例えば、通信サブシステム104は、随意である。さらに、短距離通信およびSIM/USIM/RUIM138もまた、随意である。さらに、電子デバイスは、本明細書に参照または説明されない、付加的特徴を含んでもよい。
メタナビゲーションジェスチャの使用およびそのようなジェスチャの識別は、非メタナビゲーションジェスチャまたは他のタッチと区別され得る、付加的入力を提供する。これらのメタナビゲーションジェスチャは、ジェスチャが受信された時に、情報が表示されない、アプリケーションに関連する入力のエントリを促進する。したがって、入力は、タッチセンサ式ディスプレイ上に表示される、アイコンまたは選択可能特徴を使用せずに、かつ物理的ボタンまたはスイッチ等の電子デバイス上の他の制御を使用する必要なく、タッチセンサ式ディスプレイ118上に表示される情報と関連付けられていない、アプリケーションに関連して、受信されてもよい。タッチセンサ式ディスプレイ118の面積または複数の面積は、そのようなアイコンまたは選択可能特徴を表示されるために占有されない。したがって、システムレベルナビゲーションが、そのようなナビゲーションのための情報またはメニューの付加的ディスプレイを使用せずに提供され、改良されたインターフェースを提供する。
一側面によると、ユーザ機器(UE)のための方法は、少なくとも部分的に、タッチセンサ式入力デバイスアクションのためのATtention(AT)コマンドに応答して、ディスプレイ面積および非ディスプレイ面積を含む、タッチセンサ式入力のためのメタナビゲーションジェスチャデバイスをエミュレートするステップを含む。
別の側面によると、デバイスのための方法は、ATコマンドを発行し、メタナビゲーションジェスチャをエミュレートするステップを含む。
別の側面によると、UEを試験する方法は、1つ以上のATコマンドを受信し、メタナビゲーションジェスチャをエミュレートするステップと、1つ以上のATコマンドのうちの少なくとも1つに応答して、情報を提供するステップと、を含む。
本開示は、その精神または重要な特長から逸脱することなく、他の特定の形式において具現化されてもよい。説明される実施形態は、あらゆる点において、図示であって制限ではないとみなされたい。したがって、本開示の範囲は、前述の説明ではなく、添付の請求項によって示される。請求項の同等の意図および限界内に留まる全ての変更は、それらの範囲内において包含されるものとする。

Claims (25)

  1. ユーザ機器(UE)のための方法であって、
    少なくとも部分的に、タッチセンサ式入力デバイスアクションのためのATtention(AT)コマンドに応答して、ディスプレイ面積および非ディスプレイ面積を含む、タッチセンサ式入力デバイスのためのメタナビゲーションジェスチャをエミュレートするステップ
    を含む、方法。
  2. 少なくとも部分的に、非ディスプレイ境界情報のためのATコマンドに応答して、非ディスプレイ境界情報を提供するステップを含む、請求項1に記載の方法。
  3. 少なくとも部分的に、配向情報のためのATコマンドに応答して、配向情報を提供するステップを含む、請求項1に記載の方法。
  4. 少なくとも部分的に、コマンド画面サイズのためのATコマンドに応答して、コマンド画面サイズ情報を提供するステップを含む、請求項1に記載の方法。
  5. 前記配向情報は、基準として、前記タッチセンサ式入力ディスプレイの少なくとも1つの特徴の識別を含む、請求項3に記載の方法。
  6. 前記配向情報は、前記タッチセンサ式入力ディスプレイの少なくとも1つの角の識別を含む、請求項5に記載の方法。
  7. 前記配向情報は、前記少なくとも1つの角の座標値を含む、請求項6に記載の方法。
  8. 前記配向情報は、前記タッチセンサ式入力ディスプレイの少なくとも1つの辺の識別を含む、請求項5に記載の方法。
  9. 前記配向情報は、基準配向に対する前記UEの回転角度を表す、スカラーを含む、請求項3に記載の方法。
  10. 前記配向情報は、傾斜角度を表す、スカラーを含む、請求項9に記載の方法。
  11. 前記少なくとも1つのスカラーは、前記回転角度を表す、固定数の値のうちの1つを含む、請求項9に記載の方法。
  12. 前記コマンド画面サイズ情報は、最大x座標値および最大y座標値を含む、請求項4に記載の方法。
  13. 前記非ディスプレイ境界は、前記非ディスプレイ面積と前記ディスプレイ面積との間の境界を含む、請求項2に記載の方法。
  14. 前記非ディスプレイ面積境界情報は、前記境界の座標値を含む、請求項13に記載の方法。
  15. 前記座標値は、前記境界の対角の座標値を含む、請求項14に記載の方法。
  16. 前記メタナビゲーションジェスチャは、多重タッチジェスチャを含む、請求項1に記載の方法。
  17. 前記多重タッチジェスチャのタッチは、同一識別子によって識別される、請求項16に記載の方法。
  18. 少なくとも部分的に、前記ディスプレイ面積および前記非ディスプレイ面積のうちの少なくとも1つのためのATtention(AT)コマンドに応答して、前記ディスプレイ面積および前記非ディスプレイ面積のうちの少なくとも1つの性質の指示を提供するステップを含む、請求項1に記載の方法。
  19. 請求項1に記載の方法を実施するように、UEの少なくとも1つのプロセッサによって実行可能であるコンピュータ可読コードを有する、コンピュータ可読媒体。
  20. ユーザ機器(UE)であって、
    タッチセンサ式ディスプレイと、
    メモリと、
    請求項1に記載の方法を遂行するように、前記タッチセンサ式ディスプレイおよび前記メモリに連結される、プロセッサと
    を含む、UE。
  21. デバイスのための方法であって、ATtention(AT)コマンドを発行し、メタナビゲーションジェスチャをエミュレートするステップを含む、方法。
  22. 非ディスプレイ境界情報のためのATコマンドを発行するステップと、前記非ディスプレイ境界情報を前記UEから受信するステップとを含む、請求項21に記載の方法。
  23. 配向情報のためのATコマンドを発行するステップと、前記配向情報を前記UEから受信するステップとを含む、請求項21に記載の方法。
  24. コマンド画面サイズのためのATコマンドを発行するステップと、コマンド画面サイズ情報を前記UEから受信するステップとを含む、請求項21に記載の方法。
  25. 請求項21に記載の方法を実施するように、少なくとも1つのプロセッサによって実行可能であるコンピュータ可読コードを有する、コンピュータ可読媒体。
JP2013530153A 2011-08-12 2011-08-12 携帯用電子デバイスおよびそれを制御する方法 Active JP5667301B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2011/047677 WO2013025192A1 (en) 2011-08-12 2011-08-12 Portable electronic device and method of controlling same

Publications (2)

Publication Number Publication Date
JP2013537992A true JP2013537992A (ja) 2013-10-07
JP5667301B2 JP5667301B2 (ja) 2015-02-12

Family

ID=44534676

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013530153A Active JP5667301B2 (ja) 2011-08-12 2011-08-12 携帯用電子デバイスおよびそれを制御する方法

Country Status (9)

Country Link
EP (3) EP3401774B1 (ja)
JP (1) JP5667301B2 (ja)
KR (1) KR101451534B1 (ja)
CN (1) CN103080890B (ja)
CA (1) CA2808792C (ja)
DE (1) DE112011102694B4 (ja)
ES (1) ES2758130T3 (ja)
GB (1) GB2496346A (ja)
WO (1) WO2013025192A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5809202B2 (ja) * 2013-06-21 2015-11-10 シャープ株式会社 画面操作可能な画像表示装置及びその操作方法
DE102014003611A1 (de) * 2014-03-13 2015-09-17 Audi Ag Verfahren zum Betreiben einer Mensch-Maschine-Schnittstelle sowie eine Mensch-Maschine-Schnittstelle zur Ausführung des Verfahrens
KR102451122B1 (ko) * 2015-05-18 2022-10-05 애플 인크. 패킷 데이터 네트워크 접속 오프로드를 위한 주의(at) 명령
KR101687184B1 (ko) 2015-08-31 2016-12-16 린나이코리아 주식회사 스팀오븐의 열 변형저감과 모터의 과열을 방지하는 장치 및 그 방법
CN106814903B (zh) * 2015-12-01 2020-01-14 小米科技有限责任公司 功能键的触控方法和装置
US20210373758A1 (en) * 2020-05-28 2021-12-02 Microsoft Technology Licensing, Llc Active accessibility control bar

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9008A (en) * 1852-06-08 Improvement in the construction of soap-boilers
EP2003539A1 (en) * 2007-05-15 2008-12-17 High Tech Computer Corp. Electronic device with switchable user interface and electronic device with accessible touch operation
JP2013529339A (ja) * 2010-09-24 2013-07-18 リサーチ イン モーション リミテッド 携帯用電子デバイスおよびそれを制御する方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000068766A1 (en) * 1999-04-28 2000-11-16 Adobe Systems, Inc. A system and method for changing the rotational orientation of display data
US6567101B1 (en) 1999-10-13 2003-05-20 Gateway, Inc. System and method utilizing motion input for manipulating a display of data
US6677932B1 (en) * 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US8106881B2 (en) * 2007-11-07 2012-01-31 International Business Machines Corporation System, computer program product and method of manipulating windows on portable computing devices through motion
US8159469B2 (en) * 2008-05-06 2012-04-17 Hewlett-Packard Development Company, L.P. User interface for initiating activities in an electronic device
US10031549B2 (en) * 2008-07-10 2018-07-24 Apple Inc. Transitioning between modes of input
US20100107067A1 (en) * 2008-10-27 2010-04-29 Nokia Corporation Input on touch based user interfaces
CN101739125A (zh) * 2008-11-12 2010-06-16 联想(北京)有限公司 一种通过操作体执行操作的方法、装置及电子设备
EP2428880A1 (en) * 2009-01-27 2012-03-14 Research In Motion Limited A handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device
CN101860892A (zh) 2009-04-11 2010-10-13 深圳富泰宏精密工业有限公司 模拟手机at命令测试的系统及方法
US9310994B2 (en) * 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9008A (en) * 1852-06-08 Improvement in the construction of soap-boilers
EP2003539A1 (en) * 2007-05-15 2008-12-17 High Tech Computer Corp. Electronic device with switchable user interface and electronic device with accessible touch operation
JP2013529339A (ja) * 2010-09-24 2013-07-18 リサーチ イン モーション リミテッド 携帯用電子デバイスおよびそれを制御する方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6014005494; 'AT command set for User Equipment(UE)(Release 10)' 3GPP TS 27.007 V10.4.0 , 201106, p.8,l15-p.9,l7,p.133,l13-p.137,l2 *

Also Published As

Publication number Publication date
CN103080890B (zh) 2016-06-15
EP3401774B1 (en) 2019-10-09
EP3572921A1 (en) 2019-11-27
KR101451534B1 (ko) 2014-10-22
WO2013025192A1 (en) 2013-02-21
ES2758130T3 (es) 2020-05-04
CA2808792C (en) 2016-02-16
DE112011102694T5 (de) 2013-05-29
DE112011102694B4 (de) 2021-12-09
GB201303167D0 (en) 2013-04-10
CN103080890A (zh) 2013-05-01
EP3401774A1 (en) 2018-11-14
EP2596420B1 (en) 2018-07-18
CA2808792A1 (en) 2013-02-21
EP2596420A1 (en) 2013-05-29
GB2496346A (en) 2013-05-08
JP5667301B2 (ja) 2015-02-12
EP3572921B1 (en) 2021-10-06
KR20130075767A (ko) 2013-07-05

Similar Documents

Publication Publication Date Title
US8884892B2 (en) Portable electronic device and method of controlling same
JP5784712B2 (ja) 携帯用電子デバイスおよびそれを制御する方法
EP2508972B1 (en) Portable electronic device and method of controlling same
US20130093685A1 (en) System and Method for Controlling an Electronic Device Having a Touch-Sensitive Non-Display Area
US20140002375A1 (en) System and method for controlling an electronic device
JP5667301B2 (ja) 携帯用電子デバイスおよびそれを制御する方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130326

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141211

R150 Certificate of patent or registration of utility model

Ref document number: 5667301

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250