JP6419152B2 - Optimized adaptive thresholding for touch sensing - Google Patents

Optimized adaptive thresholding for touch sensing Download PDF

Info

Publication number
JP6419152B2
JP6419152B2 JP2016504298A JP2016504298A JP6419152B2 JP 6419152 B2 JP6419152 B2 JP 6419152B2 JP 2016504298 A JP2016504298 A JP 2016504298A JP 2016504298 A JP2016504298 A JP 2016504298A JP 6419152 B2 JP6419152 B2 JP 6419152B2
Authority
JP
Japan
Prior art keywords
touch
touch panel
unit
rejection
false
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016504298A
Other languages
Japanese (ja)
Other versions
JP2016517101A (en
JP2016517101A5 (en
Inventor
モハメド・イムティアツ・アハメド
ウィリアム・イー−ミン・ファン
スハイル・ジャリル
ラグークル・ティラク
コスロ・モハンマド・ラビ
Original Assignee
クアルコム,インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by クアルコム,インコーポレイテッド filed Critical クアルコム,インコーポレイテッド
Publication of JP2016517101A publication Critical patent/JP2016517101A/en
Publication of JP2016517101A5 publication Critical patent/JP2016517101A5/ja
Application granted granted Critical
Publication of JP6419152B2 publication Critical patent/JP6419152B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/04166Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G06F3/041661Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving using detection at multiple resolutions, e.g. coarse and fine scanning; using detection within a limited area, e.g. object tracking window
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G06F3/0445Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means using two or more layers of sensing electrodes, e.g. using two layers of electrodes separated by a dielectric layer

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

本開示の態様は、タッチデバイスに関し、より詳細には、タッチ感知のための包括的なフレームワークおよび技術に関する。   Aspects of the present disclosure relate to touch devices, and more particularly to a comprehensive framework and techniques for touch sensing.

コンピューティングデバイス、モバイルデバイス、キオスクなどのデバイスは、ユーザがタッチ入力(たとえば、ユーザまたはペンなどの入力ツールによるタッチ)によってデバイスとインタラクションすることができるタッチスクリーンインターフェースを使用することが多い。タッチスクリーンインターフェースを使用するタッチスクリーンデバイスは、ユーザがタッチスクリーンと直接インタラクションすることができるのでユーザに利便性をもたらす。タッチスクリーンデバイスは、タッチ入力を受け取り、タッチ入力に基づいて様々な動作を実行する。たとえば、ユーザは、タッチスクリーンに表示されたアイコンにタッチしてアイコンに関連付けられたソフトウェアアプリケーションを実行する可能性があり、またはユーザは、タッチスクリーン上に描くことによって絵を描く可能性がある。ユーザは、タッチスクリーン上のアイテムをドラッグアンドドロップする可能性もあり、または2本の指でタッチスクリーン上のビュー(view)をパンする可能性がある。したがって、所望の動作を正確に実行するために、タッチスクリーン上のタッチ入力を正確に分析することができるタッチスクリーンデバイスが必要とされる。雑音などの様々な要因が、タッチスクリーンの性能に影響を与える可能性があり、タッチスクリーンデバイスの動作の正確性に影響を与える可能性がある。加えて、様々なタッチ入力(たとえば、ユーザまたはペンなどの入力ツールによるタッチ)の間のタッチサイズは、使用されるタッチ入力、またはタッチが行われる方法に応じて大きく変わり得る(たとえば、タッチスクリーンインターフェース上の平らに押し付けた指対タッチスクリーンインターフェースにほんの少しタッチしている指)。既存のタッチスクリーンインターフェースは、特定のタッチサイズ(たとえば、指のタッチ)を検出するように構成(または調整)されており、したがって、その他のタッチ入力(たとえば、ペンまたはスタイラスなどの入力ツール)からのタッチを有効なタッチではなく雑音として拒絶する可能性がある。   Devices such as computing devices, mobile devices, kiosks often use a touch screen interface that allows a user to interact with the device by touch input (eg, touch by a user or an input tool such as a pen). Touch screen devices that use a touch screen interface provide convenience to the user because the user can interact directly with the touch screen. The touch screen device receives touch input and performs various operations based on the touch input. For example, the user may touch an icon displayed on the touch screen to run a software application associated with the icon, or the user may draw a picture by drawing on the touch screen. The user may drag and drop items on the touch screen or may pan the view on the touch screen with two fingers. Accordingly, there is a need for a touch screen device that can accurately analyze touch input on a touch screen in order to accurately perform a desired action. Various factors, such as noise, can affect the performance of the touch screen and can affect the accuracy of operation of the touch screen device. In addition, the touch size between various touch inputs (e.g., touch by a user or input tool such as a pen) can vary greatly depending on the touch input used or how the touch is made (e.g., touch screen A flat-pressed finger on the interface versus a finger touching the touch screen interface a little bit). Existing touch screen interfaces are configured (or adjusted) to detect a specific touch size (e.g., finger touch) and thus from other touch inputs (e.g., input tools such as a pen or stylus) May be rejected as noise rather than a valid touch.

したがって、タッチスクリーンの動作の正確性を高めるために、様々なタッチサイズを適応的に検出し、処理することができるタッチスクリーンデバイスが望まれている。   Accordingly, there is a need for a touch screen device that can adaptively detect and process various touch sizes in order to increase the accuracy of the operation of the touch screen.

特定の実施形態が、タッチパネルインターフェースでの改善されたタッチ入力認識のためのシステムおよび方法を説明する。   Certain embodiments describe systems and methods for improved touch input recognition at a touch panel interface.

本明細書において開示されるシステムおよび方法は、タッチスクリーンインターフェースにおけるタッチ入力の判定および処理の時間多重化を可能にする。タッチスクリーンインターフェースのタッチパネルをスキャンするとき、1つまたは複数のフレームを、第1のタッチサイズを生じるタッチ入力(たとえば、スタイラス)によるタッチを検出するための専用とすることができ、1つまたは複数のフレームを、第2のタッチサイズを生じるタッチ入力(たとえば、ユーザの指)によるタッチを検出するための専用とすることができる。タッチを検出するために使用されるスキャンレートおよび感度は、特定のタッチサイズを検出すること専用のフレームに合わせて調整することができる。たとえば、スタイラス入力によるタッチを検出すること専用のフレームは、高いスキャンレートおよび高い感度で処理される可能性がある。一方、指入力によるタッチを検出すること専用のフレームは、中程度のスキャンレートおよび中程度の感度で処理される可能性がある。   The systems and methods disclosed herein allow for time multiplexing of touch input determination and processing at a touch screen interface. When scanning a touch panel with a touch screen interface, one or more frames can be dedicated to detecting a touch with a touch input (e.g., a stylus) that produces a first touch size, and one or more The frame may be dedicated to detecting a touch with a touch input (eg, a user's finger) that results in a second touch size. The scan rate and sensitivity used to detect the touch can be adjusted for a frame dedicated to detecting a particular touch size. For example, a frame dedicated to detecting touches with stylus input may be processed with high scan rate and high sensitivity. On the other hand, a frame dedicated to detecting a touch by finger input may be processed with a medium scan rate and medium sensitivity.

一部の実施形態において、タッチパネルのためのタッチ入力を認識するための方法は、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブ(blob)を含む第1のフレームでタッチパネルをスキャンするステップを含む。方法は、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第2のフレームでタッチパネルをスキャンするステップも含む。方法は、加えて、第1のタッチ報告感度に少なくとも部分的に基づいて第1のフレーム内のタッチパネルブロッブを処理し、第2のタッチ報告感度に少なくとも部分的に基づいて第2のフレーム内のタッチパネルブロッブを処理するステップを含む。方法は、処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかを判定するステップをさらに含む。   In some embodiments, a method for recognizing touch input for a touch panel includes scanning the touch panel with a first frame that includes at least one touch panel blob that results from a touch on the touch panel. Including. The method also includes scanning the touch panel with a second frame that includes at least one touch panel blob that results from a touch on the touch panel. The method additionally processes the touch panel blob in the first frame based at least in part on the first touch reporting sensitivity and in the second frame based at least in part on the second touch reporting sensitivity. Processing the touch panel blob. The method further includes determining whether there is a valid touch based at least in part on the processing step.

一部の実施形態において、方法は、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第3のフレームでタッチパネルをスキャンするステップと、第3のタッチ報告感度に少なくとも部分的に基づいて第3のフレーム内のタッチパネルブロッブを処理するステップと、処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかを判定するステップを含む。   In some embodiments, the method is based at least in part on scanning the touch panel with a third frame that includes at least one touch panel blob that results from a touch on the touch panel, and the third touch reporting sensitivity. Processing a touch panel blob in the third frame and determining whether there is a valid touch based at least in part on the processing step.

一部の実施形態においては、第3のフレーム内のタッチパネルブロッブを処理するステップが、直径2ミリメートル未満、および直径19ミリメートルを超える誤タッチ拒絶サイズでタッチパネルブロッブを処理するステップを含む。   In some embodiments, processing the touch panel blob in the third frame includes processing the touch panel blob with a false touch rejection size of less than 2 millimeters in diameter and greater than 19 millimeters in diameter.

一部の実施形態においては、方法は、処理するステップに少なくとも部分的に基づいてタッチパネルに対するタッチパネルブロッブの位置を決定するステップを含む。   In some embodiments, the method includes determining a position of the touch panel blob relative to the touch panel based at least in part on the processing step.

一部の実施形態においては、処理するステップが、タッチパネルのスキャンレートを調整するステップをさらに含む。   In some embodiments, the processing step further includes adjusting a scan rate of the touch panel.

一部の実施形態においては、処理するステップが、タッチパネルブロッブをフィルタリングし、補間するステップをさらに含む。   In some embodiments, the processing step further includes filtering and interpolating the touch panel blob.

一部の実施形態においては、第1のフレーム内のタッチパネルブロッブを処理するステップが、直径19ミリメートル未満の誤タッチ拒絶サイズでタッチパネルブロッブを処理するステップを含む。   In some embodiments, processing the touch panel blob in the first frame includes processing the touch panel blob with a false touch rejection size less than 19 millimeters in diameter.

一部の実施形態においては、第2のフレーム内のタッチパネルブロッブを処理するステップが、直径2ミリメートルを超える誤タッチ拒絶サイズでタッチパネルブロッブを処理するステップを含む。   In some embodiments, processing the touch panel blob in the second frame includes processing the touch panel blob with a false touch rejection size greater than 2 millimeters in diameter.

一部の実施形態において、タッチパネルのためのタッチ入力を認識するための装置は、タッチパネルと、タッチ位置特定論理を含むメモリと、タッチパネルおよびメモリに結合されたプロセッサとを含む。プロセッサは、タッチ位置特定論理が実行されたとき、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第1のフレームでタッチパネルをスキャンし、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第2のフレームでタッチパネルをスキャンし、第1のタッチ報告感度に少なくとも部分的に基づいて第1のフレーム内のタッチパネルブロッブを処理し、第2のタッチ報告感度に少なくとも部分的に基づいて第2のフレーム内のタッチパネルブロッブを処理し、処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかを判定するように動作可能である。   In some embodiments, an apparatus for recognizing touch input for a touch panel includes a touch panel, a memory including touch location logic, and a processor coupled to the touch panel and the memory. The processor scans the touch panel with a first frame that includes at least one touch panel blob that results from a touch on the touch panel when touch location logic is executed, and at least one touch panel that results from the touch on the touch panel Scan the touch panel with a second frame containing blobs, process the touch panel blobs in the first frame based at least in part on the first touch reporting sensitivity, and at least in part based on the second touch reporting sensitivity And processing the touch panel blob in the second frame and operable to determine whether there is a valid touch based at least in part on the processing step.

一部の実施形態において、タッチパネルのためのタッチ入力を認識するための装置は、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第1のフレームでタッチパネルをスキャンするための手段と、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第2のフレームでタッチパネルをスキャンするための手段と、第1のタッチ報告感度に少なくとも部分的に基づいて第1のフレーム内のタッチパネルブロッブを処理し、第2のタッチ報告感度に少なくとも部分的に基づいて第2のフレーム内のタッチパネルブロッブを処理するための手段と、処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかを判定するための手段とを含む。   In some embodiments, an apparatus for recognizing touch input for a touch panel includes means for scanning the touch panel with a first frame that includes at least one touch panel blob that results from a touch on the touch panel; Means for scanning the touch panel with a second frame including at least one touch panel blob resulting from a touch on the touch panel, and the touch panel blob within the first frame based at least in part on the first touch reporting sensitivity Means for processing the touch panel blob in the second frame based at least in part on the second touch reporting sensitivity and whether there is a valid touch based at least in part on the processing step Means for determining whether or not.

一部の実施形態において、プロセッサが読み取り可能な非一時的媒体は、プロセッサに、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第1のフレームでタッチパネルをスキャンさせ、タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第2のフレームでタッチパネルをスキャンさせ、第1のタッチ報告感度に少なくとも部分的に基づいて第1のフレーム内のタッチパネルブロッブを処理させ、第2のタッチ報告感度に少なくとも部分的に基づいて第2のフレーム内のタッチパネルブロッブを処理させ、処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかを判定させるように構成されたプロセッサが読み取り可能な命令を含む。   In some embodiments, the processor-readable non-transitory medium causes the processor to scan the touch panel with a first frame that includes at least one touch panel blob that results from a touch on the touch panel, and the touch on the touch panel. Scan the touch panel with a second frame that includes at least one touch panel blob resulting from processing the touch panel blob in the first frame based at least in part on the first touch reporting sensitivity and second touch Read by a processor configured to cause the touch panel blob in the second frame to be processed based at least in part on the reported sensitivity and to determine if there is a valid touch based at least in part on the processing step. Contains possible instructions.

本開示の態様は、例として示される。添付の図面において、同様の参照番号は、同様の要素を示す。   Aspects of the present disclosure are shown by way of example. In the accompanying drawings, like reference numbers indicate like elements.

1つまたは複数の実施形態を組み込み得る可搬型デバイスの簡略化されたブロック図である。FIG. 3 is a simplified block diagram of a portable device that may incorporate one or more embodiments. 一部の実施形態による様々な片手のタッチジェスチャおよび対応するタッチプリミティブ(touch primitive)を示す図である。FIG. 6 illustrates various one-hand touch gestures and corresponding touch primitives according to some embodiments. 一部の実施形態によるペンタッチを含む様々なジェスチャおよび対応するタッチプリミティブを示す図である。FIG. 6 illustrates various gestures and corresponding touch primitives including pen touch according to some embodiments. 一部の実施形態によるタッチパネル上のペンタッチを含むジェスチャおよび対応するタッチプリミティブを示す図である。FIG. 6 illustrates a gesture including a pen touch on a touch panel and corresponding touch primitives according to some embodiments. 一部の実施形態による適応的なタッチ信号処理アーキテクチャのブロック図である。FIG. 2 is a block diagram of an adaptive touch signal processing architecture according to some embodiments. タッチインターフェースによって捕捉される複数のフレーム内のタッチプリミティブ(またはタッチブロッブ)を示す図である。FIG. 6 illustrates touch primitives (or touch blobs) in multiple frames captured by a touch interface. 異なる種類のタッチを処理するための適合方式を示す表600である。7 is a table 600 illustrating an adaptation scheme for handling different types of touches. タッチのサイズに依存する適応的なタッチ処理のための方法を示す流れ図である。5 is a flow diagram illustrating a method for adaptive touch processing that depends on the size of a touch. タッチパネルのためのタッチ入力を認識するための例示的な方法を示す流れ図である。5 is a flow diagram illustrating an exemplary method for recognizing touch input for a touch panel. 1つまたは複数の実施形態が実装され得るコンピューティングシステムの例を示す図である。FIG. 11 illustrates an example computing system in which one or more embodiments may be implemented. タッチスクリーンディスプレイおよび外部ディスプレイデバイスを用いるモバイルデバイスのアーキテクチャの例を示す図である。FIG. 2 illustrates an example architecture of a mobile device using a touch screen display and an external display device. タッチスクリーンコントローラを用いるモバイルタッチスクリーンデバイスの例を示す図である。FIG. 6 illustrates an example of a mobile touch screen device that uses a touch screen controller. タッチスクリーンデバイスの静電容量式タッチ処理のデータ経路の例を示す図である。It is a figure which shows the example of the data path | route of the electrostatic capacitance type touch process of a touch screen device. モバイルハンドセットアーキテクチャのディスプレイおよびタッチサブシステムのさらに詳しい図である。FIG. 2 is a more detailed diagram of a mobile handset architecture display and touch subsystem. 信号の閾値判定の方法の流れ図である。It is a flowchart of the method of threshold value determination of a signal. 信号の閾値判定の方法の流れ図である。It is a flowchart of the method of threshold value determination of a signal.

いくつかの例示的な実施形態が、以降、本明細書の一部を形成する添付の図面に関連して説明される。本開示の1つまたは複数の態様が実装され得る特定の実施形態が以降で説明されるが、本開示の範囲または添付の請求項の精神を逸脱することなくその他の実施形態が使用される可能性があり、様々な修正がなされる可能性がある。   Several exemplary embodiments are described below with reference to the accompanying drawings, which form a part of this specification. Although specific embodiments in which one or more aspects of the disclosure may be implemented are described below, other embodiments may be used without departing from the scope of the disclosure or the spirit of the appended claims There are possibilities that various modifications will be made.

添付の図面に関連して以降で説明される詳細な説明は、様々な構成の説明として意図されており、本明細書において説明される概念が実施され得る構成のみを示すように意図されていない。詳細な説明は、様々な概念の完全な理解をもたらすことを目的とする具体的詳細を含む。しかし、これらの概念がこれらの具体的詳細なしに実施され得ることは当業者に明らかであろう。いくつかの場合、そのような概念を曖昧にすることを避けるために、よく知られた構造および構成要素がブロック図の形態で示される。   The detailed description set forth below in connection with the accompanying drawings is intended as a description of various configurations and is not intended to illustrate only the configurations in which the concepts described herein may be implemented. . The detailed description includes specific details that are intended to provide a thorough understanding of various concepts. However, it will be apparent to those skilled in the art that these concepts may be practiced without these specific details. In some instances, well-known structures and components are shown in block diagram form in order to avoid obscuring such concepts.

タッチスクリーンデバイスのいくつかの態様が、以降で、様々な装置および方法を参照して示される。これらの装置および方法は、様々なブロック、モジュール、構成要素、回路、ステップ、プロセス、アルゴリズムなど(集合的に「要素」と呼ばれる)によって以下の詳細な説明において説明され、添付の図面に示される。これらの要素は、電子的なハードウェア、コンピュータソフトウェア、またはこれらの任意の組合せを用いて実装され得る。そのような要素がハードウェアで実装されるかまたはソフトウェアで実装されるかは、システム全体に課された特定の用途および設計の制約による。   Several aspects of touch screen devices are described below with reference to various apparatus and methods. These devices and methods are described in the following detailed description by various blocks, modules, components, circuits, steps, processes, algorithms, etc. (collectively referred to as “elements”) and illustrated in the accompanying drawings. . These elements may be implemented using electronic hardware, computer software, or any combination thereof. Whether such elements are implemented in hardware or software depends on the particular application and design constraints imposed on the overall system.

例として、要素、または要素の任意の部分、または要素の任意の組合せは、1つまたは複数のプロセッサを含む「処理システム」によって実装され得る。プロセッサの例は、マイクロプロセッサ、マイクロコントローラ、デジタル信号プロセッサ(DSP)、フィールドプログラマブルゲートアレイ(FPGA)、プログラマブルロジックデバイス(PLD)、状態機械、ゲート論理(gated logic)、ディスクリートハードウェア回路、および本開示全体を通じて説明される様々な機能を実行するように構成されたその他の好適なハードウェアを含む。処理システムの1つまたは複数のプロセッサは、ソフトウェアを実行する可能性がある。ソフトウェアは、ソフトウェアと呼ばれるか、ファームウェアと呼ばれるか、ミドルウェアと呼ばれるか、マイクロコードと呼ばれるか、ハードウェア記述言語と呼ばれるか、またはそれ以外の呼び方をされるかにかかわらず、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行ファイル、実行のスレッド、プロシージャ、関数などを広く意味すると考えられる。   By way of example, an element, or any portion of an element, or any combination of elements may be implemented by a “processing system” that includes one or more processors. Examples of processors include microprocessors, microcontrollers, digital signal processors (DSPs), field programmable gate arrays (FPGAs), programmable logic devices (PLDs), state machines, gated logic, discrete hardware circuits, and books It includes other suitable hardware configured to perform the various functions described throughout the disclosure. One or more processors of the processing system may execute software. Software is called instructions, instruction sets, whether called software, firmware, middleware, microcode, hardware description language, or otherwise. , Code, code segment, program code, program, subprogram, software module, application, software application, software package, routine, subroutine, object, executable, thread of execution, procedure, function, etc.

したがって、1つまたは複数の例示的な実施形態において、説明される機能は、ハードウェア、ソフトウェア、ファームウェア、またはこれらの任意の組合せで実装することができる。ソフトウェアで実装される場合、機能は、コンピュータ可読媒体に記憶されるか、またはコンピュータ可読媒体上の1つもしくは複数の命令もしくはコードとして符号化される可能性がある。コンピュータ可読媒体は、コンピュータ記憶媒体を含む。記憶媒体は、コンピュータによってアクセスされ得る任意の利用可能な媒体であってよい。限定ではなく例として、そのようなコンピュータ可読媒体は、RAM、ROM、EEPROM、CD-ROMもしくはその他の光ディスクストレージ、磁気ディスクストレージもしくはその他の磁気記憶デバイス、または命令もしくはデータ構造の形態で所望のプログラムコードを担持もしくは記憶するために使用可能であり、コンピュータによってアクセス可能である任意のその他の媒体を含み得る。本明細書において使用されるとき、ディスク(disk)およびディスク(disc)は、コンパクトディスク(CD: compact disc)、レーザディスク(laser disc)、光ディスク(optical disc)、デジタル多用途ディスク(DVD: digital versatile disc)、およびフロッピー(登録商標)ディスク(floppy disk)を含み、ディスク(disk)は、通常、磁気的にデータを再生し、一方、ディスク(disc)は、レーザを用いて光学的にデータを再生する。上記のものの組合せも、コンピュータ可読媒体の範囲に含まれるべきである。   Thus, in one or more exemplary embodiments, the functions described can be implemented in hardware, software, firmware, or any combination thereof. If implemented in software, the functions may be stored on a computer-readable medium or encoded as one or more instructions or code on a computer-readable medium. Computer-readable media includes computer storage media. A storage media may be any available media that can be accessed by a computer. By way of example, and not limitation, such computer-readable media may be RAM, ROM, EEPROM, CD-ROM or other optical disk storage, magnetic disk storage or other magnetic storage device, or desired program in the form of instructions or data structures. Any other medium that can be used to carry or store the code and that is accessible by the computer can be included. As used herein, a disk and a disc are a compact disc (CD), a laser disc, an optical disc, a digital versatile disc (DVD). versatile disc), and floppy disk, which normally reproduces data magnetically, while the disc uses a laser to optically data Play. Combinations of the above should also be included within the scope of computer-readable media.

タッチスクリーン技術は、様々な種類の用途を可能にする。上で検討されたように、ユーザは、アプリケーションの実行などの様々な動作を実行するためにタッチスクリーンにタッチする可能性がある。一例において、タッチスクリーンは、仮想キーボードおよびユーザ指向コントロール(user-directed control)などの直接タッチするユーザインターフェースを提供する。タッチスクリーンによるユーザインターフェースは、近接検出を行い得る。ユーザは、タッチスクリーン上に手書きする可能性がある。別の例において、タッチスクリーン技術は、監視、侵入検出、および認証などのセキュリティ機能のために使用されてもよく、照明の制御および電化製品の制御などの使用環境の制御のために使用されてもよい。別の例において、タッチスクリーン技術は、健康管理用途(たとえば、リモートセンシング環境、予後、および診断)のために使用されてもよい。   Touch screen technology enables various types of applications. As discussed above, the user may touch the touch screen to perform various operations such as executing an application. In one example, the touch screen provides a direct touch user interface such as a virtual keyboard and user-directed controls. A touch screen user interface may perform proximity detection. The user may write by hand on the touch screen. In another example, touch screen technology may be used for security functions such as surveillance, intrusion detection, and authentication, and used for control of usage environments such as lighting control and appliance control. Also good. In another example, touch screen technology may be used for health care applications (eg, remote sensing environment, prognosis, and diagnosis).

いくつかの種類のタッチスクリーン技術が、異なる設計、解像度、サイズなどで現在利用可能である。比較的低い解像度のタッチスクリーン技術の例は、音響波照合(APR: acoustic pulse recognition)、分散信号技術(DST: dispersive signal technology)、表面弾性波(SAW)、通常の赤外線(IR/NIR)、導波路赤外線(waveguide infrared)、光、および力感知を含む。典型的なモバイルデバイスは、より高い解像度および薄いサイズのスクリーンを可能にする静電容量式タッチスクリーン(たとえば、相互投影静電容量タッチスクリーン(mutual projective-capacitance touch screen))を含む。さらに、静電容量式タッチスクリーンは、高い正確性、良好な直線性(linearity)、および良好な応答時間、ならびに検出漏れおよび誤検出の比較的低い確率をもたらす。したがって、静電容量式タッチスクリーンは、モバイル電話およびタブレットなどのモバイルデバイスで広く使用されている。モバイルデバイスで使用される静電容量式タッチスクリーンの例は、下で検討されるインセル型タッチスクリーンおよびオンセル型タッチスクリーンを含む。   Several types of touch screen technologies are currently available with different designs, resolutions, sizes, etc. Examples of relatively low resolution touch screen technologies include acoustic pulse recognition (APR), dispersive signal technology (DST), surface acoustic wave (SAW), normal infrared (IR / NIR), Includes waveguide infrared, light, and force sensing. A typical mobile device includes a capacitive touch screen (eg, a mutual projective-capacitance touch screen) that allows for higher resolution and thinner size screens. Furthermore, capacitive touch screens provide high accuracy, good linearity, and good response time, and a relatively low probability of missed detection and false detection. Accordingly, capacitive touch screens are widely used in mobile devices such as mobile phones and tablets. Examples of capacitive touch screens used in mobile devices include in-cell and on-cell touch screens discussed below.

静電容量式タッチパネルを含むポータブルデバイス
図1は、1つまたは複数の実施形態を組み込み得るポータブルデバイス100の簡略化されたブロック図を示す。ポータブルデバイス100は、プロセッサ110、ディスプレイ130、入力デバイス140、スピーカ150、メモリ160、静電容量式タッチパネル170、デジタルタッチインターフェース180、およびコンピュータ可読媒体190を含む。
Portable Device Including Capacitive Touch Panel FIG. 1 shows a simplified block diagram of a portable device 100 that may incorporate one or more embodiments. The portable device 100 includes a processor 110, a display 130, an input device 140, a speaker 150, a memory 160, a capacitive touch panel 170, a digital touch interface 180, and a computer readable medium 190.

プロセッサ110は、ポータブルデバイス100で命令を実行するように動作可能な任意の汎用プロセッサであってよい。プロセッサ110は、ディスプレイ130、入力デバイス140、スピーカ150、静電容量式タッチパネル170、デジタルタッチインターフェース180、およびコンピュータ可読媒体190を含むポータブルデバイス100のその他のユニットに結合される。   The processor 110 may be any general purpose processor operable to execute instructions on the portable device 100. The processor 110 is coupled to other units of the portable device 100 including a display 130, an input device 140, a speaker 150, a capacitive touch panel 170, a digital touch interface 180, and a computer readable medium 190.

ディスプレイ130は、ユーザに対して情報を表示する任意のデバイスであってよい。例は、LCDスクリーン、CRTモニタ、または7セグメントディスプレイを含み得る。   Display 130 may be any device that displays information to the user. Examples may include an LCD screen, a CRT monitor, or a 7 segment display.

入力デバイス140は、ユーザからの入力を受け付ける任意のデバイスであってよい。例は、キーボード、キーパッド、マウス、またはタッチ入力を含み得る。   The input device 140 may be any device that accepts input from the user. Examples may include a keyboard, keypad, mouse, or touch input.

スピーカ150は、ユーザに対して音を出力する任意のデバイスであってよい。例は、電気的な音声信号に応答して音を生成する組み込みスピーカまたは任意のその他のデバイスを含み得る。   The speaker 150 may be any device that outputs sound to the user. Examples may include a built-in speaker or any other device that generates sound in response to an electrical audio signal.

メモリ160は、任意の磁気式、電子式、または光学式メモリであってよい。メモリ160は、2つのメモリモジュール、モジュール1 162およびモジュール2 164を含む。メモリ160は任意の数のメモリモジュールを含み得ることを理解されたい。メモリ160の例は、ダイナミックランダムアクセスメモリ(DRAM)である可能性がある。   The memory 160 may be any magnetic, electronic, or optical memory. Memory 160 includes two memory modules, module 1 162 and module 2 164. It should be understood that the memory 160 may include any number of memory modules. An example of the memory 160 may be dynamic random access memory (DRAM).

静電容量式タッチパネル170およびディスプレイ130は、概して、同じ空間に広がり、デバイス100のためのユーザインターフェースを形成し得る。ユーザは、ポータブルデバイス100の動作を制御するために静電容量式タッチパネル170にタッチし得る。一部の実施形態において、タッチは、ユーザの1本の指または複数の指によって行われる可能性がある。その他の実施形態において、タッチは、ユーザの手のその他の部分またはその他の体の部分によって行われる可能性がある。さらにその他の実施形態において、タッチは、ユーザによって握られるか、またはそれ以外の方法で静電容量式タッチパネル170に接触させられるスタイラスを使用することによって行われる可能性がある。タッチは、ユーザの一部で意図的になされるかまたは意図せずになされる可能性がある。その他の応用では、静電容量式タッチパネル170は、ポータブルデバイス100のタッチパッドとして具現化される可能性がある。そのような応用では、ディスプレイ130は、静電容量式タッチパネル170と同じ空間に広がらない可能性があり、コンピューティングデバイスを制御するために静電容量式タッチパネル170にタッチするユーザが見るために近くに置かれる可能性がある。   Capacitive touch panel 170 and display 130 may generally extend in the same space and form a user interface for device 100. A user may touch the capacitive touch panel 170 to control the operation of the portable device 100. In some embodiments, the touch may be performed with the user's finger or fingers. In other embodiments, the touch may be performed by other parts of the user's hand or other body parts. In yet other embodiments, the touch may be made by using a stylus that is gripped by the user or otherwise brought into contact with the capacitive touch panel 170. The touch may be made intentionally or unintentionally on a part of the user. In other applications, the capacitive touch panel 170 may be embodied as a touch pad of the portable device 100. In such applications, the display 130 may not spread in the same space as the capacitive touch panel 170 and is close to the user touching the capacitive touch panel 170 to control the computing device. Could be placed on.

デジタルタッチインターフェース180は、タッチフロントエンド(TFE: touch front end)および/またはタッチバックエンド(TBE: touch back end)を含み得る。この区画は、決められても固定されてもおらず、各ブロックが実行し、フロントエンドもしくはバックエンドの機能を割り当てられるか、またはフロントエンドもしくはバックエンドの機能と考えられる(1つまたは複数の)高レベルの機能に応じて様々であってよい。TFEは、静電容量式タッチパネル170を含む静電容量センサの静電容量を検出し、高い信号対雑音比(SNR)の静電容量画像(capacitive image)(またはヒートマップ)をTBEに届けるように動作する。TBEは、TFEからこの静電容量ヒートマップを取得し、静電容量式タッチパネル170にタッチする(1つまたは複数の)物体を区別し、分類し、位置特定し、追跡し、この情報をプロセッサ110に返報することができる。TFEおよびTBEは、たとえば、任意の特定の設計の要件に応じて望む通りにハードウェアおよびソフトウェアまたはファームウェア構成要素に区分されてもよい。一実施形態において、TFEは、大部分がハードウェア構成要素で実装される可能性があり、TBEの機能の一部またはすべては、プロセッサ110で実施される可能性がある。   The digital touch interface 180 may include a touch front end (TFE) and / or a touch back end (TBE). This partition is not fixed or fixed, and each block executes and is assigned a front-end or back-end function or considered a front-end or back-end function (one or more) ) May vary depending on high level function. TFE detects the capacitance of capacitive sensors, including capacitive touch panel 170, and delivers a high signal-to-noise ratio (SNR) capacitive image (or heat map) to TBE To work. TBE obtains this capacitive heat map from TFE, distinguishes, classifies, locates and tracks the object (s) that touch capacitive touch panel 170 and processes this information 110 can be returned. TFE and TBE may be partitioned into hardware and software or firmware components as desired, for example, depending on the requirements of any particular design. In one embodiment, the TFE can be implemented largely with hardware components, and some or all of the functionality of the TBE can be implemented with the processor 110.

コンピュータ可読媒体190は、任意の磁気式、電子式、光学式、またはその他のコンピュータ可読記憶媒体であってよい。コンピュータ可読媒体190は、プロセッサ110によって実行可能な1つまたは複数のソフトウェアモジュールを含み得る。   The computer readable medium 190 may be any magnetic, electronic, optical, or other computer readable storage medium. The computer readable medium 190 may include one or more software modules that are executable by the processor 110.

タッチジェスチャおよびタッチプリミティブ
図2Aは、様々な片手のタッチジェスチャおよび対応するタッチプリミティブを示す。様々なタッチジェスチャが、タッチインターフェースを有するデバイスのタッチパネル上でユーザによって実行され得る。たとえば、様々なタッチジェスチャが、静電容量式タッチパネル170(図1)上でユーザによって実行され得る。様々な片手のタッチジェスチャは、指202または手204全体を使用して行われるジェスチャを含み得る。一部のジェスチャは、単純に指202または手204を静電容量式タッチパネル170(図1)にタッチさせることによって行われ得る。その他のジェスチャは、静電容量式タッチパネル170(図1)上で指202または手204により「スワイプ」動作を行うことによって行われ得る。
Touch Gestures and Touch Primitives FIG. 2A shows various one-handed touch gestures and corresponding touch primitives. Various touch gestures can be performed by the user on the touch panel of a device having a touch interface. For example, various touch gestures can be performed by the user on the capacitive touch panel 170 (FIG. 1). Various one hand touch gestures may include gestures made using the finger 202 or the entire hand 204. Some gestures can be made by simply touching the capacitive touch panel 170 (FIG. 1) with a finger 202 or hand 204. Other gestures may be performed by performing a “swipe” operation with the finger 202 or the hand 204 on the capacitive touch panel 170 (FIG. 1).

指202または手204が静電容量式タッチパネル170(図1)と接触するとき、静電容量式タッチパネル170(図1)は、タッチの結果として生じるタッチプリミティブまたはタッチ「ブロッブ」を検出し得る。タッチプリミティブまたは「ブロッブ」は、タッチパネル170(図1)上のタッチの印影と考えられ得る。言い換えれば、タッチプリミティブまたは「ブロッブ」は、静電容量式タッチパネル170(図1)の感知されたタッチ領域を表す1組の信号である可能性がある。タッチの結果として生じるタッチプリミティブは、タッチの種類およびタッチのサイズに応じて異なる可能性がある。たとえば、静電容量式タッチパネル170(図1)への指202のタッチが、第1のタッチプリミティブ206を生じる可能性がある。静電容量式タッチパネル170(図1)への手204のタッチが、第2のタッチプリミティブ208を生じる可能性がある。一部の実施形態において、第1のタッチプリミティブ206は、指202の結果として生じるタッチが手204の結果として生じるタッチよりも小さいので第2のタッチプリミティブ208よりも小さい可能性がある。   When the finger 202 or hand 204 contacts the capacitive touch panel 170 (FIG. 1), the capacitive touch panel 170 (FIG. 1) may detect touch primitives or touch “blobs” that result from the touch. A touch primitive or “blob” can be thought of as an imprint of a touch on touch panel 170 (FIG. 1). In other words, a touch primitive or “blob” may be a set of signals that represent a sensed touch area of capacitive touch panel 170 (FIG. 1). Touch primitives resulting from a touch can vary depending on the type of touch and the size of the touch. For example, the touch of the finger 202 on the capacitive touch panel 170 (FIG. 1) can result in the first touch primitive 206. Touching the capacitive touch panel 170 (FIG. 1) with the hand 204 can result in a second touch primitive 208. In some embodiments, the first touch primitive 206 may be smaller than the second touch primitive 208 because the touch that results from the finger 202 is smaller than the touch that results from the hand 204.

指202の結果として生じるタッチのサイズが変わり得ることを理解されたい。たとえば、指202のタッチの結果として生じる典型的なタッチは、指202の外形に応じて7ミリメートル(mm)と14mmとの間で変わり得る。ときには、指は、静電容量式タッチパネル170(図1)上にぺったりと置かれる可能性があり、その他のときには、指202は、中程度の圧力で静電容量式タッチパネル170(図1)に押し付けられる可能性があり、または指202は、弱い圧力で静電容量式タッチパネル170(図1)に押し付けられることもあり得る。それぞれの場合でタッチプリミティブのサイズは変わり得ることを理解されたい。これらは指202によって行われ得るタッチの種類のいくつかの例に過ぎず、様々なその他のサイズのタッチプリミティブの結果として生じる様々なその他の種類のタッチがあり得る可能性があることも、理解され得る。たとえば、第1のタッチプリミティブ206のサイズは、指202のサイズおよび指202がタッチジェスチャを行った方法に応じて変わり得る。   It should be understood that the size of the resulting touch of the finger 202 can vary. For example, a typical touch resulting from a finger 202 touch may vary between 7 millimeters (mm) and 14 mm depending on the finger 202 profile. Sometimes, a finger can rest on the capacitive touch panel 170 (FIG. 1), and at other times, the finger 202 can be placed on the capacitive touch panel 170 (FIG. 1) with moderate pressure. The finger 202 may be pressed or the finger 202 may be pressed against the capacitive touch panel 170 (FIG. 1) with low pressure. It should be understood that the size of the touch primitive can vary in each case. It is also understood that these are just a few examples of the types of touches that can be made by the finger 202 and that there can be various other types of touches that result from various other sized touch primitives. Can be done. For example, the size of the first touch primitive 206 may vary depending on the size of the finger 202 and how the finger 202 has made a touch gesture.

これらの概念は、手204によるタッチにも拡張される。つまり、静電容量式タッチパネル170(図1)への手204によるタッチは、手204のサイズおよび手204がタッチジェスチャを行った方法に応じて様々な異なるサイズのタッチプリミティブを生じる可能性がある。たとえば、第2のタッチプリミティブ208のサイズは、手204のサイズおよび手204がタッチジェスチャを行った方法に応じて変わり得る。   These concepts extend to touch with the hand 204. That is, touching the capacitive touch panel 170 (FIG. 1) with the hand 204 can result in touch primitives of various different sizes depending on the size of the hand 204 and how the hand 204 made the touch gesture. . For example, the size of the second touch primitive 208 can vary depending on the size of the hand 204 and how the hand 204 has made a touch gesture.

上述のポータブルデバイスのタッチインターフェース(静電容量式タッチパネル)は、予め構成されたサイズの間のタッチプリミティブのサイズに基づいて有効なタッチを検出するように調整または構成されることが多い。たとえば、ポータブルデバイスは、ユーザの指202によるタッチ入力を受け取ると予測される場合、7mmと14mmとの間のサイズのタッチプリミティブを有する場合にタッチを有効であると判定するように調整または構成される可能性がある。タッチインターフェースは、この範囲の外の(静電容量式タッチパネル170(図1)上のタッチの結果である)すべてのタッチプリミティブを雑音と見なす可能性があり、それらを無効なタッチまたは意図しないタッチとして拒絶する可能性がある。同様に、ポータブルデバイスは、ユーザの手204によるタッチ入力を受け取ると予測される場合、19mmを超えるタッチプリミティブを有する場合にタッチを有効であると判定するように調整または構成される可能性がある。タッチインターフェースは、この値未満の(静電容量式タッチパネル170(図1)上のタッチの結果である)すべてのタッチプリミティブを雑音と見なし、それらを無効なタッチまたは意図しないタッチとして拒絶する可能性がある。結果として、タッチインターフェースが指202のタッチを有効なタッチとして検出するようにのみ調整または構成されるので、ポータブルデバイスが、ユーザによる手204のタッチを誤って拒絶することが多い可能性があり、またはその逆である可能性がある。   The portable device touch interface (capacitive touch panel) described above is often adjusted or configured to detect a valid touch based on the size of touch primitives between pre-configured sizes. For example, if a portable device is expected to receive touch input by a user's finger 202, it is adjusted or configured to determine that the touch is valid if it has a touch primitive with a size between 7mm and 14mm. There is a possibility. The touch interface may consider all touch primitives outside this range (which are the result of a touch on capacitive touch panel 170 (Figure 1)) as noise and make them invalid or unintended touches There is a possibility to refuse as. Similarly, if a portable device is expected to receive touch input by the user's hand 204, it may be adjusted or configured to determine that the touch is valid when it has a touch primitive greater than 19 mm. . The touch interface considers all touch primitives (which are the result of a touch on capacitive touch panel 170 (Figure 1)) below this value as noise and may reject them as invalid or unintentional touches There is. As a result, portable devices can often mistakenly reject a user's touch of hand 204 because the touch interface is only adjusted or configured to detect a finger 202 touch as a valid touch, Or vice versa.

様々なタッチの感知および検出を時間多重化することによって異なるタッチプリミティブのサイズを有する様々なタッチの感知を動的に調整または構成することができるタッチインターフェースが、下でさらに詳細に説明される。   Touch interfaces that can dynamically adjust or configure the sensing of various touches with different touch primitive sizes by time multiplexing the sensing and detection of the various touches are described in further detail below.

図2Bは、ペンタッチを含む様々なジェスチャおよび対応するタッチプリミティブを示す。様々なタッチジェスチャが、タッチインターフェースを有するデバイスのタッチパネル上でユーザによって実行され得る。たとえば、様々なタッチジェスチャが、静電容量式タッチパネル170(図1)上でユーザによって実行され得る。様々なタッチジェスチャは、ペン入力ツール(たとえば、スタイラス210)を用いて行われるジェスチャを含み得る。一部のジェスチャは、単純にスタイラス210を静電容量式タッチパネル170(図1)にタッチさせることによって行われ得る。その他のジェスチャは、静電容量式タッチパネル170(図1)上でスタイラス210によるドラッグ動作を行うことによって行われ得る。   FIG. 2B shows various gestures including pen touch and corresponding touch primitives. Various touch gestures can be performed by the user on the touch panel of a device having a touch interface. For example, various touch gestures can be performed by the user on the capacitive touch panel 170 (FIG. 1). Various touch gestures may include gestures made using a pen input tool (eg, stylus 210). Some gestures can be made by simply touching the capacitive touch panel 170 (FIG. 1) with the stylus 210. Other gestures can be performed by performing a drag operation with the stylus 210 on the capacitive touch panel 170 (FIG. 1).

スタイラス210が静電容量式タッチパネル170(図1)と接触するとき、静電容量式タッチパネル170(図1)は、上述のように、タッチの結果として生じるタッチプリミティブまたは「ブロッブ」を検出し得る。タッチの結果として生じるタッチプリミティブは、タッチの種類およびタッチのサイズに応じて異なる可能性がある。たとえば、静電容量式タッチパネル170(図1)へのスタイラス210のタッチが、スタイラスタッチプリミティブ216を生じる可能性がある。スタイラス210の使用中、ユーザは、スタイラス210を用いて自然な方法で書きまたは描くときなどに、ユーザの手の一部をタッチパネルに接触させる可能性もある。たとえば、ユーザの手のひら212または指214は、ユーザがスタイラス210を操作している間、タッチパネルと接触している(タッチしている)可能性がある。静電容量式タッチパネル170(図1)へのユーザの手のひら212または指214によるタッチは、それぞれ、手のひらタッチプリミティブ218および/または指タッチプリミティブ220を生じる可能性がある。上述のように、タッチプリミティブのそれぞれは、様々な要因に基づいて異なるサイズである可能性がある。   When the stylus 210 contacts the capacitive touch panel 170 (FIG. 1), the capacitive touch panel 170 (FIG. 1) may detect touch primitives or “blobs” resulting from the touch, as described above. . Touch primitives resulting from a touch can vary depending on the type of touch and the size of the touch. For example, the touch of the stylus 210 on the capacitive touch panel 170 (FIG. 1) may result in the stylus touch primitive 216. During use of the stylus 210, the user may touch a portion of the user's hand to the touch panel, such as when writing or drawing in a natural manner using the stylus 210. For example, the user's palm 212 or finger 214 may be in contact with (touching) the touch panel while the user operates the stylus 210. Touching the capacitive touch panel 170 (FIG. 1) with the user's palm 212 or finger 214 may result in a palm touch primitive 218 and / or finger touch primitive 220, respectively. As mentioned above, each of the touch primitives can be a different size based on various factors.

スタイラス210の結果として生じるタッチのサイズが変わり得ることを理解されたい。たとえば、スタイラス210の結果として生じる典型的なタッチプリミティブは、2mm以下である可能性がある。スタイラス210のタッチの結果として生じるスタイラスタッチプリミティブ216のサイズは、スタイラスを用いてタッチパネルとインタラクションするときにユーザがスタイラスを保持する角度に応じて変わる可能性もある。手のひらタッチプリミティブ218および指タッチプリミティブ220のサイズは、ユーザがユーザの手のひら212または指214をタッチスクリーンデバイスの上に置く方法に応じて変わる可能性もある。   It should be understood that the size of the touch that results from the stylus 210 can vary. For example, a typical touch primitive resulting from stylus 210 may be 2 mm or less. The size of the stylus touch primitive 216 that results from the touch of the stylus 210 may vary depending on the angle at which the user holds the stylus when interacting with the touch panel using the stylus. The size of the palm touch primitive 218 and the finger touch primitive 220 may vary depending on how the user places the user's palm 212 or finger 214 on the touch screen device.

図1に関連して上で説明されたデバイスのタッチインターフェースは、指214に典型的なタッチプリミティブのサイズに基づいて有効なタッチを検出するように調整または構成されることが多い。たとえば、タッチインターフェースは、7mmと14mmとの間のタッチプリミティブを有効なタッチと見なすように調整または構成される可能性がある。タッチインターフェースは、この範囲の外の(静電容量式タッチパネル170(図1)上のタッチの結果である)すべてのタッチプリミティブを雑音と見なす可能性があり、それらを無効なタッチまたは意図しないタッチとして拒絶する可能性がある。結果として、タッチインターフェースが指202のタッチを有効なタッチとして検出するようにのみ調整または構成されるので、ポータブルデバイスが、ユーザによるスタイラス210のタッチを誤って拒絶することが多い可能性がある。つまり、タッチインターフェースが指202のタッチに関するタッチプリミティブを感知し、検出するようにのみ調整されるので、ユーザは、スタイラス210を用いてタッチインターフェースとインタラクションすることができない可能性がある。タッチプリミティブのサイズが予測される指タッチプリミティブ220の範囲外である可能性があるので、スタイラス210のタッチの結果として生じるタッチプリミティブは、タッチインターフェースによって雑音として無視される可能性がある。   The touch interface of the device described above in connection with FIG. 1 is often adjusted or configured to detect a valid touch based on the size of the touch primitive typical for finger 214. For example, the touch interface may be adjusted or configured to consider touch primitives between 7 mm and 14 mm as valid touches. The touch interface may consider all touch primitives outside this range (which are the result of a touch on capacitive touch panel 170 (Figure 1)) as noise and make them invalid or unintended touches There is a possibility to refuse as. As a result, portable devices can often mistakenly reject a user's touch of stylus 210 because the touch interface is only adjusted or configured to detect a finger 202 touch as a valid touch. That is, since the touch interface is only adjusted to sense and detect touch primitives related to the finger 202 touch, the user may not be able to interact with the touch interface using the stylus 210. Touch primitives resulting from touch of the stylus 210 may be ignored as noise by the touch interface because the size of the touch primitives may be outside the range of the predicted finger touch primitives 220.

様々なタッチの感知および検出を時間多重化することによって異なるタッチプリミティブのサイズを有する様々なタッチの感知を動的に調整または構成することができるタッチインターフェースが、下でさらに詳細に説明される。   Touch interfaces that can dynamically adjust or configure the sensing of various touches with different touch primitive sizes by time multiplexing the sensing and detection of the various touches are described in further detail below.

図3は、タッチパネルへのペンタッチを含むジェスチャおよび対応するタッチプリミティブを示す。図3の図は、ユーザの手がスタイラス210デバイスを扱って静電容量式タッチパネル170(図1)とインタラクションするところを示す。図は、図2Bに関連して説明されたタッチプリミティブも示す。ユーザが自然な記述の位置にスタイラス210を保有するプロセスにおいて、ユーザ指214、手のひら212、およびスタイラス210は、静電容量式タッチパネル170にタッチする可能性がある。上述のように、静電容量式タッチパネル170にタッチした結果として、1つまたは複数のタッチプリミティブが、タッチインターフェースによって検出される可能性がある。タッチプリミティブは、スタイラスタッチプリミティブ216、手のひらタッチプリミティブ218、および指タッチプリミティブ220を含む可能性がある。   FIG. 3 shows a gesture that includes a pen touch to the touch panel and the corresponding touch primitive. The diagram of FIG. 3 shows the user's hand handling the stylus 210 device and interacting with the capacitive touch panel 170 (FIG. 1). The figure also shows the touch primitive described in connection with FIG. 2B. In the process where the user holds the stylus 210 in the natural description position, the user finger 214, the palm 212, and the stylus 210 may touch the capacitive touch panel 170. As described above, as a result of touching the capacitive touch panel 170, one or more touch primitives may be detected by the touch interface. Touch primitives may include stylus touch primitives 216, palm touch primitives 218, and finger touch primitives 220.

上述のように、タッチインターフェースは、特定のタッチプリミティブのサイズを有効なタッチとして検出し、その他のタッチプリミティブのサイズを雑音として拒絶するように調整または構成され得る。たとえば、図3において、タッチインターフェースは、指214からのタッチ入力を検出するように調整または構成される場合、7mmと14mmとの間の静電容量式タッチパネル170上のタッチの結果として生じるタッチプリミティブを有効なタッチと見なす可能性がある。この範囲の外のすべてのタッチプリミティブは、雑音と見なされ、無効なタッチとして拒絶される可能性がある。結果として、スタイラス210のタッチは、典型的に、2mm以下のサイズを有するタッチプリミティブを生じるので、スタイラス210のタッチの結果として生じるスタイラスタッチプリミティブ216は、タッチインターフェースによって雑音として拒絶される可能性がある。つまり、指214のタッチに合わせて調整または構成されたタッチインターフェースは、スタイラス210によるタッチを正確に検出することができない可能性がある。   As described above, the touch interface may be adjusted or configured to detect the size of a particular touch primitive as a valid touch and reject the size of other touch primitives as noise. For example, in FIG. 3, when the touch interface is adjusted or configured to detect touch input from finger 214, touch primitives that result from a touch on capacitive touch panel 170 between 7 mm and 14 mm May be considered a valid touch. All touch primitives outside this range are considered noise and may be rejected as invalid touches. As a result, stylus 210 touches typically result in touch primitives having a size of 2 mm or less, so stylus touch primitives 216 resulting from stylus 210 touches may be rejected as noise by the touch interface. is there. That is, the touch interface adjusted or configured in accordance with the touch of the finger 214 may not be able to accurately detect the touch by the stylus 210.

別の例において、ユーザは、もはやスタイラス210を用いてタッチインターフェースとインタラクションしないと決断する可能性があり、そのかわりに、ユーザの指214を用いてタッチインターフェースとインタラクションすることを望む。しかし、タッチインターフェースは、スタイラス210からのタッチ入力を検出するように調整または構成される場合、2mm以下の静電容量式タッチパネル170上のタッチの結果として生じるタッチプリミティブのみを有効なタッチと見なす可能性がある。この範囲を超えるすべてのタッチプリミティブは、雑音と見なされ、無効なタッチとして拒絶される可能性がある。結果として、指タッチプリミティブ220または手のひらタッチプリミティブ218は、これらのタッチプリミティブの両方が2mmのサイズを超えるので、タッチインターフェースによって雑音として拒絶される可能性がある。言い換えれば、スタイラス210からのタッチ入力を検出するように構成されたタッチインターフェースは、指214または手のひら212によるタッチを正確に検出することができない可能性がある。   In another example, the user may decide to no longer interact with the touch interface using the stylus 210, and instead desires to interact with the touch interface using the user's finger 214. However, when the touch interface is tuned or configured to detect touch input from the stylus 210, only touch primitives resulting from touches on the capacitive touch panel 170 below 2mm can be considered valid touches. There is sex. All touch primitives beyond this range are considered noise and may be rejected as invalid touches. As a result, the finger touch primitive 220 or the palm touch primitive 218 may be rejected as noise by the touch interface because both of these touch primitives exceed 2 mm in size. In other words, a touch interface configured to detect touch input from stylus 210 may not be able to accurately detect a touch with finger 214 or palm 212.

様々なタッチの感知および検出を時間多重化することによって異なるタッチプリミティブのサイズを有する様々なタッチの感知を動的に調整または構成することができるタッチインターフェースが、下でさらに詳細に説明される。   Touch interfaces that can dynamically adjust or configure the sensing of various touches with different touch primitive sizes by time multiplexing the sensing and detection of the various touches are described in further detail below.

適応的なタッチインターフェース
図4は、一部の実施形態による適応的なタッチ信号処理アーキテクチャ400のブロック図である。タッチ信号処理アーキテクチャ400は、様々なタッチプリミティブのサイズの感知および検出を時間多重化することによって様々なタッチプリミティブのサイズを有するタッチの感知を動的に調整または構成し得る。
Adaptive Touch Interface FIG. 4 is a block diagram of an adaptive touch signal processing architecture 400 according to some embodiments. Touch signal processing architecture 400 may dynamically adjust or configure the sensing of touches with different touch primitive sizes by time multiplexing the sensing and detection of different touch primitive sizes.

タッチ信号処理アーキテクチャ400は、カーネル410、タッチライブラリ430、プラットフォームタッチスクリーンサブシステム440、およびスタイラスシグナリングプロセッサ460を含む。   Touch signal processing architecture 400 includes a kernel 410, a touch library 430, a platform touch screen subsystem 440, and a stylus signaling processor 460.

プラットフォームタッチスクリーンサブシステム440は、タッチサブシステム制御453およびプロトコル処理ユニット442に結合されたリアルタイム生タッチ信号インターフェースを含む。タッチサブシステム制御453は、タッチ活動&ステータス検出ユニット443、能動的雑音拒絶ユニット444、タッチ参照推定および基準決定&適合ユニット(touch reference estimation, and a baselining & adaptation unit)445に結合される。また、プロトコル処理ユニット442、タッチ活動&ステータス検出ユニット443、および能動的雑音拒絶ユニット444は、相関サンプリングユニット(correlated sampling unit)446に結合される。相関サンプリングユニット446は、タッチ参照推定、基準決定、および適合ユニット445に結合される。タッチ参照推定、基準決定、および適合ユニット445は、アナログフロントエンドユニット447に結合される。アナログフロントエンドユニット447は、タッチスクリーンパネルおよびインターフェース454と通信してタッチスクリーンへのユーザのタッチに基づくアナログタッチ信号を受け取る可能性があり、アナログタッチ信号をデジタルタッチ信号に変換してタッチ信号生データを生成する可能性がある。アナログフロントエンドユニット447は、行/列ドライバおよびアナログデジタルコンバータ(ADC)を含み得る。   Platform touchscreen subsystem 440 includes a real-time raw touch signal interface coupled to touch subsystem control 453 and protocol processing unit 442. Touch subsystem control 453 is coupled to touch activity & status detection unit 443, active noise rejection unit 444, touch reference estimation, and a baselining & adaptation unit 445. Protocol processing unit 442, touch activity & status detection unit 443, and active noise rejection unit 444 are also coupled to a correlated sampling unit 446. Correlation sampling unit 446 is coupled to touch reference estimation, criteria determination and adaptation unit 445. Touch reference estimation, criteria determination and adaptation unit 445 is coupled to analog front end unit 447. The analog front end unit 447 may communicate with the touch screen panel and interface 454 to receive an analog touch signal based on the user's touch on the touch screen and convert the analog touch signal to a digital touch signal to generate the touch signal. May generate data. The analog front end unit 447 may include a row / column driver and an analog to digital converter (ADC).

また、プラットフォームタッチスクリーンサブシステム440は、バッテリ、充電回路、および電力マネージャユニット450を含む。バッテリ、充電回路、および電力マネージャユニット450は、タッチ信号処理アーキテクチャ400の外にあるポータブルデバイスの別の電力サブシステムとインターフェースを取り得る。一部の実施形態においては、電力マネージャユニット449が、バッテリ、充電回路、および電力マネージャユニット450とは別に存在する可能性がある。電力マネージャユニット449は、スキャンエンジン448に結合される可能性がある。また、スキャンエンジン448は、タッチサブシステム制御453に結合される。また、プラットフォームタッチスクリーンサブシステム440は、温度補償型水晶発振器(TCXO)、位相同期ループ(PLL)、およびクロックジェネレータ構成要素451を含む。TXCO、PLL、およびクロックジェネレータ構成要素451は、クロックおよびタイミング回路452に結合される。TXCO、PLL、およびクロックジェネレータ構成要素451は、タッチ信号アーキテクチャ400の外にあるポータブルデバイスのその他のタイミング構成要素と通信する可能性がある。   The platform touch screen subsystem 440 also includes a battery, a charging circuit, and a power manager unit 450. The battery, charging circuit, and power manager unit 450 may interface with another power subsystem of the portable device that is outside the touch signal processing architecture 400. In some embodiments, the power manager unit 449 may be separate from the battery, charging circuit, and power manager unit 450. The power manager unit 449 may be coupled to the scan engine 448. Scan engine 448 is also coupled to touch subsystem control 453. The platform touch screen subsystem 440 also includes a temperature compensated crystal oscillator (TCXO), a phase locked loop (PLL), and a clock generator component 451. TXCO, PLL, and clock generator component 451 are coupled to clock and timing circuit 452. TXCO, PLL, and clock generator component 451 may communicate with other timing components of the portable device that are outside of touch signal architecture 400.

カーネル410は、外部スタイラスシグナリングプロセッサ460に結合されるスタイラスドライバ422を含む。スタイラスシグナリングプロセッサ460は、スタイラスドライバ422にポータブルデバイスの近傍のスタイラスの検出を知らせ得る。スタイラスドライバ422は、タッチインターフェースドライバ423に結合される。また、タッチインターフェースドライバ423は、リアルタイム生タッチ信号プロトコル処理ユニット413に結合される。リアルタイム生タッチ信号プロトコル処理ユニット413は、プラットフォームタッチスクリーンサブシステム440内のリアルタイム生タッチ信号インターフェース441に結合される。タッチインターフェースドライバ423は、タッチドライバIRQハンドラ411およびカーネルIRQハンドラ412から割り込み要求を受信する。リアルタイム生タッチ信号プロトコル処理ユニット413は、カーネルIRQハンドラ412にユーザのタッチの存在を伝達し得る。カーネルIRQハンドラ412は、トリガ信号をタッチドライバIRQハンドラ411に伝達する可能性があり、そして今度は、タッチドライバIRQハンドラ411が、トリガ信号をタッチインターフェースドライバ423に伝達する可能性がある。   The kernel 410 includes a stylus driver 422 that is coupled to an external stylus signaling processor 460. The stylus signaling processor 460 may inform the stylus driver 422 of stylus detection in the vicinity of the portable device. The stylus driver 422 is coupled to the touch interface driver 423. The touch interface driver 423 is also coupled to the real-time raw touch signal protocol processing unit 413. The real-time raw touch signal protocol processing unit 413 is coupled to the real-time raw touch signal interface 441 in the platform touch screen subsystem 440. The touch interface driver 423 receives interrupt requests from the touch driver IRQ handler 411 and the kernel IRQ handler 412. The real-time raw touch signal protocol processing unit 413 may communicate the presence of the user's touch to the kernel IRQ handler 412. The kernel IRQ handler 412 may communicate a trigger signal to the touch driver IRQ handler 411, and in turn, the touch driver IRQ handler 411 may communicate the trigger signal to the touch interface driver 423.

また、リアルタイム生タッチ信号プロトコル処理ユニット413は、デジタルフィルタリングユニット414に結合される。デジタルフィルタリングユニット414は、ガウスぼけ削減ユニット(Gaussian blur-subtraction unit)415に結合される。ガウスぼけ削減ユニット415は、ブロッブ分析ユニット416に結合される。ブロッブ分析ユニット416は、誤タッチ拒絶ユニット417に結合される。誤タッチ拒絶ユニット417は、最終タッチフィルタリングユニット418に結合される。最終タッチフィルタリングユニット418は、詳細タッチ補間ユニット419に結合される。詳細タッチ補間ユニット419は、タッチ座標&サイズ計算ユニット420に結合される。タッチ座標&サイズ計算ユニット420はOS入力レイヤ421に結合される。生タッチ信号プロトコル処理ユニット413、デジタルフィルタリングユニット414、ガウスぼけ削減ユニット415、ブロッブ分析ユニット416、誤タッチ拒絶ユニット417、最終タッチフィルタリングユニット418、詳細タッチ補間ユニット419、およびタッチ座標&サイズ計算ユニット420は、生タッチ信号プロセッサを構成する。   The real-time raw touch signal protocol processing unit 413 is also coupled to the digital filtering unit 414. Digital filtering unit 414 is coupled to a Gaussian blur-subtraction unit 415. Gaussian blur reduction unit 415 is coupled to blob analysis unit 416. The blob analysis unit 416 is coupled to the false touch rejection unit 417. The false touch rejection unit 417 is coupled to the final touch filtering unit 418. Final touch filtering unit 418 is coupled to detailed touch interpolation unit 419. The detailed touch interpolation unit 419 is coupled to the touch coordinate & size calculation unit 420. The touch coordinate & size calculation unit 420 is coupled to the OS input layer 421. Raw touch signal protocol processing unit 413, digital filtering unit 414, Gaussian blur reduction unit 415, blob analysis unit 416, false touch rejection unit 417, final touch filtering unit 418, detailed touch interpolation unit 419, and touch coordinate & size calculation unit 420 Constitutes a raw touch signal processor.

タッチライブラリ430は、タッチライブラリ&ハードウェア抽象化レイヤ431、タッチサービスライブラリ432、およびタッチマネージャライブラリ433を含む。タッチライブラリ&ハードウェア抽象化レイヤ431は、OS入力レイヤ421に通信可能なように結合される。   The touch library 430 includes a touch library & hardware abstraction layer 431, a touch service library 432, and a touch manager library 433. The touch library & hardware abstraction layer 431 is communicatively coupled to the OS input layer 421.

スキャンエンジン448、アナログフロントエンドユニット447、タッチ参照推定、基準決定&適合ユニット445、相関サンプリングユニット446、誤タッチ拒絶ユニット417、最終タッチフィルタリングユニット418、および詳細タッチ補間ユニット419はタッチ信号の適応的な処理のために最適化されることを理解されたい。つまり、タッチ信号処理アーキテクチャ400のこれらの構成要素は、1つまたは複数のフレームを時間多重化することによって様々な異なるタッチの種類(たとえば、スタイラス、指、手のひらなど)のタッチを検出するためにタッチ感度の動的な調整のために最適化される。タッチパネルのスキャンレートを高くすることによって、タッチ信号処理アーキテクチャ400は、第1のタッチプリミティブのサイズを生じるタッチを検出するために第1のフレームにおけるタッチ感度を調整し、第2のタッチプリミティブのサイズを生じるタッチを検出するために第2のフレームにおけるタッチ感度を調整する可能性がある。   Scan engine 448, analog front end unit 447, touch reference estimation, criteria determination & adaptation unit 445, correlation sampling unit 446, false touch rejection unit 417, final touch filtering unit 418, and advanced touch interpolation unit 419 are adaptive for touch signals It should be understood that it is optimized for the correct processing. That is, these components of touch signal processing architecture 400 are designed to detect touches of various different touch types (e.g., stylus, finger, palm, etc.) by time multiplexing one or more frames. Optimized for dynamic adjustment of touch sensitivity. By increasing the touch panel scan rate, the touch signal processing architecture 400 adjusts the touch sensitivity in the first frame to detect the touch that results in the size of the first touch primitive, and the size of the second touch primitive. There is a possibility to adjust the touch sensitivity in the second frame in order to detect the touch that causes the.

図5は、タッチインターフェースによって捕捉された複数のフレーム内のタッチプリミティブ(またはタッチブロッブ)を示す。特定の例は、2つのフレーム(フレームA510およびフレームB520)を示す。捕捉されたフレームは、タッチインターフェースの一部である静電容量式タッチパネル170(図1)の画像を表す可能性がある。タッチインターフェースは、たとえば、ポータブルデバイスの一部である可能性がある。フレームAとフレームBとの両方は、指タッチプリミティブ206およびスタイラスタッチプリミティブ208を示す。指タッチプリミティブ206は、ユーザがユーザの指をタッチパネルにタッチさせた結果である可能性がある。スタイラスタッチプリミティブ208は、ユーザがスタイラスをタッチパネルにタッチさせた結果である可能性がある。この文脈において、フレームはタッチパネルのグリッドのスキャンの全体を指す可能性があることを理解されたい。   FIG. 5 shows touch primitives (or touch blobs) in multiple frames captured by the touch interface. A specific example shows two frames (frame A510 and frame B520). The captured frame may represent an image of the capacitive touch panel 170 (FIG. 1) that is part of the touch interface. The touch interface can be part of a portable device, for example. Both frame A and frame B show a finger touch primitive 206 and a stylus touch primitive 208. The finger touch primitive 206 may be a result of the user touching the user's finger on the touch panel. The stylus touch primitive 208 may be the result of the user touching the stylus on the touch panel. It should be understood that in this context, a frame may refer to the entire touch panel grid scan.

図5に示されたフレームはスキャンエンジン448(図4)によって捕捉され得ることを理解されたい。上述のように、タッチ信号処理アーキテクチャ400(図4)は、第1のフレームが第1のサイズの範囲を有するタッチプリミティブの検出専用とすることができ、第2のフレームが第2のサイズの範囲を有するタッチプリミティブの検出専用とすることができるようにフレームの捕捉を時間多重化し得る。したがって、タッチ信号処理アーキテクチャ400(図4)は、タッチパネルでの様々な異なるタッチサイズの検出のためにそれ自体を動的に調整し得る。各フレームに関して、タッチ信号処理アーキテクチャ400(図4)は、タッチプリミティブ(またはタッチブロッブ)に関するタッチ報告感度を設定または調整し得る。たとえば、タッチ信号処理アーキテクチャ400(図4)は、フレームA510でのタッチプリミティブに関する第1のタッチ報告感度およびフレームB520でのタッチプリミティブに関する第2のタッチ報告感度を設定し得る。   It should be understood that the frame shown in FIG. 5 may be captured by scan engine 448 (FIG. 4). As described above, the touch signal processing architecture 400 (FIG. 4) can be dedicated to detecting touch primitives in which the first frame has a first size range and the second frame has a second size. Frame capture may be time multiplexed so that it can be dedicated to detecting touch primitives with ranges. Accordingly, the touch signal processing architecture 400 (FIG. 4) may dynamically adjust itself for the detection of a variety of different touch sizes on the touch panel. For each frame, touch signal processing architecture 400 (FIG. 4) may set or adjust touch reporting sensitivity for touch primitives (or touch blobs). For example, touch signal processing architecture 400 (FIG. 4) may set a first touch reporting sensitivity for touch primitives at frame A510 and a second touch reporting sensitivity for touch primitives at frame B520.

一例において、第1のタッチ報告感度は、スタイラスのタッチ、たとえば、直径2mm未満のタッチプリミティブを有するタッチを検出するために設定または調整され得る。一部の実施形態において、タッチ信号処理アーキテクチャ400(図4)は、タッチパネルの近くのアクティブスタイラスの存在を検出することができる可能性がある。たとえば、アクティブスタイラスは、タッチパネルへのアクティブスタイラスの近接を示すタッチ信号処理アーキテクチャ400(図4)によって検出可能な信号を発する可能性がある。そのような場合、1つまたは複数のフレームは、タッチパネルへのアクティブスタイラスの近接に基づいてスタイラスのタッチを検出すること専用とすることができる。別の例においては、第2のタッチ報告感度が、指のタッチ、たとえば、直径2mmを超え、直径19mm未満であるタッチプリミティブを検出するために設定または調整される可能性がある。スキャンエンジンによって捕捉された任意のフレームに関するタッチ報告感度が任意の種類のタッチのために設定または調整され得ること、ならびにスタイラスのタッチおよび指のタッチは単なる例に過ぎないことを理解されたい。   In one example, the first touch reporting sensitivity may be set or adjusted to detect a stylus touch, eg, a touch having a touch primitive less than 2 mm in diameter. In some embodiments, touch signal processing architecture 400 (FIG. 4) may be able to detect the presence of an active stylus near the touch panel. For example, the active stylus may emit a signal that can be detected by the touch signal processing architecture 400 (FIG. 4) indicating the proximity of the active stylus to the touch panel. In such a case, the one or more frames may be dedicated to detecting a stylus touch based on the proximity of the active stylus to the touch panel. In another example, the second touch reporting sensitivity may be set or adjusted to detect a finger touch, eg, a touch primitive that is greater than 2 mm in diameter and less than 19 mm in diameter. It should be understood that the touch reporting sensitivity for any frame captured by the scan engine can be set or adjusted for any type of touch, and stylus and finger touches are merely examples.

タッチインターフェースのその他のプロパティも、タッチ信号処理アーキテクチャ400によって、様々なタッチサイズを検出するようにそれ自体を動的に調整または適合しながら変更され得る。一部の実施形態においては、スキャンエンジンのスキャンレートが、現在の捕捉されたフレームがどの種類のタッチを検出するために予約されているかに基づいて変更され得る。たとえば、大きなタッチの検出は、低いスキャンレートを有する可能性があり、一方、スタイラスのタッチの検出は、高いスキャンレートを有する可能性がある。一部の実施形態においては、タッチプリミティブに関する誤タッチ拒絶の範囲が、現在の捕捉されたフレームがどの種類のタッチを検出するために予約されているかに基づいて変更され得る。たとえば、大きなタッチを検出するために予約されたフレームは、直径19mm未満の誤タッチ拒絶の範囲を有する可能性がある。つまり、直径19mm未満のフレームで捕捉されたすべてのタッチプリミティブが、雑音として拒絶される可能性がある。別の例において、スタイラスのタッチを検出するために予約されたフレームは、直径2mmを超える誤タッチ拒絶の範囲を有する可能性がある。つまり、直径2mmを超えるフレームで捕捉されたすべてのタッチプリミティブが、雑音として拒絶される可能性がある。さらに別の例において、指のタッチを検出するために予約されたフレームは、直径が2mmを超え、19mm未満である誤タッチ拒絶の範囲を有する可能性がある。一部の実施形態においては、最終フィルタリングの閾値が、現在の捕捉されたフレームがどの種類のタッチを検出するために予約されているかに基づいて変更され得る。たとえば、大きなタッチを検出するために予約されたフレームは、高い最終フィルタリングの閾値を有する可能性がある。別の例において、スタイラスのタッチを検出するために予約されたフレームは、低い最終フィルタリングの閾値を有する可能性がある。さらに別の例において、スタイラスのタッチを検出するために予約されたフレームは、適応的な最終フィルタリングの閾値を有する可能性がある。一部の実施形態においては、詳細補間の種類が、現在の捕捉されたフレームがどの種類のタッチを検出するために予約されているかに基づいて変更され得る。たとえば、高次のIIR補間が、大きなタッチを検出するために予約されたフレーム内のタッチプリミティブに対して実行される可能性がある。別の例においては、低次のIIR補間が、スタイラスのタッチを検出するために予約されたフレーム内のタッチプリミティブに対して実行される可能性がある。さらに別の例においては、動作に依存するIIR補間が、指のタッチを検出するために予約されたフレーム内のタッチプリミティブに対して実行される可能性がある。   Other properties of the touch interface may also be changed by the touch signal processing architecture 400 while dynamically adjusting or adapting itself to detect various touch sizes. In some embodiments, the scan rate of the scan engine may be changed based on what type of touch the current captured frame is reserved for detecting. For example, detection of large touches may have a low scan rate, while detection of stylus touches may have a high scan rate. In some embodiments, the range of false touch rejection for touch primitives can be changed based on what type of touch the current captured frame is reserved for detecting. For example, a frame reserved for detecting large touches may have a false touch rejection range of less than 19 mm in diameter. That is, all touch primitives captured in a frame less than 19 mm in diameter can be rejected as noise. In another example, a frame reserved for detecting a stylus touch may have a false touch rejection range of more than 2 mm in diameter. That is, all touch primitives captured in a frame exceeding 2 mm in diameter can be rejected as noise. In yet another example, a frame reserved for detecting finger touches may have a false touch rejection range that is greater than 2 mm in diameter and less than 19 mm. In some embodiments, the final filtering threshold may be changed based on what type of touch the current captured frame is reserved for detecting. For example, a frame reserved for detecting a large touch may have a high final filtering threshold. In another example, a frame reserved to detect a stylus touch may have a low final filtering threshold. In yet another example, a frame reserved for detecting a stylus touch may have an adaptive final filtering threshold. In some embodiments, the type of detail interpolation may be changed based on what type of touch the current captured frame is reserved for detecting. For example, higher order IIR interpolation may be performed on touch primitives in frames reserved to detect large touches. In another example, low order IIR interpolation may be performed on touch primitives in frames reserved to detect stylus touches. In yet another example, motion dependent IIR interpolation may be performed on touch primitives in a frame reserved for detecting finger touches.

図5に示された例示的なフレームにおいては、フレームA510が、スタイラスのタッチを検出するために予約され、フレームB520が、指のタッチを検出するために予約される。フレームA510には、指タッチプリミティブ206とスタイラスタッチプリミティブ208との両方が存在する。フレームA510は、上述のように、タッチ信号処理アーキテクチャ400(図4)がタッチパネルの近傍でスタイラスを検出するとスタイラスのタッチを検出するために予約される可能性がある。さらに、タッチ信号処理アーキテクチャ400(図4)は、スタイラスのタッチの検出のための次の方式、すなわち、高スキャンレート、高感度、直径2mmを超える誤タッチ拒絶の範囲、低閾値最終フィルタリング、および低次IIR詳細補間を適合し得る。タッチ信号処理アーキテクチャ400(図4)は、スタイラスタッチプリミティブ208を有効なタッチと見なす可能性があり、指タッチプリミティブ206を、それが2mmの直径の拒絶の範囲を超えているので雑音として拒絶する可能性がある。フレームB520には、指タッチプリミティブ206とスタイラスタッチプリミティブ208との両方が存在する。フレームB520は、指のタッチを検出するために予約される可能性がある。タッチ信号処理アーキテクチャ400(図4)は、指のタッチの検出のための以下の方式、すなわち、動作&雑音に依存するスキャンレート、サイズの変化に依存する感度、直径が2mm未満および直径19mmを超える誤タッチ拒絶の範囲、適応的な最終フィルタリング、および動作に依存する詳細補間を適合し得る。   In the exemplary frame shown in FIG. 5, frame A 510 is reserved to detect a stylus touch and frame B 520 is reserved to detect a finger touch. In the frame A510, both the finger touch primitive 206 and the stylus touch primitive 208 exist. Frame A510 may be reserved to detect a stylus touch when touch signal processing architecture 400 (FIG. 4) detects a stylus near the touch panel, as described above. In addition, the touch signal processing architecture 400 (FIG. 4) provides the following schemes for stylus touch detection: high scan rate, high sensitivity, range of false touch rejection over 2 mm in diameter, low threshold final filtering, and Low order IIR detailed interpolation may be adapted. Touch signal processing architecture 400 (FIG. 4) may consider stylus touch primitive 208 as a valid touch and reject finger touch primitive 206 as noise because it is beyond the 2 mm diameter rejection range. there is a possibility. In the frame B520, both the finger touch primitive 206 and the stylus touch primitive 208 exist. Frame B520 may be reserved to detect finger touches. Touch signal processing architecture 400 (Figure 4) uses the following methods for finger touch detection: motion & noise dependent scan rate, size dependent sensitivity, diameter less than 2mm and diameter 19mm Extensive false touch rejection ranges, adaptive final filtering, and motion-dependent detailed interpolation may be adapted.

見られ得るように、フレームA510とフレームB520との両方が、異なる種類のタッチを検出するために予約される可能性がある。一部の実施形態において、2つ以上の連続するフレームが、特定の種類のタッチを検出するために予約される可能性がある。たとえば、フレーム1および5が、指のタッチを検出するために予約される可能性があり、フレーム2〜4が、スタイラスのタッチを検出するために予約される可能性がある。一部の実施形態においては、より多い数のフレームが、より小さいタッチプリミティブを生じるタッチ(たとえば、スタイラスのタッチ)を検出するために予約される可能性がある。上述の例によって示されるように、スタイラスとユーザの指との両方が、タッチインターフェースのタッチパネルにタッチしている可能性がある。しかし、タッチ信号処理アーキテクチャ400(図4)は、上述の方法を用いて特定の種類のタッチの検出のためにフレームを予約することによって様々なタッチの検出を時間多重化し得る。結果として、タッチ信号処理アーキテクチャ400(図4)は、様々な異なる種類のタッチによるタッチを有効なタッチとして検出し、処理することができ、ユーザは、これらの様々な異なる種類のタッチを用いてポータブルデバイスとインタラクションし得る。一部の実施形態において、フレームの予約は(以下で説明される)指のタッチに関しては必要ない可能性があることを理解されたい。   As can be seen, both frame A 510 and frame B 520 may be reserved for detecting different types of touches. In some embodiments, two or more consecutive frames may be reserved to detect a particular type of touch. For example, frames 1 and 5 may be reserved for detecting finger touches, and frames 2-4 may be reserved for detecting stylus touches. In some embodiments, a greater number of frames may be reserved to detect touches (eg, stylus touches) that result in smaller touch primitives. As shown by the above example, both the stylus and the user's finger may be touching the touch interface touch panel. However, touch signal processing architecture 400 (FIG. 4) may time multiplex the detection of various touches by reserving frames for the detection of a particular type of touch using the method described above. As a result, the touch signal processing architecture 400 (FIG. 4) can detect and process touches from various different types of touches as valid touches, and the user can use these various different types of touches. Can interact with portable devices. It should be appreciated that in some embodiments, frame reservation may not be necessary for finger touches (described below).

図6は、異なる種類のタッチを処理するための適合方式を示す表600である。より詳細には、表600は、3つの異なるタッチの種類610、すなわち、大きなタッチ612(たとえば、手のひらのタッチ)、スタイラスのタッチ614、および指のタッチ616に基づいてタッチ信号処理アーキテクチャ400(図4)によって実装される適合方式を示す。異なるタッチの種類610のそれぞれは、タッチの種類610に固有の異なるタッチプリミティブの特徴620を有する可能性がある。タッチ信号処理アーキテクチャ400(図4)は、異なるタッチの種類610のそれぞれのために異なる適合方式を選択し得る。加えて、タッチ信号処理アーキテクチャ400(図4)は、タッチの種類610に基づいて選択メカニズム630を変更し得る。たとえば、選択メカニズム630は、大きなタッチ612のために直径19mmを超えるタッチを選択するように変更され得る。別の例において、選択メカニズム630は、スタイラスのタッチ614のタッチの種類610のために、タッチパネルの近傍でのスタイラスの検出と、タッチパネル上のスタイラスが着いたステータスの検出とに変更され得る。さらに別の例において、選択メカニズム630は、指のタッチ616のタッチの種類610のために、既定のモードのままであるかまたは既定のモードに変更される可能性がある。   FIG. 6 is a table 600 illustrating an adaptation scheme for handling different types of touches. More particularly, the table 600 is based on three different touch types 610: a large touch 612 (e.g., palm touch), a stylus touch 614, and a finger touch 616 (see FIG. The adaptation method implemented by 4) is shown. Each of the different touch types 610 may have different touch primitive features 620 that are specific to the touch type 610. Touch signal processing architecture 400 (FIG. 4) may select different adaptation schemes for each of the different touch types 610. In addition, the touch signal processing architecture 400 (FIG. 4) may change the selection mechanism 630 based on the touch type 610. For example, the selection mechanism 630 can be modified to select a touch greater than 19 mm in diameter for a large touch 612. In another example, the selection mechanism 630 may be modified for stylus touch 614 touch type 610 to detect a stylus in the vicinity of the touch panel and to detect the status of the stylus on the touch panel. In yet another example, the selection mechanism 630 may remain in the default mode or be changed to the default mode due to the touch type 610 of the finger touch 616.

選択される特定の適合方式は、次の属性、すなわち、フレーム予約640、スキャンレート650、静電容量式タッチモード660、タッチ感度670、誤タッチ拒絶の範囲680、最終フィルタリングモード690、および詳細補間モード695の選択を含み得る。適合方式は図6で図示または説明されないさらなる属性も含む可能性があることを理解されたい。   The specific adaptation method selected includes the following attributes: frame reservation 640, scan rate 650, capacitive touch mode 660, touch sensitivity 670, false touch rejection range 680, final filtering mode 690, and advanced interpolation Selection of mode 695 may be included. It should be understood that the adaptation scheme may also include additional attributes not shown or described in FIG.

大きなタッチ612(たとえば、手のひらのタッチ)のタッチの種類610のために、タッチ信号処理アーキテクチャ400は、19mmを超える直径を有するすべてのタッチプリミティブを選択するように選択メカニズム630を変更し得る。また、タッチ信号処理アーキテクチャ400(図4)は、大きなタッチ612のタッチの種類610のための次の適合方式、すなわち、フレーム予約、低スキャンレート、投影型静電容量(projected-capacitance)、最小感度、直径19未満のタッチプリミティブに関する誤タッチ拒絶の範囲、高閾値最終フィルタリング、および高次IIR詳細補間を実装する可能性がある。   For touch type 610 of large touch 612 (eg, palm touch), touch signal processing architecture 400 may modify selection mechanism 630 to select all touch primitives having a diameter greater than 19 mm. In addition, the touch signal processing architecture 400 (FIG. 4) has the following adaptation schemes for the touch type 610 of the large touch 612: frame reservation, low scan rate, projected-capacitance, minimum May implement sensitivity, range of false touch rejection for touch primitives less than 19 in diameter, high threshold final filtering, and high order IIR detailed interpolation.

スタイラスのタッチ614のタッチの種類610のために、タッチ信号処理アーキテクチャ400は、タッチパネルへのスタイラスの近接を検出し、タッチパネルに着いたスタイラスを検出するように選択メカニズム630を変更し得る。また、タッチ信号処理アーキテクチャ400(図4)は、スタイラスのタッチ614のタッチの種類610のための次の適合方式、すなわち、フレーム予約、高スキャンレート、投影型静電容量、高い感度、直径2mmを超えるタッチプリミティブに関する誤タッチ拒絶の範囲、低閾値最終フィルタリング、および低次IIR詳細補間を実装する可能性がある。   Because of the touch type 610 of the stylus touch 614, the touch signal processing architecture 400 may detect the proximity of the stylus to the touch panel and modify the selection mechanism 630 to detect the stylus that has touched the touch panel. In addition, touch signal processing architecture 400 (Figure 4) has the following adaptation schemes for touch type 610 of stylus touch 614: frame reservation, high scan rate, projected capacitance, high sensitivity, 2mm diameter May implement false touch rejection range for touch primitives above, low threshold final filtering, and low order IIR detailed interpolation.

指のタッチ616のタッチの種類610のために、タッチ信号処理アーキテクチャ400は、選択メカニズム630を予め決められた既定の量に保つかまたは変更し得る。また、タッチ信号処理アーキテクチャ400(図4)は、指のタッチ616のタッチの種類610のための次の適合方式、すなわち、フレーム予約なし、動作&雑音に依存するスキャンレート、投影型静電容量、サイズ可変感度、直径2mm未満および直径19mmを超えるタッチプリミティブに関する誤タッチ拒絶の範囲、適応的な最終フィルタリング、ならびに動作に依存するIIR詳細補間を実装する可能性がある。   Due to the touch type 610 of the finger touch 616, the touch signal processing architecture 400 may keep or change the selection mechanism 630 to a predetermined predetermined amount. The touch signal processing architecture 400 (Figure 4) also has the following adaptation schemes for the touch type 610 of the finger touch 616: no frame reservation, motion & noise dependent scan rate, projected capacitance May implement variable size sensitivity, range of false touch rejection for touch primitives less than 2mm in diameter and greater than 19mm in diameter, adaptive final filtering, and motion-dependent IIR detailed interpolation.

図7は、タッチのサイズに依存する適応的なタッチ処理のための方法700を示す流れ図である。方法700は、タッチ信号処理アーキテクチャ400(図4)によって実行され得る。ブロック702において、ウェイクアップ要求が、タッチパネル上のタッチを検出した結果としてホストデバイスに送信される。ホストデバイスは、ポータブルデバイスに存在する可能性がある。ブロック704において、タッチインターフェースに関するスキャンモードが、投影型静電容量スキャンモード(projected capacitive scan mode)に変更される。   FIG. 7 is a flow diagram illustrating a method 700 for adaptive touch processing that depends on the size of the touch. Method 700 may be performed by touch signal processing architecture 400 (FIG. 4). At block 702, a wake-up request is sent to the host device as a result of detecting a touch on the touch panel. The host device may reside on a portable device. At block 704, the scan mode for the touch interface is changed to a projected capacitive scan mode.

ブロック705において、検出されたタッチのタッチプリミティブのサイズが小さいかどうかに関して判断がなされる。タッチプリミティブのサイズが小さいと判定される場合、小さなタッチサイズのためのフレームを割り当てる(予約する)ためにスキャンマネージャへの要求がなされ、タッチ感度が高く設定される(ブロック706)。ブロック708において、(たとえば、スタイラスによる)小さなタッチの結果として生じる小さなタッチプリミティブが、処理され、復号される。それから、方法は、(下で説明される)ブロック710に続く。   At block 705, a determination is made as to whether the touch primitive size of the detected touch is small. If it is determined that the size of the touch primitive is small, a request is made to the scan manager to allocate (reserve) a frame for the small touch size and the touch sensitivity is set high (block 706). At block 708, small touch primitives resulting from small touches (eg, with a stylus) are processed and decoded. The method then continues to block 710 (described below).

タッチプリミティブのサイズが小さくないと判定される場合、方法は、ブロック709に続く。ブロック709において、検出されたタッチのタッチプリミティブのサイズが大きいかどうかに関して判断がなされる。タッチプリミティブのサイズが大きいと判定される場合、大きなタッチサイズのためのフレームを割り当てる(予約する)ためにスキャンマネージャへの要求がなされ、タッチ感度が最小に設定される(ブロック710)。ブロック712において、(たとえば、ユーザの手のひらによる)大きなタッチの結果として生じる大きなタッチプリミティブが、処理され、復号される。タッチプリミティブのサイズが大きくないと判定される場合、方法は、ブロック716に続く。   If it is determined that the size of the touch primitive is not small, the method continues at block 709. At block 709, a determination is made as to whether the touch primitive size of the detected touch is large. If it is determined that the size of the touch primitive is large, a request is made to the scan manager to allocate (reserve) a frame for the large touch size and the touch sensitivity is set to a minimum (block 710). At block 712, large touch primitives resulting from a large touch (eg, due to a user's palm) are processed and decoded. If it is determined that the size of the touch primitive is not large, the method continues at block 716.

ブロック714において、タッチパネルからの手のひらの領域が除外される。つまり、ユーザの手のひらのタッチの結果として生じるタッチプリミティブが、さらなる処理および/または復号から除外される。ブロック716において、任意の有効なタッチが存在するかどうかの判定がなされる。タッチは、小さな(スタイラスの)タッチまたは大きな(手のひらの)タッチであると見なされない名目的なタッチ(nominal touch)(たとえば、指のタッチ)である可能性がある。有効なタッチが存在しないという判定がなされる場合、タッチインターフェースは、スタンバイモードになり、タッチを待つ(ブロック717)。有効なタッチが存在するという判定がなされる場合、名目的な(たとえば、指のタッチの)タッチのサイズのためのフレームを許可するようにスキャンマネージャへの要求がなされる(ブロック718)。ブロック720において、名目的なタッチの結果として生じる名目的なタッチプリミティブ(nominal touch primitive)が、処理され、復号される。それから、方法は、ブロック705に戻る。   At block 714, the palm region from the touch panel is excluded. That is, touch primitives resulting from the user's palm touch are excluded from further processing and / or decoding. At block 716, a determination is made whether there are any valid touches. The touch can be a nominal touch (eg, a finger touch) that is not considered a small (stylus) touch or a large (palm) touch. If a determination is made that there is no valid touch, the touch interface enters a standby mode and waits for a touch (block 717). If a determination is made that a valid touch exists, a request is made to the scan manager to allow a frame for the nominal (eg, finger touch) touch size (block 718). At block 720, the nominal touch primitive that results from the nominal touch is processed and decoded. The method then returns to block 705.

図8は、タッチパネルのためのタッチ入力を認識するための例示的な方法800を示す流れ図である。ブロック810において、第1のフレームおよび第2のフレームにわたってタッチパネルがスキャンされ、第1のフレームおよび第2のフレームは、タッチパネル上のタッチの結果として生じるタッチパネルブロッブを含む。たとえば、タッチパネルは、図1のポータブルデバイスの静電容量式タッチパネルの部分である可能性がある。タッチは、たとえば、ユーザの指、ユーザの手のひら、またはスタイラスデバイスによるユーザのタッチの結果として生じる可能性がある。スキャンは、スキャンエンジンによって実行され得る。   FIG. 8 is a flow diagram illustrating an example method 800 for recognizing touch input for a touch panel. At block 810, the touch panel is scanned across the first frame and the second frame, and the first frame and the second frame include touch panel blobs that result from a touch on the touch panel. For example, the touch panel may be part of the capacitive touch panel of the portable device of FIG. A touch can occur as a result of a user's touch with, for example, a user's finger, a user's palm, or a stylus device. The scan can be performed by a scan engine.

ブロック820において、第1のタッチ報告感度が、第1のフレームのために設定され、第2のタッチ報告感度が、第2のフレームのために設定される。第1のおよび第2のタッチ報告感度は、異なる可能性がある。第1のタッチ報告感度は、第1の種類のタッチを検出するように設定される可能性があり、第2のタッチ報告感度は、第2の種類のタッチを検出するように設定される可能性がある。タッチパネルのスキャンレートが、調整される可能性もある。第1のタッチ報告感度は、直径19mm未満の誤タッチ拒絶サイズを含み得る。第2のタッチ報告感度は、直径2mmを超える誤タッチ拒絶サイズを含み得る。   At block 820, a first touch reporting sensitivity is set for the first frame and a second touch reporting sensitivity is set for the second frame. The first and second touch reporting sensitivities can be different. The first touch reporting sensitivity may be set to detect the first type of touch and the second touch reporting sensitivity may be set to detect the second type of touch There is sex. The scan rate of the touch panel may be adjusted. The first touch reporting sensitivity may include a false touch rejection size less than 19 mm in diameter. The second touch reporting sensitivity may include a false touch rejection size greater than 2 mm in diameter.

ブロック830において、第1のフレーム内のタッチパネルブロッブが、第1のタッチ報告感度に少なくとも部分的に基づいて処理され、第2のフレーム内のタッチパネルブロッブが、第2のタッチ報告感度に少なくとも部分的に基づいて処理される。第1のおよび第2のフレームは、誤タッチ拒絶の範囲を適合し、最終フィルタリングの種類を調整し、詳細補間の種類を調整し、タッチの座標を決定することによって処理され得る。   At block 830, the touch panel blob in the first frame is processed based at least in part on the first touch reporting sensitivity, and the touch panel blob in the second frame is at least partially in the second touch reporting sensitivity. Processed based on The first and second frames may be processed by adapting the false touch rejection range, adjusting the final filtering type, adjusting the detailed interpolation type, and determining the coordinates of the touch.

ブロック840において、処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかの判定がなされる。タッチパネルに対するタッチブロッブの位置が、処理するステップに少なくとも部分的に基づいて決定され得る。   At block 840, a determination is made whether there is a valid touch based at least in part on the processing step. The position of the touch blob relative to the touch panel may be determined based at least in part on the processing step.

一部の実施形態において、方法は、タッチパネル上のタッチの結果として生じるタッチパネルブロッブを含む第3のフレームでタッチパネルをスキャンすることによって継続する可能性がある。第3の報告感度が、第3のフレームのために設定され得る。第3のフレーム内のタッチパネルブロッブは、第3のタッチ報告感度に少なくとも部分的に基づいて処理され得る。処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかの判定が、なされ得る。一部の実施形態において、第3のタッチ報告感度は、直径2mm未満および直径19mmを超える誤タッチ拒絶サイズを設定することを含む。   In some embodiments, the method may continue by scanning the touch panel with a third frame that includes a touch panel blob that results from a touch on the touch panel. A third reporting sensitivity may be set for the third frame. The touch panel blob in the third frame may be processed based at least in part on the third touch reporting sensitivity. A determination can be made whether there is a valid touch based at least in part on the processing step. In some embodiments, the third touch reporting sensitivity includes setting a false touch rejection size that is less than 2 mm in diameter and greater than 19 mm in diameter.

例示的なコンピューティングシステム
図9は、1つまたは複数の実施形態が実装され得るコンピューティングシステムの例を示す。図9に示されるコンピュータシステムは、上述の入力認識デバイスの一部として組み込まれ得る。たとえば、コンピュータシステム900は、テレビの構成要素の一部、コンピューティングデバイス、サーバ、デスクトップ、ワークステーション、自動車の制御もしくはインタラクションシステム、タブレット、ネットブック、または任意のその他の好適なコンピューティングシステムを表すことができる。コンピューティングデバイスは、画像撮影デバイスまたは入力感受ユニットおよびユーザ出力デバイスを有する任意のコンピューティングデバイスであってよい。画像撮影デバイスまたは入力感受ユニットは、カメラデバイスである可能性がある。ユーザ出力デバイスは、ディスプレイユニットである可能性がある。コンピューティングデバイスの例は、ビデオゲームコンソール、タブレット、スマートフォン、および任意のその他のハンドヘルドデバイスを含むがこれらに限定されない。図9は、本明細書に記載の様々なその他の実施形態によって提供される方法を実行することができ、ならびに/あるいはホストコンピュータシステム、リモートキオスク/端末、販売時点情報管理デバイス、自動車の電話もしくはナビゲーションもしくはマルチメディアインターフェース、コンピューティングデバイス、セットトップボックス、テーブルコンピュータ、および/またはコンピュータシステムとして機能することができるコンピュータシステム900の一実施形態の概略図を提供する。図9は、様々な構成要素の一般化された図を提供するようにのみ意図されており、それらの様々な構成要素のいずれかまたはすべては、必要に応じて利用される可能性がある。したがって、図9は、個々のシステムの要素がどのようにして比較的分かれた、または比較的より統合的なやり方で実装され得るかを幅広く示す。一部の実施形態において、コンピュータシステム900は、図1の静電容量式タッチパネルの機能を実装するために使用され得る。
Exemplary Computing System FIG. 9 illustrates an example computing system in which one or more embodiments may be implemented. The computer system shown in FIG. 9 can be incorporated as part of the input recognition device described above. For example, the computer system 900 represents some of the components of a television, computing device, server, desktop, workstation, automobile control or interaction system, tablet, netbook, or any other suitable computing system. be able to. The computing device may be any imaging device having an image capture device or input sensitive unit and a user output device. The image capturing device or the input sensing unit may be a camera device. The user output device may be a display unit. Examples of computing devices include, but are not limited to, video game consoles, tablets, smartphones, and any other handheld device. FIG. 9 may perform the methods provided by various other embodiments described herein, and / or a host computer system, remote kiosk / terminal, point-of-sale device, car phone or FIG. 6 provides a schematic diagram of an embodiment of a computer system 900 that can function as a navigation or multimedia interface, computing device, set-top box, table computer, and / or computer system. FIG. 9 is intended only to provide a generalized view of the various components, and any or all of these various components may be utilized as needed. Accordingly, FIG. 9 broadly illustrates how the elements of an individual system can be implemented in a relatively separate or relatively more integrated manner. In some embodiments, the computer system 900 can be used to implement the functionality of the capacitive touch panel of FIG.

バス902を介して電気的に結合され得る(または別の方法で必要に応じて通信し得る)ハードウェア要素を含むコンピュータシステム900が、示される。ハードウェア要素は、1つもしくは複数の汎用プロセッサおよび/もしくは(デジタル信号処理チップ、グラフィックスアクセラレーションプロセッサなどの)1つもしくは複数の専用プロセッサを限定なしに含む1つまたは複数のプロセッサ904と、1つもしくは複数のカメラ、センサ、マウス、キーボード、超音波もしくはその他の音を検出するように構成されたマイクロフォンなどを限定なしに含み得る1つまたは複数の入力デバイス908と、本発明の実施形態において使用されるデバイスなどのディスプレイユニット、プリンタなどを限定なしに含み得る1つまたは複数の出力デバイス910とを含み得る。   A computer system 900 is shown that includes hardware elements that can be electrically coupled (or otherwise communicated as needed) via a bus 902. The hardware elements include one or more general-purpose processors and / or one or more processors 904 including, without limitation, one or more dedicated processors (such as a digital signal processing chip, a graphics acceleration processor, etc.) Embodiments of the invention and one or more input devices 908 that may include without limitation one or more cameras, sensors, mice, keyboards, microphones configured to detect ultrasound or other sounds, etc. And one or more output devices 910 that may include, without limitation, a display unit such as a device used in a printer, a printer, and the like.

本発明の実施形態の一部の実装においては、様々な入力デバイス908および出力デバイス910が、ディスプレイデバイス、テーブル、床、壁、および窓のスクリーンなどのインターフェースに組み込まれる可能性がある。さらに、プロセッサに結合された入力デバイス908および出力デバイス910が、多次元追跡システムを形成する可能性がある。   In some implementations of embodiments of the present invention, various input devices 908 and output devices 910 may be incorporated into interfaces such as display devices, tables, floors, walls, and window screens. Further, input device 908 and output device 910 coupled to the processor may form a multidimensional tracking system.

コンピュータシステム900は、ローカルおよび/もしくはネットワークアクセス可能なストレージを限定なしに含む可能性があり、ならびに/またはディスクドライブ、ドライブアレイ、光学式記憶デバイス、ランダムアクセスメモリ(「RAM」)および/もしくはプログラミング可能、フラッシュ更新可能などである可能性がある読み出し専用メモリ(「ROM」)などのソリッドステート記憶デバイスを限定なしに含む可能性がある1つまたは複数の非一時的記憶デバイス906をさらに含む(および/もしくはそのような非一時的記憶デバイス906と通信する)可能性がある。そのような記憶デバイスは、様々なファイルシステム、データベース構造などを限定なしに含む任意の適切なデータストレージを実装するように構成され得る。   The computer system 900 may include, without limitation, local and / or network accessible storage and / or disk drives, drive arrays, optical storage devices, random access memory (“RAM”) and / or programming. One or more non-transitory storage devices 906 that may include, without limitation, solid state storage devices such as read-only memory (`` ROM '') that may be possible, flash updateable, etc. And / or communicate with such non-transitory storage device 906). Such a storage device may be configured to implement any suitable data storage, including without limitation various file systems, database structures, and the like.

コンピュータシステム900は、モデム、(ワイヤレスまたは有線)ネットワークカード、赤外線通信デバイス、(Bluetooth(登録商標)デバイス、802.11デバイス、WiFiデバイス、WiMaxデバイス、セルラー通信設備などの)ワイヤレス通信デバイスおよび/またはチップセットなどを限定なしに含み得る通信サブシステム912も含む可能性がある。通信サブシステム912は、データがネットワーク、その他のコンピュータシステム、および/または本明細書に記載の任意のその他のデバイスと交換されることを可能にし得る。多くの実施形態において、コンピュータシステム900は、上述のように、RAMまたはROMデバイスを含み得る非一時的作業メモリ918をさらに含む。   The computer system 900 includes a modem, a (wireless or wired) network card, an infrared communication device, a wireless communication device (such as a Bluetooth device, an 802.11 device, a WiFi device, a WiMax device, a cellular communication facility) and / or a chipset. May also include a communication subsystem 912 that may include without limitation. Communication subsystem 912 may allow data to be exchanged with a network, other computer systems, and / or any other device described herein. In many embodiments, the computer system 900 further includes a non-transitory working memory 918 that may include a RAM or ROM device, as described above.

コンピュータシステム900は、オペレーティングシステム914、デバイスドライバ、実行可能ライブラリ、ならびに/または様々な実施形態によって提供されるコンピュータプログラムを含む可能性があり、および/もしくは本明細書に記載のその他の実施形態によって提供される方法を実装し、および/もしくはシステムを構成するように設計される可能性がある1つもしくは複数のアプリケーションプログラム916などのその他のコードを含む、作業メモリ918に現在配置されているものとして示されるソフトウェア要素も含む可能性がある。単に例として、上で検討された(1つまたは複数の)方法に関連して説明された1つまたは複数の手順は、コンピュータ(および/またはコンピュータ内のプロセッサ)によって実行可能なコードおよび/または命令として実装される可能性があり、そのとき、一態様において、そのようなコードおよび/または命令は、説明された方法に従って1つまたは複数の動作を実行するように多目的コンピュータ(またはその他のデバイス)を構成および/または適合するために使用され得る。   The computer system 900 may include an operating system 914, device drivers, executable libraries, and / or computer programs provided by various embodiments and / or by other embodiments described herein. What is currently located in working memory 918, including other code such as one or more application programs 916 that may be designed to implement the methods provided and / or configure the system May also include software elements shown as. By way of example only, one or more of the procedures described in connection with the method (s) discussed above may include code executable by a computer (and / or a processor within the computer) and / or In which case, such code and / or instructions may be implemented as a general purpose computer (or other device) to perform one or more operations in accordance with the described methods. ) May be used to configure and / or adapt.

1組のこれらの命令および/またはコードは、上述の(1つまたは複数の)記憶デバイス906などのコンピュータ可読記憶媒体に記憶される可能性がある。場合によっては、記憶媒体が、コンピュータシステム900などのコンピュータシステム内に組み込まれる可能性がある。その他の実施形態において、記憶媒体は、コンピュータシステムと分かれており(たとえば、コンパクトディスクなどの取り外し可能な媒体)、ならびに/または記憶媒体がその記憶媒体に記憶された命令/コードによって多目的コンピュータをプログラミング、構成、および/もしくは適合するために使用され得るようにインストールパッケージで提供される可能性がある。これらの命令は、コンピュータシステム900によって実行可能である実行可能コードの形態をとる可能性があり、ならびに/または(たとえば、様々な広く利用可能なコンパイラ、インストールプログラム、圧縮/解凍ユーティリティなどのいずれかを用いて)コンピュータシステム900でコンパイルおよび/もしくはインストールされると実行可能コードの形態をとるソースおよび/もしくはインストール可能なコードの形態をとる可能性がある。   A set of these instructions and / or code may be stored on a computer-readable storage medium, such as the storage device (s) 906 described above. In some cases, a storage medium may be incorporated within a computer system such as computer system 900. In other embodiments, the storage medium is separate from the computer system (eg, a removable medium such as a compact disk) and / or the storage medium is programmed with instructions / code stored on the storage medium. May be provided in an installation package so that it can be used to configure, configure, and / or adapt. These instructions may take the form of executable code that is executable by computer system 900 and / or (eg, any of various widely available compilers, installation programs, compression / decompression utilities, etc. May be in the form of source and / or installable code in the form of executable code when compiled and / or installed on computer system 900.

特定の要件に従って、大きな変更が行われ得る。たとえば、カスタマイズされたハードウェアが使用される可能性もあり、および/または特定の要素がハードウェア、(アプレットなどのポータブルソフトウェアを含む)ソフトウェア、もしくはこれら両方で実装される可能性がある。さらに、ネットワーク入力/出力デバイスなどのその他のコンピューティングデバイスへの接続が、使用される可能性がある。一部の実施形態においては、コンピュータシステム900の1つもしくは複数の要素が省略される可能性があり、または図示されたシステムとは別に実装される可能性がある。たとえば、プロセッサ904および/またはその他の要素が、入力デバイス908とは別に実装される可能性がある。一実施形態において、プロセッサは、別に実装される1つまたは複数のカメラから画像を受信するように構成される。一部の実施形態においては、図9に示された要素以外の要素が、コンピュータシステム900に含まれる可能性がある。   Major changes can be made according to specific requirements. For example, customized hardware may be used and / or certain elements may be implemented in hardware, software (including portable software such as applets), or both. In addition, connections to other computing devices such as network input / output devices may be used. In some embodiments, one or more elements of computer system 900 may be omitted or implemented separately from the illustrated system. For example, the processor 904 and / or other elements may be implemented separately from the input device 908. In one embodiment, the processor is configured to receive images from one or more cameras implemented separately. In some embodiments, elements other than those shown in FIG. 9 may be included in computer system 900.

一部の実施形態は、(コンピュータシステム900などの)コンピュータシステムを使用して、本開示による方法を実行する可能性がある。たとえば、説明された方法の手順の一部またはすべては、プロセッサ904が作業メモリ918に含まれる(オペレーティングシステム914および/もしくはアプリケーションプログラム916などのその他のコードに組み込まれる可能性がある)1つまたは複数の命令の1つまたは複数のシーケンスを実行することに応じてコンピュータシステム900によって実行され得る。そのような命令は、(1つまたは複数の)記憶デバイス906のうちの1つまたは複数などの別のコンピュータ可読媒体から作業メモリ918に読み込まれる可能性がある。単に例として、作業メモリ918に含まれる命令のシーケンスの実行が、(1つまたは複数の)プロセッサ904に本明細書に記載の方法の1つまたは複数の手順を実行させる可能性がある。   Some embodiments may use a computer system (such as computer system 900) to perform the method according to the present disclosure. For example, some or all of the described method steps may include one or more processors 904 included in working memory 918 (which may be incorporated into other code such as operating system 914 and / or application program 916) It may be executed by computer system 900 in response to executing one or more sequences of instructions. Such instructions may be read into working memory 918 from another computer readable medium, such as one or more of storage device (s) 906. By way of example only, execution of a sequence of instructions contained in working memory 918 may cause processor (s) 904 to perform one or more steps of the methods described herein.

本明細書において使用されるとき、用語「機械可読媒体」および「コンピュータ可読媒体」は、機械を特定の方法で動作させるデータを提供することに関与する任意の媒体を指す。コンピュータシステム900を用いて実装される一部の実施形態においては、様々なコンピュータ可読媒体が、実行するために命令/コードを(1つもしくは複数の)プロセッサ904に提供することに関与させられる可能性があり、ならびに/またはそのような命令/コードを(たとえば信号として)記憶しおよび/もしくは運ぶために使用される可能性がある。多くの実装において、コンピュータ可読媒体は、物理的および/または有形の記憶媒体である。そのような媒体は、不揮発性媒体、揮発性媒体、および送信媒体を含むがこれらに限定されない多くの形態を取り得る。不揮発性媒体は、たとえば、(1つまたは複数の)記憶デバイス906などの光および/または磁気ディスクを含む。揮発性媒体は、作業メモリ918などの動的メモリを限定なしに含む。送信媒体は、バス902を含む配線を含む同軸ケーブル、銅線、および光ファイバ、ならびに通信サブシステム912の様々な構成要素(および/または通信サブシステム912がその他のデバイスとの通信を提供する媒体)を限定なしに含む。したがって、送信媒体は、(無線波および赤外線データ通信中に生成される無線波、音波、および/または光波などの無線波、音波、および/または光波を限定なしに含む)波の形態をとる可能性もある。   As used herein, the terms “machine-readable medium” and “computer-readable medium” refer to any medium that participates in providing data that causes a machine to operation in a specific fashion. In some embodiments implemented using computer system 900, various computer-readable media may be involved in providing instructions / code to processor (s) 904 for execution. And / or may be used to store and / or carry such instructions / code (eg, as a signal). In many implementations, a computer-readable medium is a physical and / or tangible storage medium. Such a medium may take many forms, including but not limited to, non-volatile media, volatile media, and transmission media. Non-volatile media includes, for example, optical and / or magnetic disks, such as storage device (s) 906. Volatile media includes, without limitation, dynamic memory, such as working memory 918. Transmission media includes coaxial cables, including wire including bus 902, copper wire, and optical fiber, and various components of communication subsystem 912 (and / or media on which communication subsystem 912 provides communication with other devices) ) Without limitation. Thus, the transmission medium can take the form of waves (including, without limitation, radio waves, sound waves, and / or light waves such as radio waves, sound waves, and / or light waves generated during radio wave and infrared data communications). There is also sex.

よくある形態の物理的および/または有形のコンピュータ可読媒体は、たとえば、フロッピー(登録商標)ディスク、フレキシブルディスク、ハードディスク、磁気テープ、もしくは任意のその他の磁気媒体、CD-ROM、任意のその他の光媒体、パンチカード、紙テープ、穴のパターンを用いる任意のその他の物理的媒体、RAM、PROM、EPROM、FLASH-EPROM、任意のその他のメモリチップもしくはカートリッジ、下で説明される搬送波、またはコンピュータが命令および/もしくはコードを読むことができる任意のその他の媒体を含む。   Common forms of physical and / or tangible computer readable media are, for example, floppy disks, flexible disks, hard disks, magnetic tapes, or any other magnetic medium, CD-ROM, any other optical media. Media, punch card, paper tape, any other physical media using hole patterns, RAM, PROM, EPROM, FLASH-EPROM, any other memory chip or cartridge, carrier wave as described below, or computer command And / or any other medium that can read the code.

様々な形態のコンピュータ可読媒体が、実行するために(1つまたは複数の)プロセッサ904に1つまたは複数の命令の1つまたは複数のシーケンスを運ぶことに関与させられる可能性がある。単に例として、命令は、最初、リモートコンピュータの磁気ディスクおよび/または光ディスクで運ばれる可能性がある。リモートコンピュータは、命令をそのリモートコンピュータの動的メモリにロードし、コンピュータシステム900によって受信および/または実行されるように送信媒体を介して命令を信号として送信する可能性がある。電磁的な信号、音響信号、光信号などの形態である可能性があるこれらの信号は、すべて、本発明の様々な実施形態による、命令が符号化され得る搬送波の例である。   Various forms of computer readable media may be involved in carrying one or more sequences of one or more instructions to processor (s) 904 for execution. By way of example only, instructions may initially be carried on a remote computer's magnetic disk and / or optical disk. The remote computer may load the instructions into the dynamic memory of the remote computer and send the instructions as a signal over a transmission medium for reception and / or execution by the computer system 900. These signals, which may be in the form of electromagnetic signals, acoustic signals, optical signals, etc., are all examples of carriers on which instructions may be encoded, according to various embodiments of the invention.

概して、通信サブシステム912(および/または通信サブシステム912の構成要素)が、信号を受信し、そして、バス902が、信号(および/または信号によって運ばれるデータ、命令など)を作業メモリ918に運ぶ可能性があり、作業メモリ918から(1つまたは複数の)プロセッサ904が命令を取り出し、実行する。作業メモリ918によって受信された命令は、任意選択で、(1つまたは複数の)プロセッサ904による実行の前かまたは後かのどちらかに非一時的記憶デバイス906に記憶される可能性がある。   Generally, the communication subsystem 912 (and / or a component of the communication subsystem 912) receives the signal and the bus 902 sends the signal (and / or data carried by the signal, instructions, etc.) to the working memory 918. From the working memory 918, the processor (s) 904 retrieves and executes the instructions. The instructions received by working memory 918 may optionally be stored on non-transitory storage device 906 either before or after execution by processor (s) 904.

さらなる実施形態
図10は、タッチスクリーンディスプレイおよび外部ディスプレイデバイスを用いるモバイルデバイスアーキテクチャ1200の例を示す図である。この例において、モバイルデバイスアーキテクチャ1200は、アプリケーションプロセッサ1202と、キャッシュ1204と、外部メモリ1206と、汎用グラフィックス処理ユニット(GPGPU)1208と、アプリケーションデータムーバ1210と、アプリケーションデータムーバ1210およびGPGPU1208に結合されるオンチップメモリ1212と、オンチップメモリ1212に結合されるマルチスペクトルマルチビューイメージングコア修正/最適化/向上マルチメディアプロセッサおよびアクセラレータ構成要素(multispectral multiview imaging core, correction/optimization/enhancement, multimedia processors and accelerators component)1214とを含む。アプリケーションプロセッサ1202は、キャッシュ1204、外部メモリ1206、GPGPU1208、オンチップメモリ1212、ならびにマルチスペクトルマルチビューイメージングコア修正/最適化/向上マルチメディアプロセッサおよびアクセラレータ構成要素1214と通信する。モバイルデバイスアーキテクチャ1200は、オーディオコーデック、マイクロフォン、ヘッドフォン/イヤフォン、およびスピーカ構成要素1216と、ディスプレイプロセッサおよびコントローラ構成要素1218と、ディスプレイプロセッサおよびコントローラ構成要素1218に結合されたドライバおよびコントローラを有するディスプレイ/タッチパネル構成要素1220とをさらに含む。モバイルアーキテクチャ1200は、任意選択で、ディスプレイプロセッサおよびコントローラ構成要素1218に結合された外部インターフェースブリッジ(たとえば、ドッキングステーション)1222と、外部インターフェースブリッジ1222に結合された外部ディスプレイ1224とを含み得る。外部ディスプレイ1224は、ワイヤレスディスプレイ接続1226、または高精細度マルチメディアインターフェース(HDMI(登録商標))接続などのワイヤレスディスプレイ接続1226または有線接続を介して外部インターフェースブリッジ1222に結合され得る。モバイルデバイスアーキテクチャ1200は、3G/4Gモデム1230、Wi-Fiモデム1232、衛星測位システム(SPS)センサ1234、およびBluetooth(登録商標)モジュール1236に結合された接続プロセッサ1228をさらに含む。モバイルデバイスアーキテクチャ1200は、外部記憶モジュール1240、接続プロセッサ1228、および外部メモリ1206と通信する周辺デバイスおよびインターフェース1238も含む。モバイルデバイスアーキテクチャは、セキュリティ構成要素1242も含む。外部メモリ1206は、GPGPU1208、アプリケーションデータムーバ1210、ディスプレイプロセッサおよびコントローラ1218、オーディオコーデック、マイクロフォン、ヘッドフォン/イヤフォンおよびスピーカ構成要素1216、接続プロセッサ1228、周辺デバイスおよびインターフェース1238、ならびにセキュリティ構成要素1242に結合される。
Further Embodiments FIG. 10 is a diagram illustrating an example of a mobile device architecture 1200 using a touch screen display and an external display device. In this example, the mobile device architecture 1200 is coupled to an application processor 1202, a cache 1204, an external memory 1206, a general purpose graphics processing unit (GPGPU) 1208, an application data mover 1210, an application data mover 1210, and a GPGPU 1208. On-chip memory 1212 and multispectral multiview imaging core, correction / optimization / enhancement, multimedia processors and accelerators coupled to on-chip memory 1212 component) 1214. Application processor 1202 communicates with cache 1204, external memory 1206, GPGPU 1208, on-chip memory 1212, and multispectral multiview imaging core modification / optimization / enhancement multimedia processor and accelerator component 1214. Mobile device architecture 1200 includes a display / touch panel having an audio codec, microphone, headphone / earphone and speaker component 1216, a display processor and controller component 1218, and a driver and controller coupled to display processor and controller component 1218. And further includes a component 1220. Mobile architecture 1200 may optionally include an external interface bridge (eg, docking station) 1222 coupled to a display processor and controller component 1218 and an external display 1224 coupled to external interface bridge 1222. The external display 1224 may be coupled to the external interface bridge 1222 via a wireless display connection 1226 or a wireless display connection 1226 such as a high definition multimedia interface (HDMI) connection or a wired connection. Mobile device architecture 1200 further includes a connectivity processor 1228 coupled to 3G / 4G modem 1230, Wi-Fi modem 1232, satellite positioning system (SPS) sensor 1234, and Bluetooth module 1236. Mobile device architecture 1200 also includes peripheral devices and interfaces 1238 that communicate with external storage module 1240, connection processor 1228, and external memory 1206. The mobile device architecture also includes a security component 1242. External memory 1206 is coupled to GPGPU 1208, application data mover 1210, display processor and controller 1218, audio codec, microphone, headphone / earphone and speaker component 1216, connection processor 1228, peripheral device and interface 1238, and security component 1242. The

モバイルデバイスアーキテクチャ1200は、バッテリ充電回路および電力マネージャ構成要素と、温度補償型水晶発振器(TCXO)、位相同期ループ(PLL)、およびクロックジェネレータ構成要素1246とに結合されるバッテリモニタおよびプラットフォームリソース/電力マネージャ構成要素1244をさらに含む。バッテリモニタおよびプラットフォームリソース/電力マネージャ構成要素1244は、アプリケーションプロセッサ1202にも結合される。モバイルデバイスアーキテクチャ1200は、アプリケーションプロセッサ1202に結合されたセンサおよびユーザインターフェースデバイス構成要素1248をさらに含み、アプリケーションプロセッサ1202に結合された光エミッタ1250およびイメージセンサ1252を含む。イメージセンサ1252は、マルチスペクトルマルチビューイメージングコア修正/最適化/向上マルチメディアプロセッサおよびアクセラレータ構成要素1214にも結合される。   Mobile device architecture 1200 is a battery monitor and platform resource / power coupled to battery charging circuit and power manager components and temperature compensated crystal oscillator (TCXO), phase locked loop (PLL), and clock generator component 1246 A manager component 1244 is further included. Battery monitor and platform resource / power manager component 1244 is also coupled to application processor 1202. Mobile device architecture 1200 further includes a sensor and user interface device component 1248 coupled to application processor 1202 and includes a light emitter 1250 and an image sensor 1252 coupled to application processor 1202. The image sensor 1252 is also coupled to a multispectral multiview imaging core modification / optimization / enhancement multimedia processor and accelerator component 1214.

図11は、タッチスクリーンコントローラを有するモバイルタッチスクリーンデバイス1300の例を示す図である。モバイルタッチスクリーンデバイス1300は、高レベル出力仕様(HLOS: High Level Output Specification)によるマルチコアアプリケーションプロセッササブシステム1306に結合されるタッチスクリーンディスプレイユニット1302およびスタンドアロンのタッチスクリーンコントローラを用いるタッチスクリーンサブシステム1304を含む。タッチスクリーンディスプレイユニット1302は、タッチスクリーンパネルおよびインターフェースユニット1308と、ディスプレイドライバおよびパネルユニット1310と、ディスプレイインターフェース1312とを含む。ディスプレイインターフェース1312は、ディスプレイドライバおよびパネル1310と、HLOSによるマルチコアアプリケーションプロセッササブシステム1306とに結合される。タッチスクリーンパネルおよびインターフェースユニット1308は、ユーザのタッチによるタッチ入力を受け取り、ディプレイドライバおよびパネルユニット1310は、画像を表示する。タッチスクリーンサブシステム1304は、アナログフロントエンド1314と、タッチ活動およびステータス検出ユニット1316と、割り込みジェネレータ1318と、タッチプロセッサおよびデコーダユニット1320と、クロックおよびタイミング回路1322と、ホストインターフェース1324とを含む。アナログフロントエンド1314は、タッチスクリーンパネルおよびインターフェース1308と通信してタッチスクリーンへのユーザのタッチに基づくアナログタッチ信号を受け取り、アナログタッチ信号をデジタルタッチ信号に変換してタッチ信号生データを生成する可能性がある。アナログフロントエンド1314は、行/列ドライバおよびアナログデジタルコンバータ(ADC)を含み得る。   FIG. 11 is a diagram illustrating an example of a mobile touch screen device 1300 having a touch screen controller. Mobile touch screen device 1300 includes a touch screen display unit 1302 coupled to a multi-core application processor subsystem 1306 with a high level output specification (HLOS) and a touch screen subsystem 1304 using a stand-alone touch screen controller. . The touch screen display unit 1302 includes a touch screen panel and interface unit 1308, a display driver and panel unit 1310, and a display interface 1312. The display interface 1312 is coupled to a display driver and panel 1310 and a multi-core application processor subsystem 1306 by HLOS. The touch screen panel and interface unit 1308 receives a touch input by a user's touch, and the display driver and panel unit 1310 displays an image. The touch screen subsystem 1304 includes an analog front end 1314, a touch activity and status detection unit 1316, an interrupt generator 1318, a touch processor and decoder unit 1320, a clock and timing circuit 1322, and a host interface 1324. The analog front end 1314 can communicate with the touch screen panel and interface 1308 to receive an analog touch signal based on the user's touch on the touch screen and convert the analog touch signal to a digital touch signal to generate raw touch signal data There is sex. The analog front end 1314 may include a row / column driver and an analog to digital converter (ADC).

タッチ活動およびステータス検出ユニット1316は、アナログフロントエンド1314からタッチ信号を受信し、それから、割り込みジェネレータ1318がトリガ信号をタッチプロセッサおよびデコーダユニット1320に伝達するように割り込みジェネレータ1318にユーザのタッチの存在を伝達する。タッチプロセッサおよびデコーダユニット1320は、割り込みジェネレータ1318からトリガ信号を受信するとき、アナログフロントエンド1314からタッチ信号生データを受信し、タッチ信号生データを処理してタッチデータを生成する。タッチプロセッサおよびデコーダ1320は、タッチデータをホストインターフェース1324に送信し、そして、ホストインターフェース1324は、タッチデータをマルチコアアプリケーションプロセッササブシステム1306に転送する。タッチプロセッサおよびデコーダ1320は、アナログフロントエンド1314と通信するクロックおよびタイミング回路1322にも結合される。   The touch activity and status detection unit 1316 receives the touch signal from the analog front end 1314 and then detects the presence of the user's touch on the interrupt generator 1318 so that the interrupt generator 1318 communicates the trigger signal to the touch processor and decoder unit 1320. introduce. When the touch processor and decoder unit 1320 receives the trigger signal from the interrupt generator 1318, it receives the touch signal raw data from the analog front end 1314 and processes the touch signal raw data to generate touch data. The touch processor and decoder 1320 transmits touch data to the host interface 1324, and the host interface 1324 transfers the touch data to the multi-core application processor subsystem 1306. Touch processor and decoder 1320 is also coupled to a clock and timing circuit 1322 that communicates with analog front end 1314.

一部の実施形態において、タッチ信号生データの処理は、ユニット1320ではなくサブシステム1306で処理される。一部のそのような実施形態において、制御1304または制御1304の1つもしくは複数の構成要素、たとえば、ユニット1320は、省略される可能性がある。その他のそのような実施形態においては、コントローラ1304および/またはコントローラ1304のすべての構成要素が含まれるが、タッチ信号生データは処理せずにまたは削減された処理によってサブシステム1306に渡される。一部の実施形態において、タッチ信号生データの処理は、ユニット1320とサブシステム1306との間に分散される。   In some embodiments, the processing of raw touch signal data is handled by subsystem 1306 rather than unit 1320. In some such embodiments, control 1304 or one or more components of control 1304, eg, unit 1320, may be omitted. In other such embodiments, the controller 1304 and / or all components of the controller 1304 are included, but the touch signal raw data is passed to the subsystem 1306 without processing or with reduced processing. In some embodiments, processing of the touch signal raw data is distributed between unit 1320 and subsystem 1306.

モバイルタッチスクリーンデバイス1300は、ディスプレイインターフェース1312に情報を送信し、マルチコアアプリケーションプロセッササブシステム1306に結合されるディスプレイプロセッサおよびコントローラユニット1326も含む。モバイルタッチスクリーンデバイス1300は、オンチップおよび外部メモリ1328と、アプリケーションデータムーバ1330と、マルチメディアおよびグラフィックス処理ユニット(GPU)1332と、その他のセンサシステム1334とをさらに含み、これらは、マルチコアアプリケーションプロセッササブシステム1306に結合される。オンチップおよび外部メモリ1328は、ディスプレイプロセッサおよびコントローラユニット1326と、アプリケーションデータムーバ1330とに結合される。アプリケーションデータムーバ1330は、マルチメディアおよびグラフィックス処理ユニット1332にも結合される。   Mobile touch screen device 1300 also includes a display processor and controller unit 1326 that transmits information to display interface 1312 and is coupled to multi-core application processor subsystem 1306. Mobile touch screen device 1300 further includes on-chip and external memory 1328, application data mover 1330, multimedia and graphics processing unit (GPU) 1332 and other sensor system 1334, which are multi-core application processors. Coupled to subsystem 1306. On-chip and external memory 1328 is coupled to a display processor and controller unit 1326 and an application data mover 1330. Application data mover 1330 is also coupled to a multimedia and graphics processing unit 1332.

図12は、タッチスクリーンデバイス1400の静電容量式タッチ処理データ経路の例を示す。タッチスクリーンデバイス1400は、電力管理集積回路(PMIC: power management integrated circuit)およびタッチ感知駆動電源ユニット1406から駆動信号を受信する駆動制御回路1404に結合されるタッチスキャン制御ユニット1402を有する。駆動制御回路1404は、最上部電極1408に結合される。静電容量式タッチスクリーンは、電極の2つの組を含み、第1の組は、最上部電極1408(または励起/駆動電極(exciter/driver electrode))を含み、第2の組は、最下部電極1410(またはセンサ電極)を含む。最上部電極1408は、最上部電極1408と最下部電極1410との間の静電容量によって最下部電極1410に結合される。最上部電極1408と最下部電極1410との間の静電容量は、電極静電容量(celectrode)1412、相互静電容量(cmutual)1414、およびタッチ静電容量(touch capacitance)(ctouch)1416を含む。ユーザタッチ静電容量(user touch capacitance)(CTOUCH)1418は、タッチスクリーンの最上部電極1408へのユーザのタッチが存在するときに形成され得る。最上部電極1408にユーザのタッチがあると、ユーザタッチ静電容量1418が、最上部電極1408の静電容量を誘起し、したがって、ユーザのタッチによって最上部電極1408の新しい放電経路を生む。たとえば、ユーザの指が最上部電極1408にタッチする前、最上部電極1408上の利用可能な電荷は、最下部電極1410に通される。タッチスクリーンへのユーザのタッチは、ユーザのタッチによる放電経路を生じ、したがって、ユーザタッチ静電容量1418を導入することによってタッチスクリーンの電荷の放電率を変える。ユーザのタッチによって生成されるユーザタッチ静電容量1418は、最上部電極1408と最下部電極1410との間の静電容量(たとえば、電極静電容量1412、相互静電容量1414、およびタッチ静電容量1416)を大きく超える可能性があり、したがって、最上部電極1408と最下部電極1410との間のその他の静電容量(たとえば、celectro
de1412、cmutual1414、およびctouch1416)に取って代わる可能性がある。
FIG. 12 shows an example of a capacitive touch processing data path for the touch screen device 1400. The touch screen device 1400 has a touch scan control unit 1402 coupled to a power management integrated circuit (PMIC) and a drive control circuit 1404 that receives drive signals from a touch sensitive drive power supply unit 1406. Drive control circuit 1404 is coupled to the top electrode 1408. The capacitive touch screen includes two sets of electrodes, the first set includes a top electrode 1408 (or exciter / driver electrode), and the second set includes a bottom An electrode 1410 (or sensor electrode) is included. The top electrode 1408 is coupled to the bottom electrode 1410 by the capacitance between the top electrode 1408 and the bottom electrode 1410. The capacitance between the top electrode 1408 and the bottom electrode 1410 includes electrode capacitance (celectrode) 1412, mutual capacitance (cmutual) 1414, and touch capacitance (ctouch) 1416. Including. User touch capacitance (CTOUCH) 1418 may be formed when there is a user touch to the top electrode 1408 of the touch screen. When there is a user touch on the top electrode 1408, the user touch capacitance 1418 induces the capacitance of the top electrode 1408, thus creating a new discharge path for the top electrode 1408 by the user touch. For example, before the user's finger touches the top electrode 1408, the available charge on the top electrode 1408 is passed through the bottom electrode 1410. The user's touch on the touch screen creates a discharge path due to the user's touch, and thus changes the charge discharge rate of the touch screen by introducing user touch capacitance 1418. The user touch capacitance 1418 generated by the user touch is the capacitance between the top electrode 1408 and the bottom electrode 1410 (e.g., electrode capacitance 1412, mutual capacitance 1414, and touch capacitance). Capacity 1416), and thus other capacitances between the top electrode 1408 and the bottom electrode 1410 (e.g., celectro
may replace de1412, cmutual1414, and ctouch1416).

最下部電極1410は、電荷制御回路1420に結合される。電荷制御回路1420は、最上部電極1408および最下部電極1410から受信されるタッチ信号を制御し、制御された信号をタッチ変換ユニット1422に送信し、タッチ変換ユニット1422は、制御された信号を量子化のための適切な信号に変換する。タッチ変換ユニット1422は、変換された信号の量子化のために変換された信号をタッチ量子化ユニット1424に送信する。また、タッチ変換ユニット1422およびタッチ量子化ユニット1424は、タッチスキャン制御ユニット1402にも結合される。タッチ量子化ユニット1424は、量子化された信号をフィルタリング/雑音除去ユニット1426に送信する。フィルタリング/雑音除去ユニット1426における量子化された信号のフィルタリング/雑音除去の後、フィルタリング/雑音除去ユニット1426は、結果として生じる信号を感知補償ユニット1428とタッチプロセッサおよびデコーダユニット1430とに送信する。感知補償ユニット1428は、フィルタリング/雑音除去ユニット1426からの信号を用いて、感知補償を実行し、感知補償信号を電荷制御回路1420に与える。言い換えれば、感知補償ユニット1428は、電荷制御回路1420によって最上部電極1408および最下部電極1410におけるタッチ感知の感度を調整するために使用される。   The bottom electrode 1410 is coupled to the charge control circuit 1420. The charge control circuit 1420 controls the touch signal received from the uppermost electrode 1408 and the lowermost electrode 1410 and transmits the controlled signal to the touch conversion unit 1422. The touch conversion unit 1422 quantizes the controlled signal. Convert to a signal suitable for The touch conversion unit 1422 transmits the converted signal to the touch quantization unit 1424 for quantization of the converted signal. Touch conversion unit 1422 and touch quantization unit 1424 are also coupled to touch scan control unit 1402. Touch quantization unit 1424 transmits the quantized signal to filtering / noise removal unit 1426. After filtering / denoising the quantized signal in filtering / denoising unit 1426, filtering / denoising unit 1426 transmits the resulting signal to sense compensation unit 1428 and touch processor and decoder unit 1430. The sensing compensation unit 1428 performs sensing compensation using the signal from the filtering / noise removal unit 1426 and provides the sensing compensation signal to the charge control circuit 1420. In other words, the sensing compensation unit 1428 is used by the charge control circuit 1420 to adjust the sensitivity of touch sensing at the top electrode 1408 and the bottom electrode 1410.

タッチプロセッサおよびデコーダユニット1430は、クロックおよびタイミング回路1438と通信し、クロックおよびタイミング回路1438は、タッチスクリーン制御ユニット1402と通信する。タッチプロセッサおよびデコーダユニット1430は、フィルタリング/雑音除去ユニット1426から結果として生じる信号を受信するタッチ参照推定、基準決定、および適合ユニット1432と、タッチイベント検出およびセグメント分割ユニット1434と、タッチ座標およびサイズ計算ユニット1436とを含む。タッチ参照推定、基準決定、および適合ユニット1432は、タッチイベント検出およびセグメント分割ユニット1434に結合され、タッチイベント検出およびセグメント分割ユニット1434は、タッチ座標およびサイズ計算ユニット1436に結合される。タッチプロセッサおよびデコーダユニット1430は、HLOSによる小型コプロセッサ/マルチコアアプリケーションプロセッサ1440とも通信し、HLOSによる小型コプロセッサ/マルチコアアプリケーションプロセッサ1440は、タッチプリミティブ検出ユニット1442と、タッチプリミティブ追跡ユニット1444と、シンボルIDおよびジェスチャ認識ユニット1446とを含む。タッチプリミティブ検出ユニット1442は、タッチ座標およびサイズ計算ユニット1436から信号を受信してタッチプリミティブの検出を実行し、それから、タッチプリミティブ検出ユニット1442に結合されたタッチプリミティブ追跡ユニット1444が、タッチプリミティブの追跡を実行する。タッチプリミティブ追跡ユニット1444に結合されたシンボルIDおよびジェスチャ認識ユニット1446は、シンボルIDおよび/またはジェスチャの認識を実行する。   Touch processor and decoder unit 1430 communicates with clock and timing circuit 1438, which communicates with touch screen control unit 1402. Touch processor and decoder unit 1430 receives the resulting signal from filtering / denoising unit 1426, touch reference estimation, criteria determination and adaptation unit 1432; touch event detection and segmentation unit 1434; touch coordinates and size calculation Unit 1436 is included. Touch reference estimation, criteria determination and adaptation unit 1432 is coupled to touch event detection and segmentation unit 1434, and touch event detection and segmentation unit 1434 is coupled to touch coordinate and size calculation unit 1436. Touch processor and decoder unit 1430 also communicates with HLOS small coprocessor / multicore application processor 1440, HLOS small coprocessor / multicore application processor 1440 includes touch primitive detection unit 1442, touch primitive tracking unit 1444, symbol ID And a gesture recognition unit 1446. Touch primitive detection unit 1442 receives signals from touch coordinate and size calculation unit 1436 and performs touch primitive detection, and then touch primitive tracking unit 1444 coupled to touch primitive detection unit 1442 tracks touch primitives. Execute. A symbol ID and gesture recognition unit 1446 coupled to the touch primitive tracking unit 1444 performs symbol ID and / or gesture recognition.

様々なタッチ感知技術が、タッチスクリーン技術で使用される。タッチ静電容量感知技術は、電界感知、電荷移動(charge transfer)、感圧抵抗、弛張発振器、静電容量デジタル変換(CDC: capacitance-to-digital conversion)、デュアルランプ(dual ramp)、シグマデルタ変調、およびシングルスロープADCを用いた逐次比較(successive approximation)を含み得る。今日の投影型静電容量(P-CAP)タッチスクリーンコントローラで使用されるタッチ静電容量感知技術は、周波数に基づくタッチ静電容量測定、時間に基づくタッチ静電容量測定、および電圧に基づくタッチ静電容量測定を含む。   Various touch sensing technologies are used in touch screen technology. Touch capacitance sensing technology includes electric field sensing, charge transfer, pressure sensitive resistor, relaxation oscillator, capacitance-to-digital conversion (CDC), dual ramp, sigma delta Modulation and successive approximation using a single slope ADC may be included. Touch capacitive sensing technology used in today's projected capacitive (P-CAP) touch screen controllers includes frequency-based touch capacitance measurement, time-based touch capacitance measurement, and voltage-based touch. Includes capacitance measurement.

周波数に基づく測定においては、タッチキャパシタ(touch capacitor)が、RC発振器を生成するために使用され、それから、時定数、周波数、および/または周期が測定される。周波数に基づく測定は、弛張発振器を用いる第1の方法、周波数変調を用いる第2の方法、および同期復調器を用いる第3の方法を含む。弛張発振器を用いる第1の方法は、センサキャパシタを発振器のタイミング要素として用いる。周波数変調を用いる第2の方法においては、静電容量式感知モジュールが、一定の電流源/シンクを使用して発振器の周波数を制御する。同期復調器を用いる第3の方法は、正弦波発生源によって静電容量を励起し、キャパシタに結合された同期復調器の4線レシオメトリック(four-wire ratiometric)によってキャパシタの電流および電圧を測定することによってキャパシタのACインピーダンスを測定する。   In frequency based measurements, a touch capacitor is used to generate an RC oscillator, from which time constant, frequency, and / or period are measured. Frequency-based measurements include a first method using a relaxation oscillator, a second method using frequency modulation, and a third method using a synchronous demodulator. The first method using a relaxation oscillator uses a sensor capacitor as the oscillator timing element. In a second method using frequency modulation, a capacitive sensing module uses a constant current source / sink to control the oscillator frequency. The third method, using a synchronous demodulator, excites the capacitance with a sine wave source and measures the capacitor's current and voltage with the four-wire ratiometric of the synchronous demodulator coupled to the capacitor. To measure the AC impedance of the capacitor.

時間に基づく測定は、タッチ静電容量に時間的に依存する充電/放電を測定する。時間に基づく測定は、抵抗キャパシタ充電タイミング、電荷移動、および逐次比較レジスタ(SAR)を用いるキャパシタ充電タイミングを用いる方法を含む。抵抗キャパシタ充電タイミングを用いる方法は、一定電圧に対するセンサキャパシタの充電/放電時間を測定する。電荷移動を用いる方法においては、センサキャパシタを充電し、数サイクルにわたって電荷を積分すること、ADC、または基準電圧との比較が、充電時間を決定する。多くの電荷移動の技術は、シグマデルタADCに似ている。SARを用いるキャパシタ充電タイミングを用いる方法においては、センサキャパシタを通る電流を変化させることが、基準ランプ(reference ramp)に一致する。   Time-based measurements measure charge / discharge that is time dependent on touch capacitance. Time-based measurements include methods using resistive capacitor charge timing, charge transfer, and capacitor charge timing using a successive approximation register (SAR). The method using resistance capacitor charging timing measures the charging / discharging time of the sensor capacitor with respect to a constant voltage. In methods using charge transfer, charging the sensor capacitor and integrating the charge over several cycles, comparing to an ADC, or a reference voltage determines the charging time. Many charge transfer techniques are similar to sigma delta ADCs. In the method using capacitor charging timing using SAR, changing the current through the sensor capacitor corresponds to a reference ramp.

電圧に基づく測定は、ユーザのタッチを感知するために電圧の大きさを監視する。電圧に基づく測定は、充電時間測定ユニット、充電電圧測定ユニット、および容量分圧(capacitance voltage divide)を用いる方法を含む。充電時間測定ユニットを用いる方法は、一定の電流源によってタッチキャパシタを充電し、電圧の閾値に達する時間を測定する。充電電圧測定ユニットを用いる方法は、知られている時間、一定の電流源からキャパシタを充電し、キャパシタの電圧を測定する。充電電圧測定ユニットを用いる方法は、電圧を測定するために極めて少ない電流、高精度の電流源、および高インピーダンス入力を必要とする。容量分圧を用いる方法は、基準キャパシタに対するセンサキャパシタの比を電圧に変換する(静電容量式分圧(Capacitive-Voltage-Divide))電荷増幅器を用いる。容量分圧を用いる方法は、精密な低静電容量センサとインターフェースをとるための最も普通の方法である。   Voltage based measurements monitor the magnitude of the voltage to sense the user's touch. The voltage based measurement includes a charging time measuring unit, a charging voltage measuring unit, and a method using a capacity voltage divide. The method using the charging time measurement unit charges the touch capacitor with a constant current source and measures the time to reach the voltage threshold. The method using a charging voltage measuring unit charges a capacitor from a constant current source for a known time and measures the voltage of the capacitor. The method using the charging voltage measurement unit requires very little current, a highly accurate current source, and a high impedance input to measure the voltage. The method using capacitive voltage division uses a charge amplifier that converts the ratio of the sensor capacitor to the reference capacitor into a voltage (Capacitive-Voltage-Divide). The method using capacitive partial pressure is the most common method for interfacing with precision low capacitance sensors.

図13は、モバイルハンドセットアーキテクチャのディスプレイおよびタッチサブシステムのさらに詳しい図を示す。モバイルハンドセット1500は、タッチスクリーンディスプレイユニット1502、タッチスクリーンコントローラ1504、およびHLOSによるマルチコアアプリケーションプロセッササブシステム1506を含む。タッチスクリーンディスプレイユニット1502は、タッチスクリーンコントローラ1504に結合されたタッチパネルモジュール(TPM)ユニット1508、ディスプレイドライバ1510、およびディスプレイドライバ1510に結合されるディスプレイパネル1512を含む。モバイルハンドセット1500は、システムメモリ1514も含み、システムメモリ1514に結合されたユーザアプリケーションおよび2D/3Dグラフィックス/グラフィック効果(GFX)エンジンユニット1516と、マルチメディア映像、カメラ/ビジョンエンジン/プロセッサユニット1518と、ダウンストリームディスプレイスケーラ(downstream display scaler)1520とをさらに含む。ユーザアプリケーションおよび2D/3D GFXエンジンユニット1516は、ディスプレイオーバーレイ/合成器1522と通信し、ディスプレイオーバーレイ/合成器1522は、ディスプレイ映像分析ユニット1524と通信する。ディスプレイ映像分析ユニット1524は、ディスプレイ依存最適化およびリフレッシュ制御ユニット1526と通信し、ディスプレイ依存最適化およびリフレッシュ制御ユニット1526は、ディスプレイコントローラおよびインターフェースユニット1528と通信する。ディスプレイコントローラおよびインターフェースユニット1528は、ディスプレイドライバ1510と通信する。マルチメディア映像、カメラ/ビジョンエンジン/プロセッサユニット1518は、フレームレートアップコンバータ(FRU)、デインターレース、スケーリング/回転構成要素1530と通信し、フレームレートアップコンバータ(FRU)、デインターレース、スケーリング/回転構成要素1530は、ディスプレイオーバーレイ/合成器1522と通信する。ダウンストリームディスプレイスケーラ1520は、ダウンストリームディスプレイオーバーレイ/合成器1532と通信し、ダウンストリームディスプレイオーバーレイ/合成器1532は、ダウンストリームディスプレイプロセッサ/エンコーダユニット1534と通信する。ダウンストリームディスプレイプロセッサ/エンコーダユニット1534は、有線/ワイヤレスディスプレイインターフェース1536と通信する。HLOSによるマルチコアアプリケーションプロセッササブシステム1506は、ディスプレイ映像分析ユニット1524、ディスプレイ依存最適化およびリフレッシュ制御ユニット1526、ディスプレイコントローラおよびインターフェースユニット1528、FRU、デインターレース、スケーリング/回転構成要素1530、ダウンストリームディスプレイオーバーレイ/合成器1532、ダウンストリームディスプレイプロセッサ/エンコーダユニット1534、ならびに有線/ワイヤレスディスプレイインターフェース1536と通信する。モバイルハンドセット1500は、ディスプレイドライバ1510、タッチスクリーンコントローラ1504、およびHLOSによるマルチコアアプリケーションプロセッササブシステム1506と結合されたバッテリ管理システム(BMS)およびPMICユニット1538も含む。   FIG. 13 shows a more detailed view of the display and touch subsystem of the mobile handset architecture. The mobile handset 1500 includes a touch screen display unit 1502, a touch screen controller 1504, and a multi-core application processor subsystem 1506 by HLOS. Touch screen display unit 1502 includes a touch panel module (TPM) unit 1508 coupled to touch screen controller 1504, a display driver 1510, and a display panel 1512 coupled to display driver 1510. The mobile handset 1500 also includes a system memory 1514, a user application and 2D / 3D graphics / graphic effects (GFX) engine unit 1516 coupled to the system memory 1514, and a multimedia video, camera / vision engine / processor unit 1518. And a downstream display scaler 1520. User application and 2D / 3D GFX engine unit 1516 communicates with display overlay / synthesizer 1522, which in turn communicates with display video analysis unit 1524. Display video analysis unit 1524 communicates with display dependent optimization and refresh control unit 1526, and display dependent optimization and refresh control unit 1526 communicates with display controller and interface unit 1528. Display controller and interface unit 1528 communicates with display driver 1510. Multimedia video, camera / vision engine / processor unit 1518 communicates with frame rate upconverter (FRU), deinterlace, scaling / rotation component 1530, frame rate upconverter (FRU), deinterlace, scaling / rotation configuration Element 1530 communicates with display overlay / synthesizer 1522. Downstream display scaler 1520 communicates with downstream display overlay / synthesizer 1532, and downstream display overlay / synthesizer 1532 communicates with downstream display processor / encoder unit 1534. Downstream display processor / encoder unit 1534 communicates with wired / wireless display interface 1536. Multi-core application processor subsystem 1506 by HLOS, display video analysis unit 1524, display dependent optimization and refresh control unit 1526, display controller and interface unit 1528, FRU, deinterlace, scaling / rotation component 1530, downstream display overlay / It communicates with a synthesizer 1532, a downstream display processor / encoder unit 1534, and a wired / wireless display interface 1536. The mobile handset 1500 also includes a battery management system (BMS) and PMIC unit 1538 coupled with a display driver 1510, a touch screen controller 1504, and a multi-core application processor subsystem 1506 by HLOS.

タッチスクリーンにおけるタッチの正確な感知のための知られている課題がある。たとえば、タッチ静電容量が、タッチの媒体に依存して小さい可能性がある。タッチ静電容量は、高い出力インピーダンスで感知される。さらに、タッチトランスデューサ(touch transducer)は、大きな寄生および雑音の環境をともなうプラットフォームで動作することが多い。加えて、タッチトランスデューサは、オフセットによって歪められる可能性があり、タッチトランスデューサのダイナミックレンジは、DCバイアスによって制限される可能性がある。   There is a known problem for accurate sensing of touch on a touch screen. For example, the touch capacitance may be small depending on the touch medium. Touch capacitance is sensed with high output impedance. In addition, touch transducers often operate on platforms with large parasitic and noisy environments. In addition, touch transducers can be distorted by offsets, and the dynamic range of touch transducers can be limited by DC bias.

いくつかの要因が、タッチスクリーンの信号品質に影響を与える可能性がある。タッチスクリーンパネルで、信号品質は、タッチ感知の種類、解像度、タッチセンサのサイズ、曲線因子(fill factor)、タッチパネルモジュールの統合の構成(たとえば、アウトセル型、オンセル型、インセル型など)、およびスキャンのオーバーヘッドによって影響される可能性がある。手/指またはスタイラスなどのタッチの媒体の種類、およびタッチのサイズ、ならびにタッチ感知の効率および相互コンダクタンスの利得などの応答性が、信号品質に影響を与える可能性がある。さらに、感度、直線性、ダイナミックレンジ、および飽和レベルが、信号品質に影響を与える可能性がある。加えて、無タッチ信号雑音(たとえば、熱および基板雑音)、決まったパターンの雑音(たとえば、タッチパネルの空間的非一様性)、ならびに時間的雑音(たとえば、EMI/RFI、電源雑音、ディスプレイの雑音、使用の雑音、使用環境の雑音)などの雑音が、信号品質に影響を与える可能性がある。   Several factors can affect the signal quality of the touch screen. On touch screen panels, signal quality, touch sensing type, resolution, touch sensor size, fill factor, touch panel module integration configuration (e.g., out-cell, on-cell, in-cell, etc.) and scan May be affected by the overhead. The type of touch media, such as the hand / finger or stylus, and the size of the touch, as well as responsiveness such as touch sensing efficiency and transconductance gain, can affect signal quality. In addition, sensitivity, linearity, dynamic range, and saturation level can affect signal quality. In addition, no-touch signal noise (e.g. thermal and board noise), fixed pattern noise (e.g. touch panel spatial non-uniformity), and temporal noise (e.g. EMI / RFI, power supply noise, display noise) Noise, noise in use, noise in use environment) can affect signal quality.

タッチ信号の信号対雑音比(SNR)を最適化するためによく使用される1つの手法は、浮遊容量を最小化すること、センサパネルを超えて広がる導電性オーバーレイを避けること、センサのサイズおよび隣接するセンサとの近さを最大化すること、オーバーレイの厚さを最小化すること、ならびにTPMの積み重なりの空隙を最小化することによって設計の堅牢性を向上させることである。タッチ信号のSNRを最適化するためによく使用される別の手法は、基準決定である。基準決定手法は、TPMの積み重なりの仕様と、使用環境の特徴と、プラットフォームコンテキスト(platform context)と、タッチトランスデューサおよびコンバータの性能とを考慮する。TPMの積み重なりの仕様は、アウトセル/オンセル/インセル&ディスプレイの種類、タッチスクリーンコントローラ(TSC)の場所(プリント回路基板(PCB)、フレックス(flex)、基板、またはガラス)、オーバーレイの非一様性、空隙、および接着剤に関する情報を含む。使用環境の特徴は、汚染物質、温度、湿度、環境光を含む。プラットフォームコンテキストは、バッテリの充電の状態/電圧の状態(SOC/SOV)およびデバイスの動力学(たとえば、加速度計、ジャイロスコープ)を含む。充電の状態は、バッテリがどのように充電しているかを示す可能性があり、バッテリが「いっぱい」状態に達し得るときを推定するために使用される可能性がある。電圧の状態は、バッテリの容量(たとえば、バッテリがどれだけの充電/バッテリの蓄積を有するか)を示す可能性があり、バッテリの種類に依存する可能性がある。タッチトランスデューサおよびコンバータの性能は、感度、飽和レベル、ダイナミックレンジ、および直線性を含む。   One commonly used technique to optimize the signal-to-noise ratio (SNR) of touch signals is to minimize stray capacitance, avoid conductive overlay that extends beyond the sensor panel, sensor size and To increase the robustness of the design by maximizing proximity to adjacent sensors, minimizing overlay thickness, and minimizing TPM stacking voids. Another technique that is often used to optimize the SNR of touch signals is reference determination. The reference determination approach takes into account TPM stack specifications, usage environment characteristics, platform context, and touch transducer and converter performance. TPM stack specifications include out-cell / on-cell / in-cell & display type, touch screen controller (TSC) location (printed circuit board (PCB), flex, board, or glass), overlay non-uniformity , Information about voids, and adhesives. Features of the usage environment include pollutants, temperature, humidity, and ambient light. The platform context includes battery charge state / voltage state (SOC / SOV) and device dynamics (eg, accelerometer, gyroscope). The state of charge may indicate how the battery is charging and may be used to estimate when the battery can reach a “full” state. The voltage status may indicate the capacity of the battery (eg, how much charge / battery the battery has) and may depend on the battery type. Touch transducer and converter performance includes sensitivity, saturation level, dynamic range, and linearity.

少なくとも上で検討された理由で、たとえば、タッチスクリーンにおける正確なタッチ感知を実現して、タッチセンサまたはディスプレイにもたらされる可能性がある雑音を補償するための効果的な手法が、望まれる。たとえば、望ましくない雑音および誤タッチを拒絶するための信号閾値レベルの推定が、有効なタッチを抽出する際に有益である可能性がある。雑音の多い状況では、閾値判定が難しくなり、誤タッチにつながることが多い。   For at least the reasons discussed above, an effective approach is desired, for example, to achieve accurate touch sensing on a touch screen to compensate for noise that may be introduced to the touch sensor or display. For example, estimating signal threshold levels to reject unwanted noise and false touches can be beneficial in extracting valid touches. In a noisy situation, threshold determination is difficult and often leads to erroneous touches.

閾値判定をシグナリングするための堅牢で適応的な方法を含む本明細書の実施形態が、ここで導入される。これらの方法は、タッチデータの各フレームの信号レベルに適合し得る。さらに、信号の閾値が、雑音の多い状況で高い信頼性で決定され得る。そのような決定は、知られている方法よりも少ない計算ステップによって実現される可能性があり、たとえば、スマートフォンのその他のタッチ処理システムが使い物にならなくされる場合に雑音に対して堅牢である可能性がある。そのような実施形態および/または閾値判定および/または本明細書の任意のその他の実施形態は、たとえば、図12〜図15に示された要素1202、1220、1218、1304、1306、1320、1324、1326、1402、1422、1424、1426、1428、1430、1432、1434、1440、1442、1444、1446、1504、および/もしくは1506、ならびに/または1つもしくは複数の構成要素のうちの1つまたは複数によって実行され得る。   Embodiments herein including a robust and adaptive method for signaling threshold decisions are introduced here. These methods can be adapted to the signal level of each frame of touch data. Furthermore, the signal threshold can be determined reliably in noisy situations. Such a determination may be realized with fewer computational steps than known methods, for example, robust against noise when other touch processing systems on smartphones are rendered useless there is a possibility. Such embodiments and / or threshold determinations and / or any other embodiments herein may include, for example, elements 1202, 1220, 1218, 1304, 1306, 1320, 1324 shown in FIGS. 1326, 1402, 1422, 1424, 1426, 1428, 1430, 1432, 1434, 1440, 1442, 1444, 1446, 1504, and / or 1506, and / or one or more of one or more components Can be performed by multiple.

図14は、信号の閾値判定の方法の流れ図である。図14に示された動作は、図12〜図15に示された要素1202、1220、1218、1304、1306、1320、1324、1326、1402、1422、1424、1426、1428、1430、1432、1434、1440、1442、1444、1446、1504、および/もしくは1506、ならびに/または1つもしくは複数の構成要素のうちの1つまたは複数、あるいはこれらの任意の組合せによって実行され得る。   FIG. 14 is a flowchart of a signal threshold determination method. The operations shown in FIG. 14 are the same as the elements 1202, 1220, 1218, 1304, 1306, 1320, 1324, 1326, 1402, 1422, 1424, 1426, 1428, 1430, 1432, 1434 shown in FIGS. , 1440, 1442, 1444, 1446, 1504, and / or 1506, and / or one or more of one or more components, or any combination thereof.

雑音基準決定画像(noise baselined image)などの画像から、タッチフレームの最小および最大が決定される(ステップ1610)。それから、最大-最小が計算される(ステップ1620)。その後、1つもしくは複数のブロッブの場所および/またはブロッブの場所の数が決定される(ステップ1630)。一部の実施形態において、連結成分アルゴリズム(connected components algorithm)が使用される。一部の実施形態において、連結成分アルゴリズムは、同じまたは同様の値を有する連結された要素(たとえば、画像のピクセル)の領域を発見または決定する。   The minimum and maximum touch frames are determined from an image such as a noise baselined image (step 1610). The maximum-minimum is then calculated (step 1620). Thereafter, one or more blob locations and / or number of blob locations are determined (step 1630). In some embodiments, a connected components algorithm is used. In some embodiments, the connected component algorithm finds or determines regions of connected elements (eg, pixels of the image) that have the same or similar values.

さらに、ピークの場所(X, Y)および関連する値(V)が、各ブロッブで決定され得る(ステップ1640)。加えて、値(V1, V2...VN)が抽出され、たとえば(VS_1, VS_2, ...VS_N)として整列させられる可能性がある(ステップ1650)。この整列により、連続するサンプルの間の差、たとえば(VS_1-VS_2, .....VS_N-1-VS_N)が、決定される可能性があり、ピークおよび関連するVが、決定される可能性がある(ステップ1660)。Vは、タッチが発生したかどうかを判定するための信号の閾値として設定され得る。   Further, the peak location (X, Y) and associated value (V) can be determined for each blob (step 1640). In addition, values (V1, V2 ... VN) may be extracted and aligned, for example as (VS_1, VS_2, ... VS_N) (step 1650). With this alignment, the difference between successive samples, for example (VS_1-VS_2, ..... VS_N-1-VS_N) can be determined, and the peak and associated V can be determined There is sex (step 1660). V may be set as a signal threshold for determining whether a touch has occurred.

図15は、信号の閾値判定の方法の流れ図である。図15に示された動作は、図12〜図15に示された要素1202、1220、1218、1304、1306、1320、1324、1326、1402、1422、1424、1426、1428、1430、1432、1434、1440、1442、1444、1446、1504、および/もしくは1506、ならびに/または1つもしくは複数の構成要素のうちの1つまたは複数、あるいはこれらの任意の組合せによって実行され得る。   FIG. 15 is a flowchart of a method for determining a threshold value of a signal. The operations shown in FIG. 15 are the same as the elements 1202, 1220, 1218, 1304, 1306, 1320, 1324, 1326, 1402, 1422, 1424, 1426, 1428, 1430, 1432, 1434 shown in FIGS. , 1440, 1442, 1444, 1446, 1504, and / or 1506, and / or one or more of one or more components, or any combination thereof.

雑音基準決定画像などの画像から、タッチフレームの最小および最大が決定される(ステップ1710)。それから、最大-最小が計算される(ステップ1720)。その後、1つもしくは複数のブロッブの場所および/またはブロッブの場所の数が決定される(ステップ1730)。一部の実施形態において、連結成分アルゴリズムが使用される。一部の実施形態において、連結成分アルゴリズムは、同じまたは同様の値を有する連結された要素(たとえば、画像のピクセル)の領域を発見または決定する。   The minimum and maximum touch frames are determined from an image, such as a noise reference determined image (step 1710). The maximum-minimum is then calculated (step 1720). Thereafter, one or more blob locations and / or the number of blob locations is determined (step 1730). In some embodiments, a connected component algorithm is used. In some embodiments, the connected component algorithm finds or determines regions of connected elements (eg, pixels of the image) that have the same or similar values.

さらに、各ブロッブのピークの場所および値が、決定され得る(ステップ1740)。信号の閾値は、ピークの値に初期化またはそうでなければ設定される可能性があり、閾値を超える値を有するブロッブの数が監視および/または計算される間にデクリメントされる可能性がある(ステップ1750)。ブロッブの数が増加する場合、閾値は、前の閾値である可能性がある(ステップ1760)。したがって、信号の閾値は、これらの動作に基づいて設定され得る。   In addition, the location and value of each blob's peak can be determined (step 1740). The signal threshold may be initialized or otherwise set to the peak value and may be decremented while the number of blobs with values exceeding the threshold is monitored and / or calculated (Step 1750). If the number of blobs increases, the threshold may be the previous threshold (step 1760). Thus, the signal threshold can be set based on these operations.

上で検討された方法、システム、およびデバイスは、例である。様々な実施形態は、必要に応じて様々な手順または構成要素を省略するか、置き換えるか、または追加する可能性がある。たとえば、代替的な構成において、上述の方法は、説明された順序とは異なる順序で実行される可能性があり、ならびに/または様々な段階が、追加されるか、省略されるか、および/もしくは組み合わされる可能性がある。また、特定の実施形態に関連して説明された特徴が、様々なその他の実施形態で組み合わされる可能性がある。実施形態の異なる態様および要素が、同様にして組み合わされる可能性がある。また、技術は発展し、したがって、要素のうちの多くは例であり、それらの例は、本開示の範囲をそれらの特定の例に限定しない。   The methods, systems, and devices discussed above are examples. Various embodiments may omit, replace, or add various procedures or components as needed. For example, in alternative configurations, the methods described above may be performed in a different order than that described, and / or various steps may be added, omitted, and / or Or they may be combined. Also, the features described in connection with a particular embodiment may be combined in various other embodiments. Different aspects and elements of the embodiments may be combined in a similar manner. Also, technology has evolved, and thus many of the elements are examples, and these examples do not limit the scope of the present disclosure to those specific examples.

特定の詳細が、実施形態を完全に理解させるために説明で与えられている。しかし、実施形態は、これらの特定の詳細なしに実施され得る。たとえば、よく知られている回路と、プロセスと、アルゴリズムと、構造と、技術とは、実施形態を曖昧にすることを避けるために不必要な詳細なしに示された。この説明は、例示的な実施形態を提供するに過ぎず、本発明の範囲、適用可能性、または構成を限定するように意図されていない。むしろ、実施形態の前述の説明は、本発明の実施形態を実装するための実施を可能にする説明を当業者に与える。本開示の精神および範囲を逸脱することなく、要素の機能と構成とに様々な変更がなされ得る。   Specific details are given in the description to provide a thorough understanding of the embodiments. However, embodiments may be practiced without these specific details. For example, well-known circuits, processes, algorithms, structures, and techniques have been shown without unnecessary detail in order to avoid obscuring the embodiments. This description merely provides exemplary embodiments and is not intended to limit the scope, applicability, or configuration of the invention. Rather, the foregoing description of the embodiments provides those skilled in the art with an enabling description for implementing embodiments of the invention. Various changes may be made in the function and configuration of the elements without departing from the spirit and scope of the disclosure.

また、一部の実施形態は、流れ図またはブロック図として示されたプロセスとして説明されている。それぞれは動作を連続的なプロセスとして示す可能性があるが、動作の多くは、並列的にまたは同時に実行され得る。加えて、動作の順序は、再編成され得る。プロセスは、図に含まれない追加のステップを有する可能性がある。さらに、方法の実施形態は、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語、またはこれらの任意の組合せによって実装される可能性がある。ソフトウェア、ファームウェア、ミドルウェア、またはマイクロコードで実装されるとき、関連するタスクを実行するためのプログラムコードまたはコードセグメントは、記憶媒体などのコンピュータ可読媒体に記憶される可能性がある。プロセッサは、関連するタスクを実行し得る。したがって、上述の説明において、コンピュータシステムによって実行されるものとして説明されている機能または方法は、機能または方法を実行するように構成されたプロセッサ--たとえば、プロセッサ110--によって実行され得る。さらに、そのような機能または方法が、1つまたは複数のコンピュータ可読媒体に記憶された命令を実行するプロセッサによって実行される可能性がある。   Also, some embodiments are described as processes shown as flow diagrams or block diagrams. Each may represent the operations as a continuous process, but many of the operations may be performed in parallel or concurrently. In addition, the order of operations can be rearranged. The process may have additional steps not included in the figure. Further, method embodiments may be implemented by hardware, software, firmware, middleware, microcode, hardware description language, or any combination thereof. When implemented in software, firmware, middleware, or microcode, program code or code segments for performing related tasks may be stored on a computer-readable medium, such as a storage medium. The processor may perform related tasks. Thus, in the above description, the functions or methods described as being performed by a computer system may be performed by a processor configured to perform the functions or methods--eg, processor 110-. Further, such functions or methods may be performed by a processor executing instructions stored on one or more computer readable media.

いくつかの実施形態を説明したが、様々な修正と、代替的な構造と、均等物とが、本開示の精神から逸脱することなく使用され得る。たとえば、上記の要素は、より大きなシステムの構成要素であるに過ぎない可能性があり、他の規則が、本発明の応用よりも優先するか、またはそうでなければ本発明の応用を修正する可能性がある。また、いくつかのステップが、上記の要素が考慮される前に、間に、または後に開始される可能性がある。したがって、上の説明は、本開示の範囲を限定しない。   While several embodiments have been described, various modifications, alternative constructions, and equivalents may be used without departing from the spirit of the present disclosure. For example, the above elements may only be components of a larger system, and other rules take precedence over or otherwise modify the application of the present invention. there is a possibility. Also, some steps may be started before, during, or after the above factors are considered. Accordingly, the above description does not limit the scope of the disclosure.

様々な例が説明された。これらのおよびその他の例は、添付の請求項の範囲に含まれる。   Various examples have been described. These and other examples are within the scope of the appended claims.

100 ポータブルデバイス
110 プロセッサ
130 ディスプレイ
140 入力デバイス
150 スピーカ
160 メモリ
170 静電容量式タッチパネル
180 デジタルタッチインターフェース
190 コンピュータ可読媒体
202 指
204 手
206 タッチプリミティブ
208 タッチプリミティブ
210 スタイラス
212 手のひら
214 指
216 スタイラスタッチプリミティブ
218 手のひらタッチプリミティブ
220 指タッチプリミティブ
400 タッチ信号処理アーキテクチャ
410 カーネル
411 タッチドライバIRQハンドラ
412 カーネルIRQハンドラ
413 リアルタイム生タッチ信号プロトコル処理ユニット
414 デジタルフィルタリングユニット
415 ガウスぼけ削減ユニット
416 ブロッブ分析ユニット
417 誤タッチ拒絶ユニット
418 最終タッチフィルタリングユニット
419 詳細タッチ補間ユニット
420 タッチ座標&サイズ計算ユニット
421 OS入力レイヤ
422 スタイラスドライバ
423 タッチインターフェースドライバ
430 タッチライブラリ
431 タッチライブラリ&ハードウェア抽象化レイヤ
432 タッチサービスライブラリ
433 タッチマネージャライブラリ
440 プラットフォームタッチスクリーンサブシステム
441 リアルタイム生タッチ信号インターフェース
442 プロトコル処理ユニット
443 タッチ活動&ステータス検出ユニット
444 能動的雑音拒絶ユニット
445 タッチ参照推定および基準決定&適合ユニット
446 相関サンプリングユニット
447 アナログフロントエンドユニット
448 スキャンエンジン
449 電力マネージャユニット
450 バッテリ、充電回路、および電力マネージャユニット
451 温度補償型水晶発振器(TCXO)、位相同期ループ(PLL)、およびクロックジェネレータ構成要素
452 クロックおよびタイミング回路
453 タッチサブシステム制御
454 タッチスクリーンパネルおよびインターフェース
460 スタイラスシグナリングプロセッサ
510 フレームA
520 フレームB
600 表
610 タッチの種類
612 大きなタッチ
614 スタイラスのタッチ
616 指のタッチ
620 タッチプリミティブの特徴
630 選択メカニズム
640 フレーム予約
650 スキャンレート
660 静電容量式タッチモード
670 タッチ感度
680 誤タッチ拒絶の範囲
690 最終フィルタリングモード
695 詳細補間モード
700 方法
800 方法
900 コンピュータシステム
902 バス
904 プロセッサ
906 非一時的記憶デバイス
908 入力デバイス
910 出力デバイス
912 通信サブシステム
914 オペレーティングシステム
916 アプリケーションプログラム
918 非一時的作業メモリ
1200 モバイルデバイスアーキテクチャ
1202 アプリケーションプロセッサ
1204 キャッシュ
1206 外部メモリ
1208 汎用グラフィックス処理ユニット(GPGPU)
1210 アプリケーションデータムーバ
1212 オンチップメモリ
1214 マルチスペクトルマルチビューイメージングコア修正/最適化/向上マルチメディアプロセッサおよびアクセラレータ構成要素
1216 オーディオコーデック、マイクロフォン、ヘッドフォン/イヤフォン、およびスピーカ構成要素
1218 ディスプレイプロセッサおよびコントローラ構成要素
1220 ドライバおよびコントローラを有するディスプレイ/タッチパネル構成要素
1222 外部インターフェースブリッジ
1224 外部ディスプレイ
1226 ワイヤレスディスプレイ接続
1228 接続プロセッサ
1230 3G/4Gモデム
1232 Wi-Fiモデム
1234 衛星測位システム(SPS)センサ
1236 Bluetooth(登録商標)モジュール
1238 周辺デバイスおよびインターフェース
1240 外部記憶モジュール
1242 セキュリティ構成要素
1244 バッテリモニタおよびプラットフォームリソース/電力マネージャ構成要素
1246 温度補償型水晶発振器(TCXO)、位相同期ループ(PLL)、およびクロックジェネレータ構成要素
1248 センサおよびユーザインターフェースデバイス構成要素
1250 光エミッタ
1252 イメージセンサ
1300 モバイルタッチスクリーンデバイス
1302 タッチスクリーンディスプレイユニット
1304 スタンドアロンのタッチスクリーンコントローラを用いるタッチスクリーンサブシステム
1306 高レベル出力仕様(HLOS)によるマルチコアアプリケーションプロセッササブシステム
1308 タッチスクリーンパネルおよびインターフェースユニット
1310 ディスプレイドライバおよびパネルユニット
1312 ディスプレイインターフェース
1314 アナログフロントエンド
1316 タッチ活動およびステータス検出ユニット
1318 割り込みジェネレータ
1320 タッチプロセッサおよびデコーダユニット
1322 クロックおよびタイミング回路
1324 ホストインターフェース
1326 ディスプレイプロセッサおよびコントローラユニット
1328 オンチップおよび外部メモリ
1330 アプリケーションデータムーバ
1332 マルチメディアおよびグラフィックス処理ユニット(GPU)
1334 その他のセンサシステム
1400 タッチスクリーンデバイス
1402 タッチスキャン制御ユニット
1404 駆動制御回路
1406 電力管理集積回路(PMIC)およびタッチ感知駆動電源ユニット
1408 最上部電極
1410 最下部電極
1412 電極静電容量(celectrode)
1414 相互静電容量(cmutual)
1416 タッチ静電容量(ctouch)
1418 ユーザタッチ静電容量(CTOUCH)
1420 電荷制御回路
1422 タッチ変換ユニット
1424 タッチ量子化ユニット
1426 フィルタリング/雑音除去ユニット
1428 感知補償ユニット
1430 タッチプロセッサおよびデコーダユニット
1432 タッチ参照推定、基準決定、および適合ユニット
1434 タッチイベント検出およびセグメント分割ユニット
1436 タッチ座標およびサイズ計算ユニット
1438 クロックおよびタイミング回路
1440 HLOSによる小型コプロセッサ/マルチコアアプリケーションプロセッサ
1442 タッチプリミティブ検出ユニット
1444 タッチプリミティブ追跡ユニット
1446 シンボルIDおよびジェスチャ認識ユニット
1500 モバイルハンドセット
1502 タッチスクリーンディスプレイユニット
1504 タッチスクリーンコントローラ
1506 HLOSによるマルチコアアプリケーションプロセッササブシステム
1508 タッチパネルモジュール(TPM)ユニット
1510 ディスプレイドライバ
1512 ディスプレイパネル
1514 システムメモリ
1516 ユーザアプリケーションおよび2D/3Dグラフィックス/グラフィック効果(GFX)エンジンユニット
1518 マルチメディア映像、カメラ/ビジョンエンジン/プロセッサユニット
1520 ダウンストリームディスプレイスケーラ
1522 ディスプレイオーバーレイ/合成器
1524 ディスプレイ映像分析ユニット
1526 ディスプレイ依存最適化およびリフレッシュ制御ユニット
1528 ディスプレイコントローラおよびインターフェースユニット
1530 フレームレートアップコンバータ(FRU)、デインターレース、スケーリング/回転構成要素
1532 ダウンストリームディスプレイオーバーレイ/合成器
1534 ダウンストリームディスプレイプロセッサ/エンコーダユニット
1536 有線/ワイヤレスディスプレイインターフェース
1538 バッテリ管理システム(BMS)およびPMICユニット
100 portable devices
110 processor
130 display
140 input devices
150 speakers
160 memory
170 Capacitive touch panel
180 digital touch interface
190 Computer-readable media
202 fingers
204 hands
206 Touch Primitive
208 touch primitives
210 Stylus
212 palm
214 fingers
216 Stylus Touch Primitive
218 Palm Touch Primitive
220 finger touch primitive
400 touch signal processing architecture
410 kernel
411 Touch driver IRQ handler
412 Kernel IRQ handler
413 Real-time raw touch signal protocol processing unit
414 Digital filtering unit
415 Gaussian blur reduction unit
416 Blob analysis unit
417 false touch rejection unit
418 Final touch filtering unit
419 Detailed Touch Interpolation Unit
420 Touch coordinate & size calculation unit
421 OS input layer
422 Stylus driver
423 touch interface driver
430 touch library
431 Touch Library & Hardware Abstraction Layer
432 Touch Service Library
433 Touch Manager Library
440 platform touchscreen subsystem
441 Real-time raw touch signal interface
442 Protocol processing unit
443 Touch Activity & Status Detection Unit
444 Active noise rejection unit
445 Touch reference estimation and standard determination & calibration unit
446 correlation sampling unit
447 Analog front end unit
448 scan engine
449 Power Manager Unit
450 Battery, charging circuit, and power manager unit
451 Temperature Compensated Crystal Oscillator (TCXO), Phase Locked Loop (PLL), and Clock Generator Components
452 Clock and Timing Circuit
453 Touch subsystem control
454 touch screen panel and interface
460 Stylus signaling processor
510 Frame A
520 Frame B
600 tables
610 Touch types
612 big touch
614 Touching the stylus
616 finger touch
620 Touch Primitive Features
630 Selection mechanism
640 frame reservation
650 scan rate
660 Capacitive touch mode
670 touch sensitivity
680 Range of false touch rejection
690 Final filtering mode
695 Detailed interpolation mode
700 methods
800 methods
900 computer system
902 bus
904 processor
906 Non-temporary storage device
908 input device
910 output device
912 Communication subsystem
914 operating system
916 application programs
918 Non-temporary working memory
1200 mobile device architecture
1202 Application processor
1204 cache
1206 External memory
1208 General-purpose graphics processing unit (GPGPU)
1210 Application data mover
1212 On-chip memory
1214 Multispectral Multiview Imaging Core Modification / Optimization / Enhancement Multimedia Processor and Accelerator Components
1216 audio codec, microphone, headphone / earphone, and speaker components
1218 Display processor and controller components
1220 Display / touch panel components with driver and controller
1222 External interface bridge
1224 External display
1226 Wireless display connection
1228 connected processor
1230 3G / 4G modem
1232 Wi-Fi modem
1234 Satellite Positioning System (SPS) sensor
1236 Bluetooth module
1238 Peripheral devices and interfaces
1240 External storage module
1242 Security components
1244 Battery Monitor and Platform Resource / Power Manager Components
1246 Temperature Compensated Crystal Oscillator (TCXO), Phase Locked Loop (PLL), and Clock Generator Components
1248 Sensor and user interface device components
1250 light emitter
1252 Image sensor
1300 mobile touchscreen device
1302 Touch screen display unit
1304 Touch Screen Subsystem with Standalone Touch Screen Controller
1306 Multi-core application processor subsystem with high-level output specification (HLOS)
1308 Touch screen panel and interface unit
1310 Display driver and panel unit
1312 Display interface
1314 Analog front end
1316 Touch activity and status detection unit
1318 Interrupt generator
1320 Touch processor and decoder unit
1322 Clock and Timing Circuit
1324 Host interface
1326 Display processor and controller unit
1328 On-chip and external memory
1330 Application data mover
1332 Multimedia and Graphics Processing Unit (GPU)
1334 Other sensor systems
1400 touch screen device
1402 Touch scan control unit
1404 Drive control circuit
1406 Power management integrated circuit (PMIC) and touch sensitive drive power supply unit
1408 Top electrode
1410 Bottom electrode
1412 Electrode capacitance (celectrode)
1414 Mutual capacitance (cmutual)
1416 Touch capacitance (ctouch)
1418 User touch capacitance (CTOUCH)
1420 Charge control circuit
1422 Touch conversion unit
1424 Touch quantization unit
1426 Filtering / Noise reduction unit
1428 Sensing compensation unit
1430 Touch processor and decoder unit
1432 Touch reference estimation, standard determination, and calibration unit
1434 Touch event detection and segmentation unit
1436 Touch coordinate and size calculation unit
1438 Clock and timing circuits
1440 HLOS small coprocessor / multicore application processor
1442 Touch Primitive Detection Unit
1444 Touch Primitive Tracking Unit
1446 Symbol ID and gesture recognition unit
1500 mobile handset
1502 Touch screen display unit
1504 touch screen controller
1506 Multi-core application processor subsystem with HLOS
1508 Touch Panel Module (TPM) unit
1510 Display driver
1512 display panel
1514 System memory
1516 User Application and 2D / 3D Graphics / Graphic Effects (GFX) Engine Unit
1518 Multimedia video, camera / vision engine / processor unit
1520 downstream display scaler
1522 Display overlay / synthesizer
1524 Display image analysis unit
1526 Display dependent optimization and refresh control unit
1528 Display controller and interface unit
1530 Frame rate upconverter (FRU), deinterlace, scaling / rotation components
1532 downstream display overlay / synthesizer
1534 Downstream display processor / encoder unit
1536 wired / wireless display interface
1538 Battery Management System (BMS) and PMIC unit

Claims (15)

タッチパネルのためのタッチ入力を認識するための方法であって、
第1のスキャンレートで、前記タッチパネル上の第1のタッチの結果として生じる第1のタッチパネルブロッブを含む第1のフレームにおいて前記タッチパネルをスキャンするステップと、
第2のスキャンレートで、前記タッチパネル上の第2のタッチの結果として生じる第2のタッチパネルブロッブを含む第2のフレームにおいて前記タッチパネルをスキャンするステップと、
第1のタッチ報告感度および第1の誤タッチ拒絶の直径の範囲に少なくとも部分的に基づいて前記第1のフレーム内の前記第1のタッチパネルブロッブを処理し、第2のタッチ報告感度および第2の誤タッチ拒絶の直径の範囲に少なくとも部分的に基づいて前記第2のフレーム内の前記第2のタッチパネルブロッブを処理するステップであって、前記第1の誤タッチ拒絶の直径の範囲は前記第2の誤タッチ拒絶の直径の範囲と異なり、前記第1のスキャンレートは前記第1のタッチ報告感度に基づき、前記第2のスキャンレートは前記第2のタッチ報告感度に基づく、ステップと、
前記処理するステップに少なくとも部分的に基づいて、前記第1のタッチパネルブロッブまたは前記第2のタッチパネルブロッブの何れかから生ずる有効なタッチが存在するかどうかを判定するステップとを含む、方法。
A method for recognizing touch input for a touch panel,
In the first scan rate, the steps of scanning the touch panel in a first frame including a first touch panel blob resulting from the first touch on the touch panel,
In the second scan rate, the steps of scanning the touch panel in the second frame including a second touch panel blob resulting from the second touch on the touch panel,
Process the first touch panel blob in the first frame based at least in part on a range of diameters of a first touch reporting sensitivity and a first false touch rejection, a second touch reporting sensitivity and a second Processing the second touch panel blob in the second frame based at least in part on a false touch rejection diameter range of the first false touch rejection diameter range, Unlike the range of false touch rejection diameters of 2, the first scan rate is based on the first touch reporting sensitivity and the second scan rate is based on the second touch reporting sensitivity; and
Determining whether there is a valid touch resulting from either the first touch panel blob or the second touch panel blob based at least in part on the processing step.
前記タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第3のフレームにおいて前記タッチパネルをスキャンするステップと、
第3のタッチ報告感度および第3の誤タッチ拒絶の直径の範囲に少なくとも部分的に基づいて前記第3のフレーム内の前記タッチパネルブロッブを処理するステップと、
前記処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかを判定するステップとをさらに含む請求項1に記載の方法。
A step of scanning the touch panel in the third frame including at least one touch panel blob resulting from the touch on the touch panel,
Processing the touch panel blob in the third frame based at least in part on a diameter range of a third touch reporting sensitivity and a third false touch rejection;
The method of claim 1, further comprising: determining whether a valid touch exists based at least in part on the processing step.
前記第1の誤タッチ拒絶の直径の範囲または前記第2の誤タッチ拒絶の直径の範囲のうちの少なくとも1つが、直径2ミリメートル未満であり、および直径19ミリメートルを超える請求項2に記載の方法。   The method of claim 2, wherein at least one of the first false touch rejection diameter range or the second false touch rejection diameter range is less than 2 millimeters in diameter and greater than 19 millimeters in diameter. . 前記処理するステップに少なくとも部分的に基づいて前記タッチパネルに対する前記タッチパネルブロッブの位置を決定するステップをさらに含む請求項1に記載の方法。   The method of claim 1, further comprising determining a position of the touch panel blob relative to the touch panel based at least in part on the processing step. 前記処理するステップが、前記タッチパネルのスキャンレートを調整するステップをさらに含む請求項1に記載の方法。   The method of claim 1, wherein the processing further comprises adjusting a scan rate of the touch panel. 前記処理するステップが、前記タッチパネルブロッブをフィルタリングし、補間するステップをさらに含む請求項1に記載の方法。   The method of claim 1, wherein the processing further comprises filtering and interpolating the touch panel blob. 前記第1の誤タッチ拒絶の直径の範囲または前記第2の誤タッチ拒絶の直径の範囲のうちの少なくとも1つが、直径19ミリメートル未満である請求項1に記載の方法。   2. The method of claim 1, wherein at least one of the first false touch rejection diameter range or the second false touch rejection diameter range is less than 19 millimeters in diameter. 前記第1の誤タッチ拒絶の直径の範囲または前記第2の誤タッチ拒絶の直径の範囲のうちの少なくとも1つが、直径2ミリメートルを超える請求項1に記載の方法。   2. The method of claim 1, wherein at least one of the first false touch rejection diameter range or the second false touch rejection diameter range is greater than 2 millimeters in diameter. タッチパネルのためのタッチ入力を認識するための装置であって、
第1のスキャンレートで、前記タッチパネル上の第1のタッチの結果として生じる第1のタッチパネルブロッブを含む第1のフレームにおいて前記タッチパネルをスキャンするための手段と、
第2のスキャンレートで、前記タッチパネル上の第2のタッチの結果として生じる第2のタッチパネルブロッブを含む第2のフレームにおいて前記タッチパネルをスキャンするための手段と、
第1のタッチ報告感度および第1の誤タッチ拒絶の直径の範囲に少なくとも部分的に基づいて前記第1のフレーム内の前記第1のタッチパネルブロッブを処理し、第2のタッチ報告感度および第2の誤タッチ拒絶の直径の範囲に少なくとも部分的に基づいて前記第2のフレーム内の前記第2のタッチパネルブロッブを処理するための手段であって、前記第1の誤タッチ拒絶の直径の範囲は前記第2の誤タッチ拒絶の直径の範囲と異なり、前記第1のスキャンレートは前記第1のタッチ報告感度に基づき、前記第2のスキャンレートは前記第2のタッチ報告感度に基づく、手段と、
処理するための前記手段の出力に少なくとも部分的に基づいて、前記第1のタッチパネルブロッブまたは前記第2のタッチパネルブロッブの何れかから生ずる有効なタッチが存在するかどうかを判定するための手段とを含む、装置。
A device for recognizing touch input for a touch panel,
In the first scan rate, and means for scanning said touch panel in a first frame including a first touch panel blob resulting from the first touch on the touch panel,
In the second scan rate, and means for scanning said touch panel in a second frame including a second touch panel blob resulting from the second touch on the touch panel,
Process the first touch panel blob in the first frame based at least in part on a range of diameters of a first touch reporting sensitivity and a first false touch rejection, a second touch reporting sensitivity and a second Means for processing the second touch panel blob in the second frame based at least in part on a range of false touch rejection diameters , wherein the first false touch rejection diameter range is Means different from the second false touch rejection diameter range, wherein the first scan rate is based on the first touch reporting sensitivity and the second scan rate is based on the second touch reporting sensitivity; and ,
Means for determining whether there is a valid touch resulting from either the first touch panel blob or the second touch panel blob based at least in part on the output of the means for processing; Including the device.
前記タッチパネル上のタッチの結果として生じる少なくとも1つのタッチパネルブロッブを含む第3のフレームにおいて前記タッチパネルをスキャンするための手段と、
第3のタッチ報告感度および第3の誤タッチ拒絶の直径の範囲に少なくとも部分的に基づいて前記第3のフレーム内の前記タッチパネルブロッブを処理するための手段と、
前記処理するステップに少なくとも部分的に基づいて有効なタッチが存在するかどうかを判定するための手段とをさらに含み、
前記第1の誤タッチ拒絶の直径の範囲または前記第2の誤タッチ拒絶の直径の範囲のうちの少なくとも1つが、直径2ミリメートル未満であり、および直径19ミリメートルを超える、
請求項9に記載の装置。
Means for scanning said touch panel in the third frame including at least one touch panel blob resulting from the touch on the touch panel,
Means for processing the touch panel blob in the third frame based at least in part on a diameter range of a third touch reporting sensitivity and a third false touch rejection;
Means for determining whether there is a valid touch based at least in part on the processing step;
At least one of the diameter range of the first false touch rejection or the diameter range of the second false touch rejection is less than 2 millimeters in diameter and greater than 19 millimeters in diameter,
The apparatus according to claim 9.
前記処理するための手段に少なくとも部分的に基づいて前記タッチパネルに対する前記タッチパネルブロッブの位置を決定するための手段をさらに含む請求項10に記載の装置。   11. The apparatus of claim 10, further comprising means for determining a position of the touch panel blob relative to the touch panel based at least in part on the means for processing. 前記処理するステップが、前記タッチパネルのスキャンレートを調整することをさらに含む請求項10に記載の装置。   The apparatus according to claim 10, wherein the processing further includes adjusting a scan rate of the touch panel. 前記第1の誤タッチ拒絶の直径の範囲または前記第2の誤タッチ拒絶の直径の範囲のうちの少なくとも1つが、直径19ミリメートル未満である請求項10に記載の装置。   11. The apparatus of claim 10, wherein at least one of the first false touch rejection diameter range or the second false touch rejection diameter range is less than 19 millimeters in diameter. 前記第1の誤タッチ拒絶の直径の範囲または前記第2の誤タッチ拒絶の直径の範囲のうちの少なくとも1つが、直径2ミリメートルを超える請求項10に記載の装置。   11. The apparatus of claim 10, wherein at least one of the first false touch rejection diameter range or the second false touch rejection diameter range is greater than 2 millimeters in diameter. プロセッサに請求項1乃至8の何れか1項に記載の方法を実行させるように構成されたプロセッサ可読命令を含むプロセッサ可読非一時的記憶媒体。   A processor-readable non-transitory storage medium comprising processor-readable instructions configured to cause a processor to perform the method of any one of claims 1-8.
JP2016504298A 2013-03-18 2014-03-04 Optimized adaptive thresholding for touch sensing Expired - Fee Related JP6419152B2 (en)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361803076P 2013-03-18 2013-03-18
US61/803,076 2013-03-18
US14/195,491 US20140267104A1 (en) 2013-03-18 2014-03-03 Optimized adaptive thresholding for touch sensing
US14/195,491 2014-03-03
PCT/US2014/020249 WO2014149672A1 (en) 2013-03-18 2014-03-04 Optimized adaptive thresholding for touch sensing

Publications (3)

Publication Number Publication Date
JP2016517101A JP2016517101A (en) 2016-06-09
JP2016517101A5 JP2016517101A5 (en) 2017-03-23
JP6419152B2 true JP6419152B2 (en) 2018-11-07

Family

ID=51525295

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016504298A Expired - Fee Related JP6419152B2 (en) 2013-03-18 2014-03-04 Optimized adaptive thresholding for touch sensing

Country Status (6)

Country Link
US (1) US20140267104A1 (en)
EP (1) EP2976695A1 (en)
JP (1) JP6419152B2 (en)
KR (1) KR20150130554A (en)
CN (1) CN105190494B (en)
WO (1) WO2014149672A1 (en)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130136276A (en) * 2012-06-04 2013-12-12 삼성전자주식회사 Method and apparatus for correctin a pen input in a terminal equipment having a touch input device
JP2014178990A (en) * 2013-03-15 2014-09-25 Kyocera Corp Mobile device, control method, and control program
CN104516555A (en) * 2013-09-27 2015-04-15 天津富纳源创科技有限公司 Method for preventing error touch of touch panel
KR102169952B1 (en) * 2013-10-18 2020-10-26 엘지전자 주식회사 Wearable device and method of controlling thereof
KR20150104302A (en) * 2014-03-05 2015-09-15 삼성전자주식회사 User input detection method of electronic apparatus and electronic apparatus thereof
US9851853B2 (en) * 2014-05-30 2017-12-26 Apple Inc. Low power scan for device wake up and unlock
US10095345B2 (en) 2014-05-30 2018-10-09 Apple Inc. Low power scan for device wake up and unlock
US9606633B2 (en) * 2015-05-08 2017-03-28 John W. Downey Method and apparatus for input to electronic devices
KR101678096B1 (en) * 2015-11-05 2016-11-23 현대자동차주식회사 Communication Module, vehicle and method for controlling the same
TWI597624B (en) * 2016-06-03 2017-09-01 凌通科技股份有限公司 Integrated communication and capacitive sensing circuit and interactive system using the same
US10139961B2 (en) 2016-08-18 2018-11-27 Microsoft Technology Licensing, Llc Touch detection using feature-vector dictionary
CN108021259B (en) 2016-11-03 2021-03-30 华为技术有限公司 False touch prevention method and electronic equipment
US10318071B2 (en) * 2017-03-23 2019-06-11 Intel Corporation Method and apparatus for a blob angle orientation recognition in a touch device
US10455115B2 (en) 2017-05-19 2019-10-22 Microsoft Technology Licensing, Llc Adaptive stylus position interpolation
WO2018225204A1 (en) 2017-06-08 2018-12-13 株式会社ワコム Pointer position detection method
CN107290802B (en) * 2017-07-18 2019-03-01 Oppo广东移动通信有限公司 Proximity sensor calibration method, proximity sensor calibrating installation and intelligent terminal
JP6952753B2 (en) * 2019-01-25 2021-10-20 株式会社ワコム Active pen position detection method and sensor controller
CN110515498A (en) * 2019-08-30 2019-11-29 联想(北京)有限公司 A kind of information processing method and electronic equipment
US20240111377A1 (en) * 2022-09-28 2024-04-04 Himax Technologies Limited Touch detection circuitry, electronic device and touch event handling method thereof

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3436637B2 (en) * 1996-06-04 2003-08-11 アルプス電気株式会社 Coordinate input device
EP2256605B1 (en) * 1998-01-26 2017-12-06 Apple Inc. Method and apparatus for integrating manual input
JPH11249813A (en) * 1998-03-03 1999-09-17 Sharp Corp Display integrated type coordinate input device
US9069417B2 (en) * 2006-07-12 2015-06-30 N-Trig Ltd. Hover and touch detection for digitizer
US8130203B2 (en) * 2007-01-03 2012-03-06 Apple Inc. Multi-touch input discrimination
JP4979608B2 (en) * 2008-01-31 2012-07-18 陞達科技股▲ふん▼有限公司 How to measure multiple touches on the touchpad
JP5380729B2 (en) * 2009-03-17 2014-01-08 シャープ株式会社 Electronic device, display control method, and program
JP5183584B2 (en) * 2009-06-29 2013-04-17 株式会社ジャパンディスプレイウェスト Touch sensor, display device, and electronic device
US20110148801A1 (en) * 2009-12-18 2011-06-23 Bateman Steven S Touch panel region of interest reporting scheme
CN102713804A (en) * 2010-02-19 2012-10-03 日本电气株式会社 Mobile terminal and control method thereof
JP2012113666A (en) * 2010-11-29 2012-06-14 Canon Inc Display size switching touch panel
TWI407349B (en) * 2010-12-17 2013-09-01 Au Optronics Corp Method for determining scanning times of touch control signal in a touch panel
WO2012169106A1 (en) * 2011-06-10 2012-12-13 Necカシオモバイルコミュニケーションズ株式会社 Input device and method for controlling touch panel
JP2013020479A (en) * 2011-07-12 2013-01-31 Panasonic Corp Touch panel device
US8493360B2 (en) * 2011-07-19 2013-07-23 Cypress Semiconductor Corporation Quadrature signal receiver using synchronized oscillator
TWI469025B (en) * 2011-08-25 2015-01-11 Touch panel and its dynamic drive control method
US9058078B2 (en) * 2012-01-09 2015-06-16 Broadcom Corporation High-accuracy touch positioning for touch panels
CN102799331B (en) * 2012-08-14 2015-11-18 东莞宇龙通信科技有限公司 Parameter setting apparatus, parameter setting method and touch display device
US20140104191A1 (en) * 2012-10-17 2014-04-17 Perceptive Pixel, Inc. Input Classification for Multi-Touch Systems

Also Published As

Publication number Publication date
KR20150130554A (en) 2015-11-23
US20140267104A1 (en) 2014-09-18
CN105190494B (en) 2018-02-13
EP2976695A1 (en) 2016-01-27
JP2016517101A (en) 2016-06-09
CN105190494A (en) 2015-12-23
WO2014149672A1 (en) 2014-09-25

Similar Documents

Publication Publication Date Title
JP6419152B2 (en) Optimized adaptive thresholding for touch sensing
US20140267132A1 (en) Comprehensive Framework for Adaptive Touch-Signal De-Noising/Filtering to Optimize Touch Performance
US9274652B2 (en) Apparatus, method, and medium for sensing movement of fingers using multi-touch sensor array
US9778742B2 (en) Glove touch detection for touch devices
US10761722B2 (en) Black screen gesture detection method and device, storage medium, and mobile terminal
EP2674843B1 (en) Apparatus and method for proximity touch sensing
US20150177945A1 (en) Adapting interface based on usage context
US20140160085A1 (en) Adaptive analog-front-end to optimize touch processing
US9817517B2 (en) Touch device and method of controlling the same that changes the sensitivity of a touch input based on the touch input's capacitance
JP5894957B2 (en) Electronic device, control method of electronic device
KR20150019352A (en) Method and apparatus for grip recognition in electronic device
WO2019143778A1 (en) Two-electrode touch button with a multi-phase capacitance measurement process
US20140306910A1 (en) Id tracking of gesture touch geometry
CN107390923B (en) Screen false touch prevention method and device, storage medium and terminal
KR20140137629A (en) Mobile terminal for detecting earphone connection and method therefor
JP5949010B2 (en) INPUT CONTROL DEVICE, INPUT CONTROL PROGRAM, AND INPUT CONTROL METHOD
KR101120164B1 (en) method of operating touch screen device and touch panel therein
KR20140125517A (en) Electronic device for processing input from touchscreen
US20190155479A1 (en) Methods and systems for integrated force touch solutions
US20220261104A1 (en) Distributed analog display noise suppression circuit
US11106317B1 (en) Common mode noise suppression with restoration of common mode signal
US9182904B2 (en) Cues based on location and context for touch interface
CN117008747A (en) Distributed Analog Display Noise Suppression Circuit

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170215

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170215

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180319

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180910

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181009

R150 Certificate of patent or registration of utility model

Ref document number: 6419152

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees