JP6563533B2 - ウルトラソニックハイブリッド入力デバイス - Google Patents

ウルトラソニックハイブリッド入力デバイス Download PDF

Info

Publication number
JP6563533B2
JP6563533B2 JP2018014674A JP2018014674A JP6563533B2 JP 6563533 B2 JP6563533 B2 JP 6563533B2 JP 2018014674 A JP2018014674 A JP 2018014674A JP 2018014674 A JP2018014674 A JP 2018014674A JP 6563533 B2 JP6563533 B2 JP 6563533B2
Authority
JP
Japan
Prior art keywords
ultrasonic
touch screen
input device
touch
hybrid input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018014674A
Other languages
English (en)
Other versions
JP2018110001A (ja
Inventor
バルーチ・エルチモビッチ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2018110001A publication Critical patent/JP2018110001A/ja
Application granted granted Critical
Publication of JP6563533B2 publication Critical patent/JP6563533B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B43WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
    • B43KIMPLEMENTS FOR WRITING OR DRAWING
    • B43K29/00Combinations of writing implements with other articles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B43WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
    • B43KIMPLEMENTS FOR WRITING OR DRAWING
    • B43K29/00Combinations of writing implements with other articles
    • B43K29/004Combinations of writing implements with other articles with more than one object
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B43WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
    • B43KIMPLEMENTS FOR WRITING OR DRAWING
    • B43K29/00Combinations of writing implements with other articles
    • B43K29/08Combinations of writing implements with other articles with measuring, computing or indicating devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B43WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
    • B43KIMPLEMENTS FOR WRITING OR DRAWING
    • B43K29/00Combinations of writing implements with other articles
    • B43K29/12Combinations of writing implements with other articles with memorandum appliances
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
    • G06F3/0433Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves in which the acoustic waves are either generated by a movable member and propagated within a surface layer or propagated within a surface layer and captured by a movable member

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

[0001]本開示は、一般に電子デバイスに関する。より詳細には、本開示は、ウルトラソニック(ultrasonic)ハイブリッド入力デバイスおよび対応するチューニング方法に関する。
[0002]過去数10年間で、電子デバイスの使用は一般的となった。特に、電子技術の進歩は、ますます複雑で有用な電子デバイスのコストを低減させた。コスト低減および消費者の需要は、電子デバイスが現代社会において事実上ユビキタスになるように、それらの使用を激増させた。
[0003]様々な状況において、電子デバイスが互いに通信することが望ましくありうる。電子デバイス間の通信は、有益でありうる。例えば、電子デバイス間の通信は、1つの電子デバイスが別の電子デバイスの機能を利用することを可能にしうる。多くのケースでは、通信インタフェースが、1つまたは複数の電子デバイス間の通信のために使用されうる。
[0004]ユーザは、電子デバイスにおける様々な機能(feature)を所望しうる。この説明から認められうるように、ウルトラソニックハイブリッド入力デバイスおよび対応するチューニング方法は、有益でありうる。
[0005]ハイブリッド入力デバイスが開示される。ハイブリッド入力デバイスは、タッチスクリーン上に書くためのスタイラス(stylus)、筆記具および圧力センサを含む。ハイブリッド入力デバイスはまた、ウルトラソニックデータパターンを送信するウルトラソニック送信機を含む。ハイブリッド入力デバイスはまた、ハイブリッド入力デバイスのウルトラソニック機能をトグルで切り換える(toggles)制御要素を含む。
[0006]制御要素は、無線通信デバイスからの受信されたウルトラソニックコマンドに基づいて、ウルトラソニック機能をトグルで切り換えうる。代替として、制御要素は、無線通信デバイスへのハイブリッド入力デバイスの近さ(proximity)に基づいて、ハウジングから突出させる(to protrude)タッチスクリーンスタイラスまたは筆記具を選択しうる。ウルトラソニックデータパターンは、ハイブリッド入力デバイスのための一意の識別値、圧力センサ値および制御要素のステータス値、または何らかの組み合わせを含みうる。この圧力は、筆記具が表面に押し付けられる圧力でありうる。ウルトラソニック送信機は、周期的にウルトラソニックデータを送信しうる。スタイラスは、静電容量方式(capacitive)タッチスクリーン、抵抗膜方式(resistive)タッチスクリーン、または何らかの組み合わせによって認識されうる。
[0007]ハイブリッド入力デバイスを使用するための方法がまた開示される。タッチスクリーンは、ハイブリッド入力デバイスにおけるタッチスクリーンスタイラスを用いてその上に書かれる。ウルトラソニック機能は、ハイブリッド入力デバイスに関連付けられる制御要素ステータスに基づいてオンまたはオフにされる。ウルトラソニックデータパターンは、ウルトラソニック機能がオンであるかまたはオフであるかに基づいて送信される。
[0008]ハイブリッド入力デバイスがまた開示される。ハイブリッド入力デバイスは、タッチスクリーン上に書くための手段を含む。ハイブリッド入力デバイスはまた、タッチスクリーン外に書く(writing off the touchscreen)ための手段を含む。ハイブリッド入力デバイスはまた、ハイブリッド入力デバイスのウルトラソニック機能をオンまたはオフにするための手段を含む。ハイブリッド入力デバイスはまた、ウルトラソニック機能がオンであるかまたはオフであるかに基づいて、ウルトラソニックデータパターンを送信するための手段を含む。
[0009]ウルトラソニック追跡アルゴリズムをチューニングするための方法がまた開示される。タッチスクリーン座標点およびウルトラソニック座標点が、受信される。タッチスクリーン座標点とウルトラソニック座標点は、比較される。チューニングパラメータは、この比較に基づいて、ウルトラソニック追跡アルゴリズムのために決定される。
[0010]この方法は、無線通信デバイスによって実行されうる。半自動構成では、受信することは、タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示すことを含みうる。自動構成では、受信することは、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信することを含みうる。チューニングパラメータは、温度、湿度、または両方による不精確さをオフセット(offset)するために適用されうる。
[0011]ウルトラソニック追跡アルゴリズムをチューニングするための装置がまた開示される。この装置は、タッチスクリーン座標点およびウルトラソニック座標点を受信するための手段を含む。この装置はまた、タッチスクリーン座標点とウルトラソニック座標点とを比較するための手段を含む。この装置はまた、この比較に基づいて、ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定するための手段を含む。
[0012]ウルトラソニック追跡アルゴリズムをチューニングするためのコンピュータプログラム製品がまた開示される。このコンピュータプログラム製品は、その上に命令を有するコンピュータ可読媒体を備える。これら命令は、無線通信デバイスに、タッチスクリーン座標点およびウルトラソニック座標点を受信させるためのコードを含みうる。これら命令はまた、無線通信デバイスに、タッチスクリーン座標点とウルトラソニック座標点とを比較させるためのコードを含みうる。これら命令はまた、無線通信デバイスに、この比較に基づいて、ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定させるためのコードを含みうる。
[0013]ウルトラソニック追跡アルゴリズムをチューニングするための装置がまた開示される。この装置は、プロセッサと、プロセッサと電子通信状態にあるメモリとを含む。実行可能命令が、メモリに記憶される。これら命令は、タッチスクリーン座標点およびウルトラソニック座標点を受信するように実行可能である。これら命令はまた、タッチスクリーン座標点とウルトラソニック座標点とを比較するように実行可能である。これら命令はまた、この比較に基づいて、ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定するように実行可能である。
図1は、ハイブリッド入力デバイスが使用されうる無線通信システムを例示するブロック図である。 図2Aは、ハイブリッド入力デバイスを例示するブロック図である。 図2Bは、ハイブリッド入力デバイスの1つの構成を例示する断面図である。 図2Cは、ハイブリッド入力デバイスの別の可能な構成を例示する断面図である。 図2Dは、ハイブリッド入力デバイスの別の可能な構成を例示する断面図である。 図2Eは、ハイブリッド入力デバイスの別の可能な構成を例示する断面図である。 図3は、ハイブリッド入力デバイスを使用するための方法を例示するフロー図である。 図4は、受信デバイスを例示するブロック図である。 図5は、ウルトラソニック追跡アルゴリズムをチューニングするための方法を例示するフロー図である。 図6は、例えば、受信デバイスにおける、ウルトラソニックチューニングモジュールを例示するブロック図である。 図7は、ウルトラソニック追跡アルゴリズムをチューニングするための方法を例示するフロー図である。 図8は、電子デバイス/無線デバイス内に含まれうるある特定のコンポーネントを例示する。
[0026]いくつかのモバイルデバイス(例えば、スマートフォン、タブレット)は、超音波(ultrasound)技術に基づいて入力デバイス(例えば、スタイラス、ペン)を利用することができ、すなわち、超音波ベースのポジション(position)計算のための専用ソフトウェアが、モバイルデバイス上で実行されることができる。加えて、タッチスクリーンスタイラス技術がまた、良い精確さおよびパフォーマンスのみならず使用改善のために使用されうる(例えば、S−ペンソフトウェア開発者キット)。アプリケーションを実行しているモバイルデバイスは、ポインティングのために使用される入力デバイスに関する異なる要件を有しうる、すなわち、通常のタッチスクリーンスタイラスは、モバイルデバイスのディスプレイ上での簡単なハンドライティング、標準ユーザインタフェースおよびゲームのために比較的うまく機能しうるが、超音波ペン/スタイラスは、それがより精確(precise)であるので、(モバイルデバイスの近くでの)オフディスプレイのハンドライティングにとってより有利でありうる。不都合なことに、超音波ベースのポジション計算の精確さは、環境条件、例えば、温度および湿度、に依存する。
[0027]本システムおよび方法は、次の課題のうちのいくつかを解決しうる。第1に、モバイルデバイス上の異なるタイプのアプリケーションのために2つの異なる(標準タッチスクリーンおよびウルトラソニック)入力デバイスを必要とすることは、費用がかかり、ユーザにとって不便でありうる。第2に、追加のモバイルリソース(例えば、センサ)が、ウルトラソニックペンポジションを計算するモバイルアルゴリズムの周期的なチューニングのために必要とされる。いくつかの構成では、モバイルデバイスは、所定の超音波パターンを周期的に送信し、エコーされた(echoed)超音波パターンを受信した際に、このアルゴリズムをチューニングする。しかしながら、これは、それが追加のモバイルデバイスリソース(スピーカまたはイヤピース(earpiece))を使用しうるので、問題となりうる。これはまた、オーディオ/音声送信との同時並行性(concurrency)の課題を生じうる。
[0028]これらの問題を解決するために、本システムおよび方法は、モバイルデバイス上のチューニングモジュールと、ハイブリッド入力デバイスとを含むことができ、すなわち、チューニングモジュールは、モバイルデバイスで実行中の超音波ベースのポジション計算モジュールと共に動作することができる。ハイブリッド入力デバイスは、オンディスプレイユーザインタフェースアクティビティ用の1つのタッチスクリーンスタイラス、オフディスプレイ超音波ベースのハンドライティングまたはドローイング用の単色または多色ペン、超音波送信機およびハイブリッド入力デバイスのタッチスクリーンモードまたはウルトラソニックモードを選択するための制御要素(例えば、制御ボタン)を含みうる。したがって、単一のハイブリッド入力デバイスが、タッチスクリーン機能とウルトラソニックオフディスプレイ機能の両方を含むことができ、上記に説明された第1の問題を解決する。
[0029]このようなデバイスおよびチューニングモジュールはまた、第2の課題を解決しうる。具体的には、タッチスクリーンスタイラスによるオンディスプレイタッチング中に、デバイスの超音波送信機は、超音波パターンを周期的に放出(eject)しうる。チューニング期間中、チューニングモジュールは、タッチスクリーンドライバからのタッチスクリーン座標および導出されたウルトラソニック点を得て、タッチスクリーン座標とウルトラソニック座標の比較の際にチューニングパラメータを計算しうる。これは、ウルトラソニックアルゴリズムチューニングのための高価なモバイルデバイスリソースの使用(例えば、センサ)を回避しうる。ここで使用される場合、「ウルトラソニック」という用語は、人間の聴覚を超える周波数帯域、例えば、25〜80KHz、20〜80KHzなどを称する。
[0030]図1は、ハイブリッド入力デバイス102が使用されうる無線通信システム100を例示するブロック図である。システム100では、ハイブリッド入力デバイス102は、無線通信デバイス104と通信しうる。無線通信デバイス104はまた、モバイルデバイス、モバイル局、加入者局、クライアント、クライアント局、ユーザ機器(UE)、リモート局、アクセス端末、モバイル端末、端末、ユーザ端末、加入者ユニットなどとも称されうる。通信デバイスの例は、ラップトップまたはデスクトップコンピュータ、セルラ電話、スマートフォン、無線モデム、電子リーダ、タブレットデバイス、ゲーミングシステムなどを含む。これらのデバイスのいくつかは、1つまたは複数の業界標準にしたがって動作しうる。本システムおよび方法は、無線通信デバイス104を使用して説明および例示される一方で、任意の適切な電子デバイスが使用されうる。「ハイブリッド入力デバイス」および「ハイブリッドペン」という用語は、ここで交換可能に使用されうる。
[0031]ウルトラソニック技術は、ある特定のデバイスのロケーションを追跡するために使用されうる。例えば、デジタルペンは、デジタルデバイスにハンドライティングまたはドローイングを転送する手段としてウルトラソニック追跡を使用しうる。1つの構成では、専用ウルトラソニック受信機は、ハンドライティング作業領域にクリップによって取り付けられうる(attached)。(受信機と相対的な)作業領域ポジションおよびサイズは、較正プロセス中に点計算アルゴリズムに供給されうる。ユーザは、作業領域における所定の点(例えば、4隅と中央)を順次に指し示すように較正アプリケーションによってプロンプトされうる。作業領域に相対的な、受信機の座標系(RCS0)ポジションは、作業領域が受信機に取り付けられるまで変更されることができない。受信機は、(受信機のマイクロフォンによって収集されたウルトラソニックデータに基づいて)RCS0における点を計算し、ユニバーサルシリアルバス(USB)接続を介して、ホストにペンのスイッチステータス(例えば、アップ/ダウン)を用いてそれらを渡しうる。ホストは、受信されたポイントをそのデスティネーションウィンドウ(destination window)にマップしうる。
[0032]これに対し、本システムおよび方法は、ウルトラソニック受信機として無線通信デバイス104を利用しうる。無線通信デバイス104は、ハイブリッド入力デバイス102から受信されたウルトラソニックデータ114に基づいて、ハイブリッド入力デバイス102のポジションを計算するウルトラソニック計算モジュール110を含みうる。無線通信デバイス104はまた、ウルトラソニック計算モジュール110を較正する、またはチューニングするためのウルトラソニックチューニングモジュール112を含みうる。無線通信デバイス104はまた、音声およびウルトラソニックデータ114を受信するための2つ以上のマイクロフォンを含みうる。ハイブリッド入力デバイス102におけるウルトラソニックモジュール106は、次のデータのうちの1つまたは複数を含むウルトラソニックデータ114を送信しうる:固有のペン識別子、入力デバイスが表面にタッチしたかどうかを示す圧力センサ値、および制御要素ステータス。ハイブリッド入力デバイス102上の制御要素は、ウルトラソニック機能をトグルで切り換えうる。1つの構成では、制御要素は、例えば、ハイブリッド入力デバイス102の外側にある、ボタンでありうる。別の構成では、制御要素は、ウルトラソニック送信を開始または停止するために、無線通信デバイスからウルトラソニックコマンドを受信しうる。これは、ハイブリッド入力デバイス102の電力消費を低減させうる。
[0033]動作中、ユーザは、無線通信デバイス104上のタッチスクリーン116と対話するために、ハイブリッド入力デバイス102におけるタッチスクリーンスタイラス108を使用しうる。ユーザはまた、オフディスプレイでライティングまたはドローイングするために、筆記具(例えば、ペン)を使用しうる。ウルトラソニック追跡をチューニングするために、ウルトラソニックチューニングモジュール112は、同様の時点においてウルトラソニックデータ114から作成された、シミュレートされたタッチイベントと、無線通信デバイス104において受信された複数のタッチイベントとを比較しうる。言い換えれば、タッチイベントは、ウルトラソニック追跡をチューニングするために使用される。ここで使用される場合、「タッチイベント」は、指、スタイラス108またはその他のツールによる、タッチスクリーン116のタッチングについての通知である。このようなイベントは、(例えば、タッチスクリーンドライバによって)生成され、アプリケーションに提供されうる。タッチイベントは、2次元座標およびタッチ圧力を含みうる。
[0034]図2Aは、ハイブリッド入力デバイス202を例示するブロック図である。ハイブリッド入力デバイス202は、オフディスプレイの、ウルトラソニックベースのハンドライティングまたはドローイング、すなわち、ウルトラソニック通信を使用して追跡される筆記具218を用いたオフディスプレイのライティングまたはドローイング、のための標準タッチスクリーンスタイラス208および筆記具218(例えば、1つまたは複数の色を有するペン)を含みうる。タッチスクリーンスタイラス208は、モバイルデバイスのディスプレイ上の簡単なハンドライティング、標準ユーザインタフェースおよびゲームに適切でありうる。(無線通信デバイス104の近くで)オフディスプレイで使用される筆記具218は、より精確なハンドライティングまたはドローイングにより適切でありうる。
[0035]ハイブリッド入力デバイス202はまた、ウルトラソニック送信機220とウルトラソニックタイミングモジュール224とを含むウルトラソニックモジュール206を含みうる。ウルトラソニック送信機220は、例えば、ウルトラソニックタイミングモジュール224からのタイミングを使用して、特定のデータレートでウルトラソニックデータパターン222を送信しうる。ウルトラソニックデータパターン222は、固有のペン識別子219、圧力センサ値230および制御要素ステータス227の何らかの組み合わせのような、遠隔測定データを含みうる。例えば、ハイブリッド入力デバイス202は、192KHz、96KHz、などで送信しうる。データフォーマット(すなわち、ウルトラソニックデータパターン222における各要素への特定のビット割り当て)は、異なりうるが、本システムおよび方法は、ウルトラソニックペンの任意の適切な構成および製造者とともに使用されうる。
[0036]ユーザは、所望のアプリケーションのための所望のコンポーネントを容易に選択することが可能でありうる、すなわち、(ウルトラソニックベースのポインティングアルゴリズムを使用することによる、無線通信デバイス104上で記憶または提示するライティングとともに)オフディスプレイハンドライティング、タッチスクリーンスタイラス208を使用するオンディスプレイタッチング、またはウルトラソニックベースのポインティングアルゴリズムを使用することによるオンディスプレイタッチスクリーン機能シミユレーション。
[0037]ハイブリッド入力デバイス202における制御要素226は、任意の適切な方法、例えば、ボタン、スイッチ、ダイアルなどで、インプリメントされうる。代替として、制御要素226は、例えば、ハイブリッド入力デバイス202における電力消費を低減させるために、ウルトラソニック送信を開始または停止するために無線通信デバイス104から制御コマンドを受信する内部モジュールでありうる。例えば、ハイブリッド入力デバイス202は、無線通信デバイス104から制御コマンドを受信するためのウルトラソニック受信機217を含むことができ、これは、ウルトラソニック送信のためにその標準オーディオポートのうちの1つ(例えば、イヤピース)を使用しうる。開始/停止ウルトラソニック送信コマンドに加えて、無線通信デバイス104は、無線通信デバイスの現在のポジションに基づいて、タッチスクリーンスタイラス208と筆記具218の間で切り替えるためのコマンドを送りうる。例えば、このコマンドは、ハイブリッド入力デバイス202が無線通信デバイス104の近く(例えば、2、4、6、8、10、12インチ)にあるときに、タッチスクリーンスタイラス208に切り替えうる。逆に、このコマンドは、ハイブリッド入力デバイス202が無線通信デバイス104から遠く(例えば、2、4、6、8、10、12インチ)にあるときに、筆記具218に切り替えうる。
[0038]圧力センサ228はまた、任意の適切な方法でインプリメントされうる。例えば、圧力センサ値230は、2進数方式で任意の圧力が筆記具218において適用されるか否かを示す単一のビットであることができ、例えば、圧力ありについては1、圧力なしについては0である。代替として、圧力センサ値230は、複数のビットであることができ、筆記具218において加えられる圧力の量を示し、例えば、0は、圧力なしを示し、16(ビットレベルでは1111)は、最大の圧力を示す4ビットの値である。
[0039]図2Bは、ハイブリッド入力デバイス202の1つの構成を例示する断面図である。ハイブリッド入力デバイス202は、例えば、金属、プラスチックなどでできている、ハウジング209内部の様々な要素を含みうる。例示される構成では、ハウジングは、筆記具218またはタッチスクリーンスタイラス208が突出しうる小さな開口部のほうへ次第に細くなる円筒形のセクションを含みうるが、ハウジング209の任意の適切な構成が使用されうる。さらに、ハウジング内に含まれる複数の筆記具218が存在することができ、例えば、異なる色のペン、鉛筆などである。ハウジング内部では、筆記具218は、圧力センサ値230、すなわち、任意の圧力が筆記具218において適用されるか否かのインジケーション、を決定する圧力センサに結合されうる。さらに、ウルトラソニック送信機220は、筆記具218またはタッチスクリーンスタイラス208が突出する開口部の近くのハウジング内に存在しうる。ウルトラソニック送信機220をハウジング209の先端(point)の近くに配置することは、それをハウジング209の先端からより遠く離れて配置するよりも、より正確な追跡を可能にしうる。ハウジングはまた、例えば、ウルトラソニック機能をオンまたはオフにするボタン、スイッチまたはダイアルのような、制御要素226を含みうる。さらに、セレクタボタン211が、もしあれば、タッチスクリーンスタイラス208または(単数または複数の)筆記具218のどちらが、任意の時にハウジングから突出するかを制御しうる。ハイブリッド入力デバイス202は、図2Bにおいて特定の構成で例示されているが、任意の適切な構成が、本システムおよび方法とともに使用されうる。
[0040]図2Cは、ハイブリッド入力デバイス202の別の可能な構成を例示する断面図である。ハイブリッド入力デバイス202は、図2Bに例示される要素のうちの一部またはすべてを含みうる。しかしながら、図2Cに例示される構成は、モジュール方式(modular)であることができ、ユーザが、それらの必要性に応じてハイブリッド入力デバイス202を構成することを可能にする。例えば、ハウジング209は、一端においてタッチスクリーンスタイラス208および反対側の一端において筆記具218を収容する(receive)ことができ、すなわち、ハウジング209から出てくることに加えて、タッチスクリーンスタイラス208および筆記具218は、ハウジング209から(例えば、取り替えのために)完全に取り外し可能でありうる。言い換えれば、これらモジュール(タッチスクリーンスタイラス208または筆記具218)は、ハウジングから取り外され、異なるモジュールに取り替えられうる。さらに、筆記具は、それ自体がウルトラソニック追跡のために必要なすべての要素、すなわち、バッテリ221、ウルトラソニックエミッタ229、制御要素226および圧力センサ228を含みうる。加えて、タッチスクリーンスタイラス208および筆記具218の各々は、コネクタメカニズム229a−bを使用してハウジングに取り付けられうる。コネクタメカニズム229a−bは、任意の適切な取り付け技法、例えば、マグネット、タッチスクリーンスタイラス208または筆記具218上の対応する突起を収容するハウジングにおける窪んだノッチ、(ねじ山(screw thread)と同様の)ハウジングおよびモジュールの各々上の相補的なねじ切り(complementary threading)などを使用しうる。ハウジングはまた、ウルトラソニック機能のためのオン/オフボタン225を含みうる。
[0041]図2Dは、ハイブリッド入力デバイスの別の可能な構成を例示する断面図である。具体的には、図2Dは、ハウジング209における2つのタッチスクリーンスタイラス208a−bを有する構成を例示する。例示される構成では、第1のアクティブスタイラス208aが、ハウジングから出ており(emerged)、使用のために利用可能である。これに対し、出ていない(not emerged)スタイラス208bは、使用のために利用可能でない。1つの構成では、これらスタイラスのうちの一方は、タッチスクリーン上にマーキングするために使用されることができるとともに、他方は、「イレーサー(eraser)」として使用されることができる。言い換えれば、タッチスクリーンの一部分にわたって「イレーサー」スタイラスを移動させた場合、タッチスクリーンは、前のマーキングを削除しうる。
[0042]図2Eは、ハイブリッド入力デバイスの別の可能な構成を例示する断面図である。具体的には、図2Eは、出ているタッチスクリーンスタイラス208および出ている筆記具218を有する構成を例示する。言い換えれば、両方が同時に利用可能でありうる。代替として、ハウジングは、2つの筆記具218を含むことができ、例えば、それぞれが、異なる色のペンまたは鉛筆を含む。
[0043]図3は、ハイブリッド入力デバイス202を使用するための方法300を例示するフロー図である。方法300は、ハイブリッド入力デバイス202のユーザによって実行されうる。ユーザは、ハイブリッド入力デバイス202におけるタッチスクリーンスタイラス208を用いてタッチスクリーン116上に書くことができる302。ここで使用される場合、「タッチスクリーン」という用語は、例えば、静電容量方式タッチスクリーン(表面型または投影型)、抵抗膜方式タッチスクリーンなどの、タッチを介して入力を受信する技術を指す。ウルトラソニック機能は、ハイブリッド入力デバイス202に関連付けられる制御要素ステータス227に基づいてオンまたはオフにされうる304。これは、ユーザがデバイス202上のボタンまたはスイッチをアクティブ化することを含みうる。代替として、制御要素226は、無線通信デバイス104から(例えば、ウルトラソニック受信機217を使用して)ウルトラソニックコマンドを受信する内部モジュールでありうる。例えば、これらコマンドは、電力消費を低減させるために、ハイブリッド入力デバイス202においてウルトラソニック送信を開始または停止しうる。代替として、これらコマンドは、例えば、無線通信デバイス104からの近さに基づいて、タッチスクリーンスタイラス208と筆記具218との間の自動的な切り替えを可能にしうる。ハイブリッド入力デバイス202はまた、ウルトラソニック機能がオンであるかまたはオフであるかに基づいて、ウルトラソニックデータパターン222を送信しうる306。具体的には、ウルトラソニックデータパターン222は、ウルトラソニック機能がオンであるときに送信されうるが、ウルトラソニック機能がオフであるときは送信されない。
[0044]図4は、受信デバイス432を例示するブロック図である。受信デバイス432は、タッチスクリーンを有する任意の電子デバイスであり、かつウルトラソニック信号を受信することが可能でありうる。例えば、受信デバイス432は、無線通信デバイス104でありうる。受信デバイス432は、マイクロフォン440においてウルトラソニックデータ114(例えば、固有のペンID 219、圧力センサ値230および制御要素ステータス227の何らかの組み合わせを含むウルトラソニックデータパターン422)を収集し、例えば、マルチラテレーション(multilateration)(到着時間差(TDOA)としても知られる)を使用することによって、3次元ポジションを計算しうる。言い換えれば、受信デバイス432は、ハイブリッド入力デバイス202のロケーションを計算するために、異なるマイクロフォン440における到着の時間差を使用しうる。制御要素ステータス227はまた、受信デバイス432上で実行中のアプリケーションによって使用されうる。
[0045]受信デバイス432は、2つ以上のマイクロフォン440を含みうる。各マイクロフォン440は、ウルトラソニックおよびオーディオ/音声相互キャプチャのために使用されうる。例えば、受信デバイス432は、それから3次元座標が、例えば、マルチラテレーション(TDOA)を使用して、ウルトラソニック計算モジュール410によって決定されうる、3つのマイクロフォン440を含みうる。3つの音声/超音波マイクロフォン440を有するこのような構成は、受信デバイス432上で3次元アプリケーションを可能にしうる。代替として、受信デバイスは、それから2次元座標が、例えば、到着時間(TOA)を使用して、ウルトラソニック計算モジュール410によって決定されうる、2つのマイクロフォン440のみを含みうる。
[0046]ウルトラソニック計算モジュール410は、シミュレートされたタッチイベント442を作成するために、圧力センサ値230およびハイブリッド入力デバイス202の計算された座標を使用しうる。シミュレートされたタッチイベント442は、シミュレートされたタッチイベントタイムスタンプによって示された時点でのハイブリッド入力デバイス202の3次元ポジションを含みうる。3次元ポジションは、ウルトラソニックデータパターン422によって決定されうる。シミュレートされたタッチイベント442はまた、ペン(または他の筆記具)が表面に対して押しつけられる圧力を示す圧力センサ値を含みうる。
[0047]シミュレートされたタッチイベント442に加えて、受信デバイス432は、指、スタイラスまたはその他のツールによる受信デバイス432のタッチについてのタッチスクリーンドライバまたはタッチスクリーン416によって生成されたタッチイベント431を含みうる。各タッチイベント431は、次のうちの何らかの組み合わせを含み得る:2次元タッチスクリーン座標434、タッチ圧力436およびタッチタイムスタンプ438。
[0048]ウルトラソニックチューニングモジュール412は、ウルトラソニック追跡が精確であることを確実にしうる。これは、1つまたは複数のウルトラソニックチューニングパラメータ444を決定するために、複数のタッチイベント431をシミュレートされたタッチイベント442と比較することを含みうる。動作中、(例えば、カーネルにおいて実行中の)ウルトラソニックチューニングモジュール412は、いくつかの(a number of)最新の(most recent)タッチイベント431、例えば、過去10msecの間のすべてのタッチイベント431を記憶しうる。通常は、この期間内のすべてのタッチイベント431は、同じ座標を有するであろう。ウルトラソニックチューニングモジュール412は、ウルトラソニック計算モジュール410からの特定のシミュレートされたタッチイベント442のためのタイムスタンプに近い、例えば、5msec内の、タッチタイムスタンプ438を有するタッチイベント431を求めて、記憶されたタッチイベント431を検索しうる。特定のシミュレートされたタッチイベント442に最も密接にマッチするタッチタイムスタンプ438を有するタッチイベント431は、ベストタッチイベントと称されうる。言い換えれば、ベストタッチイベントは、特定のシミュレートされたタッチイベント442に最も近い時間で測定されたものでありうる。
[0049]マッチング点を比較する際に、アルゴリズムのいくつかのチューニングパラメータ444が再計算される。タッチイベント431の精確さは、環境条件によってあまり影響されないので、タッチイベント431は、シミュレートされたタッチイベント442よりもより正確でありうる。したがって、ベストタッチイベントにおけるタッチスクリーン座標434と、シミュレートされたタッチイベント442における座標との間の差は、例えば、現在の音速のような、ウルトラソニックチューニングパラメータ444を決定するまたは再計算するために使用されうる。シミュレートされたタッチイベント442の座標は、この比較が実行される前に、3次元から2次元に変換されうることに留意されたい、すなわち、ウルトラソニックチューニングモジュール412が2つ座標のセットを比較する前に、Z座標は、シミュレートされたタッチイベント442において0に設定されうる。さらに、ウルトラソニックチューニングパラメータ444は、アルゴリズム依存でありうるが、本システムおよび方法は、任意の適切なパラメータをチューニングするために使用されうる。例えば、表1および表2は、どのように音速が温度および(湿度に関連する)空気密度に対して変化するのか、およびどのようにこの可変性(variability)がウルトラソニック追跡の精確さに影響を及ぼしうるのかを例示する。したがって、音速は、チューニングされうる1つの可能なウルトラソニックチューニングパラメータ444である。
Figure 0006563533
Figure 0006563533
[0050]その後、修正されたウルトラソニックチューニングパラメータ444は、ウルトラソニックデータパターン422に基づいてウルトラソニック座標を決定するときに、ウルトラソニック計算モジュール410によって使用されうる。例えば、音速は、現在の環境条件を考慮して調整されることができ、これは、ウルトラソニック座標がより正確になることを可能にする。
[0051]図5は、ウルトラソニック追跡アルゴリズムをチューニングするための方法500を例示するフロー図である。方法500は、例えば、無線通信デバイス104のような、受信デバイス432によって実行されうる。受信デバイス432は、タッチスクリーン座標434およびウルトラソニック座標を決定しうる502。タッチスクリーン座標434は、例えば、タッチスクリーンドライバからの、タッチイベント431に含まれうる。ウルトラソニック座標は、複数のマイクロフォン440において受信されるウルトラソニックデータパターン422から決定されうる。これは、受信デバイス432におけるウルトラソニック計算モジュール410が、例えば、マルチラテレーション(到着時間差(TDOA)としても知られる)を使用することによって、3次元ポジションを計算することを含みうる。言い換えれば、受信デバイス432は、ハイブリッド入力デバイス202のロケーションを計算するために、異なるマイクロフォン440における到着の時間差を使用しうる。受信デバイス432はまた、タッチスクリーン座標434とウルトラソニック座標とを比較しうる504。これは、ウルトラソニックチューニングモジュール412が、ベストタッチイベントからのタッチスクリーン座標434を、シミュレートされたタッチイベント442からのウルトラソニック座標と比較することを含みうる。受信デバイス432はまた、この比較に基づいて、ウルトラソニック追跡アルゴリズムのための1つまたは複数のチューニングパラメータ444を決定しうる506。
[0052]図6は、例えば、受信デバイス432における、ウルトラソニックチューニングモジュール612を例示するブロック図である。ウルトラソニックチューニングモジュール612は、例えば、音速のような、1つまたは複数のチューニングパラメータ644を決定することによって、ウルトラソニック追跡アルゴリズムをチューニングしうる。言い換えれば、ウルトラソニックチューニングモジュール612は、現在の環境条件を考慮してチューニングパラメータ644を再計算することができ、これは、ハイブリッド入力デバイス202のウルトラソニック追跡がより精確になることを可能にする。
[0053]ウルトラソニックチューニングモジュール612は、複数のタッチイベント631を有することができ、それぞれが、タッチスクリーン座標634、タッチ圧力636およびタッチイベントタイムスタンプ638の何らかの組み合わせを含む。ウルトラソニックチューニングモジュール612はまた、ハイブリッド入力デバイス202から受信されたウルトラソニックデータパターン422から決定されるシミュレートされたタッチイベント642を含みうる。シミュレートされたタッチイベント642は、(例えば、マルチラテレーションを使用して決定された)ウルトラソニック座標660、圧力センサ値662およびシミュレートされたタッチイベントタイムスタンプ664の何らかの組み合わせを含みうる。
[0054]タッチイベント評価器650は、ベストタッチイベント654を決定しうる。これは、複数のタッチイベント631を評価することと、シミュレートされたタッチイベントタイムスタンプ664に時間において最も近いタッチイベントタイムスタンプ638を有するものを選択することとを含みうる。ウルトラソニックチューニングモジュール612は、例えば、所定の数の、いくつかの最新のタッチイベント631、最新の所定の時間期間内のすべてのタッチイベント631などを記憶しうる。
[0055]ベストタッチイベント654は、比較器652によってシミュレートされたタッチイベント642と比較されうる。具体的には、座標差656が、比較器652によって決定および出力されうる。座標差656は、ベストタッチイベント654におけるタッチスクリーン座標634と、シミュレートされたタッチイベント642におけるウルトラソニック座標660との間の差でありうる。比較の前に、ウルトラソニック座標660は、3次元から2次元に変換されることができ、例えば、Z座標は、ゼロに設定されうる。
[0056]座標差656は、1つまたは複数のチューニングパラメータ644を決定するために、チューニングパラメータモジュール658によって使用されうる。例えば、チューニングパラメータモジュール658は、座標差656に基づいて、特定のチューニングパラメータ644(例えば、音速)を識別するルックアップ表を含みうる。(単数または複数の)チューニングパラメータ644は、ウルトラソニックデータパターン422に基づいてウルトラソニック座標660を決定するときに、ウルトラソニック計算モジュール410によって使用されうる。1つの構成では、実座標と超音波座標との間の差は、音速のより精確な推定を可能にしうる。
[0057]例えば、1つの半自動構成では、ユーザは、ハイブリッド入力デバイス202上のウルトラソニックコンポーネントをオンにし、例えば、受信デバイス432における、ウルトラソニックオフディスプレイアプリケーションを実行する。このアプリケーションは、ウルトラソニックチューニングモジュール612およびウルトラソニック計算モジュール410を開始し、タッチスクリーンスタイラス208を備えたハイブリッド入力デバイス202を用いてディスプレイをタッチするようにユーザにプロンプトしうる、例えば、受信デバイス432上のディスプレイまたはスピーカによってプロンプトする。ディスプレイタッチ期間中、ウルトラソニックチューニングモジュール612は、タッチスクリーン座標634および(例えば、受信されたウルトラソニックデータパターン422に基づく)シミュレートされたタッチイベント642を含む(例えば、タッチスクリーンドライバからの)タッチイベント631を収集しうる。ウルトラソニックチューニングモジュール612はまた、(例えば、ベストタッチイベント654からの)タッチスクリーン座標634とウルトラソニック座標660と比較することによって、1つまたは複数のチューニングパラメータ644を計算しうる。
[0058]代替として、自動構成では、ウルトラソニック追跡アルゴリズムは、オンディスプレイアクティビティ中に自動的に、周期的にチューニングされうる。この構成では、ハイブリッド入力デバイス202およびウルトラソニックチューニングモジュール612は、所定の数のタッチイベント631に応じて、例えば、500個のタッチイベント631ごとに、同期され、ハイブリッド入力デバイス202は、100個のタッチイベント631についてのウルトラソニックデータパターン422を放出しうる。チューニング期間中、ウルトラソニックチューニングモジュール612は、タッチスクリーン座標634および(例えば、受信されたウルトラソニックデータパターン422に基づく)シミュレートされたタッチイベント642を含む(例えば、タッチスクリーンドライバからの)タッチイベント631を収集しうる。ウルトラソニックチューニングモジュール612はまた、(例えば、ベストタッチイベント654からの)タッチスクリーン座標634とウルトラソニック座標660と比較することによって、1つまたは複数のチューニングパラメータ644を計算しうる。
[0059]図7は、ウルトラソニック追跡アルゴリズムをチューニングするための方法700を例示するフロー図である。方法700は、例えば、無線通信デバイス104における、ウルトラソニックチューニングモジュール612によって実行されうる。ウルトラソニックチューニングモジュール612は、複数のタッチイベントの中から、シミュレートされたタッチイベントタイムスタンプ664に最も近いタイムスタンプ638を有するベストタッチイベント654を決定しうる702。これは、ベストタッチイベント654を求めていくつかの最新のタッチイベント631を評価することを含みうる。ウルトラソニックチューニングモジュール612はまた、シミュレートされたタッチイベント642のための座標660と、ベストタッチイベント654のための座標634との間の差656を決定しうる704。ウルトラソニックチューニングモジュール612はまた、差656に基づいて、チューニングパラメータ644を決定しうる706。例えば、音速は、現在の環境条件を考慮して調整されることができ、これは、ウルトラソニック座標がより正確になることを可能にする。
[0060]図8は、電子デバイス/無線デバイス804内に含まれうるある特定のコンポーネントを例示する。電子デバイス/無線デバイス804は、図1に例示される無線通信デバイス104のような、アクセス端末、モバイル局、ユーザ機器(UE)、基地局、アクセスポイント、ブロードキャスト送信機、ノードB,発展型ノードBなどでありうる。電子デバイス/無線デバイス804は、プロセッサ803を含む。プロセッサ803は、汎用のシングルチップまたはマルチチップマイクロプロセッサ(例えば、ARM)、専用マイクロプロセッサ(例えば、デジタルシグナルプロセッサ(DSP))、マイクロコントローラ、プログラマブルゲートアレイなどでありうる。プロセッサ803は、中央処理ユニット(CPU)と称されうる。単一のプロセッサ803のみが図8の電子デバイス/無線デバイス804において示されているが、代替の構成では、プロセッサの組み合わせ(例えば、ARMとDSP)が使用されことができる。
[0061]電子デバイス/無線デバイス804はまた、メモリ805を含む。メモリ805は、電子情報を記憶することが可能な任意の電子コンポーネントでありうる。メモリ805は、ランダムアクセスメモリ(RAM)、読取専用メモリ(ROM)、磁気ディスク記憶媒体、光記憶媒体、RAMにおけるフラッシュメモリデバイス、プロセッサと共に含まれるオンボードメモリ、プログラマブル読取専用メモリ(PROM)、消去可能プログラマブルROM(EPROM)、電気的消去可能プログラマブルROM(EEPROM(登録商標))、レジスタ、およびこれらの組み合わせを含む、その他のものなどとして具現化されうる。
[0062]データ807aおよび命令809aは、メモリ805に記憶されうる。命令809aは、ここに開示された方法をインプリメントするためにプロセッサ803によって実行可能でありうる。命令809aを実行することは、メモリ805に記憶されたデータ807aの使用を伴いうる。プロセッサ803が命令809aを実行した場合、命令809bの様々な部分がプロセッサ803にロードされることができ、また、データ807bの様々な部分がプロセッサ803にロードされることができる。
[0063]電子デバイス/無線デバイス804はまた、電子デバイス/無線デバイス804への信号の送信と、それからの信号の受信とを可能にするために、送信機811および受信機813を含みうる。送信機811および受信機813は、トランシーバ815と総称されうる。複数のアンテナ817a−bは、トランシーバ815に電気的に結合されうる。電子デバイス/無線デバイス804はまた、複数の送信機、複数の受信機、複数のトランシーバおよび/または追加のアンテナ(図示せず)を含みうる。
[0064]電子デバイス/無線デバイス804は、デジタルシグナルプロセッサ(DSP)821を含みうる。電子デバイス/無線デバイス804はまた、通信インタフェース823を含みうる。通信インタフェース823は、ユーザが電子デバイス/無線デバイス804と対話することを可能にしうる。
[0065]電子デバイス/無線デバイス804の様々なコンポーネントは、電力バス、制御信号バス、ステータス信号バス、データバスなどを含みうる、1つまたは複数のバスによって互いに結合されうる。明確さのために、様々なバスは、バスシステム819として図8に例示される。
[0066]ここに説明された技法は、直交多重化スキームに基づく通信システムを含む、様々な通信システムのために使用されうる。このような通信システムの例は、直交周波数分割多元接続(OFDMA)システム、シングルキャリア周波数分割多元接続(SC−FDMA)システムなどを含む。OFDMAシステムは、システム帯域幅全体を複数の直交サブキャリアに分割する変調技法である、直交周波数分割多重(OFDM)を利用する。これらサブキャリアはまた、トーン、ビンなどと呼ばれることもできる。OFDMでは、各サブキャリアは、データを用いて独立して変調されうる。SC−FDMAシステムは、システム帯域幅にわたって分散されたサブキャリアで送信するためにインターリーブドFDMA(IFDMA)を利用し、隣接サブキャリアの1つのブロックで送信するためにローカライズドFDMA(LFDMA)を利用し、または、隣接サブキャリアの複数のブロックで送信するためにエンハンストFDMA(EFDMA)を利用しうる。一般に、変調シンボルは、OFDMでは周波数領域で、およびSC−FDMAでは時間領域で送られる。
[0067]「決定すること(determining)」という用語は、幅広い種類の動作を包含し、したがって、「決定すること」は、計算すること(calculating)、コンピューティングすること(computing)、処理すること(processing)、導出すること(deriving)、調査すること(investigating)、ルックアップすること(looking up)(例えば、表、データベース、または別のデータ構造をルックアップすること)、確定すること(ascertaining)、および同様のことを含みうる。また、「決定すること」は、受信すること(receiving)(例えば、情報を受信すること)、アクセスすること(accessing)(例えば、メモリ内のデータにアクセスすること)、および同様のことを含みうる。また、「決定すること」は、解決すること(resolving)、選択すること(selecting)、選ぶこと(choosing)、確立すること(establishing)、および同様のことを含みうる。
[0068]「〜に基づいて(based on)」という表現は、別段の規定がない限り、「〜だけに基づいて(based only on)」を意味しない。言い換えれば、「〜に基づいて」という表現は、「〜だけに基づいて」および「少なくとも〜に基づいて(based at least on)」の両方を説明する。
[0069]「プロセッサ」という用語は、汎用プロセッサ、中央処理ユニット(CPU)、マイクロプロセッサ、デジタルシグナルプロセッサ(DSP)、コントローラ、マイクロコントローラ、ステートマシンなどを包含するように広く解釈されるべきである。いくつかの状況下では、「プロセッサ」は、特定用途向け集積回路(ASIC)、プログラマブル論理デバイス(PLD)、フィールドプログラマブルゲートアレイ(FPGA)などを指しうる。「プロセッサ」という用語は、処理デバイスの組み合わせ、例えば、DSPとマイクロプロセッサの組み合わせ、複数のマイクロプロセッサ、DSPコアと連携した1つまたは複数のマイクロプロセッサ、あるいはその他任意のこのような構成を指しうる。
[0070]「メモリ」という用語は、電子情報を記憶することができる任意の電子コンポーネントを包含するように広く解釈されるべきである。メモリという用語は、ランダムアクセスメモリ(RAM)、読取専用メモリ(ROM)、不揮発性ランダムアクセスメモリ(NVRAM)、プログラマブル読取専用メモリ(PROM)、消去可能プログラマブル読取専用メモリ(EPROM)、電気的消去可能PROM(EEPROM)、フラッシュメモリ、磁気的または光学的なデータ記憶装置、レジスタなどのような、様々なタイプのプロセッサ可読媒体を指しうる。プロセッサが、メモリから情報を読み取る、および/または、メモリに情報を書き込むことができる場合、メモリは、プロセッサと電子通信状態にあると言われる。プロセッサに統合されたメモリは、プロセッサと電子通信状態にある。
[0071]「命令」および「コード」という用語は、任意のタイプの(単数または複数の)コンピュータ可読ステートメントを含むように広く解釈されるべきである。例えば、「命令」および「コード」という用語は、1つまたは複数のプログラム、ルーチン、サブルーチン、機能(functions)、プロシージャなどを指しうる。「命令」および「コード」は、単一のコンピュータ可読ステートメントまたは多数のコンピュータ可読ステートメントを備えうる。
[0072]ここで説明される機能は、ハードウェアによって実行されるソフトウェアまたはファームウェアにおいてインプリメントされうる。これら機能は、コンピュータ可読媒体上で、1つまたは複数の命令として記憶されうる。「コンピュータ可読媒体」または「コンピュータプログラム製品」という用語は、コンピュータまたはプロセッサによってアクセスされうる任意の有形の記憶媒体を指す。限定ではなく例として、コンピュータ可読媒体は、RAM、ROM、EEPROM、CD−ROMまたは他の光ディスク記憶装置、磁気ディスク記憶装置またはその他の磁気記憶デバイス、あるいは、データ構造または命令の形式で所望のプログラムコードを記憶または搬送するために使用可能であり、かつコンピュータによってアクセスされうるその他任意の媒体を備えうる。ここで使用される場合、ディスク(disk)およびディスク(disc)は、コンパクトディスク(CD)、レーザーディスク(登録商標)、光ディスク、デジタル多目的ディスク(DVD)、フロッピー(登録商標)ディスク、およびBlu-ray(登録商標)ディスクを含み、ここでディスク(disks)は、通常磁気的にデータを再生し、一方ディスク(discs)は、レーザーを用いて光学的にデータを再生する。
[0073]ここに開示された方法は、説明された方法を達成するための1つまたは複数のステップまたは動作(action)を備える。方法のステップおよび/または動作は、特許請求の範囲から逸脱することなく互いに置き換えられうる。言い換えれば、ステップまたは動作の特定の順序が、説明されている方法の正常な動作のために必要とされない限り、特定のステップおよび/または動作の順序および/または使用は、特許請求の範囲から逸脱することなく修正されうる。
[0074]さらに、図3、図5、および図7によって例示されているような、ここに説明された方法および技法を実行するためのモジュールおよび/または他の適切な手段は、デバイスによってダウンロードされるおよび/または別の方法で取得されうることが理解されるべきである。例えば、デバイスは、ここに説明された方法を実行するための手段の転送を容易にするために、サーバに結合されうる。代替として、ここで説明された様々な方法は、デバイスに記憶手段を結合または提供した際に、デバイスが様々な方法を取得しうるように、記憶手段(例えば、ランダムアクセスメモリ(RAM)、読取専用メモリ(ROM)、コンパクトディスク(CD)またはフロッピーディスクのような物理記憶媒体など)を介して提供されうる。
[0075]特許請求の範囲は、上記に例示されたとおりの構成およびコンポーネントに限定されないことが理解されるべきである。様々な修正、変更、および変形が、特許請求の範囲から逸脱することなく、ここに説明されたシステム、方法、および装置の配置、動作および詳細において行われうる。
以下に本願の出願当初の特許請求の範囲に記載された発明を付記する。
[C1]
ハウジングを備えるハイブリッド入力デバイスであって、ここにおいて、前記ハウジングは、
前記ハウジングから選択的に突出するタッチスクリーンスタイラスと、
前記ハウジングから選択的に突出する筆記具と、
圧力センサと、
ウルトラソニックデータパターンを送信するウルトラソニック送信機と、
前記ハイブリッド入力デバイスのウルトラソニック機能をトグルで切り換える制御要素と
を備える、ハイブリッド入力デバイス。
[C2]
前記制御要素は、無線通信デバイスからの受信されたウルトラソニックコマンドに基づいて、ウルトラソニック機能をトグルで切り換える、C1に記載のハイブリッド入力デバイス。
[C3]
前記制御要素は、無線通信デバイスへの前記ハイブリッド入力デバイスの近さに基づいて、前記ハウジングから突出させる前記タッチスクリーンスタイラスまたは前記筆記具を選択する、C1に記載のハイブリッド入力デバイス。
[C4]
前記ウルトラソニックデータパターンは、前記ハイブリッド入力デバイスのための一意の識別値、圧力センサ値および前記制御要素のステータス値のうちの1つまたは複数を備える、C1に記載のハイブリッド入力デバイス。
[C5]
前記圧力センサは、前記筆記具が表面に押し付けられる圧力を測定する、C1に記載のハイブリッド入力デバイス。
[C6]
前記ウルトラソニック送信機は、周期的にウルトラソニックデータを送信する、C1に記載のハイブリッド入力デバイス。
[C7]
前記スタイラスは、静電容量方式タッチスクリーンおよび抵抗膜方式タッチスクリーンのうちの1つまたは複数によって認識される、C1に記載のハイブリッド入力デバイス。
[C8]
ハイブリッド入力デバイスを使用するための方法であって、
前記ハイブリッド入力デバイスにおけるタッチスクリーンスタイラスを用いてタッチスクリーン上に書くことと、
前記ハイブリッド入力デバイスに関連付けられる制御要素ステータスに基づいて、ウルトラソニック機能をオンまたはオフにすることと、
ウルトラソニック機能がオンであるかまたはオフであるかに基づいて、ウルトラソニックデータパターンを送信することと
を備える方法。
[C9]
前記ウルトラソニックデータパターンは、前記ハイブリッド入力デバイスのための一意の識別値、圧力センサ値および前記制御要素のステータス値のうちの1つまたは複数を備える、C8に記載の方法。
[C10]
前記ハイブリッド入力デバイスにおける筆記具が表面に押し付けられる圧力を測定することをさらに備える、C8に記載の方法。
[C11]
前記送信することは、ウルトラソニック機能がオンであるときに、周期的にウルトラソニックデータを送信することを備える、C8に記載の方法。
[C12]
前記タッチスクリーンスタイラスは、静電容量方式タッチスクリーンおよび抵抗膜方式タッチスクリーンのうちの1つまたは複数によって認識される、C8に記載の方法。
[C13]
前記タッチスクリーンスタイラスまたは前記筆記具を、前記ハウジングからそれを完全に取り外し、前記ハウジングに異なるタッチスクリーンスタイラスまたは筆記具を挿入することによって、取り替えることをさらに備える、C8に記載の方法。
[C14]
ハイブリッド入力デバイスであって、
タッチスクリーン上に書くための手段と、
前記タッチスクリーン外に書くための手段と、
前記ハイブリッド入力デバイスのウルトラソニック機能をオンまたはオフにするための手段と、
ウルトラソニック機能がオンであるかまたはオフであるかに基づいて、ウルトラソニックデータパターンを送信するための手段と
を備えるハイブリッド入力デバイス。
[C15]
前記ウルトラソニックデータパターンは、前記ハイブリッド入力デバイスのための一意の識別値、圧力センサ値および前記ウルトラソニック機能をオンまたはオフにするための手段のステータス値のうちの1つまたは複数を備える、C14に記載のハイブリッド入力デバイス。
[C16]
前記タッチスクリーン外に書くための手段が表面に押し付けられる圧力を測定するための手段をさらに備える、C14に記載のハイブリッド入力デバイス。
[C17]
前記送信するための手段は、ウルトラソニック機能がオンであるときに、周期的にウルトラソニックデータを送信する、C14に記載のハイブリッド入力デバイス。
[C18]
前記タッチスクリーン上に書くための手段は、静電容量方式タッチスクリーンおよび抵抗膜方式タッチスクリーンのうちの1つまたは複数によって認識される、C14に記載のハイブリッド入力デバイス。
[C19]
ウルトラソニック追跡アルゴリズムをチューニングするための方法であって、
タッチスクリーン座標点およびウルトラソニック座標点を受信することと、
前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較することと、
前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定することと
を備える方法。
[C20]
前記方法は、無線通信デバイスによって実行される、C19に記載の方法。
[C21]
半自動構成において、前記受信することは、タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示すことを備える、C19に記載の方法。
[C22]
自動構成において、前記受信することは、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信することを備える、C19に記載の方法。
[C23]
温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用することをさらに備える、C19に記載の方法。
[C24]
ウルトラソニック追跡アルゴリズムをチューニングするための装置であって、
タッチスクリーン座標点およびウルトラソニック座標点を受信するための手段と、
前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較するための手段と、
前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定するための手段と
を備える装置。
[C25]
前記装置は、無線通信デバイスである、C24に記載の装置。
[C26]
タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示すための手段をさらに備える、C24に記載の装置。
[C27]
前記受信するための手段は、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信する、C24に記載の装置。
[C28]
温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用するための手段をさらに備える、C24に記載の装置。
[C29]
ウルトラソニック追跡アルゴリズムをチューニングするためのコンピュータプログラム製品であって、その上に命令を有する非一時的なコンピュータ可読媒体を備え、前記命令は、
無線通信デバイスに、タッチスクリーン座標点およびウルトラソニック座標点を受信させるためのコードと、
前記無線通信デバイスに、前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較させるためのコードと、
前記無線通信デバイスに、前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定させるためのコードと
を備える、コンピュータプログラム製品。
[C30]
前記無線通信デバイスに、タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示させるためのコードをさらに備える、C29に記載のコンピュータプログラム製品。
[C31]
前記無線通信デバイスに受信させるための前記コードは、前記無線通信デバイスに、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信させるためのコードを備える、C29に記載のコンピュータプログラム製品。
[C32]
前記無線通信デバイスに、温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用させるためのコードをさらに備える、C29に記載のコンピュータプログラム製品。
[C33]
ウルトラソニック追跡アルゴリズムをチューニングするための装置であって、
プロセッサと、
前記プロセッサと電子通信状態にあるメモリと、
メモリに記憶された命令と
を備え、前記命令は、
タッチスクリーン座標点およびウルトラソニック座標点を受信し、
前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較し、
前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定する
ように実行可能である、装置。
[C34]
前記装置は、無線通信デバイスである、C33に記載の装置。
[C35]
半自動構成において、受信するように実行可能である前記命令は、タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示すように実行可能である命令を備える、C33に記載の装置。
[C36]
自動構成において、受信するように実行可能である前記命令は、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信するように実行可能である命令を備える、C33に記載の装置。
[C37]
温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用するように実行可能である命令をさらに備える、C33に記載の装置。

Claims (19)

  1. ウルトラソニック追跡アルゴリズムをチューニングするための方法であって、
    タッチスクリーン座標点およびウルトラソニック座標点を受信することと、
    前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較することと、
    前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定することと
    を備える方法。
  2. 前記方法は、無線通信デバイスによって実行される、請求項に記載の方法。
  3. 半自動構成において、前記受信することは、タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示すことを備える、請求項に記載の方法。
  4. 自動構成において、前記受信することは、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信することを備える、請求項に記載の方法。
  5. 温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用することをさらに備える、請求項に記載の方法。
  6. ウルトラソニック追跡アルゴリズムをチューニングするための装置であって、
    タッチスクリーン座標点およびウルトラソニック座標点を受信するための手段と、
    前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較するための手段と、
    前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定するための手段と
    を備える装置。
  7. 前記装置は、無線通信デバイスである、請求項に記載の装置。
  8. タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示すための手段をさらに備える、請求項に記載の装置。
  9. 前記受信するための手段は、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信する、請求項に記載の装置。
  10. 温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用するための手段をさらに備える、請求項に記載の装置。
  11. ウルトラソニック追跡アルゴリズムをチューニングするためのコンピュータプログラム製品であって、その上に命令を有する非一時的なコンピュータ可読媒体を備え、前記命令は、
    無線通信デバイスに、タッチスクリーン座標点およびウルトラソニック座標点を受信させるためのコードと、
    前記無線通信デバイスに、前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較させるためのコードと、
    前記無線通信デバイスに、前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定させるためのコードと
    を備える、コンピュータプログラム製品。
  12. 前記無線通信デバイスに、タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示させるためのコードをさらに備える、請求項11に記載のコンピュータプログラム製品。
  13. 前記無線通信デバイスに受信させるための前記コードは、前記無線通信デバイスに、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信させるためのコードを備える、請求項11に記載のコンピュータプログラム製品。
  14. 前記無線通信デバイスに、温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用させるためのコードをさらに備える、請求項11に記載のコンピュータプログラム製品。
  15. ウルトラソニック追跡アルゴリズムをチューニングするための装置であって、
    プロセッサと、
    前記プロセッサと電子通信状態にあるメモリと、
    メモリに記憶された命令と
    を備え、前記命令は、
    タッチスクリーン座標点およびウルトラソニック座標点を受信し、
    前記タッチスクリーン座標点と前記ウルトラソニック座標点とを比較し、
    前記比較に基づいて、前記ウルトラソニック追跡アルゴリズムのためのチューニングパラメータを決定する
    ように実行可能である、装置。
  16. 前記装置は、無線通信デバイスである、請求項15に記載の装置。
  17. 半自動構成において、受信するように実行可能である前記命令は、タッチスクリーンにハイブリッド入力デバイスをタッチするプロンプトを示すように実行可能である命令を備える、請求項15に記載の装置。
  18. 自動構成において、受信するように実行可能である前記命令は、ハイブリッド入力デバイスから、第2の所定の数のタッチイベントの発生の後に第1の所定の数のタッチイベントを受信するように実行可能である命令を備える、請求項15に記載の装置。
  19. 温度および湿度のうちの1つまたは複数による不精確さをオフセットするために、前記チューニングパラメータを適用するように実行可能である命令をさらに備える、請求項15に記載の装置。
JP2018014674A 2013-03-07 2018-01-31 ウルトラソニックハイブリッド入力デバイス Active JP6563533B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/788,341 US9430061B2 (en) 2013-03-07 2013-03-07 Ultrasonic hybrid input device and corresponding tuning method
US13/788,341 2013-03-07

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015561405A Division JP2016513831A (ja) 2013-03-07 2014-02-26 ウルトラソニックハイブリッド入力デバイス

Publications (2)

Publication Number Publication Date
JP2018110001A JP2018110001A (ja) 2018-07-12
JP6563533B2 true JP6563533B2 (ja) 2019-08-21

Family

ID=50390184

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015561405A Withdrawn JP2016513831A (ja) 2013-03-07 2014-02-26 ウルトラソニックハイブリッド入力デバイス
JP2018014674A Active JP6563533B2 (ja) 2013-03-07 2018-01-31 ウルトラソニックハイブリッド入力デバイス

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015561405A Withdrawn JP2016513831A (ja) 2013-03-07 2014-02-26 ウルトラソニックハイブリッド入力デバイス

Country Status (6)

Country Link
US (1) US9430061B2 (ja)
EP (1) EP2965179B1 (ja)
JP (2) JP2016513831A (ja)
KR (1) KR20150127115A (ja)
CN (1) CN105027048B (ja)
WO (1) WO2014137706A2 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWM467942U (zh) * 2013-09-02 2013-12-11 Te-Hsiang Fang 主動式觸控筆(二)
CN104571633B (zh) * 2013-10-29 2017-11-28 联想(北京)有限公司 一种笔迹获取方法、装置及超声波电子笔
EP3252571B1 (en) * 2015-01-30 2021-03-03 Wacom Co., Ltd. Position indicator
JP5999803B1 (ja) 2015-02-12 2016-09-28 株式会社ワコム 位置指示器
KR102312888B1 (ko) 2015-05-13 2021-10-15 삼성전자주식회사 입력장치, 이를 구비하는 전자기기 및 그 제어방법
KR102512318B1 (ko) * 2015-06-29 2023-03-22 가부시키가이샤 와코무 위치 검출 장치 및 그 위치 지시기
CN105022505A (zh) * 2015-07-21 2015-11-04 瑞声声学科技(深圳)有限公司 手写输入装置
JP6487807B2 (ja) * 2015-08-21 2019-03-20 株式会社ワコム 位置指示器
CN105573552B (zh) * 2015-12-25 2018-11-02 汉王科技股份有限公司 轨迹输入装置、与其通信的触摸屏及轨迹输入系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02301814A (ja) * 1989-05-17 1990-12-13 Canon Inc 座標入力装置
JPH0778050A (ja) * 1993-09-08 1995-03-20 Fujitsu Ltd ペン入力用座標入力装置
JPH09190268A (ja) * 1996-01-11 1997-07-22 Canon Inc 情報処理装置およびその方法
JPH10171588A (ja) * 1996-12-06 1998-06-26 Fuji Xerox Co Ltd ペン入力装置及び該装置におけるキャリブレーション方法
JP3871524B2 (ja) * 2000-11-17 2007-01-24 富士通株式会社 座標入力装置
JP4590114B2 (ja) * 2001-02-08 2010-12-01 キヤノン株式会社 座標入力装置及びその制御方法、記録媒体
US7279646B2 (en) * 2001-05-25 2007-10-09 Intel Corporation Digital signature collection and authentication
US6806868B2 (en) 2002-01-03 2004-10-19 Compal Electronics, Inc. Multi-function touch pen for computerized apparatus
JP4146188B2 (ja) * 2002-08-15 2008-09-03 富士通株式会社 超音波型座標入力装置
JP2004164505A (ja) * 2002-11-15 2004-06-10 Fujitsu Ltd 座標出力装置
US6999067B2 (en) * 2002-12-30 2006-02-14 Aiptek International Inc. Electromagnetic induction pen-like device with writing function
US7489308B2 (en) * 2003-02-14 2009-02-10 Microsoft Corporation Determining the location of the tip of an electronic stylus
JP2007272710A (ja) * 2006-03-31 2007-10-18 Pentel Corp 手書き筆跡入力システム
JP4966636B2 (ja) * 2006-12-13 2012-07-04 株式会社ワコム 座標入力装置
CN101398720B (zh) * 2007-09-30 2010-11-03 联想(北京)有限公司 笔交互装置
JP5705548B2 (ja) * 2008-01-03 2015-04-22 クアルコム,インコーポレイテッド 超音波デジタイザおよびホスト
WO2011008533A2 (en) 2009-06-29 2011-01-20 Gerald Leto Multifunctional writing apparatus with capacitive touch screen stylus
JP5589909B2 (ja) 2011-03-14 2014-09-17 株式会社リコー 表示装置、表示装置のイベント切替え制御方法及びプログラム
US9329703B2 (en) 2011-06-22 2016-05-03 Apple Inc. Intelligent stylus
CN102541384B (zh) * 2012-02-10 2015-02-11 福建华映显示科技有限公司 双模式触控感应装置

Also Published As

Publication number Publication date
US9430061B2 (en) 2016-08-30
CN105027048B (zh) 2017-10-17
JP2016513831A (ja) 2016-05-16
EP2965179A2 (en) 2016-01-13
KR20150127115A (ko) 2015-11-16
CN105027048A (zh) 2015-11-04
JP2018110001A (ja) 2018-07-12
EP2965179B1 (en) 2018-10-03
WO2014137706A2 (en) 2014-09-12
WO2014137706A3 (en) 2014-12-18
US20140253442A1 (en) 2014-09-11

Similar Documents

Publication Publication Date Title
JP6563533B2 (ja) ウルトラソニックハイブリッド入力デバイス
US10671231B2 (en) Electromagnetic interference signal detection
WO2020140947A1 (zh) 触控笔、触控面板、显示装置及触控感测方法
EP2945045B1 (en) Electronic device and method of playing music in electronic device
KR101421638B1 (ko) 터치 검출 방법 및 이를 이용하는 터치 제어 장치
EP3133473A1 (en) Method of sensing pressure by touch sensor and electronic device adapted thereto
US20140355389A1 (en) Method and apparatus for establishing device communication
CN107924286B (zh) 电子设备及电子设备的输入方法
WO2019105376A1 (zh) 手势识别方法、终端及存储介质
CA2466951A1 (en) Focus management using in-air points
CN106713598B (zh) 基于指示方向的指令传输方法及装置、智能设备
JP7213923B2 (ja) ペアリング方法及び位置検出システム
CN108027684B (zh) 电磁干扰信号检测
WO2017148041A1 (zh) 显示屏、触控笔以及显示模组
KR102512614B1 (ko) 오디오 개선을 지원하는 전자 장치 및 이를 위한 방법
WO2023202141A1 (zh) 一种显示方法、控制设备及计算机存储介质
CN115686264A (zh) 一种防误触方法及设备
CN108027693B (zh) 识别用户的方法、设备及计算机可读存储介质
US20240310925A1 (en) Keyboard for touch-sensitive display device
US9733714B2 (en) Computing system with command-sense mechanism and method of operation thereof
CN109107148A (zh) 控制方法、装置、存储介质及移动终端
CN114546146B (zh) 触摸屏的触摸响应延时测量方法、装置、系统及交互平板
CN108594705B (zh) 移动终端的状态检测方法、装置、存储介质及移动终端
CN103617035A (zh) 基于智能手机的视距测量处理方法
TWI582646B (zh) 電子裝置以及適用於電子裝置之防止雜訊干擾方法

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181204

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190625

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190724

R150 Certificate of patent or registration of utility model

Ref document number: 6563533

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250