JP4908518B2 - 電子デバイスの改善された文章入力 - Google Patents

Description

本発明の実施形態は、電子デバイスの改善された文章入力に関する。特に、電子デバイスへの文章入力方法と、電子デバイスと、電子デバイスを制御するプログラム命令を含んだコンピュータ・プログラムと、グラフィカル・ユーザ・インターフェースとに関する。

発明の背景

手書き文字認識は、ユーザが電子デバイスに情報を入力できるようにするために頻繁に使われる。一連の文字を認識するプロセスは多くの場合遅く不正確になり得るため、例えば単語または電話番号などの一連の文字をこのようなデバイスに入力する際に問題が生じる。

発明の簡単な説明

本発明の一実施形態によれば、ディスプレイを具備する電子デバイスに一連の文字を入力する次のような方法が提供される。この方法は、前記ディスプレイ上に文字を入力するために、前記ディスプレイの複数の個別領域の第１の領域に関連している第１の入力を検出することと；前記複数の個別領域の第２の領域が第２の文字入力として認識される第２の入力を検出するように動作しうる間に、前記複数の個別領域の前記第１の領域における前記第１の入力を第１の文字入力として認識することと；を含む。前記第２の文字入力の前記認識は、前記第１の文字入力の前記認識とは別に生じる。

これは、各文字入力が複数の個別領域の異なるものに関連するという利点をもたらす。これにより、プロセッサが他の文字入力と関係なく各文字入力を認識できるようになり、その結果、プロセッサが前の文字入力を認識できる間、同時に、ユーザは新たな入力を行うことができる。これによって、一連の文字を入力するプロセスが迅速化され、通常の手書きのプロセスによく似たものとなる。

本発明の別の実施形態によれば、次のような電子デバイスが提供される。この電子デバイスは、一連の文字を入力するための複数の個別領域を有するディスプレイと；前記複数の個別領域を介して文字を入力するためのユーザ入力部と；前記複数の個別領域の第１の領域に関連している第１の入力を検出する検出手段と；前記複数の個別領域の前記第１の領域における前記第１の入力を、第１の文字入力として認識する一方、前記複数の領域の第２の領域において、第２の文字入力として認識される第２の入力を検出する処理手段と；を具備する。前記第２の文字入力の前記認識は、前記第１の文字入力の前記認識とは別に生じる。

本発明の別の実施形態によれば、プロセッサにロードされることにより、ディスプレイを具備する電子デバイスを制御するプログラム命令を含んだコンピュータ・プログラムが提供される。この電子デバイスは、文字を入力するためのディスプレイの複数の個別領域の第１の領域に関連している第１の入力を検出する手段と；前記複数の個別領域の第２の領域が第２の文字入力として認識される第２の入力を検出するように動作しうる間に、前記複数の個別領域の前記第１の領域における前記第１の入力を第１の文字入力として認識する手段と、を備える。前記第２の文字入力の前記認識は、前記第１の文字入力の前記認識とは別に生じる。

本発明の別の実施形態によれば、ディスプレイを備えるグラフィカル・ユーザ・インターフェースが提供される。これは、前記ディスプレイ上に文字を入力するために、前記ディスプレイの複数の個別領域の第１の領域に関連している第１の入力の検出を可能にし；前記複数の個別領域の第２の領域が第２の文字入力として認識される第２の入力を検出するように動作しうる間に、前記複数の個別領域の前記第１の領域における前記第１の入力を第１の文字入力として認識することを可能にする。前記第２の文字入力の前記認識は、前記第１の文字入力の前記認識とは別に生じる。

本発明のさらなる実施形態によれば、第１の文字、第２の文字および第３の文字を含む順序付けられた文字の列を含む一連の文字を入力する方法が提供され、この方法は、ディスプレイ上の第１の領域、第２の領域および第３の領域を含む順序付けられた領域の列を提供することを含み、第１の文字は第１の領域に関連し、第２の文字は第２の領域に関連し、第３の文字は第３の領域に関連するようにされていることで、各文字とディスプレイの各領域とが対応しており；第１の領域内における軌跡入力は第１の文字を定義し、第２の領域内における軌跡入力は第２の文字を定義し、第３の領域内における軌跡入力は第３の文字を定義し、各領域内における入力は他の領域内における入力とは別に処理される。

ここからは、本発明がよりよく理解されるよう、単なる一例として添付の図面を参照する。

発明の実施形態の詳細な説明

図は、ディスプレイ１１を含む電子デバイス１に一連の文字を入力する方法を例示しており、この方法は、ディスプレイ１１上で文字を入力するためのディスプレイ１１の複数の個別領域５３の第１の領域に関連している第１の入力を検出することと；複数の個別領域５３の第１の領域における第１の入力を第１の文字入力５９として認識することとを含み、第２の文字入力５９として認識される第２の入力を検出するよう複数の個別領域５３の第２の領域が機能可能であり、第２の文字入力５９の認識は第１の文字入力５９の認識とは別に生じる。

図１は、電子デバイス１を概略的に例示している。以下の説明で参照される機能のみが例示されている。なお、当然のことではあるが、デバイス１は例示されていない追加の機能を含んでもよい。電子デバイス１は、例えばパーソナル・コンピュータ、携帯情報端末、セル式移動電話、テレビ、テレビと併用されるビデオ・レコーダ、またはグラフィカル・ユーザ・インターフェースを使用する任意の他の電子デバイスなどであればよい。

例示されている電子デバイス１は、プロセッサ３、メモリ５およびユーザ・インターフェース９を含んでいる。ユーザ・インターフェース９は、ディスプレイ１１およびユーザ入力手段１３を含んでいる。ディスプレイ１１は、タッチ・センシティブ・ディスプレイであるとよい。ユーザ入力手段１３は、タッチ・センシティブ・ディスプレイ１１上の１つ以上の領域を含むとよい。ユーザ入力手段１３はさらに、例えばキーパッドまたはジョイスティックなど、他のタイプのユーザ入力を含んでもよい。プロセッサ３は、ユーザ・インターフェース９から入力コマンドを受信し、ディスプレイ１１に出力コマンドを提供するよう接続されている。プロセッサ３はさらに、メモリ５への書き込みおよびそこからの読み取りを行うよう接続されている。

ディスプレイ１１は、グラフィカル・ユーザ・インターフェース（ＧＵＩ：Graphical User Interface）をユーザに示す。本発明の実施形態によるＧＵＩの例が、図３および５に例示されている。

メモリ５はコンピュータ・プログラム命令７を格納しており、これはプロセッサ３にロードされると、プロセッサ３が下記のようにデバイス１の動作を制御できるようにする。コンピュータ・プログラム命令７は、電子デバイス１が図２および４に例示されている方法を実行できるようにする論理およびルーチンを提供する。

コンピュータ・プログラム命令７は、電磁搬送信号を介して電子デバイス１に到達してもよく、または、コンピュータ・プログラム製品、メモリ・デバイスまたはＣＤ−ＲＯＭもしくはＤＶＤなどの記憶媒体など、物理エンティティからコピーされてもよい。

本発明の第１の実施形態に従ってデバイス１を制御する方法が、図２に概略的に例示されている。

ステップ２１で、プロセッサ３は、手書き文字認識を使用して一連の文字５９を入力するための複数の個別領域５３をユーザに示すよう、ディスプレイ１１を制御する。文字５９は、情報を伝えるのに使用される任意の筆記記号であればよい。例えば文字５９は、任意のローマ字、句読点、アラビア数字、数字記号または漢字であってもよい。文字はさらに、文字または文字のグループを表すのに使用される速記記号または省略記号であってもよい。

複数の個別領域５３は、ディスプレイ１１上に一連の分画領域として表示されるとよい。分画領域は、領域内に一連の文字を入力するプロセスが通常の手書きのプロセスによく似たものとなるように、軸に沿って隣接して広がっているとよい。

ステップ２３で、プロセッサ３は、文字入力の開始段階を検出する。開始段階は、スタイラスまたはユーザの指などのオブジェクトでユーザがタッチ・センシティブ・ディスプレイ１１に触れることであればよい。プロセッサ３は、ステップ２５で、複数の個別領域５３のどれで開始段階が生じたかを判断する。開始段階に続くさらなる入力は、どれもこの個別領域に関連することになる。

続いてプロセッサ３は、ステップ２７で、文字入力の形成段階を検出する。形成段階は、スタイラスまたはユーザの指でタッチ・センシティブ・ディスプレイ１１をなぞることによって、ユーザがドラッグ動作または一連のドラッグ動作をすることを含むとよい。文字入力の形成段階は入力の開始段階が生じた個別領域に関連するが、ドラッグ動作がこの領域の境界内に限定される必要はない。ドラッグ動作は軌跡５９を作り出し、これがプロセッサ３により記録されてステップ２９でディスプレイ１１上に表示される。

ステップ３１で、プロセッサ３は、所定の時間内に任意のさらなる入力が生じるかどうか判断する。入力が生じれば、プロセッサ３は、ステップ２５に戻って複数の個別領域のどれで入力が生じたかを判断する。所定の時間内にさらなる入力が生じなければ、プロセッサ３はステップ３３で文字入力が終わったと検出し、プロセッサ３は認識プロセスを開始する。

入力が同じ個別領域で生じれば、プロセッサ３はこれを文字入力の続きとして検出することになる。例えば、それは「ｉ」の点または「ｔ」の横線（ｃｒｏｓｓｉｎｇ）である可能性もある。入力が別の個別領域で生じれば、プロセッサ３はこれを別の文字入力の開始段階として検出することになり、ステップ３３で、第１の文字入力が完了したと検出することになる。続いてプロセッサ３は、第１の文字入力の認識プロセスを始める。プロセッサ３が、第１の個別領域に関連している第１の文字入力を認識している間、ユーザは別の個別領域内に次の文字入力をすることができる。

認識プロセスは、プロセッサ３がステップ３５で、文字入力を文字または文字のグループとして認識することを含む。これは、ルックアップ表を用いて実現されてもよい。プロセッサ３はステップ３７で、手書き文字入力軌跡５９を削除してそれを認識された活字文字６１と置き換えるよう、ディスプレイ１１を制御する。

ステップ２５から３１は、必要に応じて何度でも繰り返すことができる。これによって、一連の文字を入力することができるようになる。

図３Ａから３Ｌは、本発明の第１の実施形態によるグラフィカル・ユーザ・インターフェース（ＧＵＩ）５１の実施形態、およびＧＵＩ(５１)を使用しているユーザを例示している。図３Ａは、ディスプレイ１１によって示されるＧＵＩ(５１)を例示している。ＧＵＩ(５１)は、文章を表示できる第１の部分５２を含んでいる。この文章は、ユーザによって入力された文章であっても、デバイス１のメモリ５内に格納されている文章であってもよい。図３Ａではまだ文章が入力されていないため、第１の領域５２は空白である。ＧＵＩはさらに、手書き文字認識を使用して一連の文字を入力するためにユーザによって使用される第２の部分５４を含んでいる。この第２の部分５４は、複数の個別領域５３Ａ、５３Ｂ、５３Ｃ...５３Ｔを含んでおり、これらはここから集合的に５３と呼ばれる。この実施形態では、ディスプレイ１１を横断して２つの水平な列の状態で広がっている複数の四角として、個別領域がディスプレイ１１上に示されている。他の実施形態では、領域の他の形および構成が使用されてもよい。

図３Ａはさらに、複数の個別領域５３内で文字入力をするのに使用されてもよいスタイラス５７を例示している。他の実施形態では、ユーザはその指を使用してディスプレイ１１上に書き込むことができてもよい。

複数の個別領域の１つ、この特定の実施形態では右下の領域５３Ａは、スタイラス５７で触れることによってこの領域５３Ａを作動させると、複数の領域５３内にユーザによって入力された任意の文字を第１の部分５２内の文章に入力させるように、入力ボタンとして機能可能である。他の実施形態では、ディスプレイ１１の別の部分を作動させることによって、または別のユーザ入力手段を使用することによって、文字が入力されてもよい。

図３Ｂは、第１の文字入力５９Ｂの後のＧＵＩ(５１)を例示しており、複数の個別領域５３Ｂの第１の領域において、英字の「Ｈ」がユーザによってつくられている。スタイラス５７を用いてディスプレイ１１上で一連のドラッグ動作をすることによって入力が行われている。これらのドラッグ動作を示す軌跡５９がディスプレイ１１上に表示されている。

図３Ｂでは、文字入力５９Ｂの軌跡が領域５３Ｂの外へ出ている。しかし、文字入力５９Ｂのペンを下ろす動作はそれぞれ領域５３Ｂ内で生じたため、その結果、ドラッグ動作はそれぞれ領域５３Ｂに関連していると判断される。これは、ユーザが文字を入力するときに領域５３のサイズに制約されず、文字の入力時に線を越えることを避けるようユーザが特に注意する必要がないとうことを意味する。

図３Ｃは、ユーザが第２の文字入力５９Ｃ、この場合は英字の「ｅ」を入力した後のユーザ・インターフェースを例示している。文字入力５９Ｃの開始段階は個別領域５３Ｃ内で生じたため、文字入力５９Ｃは個別領域５３Ｃに関連している。ユーザが文字入力５９Ｃを始めると、プロセッサ３は文字入力５９Ｂが完了したことを検出し、認識プロセスを始める。

図３Ｄでは、ユーザは、第３の文字入力５９Ｄ、英字「ｌ」の入力を第３の個別領域５３Ｄ内で始めている。プロセッサ３は、第１の文字入力５９Ｂの認識を完了しており、領域５３Ｂ内の手書きの軌跡を、手書き入力５９Ｂに対応する活字文字６１Ｂと置き換えている。

図３Ｅでは、ユーザはさらに２つの文字入力をしている。領域５３Ｅ内の「ｌ」および領域５３Ｆ内の「ｏ」である。プロセッサ３は、最初の４つの文字入力の認識プロセスを完了しており、個別領域それぞれにおいて、手書きの軌跡それぞれを活字文字と置き換えている。ユーザは次に、新たな単語の入力を始めることを望む。２つの単語を分けるには、ユーザは単に、前の単語の最後の英字と関連した領域５３Ｆに隣接している領域５３Ｇを空のままにし、１つおいて隣の領域５３Ｈ内に新たな入力を始める。プロセッサ３は、領域５３Ｇに関連している文字入力はないが、２つの隣接領域５３Ｆおよび５３Ｈそれぞれには関連している文字入力があることを検出し、その結果、領域５３Ｇはスペースとして認識される。これによって、ユーザは、一度に２つ以上の単語を入力できるようになり、文字入力のより滑らかな方法が可能になる。

図３Ｆでは、ユーザは文字「Ｗ」、「ｏ」、「ｒ」、「ｌ」、「ｄ」および「！」を個別領域５３Ｈ、５３Ｉ、５３Ｊ、５３Ｋ、５３Ｌおよび５３Ｍそれぞれに入力している。プロセッサ３は、各文字入力の認識プロセスを完了しており、ディスプレイ１１上の手書きの軌跡５９は、活字文字６１によって置き換えられている。

プロセッサ３は、第５の個別領域５３Ｆに関連している文字入力５９Ｆを、「ｏ」ではなく「Ｄ」として間違って認識している。ユーザは、間違って認識された文字に関連している領域５３Ｆ内に新たな文字入力をすることによってこの誤りを修正できる。図３Ｇは、間違って認識された文字に関連している領域５３Ｇにおいて、スタイラス５７でディスプレイ１１に触れるユーザを例示している。プロセッサ３は、この入力を検出すると、図３Ｈに例示されているように、認識された文字を消去して活字文字６１Ｆをディスプレイ１１から消し、領域５３Ｆは空白のままにする。その結果、ユーザは、この領域内で新たな文字入力を始めることができる。一部の実施形態では、ユーザは、認識された文字が消されるまで、所定の期間、適所にスタイラス５７をとどめる必要があってもよい。これによって、認識された文字が予想外に消去されることが避けられる。

図３Ｉでは、個別領域５３Ｆ内にユーザが新たな文字入力５９Ｎを行っている。図３Ｊに例示されているように、プロセッサ３は、前の文字入力と同じように、文字入力を認識して領域５３Ｆ内の手書きの軌跡５９Ｎを活字文字６１Ｎと置き換える。

すべての文字が正確に認識されると、ユーザは一連の文字をディスプレイ５２の第１の部分に入力できる。例示されている実施形態では、これは、図３Ｋに例示されているように、スタイラス５７で入力領域５３Ａに触れることによって達成される。一部の実施形態では、無意識に文字を入力することを避けるために、ユーザがスタイラスを入力領域５３Ａに所定の時間とどめる必要があってもよい。文字が入力されると、図３Ｌに例示されているように、それらはディスプレイ５２の第１の部分に表示され、活字文字６１は個別領域５３から消される。

図４は、本発明の第２の実施形態による方法を例示している。この実施形態において、プロセッサ３は、ユーザにより文字またはジェスチャとして行われた入力を認識できる。文字は、第１の実施形態のように、情報を伝えるのに使用される任意の筆記記号であればよい。ジェスチャは、デバイスに機能を実行させる入力であってもよい。

ステップ７１で、タッチ・センシティブ・ディスプレイ１１はユーザにＧＵＩ(９１)を示す。この第２の実施形態と共に使用するのに適したＧＵＩ(９１)の例が、図５に例示されている。ステップ７３で、プロセッサ３は第１の入力を検出する。この入力は、例えば、ペンまたはスタイラスをＧＵＩ(９１)上に所定の期間とどめることであってもよい。

この第１の入力の検出に応答して、プロセッサ３はステップ７５で、手書き文字認識を使用した文字入力用の複数の個別領域９７をユーザに示すよう、ディスプレイ１１を制御する。これらの領域は、図５に例示されているように一連の四角形としてディスプレイ１１上に表示されてもよい。

ステップ７７で、プロセッサ３はさらなる入力を検出する。入力は、文字入力またはジェスチャ入力の開始段階であればよく、つまり、ユーザがペンまたはスタイラスでディスプレイ１１に触れることであればよい。ステップ７８で、プロセッサ３は、この入力が、複数の個別領域９７のうちの１つの中で生じたかどうかを判断する。入力が、複数の個別領域９７の任意のもので生じていれば、ユーザによって行われた入力は文字入力として認識される。プロセッサ３は、ステップ７９で文字入力を検出する。この文字入力はタッチ・センシティブ・ディスプレイ１１の一連の軌跡を含むとよい。これらの軌跡は、ディスプレイ１１上に表示されるとよい。プロセッサ３はステップ８１で、文字入力を文字として認識するが、これはルックアップ表を使用することによって行われてもよい。

入力が複数の個別領域９７の外で生じた場合、プロセッサ３は、ユーザによって行われた入力をジェスチャ入力として認識する。ステップ８３で、プロセッサ３は、タッチ・センシティブ・ディスプレイ１１上の軌跡または一連の軌跡を含み得るジェスチャ入力を検出する。ステップ８５で、プロセッサ３はこの入力を文字入力として認識する。これは、ルックアップ表を使用することによって行われてもよく、プロセッサ３は、文字入力用に有するルックアップ表とは別の、ジェスチャ入力用のものを有することが好ましい。ステップ８７で、プロセッサ３は、ジェスチャに関連した機能を実行するようデバイス１を制御することができる。

図５Ａは、本発明の第２の実施形態に従ってタッチ・センシティブ・ディスプレイ１１によって示されるＧＵＩ(９１)の実施形態を例示している。このＧＵＩ(９１)では、いくつかの通り（Street）９３と、これらの通り（Street）９３にある店およびレストランなどの種々の施設とを例示する地図が表示されている。

図５Ａで、ユーザはスタイラス５７を使用して第１の入力を行っている。この入力は、スタイラス５７を適所に所定の期間とどめることであってもよい。この第１の入力の検出に応答して、プロセッサ３は、図５Ｂに例示されているように、手書き文字認識を使用した文字入力用の複数の個別領域９７をユーザに示すよう、ディスプレイ１１を制御する。

図５Ｃから５Ｆは、複数の個別領域９７内に手書き文字を入力しているユーザを例示している。この特定の実施形態では、１つだけの文字入力が領域９７のそれぞれに関連している。他の実施形態では、２つ以上の文字入力が各領域９７に関連していてもよい。プロセッサ３は、各領域９７の入力を、他の領域９７に関連した入力から切り離して認識できる。

図５Ｃで、ユーザは英字「ｓ」に対応する第１の文字入力９９Ａを行っている。この入力は、スタイラス５７でタッチ・センシティブ・ディスプレイ１１を英字ｓの形になぞることによって行われてもよい。図５Ｄでは、ユーザは、領域９７Ｂおよび９７Ｃそれぞれにおいて、英字「ｈ」９９Ｂおよび英字「ｏ」９９Ｃに対応するさらに２つの文字入力を行っている。

図５Ｅでは、ユーザは領域９９Ｄ内にさらなる入力を始める。この領域は最後の利用可能領域の隣であるため、プロセッサ３はユーザが文字入力に利用可能な領域を使い果たそうとしていることを検出し、そこで、最後の利用可能領域９７Ｅに隣接した追加領域９７Ｆを示すようディスプレイ１１を制御する。図５Ｆで、ユーザは、領域９７Ｄ内の英字「ｐ」に対応する第４の文字入力９９Ｄを行っている。

この実施形態では、文字入力は、ディスプレイ１１上に手書きの軌跡を残す。他の実施形態では、これらの軌跡は、プロセッサ３が各文字入力を認識すると、活字文字に置き換えられてもよい。各文字入力を独立して認識することによって、プロセッサ３は、一連の文字入力を単語「ｓｈｏｐ」として認識できる。

図５Ｇでは、ユーザは、複数の個別領域９７の外で入力を行う。この入力は、ジェスチャとして認識される。例示されている例では、ジェスチャ入力１０１は、複数の個別領域９７内につくられた、文字入力９９の周りの円である。プロセッサ３は、ジェスチャ入力１０１が完了したと検出するとジェスチャ入力１０１を認識し、続いて、ジェスチャに関連した機能を実行するようデバイス１を制御する。プロセッサ３は、所定の期間さらなる入力が生じなければ、ジェスチャ入力が完了したと検出するとよい。あるいは、プロセッサ３は、例えば複数の個別領域９７のうちの１つの中など、他の場所で別の入力が生じると、ジェスチャ入力が完了したと検出するとよい。この特定の例では、プロセッサ３は、図５Ｈに例示されているように、ユーザによって描かれた円１０１内のすべての店を表示するようデバイス１を制御する。

先行する段落では、種々の例を参照して本発明の実施形態が説明されたが、当然のことながら、請求されているとおりの本発明の範囲から逸脱することなく、与えられた例に対して変更を加えることが可能である。

電子デバイスを概略的に例示している。 本発明の第１の実施形態の方法ステップを示す流れ図を例示している。 図３の一部であり、本発明の第１の実施形態に従ってグラフィカル・インターフェースを使用しているユーザを例示している。 同じく図３の一部である。 同じく図３の一部である。 同じく図３の一部である。 本発明の第２の実施形態の方法ステップを示す流れ図を例示している。 図５の一部であり、本発明の第２の実施形態に従ってグラフィカル・インターフェースを使用しているユーザを例示している。 同じく図５の一部である。 同じく図５の一部である。

Claims (2)

1. ディスプレイを具備する電子デバイスに一連の文字を入力する方法であって、
   前記ディスプレイ上に文字を入力するために、前記ディスプレイにおける連続する複数の個別領域の第１の領域に関連している第１の入力を検出することと；
   前記複数の個別領域の第２の領域が第２の文字入力として認識される第２の入力を検出するように動作しうる間に、前記複数の個別領域の前記第１の領域における前記第１の入力を第１の文字入力として認識することと；
   を含み、前記第２の文字入力の前記認識は、前記第１の文字入力の前記認識とは別に生じ、前記複数の個別領域からはみ出た開始段階はジェスチャとして認識され、ここで前記ジェスチャは前記認識された前記第１及び前記第２の文字入力に少なくとも依存した機能に関連する、方法。
2. 一連の文字を入力するための、連続する複数の個別領域を有するディスプレイと；
   前記複数の個別領域を介して文字を入力するためのユーザ入力部と；
   前記複数の個別領域の第１の領域に関連している第１の入力を検出する検出手段と；
   前記複数の個別領域の前記第１の領域における前記第１の入力を、第１の文字入力として認識する一方、前記複数の領域の第２の領域において、第２の文字入力として認識される第２の入力を検出する処理手段と；
   を具備し、前記第２の文字入力の前記認識は、前記第１の文字入力の前記認識とは別に生じ、前記複数の個別領域からはみ出た開始段階はジェスチャとして認識され、ここで前記ジェスチャは前記認識された前記第１及び前記第２の文字入力に少なくとも依存した機能に関連する、電子デバイス。

Images