JP6500830B2 - 手書き文字入力装置、画像形成装置及び手書き文字入力方法 - Google Patents

手書き文字入力装置、画像形成装置及び手書き文字入力方法 Download PDF

Info

Publication number
JP6500830B2
JP6500830B2 JP2016089878A JP2016089878A JP6500830B2 JP 6500830 B2 JP6500830 B2 JP 6500830B2 JP 2016089878 A JP2016089878 A JP 2016089878A JP 2016089878 A JP2016089878 A JP 2016089878A JP 6500830 B2 JP6500830 B2 JP 6500830B2
Authority
JP
Japan
Prior art keywords
character
input
touch
character input
long press
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016089878A
Other languages
English (en)
Other versions
JP2017199217A (ja
Inventor
クレセンシオ・サバル
ウィルソン・ベニテズ エバン
ウィルソン・ベニテズ エバン
ノーラン・イワイ
メイ・ロモスボグ チャリティ
メイ・ロモスボグ チャリティ
ジョバーン・ロレティーゾ
ロジー・ゴメズ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Document Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc filed Critical Kyocera Document Solutions Inc
Priority to JP2016089878A priority Critical patent/JP6500830B2/ja
Priority to CN201610370592.5A priority patent/CN107315528A/zh
Priority to US15/171,247 priority patent/US20170315718A1/en
Publication of JP2017199217A publication Critical patent/JP2017199217A/ja
Application granted granted Critical
Publication of JP6500830B2 publication Critical patent/JP6500830B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/00411Display of information to the user, e.g. menus the display also being used for user input, e.g. touch screen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0094Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception

Description

本発明は、手書き文字の入力が可能な手書き文字入力装置、画像形成装置及び手書き文字入力方法に関する。
タッチパネル等のポインティングデバイスを用いて手書き文字の入力が可能な手書き文字入力装置が存在する。一般に、この種の手書き文字入力装置では、手書き文字を入力する場合、ユーザーは、画面に表示されている手書き文字入力開始ボタン等をタップして手書き文字の入力画面を呼び出す。そして手書き文字の入力を終えた後に、ユーザーは、閉じるボタン等をタップして当該入力画面を閉じる。
しかしながら、上記のような手書き文字入力装置では、手書き文字の入力を行うために、ユーザーは前記入力画面を呼び出したり閉じたりするために所定のボタンを探してタップする必要がある。よって、ユーザーは手書き文字の入力を速やかに行うことができない。
なお、所定の手書き入力領域において手書き入力された文字を認識して、その認識結果を認識結果表示領域に表示する手書き文字入力装置も存在する(例えば、特許文献1参照)。
特開2000−200143号公報
しかしながら、上記のような手書き文字入力装置では、画面内に所定の手書き入力領域が表示されている必要があるので、その分だけ、表示領域が無駄になってしまう。
本発明の目的は、表示領域を無駄にすることなく、且つユーザーが手書き文字の入力を速やかに行うことが可能な手書き文字入力装置、画像形成装置及び手書き文字入力方法を提供することにある。
本発明の一の局面に係る手書き文字入力装置は、操作表示部と、長押し操作検知部と、動作モード制御部と、を備える。前記操作表示部は、少なくとも2点のタッチ位置を同時に検出可能である。前記長押し操作検知部は、前記操作表示部に対する長押し操作を検知する。前記動作モード制御部は、前記長押し操作検出部によって第1指示体による前記長押し操作が検知されている期間、前記操作表示部に対する第2指示体による手書き文字入力操作を受け付ける。
本発明の他の局面に係る画像形成装置は、前記手書き文字入力装置と、画像形成部と、を備える。前記画像形成部は、画像データに基づいてシート上に画像を形成する。
本発明の他の局面に係る手書き文字入力方法は、長押し操作検知ステップと、動作モード制御ステップと、を備える。前記長押し操作検知ステップでは、少なくとも2点のタッチ位置を同時に検出可能な操作表示部に対する長押し操作が検知される。前記動作モード制御ステップでは、前記長押し操作検知ステップにおいて第1指示体による前記長押し操作が行われている期間、当該操作表示部に対する第2指示体による手書き文字入力操作が受け付けられる。
本発明によれば、表示領域を無駄にすることなく、且つユーザーが手書き文字の入力を速やかに行うことが可能な手書き文字入力装置、画像形成装置及び手書き文字入力方法が提供される。
図1は、本発明の実施形態に係る画像形成装置の外観を示す図である。 図2は、本発明の実施形態に係る画像形成装置のシステム構成の一例を示すブロック図である。 図3は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図4は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図5は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図6は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図7は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図8は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図9は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図10は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図11は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図12は、本発明の実施形態に係る画像形成装置で表示される表示画像の一例を示す図である。 図13は、本発明の実施形態に係る画像形成装置で実行される動作モード制御処理の手順の一例を示すフローチャートである。 図14は、本発明の実施形態に係る画像形成装置で実行される手書き文字入力処理の手順の一例を示すフローチャートである。
以下添付図面を参照しながら、本発明の実施形態について説明し、本発明の理解に供する。なお、以下の実施形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定する性格のものではない。
図1及び図2に示されるように、本発明の実施形態に係る画像形成装置10は、操作表示部1、ADF2、画像読取部3、画像形成部4、通信I/F5、記憶部6、及び制御部7などを備える。具体的に、画像形成装置10は、プリンター機能、スキャナー機能、コピー機能、及びファクシミリ機能などを有する複合機である。なお、本発明の実施形態に係る画像形成装置10は、複合機に限らず、原稿を含む読取範囲内の画像を読み取って画像データを生成する画像読取装置又はそれを備える画像形成装置であればよい。なお、画像形成装置10における操作表示部1と制御部7の組み合わせが、本発明の手書き文字入力装置に相当する。
操作表示部1は、情報を表示する液晶ディスプレーなどの表示部と、ユーザー操作を受け付けるタッチパネル及び操作ボタンなどの操作部とを備える。操作表示部1は、画面に対する少なくとも2点のタッチ位置を同時に検出可能である。ADF2は、原稿セット部、搬送ローラー、原稿押さえ、及び排紙部を備え、画像読取部3の読み取り対象となる原稿を搬送する自動原稿搬送装置である。画像読取部3は、原稿台、光源、ミラー、光学レンズ、及びCCD(Charge Coupled Device)を備え、原稿を含む読取範囲内の画像を読み取って画像データとして出力することが可能である。
画像形成部4は、電子写真方式又はインクジェット方式で画像データに基づく印刷処理を実行することが可能であり、前記画像データに基づいてシート上に画像を形成する。例えば、画像形成部4が電子写真方式の画像形成部である場合、画像形成部4は感光体ドラム、帯電器、露光装置、現像装置、転写装置、及び定着装置などを備える。
通信I/F5は、電話回線、インターネット、又はLANなどの通信網を介して、外部のファクシミリ装置又はパーソナルコンピューターなどの情報処理装置との間で所定の通信プロトコルに従った通信処理を実行することが可能な通信インターフェイスである。
記憶部6は、ハードディスク又はEEPROM(登録商標)などの不揮発性の記憶部である。記憶部6には、制御部7によって実行される後述する動作モード制御処理及び手書き文字入力処理などを実行するための各種の制御プログラム、文字認識用のパターンデータ、及び画像データなどが記憶される。
制御部7は、CPU、ROM、及びRAMなどの制御機器を備える。前記CPUは、各種の演算処理を実行するプロセッサーである。前記ROMは、前記CPUに各種の処理を実行させるための制御プログラムなどの情報が予め記憶される不揮発性の記憶部である。前記RAMは、前記CPUが実行する各種の処理の一時記憶メモリー(作業領域)として使用される揮発性又は不揮発性の記憶部である。
具体的に、制御部7は、表示制御部71、処理実行部72、長押し操作検知部73、動作モード制御部74、文字認識部75、及び文字編集部76を含む。なお、制御部7は、前記制御プログラムに従って各種の処理を実行することにより各処理部として機能する。また、制御部7は、各処理部の一部又は複数の処理機能を実現する電子回路を備えるものであってもよい。
表示制御部71は、操作表示部1に種々の情報を表示するとともに、ユーザーによってタッチ操作されるボタン又はアイコン等のタッチ操作対象を表示する。例えば、表示制御部71は、ユーザーの指示に応じて、図3に示すようなアドレス情報設定画面80等を操作表示部1に表示する。アドレス情報設定画面80には、複数の文字入力欄81A〜81C、複数のボタン82A〜82C、83等が表示されている。複数の文字入力欄81A〜81C及び複数のボタン82A〜82C、83は、前記タッチ操作対象の一例である。
処理実行部72は、前記タッチ操作対象に対するタッチ操作に応じて当該タッチ操作対象に応じた処理を実行する。例えば、図3に示すアドレス情報設定画面80において、ボタン82Bに対するタッチ操作が行われると、処理実行部72は、文字入力欄81Bに名前を入力するためのソフトウェアキーボード機能を呼び出す。また、例えば、図3に示すアドレス情報設定画面80において、ボタン83に対するタッチ操作が行われると、処理実行部72は、アドレス情報設定画面80を閉じる。
長押し操作検知部73は、操作表示部1に対する長押し操作を検知する。長押し操作とは、操作表示部1の画面に対して指又はタッチペンなどの指示体をタッチさせた状態を保つ操作である。例えば、長押し操作検知部73は、指示体が操作表示部1に接触してから所定時間以上接触し続けている場合に、長押し操作が行われていることを検知する。
動作モード制御部74は、長押し操作検知部73によって第1指示体(例えば、左手の指)による前記長押し操作が検知されている期間、操作表示部1に対する第2指示体(例えば、右手の指)による手書き文字入力操作を受け付ける。すなわち、動作モード制御部74は、前記長押し操作の開始に応じて前記手書き文字入力操作の受付を開始し、前記長押し操作の終了に応じて前記手書き文字入力操作の受付を終了する。前記手書き文字入力操作とは、図5に示すように、操作表示部1の画面上に指又はタッチペン等の指示体によって文字(数字、記号等も含む)を書く操作である。
文字認識部75は、前記手書き文字入力操作による手書き文字を認識して文字コードに変換する。例えば、文字認識部75は、操作表示部1によって検出されるタッチ軌跡と、記憶部6等に予め記憶されている文字認識用のパターンデータとを照合して、前記タッチ軌跡に対応する文字コードを判別する。表示制御部71は、文字認識部75によって前記手書き文字から変換された文字コードに基づいて、操作表示部1に入力文字列を表示する。なお、文字認識部75は、前記手書き文字に加えて、前記入力文字列を編集するための編集操作パターンを認識可能である。前記編集操作パターンには、例えば、前記入力文字列から少なくとも1文字を削除する削除操作パターン、及び前記入力文字列の少なくとも1文字の文字種を変換する文字種変換操作パターンなどが含まれている。文字種変換操作パターンの例としては、例えば、小文字を大文字に変換するパターン、大文字を小文字に変換するパターンなどが挙げられる。
文字編集部76は、文字認識部75によって認識される前記編集操作パターンに応じて前記入力文字列を編集する。例えば、文字編集部76は、文字認識部75によって認識される前記削除操作パターンに応じて前記入力文字列から少なくとも1文字を削除する。また、例えば、文字編集部76は、文字認識部75によって認識される前記文字種変換操作パターンに応じて前記入力文字列の少なくとも1文字の文字種を変換する。なお、文字編集部76は、前記編集操作パターンが1点タッチ操作(図9参照)によって入力されたものか2点タッチ操作(図11参照)によって入力されたものかによって、異なる処理を行ってもよい。例えば、文字編集部76は、1点タッチ操作(すなわち、1本の指又はタッチペンによるタッチ操作)による前記削除操作パターンに応じて前記入力文字列の末尾の1文字を削除し、2点タッチ操作(すなわち、2本の指又はタッチペンによる同時タッチ操作)による前記削除操作パターンに応じて前記入力文字列の全ての文字を削除してもよい。また、文字編集部76は、1点タッチ操作又は2点タッチ操作のタッチ軌跡の移動方向(例えば、左右方向又は上下方向)に応じて、前記入力文字の削除又は文字種変換を選択的に実行してもよい。
次に、図3〜図12を参照しつつ、手書き文字の入力に関する画像形成装置10の動作について説明する。
表示制御部71は、ユーザーからの指示に応じて、図3に示すようなアドレス情報設定画面80等を操作表示部1に表示する。アドレス情報設定画面80には、3つの文字入力欄81A〜81Cが表示されている。文字入力欄81A〜81Cには、それぞれ、画像形成装置10に登録されている「FAX番号」、「名前」及び「E−mail」の情報が表示される。なお、図3の例では、「名前」及び「E−mail」は未登録である。ユーザーは、2種類の方法によって、文字入力欄81A〜81Cの情報を新規に登録又は変更することができる。第1の方法はソフトウェアキーボードを利用する方法である。第2の方法は手書き文字を利用する方法である。
ユーザーによってボタン82A〜82Cのいずれかがタッチされると、処理実行部72によってソフトウェアキーボード機能が呼び出されて、操作表示部1にソフトウェアキーボードが表示される。ユーザーは、表示されたソフトウェアキーボードを操作して、タッチしたボタンに対応する文字入力欄に文字列を追加したり、当該文字入力欄の文字列を変更したり、当該文字入力欄の文字列を削除したりすることができる。なお、ソフトウェアキーボードを利用した文字入力は周知技術であるので、ここでは詳細な説明を省略する。
以下、図4〜図8を参照しつつ、ユーザーが所望の文字入力欄に手書き文字を利用して文字を追加する場合の画像形成装置10の動作について具体的に説明する。ここでは、ユーザーが文字入力欄81Bに名前を入力する場合を例として説明する。
図4に示すように、ユーザーが、指又はタッチペンなどの第1指示体90Aを用いて文字入力欄81B上で長押し操作を行うと、長押し操作検知部73によって、当該長押し操作が検知される。動作モード制御部74は、長押し操作検知部73によって前記長押し操作が検知されている間、前記手書き文字入力操作を受け付ける。動作モード制御部74は、例えば、文字入力欄81B上でのタッチ操作が所定時間以上継続した時点で画像形成装置10の動作モードを前記通常モードから前記手書き文字入力モードへと切り替える。なお、変形例として、動作モード制御部74は、文字入力欄81B上でのタッチ操作が検知された時点で即座に画像形成装置10の動作モードを前記通常モードから前記手書き文字入力モードへと切り替えてもよい。前記手書き文字入力モードは、前記長押し操作が終了するまで、すなわち第1指示体90Aが操作表示部1から離れるまで継続する。
図4に示すように、前記手書き文字入力モードでは、操作表示部1に表示される表示画像、すなわちアドレス情報設定画面80の濃度が、前記通常モード時よりも一時的に薄くなる。すなわち、表示制御部71は、動作モード制御部74による前記手書き文字入力操作の受け付けが開始されるときに、操作表示部1に表示されている表示画像(例えば、文字、線、ボタン、アイコン、背景など)の濃度を一時的に薄くする。その後、動作モード制御部74による前記手書き文字入力操作の受け付けが終了されるときに、表示制御部71は、前記表示画像の濃度を元に戻す。これにより、ユーザーは、現在の動作モードが前記通常モードであるか前記手書き文字入力モードであるかを容易に判別することができる。
なお、変形例として、表示制御部71は、前記手書き文字入力モードにおいて、操作表示部1に、例えば「手書き文字入力モード中」のように手書き文字入力モード中であることを示すメッセージ又は画像を表示してもよい。また、表示制御部71は、前記手書き文字入力モードにおいて、操作表示部1の画面全体を白色などの特定の色にしてもよい。また、表示制御部71は、前記手書き文字入力モードにおいて、入力対象の文字入力欄81Bの濃度(例えば、入力文字列の濃度など)は維持したまま、その他の表示画像の濃度だけを薄くするようにしてもよい。
図5に示すように、前記手書き文字入力モードにおいて、ユーザーは、第1指示体90Aとは異なる第2指示体90Bを用いた前記手書き文字入力操作によって、手書き文字を入力することができる。処理実行部72は、動作モード制御部74によって前記手書き文字入力操作が受け付けられている期間は、前記タッチ操作対象に対するタッチ操作が行われても当該タッチ操作対象に関連する処理を実行しない。すなわち、前記手書き文字入力モードにおいては、ボタン82A〜82C、83等に対するタッチ操作は無効になる。よって、図5に示すように、ユーザーは、ボタン82A〜82C、83等の位置を気にすることなく、操作表示部1の画面全体を使って手書き文字を自由に入力することができる。
図6に示すように、ユーザーが1文字分の手書き文字を書き終えると、文字認識部75によって当該手書き文字が認識されて、当該手書き文字が文字コードに変換される。表示制御部71は、前記長押し操作のタッチ位置に対応する文字入力欄(ここでは文字入力欄81B)に、前記文字コードに基づいて入力文字列を表示する。なお、第1指示体90Aの現在のタッチ位置が、第1指示体90Aによる前記長押し操作の開始時点のタッチ位置からずれている場合には、表示制御部71は、前記長押し操作の開始時点のタッチ位置に対応する前記文字入力欄に前記入力文字列を表示するのが好ましい。そうすれば、ユーザーは、前記手書き文字入力モードにおいて、入力対象の文字入力欄を固定したままで、第1指示体90Aのタッチ位置を自由に移動させることができる。よって、例えば、第2指示体90Bによる前記手書き文字入力操作の際に、ユーザーは必要に応じて第1指示体90Aを邪魔にならない位置に移動させることができる。
なお、第2指示体90Bが操作表示部1から離れたとしても、第1指示体90Aが操作表示部1に接触している間は、前記手書き文字入力モードが継続する。よって、図7に示すように、ユーザーは、第1指示体90Aによる前記長押し操作を継続している間、複数の手書き文字を順次入力することができる。
その後、図8に示すように、第1指示体90Aが操作表示部1から離れると、前記手書き文字入力モードが終了する。すなわち、動作モード制御部74は、長押し操作検知部73によって前記長押し操作がもはや検知されなくなると、画像形成装置10の動作モードを、前記手書き文字入力モードから前記通常モードへと切り替える。そして、表示制御部71は、操作表示部1に表示されている表示画像の濃度を元に戻す。
なお、ここでは、文字列が未入力の文字入力欄81Bに対して文字を入力する場合について説明したが、すでに文字列が入力されている文字入力欄81Aに対しても同様に文字を追加することが可能である。この場合、例えば、表示制御部71は、文字入力欄に文字列が表示されている状態において当該文字入力欄上で前記長押し操作が行われた場合に、当該長押し操作のタッチ位置に対応する当該文字列の末尾に、前記手書き入力操作に基づいて入力される前記入力文字列を追加してもよい。もしくは、表示制御部71は、文字入力欄に文字列が表示されている状態において当該文字列上で前記長押し操作が行われた場合に、当該長押し操作のタッチ位置に対応する当該文字列内の位置に、前記手書き入力操作に基づいて入力される前記入力文字列を挿入してもよい。具体的には、例えば図3において、文字入力欄81AのFAX番号の「3」と「4」の境界部分で前記長押し操作が行われて、前記手書き文字入力操作によって「8」が入力された場合に、表示制御部71は、「3」と「4」の間に「8」を挿入してもよい。
次に、図9〜図12を参照しつつ、ユーザーが所望の文字入力欄の文字を削除する場合の画像形成装置10の動作について具体的に説明する。ここでは、ユーザーが文字入力欄81Bに入力されている文字を削除する場合を例として説明する。
前記手書き文字入力モードでは、ユーザーは、予め定められた前記削除操作パターン(例えば、左向きの直線)を手書き入力することによって、すでに入力されている文字を削除することができる。例えば、図9に示すように、文字入力欄81Bに対する前記手書き文字入力モードにおいて、第2指示体90Bによって左向きの直線が入力されると、文字認識部75は、当該タッチ軌跡が前記削除操作パターンであると認識することができる。なお、文字認識部75は、当該削除操作パターンが1点タッチ操作によるものであるか、2点タッチ操作によるものであるかも判別することができる。また、文字認識部75は、前記タッチ軌跡の形状に加えて、当該タッチ軌跡が入力されたときのタッチ位置の移動速度に応じて、例えばフリック操作、スワイプ操作、スライド操作などを区別して認識してもよい。また、当該タッチ軌跡が入力されたときのタッチ位置の左右の移動方向に応じて、文字の削除方法を変更してもよい。例えば、左向きの直線の入力により前記入力文字列の末尾の1文字が削除されるようにし、右向きの直線の入力により前記入力文字列の全ての文字が削除されるようにしてもよい。
図9に示すように、文字入力欄81Bに例えば4文字の入力文字列が表示されている状態で1点タッチ操作による削除操作パターンが入力されると、図10に示すように、文字編集部76によって、前記入力文字列の末尾の1文字が削除される。また、図11に示すように、文字入力欄81Bに例えば4文字の入力文字列が表示されている状態で2点タッチ操作による削除操作パターンが入力されると、図12に示すように、文字編集部76によって、前記入力文字列の全ての文字が削除される。
ところで、タッチパネル等のポインティングデバイスを用いて手書き文字の入力が可能な手書き文字入力装置が存在する。一般に、この種の手書き文字入力装置では、手書き文字を入力する場合、ユーザーは、画面に表示されている手書き文字入力開始ボタン等をタップして手書き文字の入力画面を呼び出す。そして手書き文字の入力を終えた後に、ユーザーは、閉じるボタン等をタップして当該入力画面を閉じる。しかしながら、このような手書き文字入力装置では、手書き文字の入力を行うために、ユーザーは前記入力画面を呼び出したり閉じたりするために所定のボタンを探してタップする必要がある。よって、ユーザーは手書き文字の入力を速やかに行うことができない。なお、所定の手書き入力領域において手書き入力された文字を認識して、その認識結果を認識結果表示領域に表示する手書き文字入力装置も存在する。しかしながら、このような手書き文字入力装置では、画面内に所定の手書き入力領域が表示されている必要があるので、その分だけ、表示領域が無駄になってしまう。
これに対して、本実施形態の画像形成装置10では、長押し操作検知部73によって第1指示体90Aによる前記長押し操作が検知されている期間、操作表示部1に対する第2指示体90Bによる手書き文字入力操作が受け付けられるので、表示領域を無駄にすることなく、且つユーザーが手書き文字の入力を速やかに行うことが可能である。
以下、図13を参照しつつ、制御部7によって実行される前記動作モード制御処理の手順の一例について説明する。ここで、ステップS1、S2・・・は、制御部7により実行される処理手順(ステップ)の番号を表している。なお、前記動作モード制御処理は、例えば、画像形成装置10の電源がオンされたことに応じて開始され、その後、画像形成装置10の電源がオフされたことに応じて終了される。
<ステップS1>
まず、ステップS1において、制御部7は、操作表示部1からの信号に基づいて、操作表示部1に対するタッチ操作が行われたか否かを判断する。そして、操作表示部1に対するタッチ操作が行われたと判断されると(S1:Yes)、処理がステップS2に移行する。一方、操作表示部1に対するタッチ操作が行われていないと判断されると(S1:No)、操作表示部1に対するタッチ操作が行われたと判断されるまで、ステップS1の処理が繰り返される。
<ステップS2>
ステップS2において、制御部7は、前記タッチ操作のタッチ位置が前記文字入力欄上であるか否かを判断する。そして、前記タッチ操作のタッチ位置が前記文字入力欄上であると判断されると(S2:Yes)、処理がステップS3に移行する。一方、前記タッチ操作のタッチ位置が前記文字入力欄上ではないと判断されると(S2:No)、処理がステップS9に移行する。
<ステップS3>
ステップS3において、制御部7は、前記タッチ操作が所定時間以上継続したか否かを判断する。そして、前記タッチ操作が所定時間以上継続していると判断されると(S3:Yes)、処理がステップS4に移行する。一方、前記タッチ操作が所定時間以上継続しなかった場合は(S3:No)、処理がステップS1に戻る。
<ステップS4>
ステップS4において、制御部7は、前記タッチ操作のタッチ位置に対応する前記文字入力欄を、入力対象欄として前記RAM等に記憶する。
<ステップS5>
ステップS5において、制御部7は、前記手書き文字入力モードを開始する。このとき、制御部7は、操作表示部1に表示されている前記表示画像の濃度を一時的に薄くする。
<ステップS6>
ステップS6において、制御部7は、前記手書き文字入力処理を実行する。なお、前記手書き文字入力処理の詳細については図14のフローチャートを参照して後述する。
<ステップS7>
ステップS7において、制御部7は、第1指示体90Aによる長押し操作が終了したか否かを判断する。そして、前記長押し操作が終了したと判断されると(S7:Yes)、処理がステップS8に移行する。一方、前記長押し操作が終了していないと判断されると(S7:No)、前記長押し操作が終了したと判断されるまで、ステップS6の手書き文字入力処理が継続される。
<ステップS8>
ステップS8において、制御部7は、前記手書き文字入力モードを終了する。このとき、制御部7は、前記表示画像の濃度を元に戻す。そして、処理がステップS1に戻る。
<ステップS9>
ステップS9において、制御部7は、前記タッチ操作のタッチ位置が前記タッチ操作対象上であるか否かを判断する。そして、前記タッチ操作のタッチ位置が前記タッチ操作対象上であると判断されると(S9:Yes)、処理がステップS10に移行する。一方、前記タッチ操作のタッチ位置が前記タッチ操作対象上ではないと判断されると(S9:No)、処理がステップS1に戻る。
<ステップS10>
ステップS10において、制御部7は、前記タッチ操作のタッチ位置に対応する前記タッチ操作対象に応じた処理を実行する。そして、処理がステップS1に戻る。
なお、前記ステップS1、S3、S7の処理(長押し操作検知ステップ)は、制御部7の長押し操作検知部73によって実行される。前記ステップS5、S8の処理(動作モード制御ステップ)は、制御部7の動作モード制御部74によって実行される。
次に、図14を参照しつつ、前記ステップS6において制御部7によって実行される前記手書き文字入力処理の手順の一例について説明する。
<ステップS21>
ステップS21において、制御部7は、操作表示部1からの信号に基づいて、前記長押し操作を行っている第1指示体90Aとは異なる第2指示体90Bのタッチ軌跡を検出する。
<ステップS22>
ステップS22において、制御部7は、前記タッチ軌跡と、記憶部6等に予め記憶されているパターンデータ(文字認識用のパターンデータ及び前記編集操作パターンデータ)とを照合する文字認識処理を行う。
<ステップS23>
ステップS23において、制御部7は、前記タッチ軌跡が文字を表しているか否かを判断する。そして、前記タッチ軌跡が文字を表していると判断されると(S23:Yes)、処理がステップS24に移行する。一方、前記タッチ軌跡が文字を表していないと判断されると(S23:No)、処理がステップS25に移行する。
<ステップS24>
ステップS24において、制御部7は、前記入力文字欄に文字を追加する。具体的には、制御部7は、前記タッチ軌跡に対応する文字の文字コードを、前記入力文字欄に対応する入力文字列データに追加する。その結果、操作表示部1において、前記タッチ軌跡に対応する文字が前記入力文字欄に追加される。そして、処理がステップS21に戻る。
<ステップS25>
ステップS25において、制御部7は、前記タッチ軌跡が前記編集操作パターンを表しているか否かを判断する。そして、前記タッチ軌跡が前記編集操作パターンを表していると判断されると(S25:Yes)、処理がステップS26に移行する。一方、前記タッチ軌跡が前記編集操作パターンを表していないと判断されると(S25:No)、処理がステップS21に戻る。
<ステップS26>
ステップS26において、制御部7は、前記入力文字欄の文字列を編集する。具体的には、制御部7は、前記タッチ軌跡に対応する前記編集操作パターンに応じて、前記入力文字欄に対応する入力文字列データを変更又は削除する。例えば、前記タッチ軌跡が前記1点タッチ操作による前記削除操作パターンを表している場合は、制御部7は、前記入力文字欄に対応する入力文字列データから末尾の文字の文字コードを削除する。また、例えば、前記タッチ軌跡が大文字を小文字に変換する前記文字種変換パターンを表している場合には、制御部7は、前記入力文字欄に対応する入力文字列データのうちの末尾の文字の文字コードを大文字の文字コードから小文字の文字コードに変更する。そして、処理がステップS21に戻る。
なお、本実施形態では、本発明を画像形成装置に適用しているが、本発明はこれに限らず、少なくとも2点のタッチ位置を同時に検出可能な操作表示部を備える任意の入力装置に適用可能である。ただし、2つの指示体を用いて手書き文字の入力が行われるので、本発明は、画像形成装置10の操作表示部1のように、据え置き型装置の操作表示部を通じて手書き文字を入力する用途に特に好適である。
また、本実施形態では、操作表示部1を通じて入力される手書き文字に対して文字認識処理が行われるが、本発明はこれに限らない。例えば、手書きによるサイン又は手書きによるメモを、文字コードに変換することなく画像データとして保存する用途にも、本発明は適用可能である。
1 操作表示部
2 ADF
3 画像読取部
4 画像形成部
10 画像形成装置
80 アドレス情報設定画面
81A〜81C 文字入力欄
82A〜82C、83 ボタン
90A 第1指示体
90B 第2指示体

Claims (9)

  1. 少なくとも2点のタッチ位置を同時に検出可能な操作表示部と、
    ファクシミリ番号の文字入力欄、名前の文字入力欄、及び電子メールアドレスの文字入力欄を含む複数のタッチ操作対象を含むアドレス情報設定画面を前記操作表示部に表示する表示制御部と、
    前記タッチ操作対象に対するタッチ操作に応じて当該タッチ操作対象に応じた処理を実行する処理実行部と、
    前記操作表示部に対する長押し操作を検知する長押し操作検知部と、
    前記長押し操作検知部によって第1指示体による前記長押し操作が検知されている期間、前記操作表示部に対する第2指示体による手書き文字入力操作を受け付ける動作モード制御部と、
    前記手書き文字入力操作による手書き文字を認識して文字コードに変換する文字認識部と、
    を備え
    前記表示制御部は、前記長押し操作の現在のタッチ位置が当該長押し操作の開始時点のタッチ位置に対応する前記文字入力欄から外れている場合に、当該長押し操作の開始時点のタッチ位置に対応する前記文字入力欄に、前記文字コードに基づいて入力文字列を表示し、
    前記処理実行部は、前記動作モード制御部によって前記手書き文字入力操作が受け付けられている期間は、前記タッチ操作対象に対するタッチ操作が行われても当該タッチ操作対象に関連する処理を実行しない、
    手書き文字入力装置。
  2. 前記文字認識部は、前記手書き文字に加えて、前記入力文字列を編集するための編集操作パターンを認識可能であり、
    前記文字認識部によって認識される前記編集操作パターンに応じて前記入力文字列を編集する文字編集部を更に備える請求項に記載の手書き文字入力装置。
  3. 前記編集操作パターンには、前記入力文字列から少なくとも1文字を削除する削除操作パターンが含まれている請求項に記載の手書き文字入力装置。
  4. 前記文字編集部は、1点タッチ操作による前記削除操作パターンに応じて前記入力文字列の末尾の1文字を削除し、2点タッチ操作による前記削除操作パターンに応じて前記入力文字列の全ての文字を削除する請求項に記載の手書き文字入力装置。
  5. 前記編集操作パターンには、前記入力文字列の少なくとも1文字の文字種を変換する文字種変換操作パターンが含まれている請求項に記載の手書き文字入力装置。
  6. 前記表示制御部は、前記文字入力欄に文字列が表示されている状態において当該文字列上で前記長押し操作が行われた場合に、当該長押し操作のタッチ位置に対応する当該文字列内の位置に、前記手書き入力操作に基づいて入力される前記入力文字列を挿入する請求項のいずれかに記載の手書き文字入力装置。
  7. 前記表示制御部は、前記動作モード制御部による前記手書き文字入力操作の受け付けが開始されるときに、前記操作表示部に表示されている表示画像の濃度を一時的に薄くし、その後、前記動作モード制御部による前記手書き文字入力操作の受け付けが終了されるときに、前記表示画像の濃度を元に戻す請求項1〜6のいずれかに記載の手書き文字入力装置。
  8. 請求項1〜のいずれかに記載の手書き文字入力装置と、
    画像データに基づいてシート上に画像を形成する画像形成部と、
    を備える画像形成装置。
  9. ファクシミリ番号の文字入力欄、名前の文字入力欄、及び電子メールアドレスの文字入力欄を含む複数のタッチ操作対象を含むアドレス情報設定画面を、少なくとも2点のタッチ位置を同時に検出可能な操作表示部に表示する表示制御ステップと、
    前記タッチ操作対象に対するタッチ操作に応じて当該タッチ操作対象に応じた処理を実行する処理実行ステップと、
    前記操作表示部に対する長押し操作を検知する長押し操作検知ステップと、
    前記長押し操作検知ステップにおいて第1指示体による前記長押し操作が検知されている期間、前記操作表示部に対する第2指示体による手書き文字入力操作を受け付ける動作モード制御ステップと、
    前記手書き文字入力操作による手書き文字を認識して文字コードに変換する文字認識ステップと、
    含み、
    前記表示制御ステップでは、前記長押し操作の現在のタッチ位置が当該長押し操作の開始時点のタッチ位置に対応する前記文字入力欄から外れている場合に、当該長押し操作の開始時点のタッチ位置に対応する前記文字入力欄に、前記文字コードに基づいて入力文字列が表示され、
    前記処理実行ステップでは、前記動作モード制御ステップにおいて前記手書き文字入力操作が受け付けられている期間は、前記タッチ操作対象に対するタッチ操作が行われても当該タッチ操作対象に関連する処理が実行されない、
    手書き文字入力方法。
JP2016089878A 2016-04-27 2016-04-27 手書き文字入力装置、画像形成装置及び手書き文字入力方法 Expired - Fee Related JP6500830B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016089878A JP6500830B2 (ja) 2016-04-27 2016-04-27 手書き文字入力装置、画像形成装置及び手書き文字入力方法
CN201610370592.5A CN107315528A (zh) 2016-04-27 2016-05-30 手写文字输入装置和手写文字输入方法
US15/171,247 US20170315718A1 (en) 2016-04-27 2016-06-02 Handwritten character input device, image forming apparatus and handwritten character input method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016089878A JP6500830B2 (ja) 2016-04-27 2016-04-27 手書き文字入力装置、画像形成装置及び手書き文字入力方法

Publications (2)

Publication Number Publication Date
JP2017199217A JP2017199217A (ja) 2017-11-02
JP6500830B2 true JP6500830B2 (ja) 2019-04-17

Family

ID=60158352

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016089878A Expired - Fee Related JP6500830B2 (ja) 2016-04-27 2016-04-27 手書き文字入力装置、画像形成装置及び手書き文字入力方法

Country Status (3)

Country Link
US (1) US20170315718A1 (ja)
JP (1) JP6500830B2 (ja)
CN (1) CN107315528A (ja)

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2546298B2 (ja) * 1987-11-30 1996-10-23 カシオ計算機株式会社 文書作成装置
JP3398981B2 (ja) * 1992-07-31 2003-04-21 ソニー株式会社 手書き入力情報処理装置
KR100595925B1 (ko) * 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US20040126017A1 (en) * 2002-12-30 2004-07-01 Giovanni Seni Grammar-determined handwriting recognition
TW200713060A (en) * 2005-09-30 2007-04-01 Primax Electronics Ltd Adaptive input method for touch screen
KR100771626B1 (ko) * 2006-04-25 2007-10-31 엘지전자 주식회사 단말기 및 이를 위한 명령 입력 방법
US8059101B2 (en) * 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
FR2936326B1 (fr) * 2008-09-22 2011-04-29 Stantum Dispositif pour le controle d'appareil electronique par la manipulation d'objets graphiques sur un ecran tactile multicontacts
GB0817702D0 (en) * 2008-09-26 2008-11-05 Dymo Nv Label printer
US8432367B2 (en) * 2009-11-19 2013-04-30 Google Inc. Translating user interaction with a touch screen into input commands
US20110231796A1 (en) * 2010-02-16 2011-09-22 Jose Manuel Vigil Methods for navigating a touch screen device in conjunction with gestures
CN102156608B (zh) * 2010-12-10 2013-07-24 上海合合信息科技发展有限公司 多字符连续书写的手写输入方法
CN102541554B (zh) * 2011-12-27 2014-06-25 重庆新媒农信科技有限公司 一种输入框动态透明显示特效实现方法
JP2013134728A (ja) * 2011-12-27 2013-07-08 Ricoh Co Ltd 手書き文字入力装置並びにこれを構成する遠隔装置及び電子情報端末
US8881269B2 (en) * 2012-03-31 2014-11-04 Apple Inc. Device, method, and graphical user interface for integrating recognition of handwriting gestures with a screen reader
JP5248696B1 (ja) * 2012-05-25 2013-07-31 株式会社東芝 電子機器、手書き文書作成方法、及び手書き文書作成プログラム
JP2014021927A (ja) * 2012-07-23 2014-02-03 Sharp Corp 電子機器、プログラムおよび記録媒体
CN103853863B (zh) * 2012-12-05 2017-05-24 北京华大九天软件有限公司 Pdk自动测试界面实现方法
KR102007651B1 (ko) * 2012-12-21 2019-08-07 삼성전자주식회사 터치스크린 키보드를 구성하는 방법, 장치 및 이를 수행하는 프로그램을 저장하는 컴퓨터로 읽을 수 있는 저장 매체
JP2014232347A (ja) * 2013-05-28 2014-12-11 シャープ株式会社 文字入力装置および携帯端末装置
JP5973405B2 (ja) * 2013-09-25 2016-08-23 京セラドキュメントソリューションズ株式会社 入力装置及び電子機器
JP6206082B2 (ja) * 2013-10-18 2017-10-04 コニカミノルタ株式会社 画像処理装置、表示画面制御方法及びプログラム
KR20150126494A (ko) * 2014-05-02 2015-11-12 엘지전자 주식회사 이동 단말기 및 그 제어 방법
WO2016018062A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Method and device for providing content
CN104699404A (zh) * 2015-03-26 2015-06-10 努比亚技术有限公司 一种软键盘的显示方法及装置
CN105138259B (zh) * 2015-07-24 2018-07-27 小米科技有限责任公司 操作执行方法及装置

Also Published As

Publication number Publication date
CN107315528A (zh) 2017-11-03
US20170315718A1 (en) 2017-11-02
JP2017199217A (ja) 2017-11-02

Similar Documents

Publication Publication Date Title
US9900450B2 (en) Image forming apparatus, method of controlling the same, and recording medium
EP2720131B1 (en) Image processing device, non-transitory computer readable recording medium and operational event determining method
US11175763B2 (en) Information processing apparatus, method for controlling the same, and storage medium
JP2009009422A (ja) 情報入力装置およびその制御方法
US10656831B2 (en) Display input device and method for controlling display input device
JP2016126657A (ja) 情報処理装置、情報処理装置の制御方法、及びプログラム
JP5945926B2 (ja) 操作表示装置
JP6004868B2 (ja) 情報処理装置、情報処理方法及びプログラム
US9600162B2 (en) Information processing apparatus, information processing method, and computer readable-recording medium
JP6217576B2 (ja) 画像形成装置、及び、画面操作方法
JP2008276277A (ja) 操作表示装置及び画像形成装置
JP5958059B2 (ja) フリック操作を受け付ける装置、フリック操作受付方法およびフリック操作受付プログラム
JP6700749B2 (ja) 情報処理装置、情報処理装置の制御方法、及びプログラム
JP6500830B2 (ja) 手書き文字入力装置、画像形成装置及び手書き文字入力方法
JP7367395B2 (ja) 操作入力装置、画像処理装置、操作入力方法
JP6217508B2 (ja) 表示入力装置、および表示入力制御プログラム
JP5973405B2 (ja) 入力装置及び電子機器
JP2011175471A (ja) データ入力装置
US20220171511A1 (en) Device, method for device, and storage medium
JP2016066248A (ja) 操作装置、情報処理装置、操作方法
JP2018055624A (ja) 表示入力装置及び記憶媒体
JP6179785B2 (ja) 操作表示装置 プログラム
JP6376953B2 (ja) 情報処理装置およびその制御方法、コンピュータプログラム、記憶媒体
JP2023066667A (ja) 情報処理装置、制御方法、およびプログラム
JP2015185023A (ja) 文字入力装置、文字入力システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190204

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190219

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190304

R150 Certificate of patent or registration of utility model

Ref document number: 6500830

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees