JPH10293813A - 手書き入力認識システムおよびその方法 - Google Patents

Abstract

(57)【要約】 【課題】 携帯端末の入力ユーザインタフェイスの向上
を計ると共に、その小型化または低コスト化を推進す
る。 【解決手段】 携帯端末１は、ユーザの手書き入力を受
け付ける画像入力部４を備える。画像入力部４に文字等
を手書き入力すると、携帯端末１は、その文字を含む画
像データをネットワーク５を介してホスト装置６に送出
する。ホスト装置６は、受信した画像データに対して文
字認識処理を実行し、その認識結果を携帯端末１に返送
する。携帯端末１は、ホスト装置６から受信した認識結
果としての文字を表示部２に表示する

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、手書き入力パター
ンを認識するシステムおよびその方法に係わる。また、
ある装置において入力されたデータを他の装置において
処理するシステムおよびその方法に係わる。

【０００２】

【従来の技術】近年の情報化社会においては、特に業務
上、様々な文書あるいは図面等が電子化されてきてい
る。場合によっては、メモ程度の内容であっても、電子
化して保存しておくことが要求される。

【０００３】文書の電子化に際しては、パソコン上で文
書作成用のアプリケーションプログラム等を起動し、文
書作成者がキーボードを利用して１文字ずつ入力してい
く方法が最も一般的である。また、図面などの電子化に
際しては、図面作成用のアプリケーションプログラム等
を起動し、図面作成者がキーボードやマウスを利用して
入力する方法が一般的である。

【０００４】ところで、最近、手書き入力機能を持った
携帯端末が普及してきている。この種の携帯端末は、通
常、ユーザにメモなどを入力させるための画面を備え、
たとえば、ユーザがその画面上でメモ文を手書き入力す
ると、その入力パターンを解析し、手書きパターンとし
て入力された文字（記号などを含む）を認識する。そし
て、その認識した文字を上記画面に表示する。このよう
にして認識された後に表示される文字は、それ自体が既
に電子化されている。また、機種によっては、その携帯
端末内で電子化された文書を所定のインタフェースを介
してパーソナルコンピュータ上にインストールされてい
る汎用の文書作成アプリケーション用のデータに変換す
ることができる。

【０００５】このように、文書等の電子化は、一般的に
はキーボードやマウスを用いて行っているが、手書き入
力された文字をコンピュータを用いて認識することによ
り電子化する手法も広まりつつある。

【０００６】

【発明が解決しようとする課題】ところが、キーボード
やマウスによる操作は必ずしもすべてのユーザにとって
容易とは言えず、その操作が不得手なユーザもいる。ま
た、メモ程度の内容を電子化する場合には、手書きであ
れば僅かな時間で出来るのに対し、キー入力するために
は、その都度文書作成用のアプリケーションプログラム
を起動した上で操作を開始しなければならず面倒であ
る。

【０００７】一方、携帯端末等の手書き入力機能を利用
する方法では、文字の認識精度を高めることと、その携
帯端末の小型化あるいは低コスト化を計ることとがトレ
ードオフとなる。すなわち、文字認識精度を高めるため
には、性能の良い文字認識ソフトウェアが必要になる
が、そのようなソフトウェアは、一般にプログラム規模
が大きく、高性能プロセッサが必要となるとともに要求
されるメモリ容量も大きい。このため、携帯端末の小型
化あるいは低コスト化が妨げられ、さらに、文字認識処
理はその負荷が重いので、携帯端末の他の処理のパフォ
ーマンスが低下してしまう恐れがある。

【０００８】本発明の課題は、入力ユーザインタフェイ
スの向上を計ると共に、携帯端末の小型化または低コス
ト化を推進することである。

【０００９】

【課題を解決するための手段】本発明の手書き入力認識
システムは、手書き入力データを画像データとして出力
する第１の端末装置と、その第１の端末装置から受信し
た画像データに対して文字認識処理を実行して上記手書
き入力データに含まれている文字等を認識する第２の端
末装置とから構成される。第１および第２の端末装置
は、たとえば、それぞれ携帯端末およびホスト装置であ
る。

【００１０】第１の端末装置において手書き入力された
パターンは、第２の端末装置により認識される。この認
識結果は、第１の端末装置または他の端末装置に転送さ
れてそこで表示される。すなわち、第１の端末装置は、
手書き入力データを第２の端末装置に送出する機能を持
つことにより、第２の端末装置が備える画像認識機能を
利用できる。

【００１１】上記構成に加え、第２の端末装置におい
て、認識した文字等の第１の端末装置の手書き入力画面
上における入力位置を検出し、第１の端末装置におい
て、上記第２の端末装置により検出された文字等の位置
を表す情報に従って、上記認識された文字等を表示する
ようにしてもよい。このような構成とすれば、第１の端
末装置において、ユーザが文字等を手書き入力した位置
に文字等が電子化された状態に変換されて表示される。

【００１２】

【発明の実施の形態】以下、本発明の実施形態について
図面を参照しながら説明する。図１は、本実施形態のシ
ステム構成図である。携帯端末１は、通信機能を備えて
おり、ネットワーク５に接続された他の装置にデータ処
理を依頼し、その結果を受け取って表示部２に表示でき
る。また、携帯端末１は、最寄りの基地局を介して無線
でデータを送受信する方式、通信機能を持った装置（た
とえば、光リンクユニット）との間で赤外線通信等でデ
ータを送受信する方式、または有線でネットワーク５に
接続される。ネットワーク５とのデータの送受信は、送
受信部３により制御される。さらに、携帯端末１は、ユ
ーザに手書き入力をさせるための画像入力部４を備え、
その画像入力部４から入力される手書きパターンを含む
画像データをネットワーク５に接続された他の装置（た
とえば、ホスト装置６）に送ってパターン認識処理（特
に、文字認識）を依頼する機能を持っている。

【００１３】ネットワーク５は、公衆電話網、ＰＨＳ
網、またはＬＡＮであり、ホスト装置６を収容してい
る。ホスト装置６は、サーバマシンであり、携帯端末１
から転送されてくる依頼に従ってデータ処理を実行す
る。また、ホスト装置６は、画像パターン解析・認識部
７を備える。画像パターン解析・認識部７は、携帯端末
１から送られてくる画像データに対してパターン認識処
理および文字認識処理を実行し、受信した画像データに
含まれている文字等（記号などを含む）を検出する。

【００１４】上記構成において、携帯端末１のユーザ
が、たとえば手書きメモを電子化したいときには、画像
入力部４を利用して手書きペンを用いてメモ等を入力
し、その手書き入力パターンを含む画像データをネット
ワーク５を介してホスト装置６に送る。ホスト装置６
は、携帯端末１から画像データを受信すると、画像パタ
ーン解析・認識部７にその画像パターンを解析させる。
画像パターン解析・認識部７は、その画像データに含ま
れている文字等を認識する。

【００１５】画像パターン解析・認識部７による認識結
果は、ホスト装置６に保存してもよいし、自動的にある
いは必用に応じて携帯端末１に転送してもよい。携帯端
末１は、ホスト装置６から認識結果を受信すると、その
認識結果を表示部２に表示する。また、画像パターン解
析・認識部７による認識結果を予め指定されている所定
の端末装置に転送してもよい。さらに、その認識結果を
キーワードとして検索処理を実行してもよいし、その認
識結果を所定の言語に翻訳してもよい。

【００１６】なお、画像パターン解析・認識部７は、ホ
スト装置６が所定のプログラム実行することによって得
られる機能として実現してもよいし、ホスト装置６とは
独立したコンピュータで実現してもよい。

【００１７】このように、本実施形態のシステムでは、
手書きメモなどを電子化したいときには、携帯端末１が
備える画像入力部４を利用して手書きでメモを入力し、
その手書き入力パターンを含む画像データをネットワー
ク５を介してホスト装置６に送るだけでよい。文字認識
処理は、ホスト装置６により実行される。このため、携
帯端末１は、手書きメモを電子化するための構成要件と
して、文字認識機能は不要であり、ユーザに手書きパタ
ーンを入力させる機能および通信機能のみを備えればよ
いで、小型軽量化、低コスト化を計りながら、ホスト装
置６による高度な文字認識機能の認識結果を享受でき
る。

【００１８】図２は、携帯端末１の外観図である。携帯
端末１は、ＬＣＤ表示部１１、ＩＣカード用スロット１
２、無線通信用アンテナ１３を備えている。また、他の
通信方式をサポートするために、Ｉｒ通信のためのソケ
ットや、有線通信用のソケットなども備えている。ＬＣ
Ｄ表示部１１は、タッチパネル構成であり、携帯端末１
のユーザは、手書きペン１４を用いて手書きパターンや
指示を入力することができる。

【００１９】図３は、携帯端末１の構成図である。ＣＰ
Ｕ２１は、記憶装置２２（ＲＯＭおよびＲＡＭ）に格納
されているプログラムを実行する。ＣＰＵ２１と記憶装
置２２とはバス２３を介して互いに接続されている。

【００２０】記憶装置２２は、半導体メモリ、磁気的記
録媒体、あるいは光学的記録媒体で構成され、プログラ
ムおよびデータ等を格納している。記憶装置２２は、携
帯端末１に固定的に設けたものであってもよいし、着脱
自在に装着するものであってもよい。

【００２１】記録媒体ドライバ２４は、バス２３に接続
されており、可搬性記録媒体（半導体メモリ、磁気ディ
スク、光ディスク、光磁気ディスクを含む）２５に格納
されているデータを読み出したり、あるいは可搬性記録
媒体２５にデータを書き込む装置である。可搬性記録媒
体２５の一例としては、ＩＣカードを想定する。ＣＰＵ
２１は、可搬性記録媒体２５に格納されているプログラ
ムを実行することもできる。

【００２２】なお、記憶装置２２に記録するプログラム
およびデータ等は、通信回線などを介して接続された他
の機器から受信して記録する構成にしてもよく、さら
に、ＣＰＵ２１が他の機器側に設けられた記憶装置に格
納されているプログラムおよびデータ等を通信回線など
を介して使用するようにしてもよい。

【００２３】ＬＣＤ表示部１１に対応するユニットは、
液晶ディスプレイ（ＬＣＤ）３１、液晶ディスプレイ３
１に表示すべき情報を格納するメモリ３２、ＬＣＤ制御
部３４の制御に従ってメモリ３２に格納されている情報
を液晶ディスプレイ３１に出力するＬＣＤドライバ３
３、メモリ３２およびＬＣＤドライバ３３を制御するＬ
ＣＤ制御部３４、タッチパネル部３５、およびタッチパ
ネル部３５が検出した入力情報をＣＰＵ２１に通知する
タッチパネル制御部３６から構成される。

【００２４】手書きペン１４の先端をＬＣＤ表示部１１
の表面に位置させる（あるいは、押圧させる）と、タッ
チパネル部３５が液晶ディスプレイ３１におけるその位
置を検出し、タッチパネル制御部３６がその位置情報を
ＣＰＵ２１に通知する。携帯端末１が手書き入力用のア
プリケーションを起動している場合には、ＬＣＤ表示部
１１の表面において手書きペン１４の先端を動かしたと
きの軌跡がＣＰＵ２１に通知され、ＣＰＵ２１は、その
軌跡によって表されるパターンを液晶ディスプレイ３１
に表示する。

【００２５】通信制御部４０は、携帯端末１からデータ
を送出する際には、ＣＰＵ２１の指示に従って送信パケ
ットを生成して無線トランシーバ４１、４２または有線
トランシーバ４３に渡す。また、データを受信する際に
は、無線トランシーバ４１、４２、または有線トランシ
ーバ４３を介して受信したパケットに格納されているデ
ータをバス２４上に出力する。無線トランシーバ４１
は、図３に示した無線通信用アンテナ１４に接続されて
おり、無線基地局４との間で無線データを授受する。無
線トランシーバ４２は、Ｉｒ通信を行うための送受信機
であり、また、有線トランシーバ４３は例えばモデムで
ある。無線トランシーバ４２および有線トランシーバ４
３は、オプションで着脱される。なお、携帯端末１は、
さらに時計４４を備えている。

【００２６】図４は、携帯端末１における手書き入力の
表示例である。携帯端末１においてユーザに所望の文字
や図形を手書き入力させるためのアプリケーションプロ
グラムを起動すると、図４に示すように、ＬＣＤ表示部
１１に、手書き領域５１、変換ボタン５２、スクロール
ボタン５３が表示される。手書き領域５１は、ユーザに
所望の文字や図形を手書き入力させるための領域であ
り、手書きペン１４を用いてその領域内に文字や図形を
描くと、その描かれた軌跡の通りに文字または図形が表
示される。変換ボタン５２は、ユーザに変換指示を入力
させるためのボタンであり、手書き領域内に文字が描か
れている状態で手書きペン１４を用いて変換ボタン５２
が押圧されると、携帯端末１は、その手書き領域５１内
の画像を画像データとしてホスト装置６に送出して文字
認識を依頼する。スクロールボタン５３は、手書き領域
５１内の画像をスクロールするためのボタンである。

【００２７】図５は、携帯端末１において何らかの入力
を検出した後の処理を説明するフローチャートであり、
ここでは、ユーザが手書きペン１４を用いて手書き入力
した場合、およびホスト装置６からパケットを受信した
場合の動作を示す。なお、このフローチャートに示す各
機能を実現するプログラムは、ＣＰＵ２１が読み取り可
能なプログラムコードの形態で記憶装置２２に格納され
ている。

【００２８】ステップＳ１では、検出した入力が手書き
領域５１への手書き入力（手書きペン１４による入力）
か否か調べる。手書き領域５１への入力であれば、ステ
ップＳ２へ進み、他の入力であれば、ステップＳ１１へ
進む。このように、ユーザに所望の文字や図形を手書き
入力させるためのアプリケーションプログラムが起動さ
れている状態において、ユーザが手書き領域５１に所望
の文字または図形を描くと、ステップＳ２以降の処理が
実行される。

【００２９】ステップＳ２では、手書き領域５１に描か
れた軌跡に従ってその手書き入力パターンをＬＣＤ表示
部１１に表示する。そして、ステップＳ３において、ユ
ーザから変換指示が入力されたか否かを調べる。変換指
示の有無は、図４に示す変換ボタン５２が押圧されたか
否かにより判断する。変換指示が無ければ、ステップＳ
１に戻り、次の入力を待つ。

【００３０】変換指示を検出すると、ステップＳ４にお
いて、手書き領域５１に描かれた文字等を含む画像を画
像データとして格納するパケットを作成する。ここで
は、変換ボタン５２が押圧された時点での手書き領域５
１を「現在ページ」とし、その現在ページの画像の画像
データをホスト装置６に送出するものとする。即ち、ペ
ージ単位で画像データを送出する。尚、パケット作成処
理については後述する。ステップＳ５では、ホスト装置
６との間にコネクションが確立されているか否かを調
べ、確立されていれば、ステップＳ６において、ステッ
プＳ４で作成したパケットをそのコネクションを介して
ネットワーク５に送出する。一方、コネクションが確立
されていなければ、ステップＳ７においてコネクション
を確立した後にステップＳ６へ進む。

【００３１】ステップＳ１１では、検出した入力がホス
ト装置６からのパケット受信であるか否かを調べ、ホス
ト装置６からのパケット受信であれば、ステップＳ１２
において、その受信したパケットから抽出した情報に従
って画像表示を行い、ホスト装置６からのパケット受信
でなければ、ステップＳ２１において他の処理を実行す
る。ステップＳ１２の処理については後述する。

【００３２】このように、携帯端末１は、手書き入力さ
れた文字等を含む画像の画像データをホスト装置６に送
出するとともに、ホスト装置６から転送されてきた情報
に従って画像表示を行う。

【００３３】図６(a) は、携帯端末１から送出されるパ
ケットの構造を示す図である。このパケットは、図５に
示すステップＳ４において作成される。各パケットは、
ヘッダ部およびデータ部から構成される。ヘッダ部は、
送信元アドレスおよび着信先アドレスなどを格納する。
送信元アドレスおよび着信先アドレスとしてどのような
アドレス体系のアドレスを格納するのかは、本実施形態
が適用されるネットワーク構成によって決まり、たとえ
ば、TCP/IP通信では、ＩＰアドレスが格納される。

【００３４】データ部には、アプリケーション識別情
報、端末ＩＤ、画像データ等が格納される。アプリケー
ション識別情報は、着信先の端末（ここでは、ホスト装
置６）において起動すべきアプリケーションプログラム
を識別する情報である。すなわち、着信先の端末におい
て所定のプログラムを起動するためのコマンドである。
本実施形態においては、画像データ解析・認識プログラ
ムを識別する情報が設定される。なお、アプリケーショ
ン識別情報は、TCP/IP通信では、ポート番号として指定
してもよい。

【００３５】端末ＩＤは、送信元の端末を識別する情報
であり、携帯端末１の識別番号である。画像データは、
変換ボタン５２が押圧された時点における手書き領域５
１内の画像の画像データであり、パケットに格納される
ときには圧縮される。

【００３６】図６(b) は、図５に示すステップＳ４のパ
ケット作成処理の詳細フローチャートである。ステップ
Ｓ３１では、ホスト装置６へ転送する画像データを圧縮
し、データ部に格納する。ステップＳ３２では、アプリ
ケーション識別情報として、画像データ解析・認識プロ
グラムを識別する情報を設定する。ステップＳ３３で
は、端末ＩＤとして携帯端末１を識別する情報（自端末
を識別する情報）を設定する。さらに、ステップＳ３４
においてヘッダ部を作成する。ヘッダ部には、少なくと
も、送信元アドレスとして携帯端末１のアドレス（自端
末のアドレス）、および着信先アドレスとしてホスト装
置６のアドレスを設定する。

【００３７】上述のようにして作成されたパケットは、
ネットワーク５に送出される。ネットワーク５は、パケ
ットの着信先アドレスに従ってそのパケットをホスト装
置６へ転送する。以下に、このパケットを受信して処理
するホスト装置６について説明する。

【００３８】図７は、ホスト装置６の構成図である。記
憶装置６１は、半導体メモリ、磁気的記録媒体、あるい
は光学的記録媒体で構成され、プログラムおよびデータ
等を格納している。記憶装置６１は、ホスト装置６に固
定的に設けたものであってもよいし、着脱自在に装着す
るものであってもよい。

【００３９】記録媒体ドライバ６２は、可搬性記録媒体
（半導体メモリ、磁気ディスク、光ディスク、光磁気デ
ィスク等を含む）６３に格納されているデータを読み出
したり、あるいは可搬性記録媒体６３にデータを書き込
む装置である。通信制御部６４は、ネットワークとの間
でのデータの授受を制御するユニットである。携帯端末
１との間のパケットの送受信もここで制御される。

【００４０】ＣＰＵ６５は、記憶装置６１または可搬性
記録媒体６３からプログラム等をメモリ６６にロードし
て実行する。なお、記憶装置６１に記録するプログラム
およびデータ等は、可搬性記録媒体６３に格納されてい
たものを書き込んだものであってもよく、また、通信回
線などを介してネットワーク上の他の機器から受信して
記録する構成にしてもよい。さらに、ＣＰＵ６５は、ネ
ットワーク上に設けられた他の記憶装置に格納されてい
るプログラムおよびデータ等を通信回線などを介して使
用するようにしてもよい。

【００４１】図８は、ホスト装置６の処理を説明するフ
ローチャートである。ここでは、ホスト装置６が携帯端
末１から送出されたパケット（図５のフローチャートの
処理によって作成されたパケット）を受信し、そのデー
タ部に設定されている情報に従って画像データを処理す
る動作を中心に、ホスト装置６がネットワーク５からパ
ケットを受信したときの動作を説明する。

【００４２】ステップＳ４１でパケットを受信すると、
ステップＳ４２でそのパケットに設定されている端末Ｉ
Ｄを調べることにより、そのパケットを送出した端末を
認識する。ステップＳ４３では、受信したパケットに設
定されているアプリケーション識別情報によって指定さ
れているアプリケーションを起動する。ステップＳ４４
では、起動されたアプリケーションが画像認識処理を含
むかどうか判断する。画像認識処理を含まないアプリケ
ーションであれば、ステップＳ５１においてそのアプリ
ケーションの処理を実行する。

【００４３】一方、画像認識処理を含むアプリケーショ
ンであれば、ステップＳ４５において、その画像データ
に対してパターン認識処理・文字認識処理を実行する。
本実施例では、このステップＳ４５において、携帯端末
１の手書き領域５１に手書きされた文字を含む画像の画
像データに対してパターン認識処理・文字認識処理を実
行する。なお、ステップＳ４５のパターン認識処理・文
字認識処理については後述する。

【００４４】ステップＳ４６では、認識結果を携帯端末
１に返送するためのパケットを作成する。すなわち、こ
のパケットの着信先アドレスとして携帯端末１のアドレ
スを設定し、そのデータ部に上記認識結果を格納する。
そして、ステップＳ４７において、その作成したパケッ
トをネットワーク５に送出する。

【００４５】ステップＳ４７においてネットワーク５に
送出されたパケットは、携帯端末１に転送される。携帯
端末１は、このパケットを受信すると、ホスト装置６に
よる認識処理の結果をＬＣＤ表示部１１に表示する。こ
の認識結果は、ユーザの指示により、携帯端末１内に保
存される。

【００４６】尚、上述したように、認識結果をホスト装
置６に保存してもよい。この場合、認識結果は、画像デ
ータとともに認識依頼を送出した端末装置（即ち、携帯
端末１）の端末ＩＤと対応づけて保存する。また、この
認識結果を予め指定されている所定の端末装置に転送し
てもよい。さらに、この認識結果に含まれている文字列
をキーワードとして検索処理を実行してもよいし、ある
いはその文字列を所定の言語に翻訳してもよい。この場
合、検索結果または翻訳結果は、携帯端末１に送られ
る。

【００４７】図９は、ホスト装置６における文字認識処
理のフローチャートであり、図８のステップＳ４５の処
理を詳細に説明するものである。以下では、携帯端末１
において図４に示す手書きメモが入力され、そのメモを
含む画像の画像データが転送されてきた場合を例に採り
上げて説明する。

【００４８】ステップＳ６１では、受信したパケットか
ら画像データを取り出し、その画像データが圧縮されて
いた場合には解凍する。ステップＳ６２では、その画像
データに対して文字認識処理を実行する。この文字認識
処理は既知の技術である。

【００４９】ステップＳ６３では、ステップＳ６２で認
識した各文字の位置を検出する。たとえば、図４に示す
ように、手書き領域５１の左上角を基準位置とし、その
基準位置を原点として各文字の中心位置の相対座標を求
める。ステップＳ６４では、各文字が属する「行」を認
識する。なお、本実施例では、携帯端末１における手書
き入力は横書きで入力するという規則があるものとす
る。従って、ここでは、ステップＳ６３で検出した各文
字の位置情報を参照し、手書き領域５１内において「高
さ」が類似している文字のグループを検出する。図４に
示す例では、たとえば、「３」、「月」、「１」、
「５」、および「日」が互いに類似した高さに描かれて
いるので、これらの５文字が同一の行に属するものと見
なす。

【００５０】ステップＳ６５では、ステップＳ６３で検
出した各文字の位置情報を参照し、各行ごとに、その行
に属する各文字の行内における位置を検出する。行内に
おける位置としては、たとえば、「左から何文字目か」
として検出する。このとき、各行内において文字どうし
の間隔を考慮し、その間隔が所定値以上である場合には
「スペース」を検出する。この処理により、例えば、図
４の表示例の第２行目において「社」と「○」との間に
スペースが設けられていると見なす。

【００５１】ステップＳ６６では、各文字の大きさを検
出し、各文字ごとにその大きさに対応するポイントを設
定する。たとえば、図４に示す例では、「３００」が他
の文字よりも大きな文字で描かれており、この場合、そ
の３文字に対しては、他の文字よりも大きなポイントを
設定する。なお、設定すべきポイントの種類を多数用意
しておき、各文字の大きさを厳密に検出してその大きさ
に対応するポイントを設定すると、１文字ごとにポイン
トがかわる可能性があり、表示したときに読みづらいの
で、各文字に設定するポイントとしては、たとえば、３
種類にする。そして、ステップＳ６７において、ステッ
プＳ６２で認識した各文字をそれぞれ文字コード（例え
ば、アスキーコード、あるいはＪＩＳコード等）に変換
する。

【００５２】このように、文字認識処理では、携帯端末
１から転送されてきた画像データに含まれている文字
（スペースを含む）を認識するとともに、各文字が属す
る行、各文字の行内における位置、各文字のポイントを
検出する。これらの情報は、図８のステップＳ４６にお
いて作成されるパケットに格納されて携帯端末１に送出
される。

【００５３】図１０は、ホスト装置６から携帯端末１へ
認識結果を送出するためのパケットの構成図である。パ
ケットは、ヘッダ部およびデータ部から構成される。ヘ
ッダ部は、送信元アドレスおよび着信先アドレスなどを
格納する。送信元アドレスおよび着信先アドレスは、そ
れぞれホスト装置６のアドレスおよび携帯端末１のアド
レスである。

【００５４】データ部には、各文字ごとの表示情報、お
よびこのパケットの着信先端末において上記表示情報に
従って文字等を表示するアプリケーションプログラムを
起動させるためのコマンドが格納される。各文字ごとの
表示情報としては、その文字の文字コード、その文字が
属する行を識別する番号、その文字の行内における位置
を表す情報、およびその文字の大きさに対応するポイン
トが格納される。

【００５５】上記パケットをネットワーク５に送出する
と、ネットワーク５は、このパケットの着信先アドレス
に従ってそのパケットを携帯端末１へ転送する。携帯端
末１では、このパケットを受信すると、図５のステップ
Ｓ１１において「Ｙｅｓ」と判断され、ステップＳ１２
が実行される。

【００５６】図１１は、携帯端末１における表示処理の
フローチャートであり、図５のステップＳ１２に相当す
る。すなわち、このフローチャートは、携帯端末１がホ
スト装置６から認識結果を受信したときに実行される。

【００５７】ステップＳ７１では、受信したパケットか
ら取り出したコマンドを実行する。つづいて、ステップ
Ｓ７２において、そのコマンドによって起動されるアプ
リケーションプログラムが、受信したパケットに格納さ
れている表示情報に従って認識結果を表示させるものか
否かを調べる。認識結果を表示させるアプリケーション
であれば、ステップＳ７３以降の処理を実行し、そうで
ない場合には、ステップＳ８１においてその他のアプリ
ケーションによる処理を実行する。

【００５８】ステップＳ７３では、受信したパケットか
ら１文字分の表示情報を抽出する。そして、ステップＳ
７４において、その抽出した表示情報に従って表示パタ
ーンをメモリ３２に描画することにより、その文字をＬ
ＣＤ表示部１１に表示する。すなわち、まず、抽出した
文字コードおよびポイントに基づいて、その文字をＬＣ
Ｄ表示部１１に表示するためのビットマップデータを生
成する。続いて、抽出した行番号および行内の位置に従
って、そのビットマップデータをメモリ３２に書き込む
アドレスを決定し、それに従って生成したビットマップ
データをメモリ３２に書き込む。そして、ＬＣＤ制御部
３４がメモリ３２に書き込まれているデータに従ってそ
の文字を液晶ディスプレイ３１に表示する。

【００５９】ステップＳ７５では、受信したパケットに
含まれている文字のうちで描画していない文字が残って
いるか否かを調べ、残っていれば、全ての文字に対して
上記ステップＳ７３およびステップＳ７４が実行される
ように、ステップＳ７３に戻る。

【００６０】上記処理により、携帯端末１において手書
き入力された文字が電子化される。すなわち、携帯端末
１において手書き入力された文字等は、ホスト装置６に
おいて認識され、その認識された文字等は、文書作成ア
プリケーション等が扱えるコードに変換される。このと
き、認識された文字は、ＬＣＤ表示部１１のユーザが書
き込んだ位置にユーザが書き込んだ大きさで表示され
る。

【００６１】上記図４、図６〜図１１に示した実施例
（第１の実施例）では、手書き領域５１が単一の入力領
域であり、ユーザはその領域内の所望の位置に所望の大
きさの文字等を書き込める構成であったが、本発明は、
この方式に限定されることはなく、図１２に示すよう
に、手書き領域５１として複数のブロックが設けられて
おり、各ブロック内に１文字ずつ書き込む方式にも適用
可能である。以下、第２の実施例として、手書き領域と
して複数のブロックが設けられており、手書き文字を１
ブロック内に１文字ずつ書き込む方式における文字認識
処理を説明する。

【００６２】図１２以降に示す第２の実施例において、
携帯端末１の処理は、基本的には図５に示したものと同
じであるが、ステップＳ４のパケット作成処理およびス
テップＳ１２の表示処理が上述の第１の実施例と異な
る。

【００６３】図１３(a) は、第２の実施例において、携
帯端末１から送出されるパケットの構造を示す図であ
る。ヘッダ部は図６に示したものと同じである。データ
部は、共通部および個別ブロック部から構成される。共
通部に格納されるアプリケーション識別情報および端末
ＩＤは、図６に示したものと同じである。個別ブロック
部は、各ブロック毎にそのブロック番号およびそのブロ
ック内の画像の画像データを格納する。ここで、ブロッ
ク番号は、各ブロックを互いに識別する情報であり、Ｌ
ＣＤ表示１１における各ブロックの位置を表す情報とし
て利用することができる。

【００６４】図１３(b) は、第２の実施例におけるパケ
ット作成処理の詳細フローチャートであり、図５のステ
ップＳ４に相当する。ステップＳ９１において、ブロッ
ク番号＝ｉ（ｉの初期値を１とする）の画像データを圧
縮して格納し、続いてステップＳ９２でその画像データ
に対応するブロック番号として「ｉ」を設定する。この
ことにより、１ブロック（１文字）分の画像データがそ
のブロック番号と共にパケットに格納される。

【００６５】ステップＳ９３では、全てのブロックにつ
いてその画像データをパケットに格納したかを調べ、ま
だであれば、ステップＳ９４においてブロック番号をイ
ンクリメントしてステップＳ９１に戻る。

【００６６】上記処理により、全てのブロックの画像デ
ータがそれぞれそのブロック番号と共にパケットに格納
される。なお、手書き入力がされていないブロックにつ
いては、そのブロック番号および画像データをパケット
に格納しないようにしてもよい。このようにすれば、携
帯端末１とホスト装置６との間で授受するデータ量を削
減できる。ステップＳ９５〜Ｓ９７は、図６のステップ
Ｓ３２〜Ｓ３４と同じである。

【００６７】図１４は、図１３に示すパケットを受信し
たホスト装置６の処理を説明するフローチャートであ
り、図８のステップＳ４５に相当する。ステップＳ１０
１では、受信したパケットからブロック番号＝ｉの画像
データを取り出し、その画像データが圧縮されていた場
合には、解凍する。続いて、ステップＳ１０２におい
て、そのブロックの画像データに対して文字認識処理を
実行し、さらにステップＳ１０３において認識した文字
を文字コードに変換する。そして、ステップＳ１０４に
おいて、文字コードをブロック番号ｉに対応づけて保持
する。

【００６８】ステップＳ１０５では、受信したパケット
に格納されているすべてのブロックの画像データに対し
て文字認識処理を実行したか否かを調べ、文字認識処理
を実行していないブロックがあれば、ステップＳ１０６
においてブロック番号をインクリメントした後にステッ
プＳ１０１に戻る。

【００６９】上記処理により、受信パケットに格納され
ていた各ブロックの画像データに対して文字認識処理が
実行され、携帯端末１において手書き入力された文字の
文字コードが出力される。

【００７０】図１５は、図１４の処理により得られた文
字コードを携帯端末１に送出する際に作成されるパケッ
トの構成図である。同図に示すように、第２の実施例に
おいては、各文字コードとその文字コードの文字が書き
込まれていたブロックのブロック番号とが対応づけられ
て格納される。

【００７１】図１６は、図１４の処理による認識結果を
受信した携帯端末１の処理を示すフローチャートであ
る。この処理は、図１５に示すパケットを受信した際の
携帯端末１の処理であり、図５のステップＳ１２に相当
する。

【００７２】ステップＳ１１１およびＳ１１２は、それ
ぞれ図１１のステップＳ７１およびＳ７２と同じであ
る。ステップＳ１１３では、ブロック番号＝ｉの文字コ
ードを抽出する、そして、ステップＳ１１４において、
その抽出した文字コードに対応する文字をブロック番号
＝ｉにより識別されるブロックに表示する。続いて、ス
テップＳ１１５において、すべてのブロックについて上
記ステップＳ１１３およびＳ１１４の処理が終了してい
るか調べ、終了していなければ、ステップＳ１１６にお
いてブロック番号をインクリメントした後にステップＳ
１１３に戻る。

【００７３】このように、第２の実施例では、携帯端末
１において所定のブロックに文字を手書き入力すると、
そのブロックの画像データと共にそのブロックのブロッ
ク番号がホスト装置６に転送される。ホスト装置６は、
その画像データに含まれている文字を認識すると、その
文字の文字コードを上記受信したブロック番号と共に携
帯端末１に返送する。そして、携帯端末１は、そのブロ
ック番号によって識別されるブロックにその文字コード
に従って生成した文字を表示する。すなわち、図１２〜
図１６に示した第２の実施例においても、携帯端末１に
おいて手書き入力された文字がホスト装置６により認識
されて電子化される。このとき、ホスト装置６により認
識された文字は、ＬＣＤ表示部１１のユーザが書き込ん
だ位置にそのまま表示される。

【００７４】なお、ホスト装置６における文字認識が一
つに絞りきれなかった場合は、候補となる複数の認識結
果を文字コードとして携帯端末１へ送り、携帯端末１の
表示部に候補を表示し、使用者がこれを選択できるよう
にしてもよい。また、携帯端末１は個人で使用する場合
が多いが、ホスト装置６は端末ＩＤ毎に手書き文字の癖
を学習して文字認識するようにすれば認識の精度が向上
する。この学習は、例えば、今までに入力された手書き
文字のうち、誤認識を引き起こしやすい文字を携帯端末
１に送り、使用者に各文字の手書き文字を記入してもら
い、その対応関係をテーブルとして学習していくもので
ある。

【００７５】さらに、携帯端末１において手書き入力さ
れた文字をホスト装置６に転送して認識処理を依頼する
タイミングは、１文字単位、単語単位、ページ単位、あ
るいはファイル単位のいずれであってもよい。

【００７６】上記実施形態において、ホスト装置６によ
って実行される処理プログラム、即ち、図８、９、１４
に示すフローチャートで示す各機能を実現するプログラ
ム、およびネットワークを介して転送されてくる情報を
解釈して処理するプログラム等は、ＣＰＵ６５が読み取
り可能なプログラムコードの形態で記憶装置６１あるい
は可搬性記録媒体６３に格納されている。あるいは、ネ
ットワークを介して接続される他の装置に格納されてい
るものを利用する。

【００７７】

【発明の効果】本発明によれば、携帯端末において手書
き入力されたメモ等の画像データをホスト装置に認識を
依頼するだけでその手書きメモ等を電子化できる。この
ように本発明は、文字等を電子化する際の操作性を向上
させたユーザインタフェイスを提供する。

【００７８】また、上記構成とするにより、手書きメモ
等を電子化するための携帯端末の構成要件として文字認
識機能は不要となるので、小型軽量化、低コスト化を計
りながら、ホスト装置による高度な文字認識機能の認識
結果を享受できる。

【図面の簡単な説明】

【図１】本実施形態のシステム構成図である。

【図２】携帯端末の外観図である。

【図３】携帯端末の構成図である。

【図４】携帯端末における手書き入力の表示例である。

【図５】携帯端末において入力があった後の処理を説明
するフローチャートである。

【図６】(a) は、携帯端末から送出されるパケットの構
造を示す図であり、(b) は、パケット作成処理の詳細フ
ローチャートである。

【図７】ホスト装置の構成図である。

【図８】ホスト装置の処理を説明するフローチャートで
ある。

【図９】ホスト装置における文字認識処理のフローチャ
ートである。

【図１０】認識結果を送出するためのパケットの構成図
である。

【図１１】携帯端末における表示処理のフローチャート
である。

【図１２】第２の実施例の携帯端末における手書き入力
の表示例である。

【図１３】(a) は、第２の実施例の携帯端末から送出さ
れるパケットの構造を示す図であり、(b) は第２の実施
例のパケット作成処理の詳細フローチャートである。

【図１４】第２の実施例のホスト装置における文字認識
処理のフローチャートである。

【図１５】第２の実施例において認識結果を送出するた
めのパケットの構成図である。

【図１６】第２の実施例の携帯端末における表示処理の
フローチャートである。

【符号の説明】

１ 携帯端末 ２ 表示部 ３ 送受信部 ４ 画像入力部 ５ ネットワーク ６ ホスト装置 ７ 画像パターン解析・認識部 １１ ＬＣＤ表示部 ２１ ＣＰＵ ２２ 記憶装置 ２４ 記録媒体ドライバ ２５ 可搬性記録媒体 ３１ 液晶ディスプレイ ４０ 通信制御部 ５１ 記憶装置 ５２ 記録媒体ドライバ ５３ 可搬性記録媒体 ５４ 通信制御部 ５５ ＣＰＵ ５６ メモリ

Claims (5)

【特許請求の範囲】
1. 【請求項１】 手書き入力データを画像データとして出
   力する第１の端末装置と、 該第１の端末装置から受信した画像データに対して文字
   認識処理を実行して上記手書き入力データに含まれてい
   る文字等を認識する第２の端末装置とを有する手書き入
   力認識システム。
2. 【請求項２】 手書き入力されたパターンから文字等を
   認識する手書き入力認識方法であって、 第１の端末装置において、手書き入力パターンを画像デ
   ータとして出力するステップと、 第２の端末装置において、上記第１の端末装置から受信
   した画像データに対して文字認識処理を実行して上記手
   書き入力パターンに含まれている文字等を認識するステ
   ップとを有する手書き入力認識方法。
3. 【請求項３】 上記第２の端末装置において、認識した
   文字等の上記第１の端末装置の手書き入力画面上におけ
   る入力位置を検出し、認識した文字等およびその認識し
   た文字等の入力位置を表す情報を上記第１の端末装置ま
   たは第３の端末装置に対して送出するステップと、 上記第１または第３の端末装置において、上記第２の端
   末装置から受信した入力位置を表す情報に従って、上記
   第２の端末装置によって認識された文字等を表示する請
   求項２に記載の手書き入力認識方法。
4. 【請求項４】 上記第１の端末装置から上記第２の端末
   装置へ、手書き入力パターンの手書き入力画面上におけ
   る入力位置を通知するステップと、 上記第２の端末装置から上記第１の端末装置または第３
   の端末装置へ、上記第２の端末装置において認識した文
   字等と上記第１の端末装置から受信した入力位置を表す
   情報とを対応づけて送出するステップと、 上記第１または第３の端末装置において、上記第２の端
   末装置から受信した入力位置を表す情報に従って、上記
   第２の端末装置によって認識された文字等を表示する請
   求項２に記載の手書き入力認識方法。
5. 【請求項５】 上記第２の端末装置において、認識した
   文字等の大きさを検出し、認識した文字等およびその認
   識した文字等の大きさを表す情報を上記第１の端末装置
   または第３の端末装置に対して送出するステップと、 上記第１または第３の端末装置において、上記第２の端
   末装置から受信した文字等の大きさを表す情報に従っ
   て、上記第２の端末装置によって認識された文字等を表
   示する請求項２に記載の手書き入力認識方法。