JPH08147096A

JPH08147096A - 手書き入力方法及び装置

Info

Publication number: JPH08147096A
Application number: JP28234594A
Authority: JP
Inventors: Tadashi Uchiyama; 匡内山; Noriyoshi Uchida; 典佳内田; Kazuhiko Shinosawa; 一彦篠沢; Noboru Sonehara; 曽根原　　登; Shigetoshi Okabe; 重利岡部; Tadashi Kodama; 正兒玉
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1994-11-17
Filing date: 1994-11-17
Publication date: 1996-06-07

Abstract

(57)【要約】【目的】情報処理手段を使用者の熟練度とは関係なく
日常生活の一部として使用することができる手書き入力
方法及び装置を提供することにある。【構成】表示器と一体化された透明なタブレット２の
上から該タブレット２の所定の位置を指示して、手書き
入力する手書き入力方法において、前記タブレット２か
ら日常用語で手書き入力し、手書き入力装置内に有する
同義語データベース上の同義語と前記手書き入力された
文字列を照合し、一致した同義語と前記データベースに
登録してある同義語とを関連付けるプログラムを起動し
て、大まかな自然言語による処理依頼で使用者の意図し
た処理を行う手書き入力方法及び装置である。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、手書き入力装置及びそ
れを用いた電子機器に関し、特に、タブレットを情報入
力機器として動作する手書き入力装置における手書きの
同義語を１つの処理と解釈して情報処理手段を動作させ
る技術に適用して有効な技術に関するものである。

【０００２】

【従来の技術】従来、情報処理装置は、大型コンピュー
タから電卓に到るまで人が利用したいデータと入力した
データを使用することを主体とする装置であった。この
場合、大量のデータは、磁気テープ、磁気ディスク、紙
カード、紙テープ等の記憶媒体で情報処理装置へデータ
入力していたが、総てのデータの起因は人から発生し人
が前記の記憶媒体へデータを入力する。このデータ入力
の方法はタイプライタなどで使用されてきたキーパンチ
方式が主として用いられてきた。これが現在のキーボー
ドであるが、キーパンチを行うにはキーボードのキー配
列や規格の違うキーボードの場合には一定の修得時間が
必要になる。

【０００３】入力したデータを使用する場合、データ処
理を行うための指示を情報処理装置に与えるが、ここで
もデータ処理を行う指示操作はキーボードで行う。現在
では、処理を行おうとする情報処理装置の表示器に視覚
的にデータ処理機能を表示し、指示器（マウスデバイス
など）を用いて処理を実行させる手段がある。

【０００４】

【発明が解決しようとする課題】従来の情報処理装置で
は、使用者がキーボードより処理名を入力して動作させ
ていた。この場合、処理の種類が少ない場合には、使用
者がいくつかの処理コマンドを覚えていれば行いたい処
理を実行することができたが、現在は処理の多様化が進
み処理コマンドの総てを使用者が覚えることが難しくな
ってきた。

【０００５】また、この方法は、情報処理装置を使い慣
れた使用者以外すぐには情報処理装置を使用できない問
題があった。

【０００６】現在は、視覚的に処理を定義したウィンド
ウ形式をマウスデバイスで指定して処理する情報処理装
置操作が広がってきたが、この場合にも使用者と視覚的
に定義された処理コマンド（アイコン）の形が必ずしも
一致するものではなく、また処理依頼の補助コマンドは
キーボード入力の形式を取らざるを得ない。このように
前記の方法では情報処理装置の使用熟練者以外の使用は
難しいものがある。

【０００７】このように、情報処理装置の操作性（ここ
では、マン・マシン・インタフェース：ＭＭＩと呼ぶこ
とにする）は、必ずしも万人向けとは言いがたい部分が
ある。人間が他の人間とのコミュニケーションを取る場
合は、声と文字であり文字の場合限られた文字数で処理
動作を表現することは、難しく１つの事象に対する呼び
方・読み方は複数ある。

【０００８】視覚的な表現も一目で意味するものがわか
る場合と、逆に混乱を起こす場合があり、これにしても
１つの事象に対して１つ視覚的コマンドを用意するにす
ぎない。

【０００９】１つの処理にしても人それぞれに抱いてい
るイメージは相違があり、キーボード及び視覚的コマン
ドでの処理依頼、しいては情報処理装置を動作させるこ
とに対して弊害があった。

【００１０】本発明の目的は、情報処理手段を使用者の
熟練度とは関係なく日常生活の一部として使用すること
ができる手書き入力方法及び装置を提供することにあ
る。

【００１１】本発明の他の目的は、大まかな自然言語に
よる処理依頼で使用者の意図した処理を行うことが可能
な技術を提供することにある。

【００１２】本発明の前記ならびにその他の目的と新規
な特徴は、本明細書の記述及び添付図面によって明らか
にする。

【００１３】

【課題を解決するための手段】本願において開示される
発明のうち代表的なものの概要を簡単に説明すれば、以
下のとおりである。

【００１４】（１）表示手段と一体化された透明なタブ
レットの上から該タブレットの所定の位置を指示して、
手書き入力する手書き入力方法であって、前記タブレッ
トから日常用語で手書き入力し、手書き入力装置内に有
する同義語データベース上の同義語と前記手書き入力さ
れた文字列を照合し、一致した同義語と前記データベー
スに登録してある同義語とを関連付けるプログラムを起
動して、大まかな自然言語による処理依頼で使用者の意
図した処理を行う手書き入力方法である。

【００１５】（２）表示手段、該表示手段と一体化され
た透明なタブレット、該タブレット上から前記タブレッ
トの所定の位置を指示する位置指示手段、それらを制御
する制御手段、及び記憶手段を備えた手書き入力装置で
あって、前記手書き入力装置内に有する同義語データベ
ースと、該同義語データベース上の同義語と前記タブレ
ット上から日常用語で手書き入力された文字列とを照合
し、一致した同義語と前記データベースに登録してある
同義語とを関連付けるプログラムとを備えた手書き入力
装置である。

【００１６】

【作用】前述した手段によれば、表示手段と一体化され
た透明なタブレットの所定の位置から情報処理装置を操
作させようとする日常用語を手書き入力し、手書き入力
装置内に有する同義語データベース上の同義語と前記手
書き入力された文字列を照合し、一致した同義語と前記
データベースに登録してある同義語とを関連付けるプロ
グラムを起動して、大まかな自然言語による処理依頼で
使用者の意図した処理を行うので、日常用語による装置
操作ができる。また、１つの動作を複数の用語で指示で
きる。

【００１７】

【実施例】以下、図面を参照して本発明の実施例を詳細
に説明する。

【００１８】なお、実施例を説明するための全図におい
て、同一機能を有するものは同一符号を付け、その繰り
返しの説明は省略する。

【００１９】図１は、本発明による一実施例の手書き入
力装置の概略構成を示すブロック図であり、１は表示器
（表示手段）であり、例えば、液晶表示器を用いる。２
は前記表示器１と一体化された透明なタブレット、３は
位置指示器（位置指示手段）であり、例えば、手書きペ
ンを用いる。４は記憶装置、５は記憶媒体、６はフォン
ト、７は処理制御装置（処理制御手段）である。

【００２０】前記表示器１は手書き入力された文字を表
示することは勿論のこと、手書き入力装置により得られ
た処理結果を表示するものである。タブレット２は、表
示手器１と重ね合わせて一体化されており、このタブレ
ット２は透明であるため、このタブレット２を通して表
示器１上の画面を見ることができる。

【００２１】前記指示器（手書きペン）３は、タブレッ
ト２と表示手段１とは相対的位置合わせがなされている
ので、タブレット２上の所定の位置から位置指示器（手
書きペン）３で手書き入力を行うことができる。これに
より手書き入力した位置に対応した表示器１の画面上に
手書きした文字等が表示される。

【００２２】記憶装置４は、本発明で使用する日常用語
辞書が記憶してある。また、この記憶装置４は、本実施
例で指示するべき処理プログラム等も記録されており、
本実施例で指示し処理した結果を記憶したり、処理結果
を読み出したりするものである。

【００２３】また、記憶媒体５は、フロッピーディスク
やＩＣカードの様な交換可能な記憶媒体であり、これに
も記憶装置４と同等な機能を有する。フォント６は手書
き入力した文字をオンライン手書き文字認識方法で変換
した結果を表示器１へ表示するためのものである。ま
た、オンライン手書き文字認識処理プログラム、ベタ書
きかな漢字変換処理プログラム、及びフォント６が格納
されており、メモ用の記録領域が設けられている。この
記憶装置４に前記オンライン手書き文字認識処理プログ
ラム、ベタ書きかな漢字変換処理プログラム、及びフォ
ント６が格納されている。

【００２４】制御装置７は、表示手段（液晶表示手段）
１、タブレット２、位置指示器（手書きペン）３、及び
記憶装置４を制御するものであり、図２に示すように、
表示器コントローラ７Ａ、タブレットインターフェイス
７Ｂ、オンライン手書き文字認識部７Ｃ、手書きかな漢
字変換部７Ｄ、処理制御部７Ｅからなっている。

【００２５】前記オンライン手書き文字認識部７Ｃにつ
いては、後で詳細に説明する。手書きかな漢字変換部７
Ｄとしては、例えば、情報処理学会論文誌 Vol.27 No.1
1 (Nov,1986) P.1062〜P.1067などに記載されている公
知の手書きかな漢字変換技術を用いる。

【００２６】前記処理制御部７Ｅは、マイクロプロセッ
サ等の演算処理装置からなっており、表示器コントロー
ラ７Ａ、オンライン手書き文字認識部７Ｃ、手書きかな
漢字変換部７Ｄ、及び記憶装置４を制御するものであ
る。

【００２７】本実施例の手書き入力装置は、図１及び図
２に示すように、表示器１と一体化したタブレット２上
に手書きペン３で、手書き入力した手書き文書（メモ）
を、入力情報としてオンライン手書き文字認識部７Ｃが
認識し、認識したポイントデータを文字コードに変換し
て、オンライン手書き文字認識部７Ｃと手書きかな漢字
変換部７Ｄとを接続するプログラムインタフェースを介
して、手書きかな漢字変換部７Ｄに送り、手書きかな漢
字変換部７Ｄで文字コードを文節変換することにより、
正しく平仮名・カタカナ・英数字・漢字を使用した文書
（メモ）に変換される。

【００２８】前記変換した文書（メモ）は、必要に応じ
て、記録媒体に保存すれば、後で文書（メモ）を呼び出
すことができる。

【００２９】図３は、本実施例の手書き入力装置を適用
した家庭用ビデオデッキの概略構成を示す外観斜視図で
あり、８は家庭用ビデオデッキ、９は記憶媒体５の挿入
口である。

【００３０】図４及び図５は、本実施例で使用される同
義語データベースの一実施例の構造を示す図であり、図
４はキー部の構造、図５はデータ部の構造である。

【００３１】本実施例で使用される同義語データベース
は、図４及び図５に示すように、キー部とデータ部の２
つからなり、キー部には本発明を使用する使用者が所定
の処理（ここではビデオデッキの操作について）を手書
き入力する。

【００３２】手書き入力された文字データ（タブレット
２からのＸＹ座標データ）は、オンライン手書き文字認
識により文字コード化（本発明が使用されるシステムで
の文字コード体型に依存する）された文字列を同義語デ
ータベースの検策キーとして使用して同義語データベー
スのキー部・キーと順次比較する。同一文字列が見つか
った場合、キー部・キーと対になっているキー部・レコ
ードＮＯ（番号）を同義語データベースのデータ部・レ
コードＮＯと順次比較していく。同義語データベースの
キー部・キーに一致するキーがない場合には、使用者に
再度入力依頼を要求する指示を表示器上に表示する。同
義語データベースのキー部・レコードＮＯとデータ部・
レコードＮＯが一致した場合には、データ部・処理名に
基づき装置の動作を行う。このデータ部・処理名には、
本発明が使用される装置構成に依存し、装置自体にソフ
トウェアを制御するＯＳ（オペレーティングシステム）
がある場合には、そのＯＳに準拠したプログラム名（こ
こでは録画処理プログラム等のビデオデッキを操作する
プログラム名）を記述する。ＯＳがない場合には、ビデ
オデッキを操作するプログラムの開始位置を記述する。

【００３３】キー部・キーとキー部・レコードＮＯの関
係は、Ｎ：１となり、同義語を１つのレコードＮＯと関
係付けることが特徴となる。

【００３４】図６乃至図１０は、前記図４及び図５に示
す同義語データベースに対応する処理プログラムの処理
手順を示すフロチャートである。

【００３５】本実施例の処理プログラムは、図６乃至図
１０に示すように、開始処理（１０１）でハードウェア
の電源等の初期設定がなされ、初期入力待ち（１０２）
となり、使用者からの処理依頼を待つ（図１１参照）。
使用者がタブレット２から手書き文字入力を行うと、手
書き入力処理（１０３）部でタブレット２から入力され
たＸＹ座標点を入力する。そのＸＹ座標点は、オンライ
ン手書き文字認識処理（１０４）で文字コードデータに
変換される。

【００３６】変換された文字コードをキーとして同義語
データベース１０６を同義語データベース検索処理（１
０５）で行う。この検索の結果として、録画処理（１０
８）、再生処理（１０９）、早送り処理（１１０）等の
ビデオデッキ操作は制御別処理実行（１０７）で振り分
けられる。このとき、入力された手書き文字が同義語デ
ータベース１０６に登録されていない場合には、エラー
処理（１１１）で再入力の指示を表示手段１へ表示し、
使用者へ通知する。

【００３７】本実施例の場合、録画処理を行うので、次
に、曜日入力待ち状態（１１２）となる（図１２参
照）。使用者が曜日をタブレット２から手書き入力する
ことにより、手書きされたＸＹ座標データが手書き入力
処理（１１３）部へ送られる。そのＸＹ座標データは、
オンライン手書き文字認識処理（１１４）で文字コード
データに変換される。変換された文字コードをキーとし
て同義語データベース１０６の検索を同義語データベー
ス検索処理（１１５）で行う。

【００３８】このとき入力された手書き文字が曜日デー
タ判定処理（１１６）で同義語データベース１０６に登
録されていないか、曜日データ（日月火水木金土）でな
い場合には、再度曜日入力待ち状態（１１２）へ戻る。
また、使用者からの指示が処理中断（１１７）である場
合には、初期入力待ち（１０２）へ戻る。

【００３９】さらに、次に、録画時間入力待ち状態（１
１８）となる（図１３参照）。使用者が録画時間をタブ
レット２から手書き入力することにより、手書きされた
ＸＹ座標データが手書入力処理（１１９）部へ入力され
る。そのＸＹ座標データは、オンライン手書き文字認識
処理（１２０）で文字コードデータに変換される。変換
された文字コードをキーとして同義語データベース１０
６の検索を同義語データベース検索処理（１２１）で行
う。

【００４０】このとき入力された手書き文字が同義語デ
ータベース１０６に登録されていないかを録画時間判定
処理（１２２）で判定し、登録時間データ（２４時間、
１２時間の範囲）でない場合には、再度録画時間入力待
ち状態（１１８）へ戻る。また、使用者からの指示が処
理中断処理（１２３）である場合には、初期入力待ち処
理（１０２）へ戻る。

【００４１】次に、録画チャンネル入力待ち状態（１２
４）となる（図１４参照）。使用者が録画時間をタブレ
ット２から手書き入力することにより、手書きされたＸ
Ｙ座標データが手書き入力処理（１２５）部に入力され
る。そのＸＹ座標データは、オンライン手書き文字認識
処理（１２６）で文字コードデータに変換される。変換
された文字コードをキーとして同義語データベース１０
６の検索を同義語データベース検索処理（１２７）で行
う。

【００４２】このとき入力された手書き文字が同義語デ
ータベース１０６に登録されていないかを録画チャンネ
ル判定処理（１２８）で判定し、録画チャンネルデータ
（１、３、４、６、８、１０、１２、衛星放送等のチャ
ンネル数）でない場合には、再度録画チャンネル入力待
ち状態（１２４）に戻る。また、使用者からの指示が処
理中断処理（１２９）であった場合には、初期入力待ち
処理１０２へ戻る。

【００４３】最後に入力した情報を表示手段１に表示す
る（図１４参照）。各設定が正しいか使用者に確認を行
ってもらい、設定確認入力待ち状態（１３０）となる。
使用者は手書きもしくは表示手段１に表示されたメニュ
ーをポイントタッチすることにより確認動作ができる。
入力されたデータは、手書き入力処理（１３１）部で入
力された手書きデータか、ポイントデータかを判断処理
１３２で判断し、手書き入力の場合には、確認指示をタ
ブレット２から手書きされたＸＹ座標データは、オンラ
イン手書き文字認識処理（１３３）で文字コードデータ
に変換される。

【００４４】変換された文字コードをキーとして同義語
データベース１０６の検索を同義語データベース検索処
理（１３４）で行う。ここで、入力された手書き入力デ
ータの確認を行い（１３５）、入力された手書き文字が
同義語データベース１０６に登録されていない場合に
は、再度設定確認入力待ち状態（１３０）へ戻る。ま
た、使用者からの指示が処理中断（１３６）であった場
合には、初期入力待ち処理（１０２）へ戻る。

【００４５】すべての設定がよい場合には、録画処理の
実行（実際にはビデオデッキのハードウェアの構成に依
存する）を行い（１３７）一連の処理が終了する（１３
８）。

【００４６】図１１乃至図１５は、本実施例の家庭用ビ
デオデッキの操作を説明するための図である。

【００４７】図１１は、図１及び図２に示す手書き入力
装置を用いて録画を行う操作の説明図の一部である。表
示器１には手書き入力での操作を要求するメッセージが
表示してある。この画面で位置指示器（手書きペン）３
で操作を仮に「録画」と入力する。この場合、漢字では
なくひらがなやカタカナでも可能である。前記本実施例
により「録画」を認識し、次画面である図１２に示す曜
日設定画面へ移行する。

【００４８】図１２の曜日設定画面では曜日を手書き入
力する。図１２では「きんようび」とひらがなで入力し
ているが、漢字、カタカナでも可能である。

【００４９】図１３は、録画する時間を手書き入力する
画面である。この画面で時間を手書き入力することで録
画時間の設定を行う。図１３の入力例として、ここでは
「ごご１０じから午後１１時」とひらがな、漢字の混合
でも可能である。

【００５０】図１４は、録画するチャンネルを手書き入
力する画面であり、図１４では入力例として「６」と入
力しているが、このほかに漢数字の「六」でも可能であ
る。

【００５１】図１５は、今まで入力した項目の手書き入
力された文字を表示器１に表示した画面である。図１６
では入力確認として「これでよい」「最初からやり直
す」「入力を破棄して最初に戻る」があり、この位置を
位置指示器（手書ペン）３でペンタッチしても、手書き
入力で動作に関連する用語入力してもよい。

【００５２】手書き入力の場合には、「ＯＫ」「了
解」、「ＮＧ」「やりなおす」、「やめた」「取り消
し」等の同義語を手書き入力すればよい。これで一連の
ビデオ録画操作が行える。

【００５３】本実施例の家庭用ビデオデッキの操作は、
まず、表示器１には手書き入力での操作を要求するメッ
セージが表示される。そして、図１１に示すように、タ
ブレット２上に位置指示器（手書きペン）３で仮に「録
画」と入力する。次に、手書き入力で図１２に示すよう
に、曜日を手書き入力し、図１３に示すように、録画時
間の設定を行う。例えば、「ごご１０じから午後１１
時」を手書き入力する。次に、図１４に示すように、録
画したいチャンネルの番号、例えば、「６」と手書きで
行い、図１５に示すように、今まで入力した項目の手書
き入力された文字を表示器１に表示する。これで一連の
ビデオ録画操作が行える。

【００５４】また、図１６に示すように、本実施例の家
庭用ビデオデッキに適用した本発明の手書き入力装置を
ビデオデッキ本体と切りはなし、リモコン９としてもよ
い。

【００５５】このときは、手書き入力した操作を終了し
た後に既存のリモコンのように光通信でビデオデッキ本
体へ操作手順を送信する。

【００５６】図１７は、前記本実施例のオンライン手書
き文字認識部７Ｃの処理手順を示すフローチャート、図
１８は、図１７のフローチャートの続きである。

【００５７】まず、入力処理を図１７に沿って説明す
る。処理開始と共にストローク番号ｎ＝１とし（Ｓ１０
１）、タブレット２を用いて文字のｎ番目のストローク
の手書き入力を行う（Ｓ１０２）。この文字をＣ_xとす
る。手書き入力に使用する手書きペン３は、そのペン先
がタブレット２に接しているか否かが検知可能であるも
のとする（Ｓ１０３）。ペン先がタブレット２に接して
いる状態では、ｎ番目のストロークの筆点の時系列情報
としてペン先の座標が記録される（Ｓ１０４）。ペン先
がタブレット２から離れた時点で非接触時間の測定を開
始する（Ｓ１０５〜Ｓ１０７）。

【００５８】非接触時間ｒを設定値Ｒと比較し（Ｓ１０
８）、非接触時間ｒが設定値Ｒを越えたとき、文字の全
ストロークの手書き入力が完了したものとして認識処理
を開始する。非接触時間ｒが設定値Ｒを越えないうちに
再び手書きペン３の先がタブレット２に接した場合に
は、ｎ＋１番目のストロークの手書き入力が開始された
ものとして（Ｓ１０８，Ｓ１０６，Ｓ１０９）入力処理
を続行する。

【００５９】次に、認識処理を図１８に沿って説明す
る。まず、記録された各ストロークの隣接する各筆点を
直線で結んで筆点間を補間する（Ｓ２０１）。次に、各
ストロークを近似する折線をｋ（ｋ≧１）個の折線に等
分割し、筆点の時系列にしたがって各分割点に１，２，
・・・，ｋ＋１（１はストロークの始点、ｋ＋１はスト
ロークの終点）と番号を付与する（Ｓ２０２）。次に、
ストロークｎの分割点ｉとストロークｍの分割点ｊを結
ぶ直線とストロークｎの分割点ｉとストロークｍの分割
点ｊ＋１を結ぶ直線がなす角度Ωを第｛（ｋ＋１）（ｎ
−１）＋ｉ｝行、第｛ｋ（ｍ−１）＋ｊ｝列の要素とす
る（ｋ＋１）Ｎ行ｋＮ列（Ｎはストローク数）の行列Ｐ
を計算する（Ｓ２０３）。

【００６０】次に、入力された手書き文字Ｃ_xと同じス
トローク数をもつ文字に対応するＭ個のテンプレートＱ
_i（ｉ＝１，・・・，Ｍ）との距離ｄ_i（ｉ＝１，・・
・，Ｍ）を行列Ｐ−Ｑ_iの各要素の自乗和として計算す
る（Ｓ２０４）。最も小さい距離ｄ_zをもつテンプレー
トＱ_zに対応する文字Ｃ_zを認識結果として選択する（Ｓ
２０５）。行列Ｐは、入力された手書き文字Ｃ_xに対応
するテンプレートとしてそのまま登録することができる
（Ｓ２０６，Ｓ２０７）。

【００６１】また、文字Ｃ_xに対応する既存のテンプレ
ートＱ_xは、例えば（Ｐ＋Ｑ_x）／２で置き換えることに
より補正することができる（Ｓ２０８，Ｓ２０９）。認
識する文字が他にあれば、ステップＳ１０１に戻って前
述した処理が繰り返される（Ｓ２１０）。

【００６２】図１９は、文字「い」が手書き入力された
際の筆点と補間とストローク分割および行列要素Ωの説
明図である。図１９（Ａ）に示す各点は図３の入力処理
において記録された手書きペン先（筆点）を示してい
る。これらの筆点を、図１９（Ｂ）に示すように、隣同
士直線で結んで筆点間を折線補間する。次に、図１９
（Ｃ）に示すように、各ストロークを近似する折線を４
等分し、筆点の時系列にしたがって各分割点に１，２，
３，４，５と番号を付与する。次に、本例ではＮ＝２，
ｋ＝４，ｎ＝１，ｍ＝２であるからストロークｎの分割
点ｉ（ｉ＝１〜５）とストロークｍの分割点ｊ（ｊ＝１
〜４）を結ぶ直線と、ストロークｎの分割点ｊとストロ
ークｍの分割点ｊ＋１を結ぶ直線がなす角度Ωを第ｉ
行、第（４＋ｊ）列の要素とする１０行８列の行列Ｐを
計算する。図１９（Ｄ）に示す角度Ωはｉ＝２，ｊ＝３
であるから行列Ｐの第２行、第７行の要素を示してい
る。

【００６３】また、前記筆点の代わりに、筆点における
運筆速度の速度座標系の点を用いてもよい。この手法
は、図１７の入力処理のステップＳ１０４において、筆
点における運筆速度ｖのｘ軸方向成分ｖ_x，ｙ軸方向成
分ｖ_yを求めることだけが異なる。

【００６４】図２０は、図１９の例と同じく文字「い」
が手書き入力された際の各筆点における速度の速度座標
系の点と補間とストローク分割および行列要素Ωの説明
図である。

【００６５】図２０（Ａ）に示す各点は入力処理におい
て記録された筆点における運筆速度の速度座標系の点を
示している。速度座標系の原点にある点が最初の筆点に
おける速度座標系の点である。最後の３つの筆点の速度
が正である曲線が文字「い」の左側のストローク（ｎ＝
１）上の筆点の速度軌道、したがって他方の曲線が文字
「い」の右側のストローク（ｎ＝２）上の筆点の速度軌
道である。図２０（Ｂ），（Ｃ），（Ｄ）はそれぞれ図
１９（Ｂ），（Ｃ），（Ｄ）に対応しており、それらの
説明は省略する。

【００６６】また、前記筆点の代わりに、筆点における
運筆加速度の加速度座標系の点を用いてもよい。この手
法は、図１７の入力処理のステップＳ１０４において、
筆点における運筆加速度ａのｘ軸方向成分ａ_x，ｙ軸方
向成分ａ_yを求めることだけが異なる。

【００６７】図２１は、図１９の例と同じく文字「い」
が手書き入力された際の各筆点における加速度の加速度
座標系の点と補間とストローク分割および行列要素Ωの
説明図である。図２１（Ａ）に示す各点は、入力処理に
おいて記録された筆点における運筆加速度の加速度座標
系の点を示している。加速度座標系の原点に近い方の点
が最初の筆点における加速度座標系の点である。全ての
筆点の加速度が正である曲線が文字「い」の左側のスト
ローク（ｎ＝１）上の筆点の加速度軌道、全ての点の筆
点の加速度が負である曲線が文字「い」の右側のストロ
ーク上（ｎ＝２）の筆点の加速度軌道である。図２１
（Ｂ），（Ｃ），（Ｄ）はそれぞれ図１９（Ｂ），
（Ｃ），（Ｄ）に対応しており、それらの説明は省略す
る。

【００６８】なお、運筆速度、運筆加速度の検出方法
は、手書きペンにセンサ（速度センサ、加速度センサ）
を設ける方法、計算によって求める方法が考えられる。

【００６９】次に、本実施例のくずして筆記された行書
体の手書き文字の認識処理について図２２を用いて説明
する。

【００７０】まず、タブレット２を用いて計測されたス
トローク数Ｎの入力文字の筆点の座標を入力し（Ｓ３０
１）、筆点の座標を各ストローク毎に折線で補間した後
（Ｓ３０２）、補間した折線をｋ個の区間に分割する
（Ｓ３０３）。この分割点の座標を用いてベクトルａ、
行列Ａが計算される（Ｓ３０４）。

【００７１】例えば、文字「い」が手書き入力された場
合、図１７及び図１８の実施例と同様に、計測された筆
点の座標（図１９（Ａ））は折線補間され（図１９
（Ｂ））、各ストロークを近似する折線が４個の区間に
分割される（図１９（Ｃ））。

【００７２】行列Ａは、図１７及び図１８の実施例と同
様に、ストロークｎの分割点ｉとストロークｍの分割点
ｊを結ぶ直線、及びストロークｎの分割点ｉとストロー
クｍの分割点ｊ＋１を結ぶ直線がなす角Ω（図１９
（Ｄ））を｛（ｋ＋１）（ｎ−１）＋ｉ｝行、｛ｋ（ｍ
−１）＋ｊ｝列の成分とする（ｋ＋１）Ｎ行ｋＮ列の行
列として計算される。

【００７３】また、ベクトルａは、図２３に示すよう
に、１番目のストロークの長さＬ₁，１番目のストロー
クの終点と２番目のストロークの始点との距離Ｌ₂、２
番目のストロークの長さＬ₃をそれぞれＬ₁＋Ｌ₂＋Ｌ₃で
除したＬ₁／（Ｌ₁＋Ｌ₂＋Ｌ₃）、Ｌ₂／（Ｌ₁＋Ｌ₂＋
Ｌ₃）、Ｌ₃／（Ｌ₁＋Ｌ₂＋Ｌ₃）を要素とする（２Ｎ−
１）次元ベクトルとして計算される。

【００７４】この後、各辞書要素との照合が行われ、行
列による距離Ｈが最も小さかった辞書要素の文字が認識
結果として出力される。照合される辞書要素の文字が楷
書体で筆記されたときのストローク数をＭとする。Ｎと
Ｍを比較し（Ｓ３０５）、Ｎ≦Ｍが満足されない場合
は、この辞書要素と入力文字との行列による距離をＨ＝
∞とする（Ｓ３０６）。Ｎ≦Ｍが満足される場合、この
辞書要素と入力文字とのベクトルによる距離Ｇを計算す
る（Ｓ３０７）。

【００７５】次に、この距離Ｇを予め設定した閾値と比
較し（Ｓ３０８）、閾値を超える場合には、この辞書要
素と入力文字との行列による距離ＨをＨ＝∞とする（Ｓ
３０６）。閾値を超えない場合には、この辞書要素から
構成される行列Ａ’と行列Ａとの距離を求め、この辞書
要素と入力文字との行列による距離Ｈとする（Ｓ３０
９）。ステップＳ３０５〜Ｓ３０９を全ての辞書要素に
対して繰返し（Ｓ３１０）、求まった行列による距離Ｈ
のうちで最小の距離Ｈに対する文字を認識結果として出
力する（Ｓ３１１）。

【００７６】このように、行列による距離Ｈの計算に先
立って、ベクトルによる距離Ｇの計算を行うのは、行書
体の筆順とくずし方を決めるのと、ベクトルによる距離
Ｇがある値入力以下のもののみ行列による距離Ｈの計算
を行うことにより距離Ｈの計算量を減らすためである。

【００７７】図２３は、各辞書要素と入力文字とのベク
トルによる距離Ｇの計算（Ｓ３０７）の詳細を示すフロ
ーチャートである。

【００７８】まず、ベクトルによる距離Ｇの初期値をＧ
＝∞とする（Ｓ４０１）。各辞書要素は一通り以上の筆
順情報をもっており、照合は各筆順毎に行われる。照合
される筆順の最小ストローク数をＭ’とする（Ｓ４０
２）。ＮとＭ’を比較し（Ｓ４０３）、Ｎ≧Ｍ’が満足
されない場合には、次の筆順との照合を行う。Ｎ≧Ｍ’
が満足される場合、Ｍ−Ｍ’箇所の結合位置からＮ−
Ｍ’箇所の結合位置を選ぶ全ての組み合せについての照
合を行う（Ｓ４０４）。

【００７９】照合される筆順と結合位置の組み合せＱに
応じて辞書要素がもつ文字の筆点の座標をＮ個のストロ
ークに分配しテンプレートとする（Ｓ４０５）。ストロ
ークの座標を折線補間し（Ｓ４０６）、補間した折線を
等分割し（Ｓ４０７）、ベクトルａ’を計算する（Ｓ４
０８）。ベクトルａとベクトルａ’との各成分の差の絶
対値を総和して距離ｇとする（Ｓ４０９）。ｇとＧを比
較し（Ｓ４１０）、ｇ＜Ｇである場合には、Ｇ＝ｇと
し、このときの筆順Ｐおよび結合位置の組み合せＱをそ
れぞれＰｍｉｎ，Ｑｍｉｎとして記憶しておく（Ｓ４１
１）。次の結合組み合せがあるか判断し（Ｓ４１２）、
あればステップＳ４０４に戻って前述の処理を繰り返
し、なければステップＳ４１３に行く。

【００８０】図２４は、こうして計算されたベクトルに
よる距離Ｇが予め設定した閾値を超えない場合に行なわ
れる、行列によるＨの計算（Ｓ３０９）のフローチャー
トである。

【００８１】まず、筆順Ｐと結合位置の組み合せＱｍｉ
ｎに応じて辞書要素がもつ文字の筆点の座標をＮ個のス
トロークに分配しテンプレートとする（Ｓ５０１）。こ
のテンプレートに対して前述した方法で行列Ａ’を計算
する（Ｓ５０２〜Ｓ５０４）。行列Ａと行列Ａ’との各
成分の差Ω_ij−Ω_ij’について、例えば、１−ｃｏｓ
（Ω_ij−Ω_ij’）を計算し、これを全成分について総和
したものを行列による距離Ｈとする（Ｓ５０５）。

【００８２】図２６は、４ストローク（Ｎ＝４）の文字
として手書き入力された文字「右」を示す図、図２７
は、これと照合される辞書要素を示す図、図２８の
（Ａ）〜（Ｄ）はテンプレートを示す図である。辞書に
は「右」は５ストロークの文字（Ｍ＝５）として登録さ
れており、図２７の黒丸で示す筆点座標１２３４５と２
１３４５の２通りの筆順及びそれぞれの筆順について最
小ストローク数が３（Ｍ’＝３）であり、図２７の破線
で示した２箇所でストロークとその直前のストロークが
連続して筆記され得るという結合位置の情報を筆順情報
としてもっている。

【００８３】ベクトルによる距離Ｇの計算（図２３）で
は、２通りの筆順およびＭ−Ｍ’＝２箇所の結合位置か
らＮ−Ｍ’＝１箇所の結合位置を選ぶ２通りの組み合せ
に応じて、図２８（Ａ），（Ｂ），（Ｃ），（Ｄ）の４
つのテンプレートについてベクトルａ’が計算され、ベ
クトルによる距離Ｇの計算が行われる。

【００８４】以上、本発明を前記実施例に基づき具体的
に説明したが、本発明は、前記実施例に限定されるもの
ではなく、その要旨を逸脱しない範囲において種々変更
可能であることは勿論である。

【００８５】

【発明の効果】本願において開示される発明のうち代表
的なものによって得られる効果を簡単に説明すれば、以
下のとおりである。

【００８６】表示手段と一体化された透明なタブレット
の所定の位置から情報処理装置を操作させようとする日
常用語を手書き入力し、手書き入力装置内に有する同義
語データベース上の同義語と前記手書き入力された文字
列を照合し、一致した同義語と前記データベースに登録
してある同義語とを関連付けるプログラムを起動して、
大まかな自然言語による処理依頼で使用者の意図した処
理を行うので、日常用語による装置操作ができる。ま
た、１つの動作を複数の用語で指示できる。

【００８７】すなわち、今まで記号や略語で簡素化され
ていた装置操作を日常用語を用いて操作することが行
え、高度な情報処理装置等の操作を簡便な方法で操作で
きる。

【００８８】また、日常用語を諸外国の言語に拡張する
ことにより、万国共通の操作方法が実現できる。

【図面の簡単な説明】

【図１】本発明による一実施例の手書き入力装置の概
略構成を示すブロック図である。

【図２】本実施例の処理制御装置の機能構成を示すブ
ロック図である。

【図３】本実施例の手書き入力装置を適用した家庭用
ビデオデッキの概略構成を示す外観斜視図である。

【図４】本実施例で使用される同義語データベースの
一実施例の構造のキー部を示す図である。

【図５】本実施例で使用される同義語データベースの
一実施例の構造のデータ部を示す図である。

【図６】図４及び図５に示す同義語データベースに対
応する処理プログラムの処理手順を示すフロチャートで
ある。

【図７】図６の続きである。

【図８】図７の続きである。

【図９】図８の続きである。

【図１０】図９の続きである。

【図１１】本実施例の家庭用ビデオデッキの操作を説
明するための図である。

【図１２】本実施例の家庭用ビデオデッキの操作を説
明するための図である。

【図１３】本実施例の家庭用ビデオデッキの操作を説
明するための図である。

【図１４】本実施例の家庭用ビデオデッキの操作を説
明するための図である。

【図１５】本実施例の家庭用ビデオデッキの操作を説
明するための図である。

【図１６】図２に示す家庭用ビデオデッキの変形例を
示す図である。

【図１７】本実施例のオンライン手書き文字認識部の
処理手順を示すフローチャートである。

【図１８】図３のフローチャートの続きである。

【図１９】本実施例の文字「い」が手書き入力された
ときの筆点と補間とストロークの分割と行列要素を示す
図である。

【図２０】本実施例の文字「い」が手書き入力された
ときの筆点における運筆速度の速度座標系の点と補間と
ストロークの分割と行列要素を示す図である。

【図２１】本実施例の文字「い」が手書き入力された
ときの筆点における運筆加速度の加速度座標系の点と補
間とストロークの分割と行列要素を示す図である。

【図２２】本実施例の行書体の手書き文字の認識処理
を示すフローチャートである。

【図２３】本実施例のベクトルによる距離の計算のフ
ローチャートである。

【図２４】本実施例の行列による距離の計算のフロー
チャートである。

【図２５】本実施例のベクトル要素の計算例を示す図
である。

【図２６】本実施例の手書入力された文字「右」を示
す図である。

【図２７】本実施例の文字「右」に対する辞書要素を
示す図である。

【図２８】本実施例の文字「右」に対するテンプレー
トを示す図である。

【符号の説明】

１…表示器（液晶表示器）、２…透明なタブレット、３
…位置指示器（手書きペン）、４…記憶装置、５…記憶
媒体、６…フォント、７…処理制御装置、７Ａ…表示器
コントローラ、７Ｂ…タブレットインターフェイス、７
Ｃ…オンライン手書き文字認識部、７Ｄ…手書きかな漢
字変換部、７Ｅ…処理制御部、８…家庭用ビデオデッ
キ、１０…リモコン。

───────────────────────────────────────────────────── フロントページの続き (72)発明者曽根原登東京都千代田区内幸町一丁目１番６号日本電信電話株式会社内 (72)発明者岡部重利東京都武蔵野市御殿山１丁目１番３号エヌ・ティ・ティ・アドバンステクノロジ株式会社内 (72)発明者兒玉正東京都武蔵野市御殿山１丁目１番３号エヌ・ティ・ティ・アドバンステクノロジ株式会社内

Claims

【特許請求の範囲】

【請求項１】表示手段と一体化された透明なタブレッ
トの上から該タブレットの所定の位置を指示して、手書
き入力する手書き入力方法であって、前記タブレットか
ら日常用語で手書き入力し、手書き入力装置内に有する
同義語データベース上の同義語と前記手書き入力された
文字列を照合し、一致した同義語と前記データベースに
登録してある同義語とを関連付けるプログラムを起動し
て、大まかな自然言語による処理依頼で使用者の意図し
た処理を行うことを特徴とした手書き入力方法。
【請求項２】表示手段、該表示手段と一体化された透
明なタブレット、該タブレット上から前記タブレットの
所定の位置を指示する位置指示手段、それらを処理制御
する処理制御手段、及び記憶手段を備えた手書き入力装
置であって、前記手書き入力装置内に有する同義語デー
タベースと、該同義語データベース上の同義語と前記タ
ブレット上から日常用語で手書き入力された文字列とを
照合し、一致した同義語と前記データベースに登録して
ある同義語とを関連付けるプログラムとを備えたことを
特徴とする手書き入力装置。
【請求項３】請求項２に記載の手書き入力装置と情報
処理手段を備えたことを特徴とする電子機器。
【請求項４】請求項２に記載の手書き入力装置を備え
たことを特徴とするビデオデッキ。