JPH0218514B2

JPH0218514B2 -

Info

Publication number: JPH0218514B2
Application number: JP57202220A
Authority: JP
Inventors: Jon Aaguhaato Robaato
Original assignee: International Business Machines Corp
Current assignee: International Business Machines Corp
Priority date: 1981-12-29
Filing date: 1982-11-19
Publication date: 1990-04-25
Also published as: JPS58119033A; US4503514A

Description

【発明の詳細な説明】

発明の技術的分野本発明は一般的にテキスト処理システムに係
り、特にテキスト処理システムにおいて辞書を圧
縮して記憶し、テキスト・ワードのつづり字を検
証するため辞書にアクセスする方法及び手段に係
る。発明の技術的背景入力されたワードのつづり字が正しいかどうか
を検証する機能を含む、先行技術を用いたテキス
ト処理システムは、たいていの場合、使用頻度の
高いワードが永久記憶された辞書を含む。限られ
た記憶容量のマイクロプロセツサによつて駆動さ
れるテキスト処理システムの出現以来、つづり字
を検証する機能として辞書を圧縮して記憶し、記
憶された辞書を高速にアクセスする方法の研究が
続けられている。このような辞書圧縮機能に関す
る先行技術の１つは米国特許第3925761号に２進
参照マトリツクスとして開示され、アルフアベツ
トの各文字は特定の数値を指定され、各々の辞書
ワードのベクトルの絶対値と角度を計算するため
ハツシユされる。ベクトルの絶対値と角度はマト
リツクスのXY座標を形成し、マトリツクスの各
位置に記憶される２進数１は有効辞書ワードを表
わし、２進数０は有効辞書ワードを表わさない。
アルフアベツト文字の数値を文字のエラー傾向に
反比例して選択することにより、２進参照マトリ
ツクスの構成は正確な検証に必要なアレイの大き
さを最小限にするのに対し、２進参照マトリツク
ス（BRM）による辞書ワードの表現は特定され
ず、絶対値と角度のBRM表示のまるめのエラー
による誤つた検証の可能性を最小限にするよう
に、エラー事象はマトリツクスの希薄領域にガー
ブルされたワードを写像する傾向に関連付けされ
なければならない。これは、必要な希薄領域を作
成するために多くの空白記憶位置が用意されなけ
ればならないことを意味する。 BRMベクトル記憶技術を改善するものとし
て、米国特許第3995254号は、各々の有効辞書項
目のベクトルの絶対値と角度をデイジタル表示す
る記憶アレイを含む装置を開示している。デイジ
タル表示はアルフア・ワード・ベクトル表示式に
従つて決定され、表示された各ワードの絶対値及
び完全に特定された角度を生成する。前記絶対値
及び角度は符号化され、記憶アレイに書込まれ
る。実際の絶対値と角度は前記記憶アレイに記憶
されるので、前記誤つた検証の可能性を最小限に
する希薄領域の必要性が取除かれる。しかしなが
ら、前記特許では実際の絶対値及び角度の値の記
憶が必要とされる。これらの値は入力ワードに対
して計算された絶対値及び角度の値と比較され、
入力されたワードが辞書に現われるかどうかが決
定される。前記特許では、順次に絶対値をインデ
ツクスすることによつて、絶対値を圧縮して記憶
する方法が開示されているが、インデツクス機能
には４ビツトが必要であり、復号されなければな
らないので、辞書アクセス・アルゴリズムの動作
速度が低下する。本発明の概要本発明は入力ワードの正しいつづり字を検証す
る際に用いる符号化されたデータの辞書フアイル
を記憶し、且つ高速にアクセスする、よりすぐれ
た方法を開示する。辞書ワードは数値に符号化さ
れ、絶対値及び角度にハツシユされ、その結果生
じたペアは最初に絶対値で分類され、次に同じ絶
対値において角度で分類される。次に、絶対値は
各々の可能な絶対値の２進表示と各々の実際の絶
対値の２進表示を有するポインタ・ビツト・ベク
トルに写像される。ポインタ・ビツト・ベクトル
は、そのままの値で記憶される角度の値と整合さ
れる。つづり字が検証される入力ワードは同様に
ハツシユされる。入力ワードの絶対値の値はポイ
ンタ・ビツト・ベクトルをアクセスし、ポイン
タ・ビツト・ベクトルは入力ワードと同じ絶対値
を有する角度のすべてに対してポインタを生成す
る。これらの角度は入力ワードに対して計算され
た角度と比較され、比較の結果及び、それに応じ
て入力ワードが正しくつづられているかどうかを
示す標識が生成される。絶対値当りの記憶を２ビ
ツトにすることにより、絶対値を表わすポイン
タ・ビツト・ベクトルの必要な記憶容量は最小限
になる。極めて少数の２進値の比較と平均して１
回未満の実際の角度の比較としか必要としないの
で辞書占有の有無を決定する速度が向上する。詳細な説明第１図に示す型の対話式情報処理システムにお
ける本発明の良好な実施例について説明する。第
１図の情報処理システムはターミナル１と、それ
に接続されたデイスケツト記憶装置１６を含む。
ターミナル１はデイスプレイ１４とキーボード１
０を有する。操作員はキーボード１０の動作を介
してターミナル１にコマンドを入力し、ターミナ
ル１とデイスケツト記憶装置１６の間の情報転送
を行なうことができる。更に、操作員は文字及び
数字と、デイスプレイ１４の表示を制御するコマ
ンドを入力することができる。第２図は第１図の情報処理システムの詳細を示
すブロツク図である。第２図に示すように、情報
処理システムはキーボード１０、マイクロプロセ
ツサ１１、表示リフレツシユ・バツフア１２、デ
イスプレイ１４、及びデイスケツト・ドライブの
ような補助直接アクセス記憶装置（以下、デイス
ケツト記憶装置という）１６を含む。更に、ハー
ド・コピーを出力するプリンタ１５がマイクロプ
ロセツサ１１に接続され、且つシステムのそれぞ
れの構成要素の同期を保持するクロツク１７が各
装置に有効に接続されている。キーボード１０は文字、数字、句読点のような
グラフイツク記号キーの通常のセツト、特殊キヤ
ラクタ・キー、及びキヤリア・リターン，タブ，
インデツクス等のようなテキスト・フオーマツ
ト・キーまたはテキスト制御キーを含む。更に、
キーボード１０はシステムに特殊制御コマンドを
出す制御キーのもう１つのセツトを含む。制御キ
ーにはキーボード１０を複数の異なるモードにセ
ツトするカーソル移動キー等が含まれる。キーボード１０はバス２０によつてマイクロプ
ロセツサ１１に接続されている。マイクロプロセ
ツサ１１は第３図に示すように、入力ポート２
１、出力ポート２２、ランダム・アクセス・メモ
リ（以下、RAMという）２３、及びプロセス実
行ユニツト２４を含む。 RAM２３は機能的には命令とデータの両者を
記憶する。命令とデータはキーボーード１０から
入力ポート２１を介してRAM２３に２進情報の
バイトとして入力される。第４図に示すように、
RAM２３で、キーボード１０からキーストロー
ク・データを受取るセクシヨンはキーストローク
待行列２６と呼ばれる。表示されるデータは１組
の命令によつてキーボード待行列２６からテキス
ト・バツフア２７に転送され、次にマイクロプロ
セツサ１１の出力ポート２２を介して表示リフレ
ツシユ・バツフア１２に転送される。これは１組
の転送命令を実行するマイクロプロセツサ１１に
よつて通常の方法で行なわれる。マイクロプロセツサ１１はIBMシリーズ１、
Intelモデル8086または機能的に同等と認められ
る、現在市販のマイクロプロセツサのいずれでも
よい。表示リフレツシユ・バツフア１２は、出力ポー
ト２２とデイスプレイ１４の間に接続された別個
のバツフアとして示されているが、実際には通常
はデイスプレイ１４の一部分であり、表示スクリ
ーンの１組の水平線をトレースする電子ビームの
ON−OFF制御を実行することによつて、デイス
プレイ１４の表示スクリーン上のキヤラクタの生
成を制御するように作用する。出力ポート２２はまた、RAM２３に記憶され
たデータをプリンタ１５及びデイスケツト記憶装
置１６に供給する。プリンタ１５及びデイスケツ
ト記憶装置１６の各々はそれ自身のバツフアを内
蔵していることがある（図示せず）。データを
RAM２３からプリンタ１５またはデイスケツト
記憶装置１６に転送するコマンドは、操作員によ
つてキーボード１０からマイクロプロセツサ１１
に送られる。プリンタ１５は技術的に既知な適合するどのプ
リンタでもよい。大部分のテキスト処理システム
では、プリンタ１５は基本的に、タイプ・ボール
素子又はデイジイ・ホイール素子を有する標準入
出力ターミナル・プリンタである。デイスケツト記憶装置１６もまた、データを検
索するのにマイクロプロセツサ１１によつて各々
がランダムにアドレス指定可能な、決められたセ
クタ・アドレス位置で供給されるデータを、バイ
ト・シリアルで記憶することが可能な、適合する
どのデイスケツト記憶装置でもよい。デイスケツ
ト記憶装置１６から供給される位置関連のデータ
はRAM２３の表示データ・エリア２８に符号化
された形式で記憶される。第４図に示すRAM２
３の他のセクシヨンは表示フオーマツト・バツフ
ア２９である。表示フオーマツト・バツフア２９
は本発明に従つて位置関連のデータを復号された
形式で処理するのに関連する。第５図はデイスプレイ１４のスクリーンの概要
図である。第４図に示すように、スクリーンは、
例えば、各行が80キヤラクタのカラム位置から成
る行を25行表示する能力を有する。実際には、１
キヤラクタ位置にドツト位置すなわちペルと呼ば
れる画素のマトリツクスから成る。デイスプレイ
１４で表わされる型のデイスプレイの代表的なキ
ヤラクタ・マトリツクスは幅６ペル、高さ10ペル
のマトリツクス３２である。表示リフレツシユ・
バツフア１２とデイスプレイ１４の対話は、表示
リフレツシユ・バツフア１２にある位置に記憶さ
れたキヤラクタを、デイスプレイ１４のスクリー
ンの同等の位置に、６×10のドツト・マトリツク
スの形式の対応するキヤラクタに変換することで
ある。デイスプレイ１４は一般に前記変換を実行
する電子回路を内蔵している。マイクロプロセツ
サ１１は表示リフレツシユ・バツフア１２にアド
レスを供給し、適切なキヤラクタをロードするこ
とのみを必要とする。デイスケツト記憶装置１６もまた、一般に、
RAM２３の表示データ・エリア２８から出力ポ
ート２２を介して供給されたデータ・バイトをビ
ツト・シリアルのデータ・ストリームに変換し、
デイスケツト上のアドレス指定された同心円の記
憶トラツクの１つの所定のセクタに記録させる電
子回路を内蔵している。デイスケツト記憶装置１
６からのデータは、要求されると、記憶されたト
ラツクのアドレス指定されたセクタからバイト・
シリアルで、マイクロプロセツサ１１に供給され
る。これまでに説明したマイクロプロセツサ１１に
関連する機能及び対話のすべては適合するプログ
ラムによつて実行される。前記プログラムもまた
RAM２３に記憶され、キーボード１０からのデ
ータ、または第１図に示すシステムのそれぞれの
構成要素によつて生成される割込信号に対応する
動作が行なわれる。システムの組合せを利用する本発明の動作につ
いて、第２、第６及び第７図によつて説明する。
第６図は本発明に従つてテキスト・ワードの辞書
フアイルを符号化する機能の論理的流れ図を示
す。辞書フアイルを符号化する機能と入力ワード
を復号する機能は極めて類似していることは明白
であるから、符号化機能についての詳細な説明の
みを第７図によつて説明する。第６図において、符号化され、RAM２３また
はデイスケツト記憶装置１６に記憶される辞書フ
アイルはブロツク４０で入力され、ブロツク４１
でハツシユ・アルゴリズムによつて処理される。
ブロツク４１のハツシユ・アルゴリズムの詳細は
前記米国特許第3995254号において完全に説明さ
れているハツシユ・アルゴリズムに類似してい
る。ハツシユ・アルゴリズムは各々のワードの中
の各々のキヤラクタに数値を指定し、各々のワー
ドのベクトルの絶対値と角度を計算する。ブロツ
ク４２で、ベクトルの値は最初に絶対値によつて
分類され、次にそれぞれの絶対値内で角度の値に
よつて分類される。ブロツク４３で、絶対値は符号化され、ポイン
タ・ビツト・ベクトル（PVEC）が生成される。ハツシユ・アルゴリズムは、絶対値が０からＮ
−１の範囲になるように修正され、且つＮ個の辞
書ワードをハツシユすることによつて生じた絶対
値が前記の絶対値の範囲にわたつて一様に分散さ
れるように修正される。これは、ワードの絶対値
を前記の範囲内にランダム化乃至分散させるのに
十分な頻度でそれらのワードの絶対値が前記の範
囲を循環するように、絶対値の重みの値を選択
し、モジユロＮを計算することによつて達成され
る。フアイルがハツシユされ、（辞書の中のワード
数をＮとして、ｉ＝０ to Ｎ−１）分類された
後ｍ（ｉ）とａ（ｉ）がｉ番目の絶対値と角度のペ
アを表わすものとする。正確に2Nビツトのポイ
ンタ・ビツト・ベクトル（PVEC（ｊ），ｊ＝０
to 2N−１）が構成される。PVECには正確にＮ
個の０及びＮ個の１がある。各々の０は可能な絶
対値（すなわち、０，１，……Ｎ−１）の１つを
表わす。各々のｍ（ｉ）は１個の１によつて表わ
される。ｉ番目の絶対値ｍ（ｉ）を表わす１は
PVECの（ｉ＋ｍ（ｉ）＋１）番目のビツト位置に
置かれる。このベクトルは、各ワードに対して正確に２ビ
ツトを要求しているので、本来の絶対値の情報の
すべてを保有する。この写像は次のループによつ
て行なわれる。 do ｉ＝０ to Ｎ−１ PVEC（ｉ＋ｍ（ｉ）＋１）＝１ end このベクトルは次のように解釈される。すなわ
ち、ｊ番号の０（ｊ＝０から数えて）は、ｊに等
しい絶対値ｍ（ｉ）の位置保持者と見なされる。
ｊの値を有するｍ（ｉ）のすべては、前記ｊ番目
の０の直後の１によつて表わされる。例えば、３
個のｍ（ｉ）が174に等しければ、174番目の０の
後に３個の１が続く。PVECの中のｋ番目の１
（ｋ＝０ to Ｎ−１）は与えられた分類シーケン
スの中のｋ番目の辞書項目を表わす。ブロツク４３のポインタ・ビツト・ベクトルの
符号化に続いて、ブロツク４４で、MTABと呼
ばれるインデツクス・テーブルが計算され、各々
のアクセスでポインタ・ビツト・ベクトルの最初
から走査することを必要とせずに、ポインタ・ビ
ツト・ベクトルを速かにアクセスする手段が与え
られる。ポインタ・ビツト・ベクトルへの入力点
の間隔については辞書項目の全数に基づき、設計
者が選択する。ポインタ・ビツト・ベクトル
PVECの先頭から開始されるサーチの平均の長さ
は、Ｎが辞書項目の全数を表わすものとして、
Ｎ／２である。インデツクス・デルタMDELが
選択される場合、MTABが計算され、PVECに
おいて最も近いMDEL入力点からのサーチ距離
が与えられる。従つて、サーチの平均の長さは
MDEL／２に減少される。使用されているイン
デツクス技術はPVECにおいて直接に０を指し、
最も近い複数のMDELを表わし、そこから、絶
対値のMDELを法とする計算に基づいて走査す
る。例えば、選択されたインデツクス値が
MDEL＝32であるものとする。絶対値MAG＝89
に対して、64に対する０が直接に指定され、
PVECはその点から、絶対値25の分に対して順方
向に走査される。第１表はインデツクス・デルタ４（MDEL＝
４）を用いて８ワード（Ｎ＝８）の簡単な辞書の
インデツクス・テーブルを計算するプログラム・
ルーチンを示す。前に説明したように、ポイン
タ・ビツト・ベクトルPVECは各々のワードの絶
対値に対して２ビツト、すなわち2Nビツトを有
する。従つて、Ｎ＝８の場合、PVECは16ビツト
を有する。PVECにおけるビツト位置は第１表で
ｊ（０〜15）によつて識別される。８ワードのそ
れぞれの絶対値はMAG（ｉ）で示される。

【表】 MTABインデツクス・ポイントは絶対値カウ
ント及び選択されたインデツクス・デルタの関数
として計算される。この例では、絶対値０〜３に
対してはMTABは０であり、絶対値４〜７に対
してはMTABは−１である。これによつて
PVECへの入力点は、絶対値０〜３に対しては位
置０に、絶対値４〜７に対しては位置７に与えら
れる。入力点のアクセスについては復号方法に関
連して後に詳細に説明する。ここでは説明を容易
にするため意図的に簡単な例を用いたが、この方
法は非常に大きい辞書にも適用することができ
る。例えば、インデツクス・デルタ６４、ワード
50kの辞書は782のMTAB入力を有するであろ
う。ブロツク４４のMTABの計算に続いて、ブロ
ツク４５で、PVEC，MTAB、及び分類された
角度の値のテーブルはデイスケツト記憶装置１６
に記憶され、システムに入力されたワードのつづ
り字の検査に使用される。入力ワードのつづり字を検査する方法について
第７図及び第２表に関連して説明する。つづり字
のエラーが検査されるテキスト・ワードは、デー
タ入力動作の一部としてキーボード１０を介して
システムに入力されることもあり、データ修正動
作の一部としてデイスケツト記憶装置１６から入
力されることもある。いずれの場合も、テキス
ト・ワードはマイクロプロセツサ１１のRAM２
３に記憶され、前に説明したように、符号化され
ているシステム辞書に対して検証される。その場
合、各入力ワードはシステム辞書との比較前に同
じように符号化される。ハツシユ・アルゴリズム
５０（第７図）を介してワードを入力することに
よつて符号化は達成され、ワードの絶対値及び角
度表示が生成される。第７図に示す例は、第１表
に関連して説明した８ワード辞書に対する辞書表
現及び復号である。第２表は第７図の機能を実行
するプログラム・ルーチンである。入力ワードの
符号化は絶対値６及び角度の値７６を生じるもの
とする。絶対値はレジスタ５１で高い成分
（MHI）と低い成分（MLO）に分解される。低
い成分は絶対値のインデツクス・デルタを法とす
る。第１表に関連して説明したように、インデツ
クス・デルタ（MDEL）は４である。高い成分
は絶対値から低い成分を差引いた値に等しい。絶
対値の高い成分（MHI）はブロツク５２で
MDELによつて割られる。その結果はインデツ
クス・テーブル５４に送られ、ポインタ・ビツ
ト・ベクトルPVECへの入力点の調整を行なう。
ブロツク５２の結果が０の場合にはMTABの値
として０が生成され、ブロツク５２の結果が１の
場合にはMTABの値として−１が生成される。
ここに示す例では、MTABの値として−１が生
成され、ブロツク５５で、絶対値における高い成
分に加えられ、ブロツク５６で、高い成分の２倍
の値に加えられる。これによつて、角度テーブル
５９へのアクセス点DINDを位置３で生じ、
PVEC５７へのアクセス点PIND（第２表）を位
置７で生じる。次に、PVECは右に走査し、角度
テーブルは下方に走査する。PVECで出会つた
各々の０はレジスタ５１のMLO出力を、その値
が−１に達するまで減分させる（ブロツク５８）。
出会つた各々の１は角度テーブルのインデツクス
値DINDを１ずつ増加させる。MLOの値が−１
に達したとき、DINDに対応し、かつDINDに続
く角度の値は入力ワードに対して生成された角度
と比較される（ブロツク６０）。その結果、一致
が生じた場合には、入力ワードのつづりが正しい
ことを示すコードがセツトされる。角度テーブル
からの角度の値を越える場合には、入力ワードの
つづりが正しくないことを示すコードがセツトさ
れる。

【表】前に述べたように、説明を容易にするため小さ
い辞書の例を用いて本発明の説明を行なつたが、
既に明らかなように、単にMDELの値とPVECの
大きさを変更するだけで、本発明の範囲は非常に
大きい辞書にも適用可能である。

【図面の簡単な説明】

第１図はターミナル及び記憶装置を含む情報処
理システムの概観図、第２図は第１図の情報処理
システムのブロツク図、第３図は第２図に示すマ
イクロプロセツサの機能図、第４図はメモリの一
部分と、マイクロプロセツサと、表示リフレツシ
ユ・バツフアの間のデータ・フロー経路を示す機
能図、第５図は第１図に示すデイスプレイのスク
リーンの概要図、第６図は本発明の符号化機能の
動作を示す論理的流れ図、第７図は本発明の検証
機能の動作の流れの詳細図である。１……ターミナル、１０……キーボード、１１
……マイクロプロセツサ、１２……表示リフレツ
シユ・バツフア、１４……デイスプレイ、１５…
…プリンタ、１６……デイスケツト記憶装置、１
７……クロツク、２０……バス、２１……入力ポ
ート、２２……出力ポート、２３……RAM、２
４……プロセス実行ユニツト、２６……キースト
ローク待ち行列、２７……テキスト・バツフア、
２８……表示データ・エリア、２９……表示フオ
ーマツト・バツフア。

Claims

【特許請求の範囲】１辞書のキヤラクタ・ストリング中に、或る入
力されたキヤラクタ・ストリングがあるか検査す
ることのできるテキスト処理装置に於て、各キヤラクタ・ストリングに対応する、数値び
及角度の表現を計算する手段５０と、前記キヤラクタ・ストリングの数値表現のモジ
ユロＮの値を計算する手段５０と、前記辞書のキヤラクタ・ストリングの全数をＮ
として、2N個のビツト位置を有するメモリ・バ
ツフアであつて、数値の順序に分類されたＮ個の
キヤラクタ・ストリングの数値表現のモジユロＮ
の値の各々に対して第１の値のビツト位置が一つ
ずつ割り当てられるよう、基準ビツト位置から前
記割り当てられた第１の値のビツト位置までの間
の第２の値のビツト位置の数によつて、その間の
他の第１の値のビツト位置の在在に関係なく、前
記モジユロＮの値の各々をあらわした前記メモ
リ・バツフア５７と、前記数値の順序に分類されたＮ個のキヤラク
タ・ストリングの数値表現のモジユロＮの値に対
応して前記角度の表現を記憶するメモリ手段５９
と、入力されたキヤラクタ・ストリングについて計
算された数値表現のモジユロＮの値に対し割り当
てられた第１の値のビツト位置を求めて、前記メ
モリ・バツフアを走査する手段５６，５８と、前記入力されたキヤラクタ・ストリングについ
て計算された角度の表現を求めて、前記メモリ手
段を、前記メモリ・バツフアの走査と同期して走
査する手段５５と、前記入力されたキヤラクタ・ストリングのモジ
ユロＮの値を有する、前記メモリ・バツフアのビ
ツト位置に対応する位置の、メモリ手段中の角度
の表現を、前記入力されたキヤラクタ・ストリン
グの角度の表現に比較し、一致するか否かを表す
出力を生じる比較手段６０とを有するテキスト処
理装置。２前記第１の値が２進数の１であり、前記第２
の値が２進数の０であることを特徴とする特許請
求の範囲第１項記載のテキスト処理装置。３前記メモリ・バツフアを走査する手段が、前
記Ｎ個の２進数の１の前記メモリ・バツフア中で
の相対的な位置に基づいて前記基準のビツト位置
以外の途中のビツト位置から走査を開始できるこ
とを特徴とする特許請求の範囲第２項記載のテキ
スト処理装置。