JPS62224859A

JPS62224859A - 日本語処理方式

Info

Publication number: JPS62224859A
Application number: JP61067731A
Authority: JP
Inventors: Jiichi Igarashi; 五十嵐　治一
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 1986-03-26
Filing date: 1986-03-26
Publication date: 1987-10-02

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】〔技術分野〕本発明は日本語処理方式に係り、詳しくは、仮名漢字変
換、漢字仮名変換、文字認識等の多機能の日本語文章処
理を可能とする日本語処理方式に関する。

〔従来技術〕

日本語ワードプロセッサにおいては１通常、仮名漢字変
換機能が備えられている。この種仮名漢字変換では、仮
名文字列に対して、単語の切り出し時に品詞間の接続チ
ェックを行うことが一般的である。この処理は形態素解
析と呼ばれているが、この形態素解析はＯＣＲ（光学的
文字読取装置）における文字認識の後処理（誤認識文字
の訂正）にも取り入れられ始めてきている。しかしなが
ら、仮名漢字変換と文字認識の分野では、例えば、入力
文章がそれぞれ仮名文と漢字仮名混り文というように異
なるため、従来は別々の単語辞書が用いられ、アルゴリ
ズムやプログラムも共通化されておらず、多機能日本語
処理装置の実現を困難にしていた。

〔目　的〕

本発明の目的は、仮名漢字変換に用いられている形態素
解析処理を文字Ｌｇｒｒ１の後処理に取り入れると共に
、仮名漢字変換処理と文字認識処理にできるだけ共通の
アルゴリズムを利用して、多機能日本語処理装置を低コ
ストで実現することにある。

〔構　成〕

本発明は、読み表記対応データを付加した単語辞書を用
意して単語の漢字仮名混り表記を発生させることにより
、仮名漢字変換、漢字仮名変換、文字認識の後処理等に
共通の形態素解析処理を利用できるようにしたことであ
る。以下、本発明の一実施例について図面により詳述す
る。

第１図は本発明方式を適用した多機能日本語処理装置の
全体構成図を示す。キーボード１０は文字を入力する他
に各種のモード（仮名漢字変換、漢字仮名変換、ＯＣＲ
文字認識等）を指定するのに用いる。ＯＣＲ入力装置１
１は原稿を光学的に読取り入力する。処理装置１２はキ
ーボード１０やＯＣＲ入力装置１１からの入力情報につ
いて、指定されたモードに従った処理を実行し、出力装
置１６に出力する。出力装置１６はディスプレイ装置、
プリンタ等を総称して示したものである。

処理装置１２の処理に必要なプログラムはプログラムメ
モリ（ＲＯＭ）１３に格納されるが、キーボード入力に
よる仮名漢字変換、ＯＣＲ文字認識の後処理、ＯＣＲ入
力された文字列の仮名漢字変換や漢字仮名変換について
出来るだけ共通のアルゴリズムが利用される。データメ
モリ　（ＲＡＭ）１４は処理装置１２での処理途中のデ
ータやパラメータを格納するのに用いられる。単語辞書
メモリ１５には後述する読み表記対応データを付加した
単語辞書が格納されている。

第２図に全体の処理の流れを示す、処理１０１でモード
（ｎ＝１，２１３１４）を選択する。ｎ＝１はキーボー
ド１０より入力された仮名文字列（ローマ字入力で仮名
変換されたものも含む）を漢字仮名混り文に変換するモ
ードである。ｎ＝２はＯＣＲ入力装置１１より入力され
た仮名文字列または一部漢字の混ざった文字列を認識し
、完全な（出来る限り漢字表記をするという意味で）漢
字混り文に変換するモードである。例えば、ＯＣＲ入力
された「車でほこをはこぶ」をｒ車で箱を運ぶ」に変換
する。ｎ＝３はＯＣＲ入力装置１１より入力された文章
の認識（文字認識及びその後処理）を行うモードである
。ｎ＝４はＯＣＲ入力装置１１より入力された漢字仮名
混り文を仮名文字列に変換するモードである。

ｎ≧２のモードの場合、処理１０２で文字認識を行い、
処理１０３で誤認識文字の自動検出を行う。

各モード（ｎ＝１〜４）は処理１０４で一緒になり、「
。」または「、」で区切られた部分を１ユニツトとして
ユニットの切り出しを行う、処理１０５で文章の終りを
判定し、文章の終りの場合（切り出すユニットが存在し
ない場合）は処理を終了するが、それ以外の場合は切り
出したユニットについて１０６以降の処理を実行する。

ｎ≧２のモードでは、処理１０６で候補文字列を作成し
た後（第１位候補文字から順に代入していく）。

処理１０７で形態素解析を、処理１０８で該当ユニット
の評価値を計算する。その後、処理１０９で候補文字が
終りかどうか判定し、終りでなければ処理１０６に戻る
。このようにして、すべての候補文字列に対して形態素
解析を行い、ユニットの評価値の計算が終了すると、処
理１１０で最大評価値をもつ候補文字列を当該ユニット
の文字列として選択する。一方、ｎ＝１のモードの場合
は、処理１１５で形態素解析を行う。なお、処理１０７
と１１５は同じサブルーチンで実行される。

処理１１１でｎ＝２を判定し、ｎ＝１と２のモードの場
合は、処理１１２で単語の表記文字列に変換した後、処
理１１３で該文字列を出力して処理１０４に戻る。ｎ＝
３のモードの場合は、処理１１０で選択した文字列をそ
のまＮ出力する。ｎ＝４の場合は、処理１１４で単語の
読みの文字列に変換して出力する。第８図に入力文字列
と各モードでの出力文字列の例を示す。

二Ｎで、モード４の文字認識＋漢字仮名変換機能は、例
えば単音節発生装置と組み合せることにより、文章読上
げ装置の一部として利用することができるので１文字認
識の確認用としても活用できる。

第２図における処理１０７と１１５の形態素解析の詳細
フローを第３図に示す。第３図において、モード１とモ
ード２，３．４とが処理上具なるのは、処理２０３と２
０３、及び処理２２１と２２２の２箇所だけである。こ
のうち、処理２０３が従来の形態解析機能に対して本発
明により新たに追加された処理である。この処理２０３
は、解析対象の漢字仮名部り文字列に対して、単語辞書
中の単語の漢字仮名部り表記を可能な限り発生させ、マ
ツチングをとるという辞書引きのための処理である。こ
の処理２０３を新たに付加することにより、仮名漢字変
換処理（モード１）だけではなく、ＯＣＲ後処理（モー
ド２．３）　、漢字仮名変換処理（モード４）とが同一
アルゴリズムで実現することができるようになる。それ
以外の処理は公知技術であるので（例えば特開昭５９−
２２１７３３号）、第３図の説明は省略する。

第４図は第３図の処理２０３の詳細フローを示したもの
である。こＮでは、解析対象文字列は６文字以内とし、
具体例としてｒ計算きを使い」を入力した場合について
説明する。第５図は単語辞書の構成を示している。

処理３０１で解析対象文字列を入力し、処理３Ｏ２で先
頭が仮名かどうか判定し、仮名の場合は処理３０３，３
０４を、漢字の場合は処理３０５゜３０６を実行する６
本例の場合、先頭文字「計」は漢字であるので、処理３
０５で漢字列「計算」が切り出される。処理３０６では
、単語辞書３゜７（第１図の単語メモリ１５中にある）
中の表記の部分をキーとして、「計算」と先頭から完全
にまたは部分的にマツチする単語を検索し、その結果得
られた候補単語をメモリ３０８（第１図のデータメモリ
１４に対応）にストックしておく、こぎでは、「計ノ、
「計算」、「計算機」が候補単語として検出されたとす
る。

処理３０９では、それらの候補単語が［完全マツチング
」であるかを判定する。［完全マツチングツとは、候補
単語の読みまたは表記が対象文字列の先頭から一致し、
包含されるようなマツチングをいう。例えば、候補単語
の「計」と「計算」は、対象文字列の「計算きを使い」
とは「完全マツチング」であるが、「計算機」は「き」
と「機Ｊの部分が異なるので「完全マツチング」ではな
い。

完全マツチングした候補単語「計」と「計算」について
は、その単語情報（読み、表記、品詞、頻度等）が処理
３１３，３１４を経て次ステツプ（第３図の処理２０４
）へ出力される。

一方、候補単語「計算機」については、処理３１０以下
の処理が実行される。まず、処理３１０で、単語辞書中
の単語の読み、表記、読み表記対応データとから可能な
漢字仮名部り表記を発生させる。第６図に発生された表
記の例を示す、読み表記対応データは、「表記」中の漢
字を含む部分の文字列と対応する「読み」中の部分仮名
文字列の長さを意味する。第７図に「計算機」での例を
示す。即ち、「けい」、「さん」、「き」の３つの部分
仮名文字列の長さはそれぞれ２，２．１であるが、最後
の値を除いたｒ２，２Ｊだけを単語辞書に登録しておけ
ば十分である。もし５表記中に仮名文字が混ざっている
場合には１次の規則にしたがって部分列に分割する。切
り取った文字列の中に漢字を１字だけ含み、かつ、仮名
から漢字に字種変化する場所で区切る（例、読み出す→
「読み」、「出す」）。なお、発生する漢字仮名部り表
記が可能が単語表記をすべてカバーできるためには、単
語の表記はなるべく漢字で記されていることが望ましい
（例、「つり道具」→「釣り道具」）。また、表記の漢
字の個数が０個または１個であるときには、読み表記デ
ータは０としておく。次に、処理３１１で対象文字列と
漢字仮名部り表記とのマツチングをとり、マツチングを
とれ＼ば該単語情報を次ステツプへ出力する（処理３１
２．３１３）。これを候補単語すべてについて繰り返す
（処理３１４）。

モードｎ≧２の場合、上記の形態素解析処理を実行した
後、第２図の処理１０８〜１１０を行うことにより、最
も尤度の高い候補文字を決定することができる。処理１
１０では、処理１０８で計算した単語の評価値の累積和
をユニットの評価値として利用する。

また、第４図の処理３１０では使用字種の制限を設ける
ことにより、任意の指定した字種範囲（例、教育漢字ひ
らがな）での単語表記を得ることが出来、それを第２図
の処理１１３で出力することにより、ＯＣＲ入力装置１
１から読み取った入力文字列を、指定された字種範囲の
文字列へ変換して出力することも容易に可能となる。

〔効　果〕

以上説明した如く、本発明によれば、省メモリ化、低価
格の多機能日本語処理装置が可能になる。

【図面の簡単な説明】

第１図は本発明による多機能日本語処理装置の一実施例
のブロック図、第２図は第１図の全体の処理の流れを示
す図、第３図は形態素解析の処理の流れを示す図、第４
図は第３図の処理２０３の詳細を示す図、第５図は単語
辞書の構成例を示す図、第６図は漢字仮名混り表記の一
例を示す図、第７図は読み書き対応データの説明図、第
８図は各モード対応の入出力文字列の一例を示す図であ
る。１０・・・キーボード、　１１・・・ＯＣＲ入力装置、
１２・・・処理装置、　　１３・・・プログラムメモリ
、１４・・・データメモリ、　　１５・・・単語メモリ
、１６・・・出力装置。

Claims

【特許請求の範囲】

（１）仮名漢字変換処理、漢字仮名変換処理、文字認識
処理等を行う多機能日本領処理装置において、単語の読
み表記対応データを付加した単語辞書を用意して単語の
漢字仮名混り表記を発生させ、キーボード入力による仮
名漢字変換、ＯＣＲ文字認識の後処理、ＯＣＲ入力され
た文字列の仮名漢字変換、ＯＣＲ入力された文字列の漢
字仮名変換等を共通の形態素解析処理機能を用いて行う
ことを特徴とする日本語処理方式。