JPH01207869A - 日本語文章処理方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔概要〕 日本語文の形態素解析に関し。

辞書の容量を圧縮すると共に辞書データの保守を容易に
することを目的とし。

異表記を存する単語に対して異なる表記ごとに別々に属
性情報を持たせず、予め１つの代表表記を定めてその代
表表記のみに属性情報を設定し。

他の表記には代表表記のみを設定した日本語辞書と９日
本語辞書を検索して入力文を形態素に分解する形態素解
析部とをそなえ、形態素解析部は。

入力文を、異表記を有する単語のうち代表表記以外の表
記については２代表表記を対応づけて形態素に分解する
第１の形態素解析処理と、第１の形態素解析処理の結果
について１代表表記を対応づけられた形態素に関しては
３代表表記で日本語辞書を再度検索し１代表表記に設定
されている属性情報を代表表記を対応づけられた形態素
に代入する第２の形態素解析処理とを行うように構成す
る。

〔産業上の利用分野〕

本発明は２日本語文章処理力式、特に日本語文の形態素
解析に関する。

日本語文章処理においては、構文解析や意味解析の前段
階として、形態素解析が行われる。

形態素解析とは、数・性・特称・人称などの範曜に従っ
て、また、格などに従って文章を構成する語の多様な形
態を同定し、さらに、その語の構造、すなわち、その語
基やそれと結合している形態素を抽出することにより、
それらの語が如何に構成されているかを解析することで
ある。いいがえると１文字列として与えられた文から形
態の列を同定し、これらから形態素の列を抽出すること
である。

この形態素解析は、辞書を検索しながら行われるので、
使用する辞書の構造が重要な役割を果た〔従来の技術〕 第３図は、従来例を示す図である。

第３図において、３１は日本語辞也、３２は形態素解析
部である。

日本語辞書３］は、各単語をレコードとして持っている
。各レコードは、見出し語および意味属性１文法属性な
どの属性情報がら構成されている。

形態素解析部３２は、入力文から形態の列を同定し、こ
れらから形態素の列を抽出する。

以下第３図を用いて、従来の形態素解析を詳細に説明す
る。

日本語では、同一の単語を別々に表記する異表記という
ことが行われている。日本語辞書３１には、同一の単語
の異表記ごとに、それを見出し語として意味属性１文法
属性などの属性情報を持たせている。第３図に示した日
本語辞書３１には。

異表記の例として、「絹合せ」　「組め合わせ」「くめ
あわせ」か示しである。「組合せ」、「組め合わせ」お
よび「くみあわせ」は、同一の単語であるが表記が異な
っている。日本語辞書３１の中では、「組合せ」、「組
み合わせ」および「くめあわせ」は、それぞれ見出し語
として登録されており、意味属性９文法属性などの属性
情報を持っている。

次に、第３図に示した例を用いて、従来の形態素解析の
具体的な手順を説明する。

まず、「組み合わせは正しい」という文が入力されたも
のとする。

形態素解析部３２は１日本語辞書３１を検索して入力文
を形態素に分解する。すなわち、「組み合わせは正しい
」という入力文を「組み合わせ」。

「は」、「正し」および「い」という′形態素に分解す
る。各形態素には日本語辞書３１に登録されている各種
の属性を持たせる。この例の場合。

「組み合わせ」には意味属性および文法属性を持たせ、
「は」には文法属性を持たせ、「正し」にしＪ意味属性
および文法属性を持たせ、「い」には文法属性を持たせ
る。

形態素解析部３２での解析結果は、構文解析。

意味解析などに利用される。

〔発明が解決しようとする課題〕

従来のように同一単語に異表記がある場合９日本語辞書
に異表記を別々に見出し語として、それらに意味属性２
文法属性なとの属性情報を持たせると日本語辞書の容量
が増大すると共に日本語辞書データの保守が困難である
という問題が生じていた。

本発明は２日本語辞書の容量を圧縮すると共に日本語辞
書データの保守を容易にした１日本語文の形態素解析を
行うことのできる日本語文章処理方式を提供することを
目的としている。

〔課題を解決するための手段〕　　　−本発明は２異表
記を有する単語に対して異なる表記ごとに別々に属性情
報を持たせず、予め１つの代表表記を定めてその代表表
記のめに属性情報を設定し、他の表記には代表表記のみ
を設定した日本語辞書と２日本語辞書を検索して入力文
を形態素に分解する形態素解析部とをそなえ、形態素解
析部は、入力文を、異表記を有する単語のうち代表表記
以外の表記については１代表表記を対応づけて形態素に
分解する第１の形態素解析処理と。

第１の形態素解析処理の結果について２代表表記を対応
づけられた形態素に関しては１代表表記で日本語辞書を
再度検索し１代表表記に設定されている属性情報を代表
表記を対応づけられた形態素に代入する第２の形態素解
析処理とを行うように構成することにより２日本語辞書
の容量を圧縮すると共に日本語辞書データの保守を容易
にした。

日本語文の形態素解析を行うことのできる日本語文章処
理方式を提供するものである。

第１図は２本発明の原理説明図である。

第１図において、■は日本語辞書、２は形態素解析部で
ある。

日本語辞書１は、異表記を有する単語に対して各表記が
別々に属性情報を持たず、当該異表記が属する単語の、
予め定められた１つの代表表記のみが属性情報を持ち、
異表記は代表表記のみを持つように構成されている。

形態素解析部２は、入力文を２段階に分けて形態素に分
解する。

以下、第１図を用いて本発明の作用を詳細に説明する。

異表記を有する単語の例として、「組合せ」１組み合わ
せ」「＜メあわせ」を考える。そして。

代表表記を１組合せ」とする。そうすると１日本語辞書
１の中では、　　ｒｌＪ１合せ」だけが意味属性。

文法属性などの属性情報を持ち、１組み合わせ」および
「くみあわせ」は９代表表記である１組合せ」のみを持
つ。このことを第１回では、　　＆ＲＥＰ（組合せ）と
いう形で表現している。

次に９本発明による形態素解析の手順を具体例を用いて
詳細に説明する。

まず、「組み合わせは正しい」という文が入力されたも
のとする。

入力文は、形態素解析部２の第１の形態素解析処理にお
いて１日本語辞書１を検索して各形態素に分解される。

ずなわら、「組み合わせ」　「は」「正し」　「い」と
いうように分解される。この場合、「組み合わせ」は異
表記であるから９代表表記である「組合せ」を持つ。こ
のことを第１図では、＆ＲＥＰ　（組合せ）という形で
表現している。

その他の形態素は、それぞれ各種の属性を持つ。

すなわち、「は」は文法属性を持ち、「正し」は意味属
性および文法属性を持ち、「い」は文法属性を持つ。

第１の形態素解析処理における解析結果は、第２の形態
素解析処理へ送られる。

第２の形態素解析処理では、異表記の形態素が持つ代表
表記で日本語辞書１を再度検索して代表表記が持つ属性
情報を異表記の形態素に代入する。

すなわち、「組み合わせ」の代表表記である「組合せ」
で日本語辞書１を検索し、「組合せ」が持つ意味属性お
よび文法属性を「組み合わせ」に代入する。

第２の形態素解析処理の結果出力は、構文解析。

意味解析などに利用される。

〔実施例〕

第２図は１本発明の１実施例構成図である。

第２図において、２１は入出力装置、２２は入力ファイ
ル、２３は推敲制御部、２３ａば機能選択部、２３ｂは
推敲制御機能、２３ｃは修正制御機能、２４は推敲処理
部、２４ａは推敲エンジン。

２４ｂは形態素解析部、２４ｃは構文解析部、２４ｄは
推敲知識蓄積部、２５は日本語辞書、２６は日本語文法
辞書、２７は出力ファイル、２８は推敲結果処理部であ
る。

入出力装置２１は、推敲を行うべき日本語文章を入力し
、推敲結果を取り出す装置である。−括型装置や対話型
装置、あるいは、その双方から構成されてもよい。

入力ファイル２２には、推敲を行うべき日本語文章が格
納されている。

推敲制御部２３は推敲あるいは修正に関するコマンドの
解析と対応する処理部の制御を行い９機能選択部２３ａ
、推敲制御機能２３ｂおよび修正制御機能２３ｃを含む
。

機能選択部２３ａは、入出力装置２１からの指示に従っ
て、推敲か修正かという機能を選択する。

推敲制御機能２３ｂは、推敲制御コマンドに従って、推
敲処理部２４を起動する。

修正制御機能２３ｃば、修正制御コマンドに従って、推
敲結果処理部２８を起動する。

＋（Ｉ敲処理部２４は、推敲エンジン２４ａ、形態・素
解析部２４ｂ、構文解析部２４ｃおよび推敲知識蓄積部
２４ｄからなる。

推敲エンジン２４ａは、形態素解析部２４ｂおよび構文
解析部２４．　ｃを制御すると共に推敲知識蓄積部２４
ｄに蓄えられている推敲知識に基づいて、入力された日
本語文章の推敲を行う。

形態素解析部２４ｂは２日本語辞書２５を検索して、入
ノコ文を形態素に解析する。

構文解析部２４ｃは、形Ｂ素解析部２４ｂにおいて解析
された形態素によって得られた情報を基に７日本語文法
辞書２６を検索して入力文の構造を求める。

推敲知識蓄積部２４ｄは、入力文の推敲に必要な知識が
蓄積されている。

日本語辞書２５は、異表記を有する単語に対して、各表
記に別々に属性情報を設定せず、当該異表記が属する卑
語の代表表記のみに属性情報を設定し、異表記には代表
表記のみを設定するように構成されている。

日本語文法辞書２６には１日本語の文法、すなわち構文
上の規則が格納されている。

出力ファイル２７には、推敲処理部２４において推敲さ
れた入力文の推敲結果が出力される。

推敲結果処理部２８は、修正制御機能２３ｃからの指示
により、出力ファイル２７に格納されている推敲結果デ
ータを基にして入力文を修正し。

その結果を推敲制御部２３を通して、入出力装置２１へ
出力する。

以下１本実施例の動作を説明する。

対話型推敲の場合、入出力装置２１はキーボードおよび
デイスプレィからなり、推敲すべき日本語文はキーボー
ドから１文づつ入力し、推敲結果はデイスプレィ画面上
に表示される。また、−括推敲の場合には５人出力装置
２１はキーボードおよびプリンタからなり、推敲すべき
日本語文は文章として入力ファイル２２に格納しておき
、推敲結果はプリンタにより印刷される。

対話型推敲および一括推敲のいずれの場合でも。

推敲すべき文を入力した後、入出力装置２１から推敲制
御部２３の機能選択部２３ａに指示を与えて、まず、推
敲制御機能２３ｂを起動する。

推敲制御機能２３ｂは、推敲処理部２４の推敲エンジン
２４ａを起動すると共に入力文データを転送する。

推敲エンジン２４ａは、形態素解析部２４ｂを起動する
と共に入力文データを転送する。

形態素解析部２４ｂは、２段階に分けて形態素解析処理
を行う。

第１の形態素解析処理では２日本語辞書２５を検索して
入力文を各形態素に分解する。その結果。

分解された形態素が異表記である場合、その形態素は意
味属性２文法属性などの属性情報を持たず。

当該形態素が属する単語の代表表記のみを持つ。

また、解析された形態素が異表記を有さない場合および
解析された形態素が代表表記である場合には、当該形態
素は、意味属性２文法属性などの属性情報を持つ。

第２の形態素解析処理では２第１の形態素解析処理にお
いて形態素に分解された結果、異表記の形態素がある場
合、再度、当該形態素が属する単語の代表表記で日本語
辞書２５を検索し１代表表記が持っている意味属性１文
法属性などの属性情報を異表記の形態素に代入する。

形態素解析が終了すると、推敲エンジン２４ａは、構文
解析部２４ｃを起動する。

構文解析部２４Ｃは、形態素解析部２４ｂにより解析さ
れた形態素を基にして日本語文法辞書２６を検索するこ
とにより、入力文の構造を求める。

構文解析が終了すると、推敲エンジン２４ａは。

推敲知識蓄積部２４ｄに蓄えられている推敲知識に基づ
いて、入力文を推敲する。推敲した結果のデータは、出
力ファイル２７に出力される。また。

入出力装置２１へも出力される。

次いで、入出力装置２１から推敲制御部２３の機能選択
部２３ａを介して修正制御機能２３Ｃを起動する。

修正制御機能２３Ｃは、推敲結果処理部２８を起動させ
て、出力ファイル２７に格納されている推敲結果データ
を修正する。

＋ｔｈ敲結果処理部２８の処理結果は、推敲制御部２３
を通して入出力装置２１へ出力される。

〔発明の効果〕

本発明によれば、同一単語について代表表記のみが属性
情報を持ち、異表記は属性情報を持たずに３代表表記の
みを持つだけであるから２日本語辞書の容量を圧縮する
ことができる。

また、同−単語の異表記に対して同一の属性情報を別個
に与えなくて済むので１　日本語辞書データの保守が容
易になる。

【図面の簡単な説明】

第１図は本発明の原理説明図、第２図は本発明の１実施
例構成図、第３図は従来例を示す図である。 第１図において に日本語辞書 ２：形態素解析部

Claims (1)

1. 【特許請求の範囲】 異表記を有する単語に対して異なる表記ごとに別々に属
   性情報を持たせず、予め１つの代表表記を定めてその代
   表表記のみに属性情報を設定し、他の表記には代表表記
   のみを設定した日本語辞書（１）と、日本語辞書（１）
   を検索して入力文を形態素に分解する形態素解析部（２
   ）とをそなえ、形態素解析部（２）は、入力文を、異表
   記を有する単語のうち代表表記以外の表記については、
   代表表記を対応づけて形態素に分解する第１の形態素解
   析処理と、 第１の形態素解析処理の結果について、代表表記を対応
   づけられた形態素に関しては、代表表記で日本語辞書（
   １）を再度検索し、代表表記に設定されている属性情報
   を代表表記を対応づけられた形態素に代入する第２の形
   態素解析処理とを行うことを特徴とする日本語文章処理
   方式。