JP7256935B2 - 辞書作成装置及び辞書作成方法 - Google Patents

辞書作成装置及び辞書作成方法 Download PDF

Info

Publication number
JP7256935B2
JP7256935B2 JP2019159570A JP2019159570A JP7256935B2 JP 7256935 B2 JP7256935 B2 JP 7256935B2 JP 2019159570 A JP2019159570 A JP 2019159570A JP 2019159570 A JP2019159570 A JP 2019159570A JP 7256935 B2 JP7256935 B2 JP 7256935B2
Authority
JP
Japan
Prior art keywords
dictionary
character string
log
extracted
type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019159570A
Other languages
English (en)
Other versions
JP2021039488A (ja
Inventor
祐治 小島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2019159570A priority Critical patent/JP7256935B2/ja
Priority to US16/990,542 priority patent/US11144712B2/en
Publication of JP2021039488A publication Critical patent/JP2021039488A/ja
Application granted granted Critical
Publication of JP7256935B2 publication Critical patent/JP7256935B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/12Use of codes for handling textual entities
    • G06F40/151Transformation
    • G06F40/157Transformation using dictionaries or tables
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • G06F11/0787Storage of error reports, e.g. persistent data storage, storage using memory protection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/079Root cause analysis, i.e. error or fault diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/237Lexical tools
    • G06F40/242Dictionaries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Machine Translation (AREA)
  • Debugging And Monitoring (AREA)

Description

本発明は、辞書作成装置及び辞書作成方法に関する。
装置のサポート業務を行う場合に、装置を導入した顧客からの問い合わせに対して適切な回答を行うために、装置から出力されたログを解析する技術が知られている。近年、このような技術において、機械学習を利用することがある。機械学習においては、例えば、ログから特徴的なフレーズ(文字列)を抽出し、抽出結果から回答を推論する推論モデルを作成する。この特徴的なフレーズの一部は、辞書に登録されており、当該辞書が適切に作成されているか否かが、推論モデルの推論精度に大きく影響することが知られている。
特開2016-134124号公報 特開平11-154160号公報
辞書に登録するフレーズは、各装置のログを特徴づける重要なフレーズであり、予め担当者がピックアップしているが、装置ごとに異なるため、装置ごとに辞書に登録する内容をカスタマイズする必要がある。
したがって、新たにサポートする装置が追加された場合、当該装置の辞書を作成するのに多大な工数や時間を要するおそれがある。また、サポート業務をある程度行った後でなければ、辞書に登録すべきフレーズがわからない場合もある。
1つの側面では、本発明は、装置のログから抽出すべき文字列を登録する辞書を簡易に作成することが可能な辞書作成装置及び辞書作成方法を提供することを目的とする。
一つの態様では、辞書作成装置は、第1の装置のログから抽出する文字列を登録する第1の辞書から、一部に共通部分を有する複数の文字列を抽出して、抽出した前記複数の文字列の種類を特定する第1特定部と、前記第1の装置のログから前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定する第2特定部と、前記第2特定部が特定した文字列の種類に対して、前記第1特定部が特定した文字列の種類が限定的であるか判断する第1判断部と、前記第1判断部の判断の結果、限定的であった場合に、前記第1の装置とは異なる第2の装置のログから一部に前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定するとともに、特定した該文字列の種類と、前記第2特定部が特定した文字列の種類との一致度が所定以上かを判断する第2判断部と、前記一致度が所定以上の場合に、前記第1特定部が抽出した前記複数の文字列を、前記第2の装置のログから抽出する文字列を登録する第2の辞書に含める、辞書編集部と、を備えている。
装置のログから抽出すべき文字列を登録する辞書を簡易に作成することができる。
一実施形態に係る辞書作成装置の利用シーンを概略的に示す図である。 サポート業務支援装置によるログの解析方法の一例を示す図である。 辞書作成装置のハードウェア構成を示す図である。 辞書作成装置の機能ブロック図である。 辞書作成装置の処理の概要を示す図である。 辞書作成装置の全体処理を示すフローチャートである。 図6のステップS10の詳細処理を示すフローチャートである。 図6のステップS14の詳細処理を示すフローチャートである。 図9(a)は、既存装置の辞書の一例を示す図であり、図9(b)は、処理対象を示す図である。 図10(a)~図10(d)は、図6のステップS10の処理を説明するための図である。 図11(a)は、既存装置のログの一例を示す図であり、図11(b)は、既存装置のログから抽出されたフレーズを示す図である。 既存装置のログにおいて特定された可変部に対して、既存装置の辞書において特定された可変部が絞り込まれている状態を説明するための図である。 既存装置のログにおいて特定された可変部に対して、既存装置の辞書において特定された可変部が絞り込まれていない状態を説明するための図である。 図14(a)は、既存装置のログにおいて特定された可変部に対して、既存装置の辞書において特定された可変部が絞り込まれていない状態の別例を示す図であり、図14(b)は、絞り込まれている状態の別例を示す図である。 図15(a)~図15(d)は、一致度が閾値以上である場合の例を示す図である。 図16(a)、図16(b)は、一致度が閾値未満である場合の例を示す図であり、図16(c)は、選択された固定部に対応する可変部がワイルドカードである場合において新規装置の辞書に登録されるフレーズを示す図である。
以下、一実施形態に係る辞書作成装置について、図1~図16に基づいて詳細に説明する。
図1には、本実施形態の辞書作成装置10の利用シーンが概略的に示されている。図1に示すように、本実施形態においては、サポートセンターの担当者は、顧客に導入した装置(例えばネットワーク装置)に関する顧客からの問い合わせを受け付けると、適切な回答を行うためにサポート業務支援装置を利用する。このサポート業務支援装置に対して、辞書作成装置10は接続されている。
顧客は、ネットワーク装置に不具合等が発生した場合に、ネットワーク装置から出力されるログをサポートセンターに送信することにより、不具合に対する問い合わせを行う。サポートセンターの担当者は、受信したログをサポート業務支援装置に入力し、解析することで、得られた回答パターンを参考にして、顧客に対して回答を行う。ここで、辞書作成装置10は、ネットワーク装置から出力されるログを事前に取得し、サポート業務支援装置が解析に用いる辞書を作成し、提供する。
図2は、サポート業務支援装置によるログの解析方法の一例を示す図である。本実施形態では、サポート業務支援装置は、機械学習を利用してログを解析し、回答パターンを出力する。機械学習においては、前処理として、過去の問い合わせログから多数のフレーズ(文字列)を抽出し、各ログにおけるフレーズ(Word_1、Word_2、…Word_n)ごとのベクトル値を算出する。このベクトル値は、例えば、問い合せログに含まれる各フレーズの出現回数のカウント値などである。このとき、問い合わせログから抽出するフレーズは、各ネットワーク装置のログを特徴づける重要なフレーズであり、その一部の強制的に抽出するフレーズが辞書作成装置10により作成された辞書に格納されている。辞書に格納されているフレーズは、例えば、ある回答パターンに対応するログだけに含まれているフレーズなどである。そして、図2の表Aに示すように、各問い合わせログの各フレーズのベクトル値と、回答パターン(ラベル)の番号とを対応付け、これに基づいて、推論モデルを作成する。
一方、新規問い合わせログをサポートセンターの担当者が入力すると、過去の問い合わせログと同様に、前処理として、新規問い合わせログから多数のフレーズを抽出してベクトル値を算出し、算出したベクトル値を推論モデルに入力する。この結果、新規問い合わせログに対応する回答パターンの候補が確信度の値とともに出力される(図2の表B参照)。
サポートセンターの担当者は、表Bを参照することで、適切な回答パターンを選択し、顧客の問い合わせに対する回答を行うことができる。
ところで、推論モデルが作成されていない新たなネットワーク装置(新規装置)をサポート対象とする場合には、新規装置の辞書を新たに作成しなおす必要がある。この作業を担当者が行うこととすると、多大な工数と時間を要するおそれがある。そこで、本実施形態においては、辞書作成装置10は、既存装置(既にサポート対象となっている装置)のサポートに利用する辞書(第1の辞書)を用いて、新規装置のサポートに利用する辞書(第2の辞書)を作成する。
なお、新規装置の辞書を作成する場合の既存装置としては、新規装置と同一ベンダであるなど、新規装置と類似する装置を採用することができる。これにより、新規装置の辞書をより精度良く作成できる可能性がある。ただし、これに限らず、既存装置としては、新規装置に関係なく、種々の既存装置を採用してもよい。
以下、辞書作成装置10について、詳細に説明する。図3には、辞書作成装置10のハードウェア構成が示されている。辞書作成装置10は、CPU(Central Processing Unit)90、ROM(Read Only Memory)92、RAM(Random Access Memory)94、記憶部(ここではHDD(Hard Disk Drive))96、ネットワークインタフェース97、表示部93、入力部95、及び可搬型記憶媒体用ドライブ99等を備えている。これら辞書作成装置10の構成各部は、バス98に接続されている。辞書作成装置10では、ROM92あるいはHDD96に格納されているプログラム(辞書作成プログラムを含む)、或いは可搬型記憶媒体用ドライブ99が可搬型記憶媒体91から読み取ったプログラムをCPU90が実行することにより、図4に示す、各部の機能が実現される。なお、図4の各部の機能は、例えば、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路により実現されてもよい。
図4には、辞書作成装置10の機能ブロック図が示されている。辞書作成装置10においては、CPU90がプログラムを実行することにより、第1抽出部20、第2抽出部22、第1判断部としての絞り込み判断部24、第3抽出部26、一致度判定部28、辞書編集部としての登録フレーズ決定部30、としての機能が実現されている。以下、辞書作成装置10の処理の概要を示す図5を参照しつつ、辞書作成装置10の各部の機能について説明する。
第1抽出部20は、既存装置の辞書から、一部が共通するフレーズを抽出してグループ化し(図5のステップS100)、抽出したフレーズの共通部分(固定部と呼ぶ)と、共通しない部分(可変部と呼ぶ)とに分ける(ステップS110)。以下、この固定部と可変部に分ける処理を「整形」と呼ぶ。なお、図5では、固定部(HARDWARE FAULT)を有するフレーズのグループのみを図示しているが、第1抽出部20は、既存装置の辞書から、一部が共通するフレーズのグループを全て抽出して、整形する。
第2抽出部22は、第1抽出部20が抽出したフレーズの固定部を含むフレーズを既存装置のログから抽出してグループ化し、整形する(ステップS120)。なお、図5においては、固定部(HARDWARE FAULT)を有するフレーズのグループのみを図示している。
絞り込み判断部24は、第2抽出部22が抽出したある固定部(例えば「HARDWARE FAULT」)に対応する可変部の種類(バリエーション)を特定する。また、絞り込み判断部24は、第1抽出部20が抽出したある固定部(例えば「HARDWARE FAULT」)に対応する可変部の種類(バリエーション)を特定する。そして、それぞれの可変部の種類を参照して、既存装置の辞書において特定された可変部の種類が、既存装置のログにおいて特定された可変部の種類に対して絞り込まれた状態であるかを判断する(ステップS130)。すなわち、図5の例では、絞り込み判断部24は、符号F2で示す可変部が、符号F1で示す可変部の全てを含み、かつ、完全一致していない場合に、絞り込まれた状態であると判断する。ここで、既存装置の辞書においてフレーズが絞り込まれていることは、ログに存在するフレーズのうち、特徴的なフレーズのみが辞書に登録されている可能性が高いことを意味する。
第3抽出部26は、絞り込み判断部24により、絞り込まれた状態であると判断された場合に、新規装置のログから固定部(例えば、「HARDWARE FAULT」)を含むフレーズを既存装置のログから抽出して、整形する(ステップS140)。
一致度判定部28は、第2抽出部22が抽出したフレーズの可変部の種類(F2)と、第3抽出部26が抽出したフレーズの可変部の種類(F3)との一致度(一致割合)を判定する(ステップS150)。なお、一致度の詳細については、後述する。
登録フレーズ決定部30は、絞り込み判断部24の判断結果と、一致度判定部28の判定結果と、に基づいて、新規装置の辞書に登録するフレーズを決定する(ステップS160)。登録フレーズ決定部30の処理の詳細については後述する。
(辞書作成装置10の処理について)
以下、図6~図8のフローチャートに沿って、その他図面を適宜参照しつつ、辞書作成装置10の処理について詳細に説明する。図6は、辞書作成装置10の全体処理を示すフローチャートであり、図7は、図6のステップS10の詳細処理を示すフローチャートであり、図8は、図6のステップS14の詳細処理を示すフローチャートである。
図6の処理においては、まず、ステップS10において、第1抽出部20が、既存装置の辞書からフレーズを抽出し、整形する処理を実行する。このステップS10においては、具体的には、図7のフローチャートに沿った処理を実行する。
(ステップS10の詳細処理)
図7の処理では、まずステップS40において、第1抽出部20が、基点と比較対象を設定する。例えば、既存装置の辞書が図9(a)に示すような11個のフレーズを有していたとする。この場合、第1抽出部20は、図9(b)に示すように、既存装置の辞書全体を処理対象とし、最初のフレーズ(1番のフレーズ)を基点として設定し、残りの2番~11番のフレーズを比較対象として設定する。
次いで、ステップS42では、第1抽出部20が、基点のフレーズと各比較対象のフレーズを比較する。この場合、第1抽出部20は、単語単位で、基点のフレーズに含まれる単語と一致している単語と、一致していない単語を判別する。
そして、ステップS44では、第1抽出部20が、一致語の位置と不一致語の位置のパターンが同じ比較対象と、基点をグループ化する。例えば、図9(b)の例では、基点と比較対象1~6とが、一致語(HARDWARE FAULT)が1単語目と2単語目で、不一致語が3単語目であり、一致語及び不一致語の位置のパターンが同じである。したがって、第1抽出部20は、これらのフレーズを1つのグループとする。
次いで、ステップS46では、第1抽出部20が、グループに含まれる各フレーズの一致語(HARDWARE FAULT)を固定部、不一致語(HARDWARE FAULT以外)を可変部とすることで、フレーズを整形する。図10(a)には、基点と比較対象1~6とを整形した状態(抽出フレーズ(整形後))が示されている。
次いで、ステップS48では、第1抽出部20が、グループ化したものを処理対象から除外する。この場合、処理対象は、図9(a)の既存装置の辞書から図10(a)の抽出されたフレーズを除いた、図10(b)に示すものになる。
次いで、ステップS50では、第1抽出部20が、処理対象が残っているか否かを判断する。このステップS50の判断が肯定された場合には、ステップS40に戻る。その後、第1抽出部20は、図10(b)の処理対象に対して、基点と比較対象1、2、3を設定し(S40)、基点と比較対象1、2とをグループ化し(S44)、整形する(S46)。これにより、図10(c)に示すような抽出フレーズ(整形後)が得られることになる。
その後は、処理対象からグループ化されたフレーズが除外されるが、処理対象には、「Service Level * has occurred with core」が残っているため、ステップS50の判断が肯定され、ステップS40に戻る。その後、ステップS40~S50を更に実行することで、図10(d)に示すような抽出フレーズ(整形後)が得られる。なお、「Service Level * has occurred with core」には、ワイルドカード(任意の文字列)を示す「*」が含まれている。このような場合には、ワイルドカード(*)を不一致語(可変部)とし、それ以外を一致語(固定部)とする。その後、ステップS50の判断が否定されると、図6のステップS12に移行する。
図6に戻り、ステップS12に移行すると、絞り込み判断部24が、ステップS10で得られたグループ(抽出フレーズ(整形後))の中から固定部を1つ選択する。ここでは、絞り込み判断部24は、図10(a)、図10(c)、図10(d)の中から固定部「HARDWARE FAULT」を選択したものとする。
次いで、ステップS14では、絞り込み判断部24及び第2抽出部22が、選択された固定部に関し、絞り込み、未絞り込みを確認する処理を実行する。このステップS14では、具体的には、図8のフローチャートに沿った処理を実行する。
(ステップS14の詳細処理)
図8の処理では、まず、ステップS60において、選択された固定部に対応する可変部がワイルドカードであるか否かを判断する。このステップS60の判断が否定されると、ステップS61に移行する。
ステップS61に移行すると、絞り込み判断部24は、既存装置の辞書(図9(a))において、選択された固定部(HARDWARE FAULT)に対応する可変部の種類(バリエーション)を特定する。ここでは、絞り込み判断部24は、図10(a)に示されている7種類((I/OMod-EX)、(MDirAgnt 100)、…、(PRB))を特定する。なお、ここで特定される7種類は、既存装置の辞書から抽出されたフレーズ(図10(a))の種類数であるともいえる。
次いで、ステップS62では、第2抽出部22が、既存装置のログにおいて、選択された固定部(HARDWARE FAULT)に対応するフレーズを抽出する。また、絞り込み判断部24が、可変部の種類(バリエーション)を特定する。より具体的には、第2抽出部22は、図11(a)に示すような既存装置のログを準備する。なお、既存装置のログは、顧客から問い合わせがあった際に送付されたログである。そして、第2抽出部22は、既存装置のログから、選択された固定部(HARDWARE FAULT)を含むフレーズを抽出し、図11(b)に示すように、固定部と可変部に分ける(整形する)。図11(b)の例では、絞り込み判断部24は、可変部の種類として8種類((I/OMod-EX)、(MDirAgnt 100)、…、(PRB)、(YMZ))を特定する。なお、ここで特定された8種類は、既存装置のログから抽出されたフレーズ(図11(b))の種類数であるともいえる。
次いで、ステップS64では、絞り込み判断部24が、既存装置の辞書において特定された可変部の種類(図10(a))と、既存装置のログにおいて特定された可変部の種類(図11(b))と、を比較する。この比較においては、既存装置の辞書において特定された可変部の種類が、既存装置のログにおいて特定された可変部の種類に対して限定的であるかを確認する。ここで、限定的とは、既存装置の辞書において特定された可変部それぞれが、既存装置のログにおいて特定された可変部に含まれており、かつ、完全一致ではないことを意味する。
次いで、ステップS66では、絞り込み判断部24が、限定的か否かを判断する。図10(a)と図11(b)の例では、図12に示すように、既存装置の辞書において特定された可変部(8種類)に、既存装置のログにおいて特定された可変部(7種類)の全てと、それ以外の可変部も含まれているため、限定的であると判断される。この場合、図8のステップS66の判断は肯定され、ステップS68に移行する。
ステップS68に移行すると、絞り込み判断部24は、絞り込まれていると判断し、図8の全処理を終了し、図6のステップS16に移行する。
一方、ステップS66の判断が否定された場合には、ステップS70に移行する。例えば、図13の下段に示すように、既存装置のログにおいて特定された可変部が7種類であった場合に、図13の上段に示すように、既存装置の辞書において特定された可変部が7種類であり、完全一致していたとする。この場合には、限定的でないため、ステップS66の判断が否定され、ステップS70に移行し、絞り込み判断部24は、絞り込みされていないと判断する。その後は、図6のステップS16に移行する。
なお、例えば、図14(a)の左上図に示すように、固定部として「Service Level、has occurred with core」が選択され、既存装置の辞書から2種類のフレーズが抽出されたとする。また、既存装置のログから、選択された固定部「Service Level、has occurred with core」を含むフレーズとして、図14(a)の右下図に示す2種類のフレーズが抽出されたとする。このような場合には、図14(a)の左上図と右下図とにおいて、可変部の種類が完全一致しているため、既存装置の辞書は絞り込まれていないと判断される(S70)。一方、図14(b)の左上図に示すように、固定部として「Service Level、has occurred with core」が選択され、既存装置の辞書から1種類のフレーズが抽出されたとする。また、既存装置のログから、選択された固定部「Service Level、has occurred with core」を含むフレーズとして、図14(b)の右下図に示す2種類のフレーズが抽出されたとする。このような場合には、既存装置の辞書は、絞り込まれていると判断される(S68)。
ところで、図6のステップS12において、固定部として、図10(d)の固定部「Service Level、has occurred with core」が選択されたとする。この場合、可変部がワイルドカードであるので、図8の処理においては、ステップS60の判断が肯定され、ステップS61~S66の処理・判断を経ずに、ステップS70に移行する。ステップS70に移行すると、絞り込み判断部24は、既存装置の辞書は絞り込まれていないと判断する。
図6に戻り、ステップS16に移行すると、絞り込み判断部24は、絞り込まれているか否かを判断する。このステップS16の判断が肯定されると、ステップS18に移行する。
ステップS18に移行した場合、第3抽出部26は、選択された固定部(HARDWARE FAULT)に対応するフレーズを新規装置のログから抽出するとともに、固定部と可変部に分けて整形する。この場合、第3抽出部26は、新規装置のログにおいて「HARDWARE FAULT」を含むフレーズを検索する。例えば、新規装置のログから抽出されたフレーズが、図15(a)に示すようなフレーズであったとする。
次いで、ステップS20では、一致度判定部28が、新規装置のログから、選択された固定部を含むフレーズが抽出されたか否かを判断する。図15(a)のようにフレーズが1つでも抽出された場合には、ステップS20の判断が肯定され、ステップS22に移行する。
ステップS22に移行すると、一致度判定部28は、新規装置のログから抽出されたフレーズ(図15(a))と、既存装置のログから抽出されたフレーズ(図15(b)参照)と、の一致度を算出する。具体的には、一致度判定部28は、既存装置のログから抽出されたフレーズ(図15(b))と、新規装置のログから抽出されたフレーズ(図15(a))を用いて、図15(c)のような表を作成する。ここで、図15(c)の表には、図15(a)、図15(b)の全フレーズ(固定部と可変部)が列挙されており、それぞれのフレーズが既存装置のログや新規装置のログから抽出されたかが「有」/「無」にて示されている。一致度判定部28は、この図15(c)の表から、全フレーズにおける既存装置のログと新規装置のログの両方から抽出されたフレーズの割合を「一致度」として求める。図15(c)の例では、抽出された全フレーズ数に対する、既存装置のログの欄に「有」が格納され、新規装置のログの欄に「有」が格納されているフレーズ数の割合(一致数/全フレーズ数=6/9≒0.67)を求め、一致度とする。
次いで、ステップS24では、一致度判定部28が、一致度が閾値以上であるか否かを判断する。例えば、閾値が0.6であるとすると、図15(c)の例では、ステップS24の判断は肯定され、ステップS26に移行する。なお、ステップS24においては、既存装置における絞り込みが新規装置でも有効か否かを判断していると言える。
ステップS26に移行した場合、既存装置のログにおいて特定された可変部のバリエーションが新規装置のログにおいて特定された可変部のバリエーションとほぼ同じと見做せる。この場合、新規装置においても既存装置と同じ絞り込みルールを用いることが有効であると考えられる。したがって、ステップS26においては、登録フレーズ決定部30は、既存装置の辞書のうち選択されている固定部(HARDWARE FAULT)を有するフレーズを新規装置の辞書にそのまま流用して登録する(図15(d)参照)。その後は、ステップS32に移行する。
一方、図16(a)には、一致度が閾値未満になる例が示されている。図16(a)の例では、新規装置のログに含まれるフレーズの有無と、既存装置のログに含まれるフレーズの有無があまり一致していない。図16(a)において、図15(c)と同様に一致度を算出すると、一致度=4/11≒0.36となり、閾値=0.6未満となる。このような場合には、ステップS24の判断が否定され、ステップS30に移行する。ステップS30に移行した場合、既存装置のログにおいて特定された可変部のバリエーションが新規装置のログにおいて特定された可変部のバリエーションと大きく異なると見做せるので、既存装置と同じ絞り込みルールを用いることはできない。したがって、ステップS30においては、登録フレーズ決定部30は、図16(b)に示すように可変部をワイルドカード(*)指定(任意の文字列)にして新規装置の辞書に登録する。すなわち、固定部(HARDWARE FAULT)を有するフレーズの全てを抽出するという情報を新規装置の辞書に登録する。その後は、ステップS32に移行する。
ところで、ステップS16の判断が否定されたとき、すなわち、既存装置の辞書から抽出されたフレーズが、既存装置のログから抽出されたフレーズに対して絞り込まれていなかった場合にも、登録フレーズ決定部30は、ステップS30に移行する。この場合にも、登録フレーズ決定部30は、図16(b)に示すように可変部をワイルドカード指定にして新規装置の辞書に登録する。なお、ステップS16の判断が否定される場合には、図10(d)のような、既存装置の辞書から抽出されたフレーズの可変部がワイルドカードである場合も含まれる。この場合には、登録フレーズ決定部30は、ステップS30において、図16(c)に示すように、既存装置の辞書から抽出されたフレーズそのものを新規装置の辞書に登録する。
また、図6の処理においてステップS20の判断が否定された場合、すなわち、新規装置のログから、選択された固定部(HARDWARE FAULT)を含むフレーズが抽出されなかった場合には、登録フレーズ決定部30は、ステップS28に移行する。ステップS28に移行した場合、登録フレーズ決定部30は、選択された固定部(HARDWARE FAULT)を有するフレーズを新規装置の辞書には登録しないこととする。その後は、ステップS32に移行する。
ステップS32に移行すると、絞り込み判断部24は、全ての固定部を選択したか否かを判断する。このステップS32の判断が否定された場合には、ステップS12に戻り、ステップS32の判断が肯定されるまで、上述したステップS12~S32の処理が繰り返し実行されることになる。そして、ステップS32の判断が肯定されると、図6の全処理が終了する。
これまでの説明からわかるように、本実施形態では、第1抽出部20と絞り込み判断部24とにより、既存装置の辞書からフレーズを抽出して、抽出したフレーズの種類(可変部の種類)を特定する第1特定部としての機能が実現されている。また、第2抽出部22と絞り込み判断部24とにより、既存装置のログからフレーズを抽出し、抽出したフレーズの種類(可変部の種類)を特定する第2特定部としての機能が実現されている。更に、第3抽出部26と一致度判定部28とにより、新規装置のログからフレーズを抽出して、抽出したフレーズの種類(可変部の種類)を特定するとともに、特定した種類と、既存装置のログから抽出されたフレーズの種類(可変部の種類)との一致度が所定以上かを判断する第2判断部としての機能が実現されている。
以上、詳細に説明したように、本実施形態によると、第1抽出部20は、既存装置のログから抽出するフレーズを登録する辞書(既存装置の辞書)から、一部が共通する複数のフレーズを抽出し(S10)、絞り込み判断部24は、共通する部分(固定部)以外の可変部の種類を特定する(S61)。また、第2抽出部22は、既存装置のログから固定部を含むフレーズを抽出し、絞り込み判断部24は、抽出したフレーズに含まれる可変部の種類を特定する(S62)。また、絞り込み判断部24は、既存装置のログから特定された可変部の種類に対して、既存装置の辞書から特定された可変部の種類が限定的であるかを判断する(S66~S70、S16)。この判断の結果、限定的であった場合(S16:肯定)には、第3抽出部26が、新規装置のログから固定部を含むフレーズを抽出する(S18)。また、一致度判定部28が、新規装置のログから抽出したフレーズに含まれる可変部の種類と、既存装置のログから特定された可変部の種類との一致度が閾値以上かを判断する(S24)。そして、登録フレーズ決定部30は、閾値以上の場合(S24:肯定)に、既存装置の辞書から抽出した複数のフレーズをそのまま新規装置の辞書に登録する(S26)。これにより、本実施形態では、既存装置の辞書に特徴的なフレーズが絞り込んで登録されており、かつ、新規装置のログにおいても特徴的なフレーズの絞り込みが有効であるときに、既存装置の辞書の特徴的なフレーズを新規装置の辞書に自動的に登録することができる。したがって、作業工数をかけることなく、新規装置の辞書に適切なフレーズを登録することが可能である。
また、本実施形態では、新規装置が既存装置の系列の装置である場合以外にも、新規装置の構成物(ラインカード、インタフェースカード、チップ、部品)が既存装置と共通又は類似する場合等において、作業工数をかけずに新規装置の辞書を自動的に作成することができる。
ここで、新規装置の辞書を作成する際に、既存装置の辞書を全て流用することも考えられる。しかしながら、この場合には、一致度が閾値未満の場合(図16(a)の場合)にも、絞り込まれたフレーズしか新規装置の辞書に登録されないことになる。したがって、適切なフレーズを用いた機械学習が行われなくなるため、回答パターンの推論精度が低下するおそれがある。これに対し、本実施形態では、一致度が閾値以上でない場合に、固定部を含む全てのフレーズ(可変部がワイルドカード指定のフレーズ)を新規装置の辞書に登録するようにしている。これにより、新規装置のログから適切なフレーズ(既存装置のログには無いが、新規装置のログにある特徴的なフレーズ)が抽出されることになる。したがって、既存装置の辞書をそのまま新規装置の辞書に登録する場合よりも、回答パターンの推論精度を向上することができる。
一方、一致率が低い場合には、選択されている固定部を含むフレーズを新規装置の辞書へ登録しないという方法も考えられる。しかしながら、選択されている固定部を含むフレーズが新規装置のログに含まれている以上、少なくとも選択されている固定部に関しては新規装置のログを特徴づける重要なフレーズである可能性が高い。したがって、本実施形態では、このようなフレーズをワイルドカード指定で新規装置の辞書に登録して、強制的に抽出するようにしている。このようにすることで、新規装置のサポート開始時点での推論精度を高くすることができる。
また、本実施形態では、絞り込み判断部24は、既存装置のログにおいて特定された可変部の種類の中に、既存装置の辞書において特定された可変部の種類の全てが含まれており、かつ、完全一致していない場合に、限定的であると判断する(S14、図8)。これにより、既存装置の辞書に特徴的なフレーズが登録されているか否かを適切に判断することができる。
また、本実施形態では、絞り込み判断部24の判断の結果、限定的でなかった場合(S16:否定)、登録フレーズ決定部30は、選択された固定部を含む全てのフレーズ(可変部がワイルドカード指定されたフレーズ)を新規装置の辞書に登録する(S30)。これにより、新規装置のログからの特徴的なフレーズの抽出漏れを抑制することができる。
また、本実施形態では、新規装置のログから選択された固定部を含むフレーズを抽出できなかった場合(S20:否定)に、登録フレーズ決定部30は、選択された固定部を含むフレーズを新規装置の辞書に登録しないこととしている(S28)。これにより、新規装置のログから回答パターンを得る際に不要である可能性の高いフレーズを新規装置の辞書に登録しないようにすることができる。
また、本実施形態では、登録フレーズ決定部30は、既存装置の辞書にワイルドカード指定を含むフレーズが登録されている場合に、当該フレーズを新規装置の辞書に含める(S60:肯定、S70、S16:否定、S30)。これにより、新規装置のログからの特徴的なフレーズの抽出漏れを抑制することができる。
また、本実施形態では、フレーズのうち、固定部を除く可変部の種類を特定して、絞り込まれているか否かの判断や一致度の算出を行う。したがって、フレーズ全体を用いて、絞り込まれているか否かの判断や一致度の算出を行う場合と比べて、処理量を低減することができる。
なお、上記実施形態では、辞書やログから抽出したフレーズを固定部と可変部に分けて整形し、可変部の種類を用いて、絞り込まれているか否かの判断や一致度の算出を行う場合について説明したが、これに限られるものではない。すなわち、辞書やログから抽出したフレーズそのものの種類を用いて、絞り込まれているか否かの判断や一致度の算出を行うこととしてもよい。
なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記憶媒体(ただし、搬送波は除く)に記録しておくことができる。
プログラムを流通させる場合には、例えば、そのプログラムが記録されたDVD(Digital Versatile Disc)、CD-ROM(Compact Disc Read Only Memory)などの可搬型記憶媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。
プログラムを実行するコンピュータは、例えば、可搬型記憶媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記憶媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。
上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。
なお、以上の実施形態の説明に関して、更に以下の付記を開示する。
(付記1) 第1の装置のログから抽出する文字列を登録する第1の辞書から、一部に共通部分を有する複数の文字列を抽出して、抽出した前記複数の文字列の種類を特定する第1特定部と、
前記第1の装置のログから前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定する第2特定部と、
前記第2特定部が特定した文字列の種類に対して、前記第1特定部が特定した文字列の種類が限定的であるか判断する第1判断部と、
前記第1判断部の判断の結果、限定的であった場合に、前記第1の装置とは異なる第2の装置のログから一部に前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定するとともに、特定した該文字列の種類と、前記第2特定部が特定した文字列の種類との一致度が所定以上かを判断する第2判断部と、
前記一致度が所定以上の場合に、前記第1特定部が抽出した前記複数の文字列を、前記第2の装置のログから抽出する文字列を登録する第2の辞書に含める、辞書編集部と、
を備える辞書作成装置。
(付記2) 前記第1判断部は、前記第2特定部が特定した文字列の種類の中に、前記第1特定部が特定した文字列の種類の全てが含まれ、かつ、前記第2特定部が特定した文字列の種類と前記第1特定部が特定した文字列の種類とが完全一致していない場合に、限定的であると判断する、ことを特徴とする付記1に記載の辞書作成装置。
(付記3) 前記辞書編集部は、前記第1判断部の判断の結果、限定的でなかった場合、前記共通部分を有する全ての文字列を前記第2の装置のログから抽出するための情報を、前記第2の辞書に含めることを特徴とする付記1又は2に記載の辞書作成装置。
(付記4) 前記辞書編集部は、前記一致度が所定以上でない場合に、前記共通部分を含む全ての文字列を前記第2の装置のログから抽出するための情報を、前記第2の辞書に含めることを特徴とする付記1~3のいずれかに記載の辞書作成装置。
(付記5) 前記辞書編集部は、前記第2判断部が前記第2の装置のログから前記共通部分を含む文字列を抽出できなかった場合に、前記共通部分を含む文字列を前記第2の辞書に含めないことを特徴とする付記1~4のいずれかに記載の辞書作成装置。
(付記6) 前記辞書編集部は、前記第1の辞書に任意文字が指定された箇所を含む文字列が登録されている場合に、該文字列を前記第2の辞書に含める、ことを特徴とする付記1~5のいずれかに記載の辞書作成装置。
(付記7) 前記文字列の種類を特定する処理は、前記文字列のうち共通部分以外の部分の種類を特定する処理である、ことを特徴とする付記1~6のいずれかに記載の辞書作成装置。
(付記8) 第1の装置のログから抽出する文字列を登録する第1の辞書から、一部に共通部分を有する複数の文字列を抽出して、抽出した前記複数の文字列の種類を特定し、
前記第1の装置のログから前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定し、
前記第1の装置のログから特定した文字列の種類に対して、前記第1の辞書から特定した文字列の種類が限定的であるか判断し、
前記判断の結果、限定的であった場合に、前記第1の装置とは異なる第2の装置のログから一部に前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定するとともに、特定した該文字列の種類と、前記第1の装置のログから特定した文字列の種類との一致度が所定以上かを判断し、
前記一致度が所定以上の場合に、前記第1の辞書から抽出した前記複数の文字列を、前記第2の装置のログから抽出する文字列を登録する第2の辞書に含める、
処理をコンピュータが実行することを特徴する辞書作成方法。
(付記9) 前記限定的であるか判断する処理では、前記第1の装置のログから特定した文字列の種類の中に、前記第1の装置の辞書から特定した文字列の種類の全てが含まれ、かつ、前記第1の装置のログから特定した文字列の種類と前記第1の装置の辞書から特定した文字列の種類とが完全一致していない場合に、限定的であると判断する、ことを特徴とする付記8に記載の辞書作成方法。
(付記10) 前記限定的であるか判断する処理の結果、限定的でなかった場合、前記共通部分を有する全ての文字列を前記第2の装置のログから抽出するための情報を、前記第2の辞書に含めることを特徴とする付記8又は9に記載の辞書作成方法。
(付記11) 前記一致度が所定以上でない場合に、前記共通部分を含む全ての文字列を前記第2の装置のログから抽出するための情報を、前記第2の辞書に含めることを特徴とする付記8~10のいずれかに記載の辞書作成方法。
(付記12) 前記第2の装置のログから前記共通部分を含む文字列を抽出できなかった場合に、前記共通部分を含む文字列を前記第2の辞書に含めないことを特徴とする付記8~11のいずれかに記載の辞書作成方法。
(付記13) 前記第1の辞書に任意文字が指定された箇所を含む文字列が登録されている場合に、該文字列を前記第2の辞書に含める、ことを特徴とする付記8~12のいずれかに記載の辞書作成方法。
(付記14) 前記文字列の種類を特定する処理は、前記文字列のうち共通部分以外の部分の種類を特定する処理である、ことを特徴とする付記8~13のいずれかに記載の辞書作成方法。
10 辞書作成装置
20 第1抽出部(第1特定部の一部)
22 第2抽出部(第2特定部の一部)
24 絞り込み判断部(第1特定部の一部、第2特定部の一部、第1判断部)
26 第3抽出部(第2判断部の一部)
28 一致度判定部(第2判断部の一部)
30 登録フレーズ決定部(辞書編集部)

Claims (8)

  1. 第1の装置のログから抽出する文字列を登録する第1の辞書から、一部に共通部分を有する複数の文字列を抽出して、抽出した前記複数の文字列の種類を特定する第1特定部と、
    前記第1の装置のログから前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定する第2特定部と、
    前記第2特定部が特定した文字列の種類に対して、前記第1特定部が特定した文字列の種類が限定的であるか判断する第1判断部と、
    前記第1判断部の判断の結果、限定的であった場合に、前記第1の装置とは異なる第2の装置のログから一部に前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定するとともに、特定した該文字列の種類と、前記第2特定部が特定した文字列の種類との一致度が所定以上かを判断する第2判断部と、
    前記一致度が所定以上の場合に、前記第1特定部が抽出した前記複数の文字列を、前記第2の装置のログから抽出する文字列を登録する第2の辞書に含める、辞書編集部と、
    を備える辞書作成装置。
  2. 前記第1判断部は、前記第2特定部が特定した文字列の種類の中に、前記第1特定部が特定した文字列の種類の全てが含まれ、かつ、前記第2特定部が特定した文字列の種類と前記第1特定部が特定した文字列の種類とが完全一致していない場合に、限定的であると判断する、ことを特徴とする請求項1に記載の辞書作成装置。
  3. 前記辞書編集部は、前記第1判断部の判断の結果、限定的でなかった場合、前記共通部分を有する全ての文字列を前記第2の装置のログから抽出するための情報を、前記第2の辞書に含めることを特徴とする請求項1又は2に記載の辞書作成装置。
  4. 前記辞書編集部は、前記一致度が所定以上でない場合に、前記共通部分を含む全ての文字列を前記第2の装置のログから抽出するための情報を、前記第2の辞書に含めることを特徴とする請求項1~3のいずれか一項に記載の辞書作成装置。
  5. 前記辞書編集部は、前記第2判断部が前記第2の装置のログから前記共通部分を含む文字列を抽出できなかった場合に、前記共通部分を含む文字列を前記第2の辞書に含めないことを特徴とする請求項1~4のいずれか一項に記載の辞書作成装置。
  6. 前記辞書編集部は、前記第1の辞書に任意文字が指定された箇所を含む文字列が登録されている場合に、該文字列を前記第2の辞書に含める、ことを特徴とする請求項1~5のいずれか一項に記載の辞書作成装置。
  7. 前記文字列の種類を特定する処理は、前記文字列のうち共通部分以外の部分の種類を特定する処理である、ことを特徴とする請求項1~6のいずれか一項に記載の辞書作成装置。
  8. 第1の装置のログから抽出する文字列を登録する第1の辞書から、一部に共通部分を有する複数の文字列を抽出して、抽出した前記複数の文字列の種類を特定し、
    前記第1の装置のログから前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定し、
    前記第1の装置のログから特定した文字列の種類に対して、前記第1の辞書から特定した文字列の種類が限定的であるか判断し、
    前記判断の結果、限定的であった場合に、前記第1の装置とは異なる第2の装置のログから一部に前記共通部分を含む文字列を抽出し、抽出した文字列の種類を特定するとともに、特定した該文字列の種類と、前記第1の装置のログから特定した文字列の種類との一致度が所定以上かを判断し、
    前記一致度が所定以上の場合に、前記第1の辞書から抽出した前記複数の文字列を、前記第2の装置のログから抽出する文字列を登録する第2の辞書に含める、
    処理をコンピュータが実行することを特徴する辞書作成方法。
JP2019159570A 2019-09-02 2019-09-02 辞書作成装置及び辞書作成方法 Active JP7256935B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019159570A JP7256935B2 (ja) 2019-09-02 2019-09-02 辞書作成装置及び辞書作成方法
US16/990,542 US11144712B2 (en) 2019-09-02 2020-08-11 Dictionary creation apparatus, dictionary creation method, and non-transitory computer-readable storage medium for storing dictionary creation program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019159570A JP7256935B2 (ja) 2019-09-02 2019-09-02 辞書作成装置及び辞書作成方法

Publications (2)

Publication Number Publication Date
JP2021039488A JP2021039488A (ja) 2021-03-11
JP7256935B2 true JP7256935B2 (ja) 2023-04-13

Family

ID=74681651

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019159570A Active JP7256935B2 (ja) 2019-09-02 2019-09-02 辞書作成装置及び辞書作成方法

Country Status (2)

Country Link
US (1) US11144712B2 (ja)
JP (1) JP7256935B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7047661B2 (ja) * 2018-08-09 2022-04-05 日本電信電話株式会社 ログ情報収集装置およびログ情報収集方法
CN114328076B (zh) * 2021-09-18 2024-04-30 腾讯科技(深圳)有限公司 日志信息提取方法、装置、计算机设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110066908A1 (en) 2009-09-17 2011-03-17 Microsoft Corporation Similarity detection for error reports
JP2013008372A (ja) 2010-11-10 2013-01-10 Rakuten Inc 関連語登録装置、情報処理装置、関連語登録方法、関連語登録装置用プログラム、および、記録媒体
US20190034517A1 (en) 2016-01-30 2019-01-31 Entit Software Llc Log event cluster analytics management
JP2019053767A (ja) 2012-12-28 2019-04-04 株式会社ユニバーサルエンターテインメント 保守装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11154160A (ja) 1997-11-21 1999-06-08 Hitachi Ltd データ検索システム
JP2002259367A (ja) 2001-03-02 2002-09-13 Denso Corp 電子機器の情報登録方法及び電子機器並びにコンピュータプログラム
US7039833B2 (en) * 2002-10-21 2006-05-02 I2 Technologies Us, Inc. Stack trace generated code compared with database to find error resolution information
JP2005190232A (ja) 2003-12-26 2005-07-14 Seiko Epson Corp 質問回答装置の精度向上支援装置及び精度向上支援方法ならびにそのプログラム
US7594141B2 (en) * 2006-05-26 2009-09-22 International Business Machines Corporation Apparatus, system, and method for signaling logical errors in an EIS remote function call
US7877636B2 (en) * 2008-08-28 2011-01-25 Honeywell International Inc. System and method for detecting temporal relationships uniquely associated with an underlying root cause
KR20130029250A (ko) * 2011-09-14 2013-03-22 한국전자통신연구원 장애 발견 및 진단 요청 방법 및 장치
CN103793284B (zh) * 2012-10-29 2017-06-20 伊姆西公司 基于共同序列模式的、用于智能客户服务的分析系统和方法
JP6388212B2 (ja) 2015-01-22 2018-09-12 パナソニックIpマネジメント株式会社 タグ付与方法、タグ付与装置、プログラム及び質問回答検索方法
JP6753401B2 (ja) * 2015-07-24 2020-09-09 富士通株式会社 符号化プログラム、符号化装置、及び符号化方法
JP6868416B2 (ja) 2017-02-21 2021-05-12 株式会社野村総合研究所 障害対応支援システム
US20200372113A1 (en) * 2019-05-24 2020-11-26 Sap Se Log file meaning and syntax generation system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110066908A1 (en) 2009-09-17 2011-03-17 Microsoft Corporation Similarity detection for error reports
JP2013008372A (ja) 2010-11-10 2013-01-10 Rakuten Inc 関連語登録装置、情報処理装置、関連語登録方法、関連語登録装置用プログラム、および、記録媒体
JP2019053767A (ja) 2012-12-28 2019-04-04 株式会社ユニバーサルエンターテインメント 保守装置
US20190034517A1 (en) 2016-01-30 2019-01-31 Entit Software Llc Log event cluster analytics management

Also Published As

Publication number Publication date
JP2021039488A (ja) 2021-03-11
US11144712B2 (en) 2021-10-12
US20210064814A1 (en) 2021-03-04

Similar Documents

Publication Publication Date Title
US8176050B2 (en) Method and apparatus of supporting creation of classification rules
WO2018157805A1 (zh) 一种自动问答处理方法及自动问答系统
CN107346433B (zh) 一种文本数据分类方法及服务器
JP5245255B2 (ja) 固有表現抽出プログラム、固有表現抽出方法および固有表現抽出装置
JP6912488B2 (ja) 文字列距離計算方法及び装置
JP7256935B2 (ja) 辞書作成装置及び辞書作成方法
CN110134777B (zh) 问题去重方法、装置、电子设备和计算机可读存储介质
JP7024515B2 (ja) 学習プログラム、学習方法および学習装置
CN110659175A (zh) 日志的主干提取方法、分类方法、设备及存储介质
CN109791570B (zh) 高效且精确的命名实体识别方法和装置
US20030158725A1 (en) Method and apparatus for identifying words with common stems
US20120197889A1 (en) Information matching apparatus, information matching method, and computer readable storage medium having stored information matching program
JP6780244B2 (ja) 判定方法、判定プログラムおよび判定装置
WO2007132564A1 (ja) データ処理装置及び方法
KR20200080401A (ko) 데이터 분류 규칙 추정 방법, 이를 수행하기 위한 장치 및 기록매체
JP2002297660A (ja) 文字列類似度算出方法、装置、プログラム及び記録媒体
US20180011919A1 (en) Systems and method for clustering electronic documents
JP2008282111A (ja) 類似文書検索方法、プログラムおよび装置
JPWO2019171537A1 (ja) 意味推定システム、方法およびプログラム
CN114816518A (zh) 基于simhash的源代码中开源成分筛选识别方法及系统
CN112559474A (zh) 日志处理方法和装置
KR101697992B1 (ko) 다중 개발자 네트워크 기반의 버그 정정 개발자 추천 시스템 및 방법
JP2014235584A (ja) 文書分析システム、文書分析方法およびプログラム
JPWO2019171538A1 (ja) 意味推定システム、方法およびプログラム
CN107203512A (zh) 用于从用户的自然语言输入中提取关键元素的方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220517

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230222

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230228

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230313

R150 Certificate of patent or registration of utility model

Ref document number: 7256935

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150