JP6538762B2 - 類似度計算装置及び類似度計算方法 - Google Patents
類似度計算装置及び類似度計算方法 Download PDFInfo
- Publication number
- JP6538762B2 JP6538762B2 JP2017125252A JP2017125252A JP6538762B2 JP 6538762 B2 JP6538762 B2 JP 6538762B2 JP 2017125252 A JP2017125252 A JP 2017125252A JP 2017125252 A JP2017125252 A JP 2017125252A JP 6538762 B2 JP6538762 B2 JP 6538762B2
- Authority
- JP
- Japan
- Prior art keywords
- attribute
- classification score
- inter
- similarity calculation
- cases
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000004364 calculation method Methods 0.000 title claims description 99
- 239000011159 matrix material Substances 0.000 claims description 69
- 238000011156 evaluation Methods 0.000 claims description 31
- 239000013598 vector Substances 0.000 claims description 24
- 230000007423 decrease Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 description 38
- 238000012545 processing Methods 0.000 description 23
- 230000000875 corresponding effect Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 9
- 238000003860 storage Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012804 iterative process Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Description
・Pt<P(i,j)の場合、正の数値を返す
・Pt>P(i,j)の場合、負の数値を返す
・Pt=P(i,j)、又は、欠損の場合、0を返す
すなわち、あるカテゴリjの正例の割合P(i,j)が全事例X中の正例の割合Ptより大きい場合には、「属性Yiがカテゴリjの値を持つ場合、正例である尤度(もっともらしさ)が高くなる」と解釈し、正の数値を返す。
log10P(i,j)−log10Pt・・・(式1)
ここでは、属性Yi、カテゴリjの正例の割合P(i,j)は、「2/7」であり、全事例X中の正例の割合Ptは、「4/10」であるため、あるカテゴリjの正例の割合P(i,j)が全事例X中の正例の割合Ptより小さくなる。そのため、分類器Zi(i=1)は負の数値を返す。なお、以下の説明では、分類器Ziが返す数値、すなわち、返値のことを「分類スコア」と呼ぶ。属性Yi、カテゴリjの正例の割合P(i,j)、及び、全事例X中の正例の割合Ptを(式1)に代入することで、分類スコアが「−0.146」となる。
事例間類似度算出部34は、ステップS27において、変数jを1インクリメントし、ステップS28において、変数jが総事例数Dより大きいか否かを判定する。ここでは、変数jが3、総事例数Dが10であるため、事例間類似度算出部34は、変数jが総事例数Dより大きくないと判定し、ステップS25に戻り、同様の処理を繰り返す。
属性間類似度算出部35は、ステップS47において、変数jを1インクリメントし、ステップS48において、変数jが総属性数Nより大きいか否かを判定する。ここでは、変数jが3、総属性数Nが3であるため、属性間類似度算出部35は、変数jが総属性数Nより大きくないと判定し、ステップS45に戻り、同様の処理を繰り返す。
Claims (8)
- 複数の事例と、前記複数の事例のそれぞれに対応付けられた複数の属性及び正例と負例とを含むクラスとの組から構成される入力データから、前記クラスに含まれる前記正例の割合と、所定の属性に含まれる所定のカテゴリデータの前記正例の割合とに基づいて、前記カテゴリデータから分類スコアを出力する分類器を前記属性毎に生成する分類器生成部と、
前記分類器によって前記入力データに基づいて前記分類スコアを出力し、分類スコア行列を生成する評価部と、
前記分類スコア行列から各事例に対応付けられた各属性の前記分類スコアに基づいて、事例間類似度を算出する事例間類似度算出部と
を有することを特徴とする類似度計算装置。 - 複数の事例と、前記複数の事例のそれぞれに対応付けられた複数の属性及び正例と負例とを含むクラスとの組から構成される入力データから、前記クラスに含まれる前記正例の割合と、所定の属性に含まれる所定のカテゴリデータの前記正例の割合とに基づいて、前記カテゴリデータから分類スコアを出力する分類器を前記属性毎に生成する分類器生成部と、
前記分類器によって前記入力データに基づいて前記分類スコアを出力し、分類スコア行列を生成する評価部と、
前記分類スコア行列から各属性に対応付けられた各事例の前記分類スコアに基づいて、属性間類似度を算出する属性間類似度算出部と
を有することを特徴とする類似度計算装置。 - 分類器生成部が生成する分類器は、前記クラスに含まれる前記正例の割合が、前記所定の属性に含まれる前記所定のカテゴリデータの前記正例の割合より小さい場合、正の数値を出力し、前記クラスに含まれる前記正例の割合が、前記所定の属性に含まれる前記所定のカテゴリデータの前記正例の割合より大きい場合、負の数値を出力し、前記クラスに含まれる前記正例の割合が、前記所定の属性に含まれる前記所定のカテゴリデータの前記正例の割合と等しい場合、0を出力することを特徴とする請求項1又は2に記載の類似度計算装置。
- 前記分類器生成部が生成する前記分類器は、以下の式を満たすことを特徴とする請求項3に記載の類似度計算装置。
log10P(i,j)−log10Pt
式中のPtは全事例中の正例の割合であり、P(i,j)は所定の属性iに含まれる所定のカテゴリデータjの正例の割合である。 - 前記事例間類似度算出部は、前記分類スコア行列から各事例に対応する行ベクトルを生成し、各事例に対応する行ベクトルの類似度が高い程、値が小さくなる距離を求めることで、前記事例間類似度を算出することを特徴とする請求項1に記載の類似度計算装置。
- 前記属性間類似度算出部は、前記分類スコア行列から各属性に対応する列ベクトルを生成し、各属性に対応する列ベクトルの類似度が高い程、値が小さくなる距離を求めることで、前記属性間類似度を算出する請求項2に記載の類似度計算装置。
- 複数の事例と、前記複数の事例のそれぞれに対応付けられた複数の属性及び正例と負例とを含むクラスとの組から構成される入力データから、前記クラスに含まれる前記正例の割合と、所定の属性に含まれる所定のカテゴリデータの前記正例の割合とに基づいて、前記カテゴリデータから分類スコアを出力する分類器を前記属性毎に生成するステップと、
前記分類器によって前記入力データに基づいて前記分類スコアを出力し、分類スコア行列を生成するステップと、
前記分類スコア行列から各事例に対応付けられた各属性の前記分類スコアに基づいて、事例間類似度を算出するステップと
を有することを特徴とする類似度計算方法。 - 複数の事例と、前記複数の事例のそれぞれに対応付けられた複数の属性及び正例と負例とを含むクラスとの組から構成される入力データから、前記クラスに含まれる前記正例の割合と、所定の属性に含まれる所定のカテゴリデータの前記正例の割合とに基づいて、前記カテゴリデータから分類スコアを出力する分類器を前記属性毎に生成するステップと、
前記分類器によって前記入力データに基づいて前記分類スコアを出力し、分類スコア行列を生成するステップと、
前記分類スコア行列から各属性に対応付けられた各事例の前記分類スコアに基づいて、属性間類似度を算出するステップと
を有することを特徴とする類似度計算方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017125252A JP6538762B2 (ja) | 2017-06-27 | 2017-06-27 | 類似度計算装置及び類似度計算方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017125252A JP6538762B2 (ja) | 2017-06-27 | 2017-06-27 | 類似度計算装置及び類似度計算方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019008640A JP2019008640A (ja) | 2019-01-17 |
JP6538762B2 true JP6538762B2 (ja) | 2019-07-03 |
Family
ID=65028931
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017125252A Expired - Fee Related JP6538762B2 (ja) | 2017-06-27 | 2017-06-27 | 類似度計算装置及び類似度計算方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6538762B2 (ja) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002149697A (ja) * | 2000-11-07 | 2002-05-24 | Mitsubishi Electric Corp | 類似事例検索装置 |
JP4919386B2 (ja) * | 2006-01-25 | 2012-04-18 | 独立行政法人情報通信研究機構 | 情報抽出・表示装置 |
US9015633B2 (en) * | 2007-10-22 | 2015-04-21 | Sony Corporation | Data management apparatus and method for organizing data elements into multiple categories for display |
JP2009104338A (ja) * | 2007-10-22 | 2009-05-14 | Sony Computer Entertainment Inc | データ管理装置及び方法 |
JP5391637B2 (ja) * | 2008-10-10 | 2014-01-15 | 日本電気株式会社 | データ類似度計算システム、データ類似度計算方法およびデータ類似度計算プログラム |
-
2017
- 2017-06-27 JP JP2017125252A patent/JP6538762B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2019008640A (ja) | 2019-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9002101B2 (en) | Recognition device, recognition method, and computer program product | |
JP6231944B2 (ja) | 学習モデル作成装置、判定システムおよび学習モデル作成方法 | |
US10678765B2 (en) | Similarity calculation system, method of calculating similarity, and program | |
JP6962532B1 (ja) | 事象予測装置および事象予測用プログラム | |
WO2014199920A1 (ja) | 予測関数作成装置、予測関数作成方法、及びコンピュータ読み取り可能な記録媒体 | |
JP6365032B2 (ja) | データ分類方法、データ分類プログラム、及び、データ分類装置 | |
JP5638503B2 (ja) | テキスト要約装置、方法及びプログラム | |
CN112651418B (zh) | 数据分类方法、分类器训练方法及系统 | |
US20190205361A1 (en) | Table-meaning estimating system, method, and program | |
WO2018088277A1 (ja) | 予測モデル生成システム、方法およびプログラム | |
JP6538762B2 (ja) | 類似度計算装置及び類似度計算方法 | |
JP5623369B2 (ja) | テキスト要約装置、方法及びプログラム | |
JP6648549B2 (ja) | 変異情報処理装置、方法及びプログラム | |
WO2021220775A1 (ja) | 材料の特性値を推定するシステム | |
WO2022013954A1 (ja) | 機械学習プログラム、機械学習方法および情報処理装置 | |
WO2022044115A1 (ja) | 情報処理装置、情報処理方法、および、プログラム | |
JP5815468B2 (ja) | スパム分類モデル生成装置及び方法及びプログラム | |
JP5824429B2 (ja) | スパムアカウントスコア算出装置、スパムアカウントスコア算出方法、及びプログラム | |
CN107622129B (zh) | 一种知识库的组织方法及装置、计算机存储介质 | |
KR20170085396A (ko) | 스캔도서 식별을 위한 특징벡터 클러스터링 및 데이터베이스 생성 방법 | |
JP6717067B2 (ja) | 対処履歴分析プログラム、方法、及び装置 | |
JP2016181040A (ja) | データ解析装置、方法、及びプログラム | |
JP7395396B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
WO2018088276A1 (ja) | 予測モデル生成システム、方法およびプログラム | |
JP7468681B2 (ja) | 学習方法、学習装置、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190116 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190226 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190410 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190507 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190606 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6538762 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |