JP6144427B2 - データ分析システムおよびデータ分析方法並びにデータ分析プログラム - Google Patents
データ分析システムおよびデータ分析方法並びにデータ分析プログラム Download PDFInfo
- Publication number
- JP6144427B2 JP6144427B2 JP2016535187A JP2016535187A JP6144427B2 JP 6144427 B2 JP6144427 B2 JP 6144427B2 JP 2016535187 A JP2016535187 A JP 2016535187A JP 2016535187 A JP2016535187 A JP 2016535187A JP 6144427 B2 JP6144427 B2 JP 6144427B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- unknown
- partial
- relationship
- evaluation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007405 data analysis Methods 0.000 title claims description 139
- 238000000034 method Methods 0.000 title claims description 38
- 238000011156 evaluation Methods 0.000 claims description 98
- 238000012549 training Methods 0.000 claims description 67
- 238000003860 storage Methods 0.000 description 31
- 238000011157 data evaluation Methods 0.000 description 29
- 238000004458 analytical method Methods 0.000 description 24
- 238000005516 engineering process Methods 0.000 description 20
- 230000008569 process Effects 0.000 description 17
- 239000000463 material Substances 0.000 description 16
- 239000013598 vector Substances 0.000 description 16
- 230000010354 integration Effects 0.000 description 15
- 230000006399 behavior Effects 0.000 description 11
- 238000013500 data storage Methods 0.000 description 11
- 238000011835 investigation Methods 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 10
- 239000000284 extract Substances 0.000 description 9
- 230000009471 action Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000008520 organization Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012550 audit Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 230000000474 nursing effect Effects 0.000 description 3
- 238000012015 optical character recognition Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000002996 emotional effect Effects 0.000 description 2
- 238000013332 literature search Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000000877 morphologic effect Effects 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 208000024891 symptom Diseases 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/18—Legal services
- G06Q50/184—Intellectual property management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/35—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/93—Document management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/18—Legal services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/02—Knowledge representation; Symbolic representation
- G06N5/022—Knowledge engineering; Knowledge acquisition
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Human Resources & Organizations (AREA)
- Data Mining & Analysis (AREA)
- Technology Law (AREA)
- Economics (AREA)
- Marketing (AREA)
- Entrepreneurship & Innovation (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Health & Medical Sciences (AREA)
- Operations Research (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は上述したそれぞれの実施の形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施の形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施の形態についても、本発明の技術的範囲に含まれる。さらに、各実施の形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成できる。
さらに、データ分析システム1は、知的財産評価システム、マーケティング支援システム、ドライビング支援システムなどにも適用することができる。
既述の実施形態によって、訓練データと当該訓練データを分類する分類情報との組み合わせを複数含むデータセットを、訓練データセットとして取得するデータ取得部と、訓練データに含まれるデータ要素と分類情報との関係性を評価する関係性評価部と、分析の対象とする複数の未知データそれぞれを、各未知データの一部を構成する部分未知データに分割する部分データ生成部と、関係性評価部の評価結果に基づいて、部分未知データそれぞれを評価するデータ評価部とを備えるデータ分析システムが提供される。
データ評価部は、部分未知データと分類情報との関係性の強さを示すスコアを算出することによって、当該部分未知データそれぞれを評価してもよい。データ評価部による評価結果を統合した統合指標を生成する評価統合部をさらに備えてもよい。データ評価部は、部分未知データに含まれるデータ要素と分類情報との関係性が強い場合は、弱い場合と比較して値が大きくなるように、当該部分未知データと分類情報との関係性の強さを示すスコアを算出し、評価統合部は、データ評価部が算出したスコアを、大きい順に所定数合算した統合スコアを、統合指標値として生成してもよい。未知データは、複数の項目を含む所定の書式にしたがって作成された文書データであり、部分データ生成部は、項目を単位として未知データを分割し、部分未知データを生成してもよい。
さらに、既述の実施形態によれば、訓練データと当該訓練データを分類する分類情報との組み合わせを複数含むデータセットを、訓練データセットとして取得するデータ取得ステップと、訓練データに含まれるデータ要素と分類情報との関係性を評価する関係性評価ステップと、分析の対象とする複数の未知データそれぞれを、各未知データの一部を構成する部分未知データに分割する部分データ生成ステップと、関係性評価ステップによる評価結果に基づいて、部分未知データそれぞれを評価するデータ評価ステップと、をプロセッサが実行するデータ分析方法が提供される。
Claims (6)
- データ分析用のプロセッサを備え、当該プロセッサが、データ分析プログラムを実行して、データを分析するデータ分析システムであって、
前記プロセッサは、
データに分類情報が組み合わされた訓練データを設定し、前記分類情報は、所定の事案と前記データとの関連性について入力されたものであり、
前記訓練データに含まれるデータ要素と前記分類情報との関係性を評価し、
データ分析の対象とする未知データを、夫々データ要素を有する、複数の部分に分割して、当該複数の部分の夫々を部分未知データとし、
前記関係性の評価結果に基づいて、前記複数の部分未知データを夫々評価し、
前記複数の部分未知データを評価した結果の大きい順から、所定数の部分未知データを選択し、当該選択された所定数の部分未知データを評価した結果を統合することによって、前記未知データの評価とする、
データ分析システム。 - 前記プロセッサは、
前記複数の部分未知データの夫々と前記分類情報との関係性の強さを示すスコアを算出することによって、前記複数の部分未知データの夫々を評価する
請求項1に記載のデータ分析システム。 - 前記未知データは、複数の項目を含む所定の書式にしたがって作成された文書データであり、
前記プロセッサは、前記項目を単位として前記文書データを分割して前記複数の部分未知データを生成する
請求項1又は2に記載のデータ分析システム。 - プロセッサが、データ分析プログラムを実行して、データを分類情報に基づいて分析するデータ分析方法であって、
前記プロセッサは、
データに分類情報が組み合わされた訓練データを設定ステップと、前記分類情報は、所定の事案と前記データとの関連性について入力されたものであり、
前記訓練データに含まれるデータ要素と前記分類情報との関係性を評価するステップと、
データ分析の対象とする未知データを、夫々データ要素を有する、複数の部分に分割し、当該複数の部分の夫々を部分未知データとするステップと、
前記関係性の評価結果に基づいて、前記複数の部分未知データを夫々評価するステップと、
前記複数の部分未知データを評価した結果の大きい順から、所定数の部分未知データを選択し、当該選択された所定数の部分未知データを評価した結果を統合することによって、前記未知データの評価とするステップと、
を実行するデータ分析方法。 - データを分類情報に基づいて分析するためのプログラムであって、
データに分類情報が組み合わされた訓練データを設定機能と、前記分類情報は、所定の事案と前記データとの関連性について入力されたものであり、
前記訓練データに含まれるデータ要素と前記分類情報との関係性を評価する機能と、
データ分析の対象とする未知データを、夫々データ要素を有する、複数の部分に分割し、当該複数の部分の夫々を部分未知データとする機能と、
前記関係性の評価結果に基づいて、前記複数の部分未知データを夫々評価する機能と、
前記複数の部分未知データを評価した結果の大きい順から、所定数の部分未知データを選択し、当該選択された所定数の部分未知データを評価した結果を統合することによって、前記未知データの評価とする機能と、
をコンピュータに実現させるためのプログラム。 - 請求項5記載のプログラムが格納された、コンピュータが読取可能な記録媒体。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2015/053430 WO2016125310A1 (ja) | 2015-02-06 | 2015-02-06 | データ分析システムおよびデータ分析方法並びにデータ分析プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016125310A1 JPWO2016125310A1 (ja) | 2017-04-27 |
JP6144427B2 true JP6144427B2 (ja) | 2017-06-07 |
Family
ID=56563673
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016535187A Active JP6144427B2 (ja) | 2015-02-06 | 2015-02-06 | データ分析システムおよびデータ分析方法並びにデータ分析プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20170358045A1 (ja) |
JP (1) | JP6144427B2 (ja) |
WO (1) | WO2016125310A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180189743A1 (en) * | 2017-01-04 | 2018-07-05 | International Business Machines Corporation | Intelligent scheduling management |
JP6707483B2 (ja) * | 2017-03-09 | 2020-06-10 | 株式会社東芝 | 情報処理装置、情報処理方法、および情報処理プログラム |
EP3660753A4 (en) * | 2017-07-25 | 2021-05-12 | The University Of Tokyo | LEARNING PROCEDURE, LEARNING PROGRAM, LEARNING DEVICE AND LEARNING SYSTEM |
CN108427725B (zh) * | 2018-02-11 | 2021-08-03 | 华为技术有限公司 | 数据处理方法、装置和系统 |
TWI674550B (zh) * | 2018-05-18 | 2019-10-11 | 大陸商北京牡丹電子集團有限責任公司 | 創新產品加值功能開發輔助性系統及其方法 |
EP3951620A4 (en) * | 2019-03-26 | 2022-04-13 | NEC Corporation | INFORMATION PROCESSING DEVICE, IMAGING DEVICE, INFORMATION PROCESSING METHOD AND STORAGE MEDIA |
JP7173315B2 (ja) * | 2019-05-21 | 2022-11-16 | 日本電信電話株式会社 | 分析装置、分析システム、分析方法及びプログラム |
JP6958954B1 (ja) * | 2020-06-16 | 2021-11-02 | 加藤 寛之 | 投資アドバイス提供方法及びシステム |
JP2022072383A (ja) * | 2020-10-29 | 2022-05-17 | 株式会社Ipsign | 侵害情報抽出システム、方法及びプログラム |
US11847169B2 (en) * | 2020-12-18 | 2023-12-19 | Shanghai Henghui Intellectual Property Service Co., Ltd. | Method for data processing and interactive information exchange with feature data extraction and bidirectional value evaluation for technology transfer and computer used therein |
JP7463996B2 (ja) * | 2021-03-26 | 2024-04-09 | 横河電機株式会社 | 装置、方法およびプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010118050A (ja) * | 2008-10-17 | 2010-05-27 | Toyohashi Univ Of Technology | 特許文献自動検索システムおよび特許文献自動検索方法 |
JP6053131B2 (ja) * | 2012-12-05 | 2016-12-27 | 株式会社アイ・アール・ディー | 情報処理装置、情報処理方法、およびプログラム |
JP6093200B2 (ja) * | 2013-02-05 | 2017-03-08 | 日本放送協会 | 情報検索装置及び情報検索プログラム |
US9471883B2 (en) * | 2013-05-09 | 2016-10-18 | Moodwire, Inc. | Hybrid human machine learning system and method |
-
2015
- 2015-02-06 JP JP2016535187A patent/JP6144427B2/ja active Active
- 2015-02-06 US US15/548,887 patent/US20170358045A1/en not_active Abandoned
- 2015-02-06 WO PCT/JP2015/053430 patent/WO2016125310A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2016125310A1 (ja) | 2016-08-11 |
US20170358045A1 (en) | 2017-12-14 |
JPWO2016125310A1 (ja) | 2017-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6144427B2 (ja) | データ分析システムおよびデータ分析方法並びにデータ分析プログラム | |
CN107851097B (zh) | 数据分析系统、数据分析方法、数据分析程序及存储介质 | |
Saumya et al. | Ranking online consumer reviews | |
Mostafa | Clustering halal food consumers: A Twitter sentiment analysis | |
Bucur | Using opinion mining techniques in tourism | |
Smeureanu et al. | Applying supervised opinion mining techniques on online user reviews | |
Haque et al. | Deep learning for suicide and depression identification with unsupervised label correction | |
KR20150142070A (ko) | 문서 분류 시스템, 문서 분류 방법 및 문서 분류 프로그램 | |
Chaparro et al. | Sentiment analysis of social network content to characterize the perception of security | |
Sano et al. | Proposing a visualized comparative review analysis model on tourism domain using Naïve Bayes classifier | |
JPWO2016189605A1 (ja) | データ分析に係るシステム、制御方法、制御プログラム、および、その記録媒体 | |
JP2017201543A (ja) | データ分析システム、データ分析方法、データ分析プログラム、および、記録媒体 | |
JPWO2016189606A1 (ja) | データ分析システム、制御方法、制御プログラム、および記録媒体 | |
Hiniduma et al. | Data Readiness for AI: A 360-Degree Survey | |
JP6026036B1 (ja) | データ分析システム、その制御方法、プログラム、及び、記録媒体 | |
JP2018067215A (ja) | データ分析システム、その制御方法、プログラム、及び、記録媒体 | |
Ahmad et al. | Harnessing Natural Language Processing for Mental Health Detection in Malay Text: A Review | |
Pustokhina et al. | Benchmarking Machine Learning for Sentimental Analysis of Climate Change Tweets in Social Internet of Things. | |
Velammal | Development of knowledge based sentiment analysis system using lexicon approach on twitter data | |
Wadhwani et al. | Analysis and implementation of sentiment analysis of user YouTube comments | |
Li | Examining the accuracy of sentiment analysis by brand monitoring companies | |
Shini et al. | Implicit aspect based sentiment analysis for restaurant review using LDA topic modeling and ensemble approach | |
Bhargavi et al. | Predicting the brand popularity from the brand metadata | |
Kumar et al. | Predicting Depression by Analysing User Tweets | |
Khan et al. | A Novel Approach to Analyze the Sentiment with Conjunctive Words |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161020 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170331 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170425 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170510 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6144427 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |