JP6835677B2 - データ処理方法、データ処理装置、及びデータ処理プログラム - Google Patents
データ処理方法、データ処理装置、及びデータ処理プログラム Download PDFInfo
- Publication number
- JP6835677B2 JP6835677B2 JP2017133182A JP2017133182A JP6835677B2 JP 6835677 B2 JP6835677 B2 JP 6835677B2 JP 2017133182 A JP2017133182 A JP 2017133182A JP 2017133182 A JP2017133182 A JP 2017133182A JP 6835677 B2 JP6835677 B2 JP 6835677B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- score
- data item
- time zone
- item
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
- G06F16/24578—Query processing with adaptation to user needs using ranking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/248—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2477—Temporal data queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/90335—Query processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9038—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/14—Fourier, Walsh or analogous domain transformations, e.g. Laplace, Hilbert, Karhunen-Loeve, transforms
- G06F17/141—Discrete Fourier transforms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/18—Complex mathematical operations for evaluating statistical data, e.g. average values, frequency distributions, probability functions, regression analysis
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Mathematical Physics (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Pure & Applied Mathematics (AREA)
- Mathematical Optimization (AREA)
- Mathematical Analysis (AREA)
- Computational Mathematics (AREA)
- Software Systems (AREA)
- Probability & Statistics with Applications (AREA)
- Algebra (AREA)
- Fuzzy Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Operations Research (AREA)
- Discrete Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本実施例では、設備センサと、IoTゲートウェイと、処理装置と、出力装置とを含む工場のIoT生産監視システムにおいて、処理装置が、前記IoTゲートウェイから取得した設備稼働データに対して、当該データが格納される設備稼働データ項目の型とその型の識別方法を示す重複性パターンを用いて、前記データのデータ項目の型を識別し、前記データ項目の型ごとに指定された演算を用いて、前記データ項目に格納された前記データに対して変換等の処理を行い、処理した前記データを格納する前記データ項目の型について新たなデータ項目を追加する。前記処理装置が、監視の開始時刻と終了時刻を含む表示時間帯情報を出力装置から取得し、前記追加されたデータ項目を含め、前記表示時間帯とそれ以外の時間帯におけるデータに対して、表示画面に表示する情報量を定量化したスコアをそれぞれ計算する。前記追加されたデータ項目と追加される前のデータ項目とに基づいて前記データ項目をグループ化し、グループ化されたグループに含まれるデータ項目の前記表示時間帯のスコアと前記それ以外の時間帯のスコアの差値に基づいて、前記グループの並び替えを行う。前記並び替えの上位グループに含まれるデータ項目を出力装置に提供することを特徴とする。
型識別情報は、型の識別子を示す型ID301と、型の呼び名を示す型名称302と、型に該当するかを識別する方法を示す識別方法303からなる。図3は、データの内容である文字列に対して、正規表現(Regular Expression)を用いて測定値と時刻の型に該当するかどうかを識別する方法の例を示す。その他、データの重複パターンやデータの内容の統計分散など予めに指定した関数の演算結果と閾値との関係、データ内容をパラメータとして外部のプログラムを動作させた結果、などの方法を使ってデータの型を判断することも可能である。
本実施例では、処理装置と、通信路と、出力装置と、生産記録装置とを含む製品不良要因分析システムにおいて、処理装置が、前記生産記録装置から取得した生産記録データに対して、当該データが格納される生産記録データ項目の型とその型の識別方法を示す重複性パターンを用いて、前記データのデータ項目の型を識別し、前記データ項目の型ごとに指定された演算を用いて、前記データ項目に格納された前記データに対して変換等の処理を行い、処理した前記データを格納する前記データ項目の型について新たなデータ項目を追加する。前記処理装置が、不良発生時刻情報を取得し、前記追加されたデータ項目を含め、前記発生時刻の前後の予めに決まった時間帯において、前記データ項目に格納されたデータの変化点を検知し、前記時間帯における変化点の数を用いて情報量を定量化したスコアを計算し、前記スコアに基づいて前記データ項目の並び替えをする。前記処理装置が、前記並び替えの上位にあるデータ項目を製品不良の主要因項目として、前記上位にあるデータ項目の前記変化点が発生する時間帯を不良の影響時間帯として、前記データ項目間のスコアの統計分布の分散を並び替えの有意度の指標として、前記スコアの時間帯差異をデータの有意度の指標として提供することを特徴とする。
102 通信路
103 出力装置
104 IoTゲートウェイ
105 設備センサ
1001 処理装置
1002 通信路
1003 出力装置
1004 生産記録装置
Claims (18)
- 複数のデータ項目を含む時系列のデータの処理方法であって、
前記データが格納されるデータ項目の型とその型の識別方法を示す重複性パターンを用いて、前記データ項目の型を識別する手順と、
前記データ項目の型ごとに指定された演算を用いて、前記データ項目に格納された前記データに対して処理を行い、処理した前記データを格納する前記データ項目の型について新たなデータ項目を追加する手順と、
前記追加されたデータ項目を含め、表示画面に表示する情報量を定量化したスコアを計算し、前記スコアに基づいて前記データ項目の並び替えをする手順と、
を有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
前記追加されたデータ項目を含め、前記データ項目に格納されたデータの統計分布を作成し、作成した前記統計分布の分散を前記スコアとして計算し、計算した前記スコアに基づいて前記データ項目の並び変えをする手順と、
前記追加されたデータ項目を含め、前記データ項目に格納されたデータにフーリエ変換を用いたスペクトル解析を行い、スペクトルが一定値以上の周波数範囲の広さを前記スコアとして計算し、計算した前記スコアに基づいて前記データ項目の並び変えをする手順と、
のいずれかを有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
監視の開始時刻と終了時刻を含む時間帯情報を取得し、前記追加されたデータ項目を含め、前記時間帯情報で示される時間帯と前記時間帯以外の時間帯における前記表示画面に表示する前記スコアをそれぞれ計算し、前記時間帯のスコアと前記時間帯以外の時間帯のスコアとの差値に基づいて前記データ項目の並び替えをする手順と、
を有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
時刻情報を取得し、前記追加されたデータ項目を含め、前記時刻の前後の予めに決まった時間帯において、前記データ項目に格納されたデータの変化点を検知し、前記時間帯における変化点の数を用いて前記スコアを計算し、前記スコアに基づいて前記データ項目の並び替えをする手順と、
を有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
前記追加されたデータ項目と追加される前のデータ項目とに基づいて前記データ項目をグループ化する手順と、
前記追加されたデータ項目と追加される前の前記データ項目とを含め、前記表示画面に表示する前記スコアを計算し、前記グループ化されたグループに含まれるデータ項目の前記スコアの最大値に基づいて、前記グループの並び替えをする手順と、
を有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
前記複数のデータ項目の前記スコアの統計分布の分散を計算し、並び替えの有意度の指標として提供する手順と、
を有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
前記複数のデータ項目の前記スコアの平均値と、開始時刻と終了時刻を含む時間帯情報を取得し、前記時間帯情報で示される時間帯の前記平均値と前記時間帯以外の時間帯の前記平均値との差異と、のいずれかを計算し、データの有意度の指標として提供する手順と、
を有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
前記スコアと、前記並び替えの結果の順位との少なくとも一つの指標に対して閾値を設定し、前記指標の値が閾値を下回った前記データ項目に対し、今後のデータ処理から除外する手順と、
を有することを特徴とするデータ処理方法。 - 請求項1に記載のデータ処理方法であって、
前記並び替えたデータ項目の出力において、データの使用者から、固定表示と、並び替えと、非表示との少なくとも一つの調整を受け付け、前記調整後の前記データ項目の係数として記憶する手順と、
前記表示画面に表示する情報量を定量化した前記スコアを計算し、前記スコアに調整後の前記係数を用いて補正し、前記補正したスコアに基づいて前記データ項目の並び替えをする手順と、
を有することを特徴とするデータ処理方法。 - 請求項9に記載のデータ処理方法であって、
前記新たなデータ項目に格納されたデータに対し、前記データの発生源と、前記新たなデータ項目の型と、前記データの統計分布と、前記データのスペクトル特徴との少なくとも一つの要素に用いて、前記新たなデータ項目と前記データ項目の関連性を計算し、前記関連性と前記データ項目の前記係数とを用いて、前記新たなデータ項目の初期係数を算出する手順と、
を有することを特徴とするデータ処理方法。 - 請求項9に記載のデータ処理方法であって、
新規の使用者に対して、すでに登録されている複数の前記使用者の前記係数に基づいて、初期係数を算出する手順と、
前記新規の使用者に対して、前記表示画面に表示する情報量を定量化したスコアを計算し、前記スコアに前記係数を用いて補正し、前記補正したスコアに基づいて前記データ項目の並び替えをする手順と、
を有することを特徴とするデータ処理方法。 - 複数のデータ項目を含む時系列のデータの処理装置であって、
前記データが格納されるデータ項目の型とその型の識別方法を示す重複性パターンを用いて、前記データ項目の型を識別し、
前記データ項目の型ごとに指定された演算を用いて、前記データ項目に格納された前記データに対して処理を行い、処理した前記データを格納する前記データ項目の型について新たなデータ項目を追加し、
前記追加されたデータ項目を含め、表示画面に表示する情報量を定量化したスコアを計算し、前記スコアに基づいて前記データ項目の並び替えをする、
ことを特徴とするデータ処理装置。 - 請求項12に記載のデータ処理装置であって、
前記追加されたデータ項目を含め、前記データ項目に格納されたデータの統計分布を作成し、作成した前記統計分布の分散を前記スコアとして計算し、計算した前記スコアに基づいて前記データ項目の並び変えをする処理と、
前記追加されたデータ項目を含め、前記データ項目に格納されたデータにフーリエ変換を用いたスペクトル解析を行い、スペクトルが一定値以上の周波数範囲の広さを前記スコアとして計算し、計算した前記スコアに基づいて前記データ項目の並び変えをする処理と、
のいずれかを行うことを特徴とするデータ処理装置。 - 請求項12に記載のデータ処理装置であって、
監視の開始時刻と終了時刻を含む時間帯情報を取得し、前記追加されたデータ項目を含め、前記時間帯情報で示される時間帯と前記時間帯以外の時間帯における前記表示画面に表示する前記スコアをそれぞれ計算し、前記時間帯のスコアと前記時間帯以外の時間帯のスコアとの差値に基づいて前記データ項目の並び替えをする、
ことを特徴とするデータ処理装置。 - 請求項12に記載のデータ処理装置であって、
時刻情報を取得し、前記追加されたデータ項目を含め、前記時刻の前後の予めに決まった時間帯において、前記データ項目に格納されたデータの変化点を検知し、前記時間帯における変化点の数を用いて前記スコアを計算し、前記スコアに基づいて前記データ項目の並び替えをする、
ことを特徴とするデータ処理装置。 - 請求項12に記載のデータ処理装置であって、
前記複数のデータ項目の前記スコアの統計分布の分散を計算し、並び替えの有意度の指標として提供する、
ことを特徴とするデータ処理装置。 - 請求項12に記載のデータ処理装置であって、
前記複数のデータ項目の前記スコアの平均値と、開始時刻と終了時刻を含む時間帯情報を取得し、前記時間帯情報で示される時間帯の前記平均値と前記時間帯以外の時間帯の前記平均値との差異と、のいずれかを計算し、データの有意度の指標として提供する、
ことを特徴とするデータ処理装置。 - コンピュータに、
複数のデータ項目を含む時系列のデータが格納されるデータ項目の型とその型の識別方法を示す重複性パターンを用いて、前記データ項目の型を識別する処理と、
前記データ項目の型ごとに指定された演算を用いて、前記データ項目に格納された前記データに対して処理を行い、処理した前記データを格納する前記データ項目の型について新たなデータ項目を追加する処理と、
前記追加されたデータ項目を含め、表示画面に表示する情報量を定量化したスコアを計算し、前記スコアに基づいて前記データ項目の並び替えをする処理と、
を実行させることを特徴とするデータ処理プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017133182A JP6835677B2 (ja) | 2017-07-07 | 2017-07-07 | データ処理方法、データ処理装置、及びデータ処理プログラム |
US15/922,456 US10691705B2 (en) | 2017-07-07 | 2018-03-15 | Data processing method, data processing device, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017133182A JP6835677B2 (ja) | 2017-07-07 | 2017-07-07 | データ処理方法、データ処理装置、及びデータ処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019016173A JP2019016173A (ja) | 2019-01-31 |
JP6835677B2 true JP6835677B2 (ja) | 2021-02-24 |
Family
ID=64903260
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017133182A Active JP6835677B2 (ja) | 2017-07-07 | 2017-07-07 | データ処理方法、データ処理装置、及びデータ処理プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10691705B2 (ja) |
JP (1) | JP6835677B2 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6596531B2 (ja) * | 2018-03-29 | 2019-10-23 | 株式会社大和総研 | データ表示システムおよびプログラム |
US10904113B2 (en) * | 2018-06-26 | 2021-01-26 | Microsoft Technology Licensing, Llc | Insight ranking based on detected time-series changes |
JP2021135766A (ja) * | 2020-02-27 | 2021-09-13 | 三菱電機株式会社 | IoTシステム向け時系列データ管理システム |
JP7457282B2 (ja) | 2020-02-28 | 2024-03-28 | 京セラドキュメントソリューションズ株式会社 | データ連携システムおよび構成変更システム |
JP7425300B2 (ja) * | 2020-03-09 | 2024-01-31 | 富士通株式会社 | 実行制御方法及び実行制御プログラム |
JP7411489B2 (ja) * | 2020-04-08 | 2024-01-11 | 株式会社日立製作所 | 生産知識管理システム、生産知識管理方法及び生産知識管理プログラム |
US11341152B2 (en) | 2020-09-14 | 2022-05-24 | Rovi Guides, Inc. | Systems and methods for automatically recommending content |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000293414A (ja) * | 1999-04-07 | 2000-10-20 | Hitachi Ltd | 異種データソース統合方法 |
JP2002230036A (ja) | 2001-02-01 | 2002-08-16 | Ricoh Co Ltd | データ一覧表示装置、データ一覧表示方法、プログラムおよび記録媒体 |
WO2008087948A1 (ja) * | 2007-01-15 | 2008-07-24 | Anritsu Corporation | ランダムエラー分布評価方法及びその評価装置 |
US20110119100A1 (en) * | 2009-10-20 | 2011-05-19 | Jan Matthias Ruhl | Method and System for Displaying Anomalies in Time Series Data |
US20110320715A1 (en) * | 2010-06-23 | 2011-12-29 | Microsoft Corporation | Identifying trending content items using content item histograms |
WO2012075167A2 (en) * | 2010-11-30 | 2012-06-07 | 121 View Usa | Systems and methods for gathering viewership statistics and providing viewer-driven mass media content |
JP6554306B2 (ja) * | 2015-04-03 | 2019-07-31 | エヌ・ティ・ティ・コミュニケーションズ株式会社 | 情報処理システム、情報処理方法、およびコンピュータプログラム |
US20180095937A1 (en) * | 2015-04-17 | 2018-04-05 | Hitachi, Ltd. | Automatic Data Processing System, Automatic Data Processing Method, and Automatic Data Analysis System |
-
2017
- 2017-07-07 JP JP2017133182A patent/JP6835677B2/ja active Active
-
2018
- 2018-03-15 US US15/922,456 patent/US10691705B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10691705B2 (en) | 2020-06-23 |
US20190012319A1 (en) | 2019-01-10 |
JP2019016173A (ja) | 2019-01-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6835677B2 (ja) | データ処理方法、データ処理装置、及びデータ処理プログラム | |
US8515569B2 (en) | Work support system, work support method, and storage medium | |
US20170132104A1 (en) | Event analysis device, event analysis system, event analysis method, and event analysis program | |
CN105868256A (zh) | 处理用户行为数据的方法和系统 | |
JP5588811B2 (ja) | データ分析支援システム及び方法 | |
Gitzel | Data Quality in Time Series Data: An Experience Report. | |
CN111695584A (zh) | 时序数据监视系统和时序数据监视方法 | |
JP2009251957A (ja) | 興味情報特定システム、興味情報特定方法、および興味情報特定用プログラム | |
JP2020144457A (ja) | データ選定システム、及びデータ選定方法 | |
JP2017097462A (ja) | 検索プログラム、検索装置および検索方法 | |
JP6616889B2 (ja) | ウインドウ評価方法および分析装置 | |
JP2018195099A (ja) | 性格分析装置、性格判定用モデル生成装置および性格分析用プログラム | |
JP5263635B2 (ja) | 検索式生成システム | |
JP2021140510A (ja) | 設計支援装置、設計支援方法、及びプログラム | |
JP2005148846A (ja) | コンテンツ分類システムおよび方法、コンピュータプログラムおよび記録媒体 | |
JP2004272492A (ja) | Webサイトの検索表示方法 | |
JP6766103B2 (ja) | 分析方法及び計算機 | |
JP6852002B2 (ja) | データ検索方法、データ検索装置及びプログラム | |
JP5746652B2 (ja) | プラントデータ再生装置およびプラントデータ再生方法 | |
US8224838B2 (en) | Database search method, program, and apparatus | |
JP7285798B2 (ja) | 性能分析装置、性能分析方法、及び性能分析プログラム | |
JP2020038473A (ja) | 分析装置および不良対策支援方法 | |
JP2006039810A (ja) | 分類支援装置 | |
JP2007072645A (ja) | 検索支援装置、検索支援方法、プログラム及びその記録媒体 | |
WO2023238358A1 (ja) | 表示制御装置、表示制御方法および表示制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200213 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6835677 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |