JP7099487B2 - データ管理システム、データ管理方法、および、データ管理プログラム - Google Patents
データ管理システム、データ管理方法、および、データ管理プログラム Download PDFInfo
- Publication number
- JP7099487B2 JP7099487B2 JP2020063822A JP2020063822A JP7099487B2 JP 7099487 B2 JP7099487 B2 JP 7099487B2 JP 2020063822 A JP2020063822 A JP 2020063822A JP 2020063822 A JP2020063822 A JP 2020063822A JP 7099487 B2 JP7099487 B2 JP 7099487B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- measurement data
- measurement
- management system
- amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/3059—Digital compression and data reduction techniques where the original information is represented by a subset or similar information, e.g. lossy compression
- H03M7/3062—Compressive sampling or sensing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/174—Redundancy elimination performed by the file system
- G06F16/1744—Redundancy elimination performed by the file system using compression, e.g. sparse files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/219—Managing data history or versioning
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/46—Conversion to or from run-length codes, i.e. by representing the number of consecutive digits, or groups of digits, of the same kind by a code word and a digit indicative of that kind
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Testing And Monitoring For Control Systems (AREA)
- Recording Measured Values (AREA)
- Arrangements For Transmission Of Measured Signals (AREA)
Description
[先行技術文献]
[特許文献]
[特許文献1] 特開2006-115412
110 データ取得部
120 データ圧縮部
130 データ記録部
140 データ伸張部
150 データ量低減部
810 データ蓄積部
820 データ送信部
2200 コンピュータ
2201 DVD-ROM
2210 ホストコントローラ
2212 CPU
2214 RAM
2216 グラフィックコントローラ
2218 ディスプレイデバイス
2220 入/出力コントローラ
2222 通信インターフェイス
2224 ハードディスクドライブ
2226 DVD-ROMドライブ
2230 ROM
2240 入/出力チップ
2242 キーボード
Claims (11)
- プラントにおいて測定対象を測定した測定データを取得するデータ取得部と、
取得した前記測定データを記録するデータ記録部と、
記録した前記測定データの少なくとも一部を削除して前記測定データのデータ量を低減させるデータ量低減部と、
データ量が低減された前記測定データをデータ圧縮するデータ圧縮部と
を備え、
前記データ量低減部は、記録した前記測定データの大きさ軸方向におけるビット幅を低減させる、データ管理システム。 - 前記データ圧縮部は、データ量が低減された前記測定データを可逆的に圧縮する、請求項1に記載のデータ管理システム。
- 記録した前記測定データのデータ量を低減させる前に、記録した前記測定データを伸張するデータ伸張部を更に備える、請求項1または2に記載のデータ管理システム。
- 前記データ量低減部は、記録した前記測定データのサンプル数を低減させる、請求項1から3のいずれか一項に記載のデータ管理システム。
- 前記データ量低減部は、予め定められた時間が経過したことに応じて、前記測定データのデータ量を低減させる、請求項1から4のいずれか一項に記載のデータ管理システム。
- 前記予め定められた時間は、前記測定データが記録されてからの経過時間である、請求項5に記載のデータ管理システム。
- 前記予め定められた時間は、前記測定データが最後にアクセスされてからの経過時間である、請求項5に記載のデータ管理システム。
- 前記予め定められた時間は、前記測定データごとに異なる値に設定可能である、請求項5から7のいずれか一項に記載のデータ管理システム。
- 前記データ圧縮された後における前記測定データを他のシステムまたは装置へ送信するデータ送信部を更に備える、請求項1から8のいずれか一項に記載のデータ管理システム。
- プラントにおいて測定対象を測定した測定データを取得することと、
取得した前記測定データを記録することと、
記録した前記測定データの少なくとも一部を削除して前記測定データのデータ量を低減させることと、
データ量が低減された前記測定データをデータ圧縮することと
を備え、
前記データ量を低減させることは、記録した前記測定データの大きさ軸方向におけるビット幅を低減させることを含む、データ管理方法。 - コンピュータにより実行されて、前記コンピュータを、
プラントにおいて測定対象を測定した測定データを取得するデータ取得部と、
取得した前記測定データを記録するデータ記録部と、
記録した前記測定データの少なくとも一部を削除して前記測定データのデータ量を低減させるデータ量低減部と、
データ量が低減された前記測定データをデータ圧縮するデータ圧縮部と
して機能させ、
前記データ量低減部は、記録した前記測定データの大きさ軸方向におけるビット幅を低減させる、データ管理プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020063822A JP7099487B2 (ja) | 2020-03-31 | 2020-03-31 | データ管理システム、データ管理方法、および、データ管理プログラム |
EP21163202.1A EP3889795A1 (en) | 2020-03-31 | 2021-03-17 | Data management system, data management method, and recording medium with data management program recorded thereon |
CN202110307245.9A CN113468129A (zh) | 2020-03-31 | 2021-03-23 | 数据管理系统、数据管理方法和记录有数据管理程序的记录介质 |
US17/214,927 US11411576B2 (en) | 2020-03-31 | 2021-03-29 | Data management system, data management method, and storage medium with data management program stored thereon |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020063822A JP7099487B2 (ja) | 2020-03-31 | 2020-03-31 | データ管理システム、データ管理方法、および、データ管理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021162459A JP2021162459A (ja) | 2021-10-11 |
JP7099487B2 true JP7099487B2 (ja) | 2022-07-12 |
Family
ID=74947206
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020063822A Active JP7099487B2 (ja) | 2020-03-31 | 2020-03-31 | データ管理システム、データ管理方法、および、データ管理プログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US11411576B2 (ja) |
EP (1) | EP3889795A1 (ja) |
JP (1) | JP7099487B2 (ja) |
CN (1) | CN113468129A (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114268323B (zh) * | 2021-12-24 | 2023-07-07 | 成都索贝数码科技股份有限公司 | 支持行存的数据压缩编码方法、装置及时序数据库 |
CN114090567B (zh) * | 2022-01-21 | 2022-04-22 | 深圳市共赢晶显技术有限公司 | 一种自存储式传感器检测信息记录核对系统 |
JP2023170243A (ja) | 2022-05-18 | 2023-12-01 | 横河電機株式会社 | データ記録装置、データ記録方法、および、データ記録プログラム |
CN117131035B (zh) * | 2023-10-24 | 2024-01-05 | 山东尚儒弘毅精细化工有限公司 | 一种化工染料生产数据智能储存方法及系统 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010230330A (ja) | 2009-03-25 | 2010-10-14 | Panasonic Electric Works Co Ltd | 物理量データ処理装置、物理量計測装置、及び物理量データ処理システム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0254671A (ja) * | 1988-08-19 | 1990-02-23 | Nec Corp | ファクシミリ方式 |
JPH06214637A (ja) * | 1993-01-18 | 1994-08-05 | Toshiba Syst Technol Kk | 履歴データ処理装置 |
JPH0829203A (ja) | 1994-07-11 | 1996-02-02 | Yokogawa Electric Corp | 測定データ格納装置 |
CA2408901C (en) | 2002-10-18 | 2011-10-11 | Zed.I Solutions (Canada) Inc. | System for acquiring data from a facility and method |
JP2011010320A (ja) | 2002-10-18 | 2011-01-13 | Zed I Solutions (Canada) Inc | 設備からデータを獲得するためのシステムおよび方法 |
CN1751508A (zh) * | 2003-10-20 | 2006-03-22 | 松下电器产业株式会社 | 多媒体数据记录装置、监视系统、以及多媒体数据记录方法 |
JP4116604B2 (ja) | 2004-10-18 | 2008-07-09 | 株式会社日立国際電気 | データ記録装置 |
JP2007011565A (ja) * | 2005-06-29 | 2007-01-18 | Sony Corp | 記録装置および方法、プログラム並びにプログラム記録媒体 |
JP2007200524A (ja) * | 2005-12-26 | 2007-08-09 | Adc Technology Kk | 記録装置、データ管理システム |
US8462681B2 (en) * | 2009-01-15 | 2013-06-11 | The Trustees Of Stevens Institute Of Technology | Method and apparatus for adaptive transmission of sensor data with latency controls |
WO2011041269A2 (en) * | 2009-09-30 | 2011-04-07 | Samplify Systems, Inc. | Enhanced multi-processor waveform data exchange using compression and decompression |
JP2011258064A (ja) * | 2010-06-10 | 2011-12-22 | Mitsubishi Electric Corp | データ収集記録装置及びデータ収集記録方法 |
US10255304B2 (en) * | 2014-09-30 | 2019-04-09 | International Business Machines Corporation | Removal of garbage data from a database |
US10929360B2 (en) * | 2015-10-19 | 2021-02-23 | Oracle International Corporation | Filtered partition maintenance operations |
JP6633937B2 (ja) | 2016-02-19 | 2020-01-22 | アズビル株式会社 | ヒストリデータ記録装置および方法 |
US10614037B2 (en) * | 2017-03-31 | 2020-04-07 | International Business Machines Corporation | Optimized deduplicated object storage system |
US10635085B2 (en) | 2017-05-30 | 2020-04-28 | General Electric Company | Systems and methods for receiving sensor data for an operating additive manufacturing machine and adaptively compressing the sensor data based on process data which controls the operation of the machine |
JP6907880B2 (ja) * | 2017-10-24 | 2021-07-21 | オムロン株式会社 | 画像処理装置、画像処理システム、画像処理プログラム |
-
2020
- 2020-03-31 JP JP2020063822A patent/JP7099487B2/ja active Active
-
2021
- 2021-03-17 EP EP21163202.1A patent/EP3889795A1/en active Pending
- 2021-03-23 CN CN202110307245.9A patent/CN113468129A/zh active Pending
- 2021-03-29 US US17/214,927 patent/US11411576B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010230330A (ja) | 2009-03-25 | 2010-10-14 | Panasonic Electric Works Co Ltd | 物理量データ処理装置、物理量計測装置、及び物理量データ処理システム |
Also Published As
Publication number | Publication date |
---|---|
EP3889795A1 (en) | 2021-10-06 |
CN113468129A (zh) | 2021-10-01 |
US20210305998A1 (en) | 2021-09-30 |
US11411576B2 (en) | 2022-08-09 |
JP2021162459A (ja) | 2021-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7099487B2 (ja) | データ管理システム、データ管理方法、および、データ管理プログラム | |
US7924183B2 (en) | Method and system for reducing required storage during decompression of a compressed file | |
WO2018214140A1 (zh) | 一种数据压缩方法与解压方法以及相关设备 | |
US8407378B2 (en) | High-speed inline data compression inline with an eight byte data path | |
KR20150125012A (ko) | 저장된 데이터 유닛들의 동작 관리 | |
US9553604B2 (en) | Information processing system, information compression device, information decompression device, information processing method, and program | |
KR20150125010A (ko) | 저장된 데이터 유닛들의 동작 관리 | |
JP2012074026A (ja) | 相対および絶対デルタ値を使用するデータ圧縮および復元 | |
CN102270262A (zh) | 集成电路仿真模拟波形压缩和解压缩方法及装置 | |
JP7367622B2 (ja) | データ管理システム、データ管理方法、および、データ管理プログラム | |
CN113934365B (zh) | 数据管理系统、数据管理方法及记录有数据管理程序的记录介质 | |
KR20150126667A (ko) | 저장된 데이터 유닛들의 동작 관리 | |
US9479195B2 (en) | Non-transitory computer-readable recording medium, compression method, decompression method, compression device, and decompression device | |
CN101369289A (zh) | 模拟数字电路设计的方法和模拟引擎 | |
US10707897B1 (en) | Command processor with multiple string copy engines for a decompression system | |
JP7404734B2 (ja) | データ圧縮装置、履歴情報管理システム、データ圧縮方法およびデータ圧縮プログラム | |
US20220076122A1 (en) | Arithmetic apparatus and arithmetic method | |
JP7310782B2 (ja) | インターフェイス装置、インターフェイス方法、および、インターフェイスプログラム | |
JP7135955B2 (ja) | データ圧縮方法、データ圧縮装置 | |
CN104571940A (zh) | 储存装置及其相关系统 | |
EP4280465A1 (en) | Data recording apparatus, data recording method, and data recording program | |
JP7367623B2 (ja) | データ管理システム、データ管理方法、および、データ管理プログラム | |
KR20220073776A (ko) | 압축된 데이터를 생성하기 위한 최장 일치 처리를 이용하는 압축 시스템 | |
CN117194488A (zh) | 一种细胞表达数据处理方法、装置及电子设备 | |
KR20220100030A (ko) | 패턴 기반 캐시 블록 압축 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210325 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220315 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220531 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220613 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7099487 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |