JP6857068B2 - 時系列データ記録方法および装置 - Google Patents

時系列データ記録方法および装置 Download PDF

Info

Publication number
JP6857068B2
JP6857068B2 JP2017071797A JP2017071797A JP6857068B2 JP 6857068 B2 JP6857068 B2 JP 6857068B2 JP 2017071797 A JP2017071797 A JP 2017071797A JP 2017071797 A JP2017071797 A JP 2017071797A JP 6857068 B2 JP6857068 B2 JP 6857068B2
Authority
JP
Japan
Prior art keywords
data
time
event
series
storage unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017071797A
Other languages
English (en)
Other versions
JP2018173840A (ja
Inventor
平山 博文
博文 平山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Azbil Corp
Original Assignee
Azbil Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Azbil Corp filed Critical Azbil Corp
Priority to JP2017071797A priority Critical patent/JP6857068B2/ja
Priority to TW107105703A priority patent/TWI662470B/zh
Priority to KR1020180036556A priority patent/KR102136183B1/ko
Priority to CN201810270236.5A priority patent/CN108694013B/zh
Publication of JP2018173840A publication Critical patent/JP2018173840A/ja
Application granted granted Critical
Publication of JP6857068B2 publication Critical patent/JP6857068B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/05Digital input using the sampling of an analogue quantity at regular intervals of time, input from a/d converter or output to d/a converter
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B23/00Testing or monitoring of control systems or parts thereof
    • G05B23/02Electric testing or monitoring
    • G05B23/0205Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
    • G05B23/0218Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults
    • G05B23/0221Preprocessing measurements, e.g. data collection rate adjustment; Standardization of measurements; Time series or signal analysis, e.g. frequency analysis or wavelets; Trustworthiness of measurements; Indexes therefor; Measurements using easily measured parameters to estimate parameters difficult to measure; Virtual sensor creation; De-noising; Sensor fusion; Unconventional preprocessing inherently present in specific fault detection methods like PCA-based methods
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/42Recording and playback systems, i.e. in which the programme is recorded from a cycle of operations, e.g. the cycle of operations being manually controlled, after which this record is played back on the same machine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0626Reducing size or complexity of storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/0644Management of space entities, e.g. partitions, extents, pools
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659Command handling arrangements, e.g. command buffers, queues, command scheduling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Selective Calling Equipment (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Description

本発明は、時系列データを限られた記録容量のメモリに効率よく記録するための時系列データ記録技術に関する。
近年、工場やビルなどの施設で用いられる指示調節計などの産業用のフィールド機器については、IoT(Internet of Things)などの考え方に沿って、制御対象の状態や制御内容を示すデータを自動的に収集するデータ収集機能の重要性が高まっている。また、これらデータを分析することで、故障予知や歩留まり改善など、様々な有用性も見出されている。
一方で、単純なデータ収集するとデータ量が膨大となるため、データ記録や処理が難しくなる側面もある。したがって、フィールド機器でデータの特徴量を捉えて、必要なデータだけを抽出することを期待されている。特徴量を抽出するには、実データを一時的に記録しておく必要があるが、フィールド機器には低コストで小型化が求められるため、限られた記録容量で効率よく記録する必要がある。
通常、指示調節計などのフィールド機器には、制御対象の状態や制御内容を示す時系列データをメモリに一時記録しておく時系列データ記録機能が設けられている。これにより、管理者は、記録されている時系列データを読み出して解析することができ、制御対象の状態や制御内容の推移に加えて、発生した事象に対してどのような制御が行われたかについても検証することができる。
制御対象から検出した検出温度が設定温度となるようヒータを制御する指示調節計(温度調節計)では、検出温度(PV値)、設定温度(SP値)、検出温度と設定温度とから求めた操作量(MV値)、操作量に基づくヒータ制御用アクチュエータからの出力電流値(CT値)などの各種時系列データをメモリに記録することになる。また、検出温度のほかに検出圧力など複数の入力変数を用いて、より高度な制御を行う場合や、複数系統の制御出力を持つ場合には、記録すべき時系列データがさらに増加する。
例えば、32種類のデータを制御周期50msごとに記録する場合、記録データ数は24時間で約550万個となる。ここで、1データを単精度浮動小数点で記録する場合にはデータ長が4バイトになるため、全体では約22メガバイトの記録容量が必要となる。また、フィード機器は、数か月も連続して稼働し続ける場合もある。このため、得られた実データをすべてメモリに記録することは現実的ではない。
従来、時系列データを効率よくメモリに記録する技術として、メモリの空き容量が少なくなった場合にデータの記録間隔をそれまでより長くしたり、設定した基準値を超えた場合に記録間隔を適応的に変化させることにより、記録データ数を削減する技術が提案されている(例えば、特許文献1など参照)。これにより、一定の記録間隔でデータを記録する場合と比較して、記録容量を増大させることなく、記録可能な期間を延長することが可能となる。
特開2002−112363号公報 特開平05−040517号公報
しかしながら、このような従来技術では、メモリの空き容量が少なくなった場合や、設定した基準値を超えた場合に、記録間隔が長くなるため、一定の記録間隔でデータを記録する場合と比較して、記録するデータが時間方向に間引かれることになる。このため、記録間隔が延長された場合には、記録タイミングの間に異常などの各種事象が発生する可能性が高くなるため、場合によっては事象発生時のデータが記録されないことになる。したがって、記録された時系列データを後から解析しても、有用なデータが間引かれている場合には、事象発生時にどのような変化があったのかを把握することはできないという問題点がある。
また、記録間隔を適応的に変化させる場合、各データとともに記録間隔も記録しておく必要がある。特に、PV値の単位時間当たりの変化量は、制御対象の特性や制御結果を把握する上で極めて重要となる。このため、記録した時系列データを解析する場合には、各データの記録間隔を逐一照合する必要があるため、作業が極めて煩雑となり処理負担が増大するという問題点がある。
本発明はこのような課題を解決するためのものであり、取得したデータのすべてをメモリに記録しない場合であっても、発生した事象を正確に解析し検証することができる時系列データ記録を提供することを目的としている。
このような目的を達成するために、本発明にかかる時系列データ記録方法は、所定周期で取得した時系列の実データを時系列データ記憶部に順次記録する時系列データ記録方法であって、前記時系列データ記憶部に記録した前記実データの値に関する推移を検証し、予め指定されている事象の発生が検出された場合には、これら実データのうち前記事象に関する実データを事象データとして特定する事象発生検出ステップと、前記事象の発生検出に応じて特定された前記事象データを前記時系列データ記憶部に記録する事象データ処理ステップとを備えている。
また、本発明にかかる上記時系列データ記録方法の一構成例は、前記事象発生検出ステップが、前記事象データを特定する際、前記事象の発生タイミングの前後に位置する連続した一連の実データを、前記事象データとして特定するようにしたものである。
また、本発明にかかる上記時系列データ記録方法の一構成例は、前記事象データ処理ステップが、前記事象の発生検出に応じて特定された前記事象データを前記時系列データ記憶部から事象データ記憶部に移転させるようにしたものである。
また、本発明にかかる上記時系列データ記録方法の一構成例は、時系列で連続する一定量の前記実データからなる実データセットを、これら実データの特徴を示す特徴量データに縮約するデータ縮約ステップと、前記時系列データ記憶部の空き容量を監視して、新たな実データを取得した際に、前記実データをそのまま前記時系列データ記憶部に記録可能か否か判定し、記録可能ならば前記実データをそのまま前記時系列データ記憶部に記録する一方、記録不可ならば前記時系列データ記憶部に既に記録されている複数の実データから、前記事象データを除いて時系列で連続する一定量の実データを実データセットとして抽出して前記データ縮約ステップにより縮約し、得られた特徴量データを前記実データセットの実データに代えて前記時系列データ記憶部に記録するとともに、前記新たな実データを前記時系列データ記憶部に記録する記録制御ステップとを更に備えるものである。
また、本発明にかかる上記時系列データ記録方法の一構成例は、前記時系列データ記憶部の空き容量を監視して、新たな実データを取得した際に、前記実データをそのまま前記時系列データ記憶部に記録可能か否か判定し、記録可能ならば前記実データをそのまま前記時系列データ記憶部に記録する一方、記録不可ならば前記時系列データ記憶部に既に記録されている複数の実データから、前記事象データを除いて一部の実データを削除した後、前記新たな実データを前記時系列データ記憶部に記録する記録制御ステップを更に備えるものである。
また、本発明にかかる時系列データ記録装置は、所定周期で取得した時系列の実データを時系列データ記憶部に順次記録する時系列データ記録装置であって、前記時系列データ記憶部に記録した前記実データの値に関する推移を検証し、予め指定されている事象の発生が検出された場合には、これら実データのうち前記事象に関する実データを事象データとして特定する事象発生検出部と、前記事象の発生検出に応じて特定された前記事象データを前記時系列データ記憶部に記録する事象データ処理部とを備えている。
本発明によれば、予め指定されている事象が発生した場合には、バッファから事象データが取得されて、実データのまま、すなわち取得したデータ(生データ)のままメモリに記録される。このため、取得した実データのすべてをメモリに記録しない場合であっても、発生した事象を正確に解析し検証することが可能となる。
したがって、コストアップや大型化の要因となる、大規模容量のメモリを必要とすることなく、発生した障害の原因や事象間の相互関係の究明、故障予知、歩留まり向上に大きく寄与することが可能となる。
時系列データ記録装置の構成を示すブロック図である。 データ記録処理を示すフローチャートである。 特徴量データ記録処理を示すフローチャートである。 特徴量データ記録処理を示す説明図である。 特徴量データの記録例を示す説明図である。 事象データ記録処理を示すフローチャートである。 事象データ記録処理を示す説明図である。 事象データの記録例を示す説明図である。
次に、本発明の一実施の形態について図面を参照して説明する。
[時系列データ記録装置]
まず、図1を参照して、本発明の一実施の形態にかかる時系列データ記録装置10について説明する。図1は、時系列データ記録装置の構成を示すブロック図である。
この時系列データ記録装置10は、全体としてCPUやメモリなどの回路部から構成されて、所定周期で取得した時系列の実データを時系列データ記憶部に順次記録する装置であり、工場やビルなどの施設で用いられる指示調節計などの産業用のフィールド機器に搭載されて、あるいは、フィールド機器に接続されて用いられる。
一般に、フィールド機器でメモリに記録した時系列データは、制御対象の状態や制御内容の推移、さらには発生した事象に対してどのような制御が行われたかを、管理者が後から解析し検証する際に用いられる。したがって、これら時系列データが実データのまま、すなわち取得したデータ(生データ)のまま記録されていれば、管理者は最も詳細に解析し検証することができる。
本発明は、このような時系列データと事象の解析・検証に必要となるデータとの関係に着目し、メモリに記録された実データの推移を検証し、予め指定されている事象の発生が検出された場合には、これら実データのうち事象に関する実データを事象データとして特定してメモリに記録するようにしたものである。
次に、図1を参照して、本実施の形態にかかる時系列データ記録装置10の構成について詳細に説明する。以下では、時系列データ記録装置10が、制御対象から検出した検出温度が設定温度となるようヒータを制御する指示調節計(温度調節計)に搭載されている場合を例として説明するが、これに限定されるものではなく、他のフィールド機器に適用してもよく、同様の作用効果を得ることができる。
時系列データ記録装置10には、主な機能部として、入出力I/F部11、メモリ12、データ縮約部13、記録制御部14、事象発生検出部15、および事象データ処理部16が設けられている。
入出力I/F部11は、外部回路や外部装置(ともに図示せず)から出力された実データを取得する機能を有している。
実データは、例えば取得周期50msごとに取得される時系列データであり、1種類の時系列データでもよく、複数種類の時系列データを1組にまとめたものであってもよい。指示調節計の場合、時系列データとしては、検出温度(PV値)、設定温度(SP値)、検出温度と設定温度とから求めた操作量(MV値)、操作量に基づくヒータ制御用アクチュエータからの出力電流値(CT値)などのデータがある。
この他、制御ブロックで演算した操作量やオンオフ出力、PID演算途中の結果(内部操作量に相当し、操作量上下限によるリミット処理前の値)、ユーザ設定による警報(PV上限・下限・偏差)、異常(センサ断線、センサ測定範囲上限異常、指示調節計本体故障)、デジタル入力などの各種ステータス、稼働時間、不揮発メモリの書込回数、設定変更の履歴などの各種アセット情報、現在時刻あるいは電源投入後の経過時間などの時刻情報などのデータも時系列データとして記録してもよい。
メモリ12は、半導体メモリからなり、実データ、特徴量データ、事象データを記憶する機能を有している。メモリ12には、実データおよび特徴量データを記憶する領域である時系列データ記憶部12Aと、事象データを記憶する領域である事象データ記憶部12Bとが、静的または動的に設けられる。
メモリ12の具体例としては、バッテリバックアップされているDRAMやSRAMなどの揮発性メモリであってもよく、フラッシュメモリやFRAM(Ferroelectric RAM:強誘電体メモリ)などの不揮発性メモリを用いてもよい。また、メモリ12は、時系列データ記録装置10の内部に実装された専用メモリであってもよく、外部から挿抜可能なSDカードやUSBメモリなどの外部メモリであってもよい。この際、内部・外部メモリの両方を利用して、内部メモリの空き領域がなくなった時点で、自動あるいは手動により外部メモリにデータを転送して、内部メモリに空き領域を確保するようにしてもよい。
データ縮約部13は、時系列で連続する一定量の実データからなる実データセットを、これら実データの特徴を示す特徴量データに縮約する機能を有している。特徴量データの具体例としては、制御ループの特性値、制定時のPVの振れ幅、SPごとの制定時の操作量の平均値などのデータがある。
特に、制御ループの特性値については、SPステップ変更後にPVが変化するまでの無駄時間、PVが変化してからSP付近(例えばSP−3%FS)に到達するまでの立ち上がり時間、PVがSP付近(例えばSP−3%FS)に到達してから安定状態(例えばSP−1%FSに一定時間とどまった状態)となるまでの所要時間、特許文献2に記載の応答傾向モデルと診断結果、AT実施結果におけるPID値などがある。
記録制御部14は、時系列データ記憶部12Aの空き容量を監視して、新たな実データを取得した際に、実データをそのまま時系列データ記憶部12Aに記録可能か否か判定する機能と、記録可能ならば実データをそのまま時系列データ記憶部12Aに記録する機能と、記録不可ならば時系列データ記憶部12Aに既に記録されている複数の実データから、事象データを除いて時系列で連続する一定量の実データを実データセットとして抽出してデータ縮約部13により縮約する機能と、得られた特徴量データを実データセットの実データに代えて時系列データ記憶部12Aに記録した後、新たな実データを時系列データ記憶部12Aに記録する機能とを有している。
この際、記録制御部14は、実データをそのまま時系列データ記憶部12Aに記録不可ならば時系列データ記憶部12Aに既に記録されている複数の実データから、事象データを除いて一部の実データを削除した後、新たな実データを時系列データ記憶部12Aに記録するようにしてもよい。
事象発生検出部15は、時系列データ記憶部12Aに記録した実データの値に関する推移を検証し、予め指定されている事象の発生が検出された場合には、これら実データのうち検出した事象に関する実データを事象データとして特定する機能と、事象データを特定する際、事象の発生タイミングの直前直後に位置する連続した一連の実データを事象データとして特定する機能とを有している。
事象データ処理部16は、事象発生検出部15での事象の発生検出に応じて特定された事象データを、時系列データ記憶部12Aに記録する機能を有している。
この際、より具体的には、事象データ処理部16が、事象データを時系列データ記憶部12Aから事象データ記憶部12Bに移転させてもよい。
ここでいう事象とは、フィールド機器における、断線、アンダーレンジ、内部メモリ異常などの計器アラーム発生、時系列データの値が制定時に正常と判断される偏差より大きくなるデータ逸脱発生、予め警報として設定した、例えばPVの上限値異常、下限値異常、変化量異常などのイベント発生、フィールド機器ごとに設定されている各種異常状態の発生などの事象がある。
このような事象については、管理者が後から解析し検証する際、詳細な時系列データが必要となる。したがって、これら事象が発生した場合には、事象発生検出部15により、時系列データ記憶部12Aから事象データを取得し、実データのまま、すなわち取得したデータ(生データ)のまま事象データ記憶部12Bに移転(移動)させる。特に、事象データは、事象発生タイミング以降の事後期間だけでなく、それ以前の事前期間における時系列データも含まれている。これにより、事象発生の前兆現象を詳細に解析し検証することができ、事象発生原因の特定に大きく寄与することができる。
なお、事象データについては、移転させるのではなく、事象データ処理部16が、事象発生検出部15での事象の発生検出に応じて、事象発生検出部15で取得した事象データを、例えばフラグ管理を行うことにより、時系列データ記憶部12A内で縮約および削除の対象外として保護するようにしてもよい。
また、事象データ処理部16は、事象発生検出部15での事象の発生検出に応じて、事象データ記憶部12Bの空き容量に基づいて事象発生検出部15で得られた事象データを事象データ記憶部12Bに記録可能か否か判定し、記録可能な場合には事象データを事象データ記憶部12Bに記録する機能と、事象データを事象データ記憶部12Bに記録不可能な場合には、時系列データ記憶部12Aに記録されている実データのうち古いものから時系列の順に削除し、得られた空き領域に事象データを記録する機能とを有している。
また、以上では、なるべく実データを時系列データ記憶部12Aに記録しておく場合を例として説明したが、制御対象が安定状態にある正常期間については、特徴量データにより十分解析・検証できる制御対象もある。このような場合には、時系列データ記憶部12Aに記録されている実データのうち、事象発生が検出されていない正常期間における実データを特徴量データに縮約するようにしてもよい。これにより、実データによる記録領域の消費を最小限に抑制することができる。
この際、具体的には、記録制御部14に、事象発生検出部15での事象の発生検出に応じて、時系列データ記憶部12Aに記録されている実データをデータ縮約部13で特徴量データに縮約して時系列データ記憶部12Aに記録するとともに、これら実データを削除する機能と、事象発生検出部15で得られた事象データを事象データ記憶部12Bに記録する機能とを設ければよい。この際、実データは、時系列データ記憶部12Aに記録されているすべての実データを特徴量データに縮約することにより、極めて効率よくメモリ12を利用できる。また、これら実データは、1つの特徴量データに縮約してもよく、予め設定した期間やデータ量に基づいて複数の特徴量データに縮約してもよい。
また、メモリ12に、実データ、特徴量データ、事象データなど、異なる種別のデータを記録する場合、実際には、どのアドレスにどの種別のデータを記録したか管理する必要がある。したがって、メモリ管理テーブルを設けて、アドレスごとに記録されているデータの種別を管理してもよいが、データ種別ごとに記録領域を設けてもよい。これにより、各記録領域の先頭アドレスと末尾アドレスまたは領域サイズを管理するだけでよく、メモリ管理テーブルより少ないメモリ容量で実現できる。
この際、具体的には、記録制御部14に、実データセットを記録する実データ記録領域、特徴量データを記録する特徴量データ記録領域、さらには事象データを記録する事象データ記録領域をメモリ12に設ける機能と、メモリ12に対する記録開始時には記録領域全域を実データ記録領域に割り当てる機能と、特徴量データを記録する際、実データ記録領域から実データを消去して得られた空き領域を特徴量データ記録領域として順次割り当てる機能と、事象データを記録する際、実データ記録領域から実データを消去して得られた空き領域を事象データ記録領域として順次割り当てる機能とを有している。
[本実施の形態の動作]
次に、図2を参照して、本実施の形態にかかわる時系列データ記録装置10の動作について説明する。図2は、データ記録処理を示すフローチャートである。
時系列データ記録装置10は、外部からの記録開始指示または電源投入後の起動に応じて、図2のデータ記録処理を開始する。
まず、入出力I/F部11は、外部から一定期間ごとに1つまたは複数の時系列データを、実データとして取得する(ステップ100)。
事象発生検出部15は、取得した実データを検証し(ステップ101)、予め指定されている事象の発生が検出された場合には(ステップ101:YES)、後述する事象データ記録処理へ移行する(ステップ105)。
一方、予め指定されている事象の発生が検出されなかった場合(ステップ101:NO)、記録制御部14は、時系列データ記憶部12Aの空き容量に基づいて実データを時系列データ記憶部12Aに記録可能か否か判定する(ステップ102)。
ここで、時系列データ記憶部12Aに実データのデータサイズ以上の空き領域が存在しており、記録可能である場合(ステップ102:YES)、記録制御部14は、実データを縮約することなくそのまま時系列データ記憶部12Aの空き領域に記録し(ステップ103)、ステップ100に戻る。
一方、時系列データ記憶部12Aに実データのデータサイズ以上の空き領域が存在しておらず、記録不可能である場合(ステップ102:NO)、記録制御部14は、後述する特徴量データ記録処理へ移行する(ステップ104)。
[特徴量データ記録処理]
次に、図3および図4を参照して、本実施の形態にかかわる時系列データ記録装置10の特徴量データ記録処理について説明する。図3は、特徴量データ記録処理を示すフローチャートである。図4は、特徴量データ記録処理を示す説明図である。
時系列データ記録装置10は、図2のステップ104において、図3の特徴量データ記録処理を実行する。
まず、記録制御部14は、時系列データ記憶部12Aに既に記録されている複数の実データから、時系列で連続する一定量の実データ、図4ではセット期間Ts分の実データを実データセットとして抽出し(ステップ110)、この実データセットをデータ縮約部13で縮約処理することにより、実データセットに含まれる一定量の実データの特徴を示す特徴量データを生成する(ステップ111)。
この際、実データセットとして抽出する実データについては、いくつかの選択方法が考えられる。その1つとして、時系列データ記憶部12Aに既に記録されている実データのうちから、取得された日時の古い順に、時系列で連続する一定量の実データを取得する方法がある。これにより、管理者が後から解析し検証する可能性が低い実データを削除して特徴量データに縮約することができ、解析や検証に対する縮約の影響を最小限にとどめることができる。また、実データセットについては、実データの値が規定範囲内で一定していることを条件として、時系列で連続する一定量の実データを一定量だけ取得してもよい。この場合にも、解析や検証に対する縮約の影響を最小限にとどめることができる。
次に、記録制御部14は、時系列データ記憶部12Aの空き容量に基づいて、データ縮約部13で生成した特徴量データを時系列データ記憶部12Aに記録可能か否か判定する(ステップ112)。
ここで、時系列データ記憶部12Aに特徴量データのデータサイズ以上の空き領域が存在しており、記録可能である場合(ステップ112:YES)、記録制御部14は、特徴量データを時系列データ記憶部12Aの空き領域に記録し(ステップ113)、一連の特徴量データ記録処理を終了する。
一方、時系列データ記憶部12Aに特徴量データのデータサイズ以上の空き領域が存在しておらず、記録不可能である場合(ステップ112:NO)、記録制御部14は、時系列データ記憶部12Aに記録されている実データのうちから、例えば特徴量データのデータサイズ分だけ削除して時系列データ記憶部12Aに空き領域を確保し(ステップ114)、確保した時系列データ記憶部12Aの空き領域に特徴量データを記録し(ステップ115)、一連の特徴量データ記録処理を終了する。
この際、削除する実データについては、いくつかの選択方法が考えられる。その1つとして、時系列データ記憶部12Aに既に記録されている実データのうちから、取得された日時の古い順に実データを選択する方法がある。これにより、管理者が後から解析し検証する可能性が低い実データを削除することができ、解析や検証に対する縮約の影響を最小限にとどめることができる。また、実データの値が規定範囲内で一定していることを条件として、削除する実データを選択してもよい。この場合にも、解析や検証に対する縮約の影響を最小限にとどめることができる。
図4の例では、時系列データ記憶部12Aに既に記録されている実データのうちから、セット期間Ts分の実データが実データセットとして抽出されている。この抽出により、実データセットに相当する実データは、時系列データ記憶部12Aから削除され空き領域が確保される。また、特徴量データは実データセットよりデータサイズが小さいため、少ない記録領域で実データセットより多くの特徴量データを記録することができるとともに、記録領域を確保するために削除する実データの量が少なくて済む。これにより、結果として、メモリ12を効率よく利用して、時系列データを記録することが可能となる。
図5は、特徴量データの記録例を示す説明図である。図5の例では、実データおよび特徴量データを記録する領域として、実データ記録領域Maおよび特徴量データ記録領域Mbを時系列データ記憶部12Aに動的に設ける場合が示されている。
図5(a)に示すように、時系列データ記憶部12Aに対する記録開始時において、実データ記録領域Maが時系列データ記憶部12Aの記録領域全域に設定される。ある時点において、時系列データ記憶部12Aに記録されている実データの記録量がMnであり、残りの領域が空き領域となる。
その後、取得した実データが順次実データ記録領域Maに記録され、図5(b)に示すように、空き領域(空き容量)がゼロとなった場合、これ以降において新たな実データを記録できなくなる。このため、実データ記録領域Maに記録されている実データの一部が実データセットとして抽出されて特徴量データに縮約される。
これにより、図5(c)に示すように、この抽出により実データが実データ記録領域Maから削除されて、時系列データ記憶部12Aに空き領域が確保され、図5(d)に示すように、この空き領域のすべてまたは一部が特徴量データ記録領域Mbに割り当てられ、ここに特徴量データが記録される。
一般に、時系列データは、管理者による解析・検証という観点から見て、過去のデータより新しいデータの方が価値が高いとされている。これは、過去のデータの方が現在の状況との関連性が低く、新しいデータの方が現在の状況との関連性が高いからである。したがって、記録容量を確保する際、時系列データ記憶部12Aに記録されている実データのうち、古いものから順に削除して記録容量を確保することにより、メモリ12より価値の高いデータを残しておくことができ、解析・検証に役立つデータを効率よく記録しておくことが可能となる。
[事象データ記録処理]
次に、図6および図7を参照して、本実施の形態にかかる時系列データ記録装置10の事象データ記録処理について説明する。図6は、事象データ記録処理を示すフローチャートである。図7は、事象データ記録処理を示す説明図である。
時系列データ記録装置10は、図2のステップ105において、図6の事象データ記録処理を実行する。
まず、事象発生検出部15は、時系列データ記憶部12Aに記録されている実データのうち、指定した事象Pの発生が検出された先頭の実データの時間位置を事象発生タイミングTpとし、このTpから予め事象Pに設定されている事前期間Taと事後期間Tbとからなる事象関連期間Tc分の実データを、事象データとして特定する(ステップ120)。
次に、記録制御部14は、事象データ記憶部12Bの空き容量に基づいて事象発生検出部15で取得した事象データを事象データ記憶部12Bに記録可能か否か判定する(ステップ121)。
ここで、事象データ記憶部12Bに事象データのデータサイズ以上の空き領域が存在しており、記録可能である場合(ステップ121:YES)、記録制御部14は、事象データを時系列データ記憶部12Aから事象データ記憶部12Bの空き領域に移転させ(ステップ122)、一連の事象データ記録処理を終了する。
一方、事象データ記憶部12Bに事象データのデータサイズ以上の空き領域が存在しておらず、記録不可能である場合(ステップ121:NO)、記録制御部14は、メモリ12に記録されている実データのうちから、例えば事象データのデータサイズ分だけ削除して事象データ記憶部12Bに空き領域を確保し(ステップ123)、確保した事象データ記憶部12Bの空き領域に事象データを記録し(ステップ124)、一連の事象データ記録処理を終了する。
図7の例では、時系列データ記憶部12Aに既に記録されている実データのうちから、指定した事象Pが検出された場合、その先頭の実データの時間位置が事象発生タイミングTpとされ、このTpから予め事象Pに設定されている事前期間Taと事後期間Tbとからなる事象関連期間Tc分の実データが、事象データとして時系列データ記憶部12Aから抽出され、この事象データが事象データ記憶部12Bに記録される。
これにより、指定した事象Pの発生前後における時系列データが、実データのまま事象データ記憶部12Bに記録されることになる。このため、管理者は事象Pについて正確に解析・検証することができ、メモリ12全体としてより価値の高いデータを効率よく記録しておくことが可能となる。
図8は、事象データの記録例を示す説明図である。図8の例では、実データ、特徴量データ、および事象データを記録する領域として、実データ記録領域Ma、特徴量データ記録領域Mb、および事象データ記録領域Mcをメモリ12に動的に設ける場合が示されている。これら記録領域のうち、実データ記録領域Maおよび事象データ記録領域Mcが時系列データ記憶部12Aに相当し、事象データ記録領域Mcが事象データ記憶部12Bに相当している。
図8(a)に示すように、ある時点において、実データ記録領域Maと特徴量データ記録領域Mbとがメモリ12に設けられており、空き領域はないものとする。
その後、指定した事象Pの発生が検出された場合、図8(b)に示すように、実データ記録領域Maに記録されている実データの一部が削除され、図8(c)に示すように、これにより確保された記録領域が事象データ記録領域Mcに割り当てられ、ここに事象データが記録される。
一般に、時系列データは、管理者による解析・検証という観点から見て、過去のデータより新しいデータの方が価値が高いとされている。これは、過去のデータの方が現在の状況との関連性が低く、新しいデータの方が現在の状況との関連性が高いからである。したがって、記録容量を確保する際、時系列データ記憶部12Aに記録されている実データのうち、古いものから順に削除して記録容量を確保することにより、メモリ12全体としてより価値の高いデータを残しておくことができ、解析・検証に役立つデータを効率よく記録しておくことが可能となる。
[本実施の形態の効果]
このように、本実施の形態は、事象発生検出部15が、時系列データ記憶部12Aに記録した実データの値に関する推移を検証し、予め指定されている事象の発生が検出された場合には、これら実データのうち事象に関する実データを事象データとして特定し、事象データ処理部16が、事象の発生検出に応じて特定された事象データを時系列データ記憶部12Aに記録するようにしたものである。
これにより、予め指定されている事象が発生した場合には、事象発生検出部15により、時系列データ記憶部12Aから事象に関する実データが事象データとして特定されて、事象データ処理部16により、実データのまま、すなわち取得したデータ(生データ)のまま時系列データ記憶部12Aに記録される。
このため、実データを特徴量データに集約してメモリ12に記録する場合、さらには記録間隔の延長により記録する実データを間引いてメモリ12に記録する場合など、取得した実データのすべてをメモリ12に記録しない場合であっても、発生した事象を正確に解析し検証することが可能となる。
したがって、コストアップや大型化の要因となる、大規模容量のメモリを必要とすることなく、発生した障害の原因や事象間の相互関係の究明、故障予知、歩留まり向上に大きく寄与することが可能となる。
また、本実施の形態において、事象発生検出部15が事象に関する実データを事象データとして特定する際、事象の発生タイミングの前後に位置する連続した一連の実データを事象データとして特定するようにしてもよい。
これにより、事象発生の前後における実データが事象データとして記録されるため、事象発生前にどのような変化があったのか、すなわちどのような前兆現象があったのかを把握することができ、障害の原因や事象間の相互関係の究明に、大きく寄与することが可能となる。
[実施の形態の拡張]
以上、実施形態を参照して本発明を説明したが、本発明は上記実施形態に限定されるものではない。本発明の構成や詳細には、本発明のスコープ内で当業者が理解しうる様々な変更をすることができる。また、各実施形態については、矛盾しない範囲で任意に組み合わせて実施することができる。
前述した図5および図8では、メモリ12にデータを記録する際、各記録領域を動的に確保する場合について説明したが、設計上このような動的な領域確保が難しい場合には、それぞれの記録領域を予め固定的に確保しておく方法もある。この場合、事象が発生しなかったり事象発生回数が想定よりも少なかった場合、事象データ記録領域は使用されないままとなるため、メモリ12を完全に使い切ることができない場合がある。また、事象発生回数が想定よりも多くなった場合も、全体ではメモリ12が余っているにもかかわらず、古い事象データを捨てるか新たな事象データを記録しないといった対策が必要となる。
また、一般的には、時系列データ記録装置10を定期的にメンテナンスして、メモリ12に記録された実データ、特徴量データ、事象データを廃棄したり、あるいは上位装置へ転送したりすることになる。このため、メモリ12としては、それまでの動作期間に取得したこれらデータを記録するために十分な記録容量を持つメモリを用意するべきである。しかしながら、途中で記録領域を使い切ってしまった場合、例えば実データ記録領域が全くなって特徴量データ記録領域を確保できなくなった場合には、設定内容に応じて、メモリ12に記録されているデータ、例えば特徴量データの古い方から順に消去して上書きするようにしてもよく、新しいデータは記録せず破棄するようにしてもよい。
また、前述の各実施の形態では、実データセットをメモリ12に記録できない場合、1つの実データセットから1つの特徴量データを生成する場合を例として説明したが、実データセットと特徴量データとの関係についてはこれに限定されるものではなく、1つの実データセットについて複数の特徴量データを生成してもよく、複数の実データセットについて1つの特徴量データを生成してもよい。さらに、実データセットとする実データの数は、一定であってもよく可変であってもよい。
10…時系列データ記録装置、11…入出力I/F部、12…メモリ、12A…時系列データ記憶部、12B…事象データ記憶部、13…データ縮約部、14…記録制御部、15…事象発生検出部、16…事象データ処理部、17…バッファ、Ma…実データ記録領域、Mb…特徴量データ記録領域、Mc…事象データ記録領域、Mn…実データ記録量、Ts…セット期間、P…事象、Tp…事象発生タイミング、Ta…事前期間、Tb…事後期間、Tc…事象関連期間。

Claims (5)

  1. 所定周期で取得した時系列の実データを時系列データ記憶部に順次記録する時系列データ記録方法であって、
    前記時系列データ記憶部に記録した前記実データの値に関する推移を検証し、予め指定されている事象の発生が検出された場合には、これら実データのうち前記事象に関する実データを事象データとして特定する事象発生検出ステップと、
    前記事象の発生検出に応じて特定された前記事象データを前記時系列データ記憶部に記録する事象データ処理ステップと、
    時系列で連続する一定量の前記実データからなる実データセットを、これら実データの特徴を示す特徴量データに縮約するデータ縮約ステップと、
    前記時系列データ記憶部の空き容量を監視して、新たな実データを取得した際に、前記実データをそのまま前記時系列データ記憶部に記録可能か否か判定し、記録可能ならば前記実データをそのまま前記時系列データ記憶部に記録する一方、記録不可ならば前記時系列データ記憶部に既に記録されている複数の実データから、前記事象データを除いて時系列で連続する一定量の実データを実データセットとして抽出して前記データ縮約ステップにより縮約し、得られた特徴量データを前記実データセットの実データに代えて前記時系列データ記憶部に記録するとともに、前記新たな実データを前記時系列データ記憶部に記録する記録制御ステップと
    を備え
    前記時系列で連続する一定量の実データを実データセットとして抽出することは、前記実データの値が規定範囲内で一定していることを条件として、前記時系列で連続する一定量の実データを一定量取得することを特徴とする時系列データ記録方法。
  2. 請求項1に記載の時系列データ記録方法において、
    前記事象発生検出ステップは、前記事象データを特定する際、前記事象の発生タイミングの前後に位置する連続した一連の実データを、前記事象データとして特定することを特徴とする時系列データ記録方法。
  3. 請求項1または請求項2に記載の時系列データ記録方法において、
    前記事象データ処理ステップは、前記事象の発生検出に応じて特定された前記事象データを前記時系列データ記憶部から事象データ記憶部に移転させることを特徴とする時系列データ記録方法。
  4. 請求項1または請求項2に記載の時系列データ記録方法において、
    前記時系列データ記憶部の空き容量を監視して、新たな実データを取得した際に、前記実データをそのまま前記時系列データ記憶部に記録可能か否か判定し、記録可能ならば前記実データをそのまま前記時系列データ記憶部に記録する一方、記録不可ならば前記時系列データ記憶部に既に記録されている複数の実データから、前記事象データを除いて一部の実データを削除した後、前記新たな実データを前記時系列データ記憶部に記録する記録制御ステップを更に備えることを特徴とする時系列データ記録方法。
  5. 所定周期で取得した時系列の実データを時系列データ記憶部に順次記録する時系列データ記録装置であって、
    前記時系列データ記憶部に記録した前記実データの値に関する推移を検証し、予め指定されている事象の発生が検出された場合には、これら実データのうち前記事象に関する実データを事象データとして特定する事象発生検出部と、
    前記事象の発生検出に応じて特定された前記事象データを前記時系列データ記憶部に記録する事象データ処理部と、
    時系列で連続する一定量の前記実データからなる実データセットを、これら実データの特徴を示す特徴量データに縮約するデータ縮約部と、
    前記時系列データ記憶部の空き容量を監視して、新たな実データを取得した際に、前記実データをそのまま前記時系列データ記憶部に記録可能か否か判定し、記録可能ならば前記実データをそのまま前記時系列データ記憶部に記録する一方、記録不可ならば前記時系列データ記憶部に既に記録されている複数の実データから、前記事象データを除いて時系列で連続する一定量の実データを実データセットとして抽出して前記データ縮約ステップにより縮約し、得られた特徴量データを前記実データセットの実データに代えて前記時系列データ記憶部に記録するとともに、前記新たな実データを前記時系列データ記憶部に記録する記録制御部と
    を備え
    前記時系列で連続する一定量の実データを実データセットとして抽出することは、前記実データの値が規定範囲内で一定していることを条件として、前記時系列で連続する一定量の実データを一定量取得することを特徴とする時系列データ記録装置。
JP2017071797A 2017-03-31 2017-03-31 時系列データ記録方法および装置 Active JP6857068B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017071797A JP6857068B2 (ja) 2017-03-31 2017-03-31 時系列データ記録方法および装置
TW107105703A TWI662470B (zh) 2017-03-31 2018-02-21 時間序列資料記錄方法及裝置
KR1020180036556A KR102136183B1 (ko) 2017-03-31 2018-03-29 시계열 데이터 기록 방법 및 장치
CN201810270236.5A CN108694013B (zh) 2017-03-31 2018-03-29 时间序列数据记录方法以及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017071797A JP6857068B2 (ja) 2017-03-31 2017-03-31 時系列データ記録方法および装置

Publications (2)

Publication Number Publication Date
JP2018173840A JP2018173840A (ja) 2018-11-08
JP6857068B2 true JP6857068B2 (ja) 2021-04-14

Family

ID=63844675

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017071797A Active JP6857068B2 (ja) 2017-03-31 2017-03-31 時系列データ記録方法および装置

Country Status (4)

Country Link
JP (1) JP6857068B2 (ja)
KR (1) KR102136183B1 (ja)
CN (1) CN108694013B (ja)
TW (1) TWI662470B (ja)

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2644398B2 (ja) 1991-08-05 1997-08-25 山武ハネウエル株式会社 制御系の故障診断方法
JPH08328651A (ja) * 1995-06-06 1996-12-13 Hitachi Ltd データ収集方法及び装置
JP3777721B2 (ja) * 1996-06-07 2006-05-24 カシオ計算機株式会社 画像データ記憶装置、画像データ記憶方法、撮像方法、及び記憶媒体
JP2000020367A (ja) * 1998-06-30 2000-01-21 Toshiba Corp 情報記憶方法および情報記憶装置および記録媒体
JP2002091562A (ja) * 2000-09-19 2002-03-29 Toshiba Corp 監視制御システム
JP2002112363A (ja) 2000-09-29 2002-04-12 Omron Corp 通信機能付機器およびデータ収集システム
JP2005049945A (ja) * 2003-07-29 2005-02-24 Toshiba Mitsubishi-Electric Industrial System Corp 監視装置及びこれを用いた電力変換装置
US7409594B2 (en) * 2004-07-06 2008-08-05 Intel Corporation System and method to detect errors and predict potential failures
SG176797A1 (en) * 2009-06-30 2012-01-30 Lam Res Corp Automatic fault detection and classification in a plasma processing system and methods thereof
US8051050B2 (en) * 2009-07-16 2011-11-01 Lsi Corporation Block-level data de-duplication using thinly provisioned data storage volumes
CN101630290B (zh) * 2009-08-17 2011-06-08 成都市华为赛门铁克科技有限公司 重复数据处理方法和装置
JP5435126B2 (ja) * 2010-04-26 2014-03-05 株式会社日立製作所 時系列データ診断圧縮方法
JP2011258064A (ja) * 2010-06-10 2011-12-22 Mitsubishi Electric Corp データ収集記録装置及びデータ収集記録方法
US8806154B1 (en) * 2011-05-06 2014-08-12 Chelsio Communications, Inc. Thin provisioning row snapshot with reference count map
ES2786129T3 (es) * 2012-11-30 2020-10-08 Ip2Ipo Innovations Ltd Un dispositivo, método y sistema para monitorizar una red de conductos que llevan fluido
US20140172516A1 (en) * 2012-12-17 2014-06-19 John Tuck Davison Systems and methods for streamlining data compilation and report generation
US9847961B2 (en) * 2013-02-25 2017-12-19 Qualcomm Incorporated Automatic IoT device social network expansion
JP6320200B2 (ja) * 2014-07-01 2018-05-09 アズビル株式会社 Pidコントローラおよびデータ収集方法
US9286313B1 (en) * 2014-12-27 2016-03-15 Ascava, Inc. Efficient lossless reduction of data by deriving data from prime data elements resident in a content-associative sieve

Also Published As

Publication number Publication date
TWI662470B (zh) 2019-06-11
KR20180111647A (ko) 2018-10-11
KR102136183B1 (ko) 2020-07-22
JP2018173840A (ja) 2018-11-08
CN108694013B (zh) 2021-10-22
CN108694013A (zh) 2018-10-23
TW201837700A (zh) 2018-10-16

Similar Documents

Publication Publication Date Title
US20150296042A1 (en) Data collection and transfer apparatus
US7577542B2 (en) Method and apparatus for dynamically adjusting the resolution of telemetry signals
JP4573179B2 (ja) 性能負荷異常検出システム、性能負荷異常検出方法、及びプログラム
US20160004226A1 (en) Pid controller and data collecting method
JP4659643B2 (ja) ロギングシステム
JP4858913B2 (ja) データ記憶装置、データ記憶方法、及びデータ記憶用プログラム
CN112673326A (zh) 控制装置及控制程序
JP6857068B2 (ja) 時系列データ記録方法および装置
JP6880961B2 (ja) 情報処理装置、およびログ記録方法
JP6840013B2 (ja) 時系列データ記録方法および装置
JP2011258064A (ja) データ収集記録装置及びデータ収集記録方法
CN109633331B (zh) 一种数据存储方法和故障录波装置
JP2005259041A (ja) データ蓄積方法および装置
CN112639844A (zh) 控制系统以及控制方法
US20220308548A1 (en) Programmable logic controller, setting tool, and recording medium
JP2009116624A (ja) データ記録装置
JP4963847B2 (ja) ログ情報管理方式
JP5853596B2 (ja) 半導体ディスク寿命監視装置
JP5627414B2 (ja) 動作ログ収集システム及びプログラム
CN108920344B (zh) 一种存储方法及设备、计算机可读存储介质
JP6139149B2 (ja) 解析方法および解析装置
JP2021192491A5 (ja)
CN117572852B (zh) 车辆部件故障分析方法、装置、设备、介质和产品
JP6852697B2 (ja) マスタ装置、マスタ装置の制御方法、情報処理プログラム、および記録媒体
JP6456180B2 (ja) 施設管理装置および施設管理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190917

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200916

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201013

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210309

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210319

R150 Certificate of patent or registration of utility model

Ref document number: 6857068

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150