JP7430473B1 - 監視データ処理装置 - Google Patents

Abstract

【課題】産業機械の動画における特別な瞬間を容易に探し出せるようにする技術を開示する。【解決手段】本実施形態の監視データ処理装置３０Ａは、第１及び第２の監視カメラ１１，１２が撮像したトランスファプレス機５０の動画のデータと、その撮像中のトランスファプレス機５０の状態の経時データとを記憶部１７に保存するデータ記憶部２５と、過去一定期間分の経時データから時間軸に沿った経時画像４０，４６，４７を生成してモニタ２０に表示する画像表示部２６Ａとを備える。そして、経時画像４０，４６，４７の時間軸の任意の位置をコンソール２３にて選択することで、その選択された位置に対応する動画がモニタ２０に表示される。【選択図】図５

Description

本開示は、監視カメラにて撮像される産業機械の動画のデータを取得して、モニタに表示する監視データ処理装置に関する。

監視データ処理装置として、過去一定期間の動画における任意の瞬間を選択して再生することができるものが知られている（例えば、特許文献１参照）。

特許７１９５７２９号公報（図１、図１０、段落［００８９］）

しかしながら、上述した従来の監視データ処理装置では、例えば異常が生じたり、所定の計測結果に変化が生じた場合に、それら異常・変化等が生じた特別な瞬間の動画を見ようとしても、動画における特別な瞬間を探し出すまでに手間がかかるという問題があった。そこで、本願では、産業機械の動画における特別な瞬間を容易に探し出せるようにする技術を開示する。

本発明の一態様は、監視カメラにて撮像される産業機械の動画のデータと、その撮像中の前記産業機械又はそれが製造するワークの、状態若しくは物理量の、経時データと、を取得して記憶部に保存するデータ記録部と、過去一定期間分の前記経時データから、時間軸に沿った前記経時データの変化を視認可能に示す経時画像を生成して、モニタに表示する画像表示部と、前記経時画像の時間軸に沿った任意の位置を選択可能なコンソールと、前記コンソールにて選択された位置に対応する前記産業機械の前記動画を、前記モニタに表示する動画表示部と、を備える監視データ処理装置である。

本発明の一態様の監視データ処理装置によれば、過去一定期間の動画の撮像中における産業機械又はそれが製造するワークの状態又は物理量の推移が、経時画像としてモニタに表示される。そして、経時画像上で、産業機械又はワークに異常や変化が見つかった場合に、経時画像上においてそのような異常や変化が見つかった特別な位置（つまり、特別な瞬間）をコンソールにて選択することで、その選択された特別な位置（特別な瞬間）に対応する産業機械の動画をモニタに表示させることができる。このようにして本発明の一態様によれば、産業機械の動画における特別な瞬間を容易に探し出して見ることができる。

図１は、第１実施形態の産業機械の一例としてのトランスファプレス機の正面図 図２は、トランスファプレス機及び監視システムのブロック図 図３は、監視データ処理装置のブロック図 図４は、第１の監視画面の概念図 図５は、第２の監視画面の概念図 図６は、第２の監視画面の概念図 図７は、第３の監視画面の概念図 図８は、入力操作画面の概念図 図９は、第２実施形態に係る検索操作画面の概念図

［第１実施形態］
図１～図８を参照して、監視データ処理装置３０Ａを含む監視システム１０Ａの一実施形態について説明する。図１には、監視システム１０Ａの監視対象である産業機械の一例として、トランスファプレス機５０が示されている。このトランスファプレス機５０は、ラム５１の下面に横並びに配置される複数のパンチ５２と、ボルスタ５３の上面に横並びに配置される複数のダイ５４とで、板金から筒形のワークを製造するものである。

具体的には、ラム５１が昇降する度に図１における左端のパンチ５２により板金から例えば円形又は楕円形のブランク材が打ち抜かれると共にそれが筒形の中間ワークに形成される。また、その中間ワークは、ラム５１が昇降する度にトランスファ装置５５により図１における右隣のパンチ５２の加工ステージに順次搬送されて絞られ又はしごかれ、最終的に例えば角筒形のワークに成形される。また、トランスファプレス機５０のうち図１における右端部にはワーク測定装置５６が備えられ、完成したワークの高さ、縦幅、横幅の寸法が自動測定され、その測定結果が、図２に示されたトランスファプレス機５０のコントローラ６０に取り込まれる。

図２に示すように、コントローラ６０には、トランスファプレス機５０の種々の電気機器を駆動する駆動回路６２と、駆動回路６２を制御する制御回路６３と、モニタ６７と、コンソール６８と、警告灯６９とが備えられている。また、制御回路６３には、ＣＰＵ６１Ａ、ＲＡＭ６１Ｂ、ＲＯＭ６１Ｃ、補助記憶装置６１Ｄ（例えば、ＨＤＤ又はＳＤＤ）、リアルタイムクロック６１Ｅ（以下、「ＲＴＣ６１Ｅ」という）、バックアップ電源６１Ｆ等とが備えられている。そして、コンソール６８に備えた連続運転ボタンがオン操作されることで、ＣＰＵ６１Ａが、ＲＯＭ６１Ｃに保存されているワーク製造用プログラムを実行し、トランスファプレス機５０が、上記の通り複数のワークを順次製造する動作状態になる。そして、予め設定された個数のワークの製造が完了するか、コンソール６８に備えた運転終了ボタンがオン操作されることで、トランスファプレス機５０が停止状態になる。

また、トランスファプレス機５０には、異常を検出するために複数の計測機器が備えられ、それらの計測結果が補助記憶装置６１Ｄに保存されるようになっている。その一例として、例えば、ラム５１の駆動源である主モータ５７の電流を検出する電流計６２Ａと、主モータ５７の温度を検出すための温度センサ６３Ａとが挙げられる。それら電流計６２Ａ及び温度センサ６３Ａによる計測データは、所定周期でＣＰＵ６１Ａに取り込まれ、ＲＴＣ６１Ｅによる時刻データを付された経時データ（具体的には、ログデータ）にされて、補助記憶装置６１Ｄに保存される。また、前述のワーク測定装置５６による測定データも時刻データを付された経時データにされて補助記憶装置６１Ｄに保存される。

なお、上記の例では、計測機器やワーク測定装置にて計測・測定される物理量として、電流、温度、寸法を挙げたが、経時的に変化し得る物理量であれば、それら電流等以外のものであってもよい。また、経時データは、物理量を計測等された時間を特定することができるデータであれば、ログデータでなくてもよい。

ＣＰＵ６１Ａは、各計測機器の計測結果と基準値とを比較し、計測結果が第１基準値を超えた場合には、警告灯６９を警告用の色で点灯させ、第２基準値を超えた場合には、警告灯６９を異常用の色で点灯させてトランスファプレス機５０を強制的に非常停止する。また、ＣＰＵ６１Ａは、コンソール６８に備えた非常停止ボタン（図示せず）がオン操作されたり、トランスファプレス機５０を包囲する安全柵（図示せず）が開放された場合も異常と判断してトランスファプレス機５０を非常停止する。そして、非常停止した場合には、異常が解消されかつリセット操作が行われない限り、トランスファプレス機５０の再起動は許容されない。また、異常が解消されなければ、リセット操作が行われても、その操作は無効になる。

ＣＰＵ６１Ａは、トランスファプレス機５０の状態が、動作状態であるか、異常を有する異常停止状態か、異常を有しない正常停止状態かを特定する状態データを生成する。そして、状態が切り替わったタイミングでＲＴＣ６１Ｅから時刻データを取得し、その時刻データを状態データに付して経時データを生成する。そして、状態データの経時データも、上述した計測データの経時データと同様に、補助記憶装置６１Ｄに保存される。また、コントローラ６０には、補助記憶装置６１Ｄに保存された経時データを外部に出力するためのデータ出力部６０Ａが備えられている。

図２に示すように、トランスファプレス機５０を監視する本実施形態の監視システム１０Ａは、例えば、第１と第２の監視カメラ１１，１２と、パソコン１３とを有する。第１の監視カメラ１１は、例えば、トランスファプレス機５０のうち板金からブランク材を打ち抜く加工ステージを撮像するように設置されている。また、第２の監視カメラ１２は、例えば、中間ワークを絞り成形する複数の加工ステージを撮像するように設置されている。第１と第２の監視カメラ１１，１２は、例えば、図示しないＲＴＣを備え、撮像した動画を時刻データ付きの動画データにして出力する。

パソコン１３は、ＣＰＵ１４、ＲＡＭ１５、ＲＯＭ１６、補助記憶装置１７、ＲＴＣ１８、バックアップ電源１９、モニタ２０と、マウス２１及びキーボード２２からなるコンソール２３とを備える。また、パソコン１３は、第１と第２の監視カメラ１１，１２と、トランスファプレス機５０のコントローラ６０とに有線又は無線にて接続されている。

パソコン１３は、補助記憶装置１７にインストールされている監視データプログラムをＣＰＵ１４が実行することで、図３のブロック図に示された監視データ処理装置３０Ａとして機能する。

監視データ処理装置３０Ａは、データ記録部２５と画像データ生成部２６と動画取込部２７と表示制御部２８とを備える。また、画像データ生成部２６と表示制御部２８とから画像表示部２６Ａが構成され、動画取込部２７と表示制御部２８とから動画表示部２７Ａが構成されている。

データ記録部２５は、第１と第２の監視カメラ１１，１２が出力する動画データを取得して補助記憶装置１７に保存する。その際、動画データは、所定期間（例えば、１分、１０分等）の動画ファイルに分けられて補助記憶装置１７に保存される。また、データ記録部２５は、トランスファプレス機５０のコントローラ６０から前述した測定データ、計測データ及び状態データの各経時データを取得して補助記憶装置１７に保存する。それら経時データは、補助記憶装置１７に保存した動画の撮像中のものであり、上記動画ファイルに紐付けられた経時データファイルとして補助記憶装置１７に保存される。

画像データ生成部２６は、補助記憶装置１７に保存されている過去一定期間の経時データに基づいて経時画像を生成する。また、画像データ生成部２６は、補助記憶装置１７に保存されている複数のテンプレート画面を取得し、それらテンプレート画面のうち予め定められた表示エリアに経時画像を嵌め込み、図４～図８に例示された第１～第３の監視画面Ｇ１～Ｇ３と入力操作画面Ｇ４とを含む複数の監視・操作画面の画像データを生成する。そして、それら監視・操作画面の画像データが表示制御部２８に付与され、表示制御部２８が、付与された画像データに応じた監視・操作画面をモニタ２０に表示する。その際、表示制御部２８は、動画取込部２７からの動画データに基づく動画を、監視・操作画面に設けられる所定の表示エリアに組み込んでモニタ２０に表示する。

具体的には、図４～図８に示すように第１～第３の監視画面Ｇ１～Ｇ３と入力操作画面Ｇ４（これらを総称して「監視・操作画面Ｇ１～Ｇ４」という）とには、以下のものが共通して表示されるようになっている。即ち、監視・操作画面Ｇ１～Ｇ４には、上側左端部に、時刻表示部Ａ１が備えられ、その右横に再生／停止ボタンＡ２が備えられている。再生／停止ボタンＡ２は、マウス２１にてオン操作することで、図４に示される再生マークのアイコンを表示した状態と、図６に示される停止マークのアイコンを表示した状態とに切り替わる。時刻表示部Ａ１に関しては、後に説明する。

監視・操作画面Ｇ１～Ｇ４のうち再生／停止ボタンＡ２の右隣の位置から右端部に亘る範囲には、コンソール２３にてオン操作可能な複数の画面選択ボタンＢ１，Ｂ２，Ｂ３，Ｂ４が備えられている。そして、画像データ生成部２６は、「稼働履歴１」と付された画面選択ボタンＢ１がマウス２１にてオン操作されたときには、表示制御部２８に、図４に示される第１の監視画面Ｇ１の画像データを付与し、「稼働履歴２」と付された画面選択ボタンＢ２がオンされたときには、図５に示される第２の監視画面Ｇ２の画像データを表示制御部２８に付与し、「稼働履歴３」と付された画面選択ボタンＢ３がオンされたときには、図７に示される第３の監視画面Ｇ３の画像データを表示制御部２８に付与し、「入力画面」と付された画面選択ボタンＢ４がオンされたときには、図８に示される入力操作画面Ｇ４の画像データを表示制御部２８に付与する。また、コンソール２３が操作されていない初期状態では、画像データ生成部２６は、図４に示した第１の監視画面Ｇ１の画像データを表示制御部２８に付与する。

監視・操作画面Ｇ１～Ｇ４の右上部には、現状のトランスファプレス機５０の状態が、動作状態であるか停止状態であるかを示す第１点灯部Ｃ１と、トランスファプレス機５０にアラームが発生中であるか否かを示す第２点灯部Ｃ２とが備えられている。

監視・操作画面Ｇ１～Ｇ４のそれぞれは、以下のようになっている。図４に示すように、第１の監視画面Ｇ１の下辺部分には、「経時画像」としての状態表示バー４０が表示される。その状態表示バー４０は、横方向に延びるバーであり、画像データ生成部２６は、状態表示バー４０を、補助記憶装置１７に保存されている状態データの経時データに基づいて生成する。

詳細には、状態表示バー４０の全長は過去一定期間の時間に相当し、左から右に向かうに従って時間が経過し、状態表示バー４０の長手方向の任意の位置が、過去一定期間における任意の瞬間を意味する。また、状態表示バー４０の下隣には、状態表示バー４０における複数位置に対応する日時が付されている。また、状態表示バー４０は、トランスファプレス機５０の状態に応じて３色に色分けされる。図４では、状態表示バー４０のドットのハッチング（図４の符号４０Ａを付した部分のハッチング）が第１の色であり、クロスのハッチング（図４の符号４０Ｂを付した部分のハッチング）が第２の色であり、斜線のハッチング（図４の符号４０Ｃを付した部分のハッチング）が第３の色である。そして、第１の色が、トランスファプレス機５０が動作状態であることを意味し、第２の色が、トランスファプレス機５０が異常停止状態であることを意味し、第３の色が、トランスファプレス機５０が正常停止状態であることを意味する。

画像データ生成部２６は、状態表示バー４０に重ねてスライダ４１を表示する。スライダ４１は、例えば、状態表示バー４０の縦幅全体に亘って延びる縦線の両端部に三角形の重ねた形状をなしている。そして、このスライダ４１は、コンソール２３の操作に応じて状態表示バー４０上の任意の位置にスライドさせることができる。具体的には、モニタ２０に表示されるポインタをマウス２１の操作によりスライダ４１に重ねてドラッグするか、キーボード２２に設けられた矢印のキーをオン操作することでスライダ４１をスライド操作することができる。そして、状態表示バー４０におけるスライダ４１の位置に対応する日時が前述した時刻表示部Ａ１に表示される。

第１の監視画面Ｇ１のうち状態表示バー４０の上方には、動画表示窓４３，４４が横並びに配置されている。図４における左側の動画表示窓４３は、第１の監視カメラ１１が撮像した動画を表示するためのものであり、右側の動画表示窓４４は、第２の監視カメラ１２が撮像した動画を表示するためのものである。

動画表示窓４３，４４には、再生／停止ボタンＡ２が再生マークのアイコンを表示している状態、即ち、再生が行われていない状態では、現在、第１及び第２の監視カメラ１１，１２が撮像している所謂リアルタイムの動画が表示される。具体的には、動画取込部２７が、データ記録部２５を通して第１及び第２の監視カメラ１１，１２から動画データを取得し、その動画データを表示制御部２８に付与することで、動画表示窓４３，４４にリアルタイムの動画が表示される。

再生／停止ボタンＡ２の再生マークのアイコンがオン操作されて、再生／停止ボタンＡ２が停止マークのアイコンに切り替わると、時刻表示部Ａ１に表示されている日時、つまり、状態表示バー４０におけるスライダ４１の位置に対応する日時からの動画が動画表示窓４３，４４に表示される。

具体的には、動画取込部２７が、補助記憶装置１７から状態表示バー４０におけるスライダ４１の位置に対応する日時を含んだ動画ファイルを取得して表示制御部２８に付与し、表示制御部２８は、その動画ファイルに基づいてスライダ４１の位置に対応する日時からの動画を再生して動画表示窓４３，４４に表示する。

また、それら動画が再生されている間は、その動画の進行に応じてスライダ４１が状態表示バー４０上を移動し、時刻表示部Ａ１に表示される日時も変化する。さらに、マウス２１にてスライダ４１をドラッグして状態表示バー４０における位置を移動することで、それに対応して動画表示窓４３，４４に表示される動画が変更される。

第１の監視画面Ｇ１のうち動画表示窓４３，４４の上方には、アラーム表示部４５が備えられている。このアラーム表示部４５には、「Ａｌａｒｍ ＩＤ」、「日時」、「警告レベル」、「メッセージ」等の欄が備えられ、状態表示バー４０に対応する過去一定期間におけるアラームの番号と、発生日時と、アラームの警告レベル、メッセージ等が表示される。なお、アラーム表示部４５の右端には、スクロール操作部４５Ａが備えられ、そのスクロール操作部４５Ａを操作することで、アラーム表示部４５に表示内容の全体を見ることができる。

次に、図５及び図６を参照して、第２の監視画面Ｇ２について説明する。図５に示すように、第２の監視画面Ｇ２には、第１の監視画面Ｇ１の動画表示窓４３，４４の代わりに、「経時画像」としてのグラフ４６，４７が上下に並べて表示される。下側のグラフ４６は、横軸を時間、縦軸を主モータ５７の電流値としたものである。一方、上側のグラフ４７は、横軸を時間、縦軸を主モータ５７の温度としたものである。そして、これらグラフ４６，４７の横軸である時間軸と状態表示バー４０の長手方向の時間軸とは一致している。即ち、グラフ４６，４７の横軸と直交する垂直線（図示せず）を、それらの横軸の任意の位置に配置したときに、その垂直線とグラフ４６，４７及び状態表示バー４０とがそれぞれ交差する位置にて特定される日時は、全て同じ日時になるようにグラフ４６，４７及び状態表示バー４０が表示されている。

第２の監視画面Ｇ２において、再生／停止ボタンＡ２が再生マークのアイコンを表示している状態では、第１の監視画面Ｇ１で説明したアラーム表示部４５がグラフ４７の上方に表示される。そして、再生／停止ボタンＡ２の再生マークのアイコンがオン操作されて、図６に示すように停止マークのアイコンに切り替わると、アラーム表示部４５に代わって動画表示窓８８，８９が表示される。動画表示窓８８，８９は、前述した第１の監視画面Ｇ１の動画表示窓４３，４４を縮小したもので、それら動画表示窓８８，８９に、動画表示窓４３，４４と同様に、時刻表示部Ａ１に表示されている日時からの動画が表示される。

次に、図７を参照して、第３の監視画面Ｇ３について説明する。同図に示すように、第３の監視画面Ｇ３には、第１の監視画面Ｇ１の状態表示バー４０及び動画表示窓４３，４４の代わりに、「経時画像」としてのグラフ４７，４８Ａ～４８Ｃが上下に並べて表示される。最も上方に配置されるグラフ４７は、前述した第２の監視画面Ｇ２のグラフ４７と同じである。上から２番目のグラフ４８Ａは、前述のワーク測定装置５６にて測定されるワークの高さ寸法の目標値に対するずれ量を縦軸、時間を横軸にしたものであり、上から３番目のグラフ４８Ｂは、ワークの縦横の縦幅寸法の目標値に対するずれ量を縦軸、時間を横軸にしたものであり、上から４番目のグラフ４８Ｃは、ワークの縦横の横幅寸法の目標値に対するずれ量を縦軸、時間を横軸にしたものである。そして、これらグラフ４７，４８Ａ～４８Ｃは横軸を一致させた状態に表示され、それらに共通する横軸座標バー８０がグラフ４８Ｃの下方に表示されている。

横軸座標バー８０には、一定間隔で日時が付されている。また、横軸座標バー８０にはスライダ８１が重ねて表示されている。そのスライダ８１は、例えば、横軸座標バー８０上に配置されて黒点から真上に垂直線を延ばした形状をなし、第１の監視画面Ｇ１のスライダ４１と機能・操作は同じになっている。

第３の監視画面Ｇ３においても、第２の監視画面Ｇ２と同様に、再生／停止ボタンＡ２が再生マークのアイコンを表示している状態では、グラフ４７の上方にアラーム表示部４５が表示されている。そして、再生マークのアイコンがオン操作されて停止マークのアイコンに切り替わると、アラーム表示部４５に代わって動画表示窓８８，８９が表示され（図示せず）、それら動画表示窓８８，８９に時刻表示部Ａ１に表示されている日時からの動画が表示される。

次に、図８を参照して、入力操作画面Ｇ４について説明する。この入力操作画面Ｇ４は、過去一定期間におきたイベントをマニュアル入力するものである。そのために、入力操作画面Ｇ４には、第１の監視画面Ｇ１の一方の動画表示窓４３の代わりに入力操作窓２９が備えられている。また、他方の動画表示窓４４の代わりに、動画の一部を静止画として表示するための画像表示窓８３が備えられている。

入力操作窓２９には、時刻表示部２９Ａとイベントボックス２９Ｂと備考ボックス２９Ｃとが備えられている。時刻表示部２９Ａには、時刻表示部Ａ１と同様に状態表示バー４０におけるスライダ４１の位置に応じた日時が表示される。そして、時刻表示部２９Ａに表示された日時における静止画が画像表示窓８３に表示される。その画像表示窓８３の静止画は、画像表示窓８３の上に配置された表示切替ボタン８４によって、第１の監視カメラ１１による静止画か第２の監視カメラ１２による静止画に切り替えることができる。

イベントボックス２９Ｂには、登録するイベント名の候補がリストアップされている。そして、そのリストアップされているイベント名の１つにポインタを重ねることでカーソルを表示させ、その状態で、イベントボックス２９Ｂの下方の登録ボタン２９Ｄをオン操作すると、そのイベントが時刻表示部２９Ａに表示の日時に行われたものとして登録される。そして、アラーム表示部４５の「Ａｌａｒｍ ＩＤ」と「日時」の欄に、登録されたイベント名と日時が表示される。

また、備考ボックス２９Ｃには、登録する備考の内容の候補がリストアップされている。そして、イベントボックス２９Ｂの場合と同様に、備考の内容の１つを選択して、備考ボックス２９Ｃの下方の登録ボタン２９Ｄをオン操作すると、その備考の内容が時刻表示部２９Ａに表示の日時に行われたものとして登録される。そして、アラーム表示部４５の「メッセージ」と「日時」の欄に、登録された備考の内容と日時とが表示される。

なお、イベントボックス２９Ｂ、備考ボックス２９Ｃにカーソルが表示された状態でキーボード２２にて文字入力を行うことで、リスト以外のものを登録することができるようになっている。また、この入力操作画面Ｇ４においても、第２及び第３の監視画面Ｇ２，Ｇ３と同様に、再生／停止ボタンＡ２の操作により、アラーム表示部４５の代わりに、動画表示窓８８，８９を出現させて動画が表示させることができるようになっている。なお、動画表示窓８８，８９に動画が表示されているときには、画像表示窓８３にも動画が表示される。

本実施形態の構成に関する説明は以上である。次に、この実施形態の作用効果について説明する。

例えば、トランスファプレス機５０が過去一定期間の間に停止した場合、例えば、監視データ処理装置３０Ａにて第１の監視画面Ｇ１をモニタ２０に表示させれば、状態表示バー４０にて過去一定期間のトランスファプレス機５０の状態の推移を目視確認することができる。それと共に、アラーム表示部４５にて過去一定期間に発生したアラーム等を確認することができる。このとき、動画表示窓４３，４４にてリアルタイムのトランスファプレス機５０の動画も同時に確認することができる。そして、トランスファプレス機５０が異常停止する瞬間の動画を確認したい場合には、状態表示バー４０においてトランスファプレス機５０が異常停止状態（図４のうち符号４０Ｂで示した部分）になる直前の位置にスライダ４１を移動し、再生／停止ボタンＡ２の再生のアイコンをオン操作すればよい。すると、動画表示窓４３，４４に、トランスファプレス機５０が異常停止する瞬間の動画が表示される。

また、異常停止の更なる原因調査を行う場合には、画面選択ボタンＢ２をオン操作して、図５に示すように、第２の監視画面Ｇ２をモニタ２０に表示させればよい。すると、トランスファプレス機５０の主モータ５７の電流と温度の時間経過に伴い変化を示したグラフ４６，４７が、状態表示バー４０と時間軸を一致させた状態で表示される。

そこで、例えば、トランスファプレス機５０が異常停止状態になる前の動作状態（図５のうち符号４０Ａで示した部分）の間に、グラフ４６，４７上で、主モータ５７の電流又は温度が変化している点が見つかった場合には、そのような変化点の直前の位置にスライダ４１を移動し、再生／停止ボタンＡ２の再生のアイコンをオン操作すればよい。すると、図５に示されたアラーム表示部４５に代わって図６に示すように動画表示窓８８，８９が出現し、電流又は温度の変化する瞬間を含んだ動画が表示される。これにより、電流又は温度の変化の原因を見つけることができる場合がある。具体的には、例えば、電流又は温度の変化の原因として、ワークの材料となる板金が正常な状態より変形していたり、潤滑油の供給が滞って煙が発生している等の状況を動画にて見つけることができる場合がある。

なお、例えば、トランスファプレス機５０が異常停止はしていないが、潤滑油を調整したり、トランスファプレス機５０の動作速度を下げるような措置を行った場合には、画面選択ボタンＢ４をオン操作して図８に示された入力操作画面Ｇ４をモニタ２０に表示すれば、行った措置を履歴として登録することができる。そして、その後、所定の措置によって異常を回避することできたか否かを容易に確認することができる。

ワークの品質に寸法変化が生じた場合には、画面選択ボタンＢ３をオン操作して、図７に示された第３の監視画面Ｇ３をモニタ２０に表示させればよい。すると、ワークの高さ、縦幅、横幅の各寸法の目標値に対するずれ量の推移がグラフ４８Ａ～４８Ｃとして表示される。そこで、グラフ４８Ａ～４８Ｃ上で、何れかの寸法が変化する点が見つかった場合には、そのような変化点の直前の位置にスライダ８１を移動し、再生／停止ボタンＡ２の再生のアイコンをオン操作して動画を表示することで、変化の原因を見つけることができる場合がある。

このように本実施形態の監視データ処理装置３０Ａによれば、過去一定期間の動画の撮像中におけるトランスファプレス機５０及びそれが製造するワークの状態及び物理量の推移が、経時画像（状態表示バー４０及びグラフ４６，４７，４８Ａ～４８Ｃ）としてモニタ２０に表示される。そして、それら経時画像上で、トランスファプレス機５０又はワークに異常や変化が見つかった場合に、経時画像上においてそのような異常や変化が見つかった特別な位置（特別な瞬間）をコンソール２３にて選択することで、その選択された特別な位置（特別な瞬間）の動画をモニタ２０に表示させることができる。このようにして本実施形態の監視データ処理装置３０Ａによれば、トランスファプレス機５０の動画における特別な瞬間を容易に探し出して見ることができる。

しかも、図５及び図７に示すように、複数種類の経時画像（状態表示バー４０及びグラフ４６，４７，４８Ａ～４８Ｃ）を時間軸に一致させて纏めて表示することができるので、異常や変化を多面的に捉えて、動画における特別な瞬間を探し出すことができる。また、経時画像と時間軸を一致させて日時がモニタ２０に表示されるので、時刻に基づいて、例えば、停電や地震等の外乱要因を判断することもできる。

［第２実施形態］
本実施形態の監視データ処理装置は、第１実施形態の監視データ処理装置３０Ａの機能に加え、図９に示した検索操作画面Ｇ５をモニタ２０に表示することができるようになっている。具体的には、検索操作画面Ｇ５を含む全ての監視・操作画面Ｇ１～Ｇ５に画面選択ボタンＢ５が備えられ、その画面選択ボタンＢ５をオン操作することで検索操作画面Ｇ５がモニタ２０に表示されるようになっている。

検索操作画面Ｇ５には、入力操作画面Ｇ４の入力操作窓２９に代えて検索操作窓８７が設けられ、入力操作画面Ｇ４の状態表示バー４０とは異なる状態表示バー８５が下辺部分に設けられ、さらに、アラーム表示部４５に代えて検索結果表示部８６が設けられている。また、入力操作画面Ｇ４の画像表示窓８３に代えて動画表示窓４４が設けられている。

検索操作窓８７には、アラームボックス８７Ａ、イベントボックス８７Ｂ、備考ボックス８７Ｃが横並びに配置され、それらのうちイベントボックス８７Ｂ、備考ボックス８７Ｃは、入力操作画面Ｇ４のイベントボックス２９Ｂ及び備考ボックス２９Ｃと同じ内容になっている。また、アラームボックス８７Ａには、アラーム名の選択候補がリストアップされている。そして、アラームボックス８７Ａ、イベントボックス８７Ｂ、備考ボックス８７Ｃのうちの少なくとも１つのボックス内の１つの項目を選択して検索ボタン８７Ｄをオン操作すると、過去一定期間におけるアラーム、イベント、備考の履歴から、選択された項目と一致するものが検索結果表示部８６にリストアップされる。

検索結果表示部８６には、検索項目、日時、マークの欄が設けられ、検索項目の欄には、ヒットした検索項目のアラーム、イベント、備考の内容が表示され、日時の欄には、ヒットしたアラーム等の発生日時が表示される。また、マークの欄には、リストアップされた項目を区別するためのマークが自動的に付される。

状態表示バー８５は、検索を行う前は、例えば、状態表示バー４０を白抜きにした形状をなしている。そして、検索結果が検索結果表示部８６にリストアップされると、そのリスト中のマークが、状態表示バー８５の対応する日時の位置に重ねて表示される。これにより、状態表示バー８５は、トランスファプレス機５０の状態の経時変化を示した経時画像になる。

そして、状態表示バー８５上でスライダ４１を任意の位置に移動して再生／停止ボタンＡ２をオン操作すると、検索操作窓８７の隣りの動画表示窓４４に、スライダ４１に対応した第１又は第２の監視カメラ１１，１２の何れか一方の動画が表示される。また、画像表示窓８３の上の表示切替ボタン８４によって、動画表示窓４４に表示される動画を、第１又は第２の監視カメラ１１，１２の一方から他方の動画に切り替えることができる。

［他の実施形態］
前記第１実施形態では、パソコン１３のＣＰＵ１４が、補助記憶装置１７にインストールされている監視データプログラムを実行することで監視データ処理装置３０Ａとして機能するようになっていたが、例えば、監視データプログラムがクラウドサーバーにて実行されて、パソコン１３等のユーザ端末とクラウドサーバーとの間の通信により、ユーザ端末のモニタに上記した監視・操作画面Ｇ１～Ｇ５が表示されるようにしてもよい。

前記実施形態では、データ記録部２５が、第１及び第２の監視カメラ１１，１２が出力する動画データと、コントローラ６０が出力する経時データとを直接取得していたが、それら動画データ及び経時データがクラウドにアップされ、そのアップされたデータをデータ記録部２５がダウンロードして取得するようにしてもよいし、クラウドサーバーがデータ記録部として機能して、動画データ及び経時データをクラウドの記憶部に保存する構成としてもよい。

前記実施形態のコンソール２３は、マウス２１とキーボード２２であったが、タッチパネルであってもよい。

前記第１実施形態では、産業機械としてトランスファプレス機５０を例示したが、産業機械であれば、どのようなものであってもよい。

＜付記＞
以下、上記実施形態から抽出される特徴を含んだ本開示に係る特徴群について、必要に応じて効果等を示しつつ説明する。なお、以下では、理解の容易のため、上記実施形態において対応する構成の符号を括弧書きで示すが、これら特徴群は、この括弧書きで示した符号の構成に限定されるものではない。

［特徴１］
監視カメラ（１１，１２）にて撮像される産業機械（５０）の動画のデータと、その撮像中の前記産業機械（５０）又はそれが製造するワークの、状態若しくは物理量の、経時データと、を取得して記憶部（１７）に保存するデータ記録部（２５）と、過去一定期間分の前記経時データから、時間軸に沿った前記経時データの変化を視認可能に示す経時画像（４０，４６，４７，４８Ａ～４８Ｃ）を生成して、モニタ（２０）に表示する画像表示部（２６Ａ）と、前記経時画像（４０，４６，４７，４８Ａ～４８Ｃ）の時間軸に沿った任意の位置を選択可能なコンソール（２３）と、前記コンソール（２３）にて選択された位置に対応する前記産業機械（５０）の前記動画を、前記モニタ（２０）に表示する動画表示部（２７Ａ）と、を備える監視データ処理装置（３０Ａ）。

［特徴２］
前記記憶部（１７）に保存される前記経時データには、前記産業機械（５０）の状態が動作状態か停止状態かを判別可能にする第１の経時データが含まれ、前記第１の経時データに基づく前記経時画像（４０）は、前記動作状態か前記停止状態かを判別可能に示すように生成される特徴１に記載の監視データ処理装置（３０Ａ）。

［特徴３］
前記第１の経時データにおける前記産業機械（５０）の前記停止状態には、異常を有している異常停止状態と、異常を有しない正常停止状態とが含まれ、前記第１の経時データに基づく前記経時画像（４０）は、前記異常停止状態か前記正常停止状態かを判別可能に示すように生成される特徴２に記載の監視データ処理装置（３０Ａ）。

［特徴４］
前記経時画像（４０）は、前記時間軸に沿って延びるバーを、前記産業機械（５０）或いは前記ワークの状態の相違又は物理量に応じて色分けした態様になっている特徴１から３の何れか１の特徴に記載の監視データ処理装置（３０Ａ）。

［特徴５］
前記記憶部（１７）に保存される前記経時データには、前記産業機械（５０）或いは前記ワークの物理量の第２の経時データが含まれ、前記第２の経時データに基づく前記経時画像（４６，４７，４８Ａ～４８Ｃ）は、前記時間軸を横軸とし、前記物理量を縦軸とするグラフ（４６，４７，４８Ａ～４８Ｃ）である特徴１から４の何れか１の特徴に記載の監視データ処理装置（３０Ａ）。

［特徴６］
前記データ記録部（２５）は、複数種類の前記経時データを前記記憶部（１７）に保存し、前記画像表示部（２６Ａ）は、複数種類の前記経時データから複数種類の前記経時画像（４０，４６，４７，４８Ａ～４８Ｃ）を生成し、それら複数種類の経時画像（４０，４６，４７，４８Ａ～４８Ｃ）を前記時間軸に一致させて前記モニタ（２０）に一緒に表示する特徴１から特徴５の何れか１の特徴に記載の監視データ処理装置（３０Ａ）。

［特徴７］
前記データ記録部（２５）は、前記動画の撮像日時の日時データを前記記憶部（１７）に保存し、前記画像表示部（２６Ａ）は、前記経時画像（４０，４６，４７，４８Ａ～４８Ｃ）と前記時間軸を一致させて前記日時データに基づく日時を前記モニタ（２０）に表示する特徴１から特徴６の何れか１の特徴に記載の監視データ処理装置（３０Ａ）。

［特徴８］
前記画像表示部（２６Ａ）は、前記経時画像（４０，４６，４７，４８Ａ～４８Ｃ）と併せてスライダ（４１，８１）を前記モニタ（２０）に表示し、そのスライダ（４１，８１）を前記コンソール（２３）の操作に応じて前記時間軸に沿って移動させる特徴１から７の何れか１の特徴に記載の監視データ処理装置（３０Ａ）。

［特徴９］
前記データ記録部（２５）は、複数の前記監視カメラ（１１，１２）にて同時に撮像される複数の動画のデータを取得して記憶部（１７）に保存し、前記動画表示部（２７Ａ）は、前記コンソール（２３）にて選択された位置に対応する前記複数の動画を前記モニタ（２０）に表示する特徴１から８の何れか１の特徴に記載の監視データ処理装置（３０Ａ）。

上記した特徴１の監視データ処理装置によれば、過去一定期間の動画の撮像中における産業機械又はそれが製造するワークの状態又は物理量の推移が、経時画像としてモニタに表示される。そして、経時画像上で、産業機械又はワークに異常や変化が見つかった場合に、経時画像上においてそのような異常や変化が見つかった特別な位置（つまり、特別な瞬間）をコンソールにて選択することで、その選択された特別な位置（特別な瞬間）に対応する産業機械の動画をモニタに表示させることができる。このようにして本発明の一態様によれば、産業機械の動画における特別な瞬間を容易に探し出して見ることができる。

経時データは、産業機械又はそれが製造するワークに係るもので、動画の撮像中に変化し得るものであればどのようなものでもよい。産業機械の状態の経時データの一例としては、上記特徴２及び３のようなものに加え、例えば、自動運転状態かマニュアル運転状態かを判別するデータや、省エネ運転状態か高速運転状態かを判別するデータ等が挙げられる。また、ワークの状態の経時データの一例としては、例えば、ワークの色が問題になる場合には、異常色状態か正常色状態かを判別するデータや、ワークのバリが問題になる場合には、バリ有り状態かバリ無し状態かを判別するデータ等が挙げられる。さらに、産業機械の物理量の経時データの一例としては、例えば、産業機械の温度、油圧、空気圧、電流、電圧、磁気、騒音、振動等のデータが挙げられる。また、ワークの物理量の経時データの一例としては、例えば、ワークの全体又は各部位の寸法、質量、剛性、硬度、温度等のデータが挙げられる。また、経時画像は、時間軸に沿った経時データの変化を視認可能に示すものであれば、どのようなものであってもよく、その一例としては、例えば、上記特徴４のようなバーや、上記特徴５のようなグラフが挙げられる。

また、記憶部に保存される経時データは、１種類でもよいし、複数種類でもよい。特徴６の監視データ処理装置のように、複数種類の経時データを記憶部に保存し、複数種類の経時データに基づく複数種類の経時画像を時間軸に一致させてモニタに一緒に表示すれば、それら複数種類の経時画像に基づく多面的な判断から動画における特別な瞬間を探し出すことができる。

また、特徴７の監視データ処理装置では、経時画像と時間軸を一致させて日時がモニタに表示されるので、時刻に基づいて、例えば、停電や地震等の外乱要因を判断することができる。

特徴８の監視データ処理装置では、経時画像と併せてスライダをモニタに表示し、そのスライダを時間軸に沿って移動させて経時画像上で任意の位置を選択することができるので、経時画像上での位置の選択操作が容易になる。

特徴９の監視データ処理装置では、選択された時刻の複数の動画を同時に見て異常の原因を判断することができる。

なお、本明細書及び図面には、特許請求の範囲に含まれる技術の具体例が開示されているが、特許請求の範囲に記載の技術は、これら具体例に限定されるものではなく、具体例を様々に変形、変更したものも含み、また、具体例から一部を単独で取り出したものも含む。

１１ 第１の監視カメラ
１２ 第２の監視カメラ
１７ 補助記憶装置（記憶部）
２０ モニタ
２３ コンソール
２５ データ記録部
２６Ａ 画像表示部
２７Ａ 動画表示部
３０Ａ 監視データ処理装置
４０，８５ 状態表示バー（経時画像）
４１，８１ スライダ
４６，４７，４８Ａ～４８Ｃ グラフ（経時画像）
５０ トランスファプレス機（産業機械）
８０ 横軸座標バー

Claims (6)

1. 監視カメラにて撮像される産業機械の動画のデータと、その撮像中の前記産業機械又はそれが製造するワークの、状態若しくは物理量の、経時データと、を取得して記憶部に保存するデータ記録部と、
   過去一定期間分の前記経時データから、時間軸に沿った前記経時データの変化を視認可能に示す経時画像を生成してモニタに表示すると共に、前記経時画像の前記時間軸における位置を示すためのスライダを前記経時画像に重ねて表示する画像表示部と、
   前記経時画像を固定した状態で前記スライダを前記時間軸に沿った任意の位置に移動操作するためのコンソールと、
   前記スライダの位置に対応する時間の前記産業機械の前記動画を、前記モニタに表示する動画表示部と、を備え、
   前記記憶部に保存される前記経時データには、前記産業機械の状態が動作状態か停止状態かを判別可能にする第１の経時データが含まれ、
   前記第１の経時データに基づく前記経時画像は、前記動作状態か前記停止状態かを判別可能に示すように生成される監視データ処理装置。
2. 前記第１の経時データにおける前記産業機械の前記停止状態には、異常を有している異常停止状態と、異常を有しない正常停止状態とが含まれ、
   前記第１の経時データに基づく前記経時画像は、前記異常停止状態か前記正常停止状態かを判別可能に示すように生成される請求項１に記載の監視データ処理装置。
3. 前記経時画像は、前記時間軸に沿って延びるバーを、前記産業機械或いは前記ワークの状態の相違又は物理量に応じて色分けした態様になっている請求項１に記載の監視データ処理装置。
4. 前記記憶部に保存される前記経時データには、前記産業機械或いは前記ワークの物理量の第２の経時データが含まれ、
   前記第２の経時データに基づく前記経時画像は、前記時間軸を横軸とし、前記物理量を縦軸とするグラフである請求項１に記載の監視データ処理装置。
5. 前記データ記録部は、複数種類の前記経時データを前記記憶部に保存し、
   前記画像表示部は、複数種類の前記経時データから複数種類の前記経時画像を生成し、それら複数種類の経時画像を前記時間軸に一致させて前記モニタに一緒に表示する請求項１に記載の監視データ処理装置。
6. 前記データ記録部は、複数の前記監視カメラにて同時に撮像される複数の動画のデータを取得して記憶部に保存し、
   前記動画表示部は、前記スライダの位置に対応する前記複数の動画を前記モニタに表示する請求項１から５の何れか１の請求項に記載の監視データ処理装置。

Images