JP2014071614A - 機器情報表示装置、機器情報表示システム、及び機器情報表示方法 - Google Patents

Abstract

【課題】機器の種類、形状、機能に影響を受けずに、機器の状態を表示できるようにすることである。
【解決手段】設備監視制御システム１は、カメラ１１と、機器２０，３０との通信によって当該機器２０，３０の情報を取得する制御部５４と、制御部５４が取得した機器の情報とカメラ１１による撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶される機器データベース５５と、カメラ１１による撮影画像と識別用画像とを照合する画像処理部５３と、画像処理部５３が識別用画像を基に識別できたカメラ１１による撮影画像内の領域と、当該識別用画像に対応付けられている機器の情報とを対応付けて表示装置４３に表示する操作端末４２と、を有する。
【選択図】図１

Description

本発明は、ビル、工場、発電所、上下水等の設備監視において、設備内で監視対象となる機器の状態をモニタ等に表示する技術に関する。

特許文献１には、電力計や油圧計等の機器を監視カメラを用いて遠隔で監視するシステムが開示されている。このシステムは、監視室のタッチパネルモニタ上に表示される機器に対してタッチを伴うジェスチャ操作が行われると、そのジェスチャ操作に応じて機器を遠隔で制御する。

特開２００３−０６７０４８号公報

ところで、特許文献１に開示のシステムでは、タッチパネル上に機器の状態を適切に表示する必要がある。
しかし、機器の種類、形状、機能が多くなると、タッチパネル上に機器の状態を適切に表示できない恐れがある。この結果、このシステムでは、遠隔で機器を適切に制御できなくなってしまう。
本発明の目的は、機器の種類、形状、機能に影響を受けずに、機器の状態を表示できるようにすることである。

前記課題を解決するために、（１）本発明の一態様は、機器との通信によって当該機器の情報を取得する機器情報取得部と、前記機器情報取得部が取得した機器の情報とカメラによる撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶される記憶部と、カメラによる撮影画像と前記識別用画像とを照合する照合部と、前記照合部が前記識別用画像を基に識別できた前記カメラによる撮影画像内の領域と、当該識別用画像に対応付けられている前記機器の情報とを対応付けて表示部に表示する表示処理部と、を有する機器情報表示装置を提供する。

（２）本発明の一態様では、前記機器の情報は、機器の状態を示す値であり、前記表示処理部は、前記識別用画像に対応付けられている前記機器の状態を示す値が予め設定されている値に達した場合、前記機器の状態を示す値が予め設定されている値に達していない場合よりも識別性が高くなるように前記領域を表示部に表示することが好ましい。

（３）本発明の一態様では、機器との通信によって当該機器の情報を取得する機器情報取得ステップと、前記機器情報取得ステップで取得した機器の情報とカメラによる撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶部に記憶される記憶ステップと、カメラによる撮影画像と前記識別用画像とを照合する照合ステップと、前記照合ステップで前記識別用画像を基に識別できた前記カメラによる撮影画像内の領域と、当該識別用画像に対応付けられている前記機器の情報とを対応付けて表示部に表示する表示処理ステップと、を有することが好ましい。

（４）本発明の一態様では、前記機器の情報は、機器の状態を示す値であり、前記表示処理ステップは、前記識別用画像に対応付けられている前記機器の状態を示す値が予め設定されている値に達した場合、前記機器の状態を示す値が予め設定されている値に達していない場合よりも識別性が高くなるように前記領域を表示部に表示することが好ましい。

（５）本発明の一態様では、カメラと、機器との通信によって当該機器の情報を取得する機器情報取得部と、前記機器情報取得部が取得した機器の情報と前記カメラによる撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶される記憶部と、前記カメラによる撮影画像と前記識別用画像とを照合する照合部と、前記照合部が前記識別用画像を基に識別できた前記カメラによる撮影画像内の領域と、当該識別用画像に対応付けられている前記機器の情報とを対応付けて表示部に表示する表示処理部と、を有することが好ましい。

本発明によれば、記憶部に記憶してある機器の情報を表示部に表示することで、機器の種類、形状、機能の影響を受けずに、機器の情報を表示できる。

本実施形態に係る設備監視制御システムの構成例を示す図である。 機器Ａの構成例を示す図である。 機器Ｂの構成例を示す図である。 機器データベースに登録されている各機器の機器情報の一例を示す図である。 設備監視制御システムにおけるパターンマッチング処理の一例を示す図である。 設備監視制御システムにおける機器の状態表示のための処理の一例を示す図である。 設備監視制御システムにおける、画像記録装置に既に記録されている過去の撮影画像を用いた機器の状態表示のための処理の一例を示す図である。 カメラの撮影によって得た機器Ａ及び機器Ｂの撮影画像の一例を示す図である。 画像処理部が、認識領域を撮影画像に描画して生成した画像の一例を示す図である。 画像内の機器Ａの識別領域に対応付けて当該機器Ａの情報を重畳表示する一例を示す図である。 画像内の機器Ｂの識別領域に対応付けて当該機器Ｂの情報を重畳表示する一例を示す図である。 機器Ａ及び機器Ｂの情報を一括表示させる一例を示す図である。 機器Ａ及び機器Ｂの情報の共通項目を一括表示させる一例を示す図である。

本発明の実施形態を図面を参照しつつ説明する。
本実施形態では、設備監視制御システムを挙げている。
図１には、本実施形態に係る設備監視制御システム１の構成例を示す。
図１に示すように、設備監視制御システム１は、監視対象設備１０及び監視制御設備４０を有している。そして、設備監視制御システム１では、監視対象設備１０と監視制御設備４０とはインターネット、ＬＡＮ（Local Area Network）等のネットワーク６０を介して通信可能に接続されている。

ここで、監視対象設備１０は、カメラ１１、ネットワークスイッチ１２、機器Ａ２０、及び機器Ｂ３０を有している。各機器２０，３０は、設定値、閾値等が設定可能とされ計測値を表示することができる機器である。例えば、各機器２０，３０は、電力計や圧力計、温度計等である。カメラ１１は、監視対象として各機器２０，３０の様子を撮影する。そして、カメラ１１は、撮影によって得た撮影画像（又はカメラ映像）をネットワーク６０を介して監視制御設備４０に伝送する。

図２には、機器Ａ２０の構成例を示す。
図２に示すように、機器Ａ２０は、記号２１、温度メータ２２、圧力メータ２３、及びバルブスイッチ２４を有している。ここで、記号２１は、機器Ａ２０を表す記号（すなわち、識別記号）である。この機器Ａ２０は、ネットワーク６０を介して監視制御設備４０の制御装置５０による遠隔制御が可能になっている。

また、図３には、機器Ｂ３０の構成例を示す。
図３に示すように、機器Ｂ３０は、温度メータ３１、圧力メータ３２、温度閾値スライダ３３、及び圧力閾値ダイヤル３４を有している。ここで、温度閾値スライダ３３は、温度の閾値を設定するためのスライダである。また、圧力閾値ダイヤル３４は、圧力の閾値を設定するためのダイヤルである。この機器Ｂ３０は、ネットワーク６０を介して監視制御設備４０の制御装置５０による遠隔制御が可能になっている。

監視制御設備４０は、ネットワークスイッチ４１、操作端末４２、表示装置４３、画像記録装置４４、及び制御装置５０を有している。
ここで、制御装置５０は、画像処理や監視対象設備１０の各機器２０，３０の制御を行う。そのために、制御装置５０は、通信Ｉ／Ｆ（インターフェース）５１、画像送受信部５２、画像処理部５３、制御部５４、及び機器データベース５５を有している。この制御装置５０は、例えばサーバである。

ここで、機器データベース５５には、各機器２０，３０の情報（以下、機器情報という。）が登録されている。
図４には、機器データベース５５に登録されている各機器２０，３０の機器情報の一例を示す。

図４に示すように、機器データベース５５には、各機器２０，３０の機器情報として、「機器名称」、「登録画像（「パターン画像」ともいう。）」、「操作／表示部種類」、「制御項目」、「時刻」、及び「状態」の情報が記憶されている。本実施形態では、「機器名称」の情報として、各機器２０，３０に対応する「機器Ａ」や「機器Ｂ」が記憶されている。また、「登録画像」の情報は、カメラ１１の撮影画像内の機器を識別するための識別用画像の情報である。本実施形態では、「登録画像」の情報として、機器Ａ２０を表す記号や機器Ｂ３０の外観画像が記憶されている。また、「操作／表示部種類」の情報は、機器の操作部や表示部の種類の情報である。本実施形態では、「操作／表示部種類」の情報として、「メータ」、「スイッチ」、「スライダ」、又は「ダイヤル」が記憶されている。また、「制御項目」の情報は、機器において制御又は操作が可能な項目の情報である。本実施形態では、「制御項目」の情報として、「温度」、「圧力」、「バルブ開閉」、「温度閾値」、又は「圧力閾値」の情報が記憶されている。また、「状態」の情報は、そのような制御項目（圧力、温度、電力等）の機器の設定状態や測定状態の情報である。また、「時刻」の情報は、そのような設定状態（例えば設定値）や測定状態（例えば測定値）を得た時刻の情報である。ここで、「状態」の情報は、制御部５４によって画像記録装置４４に記録される撮影画像データ及び時刻の情報と関連付けされて（又は紐付けされて）定期的に更新又は追加される。

また、図示しないが、機器データベース５５には、「操作／表示部種類」又は「制御項目」に対応付けて、機器の操作部（スイッチ、スライダ、ダイヤル等）を直接制御（バルブ開閉、閾値変更等を制御）するための情報（以下、機器制御用情報という。）が記憶されている。

なお、機器データベース５５は、制御装置５０ではない別のサーバに格納されていても良い。また、機器の状態の情報は、機器データベース５５から独立して記憶されていても良く、例えば、機器データベース５５とは別のデータベース（例えば、状態情報データベース）に記憶されていても良い。

画像送受信部５２は、通信Ｉ／Ｆ５１を介して画像の送受信を行う。例えば、本実施形態では、画像送受信部５２は、ネットワーク６０を介して監視対象設備１０からの撮影画像を受信すると、受信した撮影画像を制御部５４に送信する。
制御部５４は、制御装置５０において各種の制御を行う。例えば、制御部５４は、監視対象設備１０の各機器２０，３０を制御するための制御指令を通信Ｉ／Ｆ５１を介して当該監視対象設備１０に送信する。また、例えば、制御部５４は、ネットワーク６０を介して監視対象設備１０から伝送されてきた撮影画像（すなわち、画像送受信部５２から送信されてきた撮影画像）に対して時刻を付与する。ここでいう時刻は、撮影時刻であり、機器の設定状態等と関連付けするための時刻である。そして、制御部５４は、時刻を付与した撮影画像を画像記録装置４４や画像処理部５３に送信する。また、制御部５４は、画像処理部５３から後述の認識領域が送信されてくると、その認識領域を保持する。

画像処理部５３は、パターンマッチング処理及びパターンマッチング処理結果に基づく描画処理を行う。具体的には、画像処理部５３は、時刻が付与された撮影画像を制御部５４から受信すると、機器データベース５５から登録画像を読み出す。そして、画像処理部５３は、制御部５４からの撮影画像と機器データベース５５から読み出した登録画像とについてパターンマッチングを行い、撮影画像内で登録画像に合致する画像を検索する。そして、画像処理部５３は、撮影画像内で登録画像に合致する画像が有ることを認識すると、その認識領域（すなわち、マッチング結果）を制御部５４に送信する。また、画像処理部５３は、その認識領域を撮影画像に描画する。そして、認識領域が描画された撮影画像は、操作端末４２に送信される。また、認識領域は、別途、操作端末４２及び機器データベース５５に送信される。

このとき、画像処理部５３は、機器の状態に応じてその描画方法を決定しても良い。この場合、例えば、機器データベース５５には、機器情報として、状態の情報に対応付けられて閾値が記憶されている。これによって、画像処理部５３は、機器データベース５５から機器情報として状態の情報（例えば測定値）と当該状態の情報に対応付けられている閾値とを取得し、状態の情報と閾値とを比較して機器（すなわち機器の状態）の正常及び異常を判定する。そして、画像処理部５３は、その判定結果を基に描画方法を決定する。例えば、画像処理部５３は、状態の情報（例えば測定値）が閾値に達していない正常の判定結果であれば、認識領域を青色で描画する。また、画像処理部５３は、状態の情報（例えば測定値）が閾値に達した異常の判定結果であれば認識領域を赤色で描画する。

画像記録装置４４は、ネットワーク６０を介して監視対象設備１０から伝送されてきた撮影画像を記録する。このとき、画像記録装置４４は、制御部５４によって関連付けがなされた時刻とともに撮影画像を記録する。この画像記録装置４４は、例えばサーバである。また、画像記録装置４４は、制御装置５０と１つのサーバ内に構築されていても良い。

操作端末４２は、マウス等のポインティングデバイスやキーボード等の情報入力部を有するコンピュータである。この操作端末４２は、種々の操作画面や制御装置５０から送信されてくる撮影画像を表示装置４３に表示する。ここで、表示装置４３は、タッチパネル式の表示装置でも良い。

次に、設備監視制御システム１における一連の処理に沿って、設備監視制御システム１を構成する各部における処理内容をさらに詳しく説明する。図５には、設備監視制御システム１におけるパターンマッチング処理の一例を示す。また、図６には、設備監視制御システム１における機器の状態表示のための処理の一例を示す。また、図７には、設備監視制御システム１における、画像記録装置４４に既に記録されている過去の撮影画像（以下、記録画像）を用いた機器の状態表示のための処理の一例を示す。

先ず、図５を用いてパターンマッチング処理について説明する。
カメラ１１は、撮影画像をネットワーク６０を介して監視制御設備４０に伝送する（ステップＳ１）。
監視制御設備４０では、カメラ１１からの撮影画像を制御装置５０の画像送受信部５２が受信すると、制御装置５０の制御部５４が、機器の状態と関連付けるための時刻（すなわち、撮影時刻）をその撮影画像に対して付与する（ステップＳ２）。そして、制御部５４は、時刻を付与した撮影画像を画像記録装置４４及び画像処理部５３に送信する（ステップＳ３、ステップＳ４）。

画像記録装置４４は、制御部５４から送信されてきた撮影画像（すなわち、時刻が付与されている撮影画像）を記録する（ステップＳ５）。
また、画像処理部５３は、撮影画像が送信されてくると、機器データベース５５から登録画像を読み出す（ステップＳ６）。そして、画像処理部５３は、撮影画像と登録画像とについてパターンマッチング処理を行い、撮影画像内で登録画像に合致する画像を検索する（ステップＳ７）。そして、画像処理部５３は、撮影画像内で登録画像に合致する画像が有ることを認識すると、その認識領域（すなわち、マッチング結果）を撮影画像に描画する。また、画像処理部５３は、認識領域を制御部５４及び機器データベース５５に送信する（ステップＳ８、ステップＳ９）。

制御部５４は、送信されてきた認識領域を保持する（ステップＳ１０）。その後、制御部５４は、操作端末４２が操作されるのを待つ。
図８及び図９には、撮影画像の一例を示す。図８は、認識領域を描画する前の撮影画像を示す図である。また、図９は、画像処理部５３が、認識領域を撮影画像に描画して生成した画像（以下、認識領域描画画像という。）を示す図である。

ここで、図８に示す画像の例は、カメラ１１の撮影画像中から機器Ａ２０及び機器Ｂ３０が映る画像部分だけをそれぞれ抜き取り、抜き取ったそれら機器Ａ２０及び機器Ｂ３０の画像１００，１１０を並べて配置している例である。これによって、使用者は、一画面内の各機器の画像１００，１１０を基に、複数の機器の状態を確認できるようになる。

そして、図９に示すように、画像処理部５３は、パターンマッチング処理によって撮影画像内で登録画像に合致する画像が有ることを認識すると、その合致した画像上に太線等の枠等によって認識領域１０１，１１１を描画する。このとき、前述のように、画像処理部５３は、機器の状態に応じた描画を行う場合、先ず、機器データベース５５から、状態の情報（例えば測定値）と当該状態の情報に対応する閾値とを機器情報として取得する（ステップＳ１１）。次に、画像処理部５３は、それら状態の情報と閾値とを比較して機器（すなわち機器の状態）の正常及び異常を判定する（ステップＳ１２）。そして、画像処理部５３は、その判定結果を基に描画方法を決定する（ステップＳ１３）。例えば、画像処理部５３は、状態の情報が閾値に達していない正常の判定結果であれば認識領域１０１，１１１を青色で描画する。また、画像処理部５３は、状態の情報が閾値に達した異常の判定結果であれば認識領域１０１，１１１を赤色で描画する。

制御装置５０は、このように画像処理部５３が生成した認識領域描画画像を操作端末４２に送信する（ステップＳ１４）。このとき、制御装置５０は、画像処理部５３によって取得した認識領域も操作端末４２に送信する（ステップＳ１４）。
操作端末４２は、制御装置５０から送信されてきた認識領域描画画像を表示装置４３に表示する（ステップＳ１５）。そして、操作端末４２は、情報入力部等によって認識領域が選択されるのを待つ。ここで、情報入力部等による選択とは、キーボードを用いたカーソルの位置合わせによる選択、マウスによるクリック、長押し、プルダウンメニュー表示による選択、及びタッチパネルへのタッチによる選択等である。

次に、図６を用いて、操作端末４２において認識領域が情報入力部等によって選択されたときの機器の状態表示のための処理について説明する。
操作端末４２は、図９に示すような認識領域が情報入力部等によって選択されると、その選択情報を制御装置５０に送信する（ステップＳ３１、ステップＳ３２）。

制御装置５０は、操作端末４２から選択情報が送信されてくると、制御部５４によって当該選択情報に対応する機器情報を機器データベース５５から読み出す（ステップＳ３３）。
ここで、操作端末４２は、認識領域が情報入力部等によって選択されると、その選択情報として、選択された認識領域データを制御装置５０に送信している。そして、制御装置５０では、選択情報としての認識領域データが送信されてくると、制御部５４が、送信されてきた認識領域データと自己が保持している認識領域データとを比較して、互いに合致する認識領域データを特定する。そして、制御部５４は、特定した認識領域データに対応する、すなわち、認識領域データを得た登録画像が対応付けられている機器情報（機器制御用情報も含めた機器情報）を機器データベース５５から読み出す。そして、制御装置５０は、制御部５４が読み出した機器情報を操作端末４２に送信する（ステップＳ３４）。

操作端末４２は、制御装置５０から機器情報が送信されてくると、図１０及び図１１に一例として示すように、その機器情報を認識領域描画画像に重畳する（ステップＳ３５）。これによって、例えば、操作端末４２は、機器Ａ２０の認識領域（すなわち記号）が情報入力部等によって選択されたときに、図１０に示すように、機器Ａ２０の機器情報である機器Ａ２０の操作／表示部種類、制御項目及び状態を含む表１０２を認識領域描画画像に重畳して表示装置４３に表示（例えば、ポップアップ表示）する。また、操作端末４２は、機器Ｂ３０の認識領域（すなわち機器Ｂ３０の表示領域の何れか）が情報入力部等によって選択されたときに、図１１に示すように、機器Ｂ３０の機器情報である機器Ｂ３０の操作／表示部種類、制御項目及び状態を含む表１１２を認識領域描画画像に重畳して表示装置４３に表示（例えば、ポップアップ表示）する。

そして、操作端末４２は、図１０や図１１に示すように認識領域描画画像に重畳表示されている表１０２，１１２内の操作／表示部種類の情報となる操作部（スイッチ、スライダ、ダイヤル等）の項目（行）が情報入力部等によって選択されると、その操作部を直接制御（バルブ開閉、閾値変更等）するための機器制御用情報（例えば設定値等）をサブメニューとして表示（例えば、ポップアップ表示）する（ステップＳ３６）。そして、操作端末４２は、サブメニューにて機器制御用情報の例えば設定値が選択されると、制御装置５０に選択された設定値を制御装置５０に送信する（ステップＳ３７、ステップＳ３８）。

制御装置５０（具体的には制御部５４）は、操作端末４２から設定値が送信されてくると、その設定値に基づき機器を設定（すなわち、設定値を機器に反映）する（ステップＳ３９）。このとき、制御装置５０は、ネットワーク６０を介して遠隔制御によって機器に設定値を設定する。そして、制御装置５０は、設定値を基に機器を正常に設定できたとき、機器データベース５５の設定値（すなわち、状態の情報）を更新する（ステップＳ４０、ステップＳ４１）。具体的には、機器は、設定値に正常に設定できると、設定完了通知を制御装置５０の制御部５４に送信する（ステップＳ４０）。制御装置５０は、機器からの設定完了通知を受信すると、機器データベース５５の設定値を更新する（ステップＳ４１）。さらに、制御装置５０は、その設定完了通知を操作端末４２に送信する（ステップＳ４２）。

操作端末４２は、制御装置５０からの設定完了通知を受信すると、表示装置４３に設定完了した旨を表示する（ステップＳ４３）。
次に、図７を用いて設備監視制御システム１における、記録画像を用いた機器の状態表示のための処理について説明する。

ここで、登録画像は、予め取得されており、制御装置５０又は個別のサーバが保持している機器データベース５５にそれぞれの機器に対応付けて登録されているものとする。また、機器データベース５５では、機器の状態（温度、油圧等の値)が常に（定期的に）更新されているものとする。また、機器データベース５５には、機器情報として、機器の過去の状態も記録されているものとする。また、カメラ１１からの撮影画像は、画像記録装置４４に常時記録されていくものとする。さらに、その画像記録装置４４に記録された画像には、当該画像に付与された時刻と機器の状態とが関連付けられているものとする。

そして、以上のような前提において、操作端末４２が操作されて画像記録装置４４の記録画像の再生指示がなされたとする（ステップＳ６１）。本実施形態では、その再生指示において複数有るカメラのうちの一のカメラ（すなわち、複数有る記録画像のうちの記録画像）が指定され、さらに、記録画像中の再生する時間帯が指定されたとする。操作端末４２は、このような再生指示によって、指定されたカメラ（すなわち、指定された記録画像）の情報、及び再生時間帯の情報を画像記録装置４４に送信する（ステップＳ６２）。

画像記録装置４４は、操作端末４２からの再生指示の情報に基づき、対応する記録画像（すなわち、再生指示のあった記録画像中の指示された時間帯の画像）を制御装置５０に送信する（ステップＳ６３）。制御装置５０では、記録画像を受信すると、画像処理部５３が、機器データベース５５から登録画像を読み出す（ステップＳ６４）。そして、画像処理部５３は、記録画像と登録画像とについてパターンマッチング処理を行い、記録画像内で登録画像に合致する画像を検索する（ステップＳ６５）。そして、画像処理部５３は、記録画像内で登録画像に合致する画像が有ることを認識すると、その認識領域（すなわち、マッチング結果）を記録画像に描画する（ステップＳ６９〜ステップＳ７１）。また、画像処理部５３は、その認識領域を制御部５４及び機器データベース５５に送信する（ステップＳ６６、ステップＳ６７）。

制御部５４は、送信されてきた認識領域を保持する（ステップＳ６８）。その後、制御部５４は、操作端末４２が操作されるのを待つ。
また、制御装置５０は、画像処理部５３が生成した認識領域描画画像を操作端末４２に送信する（ステップＳ７２）。このとき、制御装置５０は、画像処理部５３によって取得した認識領域も操作端末４２に送信する（ステップＳ７２）。

操作端末４２は、制御装置５０から送信されてきた認識領域描画画像を表示装置４３に表示する（ステップＳ７３）。そして、操作端末４２は、認識領域が情報入力部等によって選択されるのを待つ。
そして、操作端末４２は、図９に示すような認識領域が情報入力部等によって選択されると、その選択情報を制御装置５０に送信する。

ここで、認識領域が情報入力部等によって選択された以降の処理については、前述の図６を用いた処理と基本的に同じであるが、前述の図６の処理で前提としたリアルタイムの撮影画像でなく記録画像に基づく処理となっていることで異なる点がある。
すなわち、制御装置５０（具体的には制御部５４）は、操作端末４２から選択情報が送信されてくると、制御部５４によって当該選択情報に対応する機器情報を機器データベース５５から読み出す。そして、制御装置５０は、読み出した機器情報を操作端末４２に送信する。

操作端末４２は、制御装置５０から機器情報が送信されてくると、図１０及び図１１に一例と示すように、その機器情報を認識領域描画画像に重畳する。これによって、例えば、操作端末４２は、機器Ａ２０の認識領域（すなわち記号）が情報入力部等によって選択されたときに、図１０に示すように、機器Ａ２０の機器情報である機器Ａ２０の操作／表示部種類、制御項目及び状態（ここでは過去の機器の状態）を含む表１０２を認識領域描画画像に重畳して表示装置４３に表示（例えば、ポップアップ表示）する。また、操作端末４２は、機器Ｂ３０の認識領域（すなわち機器Ｂ３０の表示領域の何れか）が情報入力部等によって選択されたときに、図１１に示すように、機器Ｂ３０の機器情報である機器Ｂ３０の操作／表示部種類、制御項目及び状態（ここでは過去の機器の状態）を含む表１１２を認識領域描画画像に重畳して表示装置４３に表示（例えば、ポップアップ表示）する。

なお、記録画像が、機器の過去の撮影画像になるため、機器の設定値を変更することはできない（すなわち、機器の設定値を変更する処理はない）。
以上のように、本実施形態では、操作端末４２は、カメラ１１によって得た実際の監視対象機器の撮影画像に、ＡＲ（拡張現実：Augmented Reality）として当該監視対象機器の情報を重畳させて表示装置４３に表示させることができる。

これによって、使用者は、表示装置４３に表示されている監視対象機器の映像を見ながら同表示装置４３内で当該監視対象機器の状態を確認し、さらには当該監視対象機器を制御できる。これによって、使用者は、画像上での感覚的な操作によって監視対象機器を制御できる。また、使用者は、各機器の状態を一覧（表）で確認しながら制御できるため、誤操作を防止できる。

また、本実施形態では、設備監視制御システム１は、機器そのものが表示部（又は表示機能）を有さない場合でも、表示装置４３上で機器の状態を表示でき、その表示を基に機器を制御できる。
また、本実施形態では、設備監視制御システム１は、カメラ１１によって得たリアルタイムの撮影画像やカメラ１１によって得た過去の撮影画像をそれら撮影画像内の機器の状態とともに表示装置４３に表示している。これによって、使用者は、現在のみならず過去の機器の状態をＡＲ表示で確認できる。

なお、前述の実施形態では、制御部５４は、例えば、機器情報取得部を構成する。また、機器データベース５５又は機器データベース５５が格納されているサーバは、例えば、記憶部を構成する。また、画像処理部５３は、例えば、照合部を構成する。また、操作端末４２は、例えば、表示処理部を構成する。

（本実施形態の変形例等）
本実施形態では、操作端末４２は、機器の認識領域が情報入力部等によって選択されると、機器情報を表示装置４３に表示している。しかし、本実施形態は、これに限定されない。図１２及び図１３には、その表示例を示す。

例えば、操作端末４２は、機器情報を一括表示させるための操作がなされると、例えば、表示装置４３に表示されている操作画面上の機器情報一括表示ボタンが選択されると、図１２に示すように、全ての機器の機器情報を含む表１２０を表示する。これによって、使用者は、図１０や図１１のように機器情報が表示される場合と同様に、各操作部の行を選択することで、各機器を直接制御できる。これによって、使用者は、簡易に制御項目を認識でき、さらに選択できる。

また、操作端末４２は、機器情報の共通項目を一括表示させるための操作がなされると、例えば、表示装置４３に表示されている操作画面上の共通項目一括表示ボタンが選択されると、図１３に示すように、全ての機器の機器情報における共通項目、例えば、共通の制御項目（温度、圧力）の状態を一覧表１２１として表示する。ここで、共通項目は、予め設定されている。このような共通項目の一括表示によって、使用者は、簡易に制御項目を認識でき、さらに選択できる。

また、本実施形態では、操作端末４２は、機器の認識領域が情報入力部等によって選択されるのを待つことなく、表示装置４３に機器情報を自動的に表示しても良い。
また、本実施形態では、識別領域は、太線等の枠等によって描画されることに限定されない。例えば、機器が当然に認識されて操作できるような態様の表示にしても良い。

また、本実施形態では、設備監視制御システム１は、機器との通信によって当該機器の情報を取得する機器情報取得ステップと、前記機器情報取得ステップで取得した機器の情報とカメラによる撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶部に記憶される記憶ステップと、カメラによる撮影画像と前記識別用画像とを照合する照合ステップと、前記照合ステップで前記識別用画像を基に識別できた前記カメラによる撮影画像内の領域と、当該識別用画像に対応付けられている機器の情報とを対応付けて表示部に表示する表示処理ステップと、を有する機器情報表示方法を実現している。

また、本発明の実施形態を具体的に説明したが、本発明の範囲は、図示され記載された例示的な実施形態に限定されるものではなく、本発明が目的とするものと均等な効果をもたらすすべての実施形態をも含む。さらに、本発明の範囲は、請求項１により画される発明の特徴の組み合わせに限定されるものではなく、すべての開示されたそれぞれの特徴のうち特定の特徴のあらゆる所望する組み合わせによって画されうる。

１ 設備監視制御システム、１０ 監視対象設備、２０，３０ 機器、４０ 監視制御設備、４２ 操作端末、４３ 表示装置、４４ 画像記録装置、５０ 制御装置、５１ 通信Ｉ／Ｆ、５２ 画像送受信部、５３ 画像処理部、５４ 制御部、５５ 機器データベース

Claims (5)

1. 機器との通信によって当該機器の情報を取得する機器情報取得部と、
   前記機器情報取得部が取得した機器の情報とカメラによる撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶される記憶部と、
   カメラによる撮影画像と前記識別用画像とを照合する照合部と、
   前記照合部が前記識別用画像を基に識別できた前記カメラによる撮影画像内の領域と、当該識別用画像に対応付けられている前記機器の情報とを対応付けて表示部に表示する表示処理部と、
   を有する機器情報表示装置。
2. 前記機器の情報は、機器の状態を示す値であり、
   前記表示処理部は、前記識別用画像に対応付けられている前記機器の状態を示す値が予め設定されている値に達した場合、前記機器の状態を示す値が予め設定されている値に達していない場合よりも識別性が高くなるように前記領域を表示部に表示する請求項１に記載の機器情報表示装置。
3. 機器との通信によって当該機器の情報を取得する機器情報取得ステップと、
   前記機器情報取得ステップで取得した機器の情報とカメラによる撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶部に記憶される記憶ステップと、
   カメラによる撮影画像と前記識別用画像とを照合する照合ステップと、
   前記照合ステップで前記識別用画像を基に識別できた前記カメラによる撮影画像内の領域と、当該識別用画像に対応付けられている前記機器の情報とを対応付けて表示部に表示する表示処理ステップと、
   を有する機器情報表示方法。
4. 前記機器の情報は、機器の状態を示す値であり、
   前記表示処理ステップは、前記識別用画像に対応付けられている前記機器の状態を示す値が予め設定されている値に達した場合、前記機器の状態を示す値が予め設定されている値に達していない場合よりも識別性が高くなるように前記領域を表示部に表示する請求項３に記載の機器情報表示方法。
5. カメラと、
   機器との通信によって当該機器の情報を取得する機器情報取得部と、
   前記機器情報取得部が取得した機器の情報と前記カメラによる撮影画像内の当該機器を識別するための識別用画像とが対応付けられて記憶される記憶部と、
   前記カメラによる撮影画像と前記識別用画像とを照合する照合部と、
   前記照合部が前記識別用画像を基に識別できた前記カメラによる撮影画像内の領域と、当該識別用画像に対応付けられている前記機器の情報とを対応付けて表示部に表示する表示処理部と、
   を有する機器情報表示システム。
   

Images