JP7422603B2 - 試験支援方法、試験支援装置、および試験支援プログラム - Google Patents

Description

本開示は、監視制御システムの試験を支援する試験支援方法、試験支援装置、および試験支援プログラムに関する。

従来、変電所の運用を管理するための電力管理システムまたは鉄道における列車の運行を効率的に行うための運行管理システムなどの監視制御システムが知られている。監視制御システムの製造者は、かかる監視制御システムを更新したり新たに構築したりする場合、監視制御システムが適切に動作するか事前に試験を行う。かかる試験は、試験要領書などによって試験項目が定められている。監視制御システムの製造者は、試験要領書に基づいて試験を実施し、試験結果を記した試験成績書を作成して顧客へ提出する。

通常、このような監視制御システムに対する試験項目は多岐に亘っていることから、試験者の負担は大きい。例えば、構築した監視制御システムの監視画面において正しい表示がなされているか、与えられた信号に対して適切な動作をしているかなどを確認する試験が試験者の目視によって行われている。試験者の目視によって監視画面が適切に動作するか確認する場合、１つの表示画面中において試験対象となるシンボルが多数存在することがある。この場合、試験に膨大な時間がかかる上、試験者は、ヒューマンエラーによって確認を見落としてしまう可能性がある。

そのため、監視制御システムに対する試験作業の省力化または精度向上などが求められている。特許文献１には、動的シンボルを含む監視画面を自動的に試験するために、監視画面内において画像が変化する領域とかかる領域外の領域とを合成した合成画像が予め記憶している正解画像と一致するか否かを判定する技術が開示されている。

特開２０１７－０３３１５１号公報

しかしながら、上記特許文献１に記載の技術は、動的シンボルを含む監視画面を自動的に試験することができるが、正解画像を予め用意する必要があり、また、試験結果を示す試験画像を生成する技術ではない。

本開示は、上記に鑑みてなされたものであって、監視制御システムの試験結果を示す試験画像を生成して監視制御システムの試験を支援することができる試験支援方法を得ることを目的とする。

上述した課題を解決し、目的を達成するために、本開示の試験支援方法は、コンピュータが実行する試験支援方法であって、画像取得ステップと、動的シンボル検出ステップと、マーキング対象画像選定ステップと、試験画像生成ステップと、を含む。画像取得ステップは、監視画面を各々異なる時間でキャプチャした画像であってシンボルの変化前の画像とシンボルの変化後の複数の画像とを含む画像群を取得する。動的シンボル検出ステップは、画像取得ステップで取得された画像群に含まれる複数の画像間で変化した複数のシンボルを複数の動的シンボルとして検出する。マーキング対象画像選定ステップは、変化後の複数の画像のうち変化後の複数の画像間で変化する動的シンボルの明るさが最も明るい画像、または、変化後の複数の画像のうち全画素の輝度値の平均が最も大きな画像をマーキング対象画像として決定する。試験画像生成ステップは、マーキング対象画像において動的シンボル検出ステップで検出された複数の動的シンボルの各々に対して動的シンボルであることを示すマーキング画像が付加された画像を試験画像として生成する。また、試験画像生成ステップは、マーキング対象画像において複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を試験画像として生成する。

本開示によれば、監視制御システムの試験結果を示す試験画像を生成して監視制御システムの試験を支援する、という効果を奏する。

実施の形態１にかかる監視制御システムおよび試験支援装置を示す図 実施の形態１にかかる監視装置の監視画面に表示される画像である監視画像の一例を示す図 実施の形態１にかかる試験支援装置による試験画像の生成手順の一例を説明するための図 実施の形態１にかかる試験支援装置によって生成される試験画像の一例を示す図 実施の形態１にかかる試験支援装置の構成の一例を示す図 実施の形態１にかかる動的シンボル検出部による動的シンボルの検出処理を説明するための図 動的シンボル検出部の第１の検出部による点滅シンボルの検出処理を説明するための図 動的シンボル検出部の第１の検出部による点滅シンボルの検出処理を説明するための図 実施の形態１にかかる点滅シンボル矩形リストの一例を示す図 実施の形態１にかかるシンボルと外接矩形との関係の一例を示す図 動的シンボル検出部の第２の検出部による変化シンボルの検出処理を説明するための図 動的シンボル検出部の第２の検出部による変化シンボルの検出処理を説明するための図 実施の形態１にかかる変化シンボル矩形リストの一例を示す図 実施の形態１にかかる全矩形リストの一例を示す図 実施の形態１にかかるマーキング対象画像選定部によるマーキング対象画像の選定処理を説明するための図 実施の形態１にかかるマーキング色選定部によるマーキング色のベース色の選定処理を説明するための図 実施の形態１にかかるマーキング色選定部によるグラデーション色の選定処理を説明するための図 実施の形態１にかかるマーキング画像の一例を示す図 実施の形態１にかかる試験支援装置の試験画像生成部によって生成される試験画像の一例を示す図 実施の形態１にかかる試験支援装置の処理部による処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部による動的シンボル検出処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部による点滅シンボル検出処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部による変化シンボル検出処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部によるマーキング対象画像選定処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部によるマーキング色選定処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部によるベース色決定処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部によるグラデーション色決定処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部による試験画像生成処理の一例を示すフローチャート 実施の形態１にかかる試験支援装置の処理部のハードウェア構成の一例を示す図 実施の形態２にかかる試験支援装置の構成の一例を示す図 実施の形態２にかかる試験支援装置によって検出される移動シンボルを説明するための図 実施の形態２にかかる移動元シンボルリストの一例を示す図 実施の形態２にかかる移動シンボル矩形リストの一例を示す図 実施の形態２にかかる試験支援装置の動的シンボル検出部による移動シンボルの検出方法を説明するための図 実施の形態２にかかる試験支援装置の動的シンボル検出部による複数の移動シンボルの検出方法を説明するための図 実施の形態２にかかる試験支援装置の試験画像生成部によって生成される試験画像の一例を示す図 実施の形態２にかかる試験支援装置の試験画像生成部によって生成される試験画像の他の例を示す図 実施の形態２にかかる試験支援装置の処理部による処理の一例を示すフローチャート 実施の形態２にかかる試験支援装置の処理部による動的シンボル検出処理の一例を示すフローチャート 実施の形態２にかかる試験支援装置の処理部による移動シンボル検出処理の一例を示すフローチャート

以下に、実施の形態にかかる試験支援方法、試験支援装置、および試験支援プログラムを図面に基づいて詳細に説明する。

実施の形態１．
図１は、実施の形態１にかかる監視制御システムおよび試験支援装置を示す図である。図１に示すように、実施の形態１にかかる監視制御システム１は、監視制御対象を制御する制御装置２と、監視制御対象の状態を監視する監視装置３とを備える。監視制御対象は、例えば、変電所または列車などであるが、かかる例に限定されない。制御装置２と監視装置３とはネットワーク４を介して通信可能に接続される。監視制御システム１は、変電所の運用を管理するための電力管理システムであるが、鉄道における列車の運行を効率的に行うための運行管理システムまたはその他のシステムであってもよい。また、監視制御システム１は、制御装置２および監視装置３の各々を複数備える構成であってもよい。

実施の形態１にかかる試験支援装置１０は、例えば、監視制御システム１を構築した製造者の社内に設置されたコンピュータであり、試験画像を生成する。試験画像は、監視画面のキャプチャ画像に含まれる動的シンボルに対してマーキング画像が付加された画像を監視画面のキャプチャ画像に重畳した画像である。監視画面のキャプチャ画像は、監視装置３の監視画面をスクリーンショットすることで得られる画像または監視装置３の監視画面を不図示のカメラで撮像することによって得られる画像である。

試験支援装置１０によって生成される試験画像は、例えば、監視制御システム１に対して試験を行った結果を示す画像として用いられたり、監視制御システム１に対して試験を行う際に試験者が参照するために用いられる。これにより、試験支援装置１０は、試験者の目視による確認を支援することができる。試験者は、試験を行った結果を示す画像として、試験画像を試験結果のエビデンスとして試験成績書に載せることもできる。

試験支援装置１０は、監視制御システム１の試験として複数の試験項目の試験が予め設定された順序で行われるように予め作成された試験要領書の情報を有している。かかる試験要領書の情報に基づいて、試験項目毎に試験項目に応じた複数の模擬信号を監視制御システム１の制御装置２へ入力する。制御装置２は、複数の模擬信号が入力された場合、入力された複数の模擬信号の情報をネットワーク４経由で監視装置３へ出力する。各模擬信号は、試験時において制御装置２へ入力される外部信号である。監視装置３は、監視画面において制御装置２へ入力された各模擬信号に応じたシンボルを変化させる。このように、制御装置２への外部信号の入力に応じて変化するシンボルが上述した動的シンボルである。

動的シンボルの変化の態様の種類には、第１の態様と、第２の態様とがある。第１の態様は、外部信号の入力の前後で一度だけ変化する態様である。第２の態様は、外部信号の入力後に点滅するなどのように外部信号の入力後に繰り返し変化する態様である。なお、動的シンボルの変化は、色の変化であるが、形状の変化、または色および形状の変化であってもよい。以下において、第１の態様で変化する動的シンボルを変化シンボルと記載し、第２の態様で変化する動的シンボルを点滅シンボルと記載する。

試験支援装置１０は、監視装置３の監視画面に表示されて試験対象となる画像として、変化前画像および変化後画像を取得する。変化前画像は、模擬信号が制御装置２へ入力される前の監視画面の画像である。変化後画像は、模擬信号が制御装置２へ入力された後の監視画面の画像である。以下、監視画面の画像を監視画像と記載する。かかる監視画像は、監視画面のキャプチャ画像と同じである。

図２は、実施の形態１にかかる監視装置の監視画面に表示される画像である監視画像の一例を示す図である。図２に示す監視画像８０には、変電所を構成する複数の要素の各々と、要素間の接続を各々示す複数の接続線と、文字の情報とが含まれる。変電所を構成する複数の要素および複数の接続線の各々は、シンボルとして監視画像に含まれる。

図２において、円形状のシンボルは、断路器のシンボルであり、長方形状のシンボルは、遮断器のシンボルであり、ダイオードの記号で示されるシンボルは、整流器である。また、図２において、断路器のシンボルおよび遮断器のシンボルの各々は、対応する外部信号が入力された場合に変化する動的シンボルである。

また、図２に示す監視画像８０には、監視制御システム１の監視制御対象になる変電所の名称として「東区変電所」の文字がシンボルとして含まれ、監視制御システム１が変電所を監視中であることを示す「システム監視」の文字がシンボルとして含まれる。また、図２に示す監視画像８０には、監視制御システム１がメンテナンス中であることを示す「メンテナンス」の文字がシンボルとして含まれる。これらの文字で表されるシンボルも動的シンボルである。

なお、試験支援装置１０は、図２における右方向をＸ軸正方向とし図２における下方向をＹ軸正方向として監視画像８０に含まれるシンボルのＸＹ軸上の位置を判定する。なお、試験支援装置１０は、監視画像８０に含まれるシンボルの位置を判定できればよく、試験支援装置１０における監視画像８０の座標系は、図２に示すＸＹ軸座標系に限定されない。

図３は、実施の形態１にかかる試験支援装置による試験画像の生成手順の一例を説明するための図である。なお、図３に示す例では、説明を分かりやすくするために、２つの動的シンボルが含まれる画像を監視画面のキャプチャ画像として表している。また、図３においては、シンボルの色の違いが、異なるハッチングで示されている。

図３に示すように、試験支援装置１０は、試験項目に対応する変化前画像および複数の変化後画像を含む画像群の情報を試験項目毎に取得する（ステップＳ１）。かかる画像群の情報は、例えば、監視画面のスクリーンショットを監視装置３に実行させて取得したり、不図示の撮像部による撮像によって取得したりすることができる。画像群に含まれる複数の変化後画像は、模擬信号が入力された後に互いに異なる時間で得られるキャプチャ画像である。

試験支援装置１０は、画像群の情報に基づいて、動的シンボルを検出する処理である動的シンボル検出処理を試験項目毎に行う（ステップＳ２）。ステップＳ２の処理において、試験支援装置１０は、複数の変化後画像のうち異なる２つの変化後画像間の比較結果に基づいて、点滅シンボルを検出する。また、試験支援装置１０は、変化前画像と変化後画像との比較結果に基づいて、動的シンボルを検出し、検出した動的シンボルのうち点滅シンボル以外の動的シンボルを変化シンボルとして検出する。

試験支援装置１０は、画像群に含まれる複数の変化後画像のうちマーキング対象にする変化後画像を選定するマーキング対象画像選定処理を行う（ステップＳ３）。ステップＳ３の処理において、試験支援装置１０は、複数の変化後画像のうち点滅シンボルの明るさが最も高い変化後画像をマーキング対象の画像であるマーキング対象画像に選定する。マーキング対象画像は、マーキング画像が付加される試験画像のベースになる変化後画像である。

試験支援装置１０は、ステップＳ３の処理で選定されたマーキング対象画像に基づいて、動的シンボルに付加するマーキング画像の色であるマーキング色を選定するマーキング色選定処理を行う（ステップＳ４）。マーキング画像は、試験画像においてシンボルが動的シンボルであることを示す画像である。

ステップＳ４の処理において、試験支援装置１０は、ステップＳ３の処理で選定されたマーキング対象画像内の色の分布に基づいて、マーキング対象画像内で最も使用されていない色をマーキング色のベース色として決定する。ベース色として決定される色には、背景色は含まれない。このように、背景色を除くのは、動的シンボルの周囲が背景である場合が多いからである。背景色は、白色または黒色である。

また、試験支援装置１０は、ステップＳ３の処理で選定されたマーキング対象画像内の色の分布に基づいて、背景色を判定し、背景色に基づいて、マーキング色のグラデーション色を決定する。試験支援装置１０は、例えば、白色および黒色のうち使用頻度が高い色を背景色として判定する。試験支援装置１０は、背景色が白色である場合、グラデーション色を黒色にし、背景色が黒色である場合、グラデーション色を白色にする。

試験支援装置１０は、ステップＳ２で検出された複数の動的シンボルに対し、試験者が確認する順番を示す番号である確認番号を割り付ける処理である確認番号割付処理を行う（ステップＳ５）。例えば、図２に示す監視画像８０の図２における右方向をＸ軸正方向とし図２における下方向をＹ軸正方向としたとする。この場合、試験支援装置１０は、ステップＳ５の処理において、Ｙ軸座標が小さい動的シンボルから順に順番を割り付けたり、試験者の視線に基づいて、試験者が見ると推定される順に動的シンボルに順番を割り付けたりすることができる。

試験支援装置１０は、ステップＳ３で決定されたマーキング対象画像においてステップＳ２で検出された複数の動的シンボルの各々に対してステップＳ４で決定されたマーキング色のマーキング画像とステップＳ５で決定された順番を示す文字とが付加された画像を試験画像として生成する（ステップＳ６）。

ステップＳ６の処理では、試験支援装置１０は、マーキング対象画像において複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を試験画像として生成する。図３に示す例では、変化シンボルには円形状の枠画像を含むマーキング画像が付加され、点滅シンボルには三角形状の枠画像を含むマーキング画像が付加されている。これにより、試験支援装置１０は、変化シンボルと点滅シンボルとを区別した試験画像を生成し、監視制御システム１の試験を支援することができる。

また、試験支援装置１０は、ステップＳ６の処理において、背景が白の場合、マーキング色としてベース色を暗くするグラデーションを付加し、背景が黒の場合、マーキング色としてベース色を明るくするグラデーションを付加する。これにより、マーキング画像の一つの辺が単一色にならないため、マーキング色は動的シンボルの色および背景の色と一致しない。したがって、試験支援装置１０は、マーキング対象画像内に高い視認性でマーキングした試験画像を生成することができる。

図４は、実施の形態１にかかる試験支援装置によって生成される試験画像の一例を示す図である。図４に示す試験画像９０では、「システム監視」の文字を含むシンボル９１にマーキング画像９５が付加され、１つの断路器のシンボル９２にマーキング画像９６が付加され、「東区変電所」の文字で表されるシンボル９３にマーキング画像９７が付加され、１つの遮断器のシンボル９４にマーキング画像９８が付加されている。

マーキング画像９５は、シンボル９１が外接する矩形状の枠画像と確認番号である「１」を囲む三角形状の枠画像とを含む。マーキング画像９６は、シンボル９２が外接する矩形状の枠画像と確認番号である「２」を囲む三角形状の枠画像とを含む。マーキング画像９７は、シンボル９３が外接する矩形状の枠画像と確認番号である「３」を囲む三角形状の枠画像とを含む。マーキング画像９８は、シンボル９４が外接する矩形状の枠画像と確認番号である「４」を囲む円形状の枠画像とを含む。

マーキング画像９５，９６，９７における三角形状の枠画像は、シンボル９１，９２，９３が点滅シンボルであることを示す画像である。また、マーキング画像９８における円形状の枠画像は、シンボル９４が変化シンボルであることを示す画像である。このように、試験支援装置１０は、変化シンボルと点滅シンボルとで異なるマーキング画像を付加することから、変化シンボルと点滅シンボルとを区別した試験画像を生成することができる。

以下、試験支援装置１０の構成について具体的に説明する。図５は、実施の形態１にかかる試験支援装置の構成の一例を示す図である。図５に示すように、試験支援装置１０は、通信部１１と、撮像部１２と、記憶部１３と、処理部１４とを備える。

通信部１１は、第１の通信部２１と、第２の通信部２２とを備える。第１の通信部２１は、制御装置２とネットワークまたは専用線を介して通信可能に接続され、処理部１４からの要求に基づいて制御装置２へ模擬信号を送信する。第２の通信部２２は、監視装置３とネットワークまたは専用線を介して通信可能に接続され、監視装置３から出力されるキャプチャ画像の情報を受信する。

撮像部１２は、例えば、ＣＣＤ（Charge-Coupled Device）イメージセンサまたはＣＭＯＳ（Complementary Metal-Oxide-Semiconductor）イメージセンサといった撮像素子およびレンズを備えている。

記憶部１３は、試験情報３１と、キャプチャ画像情報３２と、点滅シンボル矩形リスト３３と、変化シンボル矩形リスト３４と、全矩形リスト３５とを記憶する。試験情報３１は、監視制御システム１の試験要領書の情報を含んでおり、かかる試験要領書には、試験項目毎に試験項目に応じて出力する複数の模擬信号の情報が含まれる。

キャプチャ画像情報３２は、試験項目に対応する変化前画像および複数の変化後画像を含む画像群の情報を試験項目毎に含む。かかるキャプチャ画像情報３２は、制御装置２または撮像部１２から処理部１４によって取得される情報であり、処理部１４によって記憶部１３に記憶される。点滅シンボル矩形リスト３３、変化シンボル矩形リスト３４、および全矩形リスト３５は、処理部１４によって生成されるリストであり、後で詳述する。

処理部１４は、模擬信号出力部４１と、画像取得部４２と、動的シンボル検出部４３と、マーキング対象画像選定部４４と、マーキング色選定部４５と、番号割付部４６と、試験画像生成部４７と、試験画像出力部４８とを備える。

模擬信号出力部４１は、試験情報３１を記憶部１３から読み出し、読み出した試験情報３１に基づいて、予め設定された試験項目順に、試験項目に応じた複数の模擬信号を第１の通信部２１に制御装置２へ送信させる。

画像取得部４２は、試験項目に対応する画像群の情報を試験項目毎に取得する。画像群には、変化前画像および複数の変化後画像が含まれる。画像取得部４２は、取得した試験項目毎の画像群の情報を含む情報をキャプチャ画像情報３２として記憶部１３に記憶させる。

動的シンボル検出部４３は、キャプチャ画像情報３２を記憶部１３から読み出し、読み出したキャプチャ画像情報３２に基づいて、監視装置３の監視画面において試験項目に応じた複数の模擬信号によって変化する複数の動的シンボルを試験項目毎に検出する。動的シンボル検出部４３によって検出される動的シンボルは、上述した変化シンボルと点滅シンボルである。

動的シンボル検出部４３は、第１の検出部５１と、第２の検出部５２と、統合部５３とを備える。第１の検出部５１は、画像群に含まれる複数の変化後画像を比較することによって、点滅シンボルを試験項目毎に検出する。第２の検出部５２は、画像群に含まれる変化前画像と変化後画像とを比較することによって、動的シンボルを検出し、検出した動的シンボルのうち点滅シンボルを除く動的シンボルを変化シンボルとして試験項目毎に検出する。統合部５３は、第１の検出部５１による点滅シンボルの検出結果と、第２の検出部５２による変化シンボルの検出結果とを試験項目毎に統合する。

以下、動的シンボル検出部４３による動的シンボルの検出処理について具体的に説明する。図６は、実施の形態１にかかる動的シンボル検出部による動的シンボルの検出処理を説明するための図である。図６には、変化前画像Ａと複数の変化後画像Ｂ１，Ｂ２，Ｂ３が含まれている画像群が試験項目の画像群として含まれる。

第１の検出部５１は、複数の変化後画像Ｂ１，Ｂ２，Ｂ３のうち少なくとも２つの変化後画像を比較することによって点滅シンボルを検出する。図７および図８は、動的シンボル検出部の第１の検出部による点滅シンボルの検出処理を説明するための図である。図７に示すように、第１の検出部５１は、変化後画像Ｂ１と変化後画像Ｂ２とを比較し、変化後画像Ｂ１と変化後画像Ｂ２とに差があるか否かを判定する。

図７に示す例では、変化後画像Ｂ１，Ｂ２の各々に３つのシンボル６１，６２，６３が含まれており、これら３つのシンボル６１，６２，６３には差異がない。したがって、第１の検出部５１は、変化後画像Ｂ１と変化後画像Ｂ２とに差がないと判定する。この場合、図８に示すように、第１の検出部５１は、次に変化後画像Ｂ２と変化後画像Ｂ３とを比較する。

図８に示す例では、変化後画像Ｂ２，Ｂ３の各々に３つのシンボル６１，６２，６３が含まれており、これら３つのシンボル６１，６２，６３のうちシンボル６１の色が変化している。したがって、第１の検出部５１は、変化後画像Ｂ２と変化後画像Ｂ３との間で、シンボル６１が変化していると判定する。図８においては、変化後画像Ｂ２，Ｂ３間でのシンボル６１の色の違いが、異なるハッチングで示されている。図８に示す変化後画像Ｂ２と変化後画像Ｂ３との差分には、差分がある領域にハッチングが付されている。

図８に示す例では、第１の検出部５１は、シンボル６１を点滅シンボルとして検出する。第１の検出部５１は、検出した点滅シンボルが外接する矩形である外接矩形の座標の情報を含む点滅シンボル矩形リスト３３を生成し、生成した点滅シンボル矩形リスト３３を記憶部１３に記憶させる。かかる点滅シンボル矩形リスト３３は、試験項目毎に生成される。図９は、実施の形態１にかかる点滅シンボル矩形リストの一例を示す図である。図１０は、実施の形態１にかかるシンボルと外接矩形との関係の一例を示す図である。

図９に示す点滅シンボル矩形リスト３３には、「シンボルＩＤ」、「第１の座標」、および「第２の座標」が点滅シンボル毎に含まれる。「シンボルＩＤ」は、各点滅シンボルに固有の識別情報である。「第１の座標」は、点滅シンボルの外接矩形の１つの角の座標であり、外接矩形のうちＸ軸上の座標値とＹ軸上の座標値が各々最も小さい座標である。

「第２の座標」は、「第１の座標」で示される角と対角の位置にある点滅シンボルの外接矩形の他の１つの角の座標であり、外接矩形の領域のうちＸ軸上の座標値とＹ軸上の座標値が各々最も大きい座標である。図１０に示す例では、点滅シンボルであるシンボル６１が矩形であるため、シンボル６１の外接矩形７１は、シンボル６１の外形と同じである。

図９に示す例では、シンボルＩＤ「Ｓ１００１」の点滅シンボルの外接矩形の第１の座標および第２の座標が「ｘ１０，ｙ１０」および「ｘ１１，ｙ１１」であることが示されている。また、図９に示す例では、シンボルＩＤ「Ｓ１００２」の点滅シンボルの外接矩形の第１の座標および第２の座標が「ｘ２０，ｙ２０」および「ｘ２１，ｙ２１」であることが示されている。

図５に示す第２の検出部５２は、変化前画像Ａと変化後画像Ｂ１，Ｂ２，Ｂ３のいずれか１つとを比較することによって動的シンボルを検出する。図６に示す例では、第２の検出部５２は、変化前画像Ａと変化後画像Ｂ１とを比較することによって動的シンボルを検出する。第２の検出部５２は、点滅シンボル矩形リスト３３に基づいて、動的シンボルとして検出したシンボルのうち第１の検出部５１によって検出された点滅シンボル以外のシンボルを変化シンボルとして検出する。

図１１および図１２は、動的シンボル検出部の第２の検出部による変化シンボルの検出処理を説明するための図である。図１１および図１２に示す例では、第２の検出部５２は、変化前画像Ａと変化後画像Ｂ１とを比較し、変化前画像Ａと変化後画像Ｂ１とに差があるか否かを判定する。

変化前画像Ａおよび変化後画像Ｂ１の各々には、３つのシンボル６１，６２，６３が含まれており、これら３つのシンボル６１，６２，６３のうちシンボル６１，６３の色が変化している。したがって、第２の検出部５２は、変化前画像Ａと変化後画像Ｂ１との間で、シンボル６１，６３が変化していると判定する。図１１および図１２においては、変化前画像Ａと変化後画像Ｂ１間でのシンボル６１，６３の色の違いが、異なるハッチングで示されている。図１１および図１２に示す変化前画像Ａと変化後画像Ｂ１との差分には、差分がある領域にハッチングが付されている。

図１１および図１２に示す例では、第２の検出部５２は、シンボル６１，６３を動的シンボルとして検出する。第２の検出部５２は、シンボル６１が外接する矩形である外接矩形の座標とシンボル６３が外接する矩形である外接矩形の座標とを算出する。第２の検出部５２は、シンボル６１，６３の外接矩形のうち、点滅シンボル矩形リスト３３に含まれる点滅シンボルの外接矩形の座標と同じ座標の外接矩形があるか否かを判定する。第２の検出部５２は、シンボル６１，６３の外接矩形７１，７３のうち点滅シンボルの外接矩形の座標と同じ座標の外接矩形が算出されたシンボル以外のシンボルを変化シンボルとして検出する。

図１２に示す例では、点滅シンボル矩形リスト３３には、シンボル６１の外接矩形７１が含まれている。そのため、第２の検出部５２は、シンボル６１，６３の外接矩形７１，７３のうちシンボル６１の外接矩形７１が点滅シンボル矩形リスト３３に含まれていると判定し、図１２に示すように、シンボル６３を変化シンボルとして検出し、シンボル６１を変化シンボルとして検出しない。

図１３は、実施の形態１にかかる変化シンボル矩形リストの一例を示す図である。図１３に示す変化シンボル矩形リスト３４には、図９に示す点滅シンボル矩形リスト３３と同様に、「シンボルＩＤ」、「第１の座標」、および「第２の座標」が変化シンボル毎に含まれる。「シンボルＩＤ」は、各変化シンボルに固有の識別情報である。「第１の座標」は、変化シンボルの外接矩形の１つの角の座標であり、「第２の座標」は、「第１の座標」で示される角と対角の位置にある変化シンボルの外接矩形の他の１つの角の座標である。

図１３に示す例では、シンボルＩＤ「Ｓ２００１」の変化シンボルの外接矩形の第１の座標および第２の座標が「ｘ１１０，ｙ１１０」および「ｘ１１１，ｙ１１１」であることが示されている。また、図１３に示す例では、シンボルＩＤ「Ｓ２００２」の変化シンボルの外接矩形の第１の座標および第２の座標が「ｘ１２０，ｙ１２０」および「ｘ１２１，ｙ１２１」であることが示されている。

図５に示す統合部５３は、図６に示すように、点滅シンボル矩形リスト３３と変化シンボル矩形リスト３４とを統合して、全矩形リスト３５を生成する。図１４は、実施の形態１にかかる全矩形リストの一例を示す図である。図１４に示す全矩形リスト３５には、「確認番号」、「シンボルＩＤ」、「第１の座標」、「第２の座標」、および「シンボル種別」が動的シンボル毎に含まれる。

「確認番号」は、監視制御システム１の試験において、試験者が確認する順番を示す番号であり、後述するように番号割付部４６によって割り付けられる番号である。「シンボルＩＤ」、「第１の座標」、および「第２の座標」は、図９に示す点滅シンボル矩形リスト３３および図１３に示す変化シンボル矩形リスト３４の「シンボルＩＤ」、「第１の座標」、および「第２の座標」と同じである。「シンボル種別」は、動的シンボルの種別を示す情報であり、点滅シンボルおよび変化シンボルのうちいずれかを示す情報が含まれる。なお、全矩形リスト３５の「シンボルＩＤ」は、点滅シンボル矩形リスト３３および変化シンボル矩形リスト３４の「シンボルＩＤ」と異なっていてもよい。

図５に示すマーキング対象画像選定部４４は、キャプチャ画像情報３２を記憶部１３から読み出し、読み出したキャプチャ画像情報３２に基づいて、画像群に含まれる複数の変化後画像のうち１つの変化後画像をマーキング対象画像として試験項目毎に選定する。

マーキング対象画像選定部４４は、例えば画像群に含まれる複数の変化後画像のうち、含まれる点滅シンボルが最も明るい変化後画像をマーキング対象画像として選定する。例えば、マーキング対象画像選定部４４は、変化後画像に含まれる点滅シンボルの明るさとして、点滅シンボルを構成する複数の画素の輝度値の平均である輝度平均値Ｌ_ａｖｅが最も大きな変化後画像をマーキング対象画像として選定する。マーキング対象画像選定部４４は、複数の変化後画像の各々をグレースケール画像に変換した後、点滅シンボルの輝度平均値を算出するが、かかる例に限定されない。

図１５は、実施の形態１にかかるマーキング対象画像選定部によるマーキング対象画像の選定処理を説明するための図である。マーキング対象画像選定部４４は、図１５に示すように、変化後画像Ｂ１に含まれる点滅シンボルであるシンボル６１の平均輝度値Ｌ_ａｖｅ１と、変化後画像Ｂ２に含まれるシンボル６１の平均輝度値Ｌ_ａｖｅ２と、変化後画像Ｂ３に含まれるシンボル６１の平均輝度値Ｌ_ａｖｅ３とを算出する。なお、図１５に示す例では、シンボル６１の色の違いをハッチングの違いで示している。

図１５に示す例において、変化後画像Ｂ１，Ｂ２のシンボル６１の色よりも変化後画像Ｂ３のシンボル６１の色の方が明るいとする。すなわち、Ｌ_ａｖｅ１，Ｌ_ａｖｅ２＜Ｌ_ａｖｅ３であるとする。この場合、マーキング対象画像選定部４４は、変化後画像Ｂ３をマーキング対象画像として選定する。

マーキング対象画像選定部４４は、点滅シンボルの外形が矩形である場合、例えば、点滅シンボルの輝度平均値Ｌ_ａｖｅを下記式（１）の演算によって算出する。下記式（１）において、「Ｃ」は、点滅シンボルにおけるＸ軸方向の画素数、「Ｒ」は、点滅シンボルにおけるＹ軸方向の画素数である。「Ｌ（ｉ，ｊ）」は、画素の輝度値を示し、「ｉ」は、Ｘ軸方向の画素番号を示し、「ｊ」は、Ｙ軸方向の画素番号を示す。

なお、マーキング対象画像選定部４４は、点滅シンボルの座標として点滅シンボルが外接する外接矩形の座標を点滅シンボル矩形リスト３３から取得するが、点滅シンボルの座標を動的シンボル検出部４３から取得することもできる。また、マーキング対象画像選定部４４は、各変化後画像の全画素の輝度値の平均を算出し、複数の変化後画像のうち全画素の輝度値の平均が最も大きな変化後画像をマーキング対象画像として選定することもできる。

図５に示すマーキング色選定部４５は、マーキング対象画像選定部４４によって選定されたマーキング対象画像に基づいて、動的シンボルに付加するマーキング画像の色であるマーキング色を選定する。マーキング画像は、試験画像においてシンボルが動的シンボルであることを示す画像である。また、マーキング色は、ベース色とグラデーション色とで構成される。グラデーション色は、ベース色にグラデーションを付加するための色であり、背景色が黒色である場合、白色であり、背景色が白色である場合、黒色である。グラデーション色が白色または黒色である場合、グラデーション色は、ベース色にグラデーションを付加する際の明るさを示すとも言える。

マーキング色選定部４５は、マーキング対象画像内の色の分布に基づいて、マーキング対象画像内で最も使用されていない色をマーキング色のベース色として選定する。ベース色として決定される色には、背景色は含まれない。マーキング色選定部４５は、ベース色の判定において、ＨＳＶ（Hue Saturation Value）色空間を用いる。ＨＳＶ色空間とは、色相、彩度、および明度で表される空間である。色相は、色の種類を示し、彩度は、色の鮮やかさを示し、明度は、色の明るさを示す。

マーキング色選定部４５は、マーキング対象画像を構成する全画素の色相の情報を取得する。監視画面で使用される色の種類はそれほど多くないため、色相が０～１７９の範囲で表されるとした場合、色相を一定の幅で等分して、分割範囲毎に１つの色Ｃとしてマーキング対象画像を構成する画素で使用される頻度を算出する。色Ｃは、色Ｃ１～色Ｃｎまでのいずれかである。ｎは、例えば、１０以上の整数である。

マーキング色選定部４５は、マーキング対象画像を構成する複数の画素のうち、背景色の画素をベース色を判定するための対象から除外する。背景色は、白色または黒色である。例えば、マーキング色選定部４５は、明度が規定値以下の画素の色を黒色と判定し、明度が規定値以上かつ彩度が規定値以下の画素の色を白色と判定する。マーキング色選定部４５は、白色または黒色と判定した画素以外の画素の色Ｃを判定する。

図１６は、実施の形態１にかかるマーキング色選定部によるマーキング色のベース色の選定処理を説明するための図であり、図１６に示すグラフは、横軸が色相であり、縦軸が使用される頻度である。図１６に示す例では、マーキング色選定部４５は、色相が０～１４の場合には色Ｃ１、色相が１５～２９の場合には色Ｃ２、といったように、色相が１５区切りの色Ｃ１～Ｃ１２の各々の頻度を算出する。

図１６に示す例では、色Ｃ９の頻度と色Ｃ１０の頻度がゼロであり最も少ないため、マーキング色選定部４５は、色Ｃ９または色Ｃ１０をベース色として選定する。なお、マーキング色選定部４５は、色Ｃ９および色Ｃ１０のうち隣接する色Ｃの使用頻度が少ない色Ｃを選択することができる。図１６に示す例では、色Ｃ８の頻度が色Ｃ１１の頻度よりも低いため、マーキング色選定部４５は、色Ｃ９をベース色として選定する。なお、マーキング色選定部４５は、最小の頻度の色Ｃが複数ある場合、色相が最も大きな色Ｃまたは色相が最も小さな色Ｃをベース色として選定することもできる。

マーキング対象画像内で最も使用されていない色をマーキングに使用した場合においても、マーキングするシンボルの色またはマーキングする座標の周囲の色と同じ色または類似する色である場合がある。このような場合、マーキング画像の視認性が低下する可能性がある。

そこで、マーキング色選定部４５では、マーキング色のベース色に加えグラデーション色を選定する。そして、試験画像生成部４７によって生成されるマーキング画像において、マーキング色にグラデーションを付与し、明るさを座標毎に変化させていく。これにより、試験支援装置１０は、マーキング画像の色と周辺の色が一致することを抑制することができ、マーキング画像の視認性を向上させることができる。

背景色には白や黒が使用されることが多いが、グラデーションを付与したマーキング画像の色が背景色と被らないようにするためには、グラデーション色を背景色とは異なる色にすることが望ましい。

そこで、マーキング色選定部４５は、マーキング画像内の全画像のうち白が用いられている画素の頻度と黒が用いられている画素の頻度とを算出する。マーキング色選定部４５は、マーキング画像内の各画素について、明度が規定値以下である場合に、黒色と判定し、明度が規定値以上かつ彩度が規定値以下である場合に、白色と判定する。

マーキング色選定部４５は、マーキング画像内の全画像のうち白色が用いられている画素の頻度が黒色が用いられている画素の頻度よりも高ければ、黒色をグラデーション色として選定する。これにより、試験画像生成部４７によって、ベース色の明るさが暗く変化するようにグラデーションが付与され、マーキング対象画像内に高い視認性でマーキング画像を付加することができる。

また、マーキング色選定部４５は、マーキング画像内の全画像のうち黒色が用いられている画素の頻度が白色が用いられている画素の頻度よりも高ければ、白色をグラデーション色として選定する。これにより、試験画像生成部４７によって、ベース色の明るさが明るく変化するようにグラデーションが付与され、マーキング対象画像内に高い視認性でマーキング画像を付加することができる。

図１７は、実施の形態１にかかるマーキング色選定部によるグラデーション色の選定処理を説明するための図である。図１７に示す例では、マーキング画像内の全画像のうち黒色が用いられている画素の頻度が白色が用いられている画素の頻度よりも高い。そのため、マーキング色選定部４５は、白色をグラデーション色として選定する。

図５に示す番号割付部４６は、動的シンボル検出部４３で検出された複数の動的シンボルに対し、試験者が確認する順番を示す番号を割り付ける。例えば、番号割付部４６は、Ｙ軸座標が小さい動的シンボルから順に順番を割り付けたり、試験者の視線に基づいて、試験者が見ると推定される順に動的シンボルに順番を割り付けたりすることができる。また、番号割付部４６は、マーキング対象画像を複数の領域に分割し、分割した複数の領域のうちどの領域に動的シンボルが位置するかに基づいて、複数の動的シンボルに対して番号を割り付けることもできる。

図５に示す試験画像生成部４７は、マーキング対象画像選定部４４で選定されたマーキング対象画像において動的シンボル検出部４３で検出された複数の動的シンボルの各々に動的シンボルであることを示すマーキング画像が付加された画像を試験画像として生成する。具体的には、試験画像生成部４７は、マーキング対象画像において複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を試験画像として生成する。変化の態様が互いに異なる複数の動的シンボルは、上述した点滅シンボルと変化シンボルである。

このように、試験支援装置１０は、変化の態様が異なる複数の動的シンボルに対して異なるマーキング画像を付加できることから、例えば、試験者は、監視制御システム１において異なる態様の動的シンボルが誤って割り付けられていないかを容易に把握することができる。そのため、試験支援装置１０は、例えば、試験者の目視によるシンボルの確認を支援することができる。また、異なる態様の動的シンボルが誤って割り付けられていないかを示すエビデンスとして試験画像を用いることができることから、試験支援装置１０は、試験者による試験成績書の作成を支援することができる。

また、試験画像は、マーキング対象画像をベースとして生成されることから、変化後画像において暗い状態から明るい状態まで変化する点滅シンボルが明るい状態で試験画像に含まれる。そのため、試験支援装置１０は、点滅シンボルの視認性を高めることができ、試験者の目視によるシンボルの確認をより適切に支援することができる。

また、試験画像生成部４７によって付加されるマーキング画像の色は、マーキング色選定部４５によって選定されたマーキング色であり、かかるマーキング色は、シンボルの色および背景色に基づいて決定される。そのため、試験支援装置１０は、点滅シンボルの視認性を高めることができ、試験者の目視によるシンボルの確認をより適切に支援することができる。

図１８は、実施の形態１にかかるマーキング画像の一例を示す図である。図１８では、マーキング画像の明度のみを示しているが、マーキング画像は色相および色彩を有している。また、図１８では、シンボルの色をハッチングで表している。

図１８に示すマーキング画像８１は、シンボル６４が外接する矩形状の枠画像８２と不図示の確認番号を囲む三角形状の枠画像８３とを含む。図１８に示す枠画像８２，８３は、図１８における右下から左上にかけて色が明るくなっている。このように、枠画像８２，８３において明るさを座標毎に変化させていくことによって、マーキング画像８１の色と周辺の色が一致することを抑制することができ、マーキング画像８１の視認性を向上させることができる。

図５に示す試験画像生成部４７は、番号割付部４６によって各動的シンボルに割り付けられた番号をマーキング画像に含ませて試験画像を生成する。このように、試験支援装置１０は、動的シンボルに対して確認順序を示す確認情報が付加された試験画像を生成することができる。そのため、例えば、試験者は、変化前画像から変化した確認が必要な動的シンボルを、動的シンボルに付加された確認情報に基づいて確認することで、確認が必要な動的シンボルを漏れなく確認することができる。したがって、試験支援装置１０は、試験者による試験負担および試験者による動的シンボルの見落としを低減することができる。

図１９は、実施の形態１にかかる試験支援装置の試験画像生成部によって生成される試験画像の一例を示す図である。図１９に示す試験画像９９は、シンボル６５，６６，６７，６８，６９，７０と、マーキング画像８４，８５，８６，８７とを含む。マーキング画像８４は、「警報発生」の文字を含むシンボル６５に付加されており、確認番号を囲む枠画像は変化シンボルを示す円形であり、確認番号は「１」である。

また、マーキング画像８５は、「東区変電所」の文字で表されるシンボル６６に付加されており、確認番号を囲む枠画像は点滅シンボルを示す三角形であり、確認番号は「２」である。マーキング画像８６は、断路器を示すシンボル６８に付加されており、確認番号を囲む枠画像は変化シンボルを示す円形であり、確認番号は「３」である。マーキング画像８７は、遮断器を示すシンボル６９に付加されており、確認番号を囲む枠画像は点滅シンボルを示す三角形であり、確認番号は「４」である。また、断路器を示すシンボル６７および遮断器を示すシンボル７０には、マーキング画像が付されておらず、これらのシンボル６７，７０は変化していない。なお、試験画像において、最も大きな確認番号は、その他の確認番号と異なる色が付されており、試験者は、確認番号の色によって、確認すべきシンボルが最後のシンボルであるか否かを把握することができる。

図５に示す試験画像出力部４８は、出力装置５へ試験画像の情報を出力する。出力装置５は、例えば、表示装置および印刷装置を含む。出力装置５は、試験画像出力部４８から出力される試験画像の情報に基づいて、試験画像を表示したり、試験画像を印刷したりすることができる。なお、試験画像出力部４８は試験画像の情報を外部装置へ不図示の通信部に送信させることもできる。

つづいて、フローチャートを用いて試験支援装置１０の処理部１４による処理を説明する。図２０は、実施の形態１にかかる試験支援装置の処理部による処理の一例を示すフローチャートである。試験支援装置１０の処理部１４は、試験項目の画像群を取得する毎に、図２０に示す処理を繰り返し実行する。

図２０に示すように、処理部１４は、動的シンボル検出処理を実行する（ステップＳ１０）。かかる動的シンボル検出処理は、図２１に示すステップＳ２０～Ｓ２２の処理であり、後で詳述する。次に、処理部１４は、確認番号割付処理を実行する（ステップＳ１１）。ステップＳ１１の処理において、処理部１４は、ステップＳ１０の動的シンボル検出処理で検出された複数の動的シンボルに対し、試験者が確認する順番を示す番号を割り付ける。

次に、処理部１４は、マーキング対象画像選定処理を実行する（ステップＳ１２）。かかるマーキング対象画像選定処理は、図２４に示すステップＳ５０～Ｓ５７の処理であり、後で詳述する。そして、処理部１４は、マーキング色選定処理を実行する（ステップＳ１３）。かかるマーキング色選定処理は、図２５に示すステップＳ６０，Ｓ６１の処理であり、後で詳述する。

次に、処理部１４は、試験画像生成処理を実行する（ステップＳ１４）。かかる試験画像生成処理は、図２８に示すステップＳ９０～Ｓ９８の処理であり、後で詳述する。処理部１４は、ステップＳ１４の処理を終了した場合、図２０に示す処理を終了する。

図２１は、実施の形態１にかかる試験支援装置の処理部による動的シンボル検出処理の一例を示すフローチャートである。図２１に示すように、処理部１４は、点滅シンボル検出処理を実行する（ステップＳ２０）。かかる点滅シンボル検出処理は、図２２に示すステップＳ３０～Ｓ３５の処理であり、後で詳述する。次に、処理部１４は、変化シンボル検出処理を実行する（ステップＳ２１）。かかる変化シンボル検出処理は、図２３に示すステップＳ４０～Ｓ４６の処理であり、後で詳述する。

処理部１４は、ステップＳ２１の処理が終了した場合、全矩形リスト生成処理を行い（ステップＳ２２）、図２１に示す処理を終了する。ステップＳ２２の全矩形リスト生成処理は、ステップＳ２０の点滅シンボル検出処理で生成される点滅シンボル矩形リスト３３と、ステップＳ２１の変化シンボル検出処理で生成される変化シンボル矩形リスト３４とを統合して、全矩形リスト３５を生成する処理である。

図２２は、実施の形態１にかかる試験支援装置の処理部による点滅シンボル検出処理の一例を示すフローチャートである。図２２に示すように、処理部１４は、対象の試験項目についての画像群の複数の変化後画像を記憶部１３から取得する（ステップＳ３０）。

次に、処理部１４は、未選択の２つの変化後画像の組み合わせの１つを選択する（ステップＳ３１）。かかるステップＳ３１の処理において、ステップＳ３０で取得された複数の変化後画像が変化後画像Ｂ１，Ｂ２，Ｂ３であるとする。この場合、２つの変化後画像の組み合わせは、変化後画像Ｂ１，Ｂ２の組み合わせ、変化後画像Ｂ２，Ｂ３の組み合わせ、および変化後画像Ｂ１，Ｂ３の組み合わせである。

処理部１４は、ステップＳ３１で選択した組み合わせの２つの変化後画像を比較する（ステップＳ３２）。処理部１４は、ステップＳ３１で選択した組み合わせの２つの変化後画像間で変化する領域である変化領域があるか否かを判定する（ステップＳ３３）。処理部１４は、変化領域があると判定した場合（ステップＳ３３：Ｙｅｓ）、変化領域の各々を点滅シンボルとして判定し、点滅シンボルに対する外接矩形の情報を記憶部１３に記憶される点滅シンボル矩形リスト３３に追加する（ステップＳ３４）。

ステップＳ３４の処理において、処理部１４は、互いの距離が閾値以下の複数の変化点を１つのまとまりと見なし、１まとまりの領域を変化領域として判定する。これにより、処理部１４は、点滅シンボルが複数の文字で構成される場合であっても、点滅シンボルを精度よく検出することができる。

処理部１４は、ステップＳ３４の処理が終了した場合、または変化領域がないと判定した場合（ステップＳ３３：Ｎｏ）、ステップＳ３１で未選択の２つの変化後画像の組み合わせがあるか否かを判定する（ステップＳ３５）。処理部１４は、未選択の２つの変化後画像の組み合わせがあると判定した場合（ステップＳ３５：Ｙｅｓ）、処理をステップＳ３１に移行する。処理部１４は、未選択の２つの変化後画像の組み合わせがないと判定した場合（ステップＳ３５：Ｎｏ）、図２２に示す処理を終了する。

図２３は、実施の形態１にかかる試験支援装置の処理部による変化シンボル検出処理の一例を示すフローチャートである。図２３に示すように、処理部１４は、対象の試験項目についての変化前画像と変化後画像とを記憶部１３から取得する（ステップＳ４０）。

次に、処理部１４は、ステップＳ４０で取得した変化前画像と変化後画像とを比較し（ステップＳ４１）、かかる比較結果に基づいて、変化前画像と変化後画像との間で変化する領域である変化領域があるか否かを判定する（ステップＳ４２）。処理部１４は、変化領域があると判定した場合（ステップＳ４２：Ｙｅｓ）、ステップＳ４２であると判定された変化領域のうち１つを選択し、選択した１つの変化領域を動的シンボルと判定し、判定した動的シンボルに対する外接矩形の座標を算出する（ステップＳ４３）。

次に、処理部１４は、ステップＳ４３で算出した外接矩形の座標が点滅シンボル矩形リスト３３に含まれるか否かを判定する（ステップＳ４４）。処理部１４は、ステップＳ４３で算出した外接矩形の座標が点滅シンボル矩形リスト３３に含まれていないと判定した場合（ステップＳ４４：Ｎｏ）、ステップＳ４３で算出した外接矩形の座標を記憶部１３に記憶される変化シンボル矩形リスト３４に追加する（ステップＳ４５）。

処理部１４は、ステップＳ４５の処理が終了した場合、またはステップＳ４３で算出した外接矩形の座標が点滅シンボル矩形リスト３３に含まれていると判定した場合（ステップＳ４４：Ｙｅｓ）、ステップＳ４３で未選択の変化領域があるか否かを判定する（ステップＳ４６）。処理部１４は、未選択の変化領域があると判定した場合（ステップＳ４６：Ｙｅｓ）、処理をステップＳ４３に移行する。

処理部１４は、未選択の変化領域がないと判定した場合（ステップＳ４６：Ｎｏ）、または変化領域がないと判定した場合（ステップＳ４２：Ｎｏ）、図２３に示す処理を終了する。

図２４は、実施の形態１にかかる試験支援装置の処理部によるマーキング対象画像選定処理の一例を示すフローチャートである。図２４に示すように、処理部１４は、対象の試験項目についての画像群の複数の変化後画像を記憶部１３から取得する（ステップＳ５０）。

次に、処理部１４は、ステップＳ５０で取得した複数の変化後画像のうち未選択の変化後画像の１つを選択する（ステップＳ５１）。そして、処理部１４は、ステップＳ５１で選択した変化後画像に含まれる点滅シンボルを構成する複数の画素のうち未選択の画素を選択し（ステップＳ５２）、選択した画素の輝度値を合計輝度値に加算する（ステップＳ５３）。なお、合計輝度値は、ステップＳ５１で変化後画像が選択されたときに、リセットされてゼロになる。

次に、処理部１４は、ステップＳ５１で選択した変化後画像に含まれる点滅シンボルを構成する複数の画素のうち未選択の画素があるか否かを判定する（ステップＳ５４）。処理部１４は、未選択の画素があると判定した場合（ステップＳ５４：Ｙｅｓ）、処理をステップＳ５２に移行する。

また、処理部１４は、未選択の画素がないと判定した場合（ステップＳ５４：Ｎｏ）、画素の輝度値の平均である輝度平均値Ｌ_ａｖｅを算出する（ステップＳ５５）。ステップＳ５５の処理において、処理部１４は、ステップＳ５１で選択した変化後画像に含まれる点滅シンボルを構成する画素の数で合計輝度値を乗算することによって、輝度平均値Ｌ_ａｖｅを算出する。

次に、処理部１４は、ステップＳ５０で取得した複数の変化後画像のうち未選択の変化後画像があるか否かを判定する（ステップＳ５６）。処理部１４は、未選択の変化後画像があると判定した場合（ステップＳ５６：Ｙｅｓ）、処理をステップＳ５１に移行する。

処理部１４は、未選択の変化後画像がないと判定した場合（ステップＳ５６：Ｎｏ）、点滅シンボルの輝度平均値が最も大きい変化後画像をマーキング対象画像として選定し（ステップＳ５７）、図２４に示す処理を終了する。なお、処理部１４は、点滅シンボルを構成する複数の画素に代えて、点滅シンボルが外接する矩形である外接矩形内の複数の画素を用いることもできる。この場合、処理部１４は、外接矩形内の画素数で合計輝度値を乗算することによって、輝度平均値Ｌ_ａｖｅを算出する。

図２５は、実施の形態１にかかる試験支援装置の処理部によるマーキング色選定処理の一例を示すフローチャートである。図２５に示すように、処理部１４は、ベース色決定処理を実行する（ステップＳ６０）。かかるベース色決定処理は、図２６のステップＳ７０～Ｓ７５の処理であり、後で詳述する。

次に、処理部１４は、グラデーション色決定処理を実行する（ステップＳ６１）。かかるグラデーション色決定処理は、図２７のステップＳ８０～Ｓ８８の処理であり、後で詳述する。処理部１４は、ステップＳ６１の処理を終了した場合、図２５に示す処理を終了する。

図２６は、実施の形態１にかかる試験支援装置の処理部によるベース色決定処理の一例を示すフローチャートである。図２６に示すように、処理部１４は、マーキング対象画像を構成する複数の画素のうち未選択の１つの画素を選択する（ステップＳ７０）。

次に、処理部１４は、ステップＳ７０で選択した画素の明度が規定値以下またはステップＳ７０で選択した画素の彩度が規定値以下であるか否かを判定する（ステップＳ７１）。処理部１４は、明度が規定値以下または彩度が規定値以下ではないと判定した場合（ステップＳ７１：Ｎｏ）、ステップＳ７０で選択した画素の色相が予め定められた色相条件を充足しているか否かを判定する（ステップＳ７２）。予め定められた色相条件は、例えば、図１６に示す色Ｃ１は、色相が０～１４であり、図１６に示す色Ｃ２は、色相が１５～２９などである。

処理部１４は、予め定められた色相条件を充足していると判定した場合（ステップＳ７２：Ｙｅｓ）、選択した画素の色相に対応する色Ｃのヒストグラム値を更新する（ステップＳ７３）。なお、ステップＳ７２の処理は省略することもできる。

処理部１４は、ステップＳ７３の処理が終了した場合、明度が規定値以下または彩度が規定値以下であると判定した場合（ステップＳ７１：Ｙｅｓ）、または予め定められた色相条件を充足していないと判定した場合（ステップＳ７２：Ｎｏ）、ステップＳ７０で未選択の画素があるか否かを判定する（ステップＳ７４）。

処理部１４は、未選択の画素があると判定した場合（ステップＳ７４：Ｙｅｓ）、処理はステップＳ７０に移行する。また、処理部１４は、未選択の画素がないと判定した場合（ステップＳ７４：Ｎｏ）、ヒストグラム値の最も小さい色をベース色として選択する（ステップＳ７５）。処理部１４は、ステップＳ７５の処理が終了した場合、図２６に示す処理を終了する。

図２７は、実施の形態１にかかる試験支援装置の処理部によるグラデーション色決定処理の一例を示すフローチャートである。処理部１４は、マーキング対象画像を構成する複数の画素のうち未選択の１つの画素を選択する（ステップＳ８０）。処理部１４は、ステップＳ８０で選択した画素の明度が規定値以下であるか否かを判定する（ステップＳ８１）。処理部１４は、明度が規定値以下であると判定した場合（ステップＳ８１：Ｙｅｓ）、黒ヒストグラム値に１を加算して黒ヒストグラム値を更新する（ステップＳ８２）。黒ヒストグラム値は、黒色のヒストグラム値である。

処理部１４は、ステップＳ８２の処理を終了した場合、または明度が規定値以下ではないと判定した場合（ステップＳ８１：Ｎｏ）、ステップＳ８０で選択された画素の明度が規定値より大きく且つ彩度が規定値以下であるか否かを判定する（ステップＳ８３）。処理部１４は、明度が規定値より大きく且つ彩度が規定値以下であると判定した場合（ステップＳ８３：Ｙｅｓ）、白ヒストグラム値に１を加算して白ヒストグラム値を更新する（ステップＳ８４）。白ヒストグラム値は、白色のヒストグラム値である。

処理部１４は、ステップＳ８４の処理を終了した場合、または明度が規定値より大きくないまたは彩度が規定値以下ではないと判定した場合（ステップＳ８３：Ｎｏ）、ステップＳ８０で未選択の画素があるか否かを判定する（ステップＳ８５）。処理部１４は、未選択の画素があると判定した場合（ステップＳ８５：Ｙｅｓ）、処理をステップＳ８０に移行する。処理部１４は、未選択の画素がないと判定した場合（ステップＳ８５：Ｎｏ）、黒ヒストグラム値が白ヒストグラム値以上であるか否かを判定する（ステップＳ８６）。

処理部１４は、黒ヒストグラム値が白ヒストグラム値以上であると判定した場合（ステップＳ８６：Ｙｅｓ）、グラデーション色として白色を選定する（ステップＳ８７）。また、処理部１４は、黒ヒストグラム値が白ヒストグラム値以上ではないと判定した場合（ステップＳ８６：Ｎｏ）、グラデーション色として黒色を選定する（ステップＳ８８）。

処理部１４は、ステップＳ８７の処理が終了した場合、またはステップＳ８８の処理が終了した場合、図２７に示す処理を終了する。

図２８は、実施の形態１にかかる試験支援装置の処理部による試験画像生成処理の一例を示すフローチャートである。図２８に示すように、処理部１４は、記憶部１３に記憶される全矩形リスト３５に含まれる複数の動的シンボルの１つを選択する（ステップＳ９０）。

次に、処理部１４は、ステップＳ１２のマーキング対象画像選定処理で選定したマーキング対象画像にステップＳ１３のマーキング色選定処理で選定した色で指定座標に矩形状の枠画像を付加する（ステップＳ９１）。指定座標は、付加される矩形状の枠画像がステップＳ９０で選択された動的シンボルに内接する位置である。

次に、処理部１４は、全矩形リスト３５に含まれるシンボル種別の情報に基づいて、ステップＳ９０で選択した動的シンボルが点滅シンボルであるか否かを判定する（ステップＳ９２）。処理部１４は、ステップＳ９０で選択した動的シンボルが点滅シンボルであると判定した場合（ステップＳ９２：Ｙｅｓ）、ステップＳ９０で選択した動的シンボルに対して三角形状の枠画像をマーキング画像に追加する（ステップＳ９３）。また、処理部１４は、ステップＳ９０で選択した動的シンボルが点滅シンボルではないと判定した場合（ステップＳ９２：Ｎｏ）、ステップＳ９０で選択した動的シンボルに対して円形状の枠画像をマーキング画像に追加する（ステップＳ９４）。

処理部１４は、ステップＳ９３の処理が終了した場合、またはステップＳ９４の処理が終了した場合、全矩形リスト３５に含まれる確認番号の情報に基づいて、ステップＳ９０で選択した動的シンボルの確認番号が最大であるか否かを判定する（ステップＳ９５）。処理部１４は、確認番号が最大であると判定した場合（ステップＳ９５：Ｙｅｓ）、ステップＳ９３またはステップＳ９４で追加された枠画像内に赤色で確認番号を追加する（ステップＳ９６）。また、処理部１４は、確認番号が最大ではないと判定した場合（ステップＳ９５：Ｎｏ）、ステップＳ９３またはステップＳ９４で追加された枠画像内に黒色で確認番号を追加する（ステップＳ９７）。

処理部１４は、ステップＳ９６の処理が終了した場合、またはステップＳ９７の処理が終了した場合、全矩形リスト３５に含まれる複数の動的シンボルのうちステップＳ９０で未選択の動的シンボルがあるか否かを判定する（ステップＳ９８）。処理部１４は、未選択の動的シンボルがあると判定した場合（ステップＳ９８：Ｙｅｓ）、処理をステップＳ９０に移行する。また、処理部１４は、未選択の動的シンボルがないと判定した場合（ステップＳ９８：Ｎｏ）、図２８に示す処理を終了する。

図２９は、実施の形態１にかかる試験支援装置の処理部のハードウェア構成の一例を示す図である。図２９に示すように、試験支援装置１０の処理部１４は、プロセッサ１０１と、メモリ１０２とを備えるコンピュータを含む。プロセッサ１０１およびメモリ１０２は、例えば、バス１０３によって互いに情報の送受信が可能である。プロセッサ１０１は、メモリ１０２に記憶されたプログラムを読み出して実行することによって、模擬信号出力部４１、画像取得部４２、動的シンボル検出部４３、マーキング対象画像選定部４４、マーキング色選定部４５、番号割付部４６、試験画像生成部４７、および試験画像出力部４８などの機能を実行する。プロセッサ１０１は、例えば、処理回路の一例であり、ＣＰＵ（Central Processing Unit）、ＤＳＰ（Digital Signal Processor）、およびシステムＬＳＩ（Large Scale Integration）のうち一つ以上を含む。

メモリ１０２は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）、およびＥＥＰＲＯＭ（登録商標）（Electrically Erasable Programmable Read Only Memory）のうち一つ以上を含む。また、メモリ１０２は、コンピュータが読み取り可能なプログラムが記録された記録媒体を含む。かかる記録媒体は、不揮発性または揮発性の半導体メモリ、磁気ディスク、フレキシブルメモリ、光ディスク、コンパクトディスク、およびＤＶＤ（Digital Versatile Disc）のうち一つ以上を含む。なお、処理部１４は、ＡＳＩＣ（Application Specific Integrated Circuit）およびＦＰＧＡ（Field Programmable Gate Array）などの集積回路を含んでいてもよい。

以上のように、実施の形態１にかかる試験支援装置１０によって実行される試験支援方法は、画像取得部４２によって実行される画像取得ステップと、動的シンボル検出部４３によって実行される動的シンボル検出ステップと、試験画像生成部４７によって実行される試験画像生成ステップと、を含む。画像取得ステップは、監視画面を各々異なる時間でキャプチャした画像であるキャプチャ画像であってシンボルの変化前の画像とシンボルの変化後の複数の画像とを含む画像群を取得する。動的シンボル検出ステップは、画像取得ステップで取得された画像群に含まれる複数の画像間で変化した複数のシンボルを複数の動的シンボルとして検出する。試験画像生成ステップは、画像群に含まれる変化後の複数の画像のうちの１つの画像であるマーキング対象画像において動的シンボル検出ステップで検出された複数の動的シンボルの各々に対して動的シンボルであることを示すマーキング画像が付加された画像を試験画像として生成する。また、試験画像生成ステップは、マーキング対象画像において複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を試験画像として生成する。これにより、試験支援装置１０で実行される試験支援方法では、監視制御システム１の試験結果を示す試験画像９０，９９を生成して監視制御システム１の試験を支援することができる。また、本試験支援方法では、変化の態様が異なる複数の動的シンボルに対して異なるマーキング画像が付加されることから、例えば、試験者は、監視制御システム１において異なる態様の動的シンボルが誤って割り付けられていないかを容易に把握することができる。そのため、本試験支援方法では、例えば、試験者の目視によるシンボルの確認を支援することができる。また、異なる態様の動的シンボルが誤って割り付けられていないかを示すエビデンスとして試験画像を用いることができることから、本試験支援方法では、試験者による試験に加え、試験者による試験成績書の作成を支援することができる。

また、動的シンボル検出ステップは、複数の変化後画像間で変化したシンボルを点滅シンボルとして検出し、変化前画像と変化後画像との間で変化したシンボルのうち点滅シンボルを除くシンボルを変化シンボルとして検出する。点滅シンボルは、第１の動的シンボルの一例である。変化シンボルは、第２の動的シンボルの一例である。試験画像生成ステップは、マーキング対象画像において点滅シンボルと変化シンボルとで互いに異なるマーキング画像が付加された試験画像９０，９９を生成する。これにより、試験支援装置１０で実行される試験支援方法では、変化シンボルと点滅シンボルとを区別した試験画像を生成することができ、監視制御システム１の試験をより支援することができる。

また、試験支援装置１０によって実行される試験支援方法は、マーキング対象画像選定部４４で実行されるマーキング対象画像選定ステップを含む処理を実行する。マーキング対象画像選定ステップは、複数の変化後画像のうち複数の変化後画像間で変化する点滅シンボルの明るさが最も明るい変化後画像をマーキング対象画像として決定する。これにより、試験支援装置１０で実行される試験支援方法では、点滅シンボルの視認性の高い変化後画像をマーキング対象画像として決定することができ、監視制御システム１の試験をより支援することができる。

また、試験支援装置１０によって実行される試験支援方法は、マーキング色選定部４５で実行されるマーキング色選定ステップを含む処理を実行する。マーキング色選定ステップは、複数の動的シンボルの各々に対して付加するマーキング画像の色を、マーキング対象画像の色に基づいて決定する。試験画像生成ステップは、マーキング対象画像においてマーキング色選定ステップで決定された色のマーキング画像が複数の動的シンボルに付加された画像を試験画像として生成する。これにより、試験支援装置１０で実行される試験支援方法では、動的シンボルの視認性を高めた試験画像を生成することができ、監視制御システム１の試験をより支援することができる。

また、マーキング色選定ステップは、マーキング対象画像のうち背景色として用いられる色を除く色の分布に基づいてマーキング対象画像での使用頻度が最も少ない色をマーキング対象画像のベース色として決定し、マーキング対象画像のうち背景色として用いられる色と異なる色でベース色にグラデーションを付加した色をマーキング対象画像の色として決定する。これにより、試験支援装置１０で実行される試験支援方法では、動的シンボルの視認性をより高めた試験画像を生成することができ、監視制御システム１の試験をより支援することができる。

また、マーキング色選定ステップは、背景色として用いられる色が白である場合にベース色に黒でグラデーションを付加した色をマーキング対象画像の色として決定し、背景色として用いられる色が黒である場合にベース色に白でグラデーションを付加した色をマーキング対象画像の色として決定する。これにより、試験支援装置１０で実行される試験支援方法では、動的シンボルの視認性をより高めた試験画像を生成することができ、監視制御システム１の試験をより支援することができる。

実施の形態２．
実施の形態２にかかる試験支援装置は、動的シンボルとして点滅シンボルおよび変化シンボルに加えて移動シンボルを検出し、検出した移動シンボルに点滅シンボルおよび変化シンボルとは異なるマーキング画像を付加する点で、実施の形態１にかかる試験支援装置１０と異なる。以下においては、実施の形態１と同様の機能を有する構成要素については同一符号を付して説明を省略し、実施の形態１の試験支援装置１０と異なる点を中心に説明する。

図３０は、実施の形態２にかかる試験支援装置の構成の一例を示す図である。図３０に示すように、実施の形態２にかかる試験支援装置１０Ａは、通信部１１と、撮像部１２と、記憶部１３Ａと、処理部１４Ａとを備える。

記憶部１３Ａは、移動元シンボルリスト３６と移動先シンボルリスト３７と移動シンボル矩形リスト３８とを備える点で、記憶部１３と異なる。移動元シンボルリスト３６、移動先シンボルリスト３７、および移動シンボル矩形リスト３８は、処理部１４Ａによって記憶部１３Ａに追加される情報であり、後述する。

処理部１４Ａは、動的シンボル検出部４３および試験画像生成部４７に代えて、動的シンボル検出部４３Ａおよび試験画像生成部４７Ａを備える点で、処理部１４と異なる。動的シンボル検出部４３Ａは、第３の検出部５４を備えると共に、統合部５３に代えて統合部５３Ａを備える点で、動的シンボル検出部４３と異なる。

第３の検出部５４は、動的シンボルとして移動シンボルを検出する。図３１は、実施の形態２にかかる試験支援装置によって検出される移動シンボルを説明するための図である。図３１に示すように、移動シンボル６０は、変化前画像と変化後画像との間で位置が変化するシンボルである。すなわち、移動シンボル６０は、模擬信号によって位置が変化するシンボルである。移動シンボル６０は、例えば、移動シンボルに割り当てられた機器が取り外された場合に、移動するシンボルである。

第３の検出部５４は、マーキング色選定部４５によって検出された背景色の情報に基づいて、変化前画像と変化後画像との間で背景に変化したシンボルの変化前画像における座標および色を検出し、検出したシンボルの座標および色を含む移動元シンボルリスト３６を生成し、生成した移動元シンボルリスト３６を記憶部１３Ａに記憶させる。図３２は、実施の形態２にかかる移動元シンボルリストの一例を示す図である。

図３２に示すように、移動元シンボルリスト３６には、「シンボルＩＤ」、「第１の座標」、「第２の座標」、および「色」がシンボル毎に含まれる。「シンボルＩＤ」は、各移動シンボルの識別情報である。「第１の座標」、および「第２の座標」は、点滅シンボル矩形リスト３３などの「第１の座標」、および「第２の座標」と同じである。「色」は、シンボルの色を示す情報である。なお、「色」は、シンボルを構成する複数の座標の各々の色を示す情報であってもよい。

図３０に示す第３の検出部５４は、マーキング色選定部４５によって検出された背景色の情報に基づいて、変化前画像と変化後画像との間で背景から変化したシンボルの変化後画像における座標および色を検出し、検出したシンボルの座標および色を含む移動先シンボルリスト３７を生成し、生成した移動先シンボルリスト３７を記憶部１３Ａに記憶させる。移動先シンボルリスト３７は、移動元シンボルリスト３６と同様のリストである。

第３の検出部５４は、生成した移動元シンボルリスト３６と移動先シンボルリスト３７とに基づいて、移動シンボルを検出し、検出した移動シンボルの情報を含む移動シンボル矩形リスト３８を記憶部１３Ａに記憶させる。移動シンボル矩形リスト３８には、移動シンボルの移動元の座標と移動先の座標とが含まれる。

図３３は、実施の形態２にかかる移動シンボル矩形リストの一例を示す図である。図３３に示すように、移動シンボル矩形リスト３８には、「シンボルＩＤ」、「移動元座標」、および「移動先座標」が移動シンボル毎に含まれる。「移動元座標」は、移動シンボルの移動元の座標の情報であり、「移動先座標」は、移動シンボルの移動先の座標の情報である。「移動元座標」および「移動先座標」の各々には、「第１の座標」および「第２の座標」が含まれる。「第１の座標」および「第２の座標」は、点滅シンボル矩形リスト３３および変化シンボル矩形リスト３４の「第１の座標」および「第２の座標」と同じである。

図３４は、実施の形態２にかかる試験支援装置の動的シンボル検出部による移動シンボルの検出方法を説明するための図である。図３４に示す例では、変化前画像にはシンボル７４，７５，７６，７７，７８，７９が含まれ、変化後画像にはシンボル７４，７５，７６’，７７，７８，７９が含まれている。

第３の検出部５４は、変化前画像と変化後画像との間で背景に変化したシンボル７６の変化前画像における座標および色を検出し、検出したシンボル７６の座標および色を含む移動元シンボルリスト３６を生成する。また、第３の検出部５４は、変化前画像と変化後画像との間で背景から変化したシンボル７６’の変化後画像における座標および色を検出し、検出したシンボル７６’の座標および色を含む移動先シンボルリスト３７を生成する。

第３の検出部５４は、生成した移動元シンボルリスト３６に含まれるシンボル７６の座標および色と移動先シンボルリスト３７に含まれるシンボル７６’の座標および色とに基づいて、移動シンボルを検出する。第３の検出部５４は、シンボル７６とシンボル７６’とが同じ形状で同じ色であるため、シンボル７６’を移動シンボルと検出する。第３の検出部５４は、シンボル７６の座標を移動元座標として含み且つシンボル７６’の座標を移動先座標として含む移動シンボル矩形リスト３８を生成し、生成した移動シンボル矩形リスト３８を記憶部１３Ａに記憶させる。

第３の検出部５４は、移動元シンボルリスト３６と移動先シンボルリスト３７とに各々２つ以上のシンボルの情報が含まれている場合、移動前のシンボルと同じ色の移動後のシンボルであって移動前のシンボルに最も近い移動後のシンボルを対応付けて移動シンボルの情報として移動シンボル矩形リスト３８に加える。

図３５は、実施の形態２にかかる試験支援装置の動的シンボル検出部による複数の移動シンボルの検出方法を説明するための図である。図３５に示す例では、変化前画像にはシンボル１１０，１１１が含まれ、変化後画像にはシンボル１１０’，１１１’が含まれている。

第３の検出部５４は、変化前画像と変化後画像との間で背景に変化したシンボル１１０，１１１の変化前画像における座標および色を検出し、検出したシンボル１１０，１１１の座標および色を含む移動元シンボルリスト３６を生成する。また、第３の検出部５４は、変化前画像と変化後画像との間で背景から変化したシンボル１１０’，１１１’の変化後画像における座標および色を検出し、検出したシンボル１１０’，１１１’の座標および色を含む移動先シンボルリスト３７を生成する。

第３の検出部５４は、移動元シンボルリスト３６に含まれる複数の移動前のシンボルのうち１つのシンボルの座標を取得し、かかるシンボルと同じ色で座標が最も近い移動後のシンボルの座標を移動先シンボルリスト３７から取得する。第３の検出部５４は、座標を取得した移動前のシンボルと移動後のシンボルとが同じ移動シンボルであると判定し、かかる移動シンボルの移動前の座標と移動後の座標とを含む移動シンボル矩形リスト３８を生成する。

図３５に示す例では、シンボル１１０の座標は、シンボル１１０’，１１１’のうちシンボル１１０’の座標と最も近く、シンボル１１０の色もシンボル１１０’の色と同じである。また、シンボル１１１の座標は、シンボル１１０’，１１１’のうちシンボル１１１’の座標と最も近く、シンボル１１１の色もシンボル１１１’の色と同じである。

そのため、第３の検出部５４は、シンボル１１０とシンボル１１０’とが同じ移動シンボルであると判定し、シンボル１１１とシンボル１１１’とが同じ移動シンボルであると判定する。第３の検出部５４は、シンボル１１０の座標とシンボル１１０’の座標とを含む移動シンボルの情報と、シンボル１１１の座標とシンボル１１１’の座標とを含む移動シンボルの情報とを含む移動シンボル矩形リスト３８を生成する。

図３０に示す統合部５３Ａは、点滅シンボル矩形リスト３３、変化シンボル矩形リスト３４、および移動シンボル矩形リスト３８を統合して全矩形リスト３５を生成する点で、移動シンボル矩形リスト３８を統合しない統合部５３と異なる。統合部５３Ａによって生成される全矩形リスト３５には、点滅シンボルの情報および変化シンボルの情報に加え、移動シンボルの情報が含まれる。

図３０に示す試験画像生成部４７Ａは、点滅シンボル、変化シンボル、および移動シンボルの各々に対して互いに異なるマーキング画像を付加する点で、点滅シンボルおよび変化シンボルの各々に対して互いに異なるマーキング画像を付加する試験画像生成部４７と異なる。

試験画像生成部４７Ａは、マーキング対象画像選定部４４で選定されたマーキング対象画像において動的シンボル検出部４３Ａで検出された複数の動的シンボルの各々に動的シンボルであることを示すマーキング画像が付加された画像を試験画像として生成する。具体的には、試験画像生成部４７Ａは、複数の動的シンボルのうち変化の態様が互いに異なる点滅シンボル、変化シンボル、および移動シンボルの各々に互いに異なるマーキング画像が付加された画像を試験画像として生成する。

図３６は、実施の形態２にかかる試験支援装置の試験画像生成部によって生成される試験画像の一例を示す図であり、図３４に示す監視画像に対応する試験画像である。図３６に示す試験画像では、マーキング対象画像において動的シンボル検出部４３Ａで検出された複数のシンボル７５，７６’に付加されたマーキング画像１２０，１２１’と、変化前画像のシンボル７６の位置に付加されたマーキング画像１２１とを含む。

このように、試験画像生成部４７Ａによって生成される試験画像において、シンボル７６’の位置に付加されたマーキング画像１２１’と変化前画像のシンボル７６の位置に付加されたマーキング画像１２１とが含まれる。これにより、試験支援装置１０Ａは、移動シンボルの変化前の位置と変化後の位置を強調表示することができる。そのため、例えば、試験者は、試験支援装置１０Ａによって生成された試験画像に基づいて、移動シンボルの変化前の位置と変化後の位置を把握することができ、移動先の位置が間違っているか否かを容易に把握することができる。また、シンボル７６’の位置に付加されたマーキング画像１２１’と変化前画像のシンボル７６の位置に付加されたマーキング画像１２１とに、確認番号を囲む矩形状の枠画像が含まれる。そのため、例えば、試験者は、移動シンボルの変化前の位置と変化後の位置を容易に把握することができる。

図３７は、実施の形態２にかかる試験支援装置の試験画像生成部によって生成される試験画像の他の例を示す図であり、図３５に示す監視画像に対応する試験画像である。図３７に示す試験画像では、マーキング対象画像において動的シンボル検出部４３Ａで検出された複数のシンボル１１０’，１１１’に付加されたマーキング画像１２２’，１２３’と、変化前画像のシンボル１１０，１１１の位置に付加されたマーキング画像１２２，１２３とを含む。これにより、試験者は、試験支援装置１０Ａによって生成された試験画像に基づいて、移動シンボルの変化前の位置と変化後の位置を把握することができ、移動先の位置が間違っているか否かを容易に把握することができる。

つづいて、フローチャートを用いて試験支援装置１０Ａの処理部１４Ａによる処理を説明する。図３８は、実施の形態２にかかる試験支援装置の処理部による処理の一例を示すフローチャートである。試験支援装置１０Ａの処理部１４Ａは、試験項目の画像群を取得する毎に、図３８に示す処理を繰り返し実行する。

図３８に示すステップＳ１００，Ｓ１０１，Ｓ１０３の処理は、図２０に示すステップＳ１２，Ｓ１３，Ｓ１１の処理と同じであり、説明を省略する。また、図３８に示すステップＳ１０４の処理は、移動シンボルに異なるマーキング画像を付加する処理が追加される点で、図２０に示すステップＳ１４の処理と異なる。

図３８に示すように、処理部１４Ａは、ステップＳ１０１の処理が終了した場合、動的シンボル検出処理を実行する（ステップＳ１０２）。かかる動的シンボル検出処理は、図３９に示すステップＳ１１０～Ｓ１１２の処理である。

図３９は、実施の形態２にかかる試験支援装置の処理部による動的シンボル検出処理の一例を示すフローチャートである。図３９に示すステップＳ１１０，Ｓ１１１の処理は、図２１に示すステップＳ２０，Ｓ２１の処理と同じであり、説明を省略する。処理部１４Ａは、移動シンボル検出処理を実行する（ステップＳ１１２）。かかる移動シンボル検出処理は、図４０に示すステップＳ１２０～Ｓ１３２の処理であり、後で説明する。

処理部１４Ａは、全矩形リスト生成処理を実行し（ステップＳ１１３）、図３９に示す処理を終了する。ステップＳ１１３の全矩形リスト生成処理において、処理部１４Ａは、ステップＳ１１０の処理で生成される点滅シンボル矩形リスト３３と、ステップＳ１１１の処理で生成される変化シンボル矩形リスト３４と、ステップＳ１１２の処理で生成される移動シンボル矩形リスト３８とを統合して、全矩形リスト３５を生成する。

図４０は、実施の形態２にかかる試験支援装置の処理部による移動シンボル検出処理の一例を示すフローチャートである。図４０に示すように、処理部１４Ａは、変化シンボル矩形リスト３４から未選択の１つの外接矩形を選択する（ステップＳ１２０）。処理部１４Ａは、変化後の色が背景色であるか否かを判定する（ステップＳ１２１）。ステップＳ１２１の処理において、処理部１４Ａは、変化後画像のうちステップＳ１２０で選択した外接矩形の座標の色が背景色であるか否かを判定する。

処理部１４Ａは、変化後の色が背景色であると判定した場合（ステップＳ１２１：Ｙｅｓ）、ステップＳ１２０で選択した外接矩形の座標および色を含むシンボルの情報を移動元シンボルリスト３６に追加する（ステップＳ１２２）。処理部１４Ａは、変化後の色が背景色ではないと判定した場合（ステップＳ１２１：Ｎｏ）、変化前の色が背景色であるか否かを判定する（ステップＳ１２３）。ステップＳ１２３の処理において、処理部１４Ａは、変化前画像のうちステップＳ１２０で選択した外接矩形の座標の色が背景色であるか否かを判定する。

処理部１４Ａは、変化前の色が背景色であると判定した場合（ステップＳ１２３：Ｙｅｓ）、ステップＳ１２０で選択した外接矩形の座標および色を含むシンボルの情報を移動先シンボルリスト３７に追加する（ステップＳ１２４）。処理部１４Ａは、ステップＳ１２２の処理が終了した場合、またはステップＳ１２４の処理が終了した場合、ステップＳ１２０で選択した外接矩形の情報を変化シンボル矩形リスト３４から削除する（ステップＳ１２５）。

処理部１４Ａは、ステップＳ１２５の処理が終了した場合、または変化前の色が背景色ではないと判定した場合（ステップＳ１２３：Ｎｏ）、ステップＳ１２０で未選択の外接矩形があるか否かを判定する（ステップＳ１２６）。処理部１４Ａは、未選択の外接矩形があると判定した場合（ステップＳ１２６：Ｙｅｓ）、処理をステップＳ１２０に移行する。

処理部１４Ａは、未選択の外接矩形がないと判定した場合（ステップＳ１２６：Ｎｏ）、移動元シンボルリスト３６から１つのシンボルを選択する（ステップＳ１２７）。処理部１４Ａは、移動先シンボルリスト３７から１つのシンボルを選択する（ステップＳ１２８）。処理部１４Ａは、ステップＳ１２７で選択したシンボルの色とステップＳ１２８で選択したシンボルの色が一致するか否かを判定する（ステップＳ１２９）。

処理部１４Ａは、シンボルの色が一致すると判定した場合（ステップＳ１２９：Ｙｅｓ）、ステップＳ１２７で選択したシンボルとステップＳ１２８で選択したシンボルとを１つの移動シンボルとして移動シンボル矩形リスト３８に追加する（ステップＳ１３０）。処理部１４Ａは、シンボルの色が一致しないと判定した場合（ステップＳ１２９：Ｎｏ）、ステップＳ１２８で未選択のシンボルがあるか否かを判定する（ステップＳ１３１）。

処理部１４Ａは、未選択のシンボルがあると判定された場合（ステップＳ１３１：Ｙｅｓ）、処理をステップＳ１２８に移行する。処理部１４Ａは、未選択のシンボルがないと判定された場合（ステップＳ１３１：Ｎｏ）、またはステップＳ１３０の処理が終了した場合、ステップＳ１２７で未選択のシンボルがあるか否かを判定する（ステップＳ１３２）。処理部１４Ａは、未選択のシンボルがあると判定した場合（ステップＳ１３２：Ｙｅｓ）、処理をステップＳ１２７に移行する。処理部１４Ａは、未選択のシンボルがないと判定した場合（ステップＳ１３２：Ｎｏ）、図４０に示す処理を終了する。

実施の形態２にかかる試験支援装置１０Ａの処理部１４Ａのハードウェア構成例は、図２９に示す試験支援装置１０の処理部１４のハードウェア構成と同じである。プロセッサ１０１は、メモリ１０２に記憶されたプログラムを読み出して実行することによって、模擬信号出力部４１、画像取得部４２、動的シンボル検出部４３Ａ、マーキング対象画像選定部４４、マーキング色選定部４５、番号割付部４６、試験画像生成部４７Ａ、および試験画像出力部４８の機能を実行することができる。

以上のように、実施の形態２にかかる試験支援装置１０Ａで実行される試験支援方法は、上述した画像取得ステップと、動的シンボル検出部４３Ａで実行される動的シンボル検出ステップと、試験画像生成部４７Ａで実行される試験画像生成ステップとを含む。動的シンボル検出ステップは、複数の変化後画像間で変化したシンボルを点滅シンボルとして検出し、変化前画像と複数の変化後画像の１つとの間で変化したシンボルのうち位置が移動したシンボルを移動シンボルとして検出し、変化前画像と１つの変化後画像との間で変化したシンボルのうち点滅シンボルと移動シンボルとを除くシンボルを変化シンボルとして検出する。移動シンボルは、第３の動的シンボルの一例である。試験画像生成ステップは、マーキング対象画像において点滅シンボルと変化シンボルと移動シンボルとで互いに異なるマーキング画像が付加された試験画像を生成する。これにより、試験支援装置１０Ａで実行される試験支援方法では、変化シンボルと点滅シンボルと移動シンボルとを区別した試験画像を生成することができ、監視制御システム１の試験をより支援することができる。

また、試験画像生成ステップは、マーキング対象画像において移動シンボルの変化前画像の位置にマーキング画像をさらに付加した画像を試験画像として生成する。これにより、試験支援装置１０Ａで実行される試験支援方法では、例えば、試験者は、試験画像に基づいて、移動シンボルの変化前の位置と変化後の位置とを把握することができ、例えば、移動先の位置が間違っているか否かを容易に把握することができる。

なお、実施の形態２にかかる動的シンボル検出部４３Ａは、さらに、形状が変化するシンボルなどの他の種類の動的シンボルを検出することもできる。この場合も、試験画像生成部４７Ａは、マーキング対象画像において複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を試験画像として生成することができる。

また、実施の形態１，２にかかる試験画像生成部４７，４７Ａは、確認番号を付加した試験画像を生成するが、試験画像生成部４７，４７Ａは、確認番号を付加しない試験画像を生成することもできる。この場合、試験画像生成部４７，４７Ａは、マーキング対象画像において確認番号が配置される領域にもマーキング色を付したマーキング画像を付加した試験画像を生成する。

また、試験画像生成部４７，４７Ａは、動的シンボルが外接する矩形状の枠画像を含むマーキング画像をマーキング対象画像に付加するが、かかる例に限定されない。例えば、試験画像生成部４７，４７Ａは、動的シンボルが外接しないように動的シンボルを囲む形状の画像を含むマーキング画像をマーキング対象画像に付加することもできる。

また、点滅シンボル矩形リスト３３、変化シンボル矩形リスト３４、および移動シンボル矩形リスト３８には、シンボルが外接する矩形の座標が含まれるが、かかる例に限定されない。例えば、点滅シンボル矩形リスト３３、変化シンボル矩形リスト３４、および移動シンボル矩形リスト３８には、シンボルが外接する矩形の座標に代えて、シンボルを構成する全画素の座標、またはシンボルの外形を構成する全画素の座標を含めてもよい。

また、上述した例では、試験画像生成部４７，４７Ａは、確認番号を囲む枠画像の形状を動的シンボルの種類毎に異ならせるが、確認番号を囲む枠画像の枠の幅または色を動的シンボルの種類毎に異ならせることもできる。また、試験画像生成部４７，４７Ａは、確認番号を囲む枠画像の形状に代えて、動的シンボルを囲む枠画像の形状、枠の幅、または色と異ならせることもできる。

また、上述した例では、マーキング色選定部４５は、動的シンボルの種類にかかわらず、単一のマーキング色を決定するが、動的シンボルの種類に応じた異なるマーキング色を決定することもできる。また、マーキング色選定部４５は、動的シンボルの色または形に応じた異なるマーキング色を決定することもできる。また、マーキング色選定部４５は、動的シンボルの周囲であって動的シンボルから予め設定された距離にある範囲の色に基づいて、動的シンボル毎にマーキング色を決定することもできる。

以上の実施の形態に示した構成は、一例を示すものであり、別の公知の技術と組み合わせることも可能であるし、実施の形態同士を組み合わせることも可能であるし、要旨を逸脱しない範囲で、構成の一部を省略、変更することも可能である。

１ 監視制御システム、２ 制御装置、３ 監視装置、４ ネットワーク、５ 出力装置、１０，１０Ａ 試験支援装置、１１ 通信部、１２ 撮像部、１３，１３Ａ 記憶部、１４，１４Ａ 処理部、２１ 第１の通信部、２２ 第２の通信部、３１ 試験情報、３２ キャプチャ画像情報、３３ 点滅シンボル矩形リスト、３４ 変化シンボル矩形リスト、３５ 全矩形リスト、３６ 移動元シンボルリスト、３７ 移動先シンボルリスト、３８ 移動シンボル矩形リスト、４１ 模擬信号出力部、４２ 画像取得部、４３，４３Ａ 動的シンボル検出部、４４ マーキング対象画像選定部、４５ マーキング色選定部、４６ 番号割付部、４７，４７Ａ 試験画像生成部、４８ 試験画像出力部、５１ 第１の検出部、５２ 第２の検出部、５３，５３Ａ 統合部、５４ 第３の検出部、６０ 移動シンボル、６１，６２，６３，６４，６５，６６，６７，６８，６９，７０，７４，７５，７６，７６'，７７，７８，７９，９１，９２，９３，９４，１１０，１１０'，１１１，１１１' シンボル、７１，７３ 外接矩形、８０ 監視画像、８１，８４，８５，８６，８７，９５，９６，９７，９８，１２０，１２１，１２１’，１２２，１２２’，１２３，１２３’ マーキング画像、８２，８３ 枠画像、９０，９９ 試験画像、Ａ 変化前画像、Ｂ１，Ｂ２，Ｂ３ 変化後画像、Ｃ，Ｃ１～Ｃｎ 色。

Claims (10)

1. コンピュータが実行する試験支援方法であって、
   監視画面を各々異なる時間でキャプチャした画像であってシンボルの変化前の画像とシンボルの変化後の複数の画像とを含む画像群を取得する画像取得ステップと、
   前記画像取得ステップで取得された前記画像群に含まれる複数の画像間で変化した複数のシンボルを複数の動的シンボルとして検出する動的シンボル検出ステップと、
   前記変化後の複数の画像のうち前記変化後の複数の画像間で変化する動的シンボルの明るさが最も明るい画像、または、前記変化後の複数の画像のうち全画素の輝度値の平均が最も大きな画像をマーキング対象画像として決定するマーキング対象画像選定ステップと、
   前記マーキング対象画像において前記動的シンボル検出ステップで検出された前記複数の動的シンボルの各々に対して動的シンボルであることを示すマーキング画像が付加された画像を試験画像として生成する試験画像生成ステップと、を含み、
   前記試験画像生成ステップは、
   前記マーキング対象画像において前記複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を前記試験画像として生成する
   ことを特徴とする試験支援方法。
2. 前記動的シンボル検出ステップは、
   前記変化後の複数の画像間で変化したシンボルを第１の動的シンボルとして検出し、前記変化前の画像と前記変化後の複数の画像の１つとの間で変化したシンボルのうち前記第１の動的シンボルを除くシンボルを第２の動的シンボルとして検出し、
   前記試験画像生成ステップは、
   前記マーキング対象画像において前記第１の動的シンボルと前記第２の動的シンボルとで互いに異なるマーキング画像が付加された試験画像を生成する
   ことを特徴とする請求項１に記載の試験支援方法。
3. 前記動的シンボル検出ステップは、
   前記変化後の複数の画像間で変化したシンボルを第１の動的シンボルとして検出し、前記変化前の画像と前記変化後の複数の画像の１つとの間で変化したシンボルのうち位置が移動したシンボルを第３の動的シンボルとして検出し、前記変化前の画像と前記変化後の複数の画像の１つとの間で変化したシンボルのうち前記第１の動的シンボルと前記第３の動的シンボルとを除くシンボルを第２の動的シンボルとして検出し、
   前記試験画像生成ステップは、
   前記マーキング対象画像において前記第１の動的シンボルと前記第２の動的シンボルと前記第３の動的シンボルとで互いに異なるマーキング画像が付加された試験画像を生成する
   ことを特徴とする請求項１に記載の試験支援方法。
4. 前記動的シンボル検出ステップは、
   前記変化後の複数の画像間で変化したシンボルを第１の動的シンボルとして検出し、前記変化前の画像と前記変化後の複数の画像の１つとの間で変化したシンボルのうち位置が移動したシンボルを第３の動的シンボルとして検出し、
   前記試験画像生成ステップは、
   前記マーキング対象画像において前記第１の動的シンボルと前記第３の動的シンボルとで互いに異なるマーキング画像が付加された試験画像を生成する
   ことを特徴とする請求項１に記載の試験支援方法。
5. 前記試験画像生成ステップは、
   前記マーキング対象画像のうち前記第３の動的シンボルの前記変化前の画像の位置にマーキング画像をさらに付加した画像を前記試験画像として生成する
   ことを特徴とする請求項３または４に記載の試験支援方法。
6. 前記複数の動的シンボルの各々に対して付加するマーキング画像の色を、前記マーキング対象画像の色に基づいて決定するマーキング色選定ステップを含み、
   前記試験画像生成ステップは、
   前記マーキング対象画像において前記マーキング色選定ステップで決定された色のマーキング画像が前記複数の動的シンボルに付加された画像を前記試験画像として生成する
   ことを特徴とする請求項１から５のいずれか１つに記載の試験支援方法。
7. 前記マーキング色選定ステップは、
   前記マーキング対象画像のうち背景色として用いられる色を除く色の分布に基づいて前記マーキング対象画像での使用頻度が最も少ない色を前記マーキング対象画像のベース色として決定し、前記マーキング対象画像のうち背景色として用いられる色と異なる色で前記ベース色にグラデーションを付加した色を前記マーキング対象画像の色として決定する
   ことを特徴とする請求項６に記載の試験支援方法。
8. 前記マーキング色選定ステップは、
   前記背景色として用いられる色が白である場合に前記ベース色に黒でグラデーションを付加した色を前記マーキング対象画像の色として決定し、前記背景色として用いられる色が黒である場合に前記ベース色に白でグラデーションを付加した色を前記マーキング対象画像の色として決定する
   ことを特徴とする請求項７に記載の試験支援方法。
9. 監視画面を各々異なる時間でキャプチャした画像であってシンボルの変化前の画像とシンボルの変化後の複数の画像とを含む画像群を取得する画像取得部と、
   前記画像取得部で取得された前記画像群に含まれる複数の画像間で変化した複数のシンボルを複数の動的シンボルとして検出する動的シンボル検出部と、
   前記変化後の複数の画像のうち前記変化後の複数の画像間で変化する動的シンボルの明るさが最も明るい画像、または、前記変化後の複数の画像のうち全画素の輝度値の平均が最も大きな画像をマーキング対象画像として決定するマーキング対象画像選定部と、
   前記マーキング対象画像において前記動的シンボル検出部で検出された前記複数の動的シンボルの各々に対して動的シンボルであることを示すマーキング画像が付加された画像を試験画像として生成する試験画像生成部と、を備え、
   前記試験画像生成部は、
   前記マーキング対象画像において前記複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を前記試験画像として生成する
   ことを特徴とする試験支援装置。
10. 監視画面を各々異なる時間でキャプチャした画像であってシンボルの変化前の画像とシンボルの変化後の複数の画像とを含む画像群を取得する画像取得ステップと、
    前記画像取得ステップで取得された前記画像群に含まれる複数の画像間で変化した複数のシンボルを複数の動的シンボルとして検出する動的シンボル検出ステップと、
    前記変化後の複数の画像のうち前記変化後の複数の画像間で変化する動的シンボルの明るさが最も明るい画像、または、前記変化後の複数の画像のうち全画素の輝度値の平均が最も大きな画像をマーキング対象画像として決定するマーキング対象画像選定ステップと、
    前記マーキング対象画像において前記動的シンボル検出ステップで検出された前記複数の動的シンボルの各々に対して動的シンボルであることを示すマーキング画像が付加された画像を試験画像として生成する試験画像生成ステップと、をコンピュータに実行させ、
    前記試験画像生成ステップは、
    前記マーキング対象画像において前記複数の動的シンボルのうち変化の態様が互いに異なる複数の動的シンボルに互いに異なるマーキング画像が付加された画像を前記試験画像として生成する
    ことを特徴とする試験支援プログラム。

Images