JP2022085235A - 操作支援システムおよび操作支援方法 - Google Patents

Abstract

【課題】知識や経験の少ないオペレータであっても、効率かつ正確な操作を行うようにする仕組みを提供する。
【解決手段】制御対象を制御するための制御システムに向けられた操作支援システムは、オペレータのＨＭＩに対する操作を記録したコンテンツを取得する取得手段と、取得されたコンテンツに関連するメタ情報を取得する取得手段と、取得されたコンテンツと取得されたメタ情報とを関連付けて格納する格納手段と、格納されているメタ情報に基づいて、要求されたクエリにマッチするコンテンツを検索する検索手段と、選択されたコンテンツを再生する再生手段とを含む。
【選択図】図２

Description

本発明は、制御操作を行うオペレータの操作を支援するシステムに関する。

様々な生産現場において、オペレータによる操作は、ＨＭＩ（Human Machine Interface）と称されるデバイスを介して制御装置へ与えられるとともに、ＨＭＩを介して、オペレータには制御装置からの状況が提供される。

例えば、特表２０１６－５０６５５９号公報（特許文献１）は、ＨＭＩデバイスのディスプレイスクリーンにおいて使用するためのオブジェクトを変化させる方法などが開示されている。

特表２０１６－５０６５５９号公報

ＨＭＩは、制御装置とのインターフェイスとしては最適なデバイスの一つではあるが、オペレータの操作の速度や正確性は、オペレータの知識や経験に依存する。そのため、知識や経験の少ないオペレータであっても、熟練のオペレータと同様に操作を行えるような仕組みが要望されている。

本発明の一つの目的は、知識や経験の少ないオペレータであっても、効率かつ正確な操作を行うようにする仕組みを提供することである。

本発明の一例に従えば、制御対象を制御するための制御システムに向けられた操作支援システムが提供される。操作支援システムは、オペレータのＨＭＩ（Human Machine Interface）に対する操作を記録したコンテンツを取得する取得手段と、取得されたコンテンツに関連するメタ情報を取得する取得手段と、取得されたコンテンツと取得されたメタ情報とを関連付けて格納する格納手段と、格納されているメタ情報に基づいて、要求されたクエリにマッチするコンテンツを検索する検索手段と、選択されたコンテンツを再生する再生手段とを含む。

この構成によれば、過去に取得されたオペレータのＨＭＩに対する操作を記録したコンテンツを情報資産として活用できる。そのため、知識や経験の少ないオペレータであっても、効率かつ正確な操作を行うことを支援できる。

取得手段は、ＨＭＩの操作画面を電気的または光学的に観測できるモバイル端末を含んでいてもよい。この構成によれば、モバイル端末を介してコンテンツを容易に取得できる。

取得手段は、ＨＭＩに実装される操作画面を録画するキャプチャーアプリケーションを含んでいてもよい。この構成によれば、ＨＭＩ自体がコンテンツを取得できるので、構成を簡素化できる。

取得手段は、異常あるいはイベントが発生すると、当該異常あるいはイベントの発生タイミングより前の操作を記録したコンテンツを生成するようにしてもよい。この構成によれば、何らかの異常あるいはイベントが発生したときに、その直前に行われた操作などを検証することができる。

ＨＭＩは、異常あるいはイベントが発生すると、当該発生した異常あるいはイベントに関する情報を出力するように構成されていてもよい。当該出力される情報は、直接的または間接的にクエリとして利用可能になっていてもよい。この構成によれば、異常あるいはイベントの発生によって出力される情報を用いて、関連するコンテンツを検索できる。

操作支援システムは、任意の検索条件に従ってクエリを生成する生成手段をさらに含んでいてもよい。この構成によれば、オペレータが希望する任意のキーワードを用いて、コンテンツを検索できる。

再生手段は、選択されたコンテンツを再生するモバイル端末を含んでいてもよい。この構成によれば、オペレータが有しているモバイル端末などでコンテンツを再生できるので、コンテンツの確認を容易化できる。

メタ情報は、オペレータによる操作対象の場所および操作した時間を示す操作履歴を含んでいてもよい。再生手段は、選択されたコンテンツに関連付けられたメタ情報に基づいて、ＨＭＩの操作画面上に操作すべき内容を示す情報を追加的に表示するようにしてもよい。この構成によれば、予め取得されたコンテンツに基づいて、オペレータによるより確実な操作を実現できる。

操作支援システムは、ＨＭＩの操作画面に含まれる複数の操作オブジェクトのうち任意の操作オブジェクトの選択に応じて、当該選択された１または複数の操作オブジェクトを集合させて表示する第２の操作画面を生成する第１の生成手段をさらに含んでいてもよい。この構成によれば、特定の操作あるいは特定の用途に用いる操作オブジェクトのみを同一の操作画面に集約することができるので、操作の効率を高めるとともに、操作ミスなどの不具合の発生を低減できる。

操作支援システムは、ＨＭＩが提供する複数ページの操作画面のうち任意のページの選択に応じて、当該選択された１または複数のページへアクセスするための操作オブジェクトを含む第３の操作画面を生成する第２の生成手段をさらに含んでいてもよい。この構成によれば、特定の操作あるいは特定の用途に用いる操作画面への遷移をより容易に行うことができるので、操作の効率を高めるとともに、操作ミスなどの不具合の発生を低減できる。

本発明の別の一例に従えば、制御対象を制御するための制御システムで実行される操作支援方法が提供される。操作支援方法は、オペレータのＨＭＩに対する操作を記録したコンテンツを取得するステップと、取得されたコンテンツに関連するメタ情報を取得するステップと、取得されたコンテンツと取得されたメタ情報とを関連付けて格納するステップと、格納されているメタ情報に基づいて、要求されたクエリにマッチするコンテンツを検索するステップと、選択されたコンテンツを再生するステップとを含む。

本発明によれば、知識や経験の少ないオペレータであっても、効率かつ正確な操作を行うようにする仕組みを提供できる。

本実施の形態に係る操作支援システムの全体構成例を示す模式図である。 本実施の形態に係る操作支援システムにおける典型的な処理例を説明するための図である。 本実施の形態に係る操作支援システムを構成するＰＬＣのハードウェア構成例を示すブロック図である。 本実施の形態に係る操作支援システムを構成するＨＭＩのハードウェア構成例を示すブロック図である。 本実施の形態に係る操作支援システムを構成するモバイル端末のハードウェア構成例を示すブロック図である。 本実施の形態に係る操作支援システムを構成するサーバのハードウェア構成例を示すブロック図である。 本実施の形態に係る操作支援システムが提供可能な処理の概要を示す模式図である。 本実施の形態に係る操作支援システムにおけるコンテンツの取得方法の一例を説明するための図である。 本実施の形態に係る操作支援システムにおけるメタ情報の取得方法の一例を説明するための図である。 本実施の形態に係る操作支援システムにおけるクエリの生成方法の一例を説明するための図である。 本実施の形態に係る操作支援システムにおける検索結果の一例を説明するための図である。 本実施の形態に係る操作支援システムにおけるメタ情報を利用した操作支援の一例を説明するための図である。 本実施の形態に係る操作支援システムにおけるコンテンツの取得に係る処理手順を示すシーケンス図である。 本実施の形態に係る操作支援システムにおけるコンテンツの活用に係る処理手順を示すシーケンス図である。 本実施の形態に係る操作支援システムにおけるコンテンツの取得の変形例に係る処理手順を示すシーケンス図である。 本実施の形態に係る操作支援システムにおけるコンテンツの取得のさらに別の変形例に係る処理を説明するための図である。 本実施の形態に係る操作支援システムにおける操作ナビゲーションに係る処理例を説明するための図である。 本実施の形態に係る操作支援システムにおける操作ナビゲーションに係る処理例を説明するための図である。 本実施の形態に係る操作支援システムのＨＭＩが提供する操作画面の一例を示す模式図である。 本実施の形態に係る操作支援システムのＨＭＩにおける操作オブジェクトへのショートカット作成の一例を示す模式図である。 本実施の形態に係る操作支援システムのＨＭＩが提供する操作画面の別の一例を示す模式図である。 本実施の形態に係る操作支援システムのＨＭＩにおけるページのブックマーク作成の手順例を示す図である。 本実施の形態に係る操作支援システムのＨＭＩにおけるページのブックマークの表示例を示す図である。

本発明の実施の形態について、図面を参照しながら詳細に説明する。なお、図中の同一または相当部分については、同一符号を付してその説明は繰り返さない。

＜Ａ．適用例＞
まず、本発明が適用される場面の一例について説明する。

図１は、本実施の形態に係る操作支援システム１の全体構成例を示す模式図である。図１を参照して、本実施の形態に係る操作支援システム１は、制御対象を制御するための制御システム２に向けられるものである。典型的には、操作支援システム１は、１または複数の制御システム２を含む。制御システム２の各々は、工場全体を制御するものであってもよいし、工場に設置された特定の製造設備や製造装置を制御するものであってもよい。制御システム２の各々が設けられる場所はいずれであってもよい。例えば、複数の国に製造拠点を有する製造者であれば、制御システム２は、互いに異なる国に設けられてもよい。

制御システム２の各々は、主たる構成要素として、制御対象を制御する制御装置の典型例であるＰＬＣ（Programmable Logic Controller）１００と、ＰＬＣ１００に接続されるＨＭＩ２００と、モバイル端末３００と、サーバ４００とを含む。

ＰＬＣ１００は、フィールド装置群１０とも接続される。フィールド装置群１０は、制御対象を制御するために必要な任意の装置を包含する。より具体的には、フィールド装置群１０は、制御対象（例えば、製造設備、製造装置、製造設備あるいは製造装置に含まれるセンサおよびアクチュエータなど）との間で情報をやり取りするための装置を含む。図１に示す例では、フィールド装置群１０は、リモートＩ／Ｏ（Input/Output）装置１２と、リレー群１４と、サーボドライバ１６およびサーボモータ１８とを含む。

ＰＬＣ１００は、フィールド装置群１０から情報を取得し、予め作成されたユーザプログラムに従って制御演算を実行することで、フィールド装置群１０へ与えられる情報を生成する。以下では、ＰＬＣ１００がフィールド装置群１０から取得する情報を「入力データ」とも称し、フィールド装置群１０へ与えられる情報を「出力データ」とも称す。

図１に示す例では、ＰＬＣ１００とフィールド装置群１０とは、制御系ネットワーク４を介して接続されているが、これに限らず、ハードワイヤーで接続されていてもよい。

なお、制御系ネットワーク４としては、産業用の通信プロトコルを採用することが好ましい。このような通信プロトコルとしては、ＥｔｈｅｒＣＡＴ（登録商標）、ＥｔｈｅｒＮｅｔ／ＩＰ（登録商標）、ＤｅｖｉｃｅＮｅｔ（登録商標）、ＣｏｍｐｏＮｅｔ（登録商標）などが知られている。

ＨＭＩ２００は、オペレータからの操作を受けて、ＰＬＣ１００に対して操作内容を示すコマンドなどを送信するとともに、ＰＬＣ１００からの各種情報をグラフィカルに表示する。

ＨＭＩ２００およびモバイル端末３００は、オペレータの操作を支援するための各種処理を実行する。操作を支援するための処理の詳細については、後述する。

図１に示す例では、ＰＬＣ１００とＨＭＩ２００とは、情報系ネットワーク６を介して接続されている。情報系ネットワーク６としては、イーサネット（登録商標）などの汎用的な通信プロトコルを採用してもよい。また、図１に示す例では、モバイル端末３００は、アクセスポイント２０を介して、情報系ネットワーク６に接続可能になっていてもよい。

情報系ネットワーク６には、ゲートウェイ３０が設けられており、インターネット８などを介して、サーバ４００にアクセス可能になっている。

サーバ４００は、オペレータの操作を支援するための情報をコンテンツデータベース４５０に格納するとともに、必要に応じて、コンテンツデータベース４５０に格納している情報を提供する。サーバ４００は、インターネット８を介してクラウド上に配置してもよいし、インターネット８を介することなく、制御システム２が存在するローカルネットワーク内に配置してもよい。サーバ４００の実装形態としては、要求される性能および機能などに応じて、任意に決定できる。

本実施の形態に係る操作支援システム１は、後述する複数の処理の一部または全部を実装することができる。適用例として、オペレータの操作を記録した情報（典型的には、動画）を取得および利用できる処理について説明する。

図２は、本実施の形態に係る操作支援システム１における典型的な処理例を説明するための図である。図２を参照して、任意の条件が成立あるいは明示的な指示によって、オペレータのＨＭＩ２００に対する操作が記録される。以下では、オペレータのＨＭＩ２００に対する操作を記録した結果を単に「コンテンツ」とも称す。このように、オペレータのＨＭＩに対する操作を記録したコンテンツ５０を取得する（（１）コンテンツ取得）。また、取得されたコンテンツに関連するメタ情報６０も取得される（（２）メタ情報取得）。メタ情報６０は、コンテンツ５０を検索するための情報として用いられる。さらに、コンテンツ５０と対応するメタ情報６０とが関連付けて格納される（（３）コンテンツ・メタ情報格納）。

図２には、一例として、モバイル端末３００がコンテンツ５０およびメタ情報６０を取得して、取得したコンテンツ５０およびメタ情報６０をサーバ４００へ送信する例を示す。サーバ４００は、モバイル端末３００が送信したコンテンツ５０を、付加されたメタ情報６０とともに、コンテンツデータベース４５０に格納する。

上述の処理は、任意の異常あるいはイベントの発生毎に繰り返し実行されてもよい。
その後、何らかの異常あるいはイベントが発生すると（（４）異常・イベント発生）、検索要求であるクエリが生成されてサーバ４００へ送信される。サーバ４００は、格納されているメタ情報６０に基づいて、要求されたクエリにマッチするコンテンツ５０を検索する（（５）コンテンツ検索）。

オペレータは、サーバ４００から応答される検索結果のうち任意のコンテンツ５０を選択する。すると、選択されたコンテンツ５０が再生される（（６）コンテンツ再生）。オペレータは、再生されるコンテンツ５０を参照して、ＨＭＩ２００に対して必要な操作を行う（（７）操作）。

図２には、一例として、何らかの異常あるいはイベントが発生すると、ＨＭＩ２００がクエリの生成に必要な情報を出力し、モバイル端末３００が出力される情報に基づいてクエリを送信する例を示す。

このようなコンテンツ５０を活用可能な操作支援システム１を提供することで、知識や経験の少ないオペレータであっても、熟練のオペレータと同様の操作を容易に行うことができる。また、取得されたコンテンツ５０は、知識や経験の少ないオペレータへの教育にも活用できる。

＜Ｂ．ハードウェア構成＞
次に、本実施の形態に係る操作支援システムを構成する装置のハードウェア構成の一例について説明する。

（ｂ１：ＰＬＣ１００）
図３は、本実施の形態に係る操作支援システム１を構成するＰＬＣ１００のハードウェア構成例を示すブロック図である。図３を参照して、ＰＬＣ１００は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro-Processing Unit）などのプロセッサ１０２と、チップセット１０４と、主メモリ１０６と、ストレージ１１０と、制御系ネットワークコントローラ１２０と、情報系ネットワークコントローラ１２２と、ＵＳＢ（Universal Serial Bus）コントローラ１２４と、メモリカードインターフェイス１２６とを含む。

プロセッサ１０２は、ストレージ１１０に格納された各種プログラムを読み出して、主メモリ１０６に展開して実行することで、制御対象を制御するための制御演算を実現する。チップセット１０４は、プロセッサ１０２と各コンポーネントとのデータ伝送などを制御する。

ストレージ１１０には、基本的な処理を実現するためのシステムプログラム１１２と、制御演算を実現するためのユーザプログラム１１４が格納される。

制御系ネットワークコントローラ１２０と、制御系ネットワーク４を介したフィールド装置群１０とのデータのやり取りを制御する。

情報系ネットワークコントローラ１２２は、情報系ネットワーク６を介したＨＭＩ２００などとのデータのやり取りを制御する。

ＵＳＢコントローラ１２４は、ＵＳＢ接続を介した外部装置（例えば、サポート装置）とのデータのやり取りを制御する。

メモリカードインターフェイス１２６は、メモリカード１２８を着脱可能に構成されており、メモリカード１２８に対してデータを書き込み、メモリカード１２８から各種データ（ユーザプログラムやトレースデータなど）を読み出すことが可能になっている。

図３には、プロセッサ１０２がプログラムを実行することで必要な処理が提供される構成例を示したが、これらの提供される処理の一部または全部を、専用のハードウェア回路（例えば、ＡＳＩＣ（Application Specific Integrated Circuit）またはＦＰＧＡ（Field-Programmable Gate Array）など）を用いて実装してもよい。あるいは、ＰＬＣ１００の主要部を、汎用的なアーキテクチャに従うハードウェア（例えば、汎用パソコンをベースとした産業用パソコン）を用いて実現してもよい。この場合には、仮想化技術を用いて、用途の異なる複数のＯＳ（Operating System）を並列的に実行させるとともに、各ＯＳ上で必要なアプリケーションを実行させるようにしてもよい。

（ｂ２：ＨＭＩ２００）
図４は、本実施の形態に係る操作支援システム１を構成するＨＭＩ２００のハードウェア構成例を示すブロック図である。図４を参照して、ＨＭＩ２００は、ＣＰＵやＭＰＵなどのプロセッサ２０２と、光学ドライブ２０４と、主メモリ２０６と、ストレージ２１０と、ネットワークコントローラ２２０と、ＵＳＢコントローラ２２４と、入力部２２６と、表示部２２８とを含む。これらのコンポーネントは、バス２０８を介して接続される。

プロセッサ２０２は、ストレージ２１０に格納された各種プログラムを読み出して、主メモリ２０６に展開して実行することで、ＨＭＩ２００で必要な処理を実現する。

ストレージ２１０は、例えば、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Flash Solid State Drive）などで構成される。ストレージ２１０には、典型的には、ＯＳ（Operating System）２１１と、基本的な処理を実現するためのシステムプログラム２１２と、制御対象に応じて予め作成されたユーザプログラム２１４とが格納される。なお、ストレージ２１０には、図４に示すプログラム以外の必要なプログラムが格納されてもよい。

ＨＭＩ２００は、光学ドライブ２０４を有していてもよい。光学ドライブ２０４は、コンピュータ読取可能なプログラムを非一過的に格納する記録媒体２０５（例えば、ＤＶＤ（Digital Versatile Disc）などの光学記録媒体）からプログラムを読み取って、ストレージ２１０などに格納する。

ＨＭＩ２００で実行される各種プログラムは、コンピュータ読取可能な記録媒体２０５を介してインストールされてもよいが、ネットワーク上の任意のサーバからダウンロードする形でインストールするようにしてもよい。

ネットワークコントローラ２２０は、制御系ネットワーク４を介したＰＬＣ１００などとのデータのやり取りを制御する。

ＵＳＢコントローラ２２４は、ＵＳＢ接続を介した外部装置とのデータのやり取りを制御する。

入力部２２６は、タッチパネル、マウス、キーボードなどで構成され、オペレータからの指示を受け付ける。表示部２２８は、ディスプレイ、各種インジケータなどで構成され、プロセッサ２０２からの処理結果などを出力する。

図４には、プロセッサ２０２がプログラムを実行することで必要な処理が提供される構成例を示したが、これらの提供される処理の一部または全部を、専用のハードウェア回路（例えば、ＡＳＩＣまたはＦＰＧＡなど）を用いて実装してもよい。

（ｂ３：モバイル端末３００）
図５は、本実施の形態に係る操作支援システム１を構成するモバイル端末３００のハードウェア構成例を示すブロック図である。図５を参照して、モバイル端末３００は、ＣＰＵやＭＰＵなどのプロセッサ３０２と、主メモリ３０６と、ストレージ３１０と、無線ネットワークコントローラ３２０と、撮像部３２２と、ＵＳＢコントローラ３２４と、入力部３２６と、表示部３２８とを含む。これらのコンポーネントは、バス３０８を介して接続される。

プロセッサ３０２は、ストレージ３１０に格納された各種プログラムを読み出して、主メモリ３０６に展開して実行することで、モバイル端末３００で必要な処理を実現する。

ストレージ３１０は、例えば、ＨＤＤやＳＳＤなどで構成される。ストレージ３１０には、典型的には、ＯＳ３１１と、後述するような処理を実現するためのアプリケーションプログラム３１２とが格納される。なお、ストレージ３１０には、図５に示すプログラム以外の必要なプログラムが格納されてもよい。モバイル端末３００で実行される各種プログラムは、例えば、ネットワーク上の任意のサーバからダウンロードする形でインストールするようにしてもよい。

撮像部３２２は、モバイル端末３００の露出面に配置され、撮像範囲に含まれる対象物を撮像する。

ＵＳＢコントローラ３２４は、ＵＳＢ接続を介した外部装置とのデータのやり取りを制御する。

無線ネットワークコントローラ３２０は、無線ネットワークを介した中継装置や外部装置とのデータのやり取りを制御する。

入力部３２６は、タッチパネル、マウス、キーボードなどで構成され、オペレータからの指示を受け付ける。表示部３２８は、ディスプレイ、各種インジケータなどで構成され、プロセッサ４０２からの処理結果などを出力する。

図５には、プロセッサ３０２がプログラムを実行することで必要な処理が提供される構成例を示したが、これらの提供される処理の一部または全部を、専用のハードウェア回路（例えば、ＡＳＩＣまたはＦＰＧＡなど）を用いて実装してもよい。

（ｂ４：サーバ４００）
図６は、本実施の形態に係る操作支援システム１を構成するサーバ４００のハードウェア構成例を示すブロック図である。図６を参照して、サーバ４００は、ＣＰＵやＭＰＵなどのプロセッサ４０２と、主メモリ４０６と、ストレージ４１０と、ネットワークコントローラ４２０と、入力部４２６と、表示部４２８とを含む。これらのコンポーネントは、バス４０８を介して接続される。

プロセッサ４０２は、ストレージ４１０に格納された各種プログラムを読み出して、主メモリ４０６に展開して実行することで、サーバ４００で必要な処理を実現する。

ストレージ４１０は、例えば、ＨＤＤやＳＳＤなどで構成される。ストレージ４１０には、典型的には、ＯＳ４１１と、後述するような処理を実現するためのアプリケーションプログラム４１２とが格納される。なお、ストレージ４１０には、図６に示すプログラム以外の必要なプログラムが格納されてもよい。

ネットワークコントローラ４２０は、ネットワークを介した各種装置とのデータのやり取りを制御する。

入力部４２６は、キーボード、マウスなどで構成され、オペレータからの指示を受け付ける。表示部４２８は、ディスプレイなどで構成され、プロセッサ４０２からの処理結果などを出力する。

図６には、プロセッサ４０２がプログラムを実行することで必要な処理が提供される構成例を示したが、これらの提供される処理の一部または全部を、専用のハードウェア回路（例えば、ＡＳＩＣまたはＦＰＧＡなど）を用いて実装してもよい。

＜Ｃ．処理の概要＞
次に、本実施の形態に係る操作支援システム１が提供可能な処理を概略する。

図７は、本実施の形態に係る操作支援システム１が提供可能な処理の概要を示す模式図である。図７を参照して、操作支援システム１は、コンテンツの取得および活用の処理４２と、操作ナビゲーションの処理４４と、操作オブジェクトのショートカット作成の処理４６と、ページのブックマーク作成の処理４８とが可能になっている。

コンテンツの取得および活用の処理４２は、熟練のオペレータなどの操作を共有および参照するために利用される機能であり、ＨＭＩ２００、モバイル端末３００およびサーバ４００が関与し得る。

操作ナビゲーションの処理４４は、オペレータの操作画面に対する操作を支援するための機能であり、ＨＭＩ２００およびモバイル端末３００が関与し得る。

操作オブジェクトのショートカット作成の処理４６には、操作画面に含まれる操作オブジェクトへのアクセスを容易化できる機能であり、ＨＭＩ２００が関与し得る。

ページのブックマーク作成の処理４８には、操作画面を構成する任意のページへのアクセスを容易化する機能であり、ＨＭＩ２００が関与し得る。

図７に示す処理のすべてを実装する必要はなく、要求される処理に応じて適宜実装すればよい。また、複数の装置が関与し得る処理であっても、単一の装置で実現してもよいし、単一の装置のみが関与し得る処理であっても、複数の装置で実現してもよい。

＜Ｄ．コンテンツの取得および活用＞
次に、コンテンツの取得および活用の処理４２について説明する。

（ｄ１：コンテンツの取得）
まず、コンテンツ５０を取得する処理の一例について説明する。コンテンツ５０は、オペレータがＨＭＩ２００に対して行った操作を記録したものであり、典型的には、動画の形で生成される。但し、コンテンツ５０は、１または複数の静止画の集合として生成されてもよい。そのため、ＨＭＩ２００の表示部２２８に表示される操作画面を任意の方法で録画することで、コンテンツ５０を生成する。

図８は、本実施の形態に係る操作支援システム１におけるコンテンツの取得方法の一例を説明するための図である。図８（Ａ）には、ＶＮＣ（Virtual Network Computing）を使用する例を示し、図８（Ｂ）には、ファイル転送（例えば、ＦＴＰ（File Transfer Protocol））を使用する例を示し、図８（Ｃ）には、撮像部を使用する例を示す。

図８（Ａ）を参照して、ＨＭＩ２００は、ＶＮＣサーバ２１２２を有しており、モバイル端末３００は、ＶＮＣクライエント３１２２およびキャプチャーアプリケーション３１２４を有している。ＶＮＣサーバ２１２２とＶＮＣクライエント３１２２との間では、ＨＭＩ２００の表示部２２８に表示される操作画面をミラーリングする。

モバイル端末３００には、ＨＭＩ２００の表示部２２８に表示される操作画面がリアルタイムで提供されるので、モバイル端末３００のキャプチャーアプリケーション３１２４が提供される表示部２２８に表示される操作画面を録画する。このように、モバイル端末３００は、ＨＭＩ２００の操作画面を電気的に接続されて観測することで、コンテンツ５０を取得する。

図８（Ｂ）を参照して、ＨＭＩ２００は、キャプチャーアプリケーション２１２４およびＦＴＰサーバ２１２６を有しており、モバイル端末３００は、ＦＴＰクライエント３１２６を有している。ＨＭＩ２００のキャプチャーアプリケーション２１２４は、ＨＭＩ２００の表示部２２８に表示される操作画面を録画して、コンテンツ５０を生成する。そして、ＦＴＰサーバ２１２６とＦＴＰクライエント３１２６との間では、コンテンツ５０が転送される。このように、ＨＭＩ２００は、操作画面を録画するキャプチャーアプリケーション２１２４が実装されてもよい。

図８（Ｃ）を参照して、モバイル端末３００は、撮像アプリケーション３１２８を有している。モバイル端末３００の撮像部３２２でＨＭＩ２００の表示部２２８を撮像するとともに、撮像アプリケーション３１２８で録画することで、コンテンツ５０を生成する。このように、モバイル端末３００は、ＨＭＩ２００の操作画面を光学的に観測することで、コンテンツ５０を取得する。

以上のような構成および処理によって、ＨＭＩ２００および／またはモバイル端末３００は、コンテンツ５０を取得する。すなわち、ＨＭＩ２００およびモバイル端末３００の少なくとも一方は、オペレータのＨＭＩ２００に対する操作を記録したコンテンツ５０を取得する処理を実行する。なお、モバイル端末３００によるコンテンツ５０の取得方法は、上述したものに限られず、任意の方法を採用できる。

（ｄ２：メタ情報の取得）
取得されたコンテンツ５０は、メタ情報６０が付加されてサーバ４００（コンテンツデータベース４５０）に格納される。

メタ情報６０は、コンテンツ５０の検索などに利用される。メタ情報６０は、対応するコンテンツ５０を特定するための任意の情報を含めることができる。一例として、メタ情報６０は、日時、場所、オペレータ名、装置名、形式、エラー情報、ＰＬＣのステータス情報、システム全体のステータス情報、イベント履歴、操作履歴（例えば、時系列情報）、操作履歴（クリックした場所や時間（例えば、開始時間からｘｘ秒といった形））などを含むことができる。メタ情報６０は、オペレータが任意に記載する説明などを含めてもよい。

より具体的な一例として、メタ情報６０は、装置固有のプロファイルを含んでいてもよい。装置固有のプロファイルとしては、例えば、装置の形式、シリアル番号、ライン名、設備名、稼働累積時間などが挙げられる。

また、メタ情報６０は、オペレータのプロファイルを含んでいてもよい。オペレータのプロファイルとしては、例えば、習熟度、部門、職制（生産管理部門であるか保守部門など）、使用言語、過去の検索履歴などが挙げられる。

また、メタ情報６０は、対応するコンテンツ５０が取得されたときに関連する信号あるいは変数の波形データを含んでいてもよい。さらに、メタ情報６０は、対応するコンテンツ５０が取得された異常またはイベントを撮像した画像データ（例えば、装置が破損している状態を撮像した画像）を含んでいてもよい。

メタ情報６０は、オペレータのＨＭＩ２００に対する操作およびＰＬＣ１００のステータスなどに応じて、ＨＭＩ２００が生成するようにしてもよい。すなわち、ＨＭＩ２００を生成および出力することが可能になっている。

図９は、本実施の形態に係る操作支援システム１におけるメタ情報６０の取得方法の一例を説明するための図である。図９（Ａ）には、撮像部を使用する例を示し、図９（Ｂ）には、装置間通信を使用する例を示す。

図９（Ａ）を参照して、何らかの異常あるいはイベントが発生すると、ＨＭＩ２００は、発生した異常あるいはイベントに関するメタ情報６０を生成し、生成したメタ情報６０をエンコードした画像コード６２（例えば、ＱＲコード（登録商標）など）を表示する。オペレータは、モバイル端末３００を操作して、撮像部３２２でＨＭＩ２００の表示部２２８を撮像する。これによって、モバイル端末３００は、メタ情報６０を示す画像コード６２を取得できる。

図９（Ｂ）を参照して、何らかの異常あるいはイベントが発生すると、ＨＭＩ２００は、発生した異常あるいはイベントに関するメタ情報６０を生成する。ＨＭＩ２００により生成されたメタ情報６０は、任意のデータ通信方法によって、モバイル端末３００へ転送される。これによって、モバイル端末３００は、メタ情報６０を示す画像コード６２を取得できる。なお、データ通信方法としては、無線通信に加えて、ＮＦＣのような近距離無線通信を採用してもよい。

以上のような構成および処理によって、ＨＭＩ２００および／またはモバイル端末３００は、メタ情報６０を取得する。すなわち、ＨＭＩ２００およびモバイル端末３００の少なくとも一方は、取得されたコンテンツに関連するメタ情報を取得する処理を実行する。なお、モバイル端末３００によるメタ情報６０の取得方法は、上述したものに限られず、任意の方法を採用できる。例えば、ＨＭＩ２００に表示される任意のコードをオペレータがモバイル端末３００に手動入力するようにしてもよい。

（ｄ３：コンテンツおよびメタ情報の格納）
ＨＭＩ２００は、取得したコンテンツ５０と対応するメタ情報６０とを関連付けて、サーバ４００へ送信する。サーバ４００は、ＨＭＩ２００から送信されたコンテンツ５０をコンテンツデータベース４５０に格納するとともに、対応するメタ情報６０を検索情報としてコンテンツ５０に関連付ける。このように、取得されたコンテンツ５０と取得されたメタ情報６０とを関連付けて格納する処理を実行する。

（ｄ４：コンテンツの検索）
サーバ４００は、任意のクエリに応答して、コンテンツデータベース４５０に格納されているコンテンツ５０のうち、クエリにマッチするコンテンツ５０を検索する。コンテンツ５０の検索には、各コンテンツ５０に対応するメタ情報６０が用いられる。サーバ４００は、クエリにマッチするコンテンツ５０をランキング形式で応答してもよいし、最もマッチしたコンテンツ５０を応答してもよい。このように、サーバ４００は、格納されているメタ情報６０に基づいて、要求されたクエリにマッチするコンテンツを検索する。

典型的には、モバイル端末３００がサーバ４００に対するクエリを生成および送信する。

図１０は、本実施の形態に係る操作支援システム１におけるクエリの生成方法の一例を説明するための図である。

図１０（Ａ）には、何らかの異常あるいはイベントが発生しているときに、当該異常あるいはイベントに対応するためのコンテンツを検索するような状況の例を示す。ＨＭＩ２００は、異常あるいはイベントが発生すると、当該発生した異常あるいはイベントに関する情報を出力する。一例として、ＨＭＩ２００は、発生した異常あるいはイベントを特定するための識別情報をエンコードした画像コード６４（例えば、ＱＲコード（登録商標）など）を表示する。

オペレータは、モバイル端末３００を操作して、撮像部３２２でＨＭＩ２００の表示部２２８を撮像する。これによって、モバイル端末３００は、発生した異常あるいはイベントを特定するための画像コード６４を取得できる。オペレータがモバイル端末３００の表示部３２８に表示された検索ボタン３５０を押下することで、モバイル端末３００は、画像コード６４をそのまま、あるいは、画像コード６４に含まれる識別情報をクエリとしてサーバ４００へ送信する。このように、ＨＭＩ２００から出力される情報（例えば、画像コード６４）は、直接的または間接的にクエリとして利用可能になっている。

一例として、モバイル端末３００（あるいは、ＨＭＩ２００）は、発生している異常あるいはイベントを特定するための識別情報を含むクエリを生成および送信してもよい。

また、モバイル端末３００（あるいは、ＨＭＩ２００）は、任意の検索条件に従ってクエリを生成してもよい。

図１０（Ｂ）には、何らかの異常あるいはイベントが発生しているときに加えて、知識や経験の少ないオペレータがＨＭＩ２００に対する操作の支援を受けるような状況の例を示す。モバイル端末３００には、検索語入力欄３５１，３５２，３５３が表示されており、オペレータは任意の文字を入力できるようになっている。

図１０（Ｂ）に示す例では、検索語入力欄３５１には、エラーコードを入力するようになっており、検索語入力欄３５２には、エラー状況を入力するようになっており、検索語入力欄３５３には、作業内容を入力するようになっている。

オペレータは、検索の目的に応じて、検索語入力欄３５１，３５２，３５３の一部または全部に任意の文字を入力して、検索ボタン３５０を押下することで、モバイル端末３００は、入力された文字の内容を含むクエリを生成してサーバ４００へ送信する。

このような処理を実装することで、オペレータは、エラーコードやエラー状況を入力することで、発生している異常あるいはイベントに関連するコンテンツ５０を検索できる。また、オペレータは、ＨＭＩ２００の操作内容にあわせて、やりたい操作や一定の操作手順に関するキーワードを入力することで、関連するコンテンツ５０を検索できる。

操作支援システム２においては、任意の検索条件を指定できるようにしてもよい。例えば、以下のような検索条件を採用してもよい。

（１）任意の時間指定（例えば、コンテンツの更新日や作成日、異常あるいはイベントの発生日時、現在から所定時間内に更新あるいは作成されたもの、など）
（２）任意の画像（例えば、モバイル端末３００で異常あるいはイベントが発生している箇所を撮像し、その撮像により得られた画像に類似した画像をメタ情報６０として含むものなど）
（３）任意の信号あるいは変数の波形データ（実際に取得された波形データに類似した波形データをメタ情報６０として含むものを検索し、当該波形データと類似した現象が過去にも存在していたのかなど）
なお、モバイル端末３００によるクエリの生成方法および送信方法は、上述したものに限られず、任意の方法を採用できる。例えば、モバイル端末３００の撮像部３２２でＨＭＩ２００の表示部２２８を撮像して得られる画像をそのままクエリとして送信してもよい。

クエリのデータ構造としては、任意のものを採用できる。例えば、自然言語やキーワード（例えば、ハッシュタグなど）といった検索対象の文字やコードをそのまま含む形式であってもよいし、ＲＥＳＴ形式（例えば、「ｈｔｔｐ：／／ｓｅｒｖｅｒ／？ｅｒｒ＝０３」など）であってもよい。

サーバ４００は、モバイル端末３００からのクエリに応答して、当該クエリにマッチするコンテンツ５０を検索する。

図１１は、本実施の形態に係る操作支援システム１における検索結果の一例を説明するための図である。図１１を参照して、サーバ４００の検索結果をモバイル端末３００へ送信する。モバイル端末３００の表示部３２８には、クエリにマッチしたコンテンツ５０を示すサムネイル３５６が表示される。サムネイル３５６に対応付けて、メタ情報６０の内容を反映した説明３５８が表示されてもよい。

オペレータは、説明３５８を参照しつつ、目的に適っていると考えるサムネイル３５６を選択することで、モバイル端末３００は、対応するコンテンツ５０を取得し、再生する。すなわち、モバイル端末３００は、オペレータにより選択されたコンテンツ５０を再生する。

（ｄ５：コンテンツの再生／操作支援）
上述したように、検索されたコンテンツ５０の一覧からオペレータがいずれかのコンテンツ５０を選択すると、コンテンツ５０の再生が開始される。コンテンツ５０を再生するデバイスは、モバイル端末３００であってもよいし、ＨＭＩ２００であってもよい。さらに、オペレータが装着する任意のデバイス（例えば、ＡＲ／ＶＲゴーグル）で表示してもよい。このように、コンテンツ５０を再生するデバイスはいずれであってもよい。

コンテンツ５０をモバイル端末３００以外のデバイスで再生する場合には、オペレータが選択したコンテンツ５０の情報をモバイル端末３００から任意のデバイスへ送信するようにしてもよい。

このように、ＨＭＩ２００、モバイル端末３００および他の任意のデバイスは、選択されたコンテンツ５０を再生する処理を実行する。

コンテンツ５０の再生に加えて、コンテンツ５０の再生に連動して、オペレータの操作を支援するようにしてもよい。例えば、再生対象のコンテンツ５０に付加されるメタ情報６０に含まれる操作履歴（オペレータによる操作対象の場所および操作した時間などを含む）を利用することで、実際のオペレータの操作と、コンテンツ５０に記録されたオペレータの操作との一致を判断することもできる。このような操作支援としては、例えば、以下のようなものが挙げられる。

（１）コンテンツ５０に記録されたオペレータの操作に連動して、コンテンツ５０の再生を一時停止する。

（２）表示されるコンテンツ５０に対して、対応するメタ情報６０の内容をナレーションあるいはキャプションの形で重ね合わせて表示する。

（３）実際のオペレータが正しい操作ができるように、ＨＭＩ２００に補助情報（例えば、次にクリックすべき位置の提示）を表示するとともに、正しい操作がなされていない場合には警告（例えば、クリックすべき位置がクリックされていない）を表示する。

なお、操作支援を行う場合には、コンテンツ５０自体を再生せず、コンテンツ５０に関連付けられたメタ情報６０のみを利用してもよい。このような場合であっても、コンテンツ５０の再生に含まれ得る。

図１２は、本実施の形態に係る操作支援システム１におけるメタ情報６０を利用した操作支援の一例を説明するための図である。図１２には、ＨＭＩ２００が、オペレータが選択したコンテンツ５０に関連付けられたメタ情報６０に含まれる操作履歴を利用して、ナレーション２５２を表示する例を示す。より具体的には、ＨＭＩ２００の表示部２２８には、１または複数のボタンオブジェクト２５０が配置されている。ボタンオブジェクト２５０は、ＨＭＩ２００に本来表示されるものである。ＨＭＩ２００は、ボタンオブジェクト２５０に加えて、メタ情報６０を参照して、オペレータの操作を支援するためのナレーション２５２を表示する。

図１２に示す例では、一連の操作において、次にオペレータが選択すべきボタンオブジェクト２５０に関連付けて、「次はこのボタンを選択します」というメッセージを含むナレーション２５２が表示されている。このように、ＨＭＩ２００は、コンテンツ５０の再生処理の一例として、選択されたコンテンツ５０に関連付けられたメタ情報６０（操作履歴を含む）に基づいて、ＨＭＩ２００の操作画面上に操作すべき内容を示す情報（例えば、ナレーション２５２）を追加的に表示するようにしてもよい。

オペレータは、このようなナレーション２５２を参照することで、選択したコンテンツ５０に記録されたオペレータの操作との同じ操作を行うことができる。

（ｄ６：処理手順）
次に、コンテンツの取得および活用に係る処理手順について説明する。

図１３は、本実施の形態に係る操作支援システム１におけるコンテンツの取得に係る処理手順を示すシーケンス図である。図１３を参照して、ＨＭＩ２００は、何らかの異常あるいはイベントの発生を検出すると（シーケンスＳＱ１００）、発生した異常あるいはイベントに関するメタ情報６０を生成する（シーケンスＳＱ１０２）。モバイル端末３００は、任意の方法でメタ情報６０を取得する（シーケンスＳＱ１０４）。

モバイル端末３００は、オペレータがＨＭＩ２００に対して行う１または複数の操作を記録したコンテンツ５０を取得する（シーケンスＳＱ１０６）。モバイル端末３００は、取得したコンテンツ５０と対応するメタ情報６０とを関連付けて、サーバ４００へ送信する（シーケンスＳＱ１０８）。

サーバ４００は、モバイル端末３００から送信されたコンテンツ５０およびメタ情報６０を格納する（シーケンスＳＱ１１０）。

図１４は、本実施の形態に係る操作支援システム１におけるコンテンツの活用に係る処理手順を示すシーケンス図である。図１４を参照して、ＨＭＩ２００は、何らかの異常あるいはイベントの発生を検出すると（シーケンスＳＱ２００）、発生した異常あるいはイベントを特定するための識別情報を生成する（シーケンスＳＱ２０２）。そして、モバイル端末３００は、ＨＭＩ２００が生成した識別情報を取得して、クエリを生成する（シーケンスＳＱ２０６）。

また、モバイル端末３００は、オペレータから検索条件を入力する操作を受けると（シーケンスＳＱ２０４）、入力された検索条件に基づいて、クエリを生成する（シーケンスＳＱ２０６）。

モバイル端末３００は、生成したクエリをサーバ４００へ送信する（シーケンスＳＱ２０８）。サーバ４００は、モバイル端末３００からのクエリに応答して、コンテンツデータベース４５０に格納されているコンテンツ５０のうち、クエリにマッチするコンテンツ５０を検索する（シーケンスＳＱ２１０）。そして、サーバ４００は、検索結果をモバイル端末３００へ送信する（シーケンスＳＱ２１２）。

モバイル端末３００は、サーバ４００からの検索結果を表示する（シーケンスＳＱ２１４）。そして、モバイル端末３００は、オペレータからいずれかのコンテンツ５０に対する選択を受けると（シーケンスＳＱ２１６）、選択されたコンテンツ５０およびメタ情報６０を取得する（シーケンスＳＱ２１８）。さらに、モバイル端末３００は、取得したコンテンツ５０を再生する（シーケンスＳＱ２２０）。

あるいは、モバイル端末３００は、取得したコンテンツ５０およびメタ情報６０をＨＭＩ２００などへ提供し、ＨＭＩ２００がコンテンツ５０を再生する（シーケンスＳＱ２２２）。

（ｄ７：コンテンツ５０の取得に係る変形例）
モバイル端末３００がコンテンツ５０を取得する例を説明したが、コンテンツ５０を取得するデバイスはこれに限られない。例えば、ＨＭＩ２００自体がコンテンツ５０を作成して、サーバ４００へ送信するようにしてもよいし、情報系ネットワーク６に接続された任意のデバイスがコンテンツ５０を取得するようにしてもよい。

また、モバイル端末３００は、図８（Ａ）および図８（Ｃ）に示すような方法で、コンテンツ５０を生成し、生成したコンテンツ５０をＨＭＩ２００へファイル転送してもよい。この場合、ＨＭＩ２００は、モバイル端末３００から取得したコンテンツ５０と、自装置が生成したメタ情報６０とを関連付けて、サーバ４００へ送信してもよい。

図１５は、本実施の形態に係る操作支援システム１におけるコンテンツの取得の変形例に係る処理手順を示すシーケンス図である。図１５を参照して、モバイル端末３００は、オペレータの操作を記録したコンテンツ５０を任意の方法で生成する（（１）コンテンツ生成）。そして、モバイル端末３００は、生成したコンテンツ５０をＨＭＩ２００へ送信する（（２）コンテンツ送信）。

ＨＭＩ２００は、直近に発生した異常あるいはイベントに関するメタ情報６０を生成し（（３）メタ情報生成）、コンテンツ５０と対応するメタ情報６０とを関連付けて、サーバ４００へ送信する（（４）コンテンツ＋メタ情報送信）。

このような手順によって、コンテンツ５０をサーバ４００に格納することができる。
（ｄ８：コンテンツ５０の取得に係る別の変形例）
上述の図８（Ｂ）に示すように、ＨＭＩ２００がコンテンツ５０を生成する場合には、何らかの異常あるいはイベントが発生した後のオペレータの操作だけではなく、当該異常あるいはイベントが発生する直前の操作も記録するようにしてもよい。

図１６は、本実施の形態に係る操作支援システム１におけるコンテンツの取得のさらに別の変形例に係る処理を説明するための図である。図１６を参照して、例えば、オペレータが何らかの適切ではない操作を行って、何らかの異常が発生したとする。ＨＭＩ２００は、所定時間分のオペレータの操作を連続記録しており、何らかの異常が発生すると、当該異常が発生したタイミングを基準とする所定時間分の操作をコンテンツ５０として出力する。すなわち、ＨＭＩ２００は、何らかの異常あるいはイベントが発生すると、当該異常あるいはイベントの発生タイミングより前の操作を記録したコンテンツ５０を生成する。

さらに、ＨＭＩ２００は、発生した異常あるいはイベントに関する情報を含むメタ情報６０を出力したコンテンツ５０に自動的に付加してもよい。

付加されるメタ情報６０は、オペレータ名、操作時刻、操作対象の設備、操作内容、エラー情報、ＰＬＣのステータス情報、ＰＬＣ内部のパラメータなどを含むことができる。

このように、ＨＭＩ２００が何らかの異常あるいはイベントの発生をトリガとして、コンテンツ５０と対応するメタ情報６０とを関連付けて出力することで、エラーが発生した原因などの特定を容易化できる。

（ｄ９：コンテンツ５０の格納に係る変形例）
コンテンツ５０およびメタ情報６０をサーバ４００のコンテンツデータベース４５０に格納する例を説明したが、コンテンツデータベース４５０は、いずれのデバイスに配置してもよい。例えば、コンテンツ５０およびメタ情報６０の格納先は、ＨＭＩ２００であってもよいし、情報系ネットワーク６に接続された任意のストレージであってもよい。また、複数のデバイスがコンテンツ５０およびメタ情報６０を格納するようにしてもよい。なお、サーバ４００は、クラウド環境上に実現されてもよい。

（ｄ１０：コンテンツ５０の活用に係る変形例）
モバイル端末３００ではなく、ＨＭＩ２００がクエリを生成および送信してもよい。この場合、ＨＭＩ２００は、発生した異常を特定するための識別情報を含むクエリを生成して、サーバ４００へ送信する。その後、ＨＭＩ２００は、サーバ４００から受信した検索結果を表示してもよいし、検索されたコンテンツ５０が格納されているアドレスをモバイル端末３００へ送信するようにしてもよい。

また、サーバ４００は、コンテンツ５０および対応するメタ情報６０とを関連付けて格納するだけではなく、メタ情報６０を適宜更新するようにしてもよい。例えば、コンテンツデータベース４５０に格納されたコンテンツ５０およびメタ情報６０を解析し、新たな情報をメタ情報６０に追加してもよい。このようなメタ情報６０の更新は、ＡＩなどを用いて実現してもよいし、手入力してもよい。新たに追加される情報としては、例えば、各コンテンツ５０が参照される度合いに応じて、参照される度合いが大きいコンテンツ５０ほど上位にランキングされるようにしてもよい。

＜Ｅ．操作ナビゲーション＞
次に、操作ナビゲーションの処理４４について説明する。

図１７および図１８は、本実施の形態に係る操作支援システム１における操作ナビゲーションに係る処理例を説明するための図である。

図１７を参照して、ＨＭＩ２００が提供する操作画面には、例えば、対象の操作を選択するための選択ウィンドウ２８０が表示される。オペレータは、選択ウィンドウ２８０上で対象の操作を選択する。すると、図１８（Ａ）および図１８（Ｂ）に示すように、選択された操作に応じて、操作画面には、操作を支援するためのナビゲーション表示２８２が順次提供される。オペレータは、ナビゲーション表示２８２を参照しながら、操作画面に表示されるボタンオブジェクトなどの操作オブジェクトを順次押下する。

図１８には、押下されるべき操作オブジェクトを強調するような表示態様の例を示すが、これに限らず、図１２に示すようなメッセージを表示してもよいし、その他、任意の表示態様で操作を支援するための情報を表示すればよい。

上述したようなコンテンツ５０に付加されるメタ情報６０に基づいて、ＡＩなどを用いて、各操作において押下すべき操作オブジェクトを探索および決定してもよい。あるいは、各操作について、押下すべき操作オブジェクトの順序を予め決定しておいてもよい。

このような操作ナビゲーションを操作画面上で提供することで、知識や経験の少ないオペレータであっても、熟練のオペレータと同様の操作を容易に行うことができる。

＜Ｆ．操作オブジェクトのショートカット作成＞
次に、操作オブジェクトのショートカット作成の処理４６について説明する。

「操作オブジェクトのショートカット」とは、いずれかの操作画面に配置された操作オブジェクトと同じ処理および動作を行うことが可能なオブジェクトを意味する。操作オブジェクトのショートカットは、元の操作オブジェクトを参照する形で実装されてもよいし、元の操作オブジェクトをコピーする形で実装されてもよい。操作オブジェクトのショートカットは、典型的には、操作画面に含まれるボタンオブジェクトなどの操作オブジェクトを再利用あるいは再配置するためなどに用いられる。

図１９は、本実施の形態に係る操作支援システム１のＨＭＩ２００が提供する操作画面の一例を示す模式図である。ＨＭＩ２００が提供する操作画面は、一例として、ページ単位での切り替えができるように構成されている。図１９（Ａ）には、ページ１が選択されている場合の操作画面の例を示し、図１９（Ｂ）には、ページ２が選択されている場合の操作画面の例を示す。

図１９（Ａ）および図１９（Ｂ）に示すＨＭＩ２００の操作画面は、ページ１を選択するためのボタンオブジェクト２６１と、ページ２を選択するためのボタンオブジェクト２６２と、後述するような操作オブジェクトへのショートカットを表示するためのボタンオブジェクト２６０とを含む。

図１９（Ａ）に示すＨＭＩ２００の操作画面は、ボタンオブジェクト２６１が選択された状態であり、ボタンオブジェクト２６１１～２６１８が表示されている。一方、図１９（Ａ）に示すＨＭＩ２００の操作画面は、ボタンオブジェクト２６２が選択された状態であり、ボタンオブジェクト２６２１～２６２８が表示されている。

ショートカットとしての追加を指示するためのボタンオブジェクト２６８が選択されることで、任意の操作オブジェクトへのショートカットの作成が開始される。操作の一例として、ボタンオブジェクト２６８が選択されている期間において、任意の操作オブジェクトが選択されると、当該選択された操作オブジェクトへのショートカットが順次追加される。

図２０は、本実施の形態に係る操作支援システム１のＨＭＩ２００における操作オブジェクトへのショートカット作成の一例を示す模式図である。

図２０（Ａ）に示すように、ボタンオブジェクト２６８が選択されると、ショートカットの作成が有効化される。例えば、図２０（Ｂ）に示すように、ボタンオブジェクト２６１２が選択され、続いて、図２０（Ｃ）に示すように、ボタンオブジェクト２６１７が選択されたとする。さらに、図２０（Ｄ）に示すように、ボタンオブジェクト２６２が選択されて、ページ２の操作画面が表示された状態で、ボタンオブジェクト２６２１が選択されたとする。

すなわち、ページ１のボタンオブジェクト２６１２およびボタンオブジェクト２６１７が選択された後、ページ２のボタンオブジェクト２６２１が選択されたとする。そして、図２０（Ｅ）に示すように、ボタンオブジェクト２６８が再度選択されると、ショートカットの作成が無効化される。この一連の操作によって、操作オブジェクトへのショートカットが作成される。図２０（Ｆ）に示すように、ボタンオブジェクト２６０が選択されるとショートカットの操作画面に切り替わり、ショートカットの操作画面には、一連の操作によって作成されたショートカットが表示されることになる。すなわち、一連の操作によって選択された、ボタンオブジェクト２６１２、ボタンオブジェクト２６１７およびボタンオブジェクト２６２１についてのショートカットが生成され、それらが表示される。

なお、図１９および図２０においては、説明の便宜上、ショートカットを表示する操作画面を１つだけ含む例を示すが、これに限らず、ショートカットを表示する複数の操作画面を用意してもよい。

このように、操作オブジェクトのショートカット作成の処理４６は、ＨＭＩ２００の操作画面に含まれる複数の操作オブジェクトのうち任意の操作オブジェクトの選択に応じて、当該選択された１または複数の操作オブジェクトを集合させて表示する別の操作画面を生成する処理を含む。

オペレータは、複数の操作オブジェクトのうち、特定の操作あるいは特定の用途に用いる操作オブジェクトのみを同一の操作画面に集約することができるので、操作の効率を高めるとともに、操作ミスなどの不具合の発生を低減できる。特定の操作あるいは特定の用途に用いる操作オブジェクトが複数のページに亘って配置されているような場合には、特に有効である。

＜Ｇ．ページのブックマーク作成＞
次に、ページのブックマーク作成の処理４８について説明する。

「ページのブックマーク」とは、操作画面を構成する特定のページへアクセスするためのオブジェクトを意味する。ページのブックマークは、基本的には、任意のページを特定するための情報を含む。

図２１は、本実施の形態に係る操作支援システム１のＨＭＩ２００が提供する操作画面の別の一例を示す模式図である。図２１に示す操作画面は、ページ単位での切り替えができるように構成されており、一例として、６ページ分の操作画面を含む。図２１（Ａ）には、ページ１が選択されている場合の操作画面の例を示し、図２１（Ｂ）には、ページ２が選択されている場合の操作画面の例を示す。

図２１（Ａ）および図２１（Ｂ）に示すＨＭＩ２００の操作画面は、ページ１～６をそれぞれ選択するためのボタンオブジェクト２６１～２６６を含む。ボタンオブジェクト２６１が選択されると、図２１（Ａ）に示すような操作画面が表示され、ボタンオブジェクト２６２が選択されると、図２１（Ｂ）に示すような操作画面が表示される。

図２１（Ａ）および図２１（Ｂ）に示すＨＭＩ２００の操作画面は、ブックマークを表示するボタンオブジェクト２７０、および、ブックマークの作成を指示するボタンオブジェクト２７１を含む。任意のページが表示された状態で、ボタンオブジェクト２７１が選択されることで、表示されているページがブックマークとして登録される。

図２２は、本実施の形態に係る操作支援システム１のＨＭＩ２００におけるページのブックマーク作成の手順例を示す図である。図２２（Ａ）に示すように、任意のページが選択された状態でボタンオブジェクト２７１が押下されると、図２２（Ｂ）に示すように、生成されるブックマークの属性情報を入力するための入力ウィンドウ２７２が表示される。入力ウィンドウ２７２は、ショートカットの登録番号を入力する入力欄２７３と、ページの名称を入力する入力欄２７４と、表示されるタイトルの名称を入力する入力欄２７５とを含む。

図２２に示すような作成手順によって、対象のページがブックマークとして登録される。ボタンオブジェクト２７０が押下されると、作成されたブックマークが表示される。

図２３は、本実施の形態に係る操作支援システム１のＨＭＩ２００におけるページのブックマークの表示例を示す図である。図２３を参照して、ボタンオブジェクト２７０が押下されると、予め作成されたブックマークが一覧表示される。各ブックマークは、タイトル２７６と、登録されたページへの遷移を指示するボタンオブジェクト２７７とを含む。

ボタンオブジェクト２７７が押下されることで、ＨＭＩ２００には予め登録されたページが表示される。

図２３には、一例として、２つのページのブックマークが作成されている例を示すが、作成可能なブックマークの数は特に制限はない。

このように、ページのブックマーク作成の処理４８は、ＨＭＩ２００が提供する複数ページの操作画面のうち任意のページの選択に応じて、当該選択された１または複数のページへアクセスするための操作オブジェクト（ブックマーク）を含む別の操作画面を生成する処理を含む。

ページのブックマークを作成する処理を実装することで、特定の操作あるいは特定の用途に用いる操作画面への遷移をより容易に行うことができるので、操作の効率を高めるとともに、操作ミスなどの不具合の発生を低減できる。

＜Ｈ．変形例＞
上述の実施の形態においては、主として、ＨＭＩ２００と、モバイル端末３００と、サーバ４００とからなる操作支援システム１について例示したが、これに限らず、追加的に任意のデバイスを採用してもよいし、あるデバイスが担当する機能を別のデバイスが担当するようにしてもよい。すなわち、上述した各種処理を実現できるものであれば、どのようなハードウェアの実装形態を採用してもよい。

＜Ｉ．付記＞
上述したような本実施の形態は、以下のような技術思想を含む。

［構成１］
制御対象を制御するための制御システム（２）に向けられた操作支援システム（１）であって、
オペレータのＨＭＩ（Human Machine Interface）（２００）に対する操作を記録したコンテンツ（５０）を取得する取得手段（２００，３００）と、
前記取得されたコンテンツに関連するメタ情報（６０）を取得する取得手段（２００，３００）と、
前記取得されたコンテンツと前記取得されたメタ情報とを関連付けて格納する格納手段（４００）と、
前記格納されているメタ情報に基づいて、要求されたクエリにマッチするコンテンツを検索する検索手段（４００）と、
選択されたコンテンツを再生する再生手段（２００，３００）とを備える、操作支援システム。

［構成２］
前記取得手段は、前記ＨＭＩの操作画面を電気的または光学的に観測できるモバイル端末（３００）を含む、構成１に記載の操作支援システム。

［構成３］
前記取得手段は、前記ＨＭＩに実装される操作画面を録画するキャプチャーアプリケーション（３１２４）を含む、構成１に記載の操作支援システム。

［構成４］
前記取得手段は、異常あるいはイベントが発生すると、当該異常あるいはイベントの発生タイミングより前の操作を記録した前記コンテンツを生成する、構成１に記載の操作支援システム。

［構成５］
前記ＨＭＩは、異常あるいはイベントが発生すると、当該発生した異常あるいはイベントに関する情報を出力するように構成されており、
当該出力される情報は、直接的または間接的に前記クエリとして利用可能になっている、構成１～４のいずれか１項に記載の操作支援システム。

［構成６］
任意の検索条件に従って前記クエリを生成する生成手段（２００，３００）をさらに備える、構成１～５のいずれか１項に記載の操作支援システム。

［構成７］
前記再生手段は、前記選択されたコンテンツを再生するモバイル端末（３００）を含む、構成１～６のいずれか１項に記載の操作支援システム。

［構成８］
前記メタ情報は、オペレータによる操作対象の場所および操作した時間を示す操作履歴を含み、
前記再生手段は、前記選択されたコンテンツに関連付けられたメタ情報に基づいて、前記ＨＭＩの操作画面上に操作すべき内容を示す情報（２５２）を追加的に表示する、構成１～７のいずれか１項に記載の操作支援システム。

［構成９］
前記ＨＭＩの操作画面に含まれる複数の操作オブジェクトのうち任意の操作オブジェクトの選択に応じて、当該選択された１または複数の操作オブジェクトを集合させて表示する第２の操作画面を生成する第１の生成手段（２００）をさらに備える、構成１～８のいずれか１項に記載の操作支援システム。

［構成１０］
前記ＨＭＩが提供する複数ページの操作画面のうち任意のページの選択に応じて、当該選択された１または複数のページへアクセスするための操作オブジェクトを含む第３の操作画面を生成する第２の生成手段（２００）をさらに備える、構成１～９のいずれか１項に記載の操作支援システム。

［構成１１］
制御対象を制御するための制御システム（２）で実行される操作支援方法であって、
オペレータのＨＭＩ（Human Machine Interface）に対する操作を記録したコンテンツを取得するステップ（ＳＱ１０６）と、
前記取得されたコンテンツに関連するメタ情報を取得するステップ（ＳＱ１０４）と、
前記取得されたコンテンツと前記取得されたメタ情報とを関連付けて格納するステップ（ＳＱ１１０）と、
前記格納されているメタ情報に基づいて、要求されたクエリにマッチするコンテンツを検索するステップ（ＳＱ２１０）と、
選択されたコンテンツを再生するステップ（ＳＱ２２０，ＳＱ２２２）とを備える、操作支援方法。

＜Ｊ．利点＞
本実施の形態に係る操作支援システムによれば、知識や経験の少ないオペレータであっても、効率かつ正確な操作を行うようにする仕組みを提供できる。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

１ 操作支援システム、２ 制御システム、４ 制御系ネットワーク、６ 情報系ネットワーク、８ インターネット、１０ フィールド装置群、１２ リモートＩ／Ｏ装置、１４ リレー群、１６ サーボドライバ、１８ サーボモータ、２０ アクセスポイント、３０ ゲートウェイ、４２，４４，４６，４８ 処理、５０ コンテンツ、６０ メタ情報、６２，６４ 画像コード、１００ ＰＬＣ、１０２，２０２，３０２，４０２ プロセッサ、１０４ チップセット、１０６，２０６，３０６，４０６ 主メモリ、１１０，２１０，３１０，４１０ ストレージ、１１２，２１２ システムプログラム、１１４，２１４ ユーザプログラム、１２０ 制御系ネットワークコントローラ、１２２ 情報系ネットワークコントローラ、１２４，２２４，３２４ ＵＳＢコントローラ、１２６ メモリカードインターフェイス、１２８ メモリカード、２００ ＨＭＩ、２０４ 光学ドライブ、２０５ 記録媒体、２０８，３０８，４０８ バス、２２０，４２０ ネットワークコントローラ、２２６，３２６，４２６ 入力部、２２８，３２８，４２８ 表示部、２５０，２６０，２６１，２６２，２６６，２６８，２７０，２７１，２７７，２６１１，２６１２，２６１７，２６１８，２６２１，２６２８ ボタンオブジェクト、２５２ ナレーション、２７２ 入力ウィンドウ、２７３，２７４，２７５ 入力欄、２７６ タイトル、２８０ 選択ウィンドウ、２８２ ナビゲーション表示、３００ モバイル端末、３１１，４１１ ＯＳ、３１２，４１２ アプリケーションプログラム、３２０ 無線ネットワークコントローラ、３２２ 撮像部、３５０ 検索ボタン、３５１，３５２，３５３ 検索語入力欄、３５６ サムネイル、３５８ 説明、４００ サーバ、４５０ コンテンツデータベース、２１２２ ＶＮＣサーバ、２１２４，３１２４ キャプチャーアプリケーション、２１２６ ＦＴＰサーバ、３１２２ ＶＮＣクライエント、３１２６ ＦＴＰクライエント、３１２８ 撮像アプリケーション。

Claims (11)

1. 制御対象を制御するための制御システムに向けられた操作支援システムであって、
   オペレータのＨＭＩ（Human Machine Interface）に対する操作を記録したコンテンツを取得する取得手段と、
   前記取得されたコンテンツに関連するメタ情報を取得する取得手段と、
   前記取得されたコンテンツと前記取得されたメタ情報とを関連付けて格納する格納手段と、
   前記格納されているメタ情報に基づいて、要求されたクエリにマッチするコンテンツを検索する検索手段と、
   選択されたコンテンツを再生する再生手段とを備える、操作支援システム。
2. 前記取得手段は、前記ＨＭＩの操作画面を電気的または光学的に観測できるモバイル端末を含む、請求項１に記載の操作支援システム。
3. 前記取得手段は、前記ＨＭＩに実装される操作画面を録画するキャプチャーアプリケーションを含む、請求項１に記載の操作支援システム。
4. 前記取得手段は、異常あるいはイベントが発生すると、当該異常あるいはイベントの発生タイミングより前の操作を記録した前記コンテンツを生成する、請求項１に記載の操作支援システム。
5. 前記ＨＭＩは、異常あるいはイベントが発生すると、当該発生した異常あるいはイベントに関する情報を出力するように構成されており、
   当該出力される情報は、直接的または間接的に前記クエリとして利用可能になっている、請求項１～４のいずれか１項に記載の操作支援システム。
6. 任意の検索条件に従って前記クエリを生成する生成手段をさらに備える、請求項１～５のいずれか１項に記載の操作支援システム。
7. 前記再生手段は、前記選択されたコンテンツを再生するモバイル端末を含む、請求項１～６のいずれか１項に記載の操作支援システム。
8. 前記メタ情報は、オペレータによる操作対象の場所および操作した時間を示す操作履歴を含み、
   前記再生手段は、前記選択されたコンテンツに関連付けられたメタ情報に基づいて、前記ＨＭＩの操作画面上に操作すべき内容を示す情報を追加的に表示する、請求項１～７のいずれか１項に記載の操作支援システム。
9. 前記ＨＭＩの操作画面に含まれる複数の操作オブジェクトのうち任意の操作オブジェクトの選択に応じて、当該選択された１または複数の操作オブジェクトを集合させて表示する第２の操作画面を生成する第１の生成手段をさらに備える、請求項１～８のいずれか１項に記載の操作支援システム。
10. 前記ＨＭＩが提供する複数ページの操作画面のうち任意のページの選択に応じて、当該選択された１または複数のページへアクセスするための操作オブジェクトを含む第３の操作画面を生成する第２の生成手段をさらに備える、請求項１～９のいずれか１項に記載の操作支援システム。
11. 制御対象を制御するための制御システムで実行される操作支援方法であって、
    オペレータのＨＭＩ（Human Machine Interface）に対する操作を記録したコンテンツを取得するステップと、
    前記取得されたコンテンツに関連するメタ情報を取得するステップと、
    前記取得されたコンテンツと前記取得されたメタ情報とを関連付けて格納するステップと、
    前記格納されているメタ情報に基づいて、要求されたクエリにマッチするコンテンツを検索するステップと、
    選択されたコンテンツを再生するステップとを備える、操作支援方法。

Images