JPWO2021054073A5 - - Google Patents

Claims (14)

1. 作業現場内の設備を保守する保守システムであって、
   サーバと、
   前記サーバと通信可能に接続された撮像装置と、
   前記サーバと通信可能に接続された表示端末と、を備え、
   前記サーバは、
   前記設備に関する設備情報と、前記作業現場をモデルとして表すモデル画像と、前記モデル画像において前記設備を表すオブジェクトと前記設備情報とを関連付ける関連付け情報と、を記憶する記憶部と、
   前記関連付け情報に基づいて、前記設備情報が関連付けられていることを示すアイコンを前記設備情報が関連付けられた前記モデル画像の対応する前記オブジェクトに付して第１合成画像を生成する第１合成画像生成部と、
   前記撮像装置により前記作業現場を実際に撮影した撮影画像と前記モデル画像との対応関係を解析する対応関係解析部と、
   前記対応関係解析部により解析された前記対応関係と前記関連付け情報とに基づいて、前記撮影画像内において前記設備を表示する設備表示部分に前記アイコンを付して第２合成画像を生成する第２合成画像生成部と、
   前記第１合成画像及び／又は前記第２合成画像を前記表示端末に送信する送信部と、
   を有し、
   前記表示端末は、
   前記第１合成画像を表示する第１状態、又は、前記第２合成画像を表示する第２状態のいずれかを選択する操作を受け付ける第２操作部と、
   前記第２操作部による表示状態の選択結果を前記サーバに通知する第２通知部と、
   を有し、
   前記サーバの前記送信部は、
   前記第２通知部から前記選択結果として前記第１状態が前記サーバに通知された場合、前記第１合成画像を前記表示端末に送信し、
   前記第２通知部から前記選択結果として前記第２状態が前記サーバに通知された場合、前記第２合成画像を前記表示端末に送信し、
   前記表示端末は、
   前記送信部から前記第１合成画像を受信した場合、当該第１合成画像を表示し、前記送信部から前記第２合成画像を受信した場合、当該第２合成画像を表示する、
   保守システム。
2. 前記表示端末は、
   前記第１合成画像又は前記第２合成画像に表示された前記アイコンに対する操作を受け付ける第１操作部と、
   前記第１操作部による前記アイコンに対する操作を前記サーバに通知する第１通知部と、
   を有し、
   前記第１通知部から前記アイコンに対する操作が前記サーバに通知された場合、前記サーバの前記送信部は、操作が行われた前記アイコンが付された前記オブジェクト又は前記設備表示部分に関連付けられた前記設備情報を、前記表示端末に送信し、
   前記表示端末は、前記サーバの前記送信部から受信した前記設備情報を表示する、
   請求項１に記載の保守システム。
3. 前記表示端末は、
   前記第２合成画像を表示中に、当該第２合成画像における前記設備表示部分と前記設備情報との関連付けを更新する操作を受け付ける第３操作部と、
   前記第３操作部による、前記第２合成画像における前記設備表示部分と前記設備情報との関連付けの更新を前記サーバに通知する第３通知部と、
   を有し、
   前記サーバの前記第２合成画像生成部は、前記第３通知部から受信した前記設備表示部分と前記設備情報との関連付けの更新内容に基づいて、表示中の前記第２合成画像における前記設備表示部分と前記設備情報との関連付けを更新した新たな第２合成画像を生成する、
   請求項１又は２に記載の保守システム。
4. 前記サーバの前記第１合成画像生成部は、前記新たな第２合成画像に基づいて、既存の前記第１合成画像を更新する、請求項３に記載の保守システム。
5. 前記関連付け情報は、前記モデル画像内の少なくとも１つの前記オブジェクトを基準とした前記オブジェクトの相対位置と前記設備情報とを関連付ける、請求項１～４のいずれかに記載の保守システム。
6. 前記モデル画像は、それぞれが前記作業現場の異なる部分を表す複数の部分モデル画像により構成され、
   前記関連付け情報は、前記複数の部分モデル画像のそれぞれについて作成される、請求項１～５のいずれかに記載の保守システム。
7. 前記設備情報は前記設備の稼働に関する稼働情報を含む、請求項１～６のいずれかに記載の保守システム。
8. 前記作業現場は、搬送装置を前記設備として含む自動倉庫システムであり、
   前記稼働情報は、前記搬送装置とその周囲の環境に関する環境データと、前記搬送装置にて発生した振動に関する振動データと、前記搬送装置にて発生したエラーに関するエラー発生情報と、を含む、
   請求項７に記載の保守システム。
9. 前記設備情報は前記設備を保守するための保守情報を含む、請求項１～８のいずれかに記載の保守システム。
10. 前記保守情報は、前記設備の部品のリストであるパーツリストと、前記設備のマニュアルと、前記設備の点検履歴と、を含む、請求項９に記載の保守システム。
11. 前記サーバは、複数の前記作業現場から、当該複数の作業現場に含まれる前記設備の前記設備情報を収集する、請求項１～１０のいずれかに記載の保守システム。
12. 作業現場内の設備を保守するためのサーバであって、
    前記設備に関する設備情報と、前記作業現場をモデルとして表すモデル画像と、前記モデル画像において前記設備を表すオブジェクトと前記設備情報とを関連付ける関連付け情報と、を記憶する記憶部と、
    前記関連付け情報に基づいて、前記設備情報が関連付けられていることを示すアイコンを前記設備情報が関連付けられた前記モデル画像の対応する前記オブジェクトに付して第１合成画像を生成する第１合成画像生成部と、
    前記作業現場を実際に撮影した撮影画像と前記モデル画像との対応関係を解析する対応関係解析部と、
    前記対応関係解析部により解析された前記対応関係と前記関連付け情報とに基づいて、前記撮影画像内において前記設備を表示する設備表示部分に前記アイコンを付して第２合成画像を生成する第２合成画像生成部と、
    前記第１合成画像及び／又は前記第２合成画像を外部に送信する送信部と、
    を備え、
    前記送信部は、
    外部の表示端末から前記第１合成画像を表示する旨が通知された場合、前記第１合成画像を前記表示端末に送信し、
    前記表示端末から前記第２合成画像を表示する旨が通知された場合、前記第２合成画像を前記表示端末に送信し、
    前記表示端末は、
    前記送信部から前記第１合成画像を受信した場合、当該第１合成画像を表示し、前記送信部から前記第２合成画像を受信した場合、当該第２合成画像を表示する、
    サーバ。
13. 作業現場内の設備を保守する保守システムにより実行される保守方法であって、
    前記設備に関する設備情報と、前記作業現場をモデルとして表すモデル画像と、前記モデル画像において前記設備を表すオブジェクトと前記設備情報とを関連付ける関連付け情報と、を記憶するステップと、
    前記関連付け情報に基づいて、前記設備情報が関連付けられていることを示すアイコンを前記設備情報が関連付けられた前記モデル画像の対応する前記オブジェクトに付して第１合成画像を生成するステップと、
    前記作業現場を実際に撮影した撮影画像と前記モデル画像との対応関係を解析するステップと、
    解析された前記対応関係と前記関連付け情報とに基づいて、前前記撮影画像内において前記設備を表示する設備表示部分に前記アイコンを付して第２合成画像を生成するステップと、
    表示端末が、前記第１合成画像を表示する第１状態、又は、前記第２合成画像を表示する第２状態のいずれかを選択する操作を受け付けるステップと、
    前記表示端末が表示状態の選択結果を通知するステップと、
    
    前記選択結果として前記第１状態が通知された場合、前記第１合成画像を前記表示端末に送信し、前記選択結果として前記第２状態が通知された場合、前記第２合成画像を前記表示端末に送信するステップと、
    前記表示端末が、前記第１合成画像を受信した場合、当該第１合成画像を表示し、前記第２合成画像を受信した場合、当該第２合成画像を表示するステップと、
    を備える、保守方法。
14. 請求項１３に記載の保守方法をコンピュータに実行させるためのプログラム。