JP7406038B1 - 作業支援システム及び作業支援方法 - Google Patents

作業支援システム及び作業支援方法 Download PDF

Info

Publication number
JP7406038B1
JP7406038B1 JP2023151528A JP2023151528A JP7406038B1 JP 7406038 B1 JP7406038 B1 JP 7406038B1 JP 2023151528 A JP2023151528 A JP 2023151528A JP 2023151528 A JP2023151528 A JP 2023151528A JP 7406038 B1 JP7406038 B1 JP 7406038B1
Authority
JP
Japan
Prior art keywords
work
instruction information
terminal device
information
work instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023151528A
Other languages
English (en)
Inventor
龍太朗 芳賀
幸男 小室
勝則 金澤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Power Solutions Co Ltd
Original Assignee
Hitachi Power Solutions Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Power Solutions Co Ltd filed Critical Hitachi Power Solutions Co Ltd
Priority to JP2023151528A priority Critical patent/JP7406038B1/ja
Application granted granted Critical
Publication of JP7406038B1 publication Critical patent/JP7406038B1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • General Factory Administration (AREA)

Abstract

【課題】利便性の高い作業支援システム等を提供する。【解決手段】作業支援システムは、作業員の視野の領域付近を撮像する撮像部１１ｂと、所定の作業指示情報を表示させる第１表示部１１ｃと、を有する端末装置１０と、撮像部１１ｂで撮像された作業対象物の機器情報を端末装置１０から受信し、当該機器情報に対応する作業指示情報を端末装置１０に送信する管理装置３０と、を備え、作業指示情報には、作業内容が文字情報で示される作業項目と、当該作業項目に対応する作業項目動画と、が含まれ、管理装置３０は、複数の作業指示情報が作業順に配列されてなる作業指示情報群を生成し、当該作業指示情報群の中の最初の作業指示情報を端末装置１０に送信し、端末装置１０から送信される撮像部１１ｂの撮像結果に基づいて、作業員が作業指示情報に基づく所定の作業を終わらせるたびに、次の作業指示情報を端末装置１０に送信する処理を繰り返す。【選択図】図２

Description

本開示は、作業支援システム等に関する。
機械設備の運転や点検やメンテナンスといった作業を支援するための技術として、例えば、特許文献１に記載のものが知られている。すなわち、特許文献１には、「作業者が視認可能に情報を表示する表示デバイスと、前記作業者から作業進捗に関する情報を受け付ける受付部と、前記受付部で受け付けた情報に応じて、作業手順に関する情報である作業手順情報を、前記表示デバイスに表示する表示制御部と、」を備える作業支援システムについて記載されている。
特開２０２２－１１４１１１号公報
特許文献１に記載の技術では、作業進捗に応じた作業手順に関する情報が表示デバイスに表示されるようにしているが、利便性の点で改善の余地がある。
そこで、本開示は、利便性の高い作業支援システム等を提供することを課題とする。
前記した課題を解決するために、本開示は、作業員の視野に入っている領域付近を撮像する撮像部と、所定の作業指示情報を表示させる第１表示部と、を有する端末装置と、前記撮像部で撮像された作業対象物の機器情報を前記端末装置から受信し、前記機器情報を格納した機器情報データベースに当該機器情報が含まれない場合に、所定のエラー信号を前記端末装置に送信し、前記作業対象物の前記機器情報を前記端末装置から再び受信し、当該機器情報が前記機器情報データベースに含まれる場合に、当該機器情報に対応する前記作業指示情報を前記端末装置に送信する管理装置と、を備え、前記作業指示情報には、作業内容を示す文字情報である作業項目と、当該作業項目に対応する作業項目動画と、が含まれ、前記管理装置は、複数の前記作業指示情報が作業順に配列されてなる作業指示情報群を生成し、当該作業指示情報群の中の最初の作業指示情報を前記端末装置に送信し、前記端末装置から送信される前記撮像部の撮像結果に基づいて、前記作業員が前記作業指示情報に基づく所定の作業を終わらせるたびに、次の前記作業指示情報を前記端末装置に送信する処理を繰り返すこととした。
本開示によれば、利便性の高い作業支援システム等を提供できる。
第１実施形態に係る作業支援システムの説明図である。 第１実施形態に係る作業支援システムが備える端末装置及び管理装置の説明図である。 第１実施形態に係る作業支援システムにおける作業対象物の一例である製造装置の説明図である。 第１実施形態に係る作業支援システムが備える端末装置の機能ブロック図である。 第１実施形態に係る作業支援システムが備える管理装置の本体部の機能ブロック図である。 第１実施形態に係る作業支援システムの複数の作業指示情報に関する説明図である。 第１実施形態に係る作業支援システムの作業指示情報群に関する説明図である。 第１実施形態に係る作業支援システムにおける、端末装置及び管理装置の処理を示すフローチャートである。 第１実施形態に係る作業支援システムにおける、端末装置及び管理装置の処理を示すフローチャートである。 第１実施形態に係る作業支援システムにおける確認指示情報の表示例である。 第２実施形態に係る作業支援システムが備える管理装置の本体部の機能ブロック図である。
≪第１実施形態≫
図１は、第１実施形態に係る作業支援システム１００の説明図である。
作業支援システム１００は、作業員による所定の作業を支援するためのシステムである。なお、作業現場となる設備は、製造プラントや化学プラントの他、発電設備や変電設備、配電設備、鉄道設備、通信設備、空調設備、医療設備、ガス設備、水道設備であってもよく、また、サーバ等のコンピュータ設備、オフィスの複合機等のＯＡ設備、食品加工設備、厨房設備、アミューズメント設備といった他の設備であってもよい。作業員による作業の種類は、所定の装置の運転の他、装置の点検やメンテナンスであってもよく、また、他の所定の作業であってもよい。
図１に示すように、作業支援システム１００は、作業現場の端末装置１０及び中継装置２１を含むとともに、管理室の中継装置２２及び管理装置３０を含んで構成されている。端末装置１０は、作業現場の作業員によって携帯される装置である。
中継装置２１は、端末装置１０とネットワークＮ１との間で通信の中継を行う装置であり、作業現場に設置されている。このような中継装置２１として、例えば、ルータが用いられる。図１に示すように、中継装置２１は、端末装置１０との間で有線又は無線で接続されている。なお、中継装置２１を介したデータ通信において、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＷｉ－Ｆｉ（登録商標）といった通信規格が適宜に用いられてもよい。図１に示すネットワークＮ１は、インターネット等の広域通信網である。
他方の中継装置２２は、管理装置３０とネットワークＮ１との間で通信の中継を行う装置であり、管理室に設置されている。図１に示すように、中継装置２２は、管理装置３０との間で有線又は無線で接続されている。
端末装置１０は、作業員が作業している様子を撮影し、撮影画像のデータを生成する機能を有している。端末装置１０で生成された撮影画像のデータは、中継装置２１、ネットワークＮ１、及び中継装置２２を順次に介して、管理装置３０に送信される。管理装置３０は、前記した撮影画像のデータに基づいて、所定の作業指示情報を生成する。管理装置３０で生成された作業指示情報は、中継装置２２、ネットワークＮ１、及び中継装置２１を順次に介して、端末装置１０に送信される。このようにして、端末装置１０及び管理装置３０の一方から他方にネットワークＮ１等を介して、所定のデータが送信されるようになっている。
図２は、作業支援システム１００が備える端末装置１０及び管理装置３０の説明図である。
図２に示すように、端末装置１０は、スマートグラス１１と、制御部１２と、を含んで構成されている。スマートグラス１１は、作業員に装着されるウェアラブルデバイスである。このようなウェアラブルデバイスを用いることで、作業員の両手が自由な状態で作業の様子を撮像したり、所定の作業指示情報を表示したりすることが可能になる。なお、ウェアラブルデバイスの種類はスマートグラス１１に限定されるものではなく、ヘッドセットやＶＲ（Virtual Reality）ゴーグルといったものであってもよい。図２に示すように、スマートグラス１１は、フレーム１１ａと、撮像部１１ｂと、第１表示部１１ｃと、音声出力部１１ｄと、を備えている。
フレーム１１ａは、眼鏡状のスマートグラス１１が作業員の両耳に掛けられるようにしたり、撮像部１１ｂや第１表示部１１ｃや音声出力部１１ｄを保持したりするための枠体である。撮像部１１ｂは、作業員の視野に入っている領域付近を撮影するための目線カメラである。図２の例では、フレーム１１ａの幅方向の中央付近（スマートグラス１１を装着した作業員の両眼の間付近）に撮像部１１ｂが設置されている。そして、作業員が見ている箇所の時々刻々の様子が撮像部１１ｂによって撮像され、その撮像結果である画像データが管理装置３０に送信されるようになっている。なお、作業員による作業中、撮像部１１ｂの撮像結果（動画データ）がネットワークＮ１等（図１参照）を介して、管理装置３０に送信する処理がリアルタイムで継続的に行われる。
第１表示部１１ｃは、管理装置３０からネットワークＮ１等（図１参照）を介して受信した作業指示情報等を表示させるためのディスプレイであり、フレーム１１ａに設置されている。第１表示部１１ｃは、スマートグラス１１（ウェアラブルデバイス）を装着した状態の作業員の視野（例えば、注視位置）に入るように所定の作業指示情報を表示させる。なお、第１表示部１１ｃは透明又は半透明であるため、第１表示部１１ｃに作業指示情報が表示された状態でも作業員は外部を視認することが可能である。
音声出力部１１ｄは、所定の音声を出力するスピーカである。すなわち、音声出力部１１ｄは、管理装置３０で生成された作業指示情報を音声として出力する。音声出力部１１ｄは、スマートグラス１１を装着した状態の作業員の耳の付近に設けられるように、フレーム１１ａに設置されている。
制御部１２は、中継装置２１（図１参照）とスマートグラス１１との間の通信の中継や、スマートグラス１１への電力供給を行うものであり、スマートグラス１１（ウェアラブルデバイス）に有線接続されている。なお、制御部１２の詳細については後記する。
管理装置３０は、本体部３１と、第２表示部３２と、を備えている。本体部３１は、ハードウェア構成として、図示はしないが、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、各種インタフェース等の電子回路を含んで構成されている。そして、ＲＯＭに記憶されたプログラムを読み出してＲＡＭに展開し、ＣＰＵが各種処理を実行するようになっている。
第２表示部３２は、スマートグラス１１の撮像部１１ｂの撮像結果を表示させるためのディスプレイである。なお、第２表示部３２の画像を熟練作業者が見て、作業現場の作業員に所定の指示を行うといったことが特にない場合には、第２表示部３２を省略してもよい。
図３は、作業対象物の一例である製造設備Ｍ１の説明図である。
なお、図３では、作業対象となる機械設備が、二次電池（図示せず）の製造設備Ｍ１である場合を示している。図３の例では、二次電池に所定の加工を施すための複数の加工用部材Ｐ１が所定間隔でベルトコンベアＢ１に設置され、このベルトコンベアＢ１と一体で移動するようになっている。複数の加工用部材Ｐ１には、それぞれ、製造途中の二次電池が嵌め込まれる嵌込部Ｐ１ａが設けられている。
作業員は、製造設備Ｍ１においてボルトの緩みや軸受の摩耗といった不具合が生じていないかを点検し、必要に応じて部品の交換を行う。なお、作業員が作業を行う際には、スマートグラス１１（図２参照）を装着している他、制御部１２（図２参照）をポケットに入れるなどして携帯しているものとする。
図４は、端末装置１０の機能ブロック図である。
図４に示すように、端末装置１０は、スマートグラス１１（図２も参照）と、制御部１２（図２も参照）と、を含んで構成されている。スマートグラス１１は、前記したように、撮像部１１ｂや第１表示部１１ｃや音声出力部１１ｄを備える他、通信部１１ｅや信号変換部１１ｆを備えている。通信部１１ｅは、制御部１２の通信部１２ａとの間で所定に通信を行う。また、通信部１１ｅは、撮像部１１ｂから出力される画像データを、自身を介して、制御部１２の通信部１２ａに送信する。
信号変換部１１ｆは、通信部１１ｅで受信された作業指示情報を所定の画像信号に変換し、この画像信号を第１表示部１１ｃに出力する他、作業指示情報を所定の音声信号に変換し、この音声信号を音声出力部１１ｄに出力する。
図４に示すように、制御部１２は、通信部１２ａと、信号変換部１２ｂと、記憶部１２ｃと、電力供給部１２ｄと、を備えている。通信部１２ａは、中継装置２１（図１参照）との間でデータの送受信を行うとともに、スマートグラス１１との間でデータの送受信を行う。なお、通信部１２ａは、通信の中継装置２１（図１参照）に無線接続するようになっている。信号変換部１２ｂは、通信部１２ａを介して受信されたデータを所定に変換し、変換後のデータを記憶部１２ｃに格納する。記憶部１２ｃには、撮像部１１ｂの撮像結果である画像情報が一時的に格納される他、管理装置３０（図１参照）から受信した作業指示情報が一時的に格納される。
電力供給部１２ｄは、バッテリ（図示せず）からスマートグラス１１（ウェアラブルデバイス）に電力を供給する。なお、スマートグラス１１と制御部１２とが電力線を介して接続されていない場合には、バッテリ（図示せず）から電力供給部１２ｄを介して、スマートグラス１１にワイヤレス給電が行われるものとする。
図５は、管理装置３０の本体部３１の機能ブロック図である。
図５に示すように、管理装置３０の本体部３１は、通信部３１１と、信号変換部３１２と、記憶部３１３と、処理部３１４と、を備えている。通信部３１１は、中継装置２２（図１参照）との間でデータの送受信を行う。信号変換部３１２は、通信部３１１を介して受信したデータを所定に変換した上で、処理部３１４に出力する。また、処理部３１４で生成されたデータが端末装置１０（図４参照）に送信される際には、信号変換部３１２でデータが所定に変換され、変換後のデータが通信部３１１を介して送信される。
記憶部３１３には、所定のプログラムが予め格納されている他、機器情報データベース３１３ａと、作業指示情報データベース３１３ｂと、作業仕様データベース３１３ｃと、が予め格納されている。機器情報データベース３１３ａは、機器情報が格納されたデータベースであり、作業員の作業対象を特定する際に用いられる。例えば、作業対象が制御盤等の装置である場合には、製造番号等に基づいて装置が特定される。また、作業対象が部品である場合には、その部品の型式やデバイス識別情報に基づいて部品が特定される。
なお、作業対象を特定する方法は、これに限定されるものではない。例えば、作業員が３次元計測センサ（図示せず）を使って、作業対象物の形状を３次元的に計測するようにしてもよい。３次元計測センサで生成された３次元計測データ（例えば、点群データ）は、ネットワークＮ１等（図１参照）を介して、管理装置３０に送信される。管理装置３０は、３次元計測データと、プラントの設計データと、を比較することで作業対象物を特定する。この場合において、機器情報データベース３３ａにプラントの設計データが格納されているものとする。このような３次元計測も作業対象物の「撮像」に含まれる。
図５に示す作業指示情報データベース３１３ｂは、所定の作業指示情報の生成に用いられるデータベースである。なお、作業指示情報とは、所定の作業の遂行を作業員に指示するための情報である。
図６は、複数の作業指示情報に関する説明図である。
図６の紙面左端に上下方向で並べて示した機器情報α，β，γ，δ，ε，ηは、それぞれ、作業対象物である装置（又は装置の部品）の識別情報である。図６に示す第１の作業指示情報、第２の作業指示情報、・・・、第ｎの作業指示情報は、所定の作業対象物に対して作業員が行うべき作業の内容を示す情報であり、作業順に配列されている。すなわち、第１の作業指示情報は、作業員が最初に行うべき作業の内容を示している。第２の作業指示情報は、作業員が２番目に行うべき作業の内容を示している。また、第ｎの作業指示情報は、作業員が最後に行うべき作業の内容を示している。
このように、所定の作業対象物に関して作業員が行うべき一連の作業がｎ個に分割され、さらに、これらｎ個の作業に対応する第１～第ｎの作業指示情報が作業順に配列されている。なお、図６の例では、機器情報α，β，γ，δ，ε，ηのそれぞれにｎ個の作業指示情報が対応付けられる場合を示しているが、作業対象物ごとに（つまり、機器情報ごとに）作業指示情報の数が異なっていてもよい。
それぞれの作業指示情報には、作業内容を示す文字情報である作業項目と、当該作業項目に対応する作業項目動画と、が含まれている。例えば、機器情報αに対応する第１の作業指示情報は、作業項目α１ａと、作業項目動画α１ｂと、を含んでいる。作業項目α１ａは、作業内容を示す所定の文字情報である。例えば、「制御盤の番号ＸＸＸ１のスイッチをＯＮにしてください」といった文章をスマートグラス１１（図２参照）の第１表示部１１ｃ（図２参照）に表示させる際、作業項目α１ａのテキストデータが用いられる。
作業項目動画α１ｂは、作業員に正しい作業の仕方を動画で示す際に用いられるデータであり、作業項目α１ａに対応付けられている。例えば、過去に熟練作業員が作業項目α１ａの作業を行ったときの様子を録画したデータが、作業項目動画α１ｂとして用いられてもよい。また、作業の正しい仕方を示す所定のアニメーションが、作業項目動画α１ｂとして用いられてもよい。このような作業項目動画α１ｂは、機器情報αで特定される作業対象物に対して作業員が所定の作業を行う際、スマートグラス１１（図２参照）の第１表示部１１ｃ（図２参照）に作業項目動画α１ｂの文字情報と併せて、動画として表示される。なお、残りの第２～第ｎの作業指示情報についても同様である。
そして、作業員が所定の作業指示情報に基づく作業を終わらせるたびに、管理装置３０（図２参照）が、次の作業指示情報を端末装置１０（図２参照）に送信するようになっている。
図５に示す作業仕様データベース３１３ｃは、所定の作業対象物に対して作業が適切に行われているか否かの判定に用いられる。例えば、作業対象物の本来の作業箇所を示す情報の他、作業対象物の有無や位置（例えば、４本のねじ止めされた板材の交換作業をするときに、板材交換後に４本のネジによりねじ止めされているか）、作業員の手の正しい位置、手の正しい加速度（手が動かされる向きを含む）、作業員が持っている工具の正しい動かし方といった、作業員が実施する作業内容を特徴づける情報（作業行為データという。）の組合せが、ひとつひとつの作業項目に対応付けて、作業仕様情報として予め設定されている。
図５に示すように、処理部３１４は、機器情報照合部３１４ａと、指示情報生成部３１４ｂと、作業内容照合部３１４ｃと、を備えている。機器情報照合部３１４ａは、端末装置１０の撮像結果に基づいて、作業対象物の機器情報を抽出する。そして、機器情報照合部３１４ａは、抽出した機器情報と、機器情報データベース３１３ａに含まれている複数の機器情報と、の間で照合を行う。作業対象物の機器情報が機器情報データベース３１３ａに含まれている場合、この機器情報は、指示情報生成部３１４ｂの処理に用いられる。また、作業対象物の機器情報が機器情報データベース３１３ａに含まれていない場合には、端末装置１０（図２参照）に所定のエラー信号が送信される。この場合には、端末装置１０において機器情報の撮像が再び行われる。
図５に示す指示情報生成部３１４ｂは、機器情報照合部３１４ａの照合結果に基づいて、所定の作業指示情報群を生成する。
図７は、作業指示情報群に関する説明図である。
なお、図７に示す作業指示情報群は、図６の機器情報αの複数の作業指示情報に対応している。図７の例では、第１～第４の作業指示情報によって、作業指示情報群が構成されている。第１の作業指示情報には、作業内容を示す文字情報である作業項目α１ａと、作業の正しい仕方を動画で表示させるための作業項目動画α１ｂと、が含まれている。なお、第２～第４の作業指示情報についても同様である。そして、第１～第４の作業指示情報が作業順に配列されることで、作業指示情報群が構成されている。
図５に示す作業内容照合部３１４ｃは、作業現場で作業員が実際に行っている作業が適切であるか否かを、作業仕様データベース３１３ｃの情報に基づいて、作業項目ごとに判定する。なお、作業員によって作業が適切に行われているか否かの判定にＡＩ（Artificial Intelligence）が適宜に用いられてもよい。
図８Ａ、図８Ｂは、端末装置及び管理装置の処理を示すフローチャートである（適宜、図４、図５も参照）。
ステップＳ１０１において端末装置１０は、撮像部１１ｂによって、機器情報を撮像する。前記したように、機器情報は、作業対象物を特定するための識別情報である。例えば、作業対象物の所定位置に機器情報が記載されており、スマートグラス１１を付けている作業員が作業対象物の機器情報を見た上で、この機器情報を管理装置３０に送信する際のトリガとなる所定の操作（所定のボタンの押下等）を行うようにしてもよい。
ステップＳ１０２において端末装置１０は、機器情報を含む画像情報を管理装置３０に送信する。すなわち、端末装置１０は、作業員の作業対象物の機器情報を撮像し、当該機器情報を管理装置３０に送信する（機器情報送信ステップ）。
ステップＳ１０３において管理装置３０は、端末装置１０から機器情報を受信する。そして、管理装置３０は、パターンマッチング等を行うことで画像情報から機器情報を抽出する。
ステップＳ１０４において管理装置３０は、指示情報生成部３１４ｂによって、作業指示情報群を生成する。より詳しく説明すると、まず、管理装置３０は、端末装置１０から受信した機器情報の画像データに基づいて、作業対象物を特定する。そして、管理装置３０は、複数の作業指示情報を作業指示情報データベース３１３ｂから抽出することで、作業指示情報群を生成する。前記したように、作業指示情報群とは、機器情報に対応する複数の作業指示情報が、第１の作業指示情報から第ｎの作業指示情報まで作業順に配列されたデータである。
次に、ステップＳ１０５において管理装置３０は、第１の作業指示情報を端末装置１０に送信する。このように、管理装置３０は、撮像部１１ｂで撮像された作業対象物の機器情報を端末装置１０から受信し（Ｓ１０３）、当該機器情報に対応する作業指示情報を端末装置１０に送信する（Ｓ１０５：作業指示情報送信ステップ）。
ステップＳ１０６において端末装置１０は、第１の作業指示情報を管理装置３０から受信する。
ステップＳ１０７において端末装置１０は、作業項目及び作業項目動画を含む所定の作業指示情報を第１表示部１１ｃに表示させる（作業指示情報表示ステップ）。例えば、図６に示す機器情報αに対応する第１の作業指示情報を管理装置３０から受信した場合、端末装置１０は、文字情報である作業項目α１ａを第１表示部１１ｃに表示させるとともに、正しい作業の仕方を示す作業項目動画α１ｂも併せて第１表示部１１ｃに表示させる。これによって、作業員は、どのように作業を進めればよいかを一目で把握できる。
なお、第１表示部１１ｃにおいて、作業項目α１ａ及び作業項目動画α１ｂが作業者の注視位置に表示されるようにするとよい。これによって、作業者が作業項目α１ａ及び作業項目動画α１ｂを視認しやすくなる。なお、作業者の目の瞳孔の動きをスマートグラス１１で特定し、この瞳孔の動きに応じて、スマートグラス１１における作業指示情報の表示位置を調整するようにしてもよい。
次に、ステップＳ１０８において端末装置１０は、撮像部１１ｂによって、作業者の作業を撮像する。なお、作業者の手の動きが分かるように、作業の様子が動画として撮像されるようにするとよい。
ステップＳ１０９において端末装置１０は、作業の撮像結果を管理装置３０に送信する。ステップＳ１１０において管理装置３０は、作業の撮像結果を端末装置１０から受信する。
次に、図８ＢのステップＳ１１１において管理装置３０は、作業内容照合部３１４ｃによって、作業者の作業に誤りがないか否かを判定する。すなわち、管理装置３０は、撮像部１１ｂの撮像結果に基づいて、作業員が実施した作業内容を特徴づける作業行為データを生成する。そして、管理装置３０は、それぞれの作業行為データが所定の許容範囲内であるか否かを判定する。例えば、それぞれの作業行為データが許容範囲内である場合、管理装置３０は、作業者の作業に誤りがないと判定する。また、作業行為データの中に許容範囲外であるものが存在する場合、管理装置３０は、作業者の作業に誤りがあると判定する。
なお、作業者による作業のし忘れも、作業の誤りに含まれるものとする。ステップＳ１１１において作業に誤りがある場合（Ｓ１１１：Ｎｏ）、管理装置３０の処理はステップＳ１１２に進む。
ステップＳ１１２において管理装置３０は、作業の誤りを指摘するための確認指示情報を端末装置１０に送信する。確認指示情報は、作業の誤りを指摘するための文字情報及び音声情報を含み、誤りの内容に対応付けて、記憶部３１３に予め記憶されている。その他、正しい作業内容を示す作業項目動画が確認指示情報に含まれていてもよい。この作業項目動画については、ステップＳ１０５（図８Ａ参照）で送信された第１の作業指示情報に含まれる作業項目動画と同一のものであってもよく、また、作業の誤りを正すために所定箇所が強調表示されたものであってもよい。
このように、管理装置３０は、撮像部１１ｂの撮像結果に基づいて、本来の作業内容に対して作業員の作業に誤りがあると判定した場合（Ｓ１１１：Ｎｏ）、この誤りを指摘する確認指示情報を端末装置１０に送信する（Ｓ１１２）。ステップＳ１１２の処理を行った後、管理装置３０は、作業員の作業の撮像結果を端末装置１０から再び受信し（図８ＡのＳ１１０）、その作業に誤りがないか否かを再び判定する（図８ＢのＳ１１１）。
図８ＢのステップＳ１１３において端末装置１０は、作業の誤りを指摘するための確認指示情報を管理装置３０から受信する。
次に、ステップＳ１１４において端末装置１０は、確認指示情報の表示等を行う。すなわち、端末装置１０は、確認指示情報を受信した場合、当該確認指示情報に含まれる画像を第１表示部１１ｃに表示させる。例えば、端末装置１０は、作業の誤りを指摘するための文字情報や動画を第１表示部１１ｃに表示させる。また、端末装置１０が確認指示情報を受信した場合、当該確認指示情報に含まれる音声を音声出力部１１ｄから出力するようにしてもよい。これによって、作業員が作業の誤りに気付くことができる他、本来の正しい作業内容を把握しやすくなる。
図９は、確認指示情報の表示例である。
なお、図９に示す確認指示情報の画像は、スマートグラス１１（図２参照）の第１表示部１１ｃ（図２参照）に表示されるものとする。作業員の作業が誤っている場合、この誤りを正すように、例えば、図９に示す確認指示情報が第１表示部１１ｃに表示される。図９の例では、「作業内容が誤っています。作業項目動画に従って作業を行ってください。」というメッセージが表示されている他、熟練作業者がトルクレンチＴ１を使ってナットＵ１を締め込む様子（録画した画像）の作業項目動画が表示されている。このような確認指示情報を表示させることで、直前の作業が誤っていたことを作業員が把握し、作業をやり直すことができる。
また、図８ＢのステップＳ１１１において作業に誤りがない場合（Ｓ１１１：Ｙｅｓ）、管理装置３０の処理はステップＳ１１５に進む。すなわち、前記した作業行為データが許容範囲内である場合、管理装置３０の処理はステップＳ１１５に進む。
ステップＳ１１５において管理装置３０は、第１～第ｎの作業指示情報の全てを作業指示情報群（図７参照）から消去済みであるか否かを判定する。ステップＳ１１５において、作業指示情報群の中に作業指示情報が残っている場合（Ｓ１１５：Ｎｏ）、管理装置３０の処理はステップＳ１１６に進む。
ステップＳ１１６において管理装置３０は、作業指示情報群から第１の作業指示情報を消去して、順番を繰り上げる。具体的に説明すると、管理装置３０は、当初の第２の作業指示情報の順番を繰り上げて第１の作業指示情報とし、また、当初の第ｎの作業指示情報の順番を繰り上げて第（ｎ－１）の作業指示情報とするといったように、１つずつ順番を繰り上げる。このように、管理装置３０は、今回の一連の作業で使用済みとなった作業指示情報を消去して、作業指示情報の順番をひとつずつ繰り上げる。これによって、作業指示情報が誤った順序で送信されるといったことを防止できる他、管理装置３０の記憶容量に余裕を持たせることができる。
ステップＳ１１６の処理を行った後、管理装置３０の処理はステップＳ１０５（図８Ａ参照）に戻る。そして、ステップＳ１０５において管理装置３０は、新たな第１の作業指示情報を端末装置１０に送信する。すなわち、作業員の実施した作業内容を特徴づける作業行為データが許容範囲内である場合、管理装置３０は、次の作業指示情報を端末装置１０に送信する。例えば、図６の機器情報αに対応する作業指示情報群では、作業項目α２ａ及び作業項目動画α２ｂを含む新たな第１の作業指示情報が、管理装置３０から端末装置１０に送信される。
このように、管理装置３０は、複数の作業指示情報が作業順に配列されてなる作業指示情報群を生成し、作業指示情報群の中の最初の作業指示情報を端末装置１０に送信し、端末装置１０から送信される撮像部１１ｂの撮像結果に基づいて、作業員が作業指示情報に基づいて所定の作業を終わらせるたびに、次の作業指示情報を端末装置１０に送信する処理を繰り返す。具体的には、管理装置３０は、第１の作業指示情報の作業項目に対応する作業が作業員によって正しく行われた場合、作業指示情報群から第１の作業指示情報を消去し、作業指示情報に対応付けられる作業順の番号を繰り上げて、新たな第１の作業指示情報を端末装置１０に送信する処理を繰り返す。
また、ステップＳ１１５において、作業指示情報群に含まれる全ての作業指示情報が消去済みである場合（Ｓ１１５：Ｙｅｓ）、管理装置３０の処理はステップＳ１１７に進む。ステップＳ１１７において管理装置３０は、作業終了信号を端末装置１０に送信し、一連の処理を終了する（ＥＮＤ）。なお、作業終了信号とは、作業対象物に関する一連の作業が終了したことを示す信号である。このように、管理装置３０は、作業指示情報群に含まれる作業指示情報を全て消去した場合（Ｓ１１５：Ｙｅｓ）、作業終了信号を端末装置１０に送信する（Ｓ１１７）。
一方、端末装置１０は、ステップＳ１１８において管理装置３０から作業終了信号を受信したか否かを判定する。管理装置３０から作業終了信号を受信していない場合（Ｓ１１８：Ｎｏ）、端末装置１０の処理はステップＳ１０６（図８Ａ参照）に戻る。そして、ステップＳ１０６において端末装置１０は、順番が繰り上げられた後の新たな第１の作業指示情報を管理装置３０から受信する。
また、ステップＳ１１８において管理装置３０から作業終了信号を受信した場合（Ｓ１１８：Ｙｅｓ）、ステップＳ１１９において端末装置１０は、作業終了メッセージを第１表示部１１ｃに表示させる。例えば、端末装置１０は、「制御盤の運転操作の作業が終了しました」といったメッセージを第１表示部１１ｃに表示させる。これによって、作業対象物に関する一連の作業が終了したことを作業員が確認できる。ステップＳ１１９の処理を行った後、端末装置１０は、一連の処理を終了する（ＥＮＤ）。
＜効果＞
第１実施形態によれば、作業員が所定の作業指示情報に基づく作業を終えるたびに、次の作業指示情報が第１表示部１１ｃに表示される。これによって、作業員が作業内容をひとつひとつ確認しながら作業を進めることができるため、作業を行う際の利便性や信頼性が高められる。また、作業員の作業に誤りがあった場合には、この誤りを指摘するための確認指示情報が第１表示部１１ｃに表示される。これによって、作業者が初心者である場合でも、作業に誤りが生じることを防止できる。また、作業者のそばに別の熟練作業者がついてアドバイスをする必要が特にないため、作業に要する手間やコストを削減できる。
≪第２実施形態≫
第２実施形態は、管理装置３０Ａ（図１０参照）が作業仕様データベース３１３ｃ（図５参照）や作業内容照合部３１４ｃ（図５参照）を特に備えていない点が、第１実施形態とは異なっている。また、第２実施形態は、管理室にいる熟練作業員（アドバイザ）が、作業員の作業の様子を見て、作業に誤りがある場合には作業員に音声等で指摘する点が、第１実施形態とは異なっている。なお、その他については第１実施形態と同様である。したがって、第１実施形態とは異なる部分について説明し、重複する部分については説明を省略する。
図１０は、第２実施形態に係る作業支援システムが備える管理装置３０Ａの本体部３１Ａの機能ブロック図である。
図１０に示すように、管理装置３０Ａは、通信部３１１と、信号変換部３１２と、記憶部３１３Ａと、処理部３１４Ａと、を備えている。また、記憶部３１３Ａには、機器情報データベース３１３ａと、作業指示情報データベース３１３ｂと、が予め格納されている。これらの機器情報データベース３１３ａや作業指示情報データベース３１３ｂについては、第１実施形態（図５参照）と同様であるから、説明を省略する。なお、第１実施形態で説明した作業仕様データベース３１３ｃ（図５参照）については、記憶部３１３Ａには特に格納されていない。
また、処理部３１４Ａは、機器情報照合部３１４ａと、指示情報生成部３１４ｂと、を備えている。これらの機器情報照合部３１４ａや指示情報生成部３１４ｂについては、第１実施形態（図５参照）と同様であるから、説明を省略する。なお、第１実施形態で説明した作業内容照合部３１４ｃ（図５参照）については、処理部３１４Ａは特に備えていない。
管理室では、スマートグラス１１（図２参照）の撮像部１１ｂ（図２参照）の撮像結果が、管理装置３０Ａの第２表示部３２（図２参照）に動画としてリアルタイムで表示されるようになっている。そして、熟練作業員が第２表示部３２を見ることで作業員の作業内容をひとつひとつ確認し、作業内容が誤っている場合には、誤りを指摘して正しい作業内容を教えるようにしている。
なお、端末装置１０が行う処理については、第１実施形態で説明したもの（図８Ａ、図８Ｂ参照）と同様であるから、説明を省略する。また、管理装置３０Ａが行う処理については、第１実施形態とはステップＳ１１１，Ｓ１１２（図８Ｂ参照）の処理が異なっている。すなわち、第２実施形態では、作業員の作業に誤りがないか否かについては、管理装置３０Ａに代わって、熟練作業員が判断するようにしている。
また、作業員の作業に誤りがある場合には、熟練作業員が誤りを正すようにしている。例えば、スマートグラス１１（図２参照）の音声出力部１１ｄから熟練作業員による所定のアドバイスが音声で出力されるようにしてもよい。すなわち、第２表示部３２（図２参照）に表示される作業員の作業を見て、当該作業に誤りがあると確認した熟練作業員（アドバイザ）の音声信号が、管理装置３０から端末装置１０に送信された場合、この音声信号が所定の音声として音声出力部１１ｄから出力されるようにしてもよい。
また、管理室にいる熟練作業員と、作業現場にいる作業員と、の間で情報共有が行われる際、Ｔｅａｍｓ（登録商標）やＺｏｏｍ（登録商標）といったコミュニケーションツールが適宜に用いられてもよい。この場合において、作業員に正しい作業内容を伝えるために、所定の画像情報がＴｅａｍｓ（登録商標）やＺｏｏｍ（登録商標）で共有され、この画像情報がスマートグラス１１の第１表示部１１ｃに表示されるようにしてもよい。これによって、作業現場の作業員がアドバイスを受ける際の利便性を高めることができる。
＜効果＞
第２実施形態によれば、作業員の作業内容を熟練作業者が管理室で確認して、作業内容に誤りがある場合には音声等で指摘するようにしている。これによって、作業員が熟練作業者のアドバイスを受けたり、必要に応じて、所定の画像情報を共有したりすることができる。
≪変形例≫
以上、本開示に係る作業支援システム１００や作業支援方法について各実施形態で説明したが、本開示はこれらの記載に限定されるものではなく、種々の変更を行うことができる。例えば、各実施形態では、端末装置１０（図２参照）として、スマートグラス１１（図２参照）等のウェアラブル型のデバイスが用いられる場合について説明したが、これに限らない。すなわち、端末装置１０として、スマートフォンやタブレットが用いられてもよい。
また、各実施形態では、作業員の視野に入っている領域付近を撮影する撮像部１１ｂ（図２参照）として目線カメラが用いられる場合について説明したが、これに限らない。例えば、作業員の視野に入っている領域付近を撮影するカメラ（撮像部）を、作業員の頭部（ヘルメット等）に装着したり、作業員の身体の所定部位に装着したりしてもよい。
また、各実施形態では、スマートグラス１１（図２参照）の音声出力部１１ｄ（図２参照）から音声が出力される場合について説明したが、これに限らない。例えば、作業員がイヤホン（図示せず）を装着し、このイヤホンから所定の音声が出力されるようにしてもよい。
また、作業員がマイク（図示せず）を装着するようにしてもよい。そして、作業員が作業を行う際に不明点がある場合、その旨を作業員がマイクに向けて発話するようにしてもよい。この場合に、管理装置３０が発明者からの質問に回答するようにしてもよく、また、熟練作業員が音声で回答するようにしてもよい。なお、管理装置３０が回答する場合において、ＡＩ（Artificial Intelligence）が適宜に用いられてもよい。
また、センサプローブ（図示せず）等の点検装置が端末装置１０に含まれ、この点検装置の時々刻々の検出値がネットワークＮ１等（図１参照）を介して、管理装置３０に送信されるようにしてもよい。この場合において管理装置３０は、作業員の作業内容の他、点検装置の検出値に基づいて、作業内容の適否を判定する。また、作業員がモーションセンサ（図示せず）を装着し、撮影画像の他にモーションセンサの時々刻々の検出値も作業内容の適否の判定に用いられるようにしてもよい。
また、第２実施形態では、管理装置３０Ａ（図１０参照）の処理部３１４Ａが機器情報照合部３１４ａを備える構成について説明したが、機器情報照合部３１４ａを省略することも可能である。この場合において、管理室にいる熟練作業員（アドバイザ）は、第２表示部３２（図２参照）に表示される機器情報の撮像結果を目視で確認して、この機器情報を入力するものとする。
また、各実施形態では、管理装置３０（図２参照）において本体部３１と第２表示部３２とが別々である場合について説明したが、これに限らない。例えば、スマートフォンやタブレットのように、本体部３１と第２表示部３２とが一体の構成にしてもよい。
また、各実施形態では、作業指示情報の画像が第１表示部１１ｃにおける作業者の注視位置に表示される場合について説明したが、これに限らない。例えば、第１表示部１１ｃにおいて作業者の注視位置から外れた位置に作業指示情報の画像が表示されるようにしてもよい。
また、各実施形態では、第１の作業指示情報の作業が終わった場合、管理装置３０が作業指示情報群から第１の作業指示情報を消去して、作業指示情報の順番を１つずつ繰り上げる場合について説明したが、次の処理を行うようにしてもよい。すなわち、所定の作業項目の作業が完了するたびに、第１の作業指示情報、第２の作業指示情報、・・・、第ｎの作業指示情報を管理装置３０が順次に読み出して、読み出した作業指示情報を端末装置１０に送信するようにしてもよい。この場合において、作業指示情報の消去や順番の繰り上げを行う必要は特にない。
また、第１実施形態と第２実施形態とを組み合わせることも可能である。すなわち、作業員の作業内容に誤りがないか否かを管理装置３０が判定するとともに、熟練作業員も第２表示部３２（図２参照）を見ながら作業内容を確認し、必要に応じて作業員にアドバイスするようにしてもよい。
また、本開示は、各実施形態に限定されるものではなく、様々な変形例が含まれる。例えば、各実施形態は、本開示を分かりやすく説明するために詳細に説明したものであり、必ずしも説明したすべての構成を備えるものに限定されるものではない。また、ある実施形態の構成の一部を他の実施形態の構成に置き換えることが可能であり、また、ある実施形態の構成に他の実施例の構成を加えることも可能である。また、各実施形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
また、前記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、前記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Solid State Drive）等の記録装置、又は、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に格納することができる。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には、ほとんどすべての構成が相互に接続されていると考えてもよい。
１０ 端末装置
１１ スマートグラス（ウェアラブルデバイス）
１１ａ フレーム
１１ｂ 撮像部
１１ｃ 第１表示部
１１ｄ 音声出力部
１２ 制御部
１２ａ 通信部
１２ｂ 信号変換部
１２ｃ 記憶部
１２ｄ 電力供給部
２１，２２ 中継装置
３０，３０Ａ 管理装置
３１，３１Ａ 本体部
３２ 第２表示部
１００ 作業支援システム
３１３，３１３Ａ 記憶部
３１３ａ 機器情報データベース
３１３ｂ 作業指示情報データベース
３１３ｃ 作業仕様データベース
３１４，３１４Ａ 処理部
３１４ａ 機器情報照合部
３１４ｂ 指示情報生成部
３１４ｃ 作業内容照合部
Ｍ１ 製造設備（作業対象物）
Ｎ１ ネットワーク
Ｓ１０２ ステップ（機器情報送信ステップ）
Ｓ１０５ ステップ（作業指示情報送信ステップ）
Ｓ１０７ ステップ（作業指示情報表示ステップ）

Claims (8)

  1. 作業員の視野に入っている領域付近を撮像する撮像部と、所定の作業指示情報を表示させる第１表示部と、を有する端末装置と、
    前記撮像部で撮像された作業対象物の機器情報を前記端末装置から受信し、前記機器情報を格納した機器情報データベースに当該機器情報が含まれない場合に、所定のエラー信号を前記端末装置に送信し、前記作業対象物の前記機器情報を前記端末装置から再び受信し、当該機器情報が前記機器情報データベースに含まれる場合に、当該機器情報に対応する前記作業指示情報を前記端末装置に送信する管理装置と、を備え、
    前記作業指示情報には、作業内容を示す文字情報である作業項目と、当該作業項目に対応する作業項目動画と、が含まれ、
    前記管理装置は、複数の前記作業指示情報が作業順に配列されてなる作業指示情報群を生成し、当該作業指示情報群の中の最初の作業指示情報を前記端末装置に送信し、前記端末装置から送信される前記撮像部の撮像結果に基づいて、前記作業員が前記作業指示情報に基づく所定の作業を終わらせるたびに、次の前記作業指示情報を前記端末装置に送信する処理を繰り返す、作業支援システム。
  2. 前記端末装置は、所定の音声を出力する音声出力部を備え、
    前記管理装置は、前記撮像部の撮像結果に基づいて、本来の作業内容に対して前記作業員の作業に誤りがあると判定した場合、当該誤りを指摘する確認指示情報を前記端末装置に送信し、
    前記端末装置は、前記確認指示情報を受信した場合、当該確認指示情報に含まれる音声を前記音声出力部から出力すること
    を特徴とする請求項１に記載の作業支援システム。
  3. 前記管理装置は、前記撮像部の撮像結果に基づいて、本来の作業内容に対して前記作業員の作業に誤りがあると判定した場合、当該誤りを指摘する確認指示情報を前記端末装置に送信し、
    前記端末装置は、前記確認指示情報を受信した場合、当該確認指示情報に含まれる画像を前記第１表示部に表示させること
    を特徴とする請求項１に記載の作業支援システム。
  4. 前記端末装置は、所定の音声を出力する音声出力部を備え、
    前記管理装置は、前記撮像部の撮像結果が表示される第２表示部を備え、
    前記第２表示部に表示される前記作業員の作業を見て、当該作業に誤りがあると確認したアドバイザの音声信号が、前記管理装置から前記端末装置に送信された場合、当該音声信号が所定の音声として前記音声出力部から出力されること
    を特徴とする請求項１に記載の作業支援システム。
  5. 前記管理装置は、
    前記機器情報に対応する複数の前記作業指示情報として、第１の作業指示情報から第ｎの作業指示情報まで作業順に配列された前記作業指示情報群を生成し、
    前記第１の作業指示情報の前記作業項目に対応する作業が前記作業員によって正しく行われた場合、前記作業指示情報群から前記第１の作業指示情報を消去し、新たな第１の作業指示情報を前記端末装置に送信する処理を繰り返し、
    前記作業指示情報群に含まれる前記作業指示情報を全て消去した場合、作業終了信号を前記端末装置に送信すること
    を特徴とする請求項１に記載の作業支援システム。
  6. 前記端末装置は、前記作業員に装着されるウェアラブルデバイスと、前記ウェアラブルデバイスに有線接続される制御部と、を備え、
    前記ウェアラブルデバイスは、当該ウェアラブルデバイスを装着した状態の前記作業員の視野に入るように前記作業指示情報を表示させる前記第１表示部と、前記作業員の耳の付近に設けられる音声出力部と、前記撮像部と、を有し、
    前記制御部は、前記ウェアラブルデバイスに電力を供給する電力供給部と、通信の中継装置に無線接続する通信部と、を有すること
    を特徴とする請求項１に記載の作業支援システム。
  7. 前記管理装置は、前記撮像結果に基づいて、前記作業員が実施する作業内容を特徴づける作業行為データを生成し、当該作業行為データが許容範囲内である場合、次の前記作業指示情報を前記端末装置に送信すること
    を特徴とする請求項１に記載の作業支援システム。
  8. 端末装置が、作業員の作業対象物の機器情報を撮像部で撮像し、当該機器情報を管理装置に送信する機器情報送信ステップと、
    前記管理装置が、前記機器情報を前記端末装置から受信し、前記機器情報を格納した機器情報データベースに当該機器情報が含まれない場合に、所定のエラー信号を前記端末装置に送信し、前記作業対象物の前記機器情報を前記端末装置から再び受信し、当該機器情報が前記機器情報データベースに含まれる場合に、当該機器情報に対応する作業指示情報を前記端末装置に送信する作業指示情報送信ステップと、
    前記端末装置が、前記作業指示情報を第１表示部に表示させる作業指示情報表示ステップと、を含み、
    前記作業指示情報には、作業内容を示す文字情報である作業項目と、当該作業項目に対応する作業項目動画と、が含まれ、
    前記作業指示情報送信ステップでは、複数の前記作業指示情報が作業順に配列されてなる作業指示情報群を生成し、当該作業指示情報群の中の最初の作業指示情報を前記端末装置に送信し、前記端末装置から送信される前記撮像部の撮像結果に基づいて、前記作業員が前記作業指示情報に基づく所定の作業を終わらせるたびに、次の前記作業指示情報を前記端末装置に送信する処理が繰り返される、作業支援方法。
JP2023151528A 2023-09-19 2023-09-19 作業支援システム及び作業支援方法 Active JP7406038B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023151528A JP7406038B1 (ja) 2023-09-19 2023-09-19 作業支援システム及び作業支援方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2023151528A JP7406038B1 (ja) 2023-09-19 2023-09-19 作業支援システム及び作業支援方法

Publications (1)

Publication Number Publication Date
JP7406038B1 true JP7406038B1 (ja) 2023-12-26

Family

ID=89307877

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023151528A Active JP7406038B1 (ja) 2023-09-19 2023-09-19 作業支援システム及び作業支援方法

Country Status (1)

Country Link
JP (1) JP7406038B1 (ja)

Citations (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003044612A (ja) * 2001-07-31 2003-02-14 Ishikawajima Harima Heavy Ind Co Ltd 遠隔作業支援装置
JP2004102727A (ja) * 2002-09-10 2004-04-02 Mitsubishi Heavy Ind Ltd 作業支援システム
JP2007149070A (ja) * 2005-10-28 2007-06-14 Fujitsu Ltd 設備点検支援システム、設備点検支援方法およびそのプログラム
JP2011253422A (ja) * 2010-06-03 2011-12-15 Honda Motor Co Ltd 作業手順表示方法及び作業手順表示システム
JP2014211763A (ja) * 2013-04-18 2014-11-13 オムロン株式会社 作業管理システムおよび作業管理方法
JP2015181024A (ja) * 2015-05-14 2015-10-15 オムロン株式会社 作業管理システムおよび作業管理方法
JP2016181751A (ja) * 2015-03-23 2016-10-13 株式会社日立ソリューションズ 遠隔作業支援システム
JP2017162102A (ja) * 2016-03-08 2017-09-14 株式会社東芝 保守支援方法、保守支援システム、及び保守支援プログラム
JP2017162103A (ja) * 2016-03-08 2017-09-14 株式会社東芝 点検作業支援システム、点検作業支援方法、点検作業支援プログラム
JP2018008774A (ja) * 2016-07-12 2018-01-18 株式会社日立ビルシステム エレベーターの点検作業支援装置と点検作業支援システム
JP2018165854A (ja) * 2017-03-28 2018-10-25 日本電気株式会社 故障部品交換支援方法
WO2019087870A1 (ja) * 2017-10-30 2019-05-09 Ｎｅｃフィールディング株式会社 作業支援装置、作業支援方法及びプログラム
WO2019119022A1 (en) * 2017-12-21 2019-06-27 Ehatsystems Pty Ltd Augmented visual assistance system for assisting a person working at a remote workplace, method and headwear for use therewith
JP2020004218A (ja) * 2018-06-29 2020-01-09 株式会社日立システムズ コンテンツ提示システム
JP2020013592A (ja) * 2016-04-08 2020-01-23 株式会社東芝 プログラム、点検支援端末及び点検支援方法
JP2020135098A (ja) * 2019-02-14 2020-08-31 三機工業株式会社 施工管理システムおよび施工管理方法
JP2020137000A (ja) * 2019-02-22 2020-08-31 株式会社日立製作所 映像記録装置およびヘッドマウントディスプレイ
JP2021125793A (ja) * 2020-02-05 2021-08-30 株式会社大林組 監視システム及び現場監視装置
JP2021124355A (ja) * 2020-02-04 2021-08-30 東京瓦斯株式会社 ガスメータの交換作業支援装置、ガスメータの交換作業支援方法及びプログラム
JP7023427B1 (ja) * 2021-05-20 2022-02-21 三菱電機株式会社 動画マニュアル作成装置、動画マニュアル作成方法、及び動画マニュアル作成プログラム
JP2022042303A (ja) * 2020-09-02 2022-03-14 ＸＲ Ｊａｐａｎ株式会社 遠隔支援システム
JP2022103336A (ja) * 2019-05-20 2022-07-07 株式会社日立システムズ 作業支援システムおよび作業支援方法
JP2022111778A (ja) * 2021-01-20 2022-08-01 東京瓦斯株式会社 作業支援システム、作業支援制御装置、作業支援制御プログラム
JP2022114111A (ja) * 2021-01-26 2022-08-05 東京瓦斯株式会社 作業支援システム、作業支援制御装置、及び作業支援制御プログラム
JP2023048730A (ja) * 2021-09-28 2023-04-07 富士フイルムビジネスイノベーション株式会社 情報処理装置およびプログラム
JP2023082923A (ja) * 2021-12-03 2023-06-15 株式会社日立製作所 作業支援システム、作業対象特定装置および方法

Patent Citations (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003044612A (ja) * 2001-07-31 2003-02-14 Ishikawajima Harima Heavy Ind Co Ltd 遠隔作業支援装置
JP2004102727A (ja) * 2002-09-10 2004-04-02 Mitsubishi Heavy Ind Ltd 作業支援システム
JP2007149070A (ja) * 2005-10-28 2007-06-14 Fujitsu Ltd 設備点検支援システム、設備点検支援方法およびそのプログラム
JP2011253422A (ja) * 2010-06-03 2011-12-15 Honda Motor Co Ltd 作業手順表示方法及び作業手順表示システム
JP2014211763A (ja) * 2013-04-18 2014-11-13 オムロン株式会社 作業管理システムおよび作業管理方法
JP2016181751A (ja) * 2015-03-23 2016-10-13 株式会社日立ソリューションズ 遠隔作業支援システム
JP2015181024A (ja) * 2015-05-14 2015-10-15 オムロン株式会社 作業管理システムおよび作業管理方法
JP2017162102A (ja) * 2016-03-08 2017-09-14 株式会社東芝 保守支援方法、保守支援システム、及び保守支援プログラム
JP2017162103A (ja) * 2016-03-08 2017-09-14 株式会社東芝 点検作業支援システム、点検作業支援方法、点検作業支援プログラム
JP2020013592A (ja) * 2016-04-08 2020-01-23 株式会社東芝 プログラム、点検支援端末及び点検支援方法
JP2018008774A (ja) * 2016-07-12 2018-01-18 株式会社日立ビルシステム エレベーターの点検作業支援装置と点検作業支援システム
JP2018165854A (ja) * 2017-03-28 2018-10-25 日本電気株式会社 故障部品交換支援方法
WO2019087870A1 (ja) * 2017-10-30 2019-05-09 Ｎｅｃフィールディング株式会社 作業支援装置、作業支援方法及びプログラム
WO2019119022A1 (en) * 2017-12-21 2019-06-27 Ehatsystems Pty Ltd Augmented visual assistance system for assisting a person working at a remote workplace, method and headwear for use therewith
JP2020004218A (ja) * 2018-06-29 2020-01-09 株式会社日立システムズ コンテンツ提示システム
JP2020135098A (ja) * 2019-02-14 2020-08-31 三機工業株式会社 施工管理システムおよび施工管理方法
JP2020137000A (ja) * 2019-02-22 2020-08-31 株式会社日立製作所 映像記録装置およびヘッドマウントディスプレイ
JP2022103336A (ja) * 2019-05-20 2022-07-07 株式会社日立システムズ 作業支援システムおよび作業支援方法
JP2021124355A (ja) * 2020-02-04 2021-08-30 東京瓦斯株式会社 ガスメータの交換作業支援装置、ガスメータの交換作業支援方法及びプログラム
JP2021125793A (ja) * 2020-02-05 2021-08-30 株式会社大林組 監視システム及び現場監視装置
JP2022042303A (ja) * 2020-09-02 2022-03-14 ＸＲ Ｊａｐａｎ株式会社 遠隔支援システム
JP2022111778A (ja) * 2021-01-20 2022-08-01 東京瓦斯株式会社 作業支援システム、作業支援制御装置、作業支援制御プログラム
JP2022114111A (ja) * 2021-01-26 2022-08-05 東京瓦斯株式会社 作業支援システム、作業支援制御装置、及び作業支援制御プログラム
JP7023427B1 (ja) * 2021-05-20 2022-02-21 三菱電機株式会社 動画マニュアル作成装置、動画マニュアル作成方法、及び動画マニュアル作成プログラム
JP2023048730A (ja) * 2021-09-28 2023-04-07 富士フイルムビジネスイノベーション株式会社 情報処理装置およびプログラム
JP2023082923A (ja) * 2021-12-03 2023-06-15 株式会社日立製作所 作業支援システム、作業対象特定装置および方法

Similar Documents

Publication Publication Date Title
JP6845072B2 (ja) 工場設備の保守支援装置及び保守支援システム
CN106340217B (zh) 基于增强现实技术的制造装备智能系统及其实现方法
US10769536B2 (en) Work support system and work support program
US11011074B2 (en) Information processing system, information processor, information processing method and program
EP3051379A1 (en) A vehicle fault diagnosis tester and a vehicle fault diagnosis system
US20180136035A1 (en) Method for detecting vibrations of a device and vibration detection system
US11192249B2 (en) Simulation device for robot
JP7110138B2 (ja) 作業指示システムおよび方法
JP7131958B2 (ja) 通知装置、情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム
US20220137609A1 (en) Production information management system and production information management method
CN107817778A (zh) 教育辅助装置
JP2019079144A (ja) 作業支援システム，撮像装置，ウェアラブル装置，作業支援方法
JP7406038B1 (ja) 作業支援システム及び作業支援方法
JP2018165854A (ja) 故障部品交換支援方法
CN107391710B (zh) 机器操作监督系统及服务器
JP6882137B2 (ja) 作業指示システム
JP7368937B2 (ja) 設備管理システム
CN208673383U (zh) 检修辅助装置和系统
JP2020087091A (ja) 熟練度判定システム
JP2017010228A (ja) 情報処理装置、情報処理方法、プログラム
JP6818795B2 (ja) 情報処理装置、情報処理方法及びコンピュータプログラム
JP2017019593A (ja) 倉庫管理システム及び携帯型装置
JP2021157284A (ja) 情報処理装置、情報処理システム、及びプログラム
JP2022143605A (ja) 見守りシステム
JP2016110475A (ja) 資産管理システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230919

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20230919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231214

R150 Certificate of patent or registration of utility model

Ref document number: 7406038

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150