JP7113702B2 - Inspection work support device, inspection work support system, and inspection work support method - Google Patents

Inspection work support device, inspection work support system, and inspection work support method Download PDF

Info

Publication number
JP7113702B2
JP7113702B2 JP2018162602A JP2018162602A JP7113702B2 JP 7113702 B2 JP7113702 B2 JP 7113702B2 JP 2018162602 A JP2018162602 A JP 2018162602A JP 2018162602 A JP2018162602 A JP 2018162602A JP 7113702 B2 JP7113702 B2 JP 7113702B2
Authority
JP
Japan
Prior art keywords
work
information
worker
unit
list
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018162602A
Other languages
Japanese (ja)
Other versions
JP2020035280A (en
Inventor
恵理 北側
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2018162602A priority Critical patent/JP7113702B2/en
Publication of JP2020035280A publication Critical patent/JP2020035280A/en
Application granted granted Critical
Publication of JP7113702B2 publication Critical patent/JP7113702B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、複数の作業員による機器の点検作業を支援する点検作業支援装置、点検作業支援システム、および点検作業支援方法に関する。 The present invention relates to an inspection work support device, an inspection work support system, and an inspection work support method that support inspection work of equipment by a plurality of workers.

従来、作業員が行う機器の点検作業を、拡張現実技術を用いて支援する方法が提案されている。例えば、特許文献1には、点検作業の内容を示す作業内容情報と点検作業のスケジュールを示すスケジュール情報とを含む作業情報を取得し、スケジュール情報と現時刻とに基づいて、作業内容情報が示す作業の内容の画像をヘッドマウント装置で表示する技術が提案されている。 Conventionally, there has been proposed a method of supporting equipment inspection work performed by a worker using augmented reality technology. For example, in Patent Document 1, work information including work content information indicating the content of inspection work and schedule information indicating the schedule of inspection work is acquired, and based on the schedule information and the current time, the work content information indicates Techniques have been proposed for displaying an image of work content on a head-mounted device.

特開2017-167991号公報JP 2017-167991 A

しかしながら、上記従来の技術では、予め設定されたスケジュールに沿って作業内容が作業員に示されるものの、作業員は、他の作業員の実際の作業状況を把握することができず、作業員によって適切な作業調整を行うことができない可能性がある。 However, in the conventional technology described above, although the work content is shown to the worker according to a preset schedule, the worker cannot grasp the actual work status of other workers. Proper work coordination may not be possible.

本発明は、上記に鑑みてなされたものであって、作業員に適切な作業調整を行うための情報を提供することができる点検作業支援装置を得ることを目的とする。 SUMMARY OF THE INVENTION It is an object of the present invention to provide an inspection work support device capable of providing an operator with information for appropriately adjusting work.

上述した課題を解決し、目的を達成するために、本発明の点検作業支援装置は、記憶部と、作業情報提供部と、情報取得部と、リスト更新部と、更新情報提供部と、作業禁止通知部とを備える。記憶部は、第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目がリスト化された情報を含む作業リストを記憶する。作業情報提供部は、作業リストに含まれる作業項目の情報を記憶部から取得し、取得した作業項目の情報を複数の作業員の各々の拡張現実デバイスへ送信する。情報取得部は、第1作業員の作業状況を示す情報を含む入力情報を第1作業員の入力デバイスから取得する。リスト更新部は、情報取得部によって取得された入力情報に基づいて、作業項目の情報に第1作業員の作業状況を示す作業状況情報を関連付けて作業リストを更新する。更新情報提供部は、リスト更新部によって更新された作業リストに含まれる作業状況情報を第2作業員の拡張現実デバイスへ送信する。作業禁止通知部は、第2作業員が行っている点検作業と同時に点検作業することが禁止される作業を第1作業員が行うことを禁止する通知を第1作業員の拡張現実デバイスへ通知する。 In order to solve the above-described problems and achieve the object, the inspection work support device of the present invention includes a storage unit, a work information providing unit, an information acquiring unit, a list updating unit, an update information providing unit, a work and a prohibition notification unit . The storage unit stores a work list including information listing work items of equipment to be inspected by a plurality of workers including a first worker and a second worker. The work information providing unit acquires information on work items included in the work list from the storage unit, and transmits the acquired information on the work items to the augmented reality devices of each of the plurality of workers. The information acquisition unit acquires input information including information indicating the work status of the first worker from the input device of the first worker. Based on the input information acquired by the information acquiring unit, the list updating unit updates the work list by associating the work item information with the work status information indicating the work status of the first worker. The update information providing unit transmits the work status information included in the work list updated by the list updating unit to the augmented reality device of the second worker. The work prohibition notification unit notifies the first worker's augmented reality device of a notice prohibiting the first worker from performing work that is prohibited from being performed at the same time as the inspection work being performed by the second worker. do.

本発明によれば、作業員に適切な作業調整を行うための情報を提供することができる、という効果を奏する。 ADVANTAGE OF THE INVENTION According to this invention, it is effective in the ability to provide a worker with the information for performing appropriate work adjustment.

本発明の実施の形態1にかかる点検作業支援システムの構成例を示す図1 is a diagram showing a configuration example of an inspection work support system according to a first embodiment of the present invention; FIG. 実施の形態1にかかる点検作業支援装置、拡張現実デバイス、および入力デバイスの構成例を示す図1 is a diagram showing a configuration example of an inspection work support device, an augmented reality device, and an input device according to a first embodiment; FIG. 実施の形態1にかかる作業リストの一例を示す図A diagram showing an example of a work list according to the first embodiment 実施の形態1にかかる作業スケジュール情報の一例を示す図A diagram showing an example of work schedule information according to the first embodiment 実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の一例を示す図FIG. 4 is a diagram showing an example of an image visibly presented to a worker by the augmented reality device according to the first embodiment; 実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の一例を示す図FIG. 4 is a diagram showing an example of an image visibly presented to a worker by the augmented reality device according to the first embodiment; 実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の他の例を示す図FIG. 5 is a diagram showing another example of an image visually presented to the worker by the augmented reality device according to the first embodiment; 実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の他の例を示す図FIG. 5 is a diagram showing another example of an image visually presented to the worker by the augmented reality device according to the first embodiment; 実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の他の例を示す図FIG. 5 is a diagram showing another example of an image visually presented to the worker by the augmented reality device according to the first embodiment; 実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の他の例を示す図FIG. 5 is a diagram showing another example of an image visually presented to the worker by the augmented reality device according to the first embodiment; 実施の形態1にかかる点検作業支援装置の処理の一例を示すフローチャートFlowchart showing an example of processing of the inspection work support device according to the first embodiment 実施の形態1にかかる作業情報提供処理の一例を示すフローチャートFlowchart showing an example of work information provision processing according to the first embodiment 実施の形態1にかかる入力情報処理の一例を示すフローチャート4 is a flowchart showing an example of input information processing according to the first embodiment; 実施の形態1にかかる点検作業支援装置のハードウェア構成の一例を示す図1 is a diagram showing an example of a hardware configuration of an inspection work support device according to a first embodiment; FIG. 本発明の実施の形態2にかかる点検作業支援システムおよび端末装置の構成例を示す図FIG. 2 is a diagram showing a configuration example of an inspection work support system and a terminal device according to a second embodiment of the present invention; 実施の形態2にかかる端末装置の表示部に表示される機器リスト表示画面の一例を示す図FIG. 11 is a diagram showing an example of a device list display screen displayed on the display unit of the terminal device according to the second embodiment; FIG. 実施の形態2にかかる機器リスト表示画面に選択された機器の作業リストが表示された状態を示す図FIG. 11 is a diagram showing a state in which a work list of a selected device is displayed on the device list display screen according to the second embodiment; 実施の形態2にかかる作業項目の優先度を変更するための操作の一例を示す図FIG. 11 is a diagram showing an example of an operation for changing the priority of work items according to the second embodiment; 実施の形態2にかかる点検作業支援装置の処理の一例を示すフローチャートFlowchart showing an example of processing of the inspection work support device according to the second embodiment 実施の形態2にかかる優先度変更処理の一例を示すフローチャートFlowchart showing an example of priority change processing according to the second embodiment

以下に、本発明の実施の形態にかかる点検作業支援装置、点検作業支援システム、および点検作業支援方法を図面に基づいて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。 BEST MODE FOR CARRYING OUT THE INVENTION An inspection work support device, an inspection work support system, and an inspection work support method according to embodiments of the present invention will be described below in detail with reference to the drawings. In addition, this invention is not limited by this embodiment.

実施の形態1.
図1は、本発明の実施の形態1にかかる点検作業支援システムの構成例を示す図である。図1に示すように、実施の形態1にかかる点検作業支援システム100は、作業員U,U,・・・,Uによる機器5,5,・・・,5の点検作業を支援する点検作業支援装置1と、拡張現実デバイス2,2,・・・,2と、入力デバイス3,3,・・・,3とを備える。n,mは3以上の整数である。
Embodiment 1.
FIG. 1 is a diagram showing a configuration example of an inspection work support system according to Embodiment 1 of the present invention. As shown in FIG . 1 , the inspection work support system 100 according to the first embodiment includes inspections of devices 51 , 52, . . . , 5m by workers U1 , U2, . It includes an inspection work support device 1 that supports work, augmented reality devices 2 1 , 2 2 , . . . , 2 n , and input devices 3 1 , 3 2 , . n and m are integers of 3 or more.

点検作業支援装置1は、拡張現実デバイス2,2,・・・,2および入力デバイス3,3,・・・,3とネットワーク4を介して通信可能に接続される。ネットワーク4は、例えば、インターネットなどのWAN(Wide Area Network)またはLAN(Local Area Network)である。 The inspection work support device 1 is communicably connected to the augmented reality devices 2 1 , 2 2 , . The network 4 is, for example, a WAN (Wide Area Network) such as the Internet or a LAN (Local Area Network).

作業員Uは、拡張現実デバイス2および入力デバイス3を使用し、作業員Uは、拡張現実デバイス2および入力デバイス3を使用し、作業員Uは、拡張現実デバイス2および入力デバイス3を使用する。 Worker U 1 uses augmented reality device 2 1 and input device 3 1 , worker U 2 uses augmented reality device 2 2 and input device 3 2 , worker U n uses augmented reality device 2 n and input device 3 n .

以下、拡張現実デバイス2,2,・・・,2の各々を区別せずに示す場合、拡張現実デバイス2と記載し、入力デバイス3,3,・・・,3の各々を区別せずに示す場合、入力デバイス3と記載する。また、作業員U,U,・・・,Uの各々を区別せずに示す場合、作業員Uと記載し、機器5,5,・・・,5の各々を区別せずに示す場合、機器5と記載する。 Hereinafter , when the augmented reality devices 2 1 , 2 2 , . The input device 3 will be described when each is indicated without distinguishing between them. Moreover , when workers U 1 , U 2 , . If not shown, it is described as device 5.

拡張現実デバイス2は、外景に種々の画像を重畳して作業員Uに視認させることができる。図1に示す拡張現実デバイス2は、作業員Uの頭部に装着されるスマートグラスであるが、拡張現実デバイス2は、作業員Uが携帯するタブレット端末であってもよい。また、図1に示す入力デバイス3は、作業員Uの頭部に装着されるヘッドセットであるが、入力デバイス3は、作業員Uが携帯するタブレット端末であってもよい。 The augmented reality device 2 can superimpose various images on the outside scenery for the worker U to visually recognize. The augmented reality device 2 shown in FIG. 1 is a smart glass worn on the head of the worker U, but the augmented reality device 2 may be a tablet terminal that the worker U carries. Moreover, although the input device 3 shown in FIG. 1 is a headset worn on the head of the worker U, the input device 3 may be a tablet terminal that the worker U carries.

図2は、実施の形態1にかかる点検作業支援装置、拡張現実デバイス、および入力デバイスの構成例を示す図である。図2に示すように、拡張現実デバイス2は、通信部20と、表示部21と、撮像部22と、制御部23とを備える。通信部20は、ネットワーク4と通信可能に接続される。制御部23は、通信部20およびネットワーク4を介して点検作業支援装置1と情報の送受信を行うことができる。 FIG. 2 is a diagram illustrating a configuration example of an inspection work support device, an augmented reality device, and an input device according to the first embodiment; As shown in FIG. 2 , the augmented reality device 2 includes a communication section 20 , a display section 21 , an imaging section 22 and a control section 23 . The communication unit 20 is communicably connected to the network 4 . The control unit 23 can transmit and receive information to and from the inspection work support device 1 via the communication unit 20 and the network 4 .

表示部21は、制御部23から出力される画像情報に基づく画像を外景に重畳して作業員Uに視認させる拡張現実表示部である。撮像部22は、作業員Uの前方を撮像し、作業員Uの前方の映像の情報である映像情報を制御部23に出力する。制御部23は、撮像部22から出力される映像情報を取得し、取得した映像情報を通信部20から点検作業支援装置1へ送信する。また、制御部23は、点検作業支援装置1からの情報を通信部20経由で取得し、取得した情報に基づく画像を表示部21によって作業員Uに視認させる。 The display unit 21 is an augmented reality display unit that superimposes an image based on the image information output from the control unit 23 on the outside scenery and allows the worker U to visually recognize the image. The image pickup unit 22 picks up an image in front of the worker U and outputs image information, which is information of an image in front of the worker U, to the control unit 23 . The control unit 23 acquires image information output from the imaging unit 22 and transmits the acquired image information from the communication unit 20 to the inspection work support device 1 . Further, the control unit 23 acquires information from the inspection work support device 1 via the communication unit 20, and causes the worker U to visually recognize an image based on the acquired information on the display unit 21. FIG.

入力デバイス3は、ネットワーク4と通信可能に接続される通信部30と、作業員Uの操作を受け付ける入力部31とを備える。作業員Uの操作によって入力部31に受け付けられた情報である入力情報は、通信部30からネットワーク4を介して点検作業支援装置1へ送信される。入力部31がマイクである場合、入力情報は、作業員Uの音声情報であり、入力部31がキーボードである場合、入力情報は文字情報である。 The input device 3 includes a communication unit 30 communicatively connected to the network 4 and an input unit 31 that receives an operator U's operation. Input information, which is information accepted by the input unit 31 by the operator U's operation, is transmitted from the communication unit 30 to the inspection work support device 1 via the network 4 . When the input unit 31 is a microphone, the input information is voice information of the worker U, and when the input unit 31 is a keyboard, the input information is character information.

点検作業支援装置1は、通信部10と、記憶部11と、制御部12とを備える。通信部10は、ネットワーク4と通信可能に接続される。記憶部11は、作業リスト60、作業スケジュール情報61、および映像情報62などを記憶する。作業リスト60には、各機器5の作業項目がリスト化された情報が含まれる。また、作業スケジュール情報61には、各機器5に対する点検作業のスケジュールを示す情報が含まれる。映像情報62には、拡張現実デバイス2の撮像部22から出力される映像情報が含まれる。 The inspection work support device 1 includes a communication section 10 , a storage section 11 and a control section 12 . The communication unit 10 is communicably connected to the network 4 . The storage unit 11 stores a work list 60, work schedule information 61, video information 62, and the like. The work list 60 includes information in which work items of each device 5 are listed. The work schedule information 61 also includes information indicating the schedule of inspection work for each device 5 . The video information 62 includes video information output from the imaging unit 22 of the augmented reality device 2 .

図3は、実施の形態1にかかる作業リストの一例を示す図である。図3に示す作業リスト60は、「項目ID(Identifier)」毎に、「機器名」、「作業項目」、「優先度」、「セット項目ID」、「作業時間」、「禁止項目ID」、「作業状況」、および「作業員」を関連付けた情報を含む。なお、「作業状況」および「作業員」は、作業員Uの入力デバイス3から送信される入力情報に基づいて設定される。 3 is a diagram of an example of a work list according to the first embodiment; FIG. The work list 60 shown in FIG. 3 includes “device name”, “work item”, “priority”, “set item ID”, “work time”, and “prohibited item ID” for each “item ID (Identifier)”. , "work status", and "operator". The “work status” and “worker” are set based on the input information transmitted from the worker U's input device 3 .

「項目ID」は、作業対象の内容を示す作業項目の識別情報である。「機器名」は、対象作業がどの機器5への点検作業であるかを示す情報、すなわち作業対象機器を示す情報である。図3に示す例では、機器名「盤001」の機器5は、機器5であり、機器名「盤002」の機器5は、機器5である。なお、図3では、機器5は配電盤であるが、機器5は、点検対象になる機器であればよく、配電盤に限定されない。 “Item ID” is identification information of a work item indicating the content of the work target. The "equipment name" is information indicating which equipment 5 is to be inspected for the target work, that is, information indicating the work target equipment. In the example shown in FIG. 3, the device 5 with the device name “board 001” is the device 5-1, and the device 5 with the device name “board 002” is the device 5-2 . Note that although the device 5 is a switchboard in FIG. 3, the device 5 may be any device to be inspected and is not limited to a switchboard.

「作業項目」は、作業対象の内容を示す作業項目の情報である。図3に示す例では、項目ID「I001」の「作業項目」は、「盤内、盤面の汚れ有無」であり、項目ID「I002」の「作業項目」は、「メータの汚れ有無」である。 The “work item” is work item information indicating the content of the work target. In the example shown in FIG. 3, the "work item" of the item ID "I001" is "presence or absence of contamination inside or on the panel surface", and the "work item" of the item ID "I002" is "presence or absence of contamination of the meter." be.

「優先度」は、対象作業の優先度を示す情報であり、拡張現実デバイス2への表示順を決定するパラメータである。かかる優先度が小さいほど優先度が高い。図3に示す例では、例えば、項目ID「I001」に関連付けられた「優先度」は「1」であるため、項目ID「I001」の作業項目は最も優先度が高い。また、項目ID「I002」に関連付けられた「優先度」は「2」であるため、項目ID「I002」の作業項目は2番目に優先度が高い。 “Priority” is information indicating the priority of the target work, and is a parameter that determines the order of display on the augmented reality device 2 . The lower the priority, the higher the priority. In the example shown in FIG. 3, for example, the "priority" associated with the item ID "I001" is "1", so the work item with the item ID "I001" has the highest priority. Also, since the "priority" associated with the item ID "I002" is "2", the work item with the item ID "I002" has the second highest priority.

「セット項目ID」は、作業で扱う計測器の種類が互いに同じなどの理由により、対象作業とまとめて行うべき別の作業の項目IDを示す情報である。図3に示す例では、例えば、項目ID「I001」の作業項目には、セット項目ID「I002」が関連付けられており、項目ID「I002」の作業項目には、セット項目ID「I001」が関連付けられている。したがって、図3に示す例では、項目ID「I001」の対象作業と項目ID「I002」の対象作業とはまとめて行うべき作業として設定されていることを示している。 The "set item ID" is information indicating the item ID of another work that should be performed together with the target work because the types of measuring instruments used in the work are the same. In the example shown in FIG. 3, for example, the work item with the item ID "I001" is associated with the set item ID "I002", and the work item with the item ID "I002" has the set item ID "I001". Associated. Therefore, the example shown in FIG. 3 indicates that the target work with the item ID "I001" and the target work with the item ID "I002" are set as work to be performed together.

「作業時間」は、対象作業に要するおおよその時間を示す情報、すなわち、作業時間の目安である作業時間目安を示す情報である。図3に示す例では、例えば、項目ID「I001」の作業時間目安は、「20分」であり、項目ID「I002」の作業時間目安は、「10分」である。 "Work time" is information indicating an approximate time required for the target work, that is, information indicating a work time guideline, which is a guideline for work time. In the example shown in FIG. 3, for example, the estimated work time for the item ID "I001" is "20 minutes", and the estimated work time for the item ID "I002" is "10 minutes".

「禁止項目ID」は、対象作業と同時作業が禁止される他の作業の項目IDを示す情報である。図3に示す例では、項目ID「I001」に関連付られた禁止項目IDは、「I005,I006,I007」であり、項目ID「I001」の対象作業と同時作業が禁止されている他の作業が、項目ID「I005,I006,I007」の作業であることを示している。 The “prohibited item ID” is information indicating item IDs of other tasks that are prohibited from being performed simultaneously with the target task. In the example shown in FIG. 3, the prohibited item IDs associated with the item ID "I001" are "I005, I006, and I007", and the target work of the item ID "I001" and the other work whose simultaneous work is prohibited. It indicates that the work is the work with the item IDs "I005, I006, I007".

「作業状況」は、対象作業における作業員Uの作業状況を示す作業状況情報である。図3に示す例では、作業員Uが対象作業を開始している場合、作業状況は「作業中」であり、作業員Uが対象作業を完了している場合、作業状況は「完了」であり、作業員Uが対象作業を開始していない場合、作業状況は「未着手」である。 "Work status" is work status information indicating the work status of the worker U in the target work. In the example shown in FIG. 3, the work status is "in progress" when the worker U has started the target work, and the work status is "completed" when the worker U has completed the target work. If there is, and the worker U has not started the target work, the work status is "not started".

「作業員」は、対象作業を開始または完了した作業員Uを示す作業員情報である。図3に示す例では、項目ID「I001」には、「作業員U」が関連付けられており、項目ID「I003」には、「作業員U」が関連付けられている。したがって、図3に示す例では、項目ID「I001」の対象作業は作業員Uが担当であり、項目ID「I003」の対象作業は作業員Uが担当であることを示している。 "Worker" is worker information indicating the worker U who started or completed the target work. In the example shown in FIG. 3, the item ID “I001” is associated with “worker U 1 ”, and the item ID “I003” is associated with “worker U 2 ”. Therefore, in the example shown in FIG. 3, the worker U1 is in charge of the target work with the item ID " I001 ", and the worker U2 is in charge of the target work with the item ID " I003 ".

図4は、実施の形態1にかかる作業スケジュール情報の一例を示す図である。図4に示す作業スケジュール情報61は、「作業期間」毎に、「作業グループ」、「作業員」、および「機器名」を関連付けた情報を含む。 FIG. 4 is a diagram depicting an example of work schedule information according to the first embodiment; The work schedule information 61 shown in FIG. 4 includes information that associates "work group", "worker", and "equipment name" with each "work period".

「作業期間」は、作業期間を示す情報である。「作業グループ」は、点検作業を一緒に行う複数の作業員Uが属するグループを示す情報である。「作業員」は、作業員Uを示す情報である。「機器名」は、機器5の名称を示す情報である。図4に示す例では、機器名「盤001」,「盤003」の機器5は、作業員U,Uのグループによって作業される予定であることを示し、機器名「盤002」,「盤004」の機器5は、作業員U,Uのグループによって作業される予定であることを示している。 "Work period" is information indicating a work period. "Work group" is information indicating a group to which a plurality of workers U who perform inspection work together belong. “Worker” is information indicating the worker U. FIG. “Device name” is information indicating the name of the device 5 . In the example shown in FIG. 4, the devices 5 with device names "board 001" and "board 003" are scheduled to be worked on by a group of workers U1 and U2. Equipment 5 on "board 004" is scheduled to be worked on by a group of workers U3 and U4.

図2に戻って、制御部12の説明を続ける。図2に示すように、制御部12は、映像取得部41と、特定部42と、作業情報提供部43と、情報取得部44と、リスト更新部45と、更新情報提供部46と、作業禁止通知部47と、映像提供部48と、周辺情報提供部49とを備える。 Returning to FIG. 2, the description of the control unit 12 is continued. As shown in FIG. 2, the control unit 12 includes a video acquisition unit 41, a specification unit 42, a work information provision unit 43, an information acquisition unit 44, a list update unit 45, an update information provision unit 46, a work A prohibition notification unit 47 , an image providing unit 48 , and a peripheral information providing unit 49 are provided.

映像取得部41は、各作業員Uが有する拡張現実デバイス2に設けられた撮像部22が撮像した映像の情報をネットワーク4経由で拡張現実デバイス2から取得する。 The video acquisition unit 41 acquires information of video captured by the imaging unit 22 provided in the augmented reality device 2 of each worker U from the augmented reality device 2 via the network 4 .

特定部42は、映像取得部41によって取得された映像の情報に基づいて、映像に含まれる機器5を特定することができる。機器5の特定は、例えば、ディープラーニングによる画像認識によって行われる。例えば、特定部42は、機器5毎の畳み込みニューラルネットワークを有しており、映像取得部41によって取得された映像の情報を機器5毎の畳み込みニューラルネットワークに入力することで、映像に含まれる機器5を特定することができる。なお、特定部42は、畳み込みニューラルネットワーク以外の計算モデルに基づいて機器5の特定を行ったり、画像テンプレートを用いたマッチング処理によって機器5の特定を行ったりすることもできる。 The identification unit 42 can identify the device 5 included in the image based on the information of the image acquired by the image acquisition unit 41 . The identification of the device 5 is performed, for example, by image recognition using deep learning. For example, the specifying unit 42 has a convolutional neural network for each device 5, and inputs the information of the video acquired by the video acquisition unit 41 to the convolutional neural network for each device 5, thereby identifying devices included in the video. 5 can be specified. Note that the identifying unit 42 can also identify the device 5 based on a computational model other than the convolutional neural network, or identify the device 5 by matching processing using an image template.

作業情報提供部43は、特定部42によって特定された機器5の作業リストに含まれる作業項目の情報、作業状況を示す作業状況情報、および作業員Uを示す作業員情報を記憶部11から取得する。例えば、作業リスト60が図3に示す状態であり、特定部42によって特定された機器5が機器5であるとする。この場合、作業情報提供部43は、特定された機器5の情報と、機器5の機器名「盤001」に各々関連付けられた作業項目の情報、作業状況を示す作業状況情報、および作業員Uを示す作業員情報を記憶部11から取得する。 The work information providing unit 43 acquires, from the storage unit 11, work item information included in the work list of the device 5 identified by the identifying unit 42, work status information indicating the work status, and worker information indicating the worker U. do. For example, assume that the work list 60 is in the state shown in FIG. 3 and the device 5 specified by the specifying unit 42 is the device 5-1 . In this case, the work information providing unit 43 provides information on the specified device 5 , information on work items respectively associated with the device name “board 001” of the device 51, work status information indicating the work status, and worker Worker information indicating U is acquired from the storage unit 11 .

また、作業情報提供部43は、特定部42によって特定された機器5に必要な複数の点検作業のうち作業状況が作業中または未着手である作業項目の作業時間目安から、現在時刻からの作業必要時間を演算する。作業情報提供部43は、演算した作業必要時間を現在時刻に加算することで、機器5に対する作業が完了すると予測される時刻である作業完了時刻を求める。作業情報提供部43は、記憶部11から取得した機器5の情報、作業項目の情報、作業状況を示す作業状況情報、作業員Uを示す作業員情報、および演算した作業完了時刻の情報を含む作業情報を拡張現実デバイス2へ送信する。 In addition, the work information providing unit 43 determines the work from the current time based on the estimated work time of the work item whose work status is in progress or has not started among the plurality of inspection works necessary for the equipment 5 identified by the identification unit 42 . Calculate the required time. The work information providing unit 43 adds the calculated required work time to the current time to obtain the work completion time, which is the estimated time when the work on the equipment 5 is completed. The work information providing unit 43 includes the information of the device 5 acquired from the storage unit 11, the information of the work items, the work status information indicating the work status, the worker information indicating the worker U, and the calculated work completion time information. Send work information to the augmented reality device 2 .

図5および図6は、実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の一例を示す図である。図5は、特定部42によって特定された機器5が機器5であり、且つ作業リスト60が図3に示す状態である場合に、拡張現実デバイス2によって作業員Uに視認可能に提示される画像の一例を示す。また、図6は、特定部42によって特定された機器5が機器5であり、且つ作業リスト60が図3に示す状態である場合に、拡張現実デバイス2によって作業員Uに視認可能に提示される画像の一例を示す。 5 and 6 are diagrams showing examples of images visibly presented to the worker by the augmented reality device according to the first embodiment. FIG. 5 shows that the device 5 specified by the specifying unit 42 is the device 5-1 and the work list 60 is in the state shown in FIG. 1 shows an example of an image to be processed. In addition, FIG. 6 shows that when the device 5 specified by the specifying unit 42 is the device 5-1 and the work list 60 is in the state shown in FIG . 1 shows an example of an image presented in .

まず、拡張現実デバイス2による表示について説明する。図5に示すように、拡張現実デバイス2によって、機器名「盤001」の機器5の作業項目の情報を含む作業リスト画像70が外景に重畳された状態で作業員Uに視認可能に提示される。作業リスト画像70には、機器情報71と、作業情報72~75とが含まれる。 First , display by the augmented reality device 21 will be described. As shown in FIG. 5, the augmented reality device 2-1 allows the worker U1 to visually recognize a work list image 70 including work item information of the device 5-1 with the device name “board 001” superimposed on the outside scenery. presented to. The work list image 70 includes equipment information 71 and work information 72-75.

機器情報71には、特定された機器5の情報と作業完了時刻の情報とが含まれている。図5に示す機器情報71には、機器5の情報として「盤001」と、作業完了時刻の情報として「10:10」とが含まれる。作業情報72は、作業員Uが作業を完了した作業項目「盤内、盤面の汚れ有無」の情報と作業を完了したことを示す作業状況情報とを含む。作業情報73は、作業員Uが作業中の作業項目「メータの汚れ有無」の情報と作業中であることを示す作業状況情報とを含む。なお、作業中の作業項目とは、作業員Uが実行している作業の作業項目を意味し、作業を完了した作業項目とは、作業員Uが完了した作業の作業項目を意味する。 The device information 71 includes information on the specified device 51 and information on the work completion time. The device information 71 shown in FIG. 5 includes “board 001” as the information of the device 51 and “10:10” as the information of the work completion time. The work information 72 includes information on the work item "dirt inside board and board surface" completed by worker U1 and work status information indicating that the work has been completed. The work information 73 includes work status information indicating that the worker U1 is working and information on the work item "dirt on the meter" that is being worked on by the worker U1. The work item in progress means the work item of the work that the worker U is performing, and the work item that has completed the work means the work item of the work that the worker U has completed.

作業情報74は、作業員Uが作業中の作業項目「配線の確認」の情報と、作業員Uを示す作業員情報と、作業中であることを示す作業状況情報とを含む。作業情報75は、作業員Uが作業中の作業項目「配線の確認」の項目ID「I003」のセット項目IDとして設定されている項目ID「I004」の作業項目「絶縁抵抗値測定」の情報を含む。 The work information 74 includes information on the work item "wiring confirmation" that the worker U2 is working on , worker information indicating the worker U2, and work status information indicating that the worker U2 is working. The work information 75 includes the work item "insulation resistance value measurement" of the item ID "I004" set as the set item ID of the item ID " I003 " of the work item "wiring confirmation" being worked on by the worker U2. Contains information.

図5に示す例では、作業情報72~75は、優先度順に配列されている。また、作業情報72,73の組と作業情報74,75の組の各々は、セット項目IDで互いに関連付けられていることがわかるように図5に示す例では、太枠で囲われている。なお、図5に示す例では、作業情報の組を太枠で区別可能に表示しているが、背景色、文字色、またはフォントなどによって作業情報の組を区別可能に表示してもよい。 In the example shown in FIG. 5, the work information 72-75 are arranged in order of priority. Also, each of the set of work information 72, 73 and the set of work information 74, 75 is surrounded by a thick frame in the example shown in FIG. In the example shown in FIG. 5, the sets of work information are displayed with bold frames so that they can be distinguished.

次に、拡張現実デバイス2による表示について説明する。図6に示すように、拡張現実デバイス2によって、機器名「盤001」の機器5の作業項目の情報を含む作業リスト画像80が外景に重畳された状態で作業員Uに視認可能に提示される。作業リスト画像80には、機器情報81と、作業情報82~85とが含まれる。機器情報81は、図5に示す機器情報71と同じである。 Next, display by the augmented reality device 22 will be described. As shown in FIG . 6, the augmented reality device 22 allows the worker U2 to visually recognize a work list image 80 including work item information of the device 51 with the device name “board 001” superimposed on the outside scenery. presented to. The work list image 80 includes equipment information 81 and work information 82-85. The device information 81 is the same as the device information 71 shown in FIG.

作業情報82は、作業員Uが作業中の作業項目「配線の確認」の情報と、作業中であることを示す作業状況情報とを含む。作業情報83は、作業員Uが作業中の作業項目「配線の確認」の項目ID「I003」のセット項目IDとして設定されている項目ID「I004」の作業項目「絶縁抵抗値測定」の情報である。作業情報84は、作業員Uが作業を完了した作業項目「盤内、盤面の汚れ有無」の情報と、作業員Uを示す作業員情報と、作業が完了したことを示す作業状況情報とを含む。作業情報85は、作業員Uが作業中の作業項目「メータの汚れ有無」の情報と、作業員Uを示す作業員情報と、作業中であることを示す作業状況情報とを含む。 The work information 82 includes information on the work item "wiring confirmation" that the worker U2 is working on, and work status information indicating that the work is in progress. The work information 83 includes the work item "insulation resistance value measurement" of the item ID "I004" set as the set item ID of the item ID " I003 " of the work item "wiring confirmation" which the worker U2 is working on. Information. The work information 84 includes information on the work item "dirt inside and on the board surface" completed by the worker U1, worker information indicating the worker U1 , and work status information indicating that the work has been completed. including. The work information 85 includes information on the work item "dirt on the meter " that the worker U1 is working on, worker information indicating the worker U1, and work status information indicating that the worker U1 is working.

図6に示す例では、作業員Uが作業中または着手予定の作業項目を示す作業情報82,83が優先度順に配列され、その下方に、作業員Uが作業完了または作業中の作業項目を示す作業情報84,85が優先度順に配列される。なお、着手予定の作業項目とは、作業員U自身の作業完了または作業中の作業項目の項目IDのセット項目IDとして設定されている項目IDの作業項目であって未着手の作業項目である。 In the example shown in FIG. 6 , work information 82 and 83 indicating work items currently being worked on or scheduled to be started by worker U2 are arranged in order of priority. Work information 84 and 85 indicating items are arranged in order of priority. Note that the work item scheduled to be started is a work item having an item ID set as a set item ID of the item ID of the work item that the worker U has completed or is currently working on, and is a work item that has not yet been started. .

このように、点検作業支援装置1の作業情報提供部43は、作業項目の情報に関連付けられた優先度の情報および作業状況の情報に基づいて、作業項目の情報を作業リスト60から選択し、選択した作業項目の情報を拡張現実デバイス2へ送信する。例えば、作業情報提供部43は、拡張現実デバイス2を介して、作業員Uが作業を完了した作業項目、作業員Uが作業中の作業項目、または作業員Uが着手予定の作業項目を優先度順に提示する。また、作業情報提供部43は、拡張現実デバイス2を介して、作業員Uと同一の機器5の点検作業をする他の作業員Uが作業を完了した作業項目、他の作業員Uが作業中の作業項目、または他の作業員Uが着手予定の作業項目を優先度順に提示することができる。これにより、作業員Uは、自身の作業内容の他、他の作業員Uの作業状況を作業中に把握することができる。 In this way, the work information providing unit 43 of the inspection work support device 1 selects work item information from the work list 60 based on the priority information and work status information associated with the work item information, Send information on the selected work item to the augmented reality device 2 . For example, via the augmented reality device 2, the work information providing unit 43 gives priority to a work item that the worker U has completed, a work item that the worker U is working on, or a work item that the worker U is scheduled to start. presented in order. In addition, the work information providing unit 43 provides, via the augmented reality device 2, a work item completed by another worker U who inspects the same device 5 as the worker U, a work item completed by the other worker U, and a Work items in the middle or work items scheduled to be started by another worker U can be presented in order of priority. As a result, the worker U can grasp the work status of other workers U in addition to his/her own work contents during the work.

なお、作業情報提供部43は、作業員Uの作業中の作業項目および着手予定の作業項目がない場合、拡張現実デバイス2を介して、未着手の作業項目のうち優先度の最も高い作業項目を作業員Uに提示する。これにより、作業員Uは、次に着手すべき作業項目を容易に把握することができる。 Note that, if there is no work item currently being worked on by the worker U or a work item scheduled to be started, the work information providing unit 43 selects the work item with the highest priority among the unstarted work items via the augmented reality device 2 . is presented to the worker U. Thereby, the worker U can easily grasp the work item to be started next.

また、作業情報提供部43は、作業が完了した作業項目の項目IDのセット項目IDとして設定されている項目IDの作業項目の作業が完了している場合、作業が完了した作業項目を表示させないことができる。また、作業情報提供部43は、作業が完了した作業項目をすべて表示させないこともできる。また、作業情報提供部43は、作業員Uの設定に応じた情報を表示することもできる。 Further, when the work of the work item with the item ID set as the set item ID of the item ID of the completed work item is completed, the work information providing unit 43 does not display the completed work item. be able to. In addition, the work information providing unit 43 may not display all completed work items. The work information providing unit 43 can also display information according to the worker U's settings.

図2に戻って、制御部12の情報取得部44を説明する。制御部12の情報取得部44は、入力デバイス3からネットワーク4を介して点検作業支援装置1へ送信される入力情報を取得する。情報取得部44は、入力情報が作業員Uの音声情報である場合、音声情報を文字情報へ変換する。情報取得部44は、入力情報を解析し、入力情報の内容を判定する。 Returning to FIG. 2, the information acquisition section 44 of the control section 12 will be described. The information acquisition unit 44 of the control unit 12 acquires input information transmitted from the input device 3 to the inspection work support apparatus 1 via the network 4 . When the input information is voice information of the worker U, the information acquisition unit 44 converts the voice information into character information. The information acquisition unit 44 analyzes the input information and determines the contents of the input information.

入力情報の内容は、例えば、作業状況更新情報、表示モード設定情報、映像取得要求情報、周囲状況要求情報などである。作業状況更新情報には、作業状況を示す情報と作業対象を示す情報とが含まれる。作業状況を示す情報は、例えば、作業開始を示す情報、または作業完了を示す情報などである。 The contents of the input information are, for example, work situation update information, display mode setting information, image acquisition request information, surrounding situation request information, and the like. The work status update information includes information indicating the work status and information indicating the work target. The information indicating the work status is, for example, information indicating the start of work or information indicating the completion of work.

表示モード設定情報には、表示モードを示す情報として、第1モード、第2モード、および第3モードが含まれる。第1モードは、特定部42によって特定された機器5の作業項目の情報を上述したように作業員Uに提示する表示モードである。第2モードは、作業員Uの前方にある機器5の部位についての作業状況の情報を作業員Uに提示する表示モードである。第3モードは、作業員Uの前方にいる他の作業員Uの作業状況の情報を作業員Uに提示する表示モードである。 The display mode setting information includes a first mode, a second mode, and a third mode as information indicating display modes. The first mode is a display mode for presenting the information on the work items of the equipment 5 specified by the specifying unit 42 to the worker U as described above. The second mode is a display mode in which the worker U is presented with work status information about the portion of the device 5 in front of the worker U. FIG. The third mode is a display mode in which the worker U is presented with information on the work status of another worker U in front of the worker U.

情報取得部44は、入力情報が表示モード設定情報である場合、表示モード設定情報に含まれる表示モードの情報を特定部42および作業情報提供部43に設定する。特定部42および作業情報提供部43は、設定された表示モードが第1モードである場合、上述した処理を行う。 When the input information is the display mode setting information, the information acquiring unit 44 sets the display mode information included in the display mode setting information to the specifying unit 42 and the work information providing unit 43 . The identifying unit 42 and the work information providing unit 43 perform the above-described processing when the set display mode is the first mode.

また、特定部42は、設定された表示モードが第2モードである場合、映像取得部41によって取得された映像の情報に基づいて、映像に含まれる機器5の部位を特定する。機器5の部位は、作業員Uの前方の予め決められた範囲にある機器5の部位である。特定部42は、映像に含まれる機器5を特定する場合と同様に、計算モデルに基づいて機器5の部位を特定したり、画像テンプレートを用いたマッチング処理によって機器5の部位を特定したりすることができる。 Further, when the set display mode is the second mode, the identification unit 42 identifies the part of the device 5 included in the image based on the information of the image acquired by the image acquisition unit 41 . The part of the equipment 5 is the part of the equipment 5 in a predetermined range in front of the worker U. As shown in FIG. The identification unit 42 identifies the part of the device 5 based on the calculation model, or identifies the part of the device 5 by matching processing using an image template, in the same way as when identifying the device 5 included in the video. be able to.

特定される機器5の部位は、作業員Uの視線方向にある予め決められた範囲にある機器5の部位であってもよい。この場合、拡張現実デバイス2には、例えば、視線方向を検出する視線方向検出センサが設けられ、視線方向検出センサによる検出結果が点検作業支援装置1へ送信される。特定部42は、視線方向検出センサによる検出結果に基づいて、機器5の部位を特定することができる。 The part of the device 5 to be identified may be a part of the device 5 within a predetermined range in the line-of-sight direction of the worker U. In this case, the augmented reality device 2 is provided with, for example, a line-of-sight direction detection sensor that detects the line-of-sight direction, and the result of detection by the line-of-sight direction detection sensor is transmitted to the inspection work support apparatus 1 . The specifying unit 42 can specify the part of the device 5 based on the detection result of the line-of-sight direction detection sensor.

また、特定部42は、設定された表示モードが第3モードである場合、映像取得部41によって取得された映像の情報に基づいて、映像に含まれる他の作業員Uを特定する。特定部42は、映像に含まれる機器5を特定する場合と同様に、計算モデルに基づいて他の作業員Uを特定したり、画像テンプレートを用いたマッチング処理によって他の作業員Uを特定したりすることができる。 Further, when the set display mode is the third mode, the identifying unit 42 identifies another worker U included in the image based on the information of the image acquired by the image acquiring unit 41 . The identification unit 42 identifies another worker U based on a calculation model, or identifies another worker U by matching processing using an image template, in the same manner as when identifying the device 5 included in the video. can be

特定される他の作業員Uは、例えば、作業員Uの前方の予め決められた範囲にいる他の作業員Uである。なお、特定される他の作業員Uは、機器5の部位を特定する場合と同様に、作業員Uの視線方向にある予め決められた範囲にいる他の作業員Uであってもよい。 The specified other worker U is, for example, another worker U who is in a predetermined range in front of the worker U. The other worker U to be specified may be another worker U who is within a predetermined range in the line of sight of the worker U, as in the case of specifying the part of the device 5 .

作業情報提供部43は、設定された表示モードが第2モードである場合、特定部42によって特定された機器5の部位に対応する作業項目の作業状況を示す情報を作業リスト60から取得する。図3では図示されていないが、作業リスト60には、機器5の各部位を示す情報が項目IDに関連付けられており、作業情報提供部43は、機器5の各部位を示す情報に基づいて、特定部42によって特定された機器5の部位に対応する作業項目の作業状況を示す情報を取得することができる。 When the set display mode is the second mode, the work information providing unit 43 acquires from the work list 60 information indicating the work status of the work item corresponding to the part of the equipment 5 identified by the identifying unit 42 . Although not shown in FIG. 3, in the work list 60, information indicating each part of the equipment 5 is associated with the item ID, and the work information providing unit 43 performs the work based on the information indicating each part of the equipment 5. , information indicating the work status of the work item corresponding to the part of the equipment 5 specified by the specifying unit 42 can be acquired.

作業情報提供部43は、特定部42によって特定された機器5の部位の位置に対応する位置で作業員Uに視認されるように作業リスト60から取得した情報を配置した画像情報を拡張現実デバイス2へ送信する。 The work information providing unit 43 transmits image information obtained from the work list 60 to the augmented reality device so that the worker U can visually recognize the image information at the position corresponding to the position of the part of the device 5 specified by the specifying unit 42 . 2.

図7は、実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の他の例を示す図である。図7に示すように、拡張現実デバイス2によって、「メータの汚れ有無-点検済」の文字列を含み且つ機器5の部位を指し示す画像90が外景に重畳された状態で作業員Uに視認可能に提示される。これにより、作業員Uは、作業状況を特定したい機器5の部位の方向へ向くことによって、容易に機器5の部位の作業状況を確認することができる。 7 is a diagram illustrating another example of an image visibly presented to the worker by the augmented reality device according to the first embodiment; FIG. As shown in FIG. 7 , the augmented reality device 21 displays an image 90 including the character string "dirt on the meter - checked" and pointing to the part of the device 5 superimposed on the outside scenery. visibly presented. Accordingly, the worker U1 can easily confirm the working status of the part of the equipment 5 by facing the direction of the part of the equipment 5 whose working status is to be specified.

作業情報提供部43は、設定された表示モードが第3モードである場合、特定部42によって特定された他の作業員Uの情報が関連付けられた作業項目の作業状況を示す情報を作業リスト60から取得する。作業情報提供部43は、特定部42によって特定された他の作業員Uの位置に対応する位置で作業員Uに視認されるように作業リスト60から取得した情報を配置した画像情報を拡張現実デバイス2へ送信する。 When the set display mode is the third mode, the work information providing unit 43 displays information indicating the work status of the work items associated with the information of the other workers U identified by the identifying unit 42 in the work list 60 . Get from The work information providing unit 43 displays image information obtained from the work list 60 so that the worker U can visually recognize it at a position corresponding to the position of the other worker U specified by the specifying unit 42 . Send to device 2.

図8は、実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の他の例を示す図である。図8に示すように、拡張現実デバイス2によって、「メータの汚れ有無 作業員U 作業中」の文字列を含み他の作業員Uを指し示す画像91が外景に重畳された状態で作業員Uに視認可能に提示される。これにより、作業員Uは、作業状況を特定したい他の作業員Uの方向へ向くことによって、容易に他の作業員Uの作業状況を確認することができる。 8 is a diagram illustrating another example of an image visibly presented to the worker by the augmented reality device according to the first embodiment; FIG. As shown in FIG. 8 , the augmented reality device 21 superimposes an image 91 that includes the character string "Whether the meter is dirty, worker U2 is working" and points to another worker U2 , and is superimposed on the outside scenery. visibly presented to member U1 . Accordingly, the worker U1 can easily check the work status of the other worker U2 by facing the direction of the other worker U2 whose work status is to be specified.

図2に戻って、制御部12のリスト更新部45について説明する。リスト更新部45は、情報取得部44によって作業状況更新情報が取得された場合、かかる作業状況更新情報に基づいて、作業リスト60の「作業状況」および「作業員」を更新する。 Returning to FIG. 2, the list update section 45 of the control section 12 will be described. When the information acquisition unit 44 acquires the work situation update information, the list update unit 45 updates the "work situation" and "worker" of the work list 60 based on the work situation update information.

ここで、作業リスト60が図3に示す状態であり、拡張現実デバイス2から項目ID「I004」の作業開始を示す情報を含む作業状況更新情報が情報取得部44によって取得されたとする。この場合、リスト更新部45は、作業リスト60において項目ID「I004」に関連付けられる作業状況および作業員Uとして「作業中」および「作業員U」を設定する。 Here, it is assumed that the work list 60 is in the state shown in FIG. 3 and that the information acquisition unit 44 acquires work status update information including information indicating the start of work with the item ID “ I004 ” from the augmented reality device 22 . In this case, the list update unit 45 sets “working” and “worker U 2 ” as the work status and worker U associated with the item ID “I004” in the work list 60 .

また、作業リスト60が図3に示す状態であり、拡張現実デバイス2から項目ID「I003」の作業完了を示す情報を含む作業状況更新情報が情報取得部44によって取得されたとする。この場合、リスト更新部45は、作業リスト60において項目ID「I003」に関連付けられる作業状況を「作業中」から「完了」に変更する。 Also, assume that the work list 60 is in the state shown in FIG. 3 and that the information acquisition unit 44 acquires work status update information including information indicating the completion of the work with the item ID “ I003 ” from the augmented reality device 22 . In this case, the list update unit 45 changes the work status associated with the item ID “I003” in the work list 60 from “work in progress” to “completed”.

更新情報提供部46は、リスト更新部45によって更新された作業リスト60に含まれる情報を各作業員Uへ提供する。例えば、作業リスト60が図3に示す状態で、リスト更新部45が項目ID「I003」に関連付けられる作業状況を「作業中」から「完了」に変更したとする。この場合、更新情報提供部46は、「配線の確認 完了」の文字列を含む画像情報を拡張現実デバイス2へネットワーク4を介して送信し、「配線の確認 作業員U 完了」の文字列を含む画像情報を拡張現実デバイス2へネットワーク4を介して送信する。 The update information providing unit 46 provides each worker U with information included in the work list 60 updated by the list updating unit 45 . For example, assume that the list update unit 45 changes the work status associated with the item ID "I003" from "work in progress" to "completed" when the work list 60 is in the state shown in FIG. In this case, the update information providing unit 46 transmits the image information including the character string "wiring confirmation completed" to the augmented reality device 22 via the network 4 , and the character string "wiring confirmation completed by worker U2 ". The image information including the columns is sent to the augmented reality device 21 via the network 4 .

これにより、「配線の確認 完了」の文字列を含む画像が拡張現実デバイス2によって作業員Uに視認可能に提示されることに加え、「配線の確認 作業員U 完了」の文字列を含む画像が拡張現実デバイス2によって作業員Uに視認可能に提示される。したがって、作業員Uは、作業員Uの作業状況に変化があったことを容易に把握することができる。 As a result, the augmented reality device 22 visually presents an image including the character string "wiring confirmation completed" to the worker U2 , and in addition, the character string "wiring confirmation worker U2 completed" is displayed. is visibly presented to operator U 1 by augmented reality device 2 1 . Therefore, the worker U1 can easily grasp that there has been a change in the work situation of the worker U2 .

作業禁止通知部47は、情報取得部44によって取得された作業状況更新情報に作業項目の情報と作業開始を示す情報が含まれる場合、取得された作業項目の情報に関連付けられた禁止項目IDの作業項目の作業状況を示す情報を作業リスト60から取得する。作業禁止通知部47は、禁止項目IDの作業項目が作業中であるか否かを判定する。作業禁止通知部47は、禁止項目IDの作業項目が作業中である場合、作業不可を示す情報を作業員Uに通知する。 When the work status update information acquired by the information acquisition unit 44 includes work item information and information indicating the start of work, the work prohibition notification unit 47 determines the prohibition item ID associated with the acquired work item information. Information indicating the work status of the work item is acquired from the work list 60 . The work prohibition notification unit 47 determines whether or not the work item of the prohibited item ID is being worked. The work prohibition notification unit 47 notifies the worker U of information indicating that the work is prohibited when the work item of the prohibited item ID is being worked.

例えば、作業リスト60が図3に示す状態から項目ID「I002」に関連付けられた作業状況が「完了」へ変更され、且つ情報取得部44によって項目ID「I005」の作業開始を示す作業状況更新情報が入力情報として拡張現実デバイス2から取得されたとする。項目ID「I005」の作業開始を示す作業状況更新情報には、作業項目「I005」の情報と作業開始を示す情報が含まれる。 For example, the work status associated with the item ID "I002" is changed from the state shown in FIG. Assume that information is obtained from the augmented reality device 21 as input information. The work status update information indicating the start of work with the item ID “I005” includes information on the work item “I005” and information indicating the start of work.

この場合、作業禁止通知部47は、作業リスト60において項目ID「I005」に関連付けられている禁止項目ID「I001,I002,I003,I004」の作業状況を示す情報を記憶部11から読み出す。作業禁止通知部47は、作業リスト60において項目ID「I003」の作業項目に関連付けられた作業状況は作業中であるため、作業不可を示す情報を作業員Uの拡張現実デバイス2に通知する。なお、この場合、リスト更新部45は、作業状況更新情報に基づく作業リスト60の更新を行わない。 In this case, the work prohibition notification unit 47 reads from the storage unit 11 information indicating the work status of the prohibited item IDs “I001, I002, I003, I004” associated with the item ID “I005” in the work list 60 . Since the work status associated with the work item with the item ID “ I003 ” in the work list 60 is work in progress, the work prohibition notification unit 47 notifies the augmented reality device 21 of the worker U1 of information indicating that work is prohibited. do. In this case, the list update unit 45 does not update the work list 60 based on the work status update information.

図9および図10は、実施の形態1にかかる拡張現実デバイスによって作業員に視認可能に提示される画像の他の例を示す図である。図9に示すように、拡張現実デバイス2によって、「警告:この作業項目は同時作業禁止項目であるため、作業できません。」の文字列を含む画像92が作業リスト画像70と共に外景に重畳された状態で作業員Uに視認可能に提示される。 9 and 10 are diagrams showing other examples of images visibly presented to the worker by the augmented reality device according to the first embodiment. As shown in FIG. 9 , the augmented reality device 21 superimposes an image 92 including a character string "Warning: You cannot work on this work item because it is an item that prohibits simultaneous work." It is presented to the worker U in a state where it can be visually recognized.

また、図10に示すように、拡張現実デバイス2によって、作業リスト画像80に作業不可である作業項目の情報である作業情報86,87が追加された作業リスト画像80Aが外景に重畳された状態で作業員Uに視認可能に提示される。作業情報86,87には、作業項目の情報に加え、作業不可であることを示す情報が含まれる。 Further, as shown in FIG . 10, the augmented reality device 22 superimposes a work list image 80A on the outside scenery, in which work information 86 and 87, which are information on work items that cannot be worked on, are added to the work list image 80. visibly presented to worker U2 in the state. The work information 86 and 87 includes information indicating that the work is impossible in addition to the work item information.

このように、作業禁止通知部47は、同時作業が禁止されている作業項目の作業を開始しようとした作業員Uの拡張現実デバイス2へ、作業不可を示す情報として、画像92の情報を送信する。これにより、作業員Uは、開始しようとする作業が、同時作業が禁止されている作業であることを容易に把握することができる。また、画像92は作業リスト画像70と異なる位置に提示されるため、同時作業が禁止されている作業を容易に把握することができる。 In this way, the work prohibition notifying unit 47 transmits the information of the image 92 as the information indicating that the work is impossible to the augmented reality device 2 of the worker U who is about to start work on the work item for which simultaneous work is prohibited. do. Thereby, the worker U can easily grasp that the work to be started is work for which simultaneous work is prohibited. In addition, since the image 92 is presented at a position different from that of the work list image 70, it is possible to easily grasp the work for which simultaneous work is prohibited.

また、作業禁止通知部47は、同時作業が禁止されている作業項目の作業を開始しようとした作業員Uと同じ機器5の点検作業を行っている他の作業員Uの拡張現実デバイス2へ、作業不可を示す情報として、作業不可である作業項目の情報が追加された作業リスト画像80Aを提示するための情報を送信する。これにより、作業員Uは、同時作業が禁止されている作業項目の作業を他の作業員Uが開始しようとしたことを容易に把握することができる。 In addition, the work prohibition notification unit 47 notifies the augmented reality device 2 of another worker U who is performing inspection work on the same equipment 5 as the worker U who is about to start work on a work item for which simultaneous work is prohibited. , information for presenting the work list image 80A to which the information of the work item for which the work is prohibited is added as the information indicating that the work is prohibited. Thereby, the worker U can easily grasp that another worker U is about to start a work item for which simultaneous work is prohibited.

図2に戻って、制御部12の映像提供部48および周辺情報提供部49について説明する。映像提供部48は、入力情報が映像取得要求情報である場合、映像取得要求情報に従った映像情報を映像情報62から取得し、取得した映像情報を、映像取得要求情報を送信した拡張現実デバイス2へ送信する。 Returning to FIG. 2, the image providing unit 48 and peripheral information providing unit 49 of the control unit 12 will be described. When the input information is the image acquisition request information, the image providing unit 48 acquires image information according to the image acquisition request information from the image information 62, and sends the acquired image information to the augmented reality device that transmitted the image acquisition request information. 2.

映像提供部48によって拡張現実デバイス2へ送信される映像情報は、例えば、過去に作業員U自身の拡張現実デバイス2に設けられた撮像部22によって撮像された映像の情報、または他の作業員Uの拡張現実デバイス2に設けられた撮像部22によって撮像された映像の情報である。これにより、例えば、作業員Uは、作業員Uまたは他の作業員Uが作業している様子を示す過去または現在の映像を視認することが可能になる。映像取得要求情報の内容は任意に設定することができる。 The image information transmitted to the augmented reality device 2 by the image providing unit 48 is, for example, image information captured by the imaging unit 22 provided in the augmented reality device 2 of the worker U in the past, or image information of another worker. It is information of a video imaged by the imaging unit 22 provided in the U augmented reality device 2 . As a result, for example, the worker U can visually recognize past or present images showing how the worker U or another worker U is working. The content of the video acquisition request information can be set arbitrarily.

また、映像提供部48は、作業員Uの作業が遅れているか否かを判定し、作業が遅れている作業員Uの現在の映像の情報を同じ機器5の点検を行う他の作業員Uの拡張現実デバイス2へ送信することもできる。これにより、他の作業員Uの作業状況を映像によって確認することができる。映像提供部48は、作業リスト60に基づいて、作業が遅れている作業員Uを特定することができる。なお、図3には図示していないが、作業リスト60には、作業開始時間の情報と作業終了時間の情報とが作業項目の情報に関連付けられている。映像提供部48は、作業開始時間の情報、作業終了時間の情報、および作業時間目安の情報などから作業が遅れている作業員Uを特定することができる。 In addition, the image providing unit 48 determines whether or not the work of the worker U is delayed, and provides the information of the current image of the worker U who is behind in the work to another worker U who inspects the same equipment 5 . can also be transmitted to the augmented reality device 2 of Thereby, the work status of other workers U can be confirmed by video. Based on the work list 60, the image providing unit 48 can identify the worker U whose work is delayed. Although not shown in FIG. 3, in the work list 60, work start time information and work end time information are associated with work item information. The image providing unit 48 can identify the worker U whose work is delayed based on the information on the work start time, the information on the work end time, the information on the estimated work time, and the like.

周辺情報提供部49は、情報取得部44で取得された入力情報が周囲状況要求情報である場合、入力情報を入力デバイス3へ入力した作業員Uが属する作業グループ以外の作業グループである他の作業グループにおける点検作業の進捗状況を判定する。以下、説明の便宜上、入力情報を入力デバイス3へ入力した作業員Uを入力作業員と記載する。 When the input information acquired by the information acquisition unit 44 is the surrounding situation request information, the peripheral information providing unit 49 selects another work group other than the work group to which the worker U who has input the input information to the input device 3 belongs. Determine the progress of inspection work in the work group. Hereinafter, for convenience of explanation, the worker U who has input the input information to the input device 3 is referred to as an input worker.

周辺情報提供部49は、判定した他の作業グループにおける点検作業の進捗状況を示す情報または点検作業の作業完了時刻を示す情報を入力作業員の拡張現実デバイス2にネットワーク4を介して送信する。点検作業の作業完了時刻は、他の作業グループにおいて全点検作業が終了すると予測される時刻であり、作業情報提供部43と同様の演算によって求められる。 The peripheral information providing unit 49 transmits information indicating the progress of the inspection work in the determined other work group or information indicating the work completion time of the inspection work to the input worker's augmented reality device 2 via the network 4 . The work completion time of the inspection work is the time when it is predicted that all the inspection work will be completed in other work groups, and is obtained by the same calculation as that of the work information providing unit 43 .

例えば、作業スケジュール情報61が図4に示す状態であり、入力作業員が作業員Uであるとする。この場合、周辺情報提供部49は、第1グループ以外の作業グループにおける点検作業の進捗状況を判定し、判定した点検作業の進捗状況を示す情報を作業員Uの拡張現実デバイス2にネットワーク4を介して送信することができる。また、周辺情報提供部49は、第1グループ以外の作業グループの作業完了時刻を予測し、作業完了時刻を示す情報を作業員Uの拡張現実デバイス2にネットワーク4を介して送信することができる。 For example, assume that the work schedule information 61 is in the state shown in FIG. 4 and the input worker is worker U1. In this case, the peripheral information providing unit 49 determines the progress of the inspection work in the work groups other than the first group, and transmits information indicating the determined progress of the inspection work to the augmented reality device 21 of the worker U1. 4 can be sent. In addition, the peripheral information providing unit 49 predicts the work completion time of work groups other than the first group, and transmits information indicating the work completion time to the augmented reality device 2 1 of the worker U 1 via the network 4 . can be done.

周辺情報提供部49は、作業リスト60と作業スケジュール情報61とに基づいて、各グループにおける点検作業の進捗状況を判定することができる。例えば、周辺情報提供部49は、作業開始時間の情報、作業終了時間の情報、および作業時間目安の情報などから各作業員Uの作業状況を判定し、各作業員Uの作業状況から各グループにおける点検作業の進捗状況を判定することができる。また、周辺情報提供部49は、作業リスト60と作業スケジュール情報61とに基づいて、各グループにおける点検作業の進捗状況を判定し、各グループにおける点検作業の進捗状況から各グループにおける点検作業の作業完了時刻を予測することができる。 Based on the work list 60 and the work schedule information 61, the peripheral information providing unit 49 can determine the progress of inspection work in each group. For example, the peripheral information providing unit 49 determines the work status of each worker U from the information on the work start time, the information on the work end time, the information on the estimated work time, and the like. It is possible to determine the progress of the inspection work in In addition, the peripheral information providing unit 49 determines the progress of the inspection work in each group based on the work list 60 and the work schedule information 61, and determines the progress of the inspection work in each group based on the progress of the inspection work in each group. Completion times can be predicted.

また、周辺情報提供部49は、入力情報によらず、各グループにおける点検作業の作業完了時刻に基づいて、点検作業の作業完了時刻を示す情報を通知する作業グループを決定することができる。 Further, the peripheral information providing unit 49 can determine the work group to which the information indicating the work completion time of the inspection work is notified based on the work completion time of the inspection work in each group, regardless of the input information.

例えば、周辺情報提供部49は、点検作業の作業完了時刻が早い作業グループの作業員Uの拡張現実デバイス2へ、点検作業の作業完了時刻が遅い作業グループの点検作業の作業完了時刻を示す情報を送信することができる。また、周辺情報提供部49は、点検作業の作業完了時刻が遅い作業グループの作業員Uの拡張現実デバイス2へ、点検作業の作業完了時刻が早い作業グループの点検作業の作業完了時刻を示す情報を送信することができる。 For example, the peripheral information providing unit 49 transmits information indicating the work completion time of the inspection work of the work group whose work completion time of the inspection work is late to the augmented reality device 2 of the worker U of the work group whose work completion time of the inspection work is early. can be sent. In addition, the peripheral information providing unit 49 transmits information indicating the work completion time of the inspection work of the work group whose work completion time of the inspection work is early to the augmented reality device 2 of the worker U of the work group whose work completion time of the inspection work is late. can be sent.

次に、点検作業支援装置1の動作についてさらに詳細に説明する。図11は、実施の形態1にかかる点検作業支援装置の処理の一例を示すフローチャートであり、点検作業支援装置1によって繰り返し実行される。 Next, the operation of the inspection work support device 1 will be described in further detail. FIG. 11 is a flowchart showing an example of processing of the inspection work support device according to the first embodiment, which is repeatedly executed by the inspection work support device 1. As shown in FIG.

図11に示すように、点検作業支援装置1の制御部12は、拡張現実デバイス2から映像情報を取得したか否かを判定する(ステップS11)。制御部12は、映像情報を取得したと判定した場合(ステップS11:Yes)、作業情報提供処理を行う(ステップS12)。かかるステップS12の処理は、図12に示すステップS21~S23の処理であり、後で詳述する。 As shown in FIG. 11, the control unit 12 of the inspection work support device 1 determines whether image information has been acquired from the augmented reality device 2 (step S11). When determining that the image information has been acquired (step S11: Yes), the control unit 12 performs work information provision processing (step S12). The processing of step S12 is the processing of steps S21 to S23 shown in FIG. 12, and will be described in detail later.

制御部12は、ステップS12の処理が終了した場合、または映像情報を取得していないと判定した場合(ステップS11:No)、入力デバイス3から入力情報を取得したか否かを判定する(ステップS13)。制御部12は、入力情報を取得したと判定した場合(ステップS13:Yes)、入力情報処理を行う(ステップS14)。かかるステップS14の処理は、図13に示すステップS31~S39の処理であり、後で詳述する。 When the processing of step S12 is completed, or when it is determined that the video information has not been acquired (step S11: No), the control unit 12 determines whether or not the input information has been acquired from the input device 3 (step S13). When determining that the input information has been acquired (step S13: Yes), the control unit 12 performs input information processing (step S14). The processing of step S14 is the processing of steps S31 to S39 shown in FIG. 13, and will be described in detail later.

制御部12は、ステップS14の処理が終了した場合、または入力情報を取得していないと判定した場合(ステップS13:No)、図11に示す処理を終了する。 When the process of step S14 is finished, or when it is determined that the input information is not acquired (step S13: No), the control part 12 finishes the process shown in FIG.

図12は、実施の形態1にかかる作業情報提供処理の一例を示すフローチャートである。図12に示すように、制御部12は、拡張現実デバイス2から取得した映像情報から映像に含まれる機器5、機器5の部位、または他の作業員Uを特定する(ステップS21)。 12 is a flowchart illustrating an example of work information provision processing according to the first embodiment; FIG. As shown in FIG. 12, the control unit 12 identifies the device 5, the part of the device 5, or another worker U included in the video from the video information acquired from the augmented reality device 2 (step S21).

制御部12は、特定した機器5、機器5の部位、または他の作業員Uに関する情報を作業リスト60から取得する(ステップS22)。そして、制御部12は、ステップS22で取得した情報を拡張現実デバイス2に送信する(ステップS23)。これにより、拡張現実デバイス2の撮像部22で撮像した映像に応じた作業の情報を拡張現実デバイス2の表示部21によって作業員Uに提示することができる。 The control unit 12 acquires information about the identified device 5, the part of the device 5, or another worker U from the work list 60 (step S22). Then, the control unit 12 transmits the information acquired in step S22 to the augmented reality device 2 (step S23). Thereby, the information of the work according to the video imaged by the imaging unit 22 of the augmented reality device 2 can be presented to the worker U by the display unit 21 of the augmented reality device 2 .

図13は、実施の形態1にかかる入力情報処理の一例を示すフローチャートである。図13に示すように、制御部12は、取得した入力情報が作業状況更新情報であるか否かを判定する(ステップS31)。制御部12は、入力情報が作業状況更新情報であると判定した場合(ステップS31:Yes)、作業状況更新情報で特定される作業状況が作業開始であるか否かを判定する(ステップS32)。 13 is a flowchart illustrating an example of input information processing according to the first embodiment; FIG. As shown in FIG. 13, the control unit 12 determines whether the acquired input information is work status update information (step S31). When the control unit 12 determines that the input information is the work status update information (step S31: Yes), it determines whether or not the work status specified by the work status update information is work start (step S32). .

制御部12は、作業状況が作業開始であると判定した場合(ステップS32:Yes)、作業リスト60から同時作業禁止項目情報を取得する(ステップS33)。同時作業禁止項目情報は、作業状況更新情報で特定される作業項目に関連付けられた禁止項目IDの作業項目の作業状況を示す情報である。 When the control unit 12 determines that the work status indicates that work has started (step S32: Yes), the control unit 12 acquires simultaneous work prohibited item information from the work list 60 (step S33). The simultaneous work prohibited item information is information indicating the work status of the work item of the prohibited item ID associated with the work item specified by the work status update information.

制御部12は、着手作業が同時作業禁止の作業であるか否かを判定する(ステップS34)。着手作業とは、作業状況更新情報で特定される作業項目の作業であり、同時作業禁止の作業とは、着手作業が行われる対象機器と同一の機器5において、着手作業と同時に作業を行うことが禁止されている作業である。 The control unit 12 determines whether or not the work to be started is work for which simultaneous work is prohibited (step S34). The starting work is the work of the work item specified by the work status update information, and the simultaneous work prohibited work is to perform the work at the same time as the starting work in the same equipment 5 as the target equipment where the starting work is performed. is prohibited work.

制御部12は、着手作業が同時作業禁止の作業ではないと判定した場合(ステップS34:No)、または、作業状況が作業開始でないと判定した場合(ステップS32:No)、取得した作業状況更新情報に基づいて作業リスト60を更新する(ステップS35)。そして、制御部12は、入力作業員の拡張現実デバイス2と同一の機器5を点検する作業員Uの拡張現実デバイス2に更新した作業リスト60に含まれる情報を送信する(ステップS36)。 If the control unit 12 determines that the work to be started is not work that prohibits simultaneous work (step S34: No), or if it determines that the work status is not to start work (step S32: No), it updates the acquired work status. The work list 60 is updated based on the information (step S35). Then, the control unit 12 transmits the information included in the updated work list 60 to the augmented reality device 2 of the worker U who inspects the same device 5 as the augmented reality device 2 of the input worker (step S36).

制御部12は、着手作業が同時作業禁止の作業であると判定した場合(ステップS34:Yes)、入力作業員の拡張現実デバイス2に作業不可通知の情報を送信する(ステップS37)。また、制御部12は、入力作業員以外の作業員Uの拡張現実デバイス2に作業不可通知を含む情報を送信する(ステップS38)。 If the control unit 12 determines that the start work is work that prohibits simultaneous work (step S34: Yes), the control unit 12 transmits information of work impossibility notification to the input worker's augmented reality device 2 (step S37). In addition, the control unit 12 transmits information including the work impossibility notification to the augmented reality devices 2 of workers U other than the input worker (step S38).

制御部12は、入力情報が作業状況更新情報ではないと判定した場合(ステップS31:No)、入力情報に応じた情報を入力作業員の拡張現実デバイス2に送信する(ステップS39)。制御部12は、ステップS36の処理が終了した場合、ステップS38の処理が終了した場合、またはステップS39の処理が終了した場合、図13に示す処理を終了する。 When the control unit 12 determines that the input information is not the work status update information (step S31: No), it transmits information corresponding to the input information to the input worker's augmented reality device 2 (step S39). When the process of step S36 ends, when the process of step S38 ends, or when the process of step S39 ends, the control unit 12 ends the process shown in FIG.

図14は、実施の形態1にかかる点検作業支援装置のハードウェア構成の一例を示す図である。図14に示すように、点検作業支援装置1は、プロセッサ101と、メモリ102と、インタフェース回路103とを備えるコンピュータを含む。 14 is a diagram illustrating an example of a hardware configuration of the inspection work support device according to the first embodiment; FIG. As shown in FIG. 14 , inspection work support device 1 includes a computer having processor 101 , memory 102 , and interface circuit 103 .

プロセッサ101、メモリ102およびインタフェース回路103は、バス104によって互いにデータの送受信が可能である。記憶部11は、メモリ102によって実現される。通信部10は、インタフェース回路103によって実現される。プロセッサ101は、メモリ102に記憶されたプログラムを読み出して実行することによって、映像取得部41、特定部42、作業情報提供部43、情報取得部44、リスト更新部45、更新情報提供部46、作業禁止通知部47、映像提供部48、および周辺情報提供部49の機能を実行する。プロセッサ101は、処理回路の一例であり、CPU(Central Processing Unit)、DSP(Digital Signal Processer)、およびシステムLSI(Large Scale Integration)のうち一つ以上を含む。 Processor 101 , memory 102 and interface circuit 103 can transmit and receive data to and from each other via bus 104 . Storage unit 11 is realized by memory 102 . Communication unit 10 is realized by interface circuit 103 . The processor 101 reads out and executes the programs stored in the memory 102 to obtain a video acquisition unit 41, a specification unit 42, a work information provision unit 43, an information acquisition unit 44, a list update unit 45, an update information provision unit 46, It executes the functions of the work prohibition notification unit 47, the image providing unit 48, and the peripheral information providing unit 49. The processor 101 is an example of a processing circuit and includes one or more of a CPU (Central Processing Unit), a DSP (Digital Signal Processor), and a system LSI (Large Scale Integration).

メモリ102は、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、およびEPROM(Erasable Programmable Read Only Memory)のうち一つ以上を含む。また、メモリ102は、コンピュータが読み取り可能な上述のプログラムが記録された記録媒体を含む。かかる記録媒体は、不揮発性または揮発性の半導体メモリ、磁気ディスク、フレキシブルメモリ、光ディスク、コンパクトディスク、およびDVDのうち一つ以上を含む。なお、点検作業支援装置1は、ASIC(Application Specific Integrated Circuit)およびFPGA(Field Programmable Gate Array)などの集積回路を含んでいてもよい。 The memory 102 includes one or more of RAM (Random Access Memory), ROM (Read Only Memory), flash memory, and EPROM (Erasable Programmable Read Only Memory). The memory 102 also includes a recording medium in which the computer-readable program described above is recorded. Such recording media include one or more of nonvolatile or volatile semiconductor memories, magnetic disks, flexible memories, optical disks, compact disks, and DVDs. Note that the inspection work support device 1 may include integrated circuits such as an ASIC (Application Specific Integrated Circuit) and an FPGA (Field Programmable Gate Array).

以上のように、実施の形態1にかかる点検作業支援装置1は、記憶部11と、作業情報提供部43と、情報取得部44と、リスト更新部45と、更新情報提供部46とを備える。記憶部11は、作業員Uと作業員Uを含む複数の作業員Uによる点検作業の対象である機器5の作業項目がリスト化された情報を含む作業リスト60を記憶する。作業員Uは第1作業員の一例であり、作業員Uは、第2作業員の一例である。作業情報提供部43は、作業リスト60に含まれる作業項目の情報を記憶部11から取得し、取得した作業項目の情報を複数の作業員Uの各々の拡張現実デバイス2へ送信する。情報取得部44は、作業員Uの作業状況を示す情報を含む入力情報を作業員Uの入力デバイス3から取得する。リスト更新部45は、情報取得部44によって取得された入力情報に基づいて、作業項目の情報に作業員Uの作業状況を示す作業状況情報を関連付けて作業リスト60を更新する。更新情報提供部46は、リスト更新部45によって更新された作業リスト60に含まれる作業状況情報を作業員Uが有する拡張現実デバイス2へ送信する。これにより、作業員Uに適切な作業調整を行うための情報を提供することができる。そのため、各作業員Uは、他の作業員Uの作業状況を考慮して自作業を遂行でき、複数人で行う点検作業の効率性および伝達性を向上させることができる。 As described above, the inspection work support device 1 according to the first embodiment includes the storage unit 11, the work information providing unit 43, the information acquiring unit 44, the list updating unit 45, and the update information providing unit 46. . The storage unit 11 stores a work list 60 including information in which work items of the equipment 5 to be inspected by a plurality of workers U including workers U1 and U2 are listed. Worker U1 is an example of a first worker, and worker U2 is an example of a second worker. The work information providing unit 43 acquires work item information included in the work list 60 from the storage unit 11 and transmits the acquired work item information to the augmented reality device 2 of each of the plurality of workers U. FIG. The information acquisition unit 44 acquires input information including information indicating the work status of the worker U1 from the input device 3-1 of the worker U1 . Based on the input information acquired by the information acquisition unit 44, the list update unit 45 updates the work list 60 by associating the work item information with the work situation information indicating the work situation of the worker U1 . The update information providing unit 46 transmits the work status information included in the work list 60 updated by the list updating unit 45 to the augmented reality device 22 owned by the worker U2. Thereby, the worker U can be provided with information for appropriately adjusting the work. Therefore, each worker U can perform his/her own work in consideration of the work situation of other workers U, and can improve efficiency and transferability of inspection work performed by a plurality of workers.

また、作業リスト60において、作業項目の情報に優先度の情報が関連付けられている。作業情報提供部43は、優先度の情報に基づいて、拡張現実デバイス2へ送信する作業項目の情報を選択し、選択した作業項目の情報を拡張現実デバイス2へ送信する。これにより、効率的に作業項目の情報を拡張現実デバイス2へ送信することができる。 In the work list 60, priority information is associated with work item information. The work information providing unit 43 selects work item information to be transmitted to the augmented reality device 2 based on the priority information, and transmits the selected work item information to the augmented reality device 2 . Thereby, the work item information can be efficiently transmitted to the augmented reality device 2 .

また、点検作業支援装置1は、作業員Uが行っている点検作業と同時に点検作業することが禁止される作業を作業員Uが行うことを禁止する通知を作業員Uの拡張現実デバイス2へ通知する作業禁止通知部47を備える。これにより、複数の作業員Uで作業をする際、一方の作業員Uが他方の作業員Uの作業項目と同時作業が禁止されている作業項目の作業に着手しようとした場合に、作業不可であることが自動的に一方の作業員Uに通知される。そのため、より点検作業の効率性および伝達性を向上させることができる。 In addition, the inspection work support device 1 notifies the worker U1 of prohibiting the worker U1 from performing the work that is prohibited from performing the inspection work at the same time as the inspection work being performed by the worker U2 . A work prohibition notification unit 47 is provided for notifying the device 21 . As a result, when a plurality of workers U are working, if one worker U tries to start a work item for which simultaneous work with the work item of the other worker U is prohibited, the work is prohibited. One worker U is automatically notified that Therefore, the efficiency and transferability of inspection work can be improved.

また、点検作業支援装置1は、映像取得部41と、特定部42とを備える。映像取得部41は、各作業員Uが有する拡張現実デバイス2に設けられた撮像部22が撮像した映像の情報を取得する。特定部42は、映像取得部41によって取得された映像の情報に基づいて、映像に含まれる機器5を特定する。作業情報提供部43は、特定部42によって特定された機器5の作業リストに含まれる作業項目の情報を記憶部11から取得し、取得した作業項目の情報を拡張現実デバイス2へ送信する。これにより、作業員Uからの作業対象とする機器の入力を行うことなく、作業員Uが点検作業を行う機器5の作業項目の情報を作業員Uに提供することができる。 The inspection work support device 1 also includes an image acquisition unit 41 and an identification unit 42 . The video acquisition unit 41 acquires information of video captured by the imaging unit 22 provided in the augmented reality device 2 of each worker U. The identification unit 42 identifies the device 5 included in the image based on the information of the image acquired by the image acquisition unit 41 . The work information providing unit 43 acquires information on work items included in the work list of the device 5 specified by the specifying unit 42 from the storage unit 11 and transmits the acquired information on the work items to the augmented reality device 2 . As a result, the worker U can be provided with information on the work items of the device 5 that the worker U inspects, without inputting the device to be worked on from the worker U.

また、特定部42は、映像取得部41によって取得された映像の情報に基づいて、映像に含まれる他の作業員Uを特定する。作業情報提供部43は、特定部42によって特定された他の作業員Uによる点検作業の状況を示す情報を、映像の情報を送信した作業員Uの拡張現実デバイス2へ送信する。これにより、作業員Uは、他の作業員Uの作業状況を容易に把握することができる。 Further, the specifying unit 42 specifies another worker U included in the video based on the information of the video acquired by the video acquiring unit 41 . The work information providing unit 43 transmits information indicating the status of the inspection work by the other worker U identified by the identifying unit 42 to the augmented reality device 2 of the worker U who transmitted the video information. Thereby, the worker U can easily grasp the work status of the other workers U.

また、特定部42は、映像取得部41によって取得された映像の情報に基づいて、映像に含まれる対象機器の部位を特定する。作業情報提供部43は、特定部42によって特定された部位における点検作業の状況を示す情報を、映像の情報を送信した拡張現実デバイス2へ送信する。これにより、作業員Uは、対象機器のうち撮像部22で撮像された部位の作業状況を容易に把握することができる。 Further, the identifying unit 42 identifies the part of the target device included in the image based on the information of the image acquired by the image acquiring unit 41 . The work information providing unit 43 transmits information indicating the status of inspection work on the site identified by the identifying unit 42 to the augmented reality device 2 that transmitted the video information. Accordingly, the worker U can easily grasp the work status of the part of the target equipment imaged by the imaging unit 22 .

また、拡張現実デバイス2は、スマートグラスまたはタブレット端末である。拡張現実デバイス2をスマートグラスとすることで、作業員Uは拡張現実デバイス2を手に持たずに点検作業を行うことができる。また、拡張現実デバイス2をタブレット端末とすることで、例えば、多機能のタブレット端末をさらに有効に活用することができる。 Also, the augmented reality device 2 is smart glasses or a tablet terminal. By using smart glasses as the augmented reality device 2, the worker U can perform inspection work without holding the augmented reality device 2 in hand. Further, by using a tablet terminal as the augmented reality device 2, for example, a multifunctional tablet terminal can be used more effectively.

実施の形態2.
実施の形態2では、作業リストにおける優先度の情報を変更することができる点で、実施の形態1と異なる。以下においては、実施の形態1にかかる点検作業支援システム100と同様の構成については同一符号を付して説明を省略し、実施の形態1にかかる点検作業支援システム100と異なる構成について主に説明するものとする。
Embodiment 2.
The second embodiment differs from the first embodiment in that the priority information in the work list can be changed. In the following, configurations similar to those of the inspection work support system 100 according to the first embodiment are denoted by the same reference numerals, and descriptions thereof are omitted, and configurations different from the inspection work support system 100 according to the first embodiment are mainly described. It shall be.

図15は、本発明の実施の形態2にかかる点検作業支援システムおよび端末装置の構成例を示す図である。図15に示すように、実施の形態2にかかる点検作業支援システム100Aは、点検作業支援装置1Aと、拡張現実デバイス2と、入力デバイス3と、端末装置6とを備える。点検作業支援装置1Aは、ネットワーク4を介して、拡張現実デバイス2、入力デバイス3、および端末装置6と通信可能に接続される。 FIG. 15 is a diagram showing a configuration example of an inspection work support system and a terminal device according to a second embodiment of the present invention. As shown in FIG. 15, an inspection work support system 100A according to the second embodiment includes an inspection work support device 1A, an augmented reality device 2, an input device 3, and a terminal device 6. The inspection work support device 1A is communicably connected to the augmented reality device 2, the input device 3, and the terminal device 6 via the network 4. FIG.

端末装置6は、通信部65と、表示部66と、入力部67と、制御部68とを備える。通信部65は、ネットワーク4と通信可能に接続される。制御部68は、通信部65およびネットワーク4を介して点検作業支援装置1Aとの間で情報の送受信を行うことができる。 The terminal device 6 includes a communication section 65 , a display section 66 , an input section 67 and a control section 68 . The communication unit 65 is communicably connected to the network 4 . The control unit 68 can transmit and receive information to and from the inspection work support device 1A via the communication unit 65 and the network 4 .

制御部68は、点検作業の管理者が入力部67へ入力した情報である入力情報を取得し、取得した入力情報を通信部65から点検作業支援装置1Aへ送信する。また、制御部68は、点検作業支援装置1Aからの情報を通信部65経由で取得し、取得した情報に基づく画像を表示部66に表示する。 The control unit 68 acquires input information that is information input to the input unit 67 by the inspection work manager, and transmits the acquired input information from the communication unit 65 to the inspection work support device 1A. Further, the control unit 68 acquires information from the inspection work support device 1A via the communication unit 65, and displays an image based on the acquired information on the display unit 66. FIG.

点検作業支援装置1Aは、通信部10と、記憶部11Aと、制御部12Aとを備える。記憶部11Aは、作業リスト60、作業スケジュール情報61、および映像情報62に加え、機器情報63および優先度変更情報64を記憶する。機器情報63には、機器5の機器名を示す情報などが含まれる。優先度変更情報64には、管理者による優先度の変更履歴を示す情報が含まれる。制御部12Aは、図2に示す制御部12の構成に加え、作業リスト提供部50および優先度変更部51を備える。 The inspection work support device 1A includes a communication section 10, a storage section 11A, and a control section 12A. Storage unit 11A stores device information 63 and priority change information 64 in addition to work list 60 , work schedule information 61 , and video information 62 . The device information 63 includes information indicating the device name of the device 5 and the like. The priority change information 64 includes information indicating a history of priority changes made by the administrator. The control unit 12A includes a work list providing unit 50 and a priority changing unit 51 in addition to the configuration of the control unit 12 shown in FIG.

端末装置6の制御部68は、端末装置6の入力部67への操作によって作業リストを要求する情報を含む作業リスト要求情報が入力された場合、かかる作業リスト要求情報を入力情報としてネットワーク4を介して点検作業支援装置1Aへ送信する。点検作業支援装置1Aの作業リスト提供部50は、情報取得部44によって取得された入力情報が端末装置6から送信された作業リスト要求情報である場合、作業リスト60および機器情報63を記憶部11Aから取得する。 When work list request information including information requesting a work list is input by operating the input unit 67 of the terminal device 6, the control unit 68 of the terminal device 6 transmits the work list request information to the network 4 as input information. to the inspection work support device 1A. When the input information acquired by the information acquisition unit 44 is the work list request information transmitted from the terminal device 6, the work list provision unit 50 of the inspection work support device 1A stores the work list 60 and the equipment information 63 in the storage unit 11A. Get from

作業リスト提供部50は、作業リスト60および機器情報63を取得すると、取得した作業リスト60および機器情報63を含む情報を端末装置6に送信する。端末装置6の制御部68は、ネットワーク4を介して点検作業支援装置1Aから作業リスト60および機器情報63を含む情報を取得し、取得した機器情報63を含む機器リスト表示画面を表示部66に表示する。 After acquiring the work list 60 and the device information 63 , the work list providing unit 50 transmits information including the acquired work list 60 and the device information 63 to the terminal device 6 . The control unit 68 of the terminal device 6 acquires information including the work list 60 and the device information 63 from the inspection work support device 1A via the network 4, and displays a device list display screen including the acquired device information 63 on the display unit 66. indicate.

図16は、実施の形態2にかかる端末装置の表示部に表示される機器リスト表示画面の一例を示す図である。図16に示す機器リスト表示画面94には、設備における複数の機器5~5を示す機器アイコン95~95が含まれる。なお、図16に示す例では、n=10である。以下、機器アイコン95~95の各々を区別せずに示す場合、機器アイコン95と記載する。 16 is a diagram of an example of a device list display screen displayed on the display unit of the terminal device according to the second embodiment; FIG. A device list display screen 94 shown in FIG. 16 includes device icons 95 1 to 95 n indicating a plurality of devices 5 1 to 5 n in the facility. Note that n=10 in the example shown in FIG. Hereinafter, when each of the device icons 95 1 to 95 n is shown without distinction, it will be referred to as a device icon 95 .

図17は、実施の形態2にかかる機器リスト表示画面に選択された機器の作業リストが表示された状態を示す図である。各機器アイコン95~95は、機器5~5のうち対応する機器5の作業リストが関連付けられており、制御部68は、端末装置6の入力部67への操作によって機器アイコン95を選択すると、図17に示すように、機器5の作業リスト画像96を表示部66に表示する。図17に示す作業リスト画像96では、作業項目の情報毎に優先度の情報が関連付けられており、管理者は、端末装置6の入力部67を操作することで、作業項目の優先度を変更することができる。 FIG. 17 is a diagram showing a state in which the work list of the selected device is displayed on the device list display screen according to the second embodiment. Each of the device icons 95 1 to 95 n is associated with the work list of the corresponding device 5 among the devices 5 1 to 5 n . When 1 is selected, a work list image 96 of the device 51 is displayed on the display section 66 as shown in FIG. In the work list image 96 shown in FIG. 17, priority information is associated with each piece of work item information. can do.

図18は、実施の形態2にかかる作業項目の優先度を変更するための操作の一例を示す図である。図18に示すように、機器名「盤001」の機器5において作業員Uが未着手の作業項目の作業順序を早めたい場合、入力部67を用いて作業項目の情報をドラッグアンドドロップ操作することによって、作業項目の優先度を変更することができる。 FIG. 18 is a diagram depicting an example of an operation for changing the priority of work items according to the second embodiment; As shown in FIG. 18, when the worker U wishes to advance the work order of the unstarted work items in the equipment 5-1 with the equipment name “panel 001”, the input unit 67 is used to perform a drag-and-drop operation on the work item information. You can change the priority of a work item by doing

図18に示す例では、作業リスト画像96において、優先度が「9」である作業項目「パイプの汚れ有無」の優先度が「5」に変更され、それに伴い、優先度「5」~「8」であった作業項目の優先度が「6」~「9」に変更される様子を示している。制御部68は、作業項目の情報が移動されると、作業リスト画像96を変更すると共に、かかる移動を確定するか否かを問い合わせるメッセージボックス97を表示部66に表示する。メッセージボックス97には、変更を確定するためのボタン98と、変更を確定させないボタン99とが含まれる。 In the example shown in FIG. 18, in the work list image 96, the priority of the work item "presence or absence of dirt on the pipe" whose priority is "9" is changed to "5". 8” is changed to “6” to “9”. When the work item information is moved, the control unit 68 changes the work list image 96 and displays on the display unit 66 a message box 97 asking whether to confirm the movement. The message box 97 includes a button 98 for confirming the change and a button 99 for not confirming the change.

制御部68は、管理者が図18に示すボタン98を操作すると、作業項目の優先度を入れ替えるための優先度変更情報を点検作業支援装置1Aへ送信する。優先度変更情報には、優先度を入れ替えた後の作業項目の情報と優先度の情報とが互いに関連付けられた情報が含まれる。点検作業支援装置1Aの情報取得部44は、端末装置6からネットワーク4を介して優先度変更情報を取得し、取得した優先度変更情報を一時的に記憶部11Aの優先度変更情報64に追加して記憶する。 When the administrator operates the button 98 shown in FIG. 18, the control unit 68 transmits priority change information for changing the priority of the work item to the inspection work support device 1A. The priority change information includes information in which the information of the work item after the exchange of the priority and the information of the priority are associated with each other. The information acquisition unit 44 of the inspection work support device 1A acquires priority change information from the terminal device 6 via the network 4, and temporarily adds the acquired priority change information to the priority change information 64 of the storage unit 11A. and memorize it.

更新情報提供部46は、管理者によって変更された優先度に基づいて、作業項目の情報および作業状況を示す情報を拡張現実デバイス2へ送信する。これにより、管理者によって変更された優先度で作業項目の情報を作業員Uへ提供することができる。 The update information providing unit 46 transmits information on the work item and information indicating the work status to the augmented reality device 2 based on the priority changed by the administrator. Thereby, the information of the work item can be provided to the worker U with the priority changed by the manager.

次に、優先度変更部51は、記憶部11Aに記憶された優先度変更情報64に基づいて、各作業項目について、優先度の変更回数が予め設定された回数を超えると判定した場合、作業リスト60に含まれる作業項目の優先度を変更する。 Next, based on the priority change information 64 stored in the storage unit 11A, the priority change unit 51 determines that the number of priority changes exceeds a preset number of times for each work item. Change the priority of the work items contained in the list 60 .

例えば、優先度変更部51は、項目ID「I009」の優先度が「9」から「5」への変更回数が閾値TH1を超えた場合、項目ID「I009」の優先度を「5」にする。また、優先度変更部51は、項目ID「I009」の優先度の変更回数が閾値TH1を超えた場合、変更される回数が最も多い優先度を項目ID「I009」の優先度とすることもできる。例えば、優先度が「9」から「6」へ変更される回数が最も多い場合、項目ID「I009」の優先度を「6」にする。 For example, when the number of times the priority of the item ID "I009" is changed from "9" to "5" exceeds the threshold TH1, the priority changing unit 51 changes the priority of the item ID "I009" to "5". do. Further, when the number of times the priority of the item ID "I009" has been changed exceeds the threshold value TH1, the priority change unit 51 may set the priority with the largest number of times of change as the priority of the item ID "I009". can. For example, if the number of times the priority is changed from "9" to "6" is the largest, the priority of the item ID "I009" is set to "6".

また、優先度変更部51は、各作業項目について、予め設定された期間において優先度の変更回数が予め設定された回数を超える場合に、作業リスト60に含まれる作業項目の優先度を変更することもできる。例えば、優先度変更部51は、3ヶ月の間に、項目ID「I009」の優先度が「9」から「5」への変更回数が閾値TH1を超えた場合、上述の処理と同様に、項目ID「I009」の優先度を変更する。 In addition, the priority changing unit 51 changes the priority of the work items included in the work list 60 when the number of priority changes exceeds a preset number of times in a preset period for each work item. can also For example, if the number of times the priority of the item ID "I009" is changed from "9" to "5" exceeds the threshold TH1 in three months, the priority changing unit 51 performs Change the priority of the item ID "I009".

なお、優先度変更部51は、全作業項目における優先度の変更回数が予め設定された回数を超えると判定した場合に、作業リスト60に含まれる作業項目の優先度を変更することもできる。この場合、優先度変更部51は、作業が実施された各作業項目の優先度の平均値を演算し、演算した平均値が小さいほど優先度が高くなるように、作業項目の優先度を変更することができる。なお、平均値の演算に用いられる各作業項目の優先度は、優先度が変更された場合には変更後の優先度である。 Note that the priority changing unit 51 can also change the priority of the work items included in the work list 60 when it determines that the number of priority changes for all work items exceeds a preset number. In this case, the priority changing unit 51 calculates the average value of the priority of each work item for which work has been performed, and changes the priority of the work item so that the smaller the calculated average value, the higher the priority. can do. Note that the priority of each work item used for calculating the average value is the priority after the change when the priority is changed.

次に、点検作業支援装置1Aの動作についてさらに詳細に説明する。図19は、実施の形態2にかかる点検作業支援装置の処理の一例を示すフローチャートであり、点検作業支援装置1Aによって繰り返し実行される。なお、図19に示すステップS11~S13の処理は、図11に示すステップS11~S13の処理と同じである。 Next, the operation of the inspection work support device 1A will be described in further detail. FIG. 19 is a flowchart showing an example of processing of the inspection work support device according to the second embodiment, which is repeatedly executed by the inspection work support device 1A. The processing of steps S11 to S13 shown in FIG. 19 is the same as the processing of steps S11 to S13 shown in FIG.

図19に示すように、制御部12Aは、入力情報を取得したと判定した場合(ステップS13:Yes)、入力情報処理を行う(ステップS14A)。かかるステップS14Aは、図13に示すステップS38の処理以外は、図13と同じである。ステップS38において、制御部12Aは、入力情報が作業リスト要求情報である場合、作業リスト60および機器情報63を記憶部11Aから取得し、取得した作業リスト60および機器情報63を含む情報を端末装置6に送信する。これにより、端末装置6において、例えば、図16に示す機器リスト表示画面94が表示される。 As shown in FIG. 19, when the control unit 12A determines that input information has been acquired (step S13: Yes), it performs input information processing (step S14A). This step S14A is the same as in FIG. 13 except for the processing in step S38 shown in FIG. In step S38, if the input information is work list request information, the control unit 12A acquires the work list 60 and the device information 63 from the storage unit 11A, and sends information including the acquired work list 60 and the device information 63 to the terminal device. Send to 6. As a result, for example, a device list display screen 94 shown in FIG. 16 is displayed on the terminal device 6 .

制御部12Aは、ステップS14Aの処理が終了した場合、または入力情報を取得していないと判定した場合(ステップS13:No)、優先度変更情報を取得したか否かを判定する(ステップS15)。制御部12Aは、優先度変更情報を取得したと判定した場合(ステップS15:Yes)、優先度変更処理を行う(ステップS16)。ステップS16の処理は、図20に示すステップS41~S44の処理であり、後で詳述する。制御部12Aは、ステップS16の処理が終了した場合、または優先度変更情報を取得していないと判定した場合(ステップS15:No)、図19に示す処理を終了する。 When the process of step S14A is finished, or when it is determined that the input information has not been acquired (step S13: No), the control unit 12A determines whether or not the priority change information has been acquired (step S15). . When determining that the priority change information has been acquired (step S15: Yes), the control unit 12A performs priority change processing (step S16). The process of step S16 is the process of steps S41 to S44 shown in FIG. 20, and will be described in detail later. When the process of step S16 is finished, or when it is determined that the priority change information is not acquired (step S15: No), the control part 12A finishes the process shown in FIG.

図20は、実施の形態2にかかる優先度変更処理の一例を示すフローチャートである。図20に示すように、制御部12Aは、端末装置6から取得した優先度変更情報を記憶部11Aの優先度変更情報64に追加することで優先度変更情報を記憶部11Aに記憶し(ステップS41)、端末装置6から取得した優先度変更情報と記憶部11Aに記憶された作業リスト60とに基づいて、関連付けられる優先度の情報が変更された作業項目の情報を拡張現実デバイス2に送信する(ステップS42)。 20 is a flowchart illustrating an example of priority change processing according to the second embodiment; FIG. As shown in FIG. 20, the control unit 12A stores the priority change information in the storage unit 11A by adding the priority change information acquired from the terminal device 6 to the priority change information 64 in the storage unit 11A (step S41), based on the priority change information acquired from the terminal device 6 and the work list 60 stored in the storage unit 11A, information on the work item whose associated priority information has been changed is transmitted to the augmented reality device 2. (step S42).

次に、制御部12Aは、優先度の変更回数が閾値TH1を超えるか否かを判定する(ステップS43)。制御部12Aは、優先度の変更回数が閾値TH1を超えると判定した場合(ステップS43:Yes)、記憶部11Aに記憶した作業リスト60を更新する(ステップS44)。制御部12Aは、ステップS44の処理において、作業リスト60に含まれる作業項目の情報のうち優先度の変更回数が閾値TH1を超える作業項目の情報に関連付けられる優先度の情報を変更する。制御部12Aは、ステップS44の処理が終了した場合、または優先度の変更回数が閾値TH1を超えないと判定した場合(ステップS43:No)、図20に示す処理を終了する。 Next, the control unit 12A determines whether or not the number of priority changes exceeds the threshold TH1 (step S43). If the control unit 12A determines that the priority change count exceeds the threshold TH1 (step S43: Yes), the control unit 12A updates the work list 60 stored in the storage unit 11A (step S44). In the process of step S44, the control unit 12A changes the priority information associated with the information on the work items whose priority change count exceeds the threshold TH1 among the information on the work items included in the work list 60 . When the process of step S44 ends, or when it is determined that the number of priority changes does not exceed the threshold TH1 (step S43: No), the control unit 12A ends the process shown in FIG.

なお、実施の形態2にかかる点検作業支援装置1Aのハードウェア構成例は、実施の形態1にかかる点検作業支援装置1と同じである。例えば、図14に示すプロセッサ101は、メモリ102に記憶されたプログラムを読み出して実行することによって、作業リスト提供部50および優先度変更部51の機能を実行することができる。 A hardware configuration example of the inspection work support device 1A according to the second embodiment is the same as that of the inspection work support device 1 according to the first embodiment. For example, processor 101 shown in FIG. 14 can perform the functions of work list providing unit 50 and priority changing unit 51 by reading and executing programs stored in memory 102 .

以上のように、実施の形態2にかかる点検作業支援装置1Aは、記憶部11Aから作業リスト60を点検作業の管理者の端末装置6へ提供する作業リスト提供部50を備える。情報取得部44は、作業リストに含まれる作業項目の情報に関連付けられる優先度の情報を変更する優先度変更情報64を取得する。更新情報提供部46は、優先度変更情報64に基づいて優先度の情報が変更された作業項目の情報を拡張現実デバイス2へ送信する。これにより、管理者は、作業員Uの作業状況を把握し、次に行うべき作業項目を作業員Uへ指示することができ、より点検作業の効率性および伝達性を向上させることができる。 As described above, the inspection work support device 1A according to the second embodiment includes the work list providing unit 50 that provides the work list 60 from the storage unit 11A to the terminal device 6 of the inspection work manager. The information acquisition unit 44 acquires priority change information 64 for changing priority information associated with work item information included in the work list. The update information providing unit 46 transmits to the augmented reality device 2 information about the work items whose priority information has been changed based on the priority change information 64 . As a result, the manager can grasp the work status of the worker U and can instruct the worker U on the work item to be performed next, thereby further improving the efficiency and transferability of the inspection work.

また、記憶部11Aは、情報取得部44によって取得された優先度変更情報64を記憶する。優先度変更部51は、記憶部11Aに記憶された優先度変更情報に基づいて、優先度の情報の変更回数が予め設定された回数を超えると判定した場合、変更回数が予め設定された回数を超える優先度の情報を変更する。これにより、管理者が一定回数を超えて作業順序を変更した機器5に対し、点検作業支援装置1Aが自動的に作業の順序を調整することができるため、管理者による作業調整の手間を軽減することができる。 The storage unit 11A also stores the priority change information 64 acquired by the information acquisition unit 44 . If priority change unit 51 determines that the number of changes in priority information exceeds the preset number of times based on the priority change information stored in storage unit 11A, priority change unit 51 changes the number of changes to the preset number of times. Change information with a priority greater than . As a result, the inspection work support device 1A can automatically adjust the work order for the equipment 5 for which the manager has changed the work order more than a certain number of times, thereby reducing the work adjustment work by the manager. can do.

なお、上述した例では、拡張現実デバイス2と入力デバイス3とを別体として説明したが、拡張現実デバイス2と入力デバイス3とは一体的に構成されてもよい。例えば、拡張現実デバイス2および入力デバイス3を含む装置は、拡張現実デバイス2と入力デバイス3とを一体的に構成したタブレット端末であってもよい。 In the example described above, the augmented reality device 2 and the input device 3 are described as separate entities, but the augmented reality device 2 and the input device 3 may be configured integrally. For example, a device including the augmented reality device 2 and the input device 3 may be a tablet terminal in which the augmented reality device 2 and the input device 3 are integrated.

以上の実施の形態に示した構成は、本発明の内容の一例を示すものであり、別の公知の技術と組み合わせることも可能であるし、本発明の要旨を逸脱しない範囲で、構成の一部を省略、変更することも可能である。 The configuration shown in the above embodiment shows an example of the content of the present invention, and it is possible to combine it with another known technology, and one configuration can be used without departing from the scope of the present invention. It is also possible to omit or change the part.

1,1A 点検作業支援装置、2,2~2 拡張現実デバイス、3,3~3 入力デバイス、4 ネットワーク、5,5~5 機器、6 端末装置、10,20,30,65 通信部、11,11A 記憶部、12,12A,23,68 制御部、21,66 表示部、22 撮像部、31,67 入力部、41 映像取得部、42 特定部、43 作業情報提供部、44 情報取得部、45 リスト更新部、46 更新情報提供部、47 作業禁止通知部、48 映像提供部、49 周辺情報提供部、50 作業リスト提供部、51 優先度変更部、60 作業リスト、61 作業スケジュール情報、62 映像情報、63,71,81 機器情報、64 優先度変更情報、70,80,80A,96 作業リスト画像、72~75,82~87 作業情報、90,91,92 画像、94 機器リスト表示画面、95,95~95 機器アイコン、97 メッセージボックス、98,99 ボタン、100,100A 点検作業支援システム、U,U~U 作業員。 1, 1A inspection work support device, 2, 2 1 to 2 n augmented reality device, 3, 3 1 to 3 n input device, 4 network, 5, 5 1 to 5 m equipment, 6 terminal device, 10, 20, 30 , 65 communication unit, 11, 11A storage unit, 12, 12A, 23, 68 control unit, 21, 66 display unit, 22 imaging unit, 31, 67 input unit, 41 image acquisition unit, 42 identification unit, 43 work information provision 44 information acquisition unit 45 list update unit 46 update information provision unit 47 work prohibition notification unit 48 image provision unit 49 peripheral information provision unit 50 work list provision unit 51 priority change unit 60 work list , 61 work schedule information, 62 video information, 63, 71, 81 device information, 64 priority change information, 70, 80, 80A, 96 work list image, 72 to 75, 82 to 87 work information, 90, 91, 92 Image, 94 Device list display screen, 95, 95 1 to 95 n Device icon, 97 Message box, 98, 99 Button, 100, 100A Inspection work support system, U, U 1 to Un worker.

Claims (15)

第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目がリスト化された情報を含む作業リストを記憶する記憶部と、
前記作業リストに含まれる前記作業項目の情報を前記記憶部から取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信する作業情報提供部と、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得する情報取得部と、
前記情報取得部によって取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するリスト更新部と、
前記リスト更新部によって更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信する更新情報提供部と、
前記第2作業員が行っている点検作業と同時に点検作業することが禁止される作業を前記第1作業員が行うことを禁止する通知を前記第1作業員の前記拡張現実デバイスへ通知する作業禁止通知部と、を備える
ことを特徴とする点検作業支援装置。
a storage unit for storing a work list including information listing work items of equipment to be inspected by a plurality of workers including a first worker and a second worker;
a work information providing unit that acquires information on the work items included in the work list from the storage unit and transmits the acquired information on the work items to an augmented reality device of each of the plurality of workers;
an information acquisition unit that acquires input information including information indicating the work status of the first worker from an input device of the first worker;
a list update unit that updates the work list by associating work status information indicating the work status of the first worker with the work item information based on the input information acquired by the information acquisition unit;
an update information providing unit that transmits the work status information included in the work list updated by the list update unit to the augmented reality device of the second worker;
An operation of notifying the augmented reality device of the first worker of a notice prohibiting the first worker from performing the work that is prohibited from being performed at the same time as the inspection work being performed by the second worker. and a prohibition notification unit.
第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目が優先度の情報と関連付けられてリスト化された情報を含む作業リストを記憶する記憶部と、
前記作業リストに含まれる前記作業項目の情報を前記記憶部から取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信する作業情報提供部と、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得する情報取得部と、
前記情報取得部によって取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するリスト更新部と、
前記リスト更新部によって更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信する更新情報提供部と、
前記記憶部から前記作業リストを取得し、取得した作業リストを前記点検作業の管理者の端末装置へ提供する作業リスト提供部と、を備え、
前記情報取得部は、
前記作業項目の情報に関連付けられる前記優先度の情報を変更する優先度変更情報を取得し、
前記更新情報提供部は、
前記優先度変更情報に基づいて優先度の情報が変更された前記作業項目の情報を各前記作業員の前記拡張現実デバイスへ送信する
ことを特徴とする点検作業支援装置。
A storage unit for storing a work list including information in which work items of equipment to be inspected by a plurality of workers including a first worker and a second worker are listed in association with priority information. When,
a work information providing unit that acquires information on the work items included in the work list from the storage unit and transmits the acquired information on the work items to an augmented reality device of each of the plurality of workers;
an information acquisition unit that acquires input information including information indicating the work status of the first worker from an input device of the first worker;
a list update unit that updates the work list by associating work status information indicating the work status of the first worker with the work item information based on the input information acquired by the information acquisition unit;
an update information providing unit configured to transmit the work status information included in the work list updated by the list update unit to the augmented reality device of the second worker;
a work list providing unit that acquires the work list from the storage unit and provides the acquired work list to the terminal device of the manager of the inspection work;
The information acquisition unit
obtaining priority change information for changing the priority information associated with the work item information;
The update information providing unit
The inspection work support device, wherein information of the work item whose priority information has been changed based on the priority change information is transmitted to the augmented reality device of each worker.
第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目がリスト化された情報を含む作業リストを記憶する記憶部と、
前記作業リストに含まれる前記作業項目の情報を前記記憶部から取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信する作業情報提供部と、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得する情報取得部と、
前記情報取得部によって取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するリスト更新部と、
前記リスト更新部によって更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信する更新情報提供部と、
各前記作業員の前記拡張現実デバイスに設けられた撮像部が撮像した映像の情報を取得する映像取得部と、
前記映像取得部によって取得された映像の情報に基づいて、前記映像に含まれる機器の部位を特定する特定部と、を備え、
前記作業情報提供部は、
前記特定された前記部位における前記点検作業の状況を示す情報を前記映像の情報を送信した拡張現実デバイスへ送信する
ことを特徴とする点検作業支援装置。
a storage unit for storing a work list including information listing work items of equipment to be inspected by a plurality of workers including a first worker and a second worker;
a work information providing unit that acquires information on the work items included in the work list from the storage unit and transmits the acquired information on the work items to an augmented reality device of each of the plurality of workers;
an information acquisition unit that acquires input information including information indicating the work status of the first worker from an input device of the first worker;
a list update unit that updates the work list by associating work status information indicating the work status of the first worker with the work item information based on the input information acquired by the information acquisition unit;
an update information providing unit that transmits the work status information included in the work list updated by the list update unit to the augmented reality device of the second worker;
A video acquisition unit that acquires information of a video captured by an imaging unit provided in the augmented reality device of each worker;
a specifying unit that specifies a part of the device included in the image based on the information of the image acquired by the image acquiring unit;
The work information providing unit
An inspection work support apparatus, characterized in that information indicating the status of the inspection work in the specified part is transmitted to an augmented reality device that transmitted the image information.
第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目がリスト化された情報を含む作業リストを記憶する記憶部と、
前記作業リストに含まれる前記作業項目の情報を前記記憶部から取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信する作業情報提供部と、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得する情報取得部と、
前記情報取得部によって取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するリスト更新部と、
前記リスト更新部によって更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信する更新情報提供部と、
各前記作業員の前記拡張現実デバイスに設けられた撮像部が撮像した映像の情報を取得する映像取得部と、
前記映像取得部によって取得された映像の情報に基づいて、前記映像に含まれる機器および前記映像に含まれる他の作業員を特定する特定部と、を備え、
前記情報取得部は、
表示モードを示す表示モード設定情報を前記第1作業員の入力デバイスから取得し、
前記特定部は、
前記表示モード設定情報で示される前記表示モードが第1モードである場合、前記映像に含まれる機器を特定し、前記表示モード設定情報で示される前記表示モードが第2モードである場合、前記映像に含まれる他の作業員を特定し、
前記作業情報提供部は、
前記表示モード設定情報で示される前記表示モードが第1モードである場合、前記特定部によって特定された機器の作業リストに含まれる作業項目の情報を前記記憶部から取得し、取得した前記作業項目の情報を前記映像の情報を送信した前記拡張現実デバイスへ送信し、前記表示モード設定情報で示される前記表示モードが第2モードである場合、前記特定部によって特定された他の作業員による前記点検作業の状況を示す情報を前記映像の情報を送信した前記拡張現実デバイスへ送信する
ことを特徴とする点検作業支援装置。
a storage unit for storing a work list including information listing work items of equipment to be inspected by a plurality of workers including a first worker and a second worker;
a work information providing unit that acquires information on the work items included in the work list from the storage unit and transmits the acquired information on the work items to an augmented reality device of each of the plurality of workers;
an information acquisition unit that acquires input information including information indicating the work status of the first worker from an input device of the first worker;
a list update unit that updates the work list by associating work status information indicating the work status of the first worker with the work item information based on the input information acquired by the information acquisition unit;
an update information providing unit that transmits the work status information included in the work list updated by the list update unit to the augmented reality device of the second worker;
A video acquisition unit that acquires information of a video captured by an imaging unit provided in the augmented reality device of each worker;
a specifying unit that specifies equipment included in the video and other workers included in the video based on the information of the video acquired by the video acquisition unit;
The information acquisition unit
Acquiring display mode setting information indicating a display mode from the first worker's input device;
The identification unit
When the display mode indicated by the display mode setting information is the first mode, a device included in the image is specified, and when the display mode indicated by the display mode setting information is the second mode, the image is specified. identify other workers in the
The work information providing unit
When the display mode indicated by the display mode setting information is the first mode, information on work items included in the work list of the equipment identified by the identifying unit is acquired from the storage unit, and the acquired work items to the augmented reality device that transmitted the video information, and when the display mode indicated by the display mode setting information is the second mode, the other worker specified by the specifying unit An inspection work support device, characterized in that information indicating the status of inspection work is transmitted to the augmented reality device that transmitted the video information.
前記第2作業員が行っている点検作業と同時に点検作業することが禁止される作業を前記第1作業員が行うことを禁止する通知を前記第1作業員の前記拡張現実デバイスへ通知する作業禁止通知部を備える
ことを特徴とする請求項2から4のいずれか1つに記載の点検作業支援装置。
An operation of notifying the augmented reality device of the first worker of a notice prohibiting the first worker from performing the work that is prohibited from being performed at the same time as the inspection work being performed by the second worker. The inspection work support device according to any one of claims 2 to 4, further comprising a prohibition notification unit.
前記作業項目の情報に優先度の情報が関連付けられており、
前記作業情報提供部は、
前記優先度の情報に基づいて、前記拡張現実デバイスへ送信する前記作業項目の情報を選択し、選択した前記作業項目の情報を前記拡張現実デバイスへ送信する
ことを特徴とする請求項1または3または4に記載の点検作業支援装置。
Priority information is associated with the work item information,
The work information providing unit
4. The work item information to be transmitted to the augmented reality device is selected based on the priority information, and the selected work item information is transmitted to the augmented reality device. 5. The inspection work support device according to 4.
前記作業リストに含まれる作業項目の優先度を変更する優先度変更部を備え、
前記記憶部は、
前記情報取得部によって取得された優先度変更情報を記憶し、
前記優先度変更部は、
前記記憶部に記憶された優先度変更情報に基づいて、前記優先度の情報の変更回数が予め設定された回数を超えると判定した場合、変更回数が前記予め設定された回数を超える優先度の情報を変更する
ことを特徴とする請求項2に記載の点検作業支援装置。
A priority changing unit that changes the priority of work items included in the work list,
The storage unit
storing the priority change information acquired by the information acquisition unit;
The priority changing unit
If it is determined based on the priority change information stored in the storage unit that the number of times the priority information has been changed exceeds a preset number of times, the number of times the priority information has been changed exceeds the preset number of times. The inspection work support device according to claim 2, wherein the information is changed.
各前記作業員の前記拡張現実デバイスに設けられた撮像部が撮像した映像の情報を取得する映像取得部と、
前記映像取得部によって取得された映像の情報に基づいて、前記映像に含まれる機器を特定する特定部と、を備え、
前記作業情報提供部は、
前記特定部によって特定された機器の作業リストに含まれる作業項目の情報を前記記憶部から取得し、取得した前記作業項目の情報を前記拡張現実デバイスへ送信する
ことを特徴とする請求項1または2または7に記載の点検作業支援装置。
A video acquisition unit that acquires information of a video captured by an imaging unit provided in the augmented reality device of each worker;
a specifying unit that specifies a device included in the video based on the information of the video acquired by the video acquiring unit;
The work information providing unit
2. Acquiring information on work items included in a work list of the device specified by the specifying unit from the storage unit, and transmitting the acquired information on the work items to the augmented reality device. 8. The inspection work support device according to 2 or 7.
前記特定部は、
前記映像の情報に基づいて、前記映像に含まれる作業員を特定し、
前記作業情報提供部は、
前記特定部によって特定された作業員による前記点検作業の状況を示す情報を前記映像の情報を送信した拡張現実デバイスへ送信する
ことを特徴とする請求項3に記載の点検作業支援装置。
The identification unit
Based on the information of the video, identify the worker included in the video,
The work information providing unit
4. The inspection work support device according to claim 3, wherein information indicating the status of the inspection work by the worker identified by the identification unit is transmitted to the augmented reality device that transmitted the image information.
前記拡張現実デバイスは、
スマートグラスまたはタブレット端末である
ことを特徴とする請求項1から9のいずれか一つに記載の点検作業支援装置。
The augmented reality device is
The inspection work support device according to any one of claims 1 to 9, wherein the device is smart glasses or a tablet terminal.
請求項1から10のいずれか一つに記載の点検作業支援装置と、
前記拡張現実デバイスと、を備える
ことを特徴とする点検作業支援システム。
The inspection work support device according to any one of claims 1 to 10,
An inspection work support system comprising: the augmented reality device.
コンピュータが実行する点検作業支援方法であって、
第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目がリスト化された情報を含む作業リストを記憶する記憶部から前記作業項目の情報を取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信するステップと、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得するステップと、
前記取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するステップと、
前記更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信するステップと、
前記第2作業員が行っている点検作業と同時に点検作業することが禁止される作業を前記第1作業員が行うことを禁止する通知を前記第1作業員の前記拡張現実デバイスへ通知するステップと、を含む
ことを特徴とする点検作業支援方法。
An inspection work support method executed by a computer,
Acquisition of work item information from a storage unit that stores a work list containing information in which work items of equipment to be inspected by a plurality of workers including a first worker and a second worker are listed. and transmitting the obtained work item information to an augmented reality device of each of the plurality of workers;
obtaining input information including information indicating the work status of the first worker from an input device of the first worker;
updating the work list by associating work status information indicating the work status of the first worker with the work item information based on the acquired input information;
sending the work status information included in the updated work list to the second worker's augmented reality device;
A step of notifying, to the augmented reality device of the first worker, a notification prohibiting the first worker from performing work that is prohibited from being performed at the same time as the inspection work being performed by the second worker. A method for supporting inspection work, comprising:
コンピュータが実行する点検作業支援方法であって、
第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目が優先度の情報と関連付けられてリスト化された情報を含む作業リストを記憶する記憶部から前記作業リストに含まれる前記作業項目の情報を前記記憶部から取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信する作業情報提供ステップと、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得する情報取得ステップと、
前記取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するリスト更新ステップと、
前記更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信する更新情報提供ステップと、
前記記憶部から前記作業リストを取得し、取得した前記作業リストを前記点検作業の管理者の端末装置へ提供する作業リスト提供ステップと、
前記作業項目の情報に関連付けられる前記優先度の情報を変更する優先度変更情報を取得するステップと、
前記優先度変更情報に基づいて優先度の情報が変更された前記作業項目の情報を各前記作業員の前記拡張現実デバイスへ送信するステップと、を含む
ことを特徴とする点検作業支援方法。
An inspection work support method executed by a computer,
A storage unit for storing a work list including information in which work items of equipment to be inspected by a plurality of workers including a first worker and a second worker are listed in association with priority information. a work information providing step of acquiring information on the work items included in the work list from the storage unit and transmitting the acquired information on the work items to an augmented reality device of each of the plurality of workers;
an information acquisition step of acquiring input information including information indicating the work status of the first worker from an input device of the first worker;
a list updating step of updating the work list by associating work status information indicating the work status of the first worker with the work item information based on the acquired input information;
an update information providing step of transmitting the work status information included in the updated work list to the augmented reality device of the second worker;
a work list providing step of obtaining the work list from the storage unit and providing the obtained work list to a terminal device of a manager of the inspection work;
obtaining priority change information that changes the priority information associated with the work item information;
and transmitting information of the work item whose priority information has been changed based on the priority change information to the augmented reality device of each worker.
コンピュータが実行する点検作業支援方法であって、
第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目がリスト化された情報を含む作業リストを記憶する記憶部から前記作業リストに含まれる前記作業項目の情報を前記記憶部から取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信するステップと、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得するステップと、
前記取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するリスト更新ステップと、
前記更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信する更新情報提供ステップと、
各前記作業員の前記拡張現実デバイスに設けられた撮像部が撮像した映像の情報を取得する映像取得ステップと、
前記取得された映像の情報に基づいて、前記映像に含まれる機器の部位を特定する特定ステップと、
前記特定された前記部位における前記点検作業の状況を示す情報を前記映像の情報を送信した拡張現実デバイスへ送信するステップと、を含む
ことを特徴とする点検作業支援方法。
An inspection work support method executed by a computer,
Said included in said work list from a storage unit that stores a work list containing information in which work items of equipment to be inspected by a plurality of workers including a first worker and a second worker are listed obtaining work item information from the storage unit and transmitting the obtained work item information to an augmented reality device of each of the plurality of workers;
obtaining input information including information indicating the work status of the first worker from an input device of the first worker;
a list updating step of updating the work list by associating work status information indicating the work status of the first worker with the work item information based on the acquired input information;
an update information providing step of transmitting the work status information included in the updated work list to the augmented reality device of the second worker;
A video acquisition step of acquiring information of a video captured by an imaging unit provided in the augmented reality device of each worker;
an identifying step of identifying a part of the device included in the image based on the acquired information of the image;
and a step of transmitting information indicating the status of the inspection work in the identified part to an augmented reality device that transmitted the image information.
コンピュータが実行する点検作業支援方法であって、
第1作業員と第2作業員とを含む複数の作業員による点検作業の対象である機器の作業項目がリスト化された情報を含む作業リストを記憶する記憶部から前記作業リストに含まれる前記作業項目の情報を前記記憶部から取得し、取得した作業項目の情報を前記複数の作業員の各々の拡張現実デバイスへ送信するステップと、
前記第1作業員の作業状況を示す情報を含む入力情報を前記第1作業員の入力デバイスから取得するステップと、
前記取得された入力情報に基づいて、前記作業項目の情報に前記第1作業員の作業状況を示す作業状況情報を関連付けて前記作業リストを更新するステップと、
前記更新された作業リストに含まれる前記作業状況情報を前記第2作業員の拡張現実デバイスへ送信するステップと、
表示モードを示す表示モード設定情報を前記第1作業員の入力デバイスから取得するステップと、
各前記作業員の前記拡張現実デバイスに設けられた撮像部が撮像した映像の情報を取得するステップと、
前記表示モード設定情報で示される前記表示モードが第1モードである場合、前記取得された映像の情報に基づいて、前記映像に含まれる機器を特定し、前記表示モード設定情報で示される前記表示モードが第2モードである場合、前記取得された映像の情報に基づいて、前記映像に含まれる他の作業員を特定するステップと、
前記表示モード設定情報で示される前記表示モードが第1モードである場合、前記特定された機器の作業リストに含まれる作業項目の情報を前記記憶部から取得し、取得した前記作業項目の情報を前記映像の情報を送信した前記拡張現実デバイスへ送信し、前記表示モード設定情報で示される前記表示モードが第2モードである場合、前記特定された他の作業員による前記点検作業の状況を示す情報を前記映像の情報を送信した前記拡張現実デバイスへ送信するステップと、を含む
ことを特徴とする点検作業支援方法。
An inspection work support method executed by a computer,
Said included in said work list from a storage unit that stores a work list containing information in which work items of equipment to be inspected by a plurality of workers including a first worker and a second worker are listed obtaining work item information from the storage unit and transmitting the obtained work item information to an augmented reality device of each of the plurality of workers;
obtaining input information including information indicating the work status of the first worker from an input device of the first worker;
updating the work list by associating work status information indicating the work status of the first worker with the work item information based on the acquired input information;
sending the work status information included in the updated work list to the second worker's augmented reality device;
a step of acquiring display mode setting information indicating a display mode from the first worker's input device;
a step of acquiring information of a video imaged by an imaging unit provided in the augmented reality device of each worker;
When the display mode indicated by the display mode setting information is the first mode, a device included in the image is specified based on the acquired image information, and the display indicated by the display mode setting information is performed. If the mode is the second mode, identifying other workers included in the image based on the information of the acquired image;
When the display mode indicated by the display mode setting information is the first mode, information on work items included in the work list of the identified device is acquired from the storage unit, and the acquired information on the work items is stored. When the display mode indicated by the display mode setting information is the second mode, the status of the inspection work by the identified other worker is displayed. and transmitting information to the augmented reality device that transmitted the video information.
JP2018162602A 2018-08-31 2018-08-31 Inspection work support device, inspection work support system, and inspection work support method Active JP7113702B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018162602A JP7113702B2 (en) 2018-08-31 2018-08-31 Inspection work support device, inspection work support system, and inspection work support method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018162602A JP7113702B2 (en) 2018-08-31 2018-08-31 Inspection work support device, inspection work support system, and inspection work support method

Publications (2)

Publication Number Publication Date
JP2020035280A JP2020035280A (en) 2020-03-05
JP7113702B2 true JP7113702B2 (en) 2022-08-05

Family

ID=69668234

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018162602A Active JP7113702B2 (en) 2018-08-31 2018-08-31 Inspection work support device, inspection work support system, and inspection work support method

Country Status (1)

Country Link
JP (1) JP7113702B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7347409B2 (en) * 2020-12-28 2023-09-20 横河電機株式会社 Apparatus, method and program
JP6990482B1 (en) 2021-03-26 2022-01-12 株式会社オプティム Inspection system, method and program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011248860A (en) 2010-04-28 2011-12-08 Ns Solutions Corp Information processing system, and information processing method and program
JP2012209845A (en) 2011-03-30 2012-10-25 Fujifilm Corp Operation control method and program for inspection system and inspection server
WO2014097413A1 (en) 2012-12-19 2014-06-26 株式会社日立製作所 Operation support terminal and operation support system
JP2018060244A (en) 2016-09-30 2018-04-12 株式会社日本総合研究所 Information processing system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011248860A (en) 2010-04-28 2011-12-08 Ns Solutions Corp Information processing system, and information processing method and program
JP2012209845A (en) 2011-03-30 2012-10-25 Fujifilm Corp Operation control method and program for inspection system and inspection server
WO2014097413A1 (en) 2012-12-19 2014-06-26 株式会社日立製作所 Operation support terminal and operation support system
JP2018060244A (en) 2016-09-30 2018-04-12 株式会社日本総合研究所 Information processing system

Also Published As

Publication number Publication date
JP2020035280A (en) 2020-03-05

Similar Documents

Publication Publication Date Title
JP7113702B2 (en) Inspection work support device, inspection work support system, and inspection work support method
JP6105180B1 (en) Work support device, work support method and program
JP2018004541A (en) Information processing device, information processing method and program
JP2019023803A (en) Work Improvement Support System and Method
JP6514390B1 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND COMPUTER PROGRAM
JP2008225704A (en) Work evaluation device, work evaluation method and control program
JP7312581B2 (en) Concrete structure management device, information processing system, concrete structure management method, and program
JP6710555B2 (en) Image display system, information processing device, image display method, and computer program
JP6593922B2 (en) Image surveillance system
JP2019079144A (en) Work support system, imaging device, wearable device, and work support method
JP2017079019A (en) System for construction field
JP2004005639A (en) Monitoring device
JP2023153271A (en) Inspection support device, inspection support system, inspection support method, and program
JP2018207271A (en) Terminal, image processing system, image processing program, and method for processing image
JP2023060866A (en) Inspection support apparatus, inspection support system, inspection support method, and program
JP6818795B2 (en) Information processing equipment, information processing methods and computer programs
JP2016071553A (en) Building process management server and building process management system
JP7100460B2 (en) Cable laying management device, cable laying management method, program
JP4478047B2 (en) Information presentation apparatus, information presentation method, and program thereof
JP6514310B1 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND COMPUTER PROGRAM
JP2021157284A (en) Information processing device, information processing system, and program
JP4730211B2 (en) Data processing apparatus and data processing method
JP2018194914A (en) System, method, and program
JP6957895B2 (en) Information processing device, judgment terminal device, information processing system, information processing method and program
JP2021056671A (en) Work state determination device, work state determination method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201130

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211011

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211019

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220614

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220628

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220726

R150 Certificate of patent or registration of utility model

Ref document number: 7113702

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150