WO2020003546A1 - コンテンツ提示システム - Google Patents

コンテンツ提示システム Download PDF

Info

Publication number
WO2020003546A1
WO2020003546A1 PCT/JP2018/031353 JP2018031353W WO2020003546A1 WO 2020003546 A1 WO2020003546 A1 WO 2020003546A1 JP 2018031353 W JP2018031353 W JP 2018031353W WO 2020003546 A1 WO2020003546 A1 WO 2020003546A1
Authority
WO
WIPO (PCT)
Prior art keywords
work
training
content
information
site
Prior art date
Application number
PCT/JP2018/031353
Other languages
English (en)
French (fr)
Inventor
貴之 藤原
慎太郎 土屋
健太郎 大西
克朗 菊地
賀仁 成田
Original Assignee
株式会社日立システムズ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立システムズ filed Critical 株式会社日立システムズ
Priority to US16/626,023 priority Critical patent/US20210335148A1/en
Priority to EP18924816.4A priority patent/EP3637390A4/en
Publication of WO2020003546A1 publication Critical patent/WO2020003546A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0635Risk analysis of enterprise or organisation activities
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes

Definitions

  • the present invention relates to a content presentation system for presenting training content including 3DCG for simulating on-site work of a work target device in a simulated work space.
  • the work target devices for example, high temperature, high voltage, and the like
  • there are those having a structural element that can be a danger target factor in the work and prior to on-site work of the work target device having the structural element, burns or The need for training to reduce dangers such as electric shock is increasing.
  • Patent Document 1 proposes a technique for scoring a trainee's danger prediction.
  • the present invention has been made to solve such a conventional problem, and a simulated accident is generated at a training stage to strongly impress a trainee on the danger of the accident, and the work target on the site is It is an object of the present invention to provide a content presentation system capable of reliably suppressing the risk of an accident in the field work of a device.
  • a content presentation system presents training content based on three-dimensional shape information of a work target device and a work procedure to a trainee (R1), and provides virtual reality or A contents presentation system for executing a simulated work of a field work in a simulated work space of augmented reality in accordance with the work procedure, wherein the training content including three-dimensional shape information of the work target device and a work operation of the work procedure.
  • a content output device (3) having a storage unit (36a) for storing evaluation reference information of the above and an output unit (35e, 43) for outputting the training content to the trainee so as to be presentable; Measuring device (35a, 65a) for acquiring the three-dimensional work operation of the worker (R2) or the trainee as the measurement information; An evaluation criterion creating device (35b, 65b) for creating evaluation criterion information on the work operation based on the measurement information on the original work operation; and the training device based on the measurement information on the three-dimensional work operation and the evaluation criterion information.
  • a content creation device (35c, 65c) for creating content, wherein the evaluation criterion creation device is configured to determine a predetermined three-dimensional body movement of the worker or the trainee and to cause an accident in the field work.
  • the evaluation criterion information is adjusted for a work operation at a specific stage or another stage of the work procedure according to the information, and the content creating apparatus adjusts the specific stage or another during the simulation work.
  • the simulated accident is performed so that the trainee is strongly impressed with the occurrence of the accident. And updates the training content.
  • the content presentation system according to claim 1 of the present invention strongly impresses a trainee on the danger of an accident occurring when experiencing on-site work of a work target device in a simulated work space at a training stage. Can be.
  • the trainee finishes the training and performs on-site work on the equipment to be worked as a worker at the site he / she can start working with a strong awareness of the danger of accidents, and this awareness is sufficient.
  • the risk of accident occurrence can be greatly reduced compared to the past site work that could not be said.
  • the content presentation system according to claim 2 of the present invention is characterized in that the content creation device impresses the trainee on the occurrence of the simulated accident by sound, text message, light, vibration, or the like.
  • the content presentation system according to claim 2 of the present invention can more strongly and surely impress the danger of the accident occurrence to a trainee who experiences a simulated accident occurrence at the training stage. It is possible to suppress the danger on site more reliably.
  • the content presentation system includes a risky behavior determination processing means (75b, 76b) for extracting a work item having a high probability of occurrence of the simulated accident and defining a danger occurrence factor for the work item.
  • a content presentation system comprising: a creation unit (75a, 76a) for creating a work report describing a work environment of the site work; and the created work report has already been created. It is determined whether there is a description that the work environment has changed from the current state between the existing work report and, if there is the description, according to the changed work environment, the definition of the danger occurrence factor for the work item is determined. Updating means (65f) for updating.
  • the content presentation system according to claim 5 of the present invention is configured such that a step is performed during the site work including the work item based on the definition of the danger target for the work item and index information including a worker skill of the worker. (75b) for setting a warning item to be implemented in a practical manner, and a warning unit (65f) for giving a warning stepwise based on the warning item during the on-site work.
  • the content presentation system according to claim 5 of the present invention provides an item in which a trainee who can simulate an accident by training has a high accident occurrence rate during training at the time of on-site work as a worker after the training. It is possible to gradually reduce the danger in accordance with one's work skills and the like.
  • the present invention provides a content presentation that generates a simulated accident at the training stage, strongly impresses a trainee on the danger of the accident, and reliably suppresses the danger of an accident during on-site work of a target device at the site.
  • a system can be provided.
  • 1 is an overall configuration diagram of a content presentation system according to an embodiment of the present invention. It is a block diagram showing functional composition of a training management server and a training support terminal of a contents presentation system concerning one embodiment of the present invention. It is a block diagram showing functional composition of a field management server and a field support terminal of a contents presentation system concerning one embodiment of the present invention. It is a figure which shows the operation
  • FIG. 7 is a schematic diagram illustrating a display example of an evaluation determination result regarding an accident that has simulated during a simulation work in a simulation work space in step 64 of FIG. 6. It is a figure which shows the operation
  • FIG. 11 is an explanatory diagram of progress table contents indicating the progress of a plurality of works managed by the work management server in the content presentation system according to one embodiment of the present invention.
  • FIG. 11 is an explanatory diagram of a procedure table content exemplifying a content data material to be presented to a trainee, including a report from a skilled person at each stage in the first procedure among the plurality of tasks shown in FIG. It is.
  • FIG. 13 is an explanatory diagram of a measurement data sheet for collecting the content data material shown in FIG. 12 from a skilled person.
  • the content presentation system 1 includes a training management system 5, a site management server 6, and a site support terminal 7 that are connected to a network.
  • the training management system 5 manages training related to the on-site work of the work target equipment by the trainee R1 in the simulated work space, and includes a training management server 3 and a training support terminal 4.
  • the training management server 3 and the site management server 6 are configured by an information processing device such as a PC (personal computer).
  • an information processing device such as a PC (personal computer).
  • a mobile terminal such as a smartphone, a tablet, or an HMD (Head Mount Display) is used.
  • the training management server 3, the training support terminal 4, the site management server 6, and the site support terminal 7 all have a three-dimensional graphic data drawing function. That is, the content presentation system 1 not only utilizes the information related to the maintenance work of the work target equipment mutually between the training and the site, but also actively uses the 3DCG for the processing of the image used for the training and the image used for collecting the information at the site. Has been adopted.
  • 3D CG data of the work target device is used in the training, and an extended display (AR) of a work command or the like for the actual work target device is performed at the site based on the above 3DCG of the work target device. .
  • the site support terminal 7 outputs operation information (activity information) of maintenance work on the actual work target device of the model worker R2 by voice.
  • the information is stored as a three-dimensional work operation record (hereinafter, simply referred to as a work operation) together with body movement information such as movements of hands and feet and gaze.
  • the image of the work target device is processed as 3DCG data.
  • the model worker R2 Prior to collecting the above-described body movement information, the model worker R2 is informed that the measurement equipment, for example, a body movement information detection sensor such as an HMD, a glove with a DoF sensor, or a microphone is attached to the model worker R2. I do.
  • This notification is performed, for example, by displaying a message on the display unit 73 of the site support terminal 7.
  • the site support terminal 7 distributes the work operation record stored during the maintenance work to the site management server 6.
  • the site management server 6 creates training content for performing a simulated work simulating the maintenance work based on the work operation record distributed from the site support terminal 7, and stores the training content. Further, the site management server 6 distributes work operation records distributed from the site support terminal 7 to the training management server 3.
  • the training management server 3 creates training content for performing simulated work based on the work operation record distributed from the site management server 6, and stores the training content. Thereafter, the training management server 3 transmits the saved training content to the training support terminal 4 based on a training start command based on a predetermined operation by the trainee R1, for example.
  • the training support terminal 4 receives the training content distributed from the training management server 3, and executes the simulation work based on the training content. Specifically, the training support terminal 4 displays the 3DCG data of the work target device on the display unit 43 (see FIG. 2) based on the training content. Thus, in the training support terminal 4, an environment for training the trainee R1 in a simulation space (virtual reality (VR)) of the virtual reality (Virtual Reality; VR) for the maintenance work of the work target equipment is established.
  • VR virtual reality
  • the training support terminal 4 displays the 3DCG data of the work target device on the display unit 43 based on the training content and follows the work procedure of the maintenance work. For example, a work command including a text sentence is displayed on the display unit 43 in accordance with the progress of the simulation work and corresponding to each step.
  • the trainee R1 can perform training of maintenance work on the work target device in the virtual reality simulation work space in accordance with the work instruction and the like displayed on the work target device displayed in 3DCG. become.
  • the training support terminal 4 collects the operation information (activity information) of the maintenance work for the virtual work target device of the trainee R1 by the hand or arm collected by the body operation information detection sensor. It is taken in as a work operation record B during training together with physical operation information such as the operation and the line of sight. Further, the training support terminal 4 stores the work operation record (hereinafter, collective work operation record A) at the time of the maintenance work performed by the model worker R2 that the training management server 3 has already acquired from the site management server 6. A process of evaluating the accuracy (proficiency) of the work operation of the work procedure by the trainee R1 based on the work operation record B during training and the work operation record A during collection is performed.
  • the training support terminal 4 compares, for example, each value of the work operation record B during training and the work operation record A during collection, and determines that the value of the work operation record B during training is When the evaluation value is higher as the value is closer to the value of the operation record A, the value in the work operation record B during training deviates from the value of the work operation record A during collection by more than a predetermined threshold. Is performed to reduce the evaluation value. At this time, the training support terminal 4 converts the evaluation result into an image so that the trainee R1 can visually check it, and displays the image on the display unit 43.
  • ⁇ 3DCG data handled by the training support terminal 4 and the on-site support terminal 7 during the above-described training and on-site information collection has three-dimensional coordinates. For this reason, by comparing the three-dimensional coordinates of the hands of the model worker R2 collected in advance with the three-dimensional coordinates of the hands of the trainee R1 during training, the hands of the trainee R1 are set to the work target. Which part of the device has been contacted can be determined.
  • the hand or body of the trainee R1 is close to a component corresponding to a risk target factor (for example, a high-temperature generating element, a high-voltage generating element) of the work target device,
  • a risk target factor for example, a high-temperature generating element, a high-voltage generating element
  • the state of contact is determined, and the fact that the work performed by the trainee R1 is close to failure, or the fact that the work has failed is notified by a method that strongly impresses the trainee R1. This notification process will be described later in detail with reference to FIGS.
  • the configuration of each device of the content presentation system 1 will be described.
  • the training management server 3 and the training support terminal 4 included in the training management system 5 have, for example, the configuration shown in FIG.
  • the training management server 3 includes a CPU 31, a communication unit 32, a display unit 33, a memory 35, and a database (hereinafter, referred to as DB) 36.
  • the CPU 31 controls the overall operation of the training management server 3.
  • the communication unit 32 communicates information with the training support terminal 4 and the site management server 6.
  • the display unit 33 displays various types of information, and includes, for example, an LCD.
  • the memory 35 includes, for example, a ROM and a RAM, and stores various information such as a program for realizing the functional operation as the training management system 5.
  • the memory 35 includes the operation measurement processing unit 35a, the evaluation criterion creation processing unit 35b, the content creation processing unit 35c, the content distribution processing unit 35d, the simulation work processing unit 35e, and the dangerous behavior suppression processing unit 35f.
  • Each program for realizing is stored.
  • Each processing unit is realized by the CPU 31 reading out each program from the memory 35 and executing it.
  • the motion measurement processing unit 35a receives the activity information of the trainee R1 acquired by the measurement information acquisition unit 44 of the training support terminal 4 described below via the communication unit 32, and processes the information as the measurement information of the three-dimensional work motion of the trainee R1. I do.
  • the evaluation criterion creation processing unit 35b creates evaluation criterion information on the work motion of the trainee R1 based on the measurement information of the three-dimensional work motion of the trainee R1.
  • the evaluation criterion information may be a specific step (a work step targeting a risk target factor) or another step in a work procedure of a maintenance work (simulation work) of a work target device performed by a trainee R1 in a simulation work space described later. It is created corresponding to each work operation.
  • the content creation processing unit 35c generates the training content based on the measurement information of the three-dimensional work motion of the trainee R1 processed by the motion measurement processing unit 35a and the evaluation criterion information created by the evaluation criterion creation processing unit 35b. create.
  • the content distribution processing unit 35d distributes the training content created by the content creation processing unit 35c to the site management server 6 via the communication unit 32.
  • the simulation work processing unit 35e performs a process for realizing the maintenance work of the work target device as the simulation work in cooperation with the training support terminal 4. Specifically, the simulation work processing unit 35e displays the training content based on the three-dimensional shape information of the work target device and the work procedure on the display unit 43 of the training support terminal 4 and presents the training content to the trainee R1, and displays the virtual reality or Control is performed to execute a simulated maintenance work according to a work procedure in the simulated work space of the augmented reality.
  • the dangerous behavior suppression processing unit 35f performs control for suppressing a dangerous operation such as the trainee R1 coming into contact with a risk target factor of the work target device during the simulated work in the simulated work space.
  • the risk target factor refers to an element that poses a danger to the trainee R1 when performing the work at the location, such as a high-temperature generation element, a high-voltage generation element, or a work at a high place, which will be described later.
  • the $ DB 36 has a content management DB 36a, a risk target factor management DB 36b, and a attendance history management DB 36c.
  • the content management DB 36a stores the training content described above
  • the risk target factor management DB 36b stores and manages information on the risk target factors used in the dangerous behavior suppression control of the dangerous behavior suppression processing unit 35f.
  • the attendance history management DB 36c stores and manages history information of the attendance of the training for the maintenance of the work target device by the simulation work in the simulation work space.
  • the training support terminal 4 includes a CPU 41, a communication unit 42, a display unit 43, a measurement information acquisition unit 44, a memory 45, and a DB 46.
  • the CPU 31 controls the operation of the entire training support terminal 4.
  • the communication unit 42 communicates information with the training management server 3.
  • the display unit 43 displays various kinds of information such as information on a simulated work space used for training of maintenance work of the work target device.
  • the measurement information acquisition unit 44 acquires detection signals of various sensors such as a time-of-flight (ToF) sensor worn by the trainee R1 as activity information of the three-dimensional work operation of the trainee R1.
  • sensors such as a time-of-flight (ToF) sensor worn by the trainee R1 as activity information of the three-dimensional work operation of the trainee R1.
  • ToF time-of-flight
  • the memory 45 includes, for example, a ROM and a RAM, and stores various information such as a program for realizing the functional operation as the training management system 5.
  • the memory 45 stores a program for implementing the dangerous behavior determination processing unit 45a. That is, the dangerous behavior determination processing unit 45a is realized by the CPU 41 reading out the program from the memory 45 and executing the program.
  • the risky behavior determination processing unit 45a performs control for determining a risky behavior such as the trainee R1 contacting a risk target factor of the work target device during the simulated work in the simulated work space.
  • the DB 46 has a risk factor management DB 46a.
  • the risk target factor management DB 46a stores and manages information on risk target factors determined to be dangerous behavior by the risk behavior determination processing unit 45a.
  • the content management DB 36a corresponds to the storage unit of the present invention.
  • the simulation work processing unit 35e and the display unit 43 correspond to an output unit of the present invention.
  • the training management server 3 having the content management DB 36a, the simulation work processing unit 35e, and the display unit 43 constitutes a content output device of the present invention.
  • the motion measurement processing unit 35a, the evaluation criterion creation processing unit 35b, and the content creation processing unit 35c constitute a motion measurement device, an evaluation criterion creation device, and a content creation device of the present invention, respectively.
  • the site management server 6 and the site support terminal 7 have the configuration shown in FIG.
  • the site management server 6 includes a CPU 61, a communication unit 62, a display unit 63, a memory 65, and a DB 66.
  • the CPU 61 controls the operation of the site management server 6 as a whole.
  • the communication unit 62 communicates information with the site support terminal 7 and the training management server 3.
  • the display unit 63 displays various information, and is configured by, for example, an LCD.
  • the memory 65 includes, for example, a ROM, a RAM, and the like, and stores programs and the like and information for realizing various functional operations.
  • the memory 65 includes the operation measurement processing unit 65a, the evaluation criterion creation processing unit 65b, the content creation processing unit 65c, the content distribution processing unit 65d, the maintenance work processing unit 65e, and the dangerous behavior suppression processing unit 65f.
  • Each program for realizing is stored.
  • Each of these processing units is realized by the CPU 61 reading out each of the above programs from the memory 65 and executing them.
  • the operation measurement processing unit 65a receives the activity information of the model worker R2 or the worker R3 acquired by the measurement information acquiring unit 74 of the site support terminal 7 described below via the communication unit 72, and receives the model worker R2 or the worker R3. Is processed as measurement information of the three-dimensional work operation.
  • the worker R3 is, for example, the trainee R1 who has finished training in the training management system 5.
  • the evaluation criterion creation processing unit 65b creates the evaluation criterion information on the work motion of the model worker R2 or the worker R3 based on, for example, the measurement information of the three-dimensional work motion of the model worker R2 or the worker R3.
  • the evaluation criterion information indicates that the model worker R2 or the worker R3 uses the AR screen of the display unit 73 of the on-site support terminal 7, which will be described later, and performs a specific step or another step in a work procedure using an actual work target device. Is created corresponding to each of the work operations.
  • the content creation processing unit 65c is a training content based on the measurement information of the three-dimensional work motion of the model worker R2 processed by the motion measurement processing unit 65a and the evaluation criterion information created by the evaluation criterion creation processing unit 65b. Create
  • the content distribution processing unit 65d distributes the training content created by the content creation processing unit 65c to the training management server 3 via the communication unit 62.
  • the maintenance work processing unit 65e performs a process for causing the worker R3 to perform maintenance work on the work target device in cooperation with the site support terminal 7. Specifically, the maintenance work processing unit 65e issues a work command based on the work procedure of the maintenance work to the work target device (actual machine) on the display unit 73, which is the site support terminal 7, for example, a transparent screen of the HMD. Are additionally displayed (AR display) and presented to the worker R3. Thereby, the worker R3 can perform the maintenance work on the work target device while checking the work instruction displayed in the AR.
  • the dangerous behavior suppression processing unit 65f performs a control to suppress a dangerous operation such as the worker R3 coming into contact with a risk target factor of the work target device during the maintenance work using the AR display screen.
  • the DB 66 has a risk target factor management DB 66a.
  • the risk target factor management DB 66a stores and manages information on the risk target factors used for the dangerous operation suppression control of the dangerous behavior suppression processing unit 65f.
  • the site support terminal 7 includes a CPU 71, a communication unit 72, a display unit 73, a measurement information acquisition unit 74, a memory 75, and a DB 76.
  • the CPU 71 controls the operation of the entire site support terminal 7.
  • the communication unit 72 communicates information with the site management server 6.
  • the display unit 73 displays various kinds of information such as an AR display screen used for maintenance work of the work target device (actual machine).
  • the measurement information acquisition unit 74 acquires detection signals of various sensors such as a ToF sensor worn by the model worker R2 or the worker R3 as activity information of the three-dimensional work operation of the model worker R2 or the worker R3. Things.
  • the memory 75 includes, for example, a ROM, a RAM, and the like, and stores programs and the like for implementing various functional operations and various information.
  • the memory 75 stores a program for realizing the work report management processing unit 75a and the dangerous behavior determination processing unit 75b. That is, the work report management processing unit 75a and the dangerous behavior determination processing unit 75b are realized by the CPU 71 reading out the program from the memory 75 and executing the program.
  • the work report management processing unit 75a creates a work report on the maintenance work of the work target device using the AR display screen.
  • the dangerous behavior determination processing unit 75b performs control for determining a dangerous behavior such as, for example, the worker R3 touching a risk target factor of the work target device.
  • the DB 76 has a work report management DB 76a and a risk factor management DB 76b.
  • the work report management DB 76a stores and manages information of the work report created by the work report management processing unit 75a.
  • the risk target factor management DB 76b stores and manages information on risk target factors determined to be dangerous behavior by the risk behavior determination processing unit 75b.
  • the motion measurement processing unit 65a, the evaluation criterion creation processing unit 65b, and the content creation processing unit 65c constitute a motion measurement device, an evaluation criterion creation device, and a content creation device of the present invention, respectively.
  • a dangerous behavior suppression function in the content presentation system 1 (see FIGS. 1 to 3) according to the present embodiment will be described.
  • This function is used to suppress accidents such as contact accidents with the hazardous factors of the target work equipment when the trainee R1 completes the training and performs maintenance work on the target work equipment (actual equipment) as the worker R3 on site. Function.
  • the following first to fourth dangerous behavior suppression functions will be described as examples.
  • the first dangerous behavior suppression function suppresses dangerous behavior by generating a simulated accident during maintenance work in the simulated work space at the training stage and strongly impressing the trainee R1 on the occurrence of the accident. It is.
  • the dangerous behavior suppression processing unit 35f of the training management server 3 receives predetermined information that can cause a maintenance work accident from a predetermined three-dimensional body movement of the model worker R2
  • the evaluation criterion information is adjusted with respect to the work operation at a specific stage or another stage of the work procedure of the maintenance work related to the information.
  • the dangerous behavior suppression processing unit 35f increases the probability of occurrence of a simulated accident in the specific stage or another stage of the work operation during the simulated work by the content creation processing unit 35c, and Control is performed so that training content that strongly impresses the accident occurrence on R1 is updated.
  • the dangerous behavior suppression processing unit 35f impresses the trainee R1 on the occurrence of the simulated accident by sound, text message, light, vibration, and the like.
  • the site management server 6 distributes a work instruction to the site support terminal 7 in order to store the activity information of the model worker R2 at the site (step). S11).
  • the site support terminal 7 determines whether or not the start of work recording has been detected (Step S22).
  • the start of work recording can be instructed by, for example, a method of generating “work start”, a hand gesture, or holding a dedicated marker in front of the camera of the site support terminal 7. If it is determined that the start of work recording has not been detected (NO in step S22), the detection process in step S22 is continued. On the other hand, when it is determined that the start of the work record is detected (YES in step S22), the operation measurement processing unit 65a transmits the activity information acquired by the measurement information acquisition unit 74 of the site support terminal 7 through the communication unit 62. A process of taking in and storing is performed (step S23).
  • the motion measurement processing unit 65a determines whether or not the work stage corresponds to the risk target factor (step S24). Here, if it is determined that the work stage is not the work stage corresponding to the risk target factor (NO in step S24), the process proceeds to step S26. On the other hand, when it is determined that the work stage corresponds to the risk target factor (YES in step S24), the motion measurement processing unit 65a is the work stage corresponding to the risk target factor for the activity information being recorded. Is recorded in association with the work stage (step S25), and after the recording is completed, the process proceeds to step S26.
  • the model worker R2 performs an action of notifying the danger point by voice, for example, one by one during the work recording of the three-dimensional body movement. Specifically, the model worker R2, while carrying out the maintenance work of the work target equipment step by step, "does not touch here.”, “Burns if you touch here.” The operation is continued while the occurrence of "electric shock when touched here" is performed.
  • the risky behavior determination processing unit 75b specifies a risk target factor based on the occurrence described above, and associates the specified target factor with each work stage in which the risk target is generated. A process for storing in the factor management DB 76b is performed. Then, the motion measurement processing unit 65a refers to the risk target factor management DB 76b, and executes the determination process as to whether or not the work stage corresponds to the risk target factor in step S24.
  • step S26 the operation measurement processing unit 65a determines whether the end of the work record has been detected.
  • the processes in and after step S23 are repeatedly executed.
  • the evaluation criterion creation processing unit 65b responds to each work stage of the simulated work during training based on the work records created so far.
  • the evaluation criterion information including the obtained evaluation value is created (step S27).
  • the operation measurement processing unit 65a distributes the work record and the evaluation reference information to the site management server 6 (Step S28).
  • the site management server 6 determines whether the evaluation criterion information has already been created (step S12).
  • evaluation criterion information corresponding to the work record is created based on the work record sent from the site support terminal 7 ( Step S13), the work record and the evaluation reference information are stored (Step S16).
  • Step S12 when receiving the work record and the evaluation criterion information from the site support terminal 7, the site management server 6 determines whether the evaluation criterion information has already been created (Step S12).
  • the site management server 6 determines whether the evaluation criterion information has already been created (YES in step S12).
  • a work stage corresponding to the risk target factor is referred to as a specific stage
  • the evaluation value of the evaluation criterion information corresponding to the corresponding work stage is adjusted (step S15), and after the adjustment processing is completed, a series of processing ends. If it is determined that there is no setting of the work stage corresponding to the risk target factor in the work record (NO in step S14), the process ends immediately.
  • step S16 After the processing in step S16 is completed, or after the adjustment processing of the evaluation criterion information in step S15, the site management server 6 communicates with the training management server 3 according to the control sequence shown in FIG. Execute information transmission processing.
  • the site management server 6 distributes the work operation record and the evaluation reference information to the training management server 3 (step S31).
  • the operation record includes the danger factor during the maintenance work of the work target device
  • the evaluation criterion information includes the evaluation value adjusted in accordance with the operation stage of the maintenance work for the danger target factor. It is.
  • the training management server 3 Upon receiving the work operation record and the evaluation criterion information, the training management server 3 reads an existing training manual (step S41), and performs a process of creating training content based on the work operation record (step S42). .
  • the training content is information for causing the trainee R1 to perform maintenance work according to a predetermined work procedure of the work target device as a simulated work by the trainee R1, and includes the three-dimensional shape information of the work target device and the simulation. And a simulated work space to be executed as work.
  • the training management server 3 causes the display unit 33 to display a screen (creation screen) for displaying the created training content (step 43).
  • a screen for displaying the created training content
  • the content of the creation screen is such that a dangerous operation suppression message as a work command corresponding to the risk target factor is superimposed on a 3DCG image of the work target device. It may be.
  • the training management server 3 determines whether there is an instruction to approve the contents of the creation screen while displaying the creation screen in step S43 (step S44). Here, when it is determined that there is no instruction to approve the contents of the creation screen (NO in step S44), the processing after step S42 is continued. On the other hand, when it is determined that there is an instruction to approve the content of the creation screen (YES in step S44), a process of storing the training content created in step S42 in the content management DB 36a is performed.
  • the site management server 6 may execute a process of creating training content based on work operation records and evaluation criterion information before and after the distribution process in step S31.
  • FIG. 5 shows an example in which the site management server 6 creates training content after the distribution process is completed in step S31.
  • the dangerous behavior suppression processing unit 35f stores the information of the risk target factor (the same content as the risk target factor management DB 76b) included in the received work operation record in the risk target factor management DB 36b. You may make it perform the process of making it memorize
  • FIG. 6 can be said to be an operation sequence between the training management server 3 and the training support terminal 4 relating to the first dangerous behavior suppression control.
  • the training management server 3 distributes training content to the training support terminal 4 by the simulation work processing unit 35e (step S51).
  • the CPU 41 When the training support terminal 4 receives the training content from the training management server 3, the CPU 41 starts executing the training content (step S51).
  • the CPU 41 presents the training content based on the three-dimensional shape information of the work target device and the work procedure of the maintenance work of the work target device to the trainee R1.
  • the CPU 41 causes the display 43 to display a simulated work space of virtual reality or augmented reality (Augmented Reality; AR), and performs the maintenance work in the simulated work space in accordance with the work procedure of the maintenance work of the work target device.
  • the simulation work is performed.
  • the trainee R1 carries out the simulated work by wearing an HMD, a glove with a DoF sensor, a microphone, and the like, like the skilled worker R2.
  • the body movement information such as the movements of the hands and the feet and the line of sight of the trainee R1 during the simulation work are taken in from the measurement information acquisition unit 74 as the measurement information.
  • a work operation record of the trainee R1 in the simulation work is obtained, and this is compared with the evaluation reference information received together with the work operation record from the on-site support terminal 7 in the determination processing of S64 and S65 described below. Then, an evaluation is determined for the simulation work.
  • the training support terminal 4 After the start of the simulated work of the maintenance work of the work target equipment in the simulated work space in step S61, the training support terminal 4 displays a screen of a work stage in which evaluation judgment of the simulated work is required. It is determined whether or not it has become (step S62). Here, when it is determined that the screen is not the screen of the work stage requiring the evaluation determination (NO in step S62), the CPU 41 continues the process of step S62.
  • step S62 when it is determined that the screen at the work stage requiring the evaluation determination has been entered (YES in step S62), the CPU 41 determines whether the determination target is a risk target factor (step S63). ).
  • the CPU 41 executes an evaluation determination process of the maintenance work at this time based on the evaluation reference information of the work stage, and Then, a process of notifying the determination result is performed (step S65).
  • step S65 the CPU 41 performs an evaluation process on the work at the work stage displayed on the screen based on the evaluation criterion information acquired from the evaluation criterion creation processing unit 35b of the training management server 3, for example.
  • the CPU 41 performs an evaluation determination process based on the evaluation criterion information of the work stage for the risk target factor, and then performs the evaluation determination result. Is less than or equal to the predetermined level, a notification process is performed to emphasize that a simulated accident has occurred (step S64).
  • step S64 The process of step S64 will be described in more detail.
  • the site management server 6 determines the risk target factor based on the evaluation criterion information received together with the work operation record from the site support terminal 7, and sets the evaluation criterion corresponding to the work stage.
  • the value is adjusted (see steps S14 and S15).
  • the reference evaluation information is adjusted so as to have a stricter evaluation value than the normal work stage, the evaluation judgment based on the evaluation value will obtain a lower evaluation value than the normal work stage.
  • a method of adjusting the reference evaluation information there are a method of adjusting the evaluation value with an adjustment width corresponding to the degree of risk at the time of work on the risk target factor, and a method of adjusting the evaluation value with a preset adjustment width.
  • step S64 in the evaluation determination based on the strict evaluation value of the work stage for the risk target factor, the evaluation result is lower than the evaluation result of the normal work stage. This will result in an evaluation result.
  • the training support terminal 4 executes a notification process that emphasizes that a simulated accident has occurred.
  • the evaluation judgment value is lower than the predetermined level, for example, a message in a form as shown in FIG. 7 is displayed.
  • the text message “You are burned now” is displayed because the evaluation judgment result is lower than a predetermined level. It is displayed near the element.
  • the occurrence of the simulated accident is notified by a text message.
  • the notification may be made by sound, light, vibration, or the like, or by text.
  • the message, sound, light, and vibration may be notified in any combination.
  • step S15 when predetermined information that can cause a maintenance work accident from a predetermined three-dimensional body movement of the model worker R2 is input (steps S24 and S25), The process (step S15) of adjusting the evaluation criterion information for the work operation at the specific stage or another stage of the work procedure of the maintenance work related to the information has been described.
  • the present embodiment is not limited to this.
  • the training management server 3 and the training support terminal 4 input predetermined information that can be a factor in causing a maintenance work accident from a predetermined three-dimensional body movement of the trainee R1. At this time, the adjustment processing of the evaluation reference information as described above may be performed.
  • FIG. 11 is an explanatory diagram of progress table content indicating the progress of a plurality of operations managed by the site management server 6 in the content presentation system 1.
  • FIG. 12 is a procedure table exemplifying a work procedure of the first work of the plurality of works shown in FIG. 11 and content data materials to be presented to the trainee, including a report from a skilled person at each stage in the work procedure.
  • FIG. 3 is an explanatory diagram of content.
  • FIG. 13 is an explanatory diagram of a measurement data sheet for collecting the content data material shown in FIG. 12 from a skilled person.
  • the scheduled execution dates, start / end times, the corresponding work names, and the results of the plurality of works are shown together with the index numbers in the planned work order.
  • the first work of the work is the completed work of “Index 1 and the replacement of the electric circuit” of Index1
  • the next work is the ongoing work of “Index and control of the air conditioning and replacement of the base” of Index 2
  • the following work Is a work that has not been implemented for Index3: “Air conditioning centralized control unit, wiring inspection”.
  • the procedure table content illustrated in FIG. 12 illustrates a procedure corresponding to the first operation of the progress table content illustrated in FIG. 11, in which the Index of each stage of the operation procedure is indicated by a number, and a plurality of operations are performed.
  • the work name of the work is displayed, and the work operation of each stage is shown as a procedure together with the corresponding content data material.
  • the training support terminal 4 displays a picture (item.jpg) or 3DCG (item.fbx) for identifying a work target area or a work target during the index 1 work operation.
  • An explanation display (manual_1.txt) is displayed on the precautions in the work operation and the like.
  • a skilled worker R2 wearing the on-site support terminal 7 before or during the creation of the content incorporating the work procedure When creating training content with information presentation as exemplified above, a skilled worker R2 wearing the on-site support terminal 7 before or during the creation of the content incorporating the work procedure.
  • To perform a model work according to a predetermined work procedure specify a work operation at a specific stage in which at least the know-how of the skilled worker R2 should be utilized or alerted, and an evaluation standard for the work operation at the specific stage Then, information on the work operation of the model work is obtained (see FIG. 13).
  • the work target device is the air conditioner
  • the work of removing or installing the circuit of the air conditioner is a risk target factor (for example, a high temperature generation element, a high voltage generation Element).
  • the training content refers to a content data material as shown in FIG. 12, and simulates the three-dimensional shape and work procedure of the work target device using video, sound, text message, and the like. Information that can be presented in space.
  • the first dangerous behavior suppression function is provided when the predetermined information that may cause an accident of the maintenance work is input from the predetermined three-dimensional body movement of the worker R2 or the trainee R1, and the maintenance related to the information is performed.
  • the evaluation criterion information is adjusted for the work operation at a specific stage or another stage of the work procedure of the work (see S15 in FIG. 4).
  • this system function increases the probability of a simulated accident occurring at a specific stage during the simulated work (the work stage targeting the risk factor) or at another stage, and the The training content is updated so as to strongly impress R1 on the occurrence of the accident (see S64 in FIG. 6, FIG. 7).
  • the risk of the accident occurrence is determined by the trainee R1.
  • the trainee R1 finishes the training and performs maintenance work on the work target equipment as a worker at the site he / she can start work with a strong awareness of the danger of accident occurrence, and the above awareness is sufficient.
  • the risk of accident occurrence can be greatly reduced compared to the conventional maintenance work that could not be said.
  • the first dangerous behavior suppression function is designed to impress the trainee R1 on the occurrence of a simulated accident by sound, text message, light, vibration, or the like. According to this configuration, it is possible to more strongly and surely impress the danger of the accident occurrence on the trainee R1 who experiences a simulated accident occurrence at the training stage, and it is possible to more reliably suppress the dangerous operation. Become like
  • the second dangerous behavior suppression function extracts an item having a high accident occurrence rate as a result of the training of the simulated work related to the predetermined work in the training support terminal 4 based on the control in the training management server 3, and carries out the danger target for the item. (Danger occurrence factor).
  • the content presentation system 1 has the following configuration in addition to the configuration for realizing the first dangerous behavior suppression function.
  • the training support terminal 4 includes a dangerous behavior determination processing unit 45a and a risk target factor management DB 46a
  • the on-site support terminal 7 includes a risk behavior determination processing unit 75b and a risk target factor management DB 76b.
  • the dangerous behavior determination processing unit 45a monitors the occurrence of an accident during the execution of the simulated work (training) of the predetermined work in the simulated work space, and determines a risk factor for a work item having a high accident occurrence rate. Define.
  • a possible danger is specified, and details of the danger (danger occurrence factor) and a method of avoiding the danger are stored in the danger target factor management DB 46a corresponding to the above items. I do.
  • the risk target factor management DB 46a includes, as setting items, an item having a high accident occurrence rate (first item) and a danger content (second item).
  • the risky behavior determination processing unit 45a extracts a work at a high place as an item having a high accident occurrence rate, and the first item and the second item respectively include “work at a high place” and “ Set (define) “fall”.
  • an item with a high accident occurrence rate is extracted as an item damage, “item damage”, “carelessness to check, careless walking” is set to the first item and the second item, respectively.
  • the content presentation system 1 distributes the definition information set in the risk factor management DB of the training support terminal 4 to the site management server 6 via the training management server 3.
  • the site management server 6 further distributes the above defined contents distributed from the training management server 3 to the site support terminal 7.
  • the risk behavior determination processing unit 75b stores the above defined content distributed from the site management server 6 in the risk factor management DB 76b.
  • the CPU 71 executes the risk behavior suppression control based on the definition of the risk target stored in the risk target factor management DB 76b under the control of the risk behavior suppression processing unit 65f of the site management server 6. I do.
  • This dangerous behavior suppression control will be described with reference to FIG.
  • a maintenance work start instruction is distributed from the site management server 6 to the site support terminal 7 as shown in FIG. (Step S71).
  • the site support terminal 7 Upon receiving the maintenance work start instruction, the site support terminal 7 starts work on the work target device (step S81). When the work is started, the site support terminal 7 sequentially updates and displays the screen corresponding to each stage of the work according to the progress of the work (step S82).
  • the displayed screen of each work stage is a screen content in which a work instruction or the like of the work stage corresponding to the work target device (actual machine) is AR-displayed.
  • the site support terminal 7 refers to the risk target factor management DB 76b in accordance with the progress of the work, and determines whether a risk target is defined corresponding to the work stage (step S83).
  • the CPU 71 displays the dangerous operation suppression message in the AR based on the definition of the danger target (step S84).
  • a message “caution for falling” is displayed in the work stage of the work at a high place, and a message such as “caution for confirmation and caution in walking” is displayed in the work stage in which the article is damaged.
  • the site support terminal 7 proceeds to step S85.
  • step S83 When it is determined that the danger target is not defined (NO in step S83), the site support terminal 7 immediately proceeds to step S85.
  • step 85 the site support terminal 7 determines whether the work has been completed.
  • the CPU 71 continues the processing from step S83.
  • step S85 CPU 71 ends the above-described series of dangerous behavior suppression control.
  • the risky behavior determination processing unit 45a of the training support terminal 4 constructs the risk target factor management DB 46a and distributes it to the site management server 6 and the site support terminal 7.
  • the dangerous behavior determination processing unit 75b monitors the occurrence of an accident, for example, during maintenance work on the work target device by the worker R3, and defines a risk factor for the work item with a high accident occurrence rate in the risk target factor management DB 76b. You may make it.
  • the second dangerous behavior suppression function defines a dangerous object for an item having a high accident rate as a result of the training using the simulated work space, and performs a dangerous operation suppression message based on the definition at the time of on-site work. Is displayed in AR. According to the configuration having this function, when the trainee R1 who has experienced an accident at the training stage works as the worker R3 at the site, the danger can be gradually reduced.
  • the third dangerous behavior suppression function is to update a danger target in accordance with a change in the current state, when a work report created by on-site work includes a description indicating a change from the current state.
  • the content presentation system 1 has the following configuration in addition to the configuration for realizing the first and second dangerous behavior suppression functions described above. That is, the site support terminal 7 has a work report management processing unit 75a and a work report management DB 76a.
  • the work report management processing unit 75a includes, for example, a process of creating a work report describing the work content of the maintenance work of the work target device and a work environment, and a process of registering the work report in the work report management DB 76a. It has a processing function.
  • the CPU 71 determines whether or not there is a description regarding a change in the work content and the work environment between the newly created work report and the already registered work report. It has a processing function related to determination processing and the like.
  • the work report management processing unit 75a creates a new work report on the maintenance work every time the maintenance work on the work target device ends ( Step S86).
  • the work report management processing unit 75a reads the work report registered in the work report management DB 76a (step S87), and sets a work environment between the new work report and the work report. It is determined whether the current state has changed (step S88). This determination can be realized, for example, by checking whether or not a new work report has a description indicating a change from the description of the already-used work report for an item that may be a danger target.
  • the work report management processing unit 75a performs a process of updating the danger target set in the danger target factor management DB 76b (step S89).
  • the danger target update process in step S89 will be described.
  • the new work report includes, for example, a description that the layout of the room in which the work target device is installed has changed and a narrow passage has been formed
  • the dangerous behavior determination process The unit 75b defines a new item in the danger target factor management DB 76b in which the first item is defined as "the passage has been obstructed due to the layout change" and the second item is defined as "caution against wall breakage during transportation". Add setting items.
  • the CPU 71 executes the risk behavior suppression control based on the definition of the risk target stored in the risk target factor management DB 76b under the control of the risk behavior suppression processing unit 65f of the site management server 6. I do.
  • This dangerous behavior suppression control can be executed by the procedure shown in the flowchart of FIG. 8 except that the definition of the dangerous object is changed. Note that, in the case where the update processing for adding the above-described setting items is performed in step S87 in FIG. 9, in the dangerous behavior suppression control, the “screen breakage during transportation” is displayed on the screen at the work site. Is displayed.
  • the third risk behavior suppression function is configured to update the risk target set in the risk target factor management DB 76b when the work report describes a change in the current state. According to the configuration having this function, even when there is a change in the current situation in the on-site work, the dangerous operation suppression message corresponding to the current situation change is displayed in an AR on a screen reflecting the progress of the work, thereby changing the current situation. The danger can be controlled step by step according to.
  • the content presentation system 1 has the following configuration in addition to the configuration for realizing the first to third dangerous behavior suppressing functions.
  • the risk target factor management DB 76b stores, in addition to the above-described definition of the risk target, index information such as a type of target device, a site situation, and worker skills. This index information can be stored in advance under the control of the dangerous behavior determination processing unit 75b, for example.
  • the dangerous behavior determination processing unit 75b has a function of extracting a stepwise warning element from the index information based on the risk target set in the risk target factor management DB 76b, and a stepwise corresponding to the stepwise warning element. It has a control function of performing a warning display.
  • the dangerous behavior determination processing unit 75b reads the risk target item and the index information from the risk target factor management DB 76b (Step S91). Subsequently, the risk behavior determination processing unit 75b extracts a risk element from the read risk target item (step S92). Further, the dangerous behavior determination processing unit 75b determines a stepwise warning item based on the extracted risk element and the index information (Step S93).
  • the risky behavior determination processing unit 75b sets “the work target device according to the worker skill at the time of entering and leaving the work target device. It is possible to determine stepwise warning items such as “warning” and “warning according to worker skills when working on the work target device". Further, the dangerous behavior determination processing unit 75b may determine stepwise warning items such as "request a prior confirmation to the control side” and "force the power of the device to be operated OFF" for work with a high degree of risk. You can also. The determined stepwise warning item is set, for example, in the risk target factor management DB 76b.
  • step S93 the dangerous behavior suppression control proceeds to a stage in which the site support terminal 7 performs a maintenance operation of the target device at the site (see steps S81 to S85 in FIG. 8). I do.
  • the dangerous behavior determination processing unit 75b executes the process of step S94 under the control of the dangerous behavior suppression processing unit 65f of the site management server 6. That is, the risky behavior determination processing unit 75b performs the maintenance work on the work target device at the site, based on the warning item determined in step S93 according to each stage of the work and set in the risk target factor management DB 76b.
  • step S94 stepwise dangerous behavior suppression control is executed (step S94), and thereafter, a series of processes is ended.
  • step S94 processes such as "alert according to worker skill when entering / leaving a work target device” and “alert according to worker skill when working with a work target device” are performed step by step.
  • the alert for example, a dangerous behavior suppression message capable of realizing the alert is displayed in an AR on the screen of each stage.
  • the fourth dangerous behavior suppression function is based on the danger target set (defined) in the danger target factor management DB 76b, and provides a step-by-step warning based on information such as target site equipment, site conditions, and worker skills. An element is extracted and a stepwise warning display corresponding to the stepwise warning element is performed. According to the configuration having this function, the trainee R1 who can virtually experience an accident by training in the training management system 5 is used for an item with a high accident occurrence rate during training at the time of on-site work as a worker after the training. Thus, it is possible to gradually reduce the danger in accordance with the work skills of the user.
  • the content presentation system causes a simulated accident at the training stage to strongly impress the danger of the accident on the trainee, and the danger of the accident in the maintenance work of the work target device at the site. Therefore, the present invention is applicable to a general training system for performing training using a 3DCG on a device having components that pose a danger to an operator.

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

訓練段階で模擬的な事故を発生させて該事故の危険性を訓練者に強く印象付け、現場における作業対象機器の現場作業での事故の危険性を確実に抑制可能なコンテンツ提示システムを提供するため、訓練用コンテンツを提示するコンテンツ提示システム1において、訓練管理サーバ3および現場管理サーバ6は、訓練者R1または模範作業者R2の所定の3次元身体動作から作業対象機器の現場作業の事故発生要因となり得る所定の情報が入力されたとき、該情報に係る現場作業の作業手順の特定段階または他の段階の作業動作について評価基準情報を調整する。その際、上記作業手順に従った模擬作業の実行中、特定段階または他の段階の作業動作について模擬的な事故の発生確率を高め、模擬的な事故発生に、訓練者R1に事故発生を強く印象づけるよう訓練用コンテンツを更新する。

Description

コンテンツ提示システム
 本発明は、模擬作業空内で作業対象機器の現場作業を模擬的に行わせるための3DCGを含む訓練用コンテンツを提示するコンテンツ提示システムに関する。
 例えば、工業製品等の各種装置では、その製造や保守作業において熟練した技術を必要とするものが少なくない。そのため、上述した作業を行う作業員、特に、熟練した技術を持たない者に対しては上述した各種作業のための訓練を行うことが重要になる。
 今日、仮想現実や拡張現実技術の進展により、各種装置を作業対象機器とし、実機の各箇所に作業指令等の情報を拡張表示し、該情報に従って作業対象機器の現場作業等の作業を行うことも可能になりつつある。
 一方、作業対象機器の中には、例えば、高温、高電圧等、作業における危険対象因子となり得る構造要素を有するものがあり、該構造要素を有する作業対象機器の現場作業に先立って、火傷や感電などの危険を抑制する訓練の必要性が高まっている。
 現場作業等における作業員の危険防止対策として、作業員の危険に対する意識を向上させるべく、危険予知採点表の情報を表示し、作業員となる講習者に絞り込ませた危険項目要因に基づいて当該講習者の危険予知に関する採点を行う技術が特許文献1に提案されている。
特開2008-139479号公報
 しかしながら、特許文献1に記載のものは、危険予知採点表を用いて講習者の危険に対する知識を習得できるものの、事故を模擬体験することについての配慮がなかったため、講習者が作業員となって作業対象機器の現場作業を行う際に十分な安全性を確保できないという問題点があった。
 本発明は、このような従来の課題を解決するためになされたものであって、訓練段階で模擬的な事故を発生させて該事故の危険性を訓練者に強く印象付け、現場における作業対象機器の現場作業での事故の危険性を確実に抑制可能なコンテンツ提示システムを提供することを目的とする。
 上記課題を解決するために、本発明の請求項1に係るコンテンツ提示システムは、作業対象機器の3次元形状情報と作業手順に基づく訓練用コンテンツを訓練者(R1)に提示し、仮想現実または拡張現実の模擬作業空間内で前記作業手順に従って現場作業の模擬作業を実行させるコンテンツ提示システムであって、前記作業対象機器の3次元形状情報を含む前記訓練用コンテンツおよび前記作業手順の作業動作についての評価基準情報を記憶する記憶部(36a)と前記訓練用コンテンツを前記訓練者に提示可能に出力する出力部(35e、43)とを有するコンテンツ出力装置(3)と、前記現場作業を実行する作業者(R2)または前記訓練者の3次元作業動作を測定情報として取得する動作測定装置(35a、65a)と、前記3次元作業動作の測定情報に基づいて前記作業動作についての評価基準情報を作成する評価基準作成装置(35b、65b)と、前記3次元作業動作の測定情報および前記評価基準情報に基づいて前記訓練用コンテンツを作成するコンテンツ作成装置(35c、65c)と、を備え、前記評価基準作成装置は、前記作業者または前記訓練者の所定の3次元身体動作から前記現場作業の事故発生要因となり得る所定の情報が入力されたとき、該情報に係る前記作業手順の特定段階または他の段階の作業動作について前記評価基準情報を調整し、前記コンテンツ作成装置は、前記模擬作業中の前記特定段階または他の段階の作業動作について模擬的な事故の発生確率を高め、前記模擬的な事故発生に、前記訓練者に事故発生を強く印象づけるよう前記訓練用コンテンツを更新することを特徴とする。
 この構成により、本発明の請求項1に係るコンテンツ提示システムは、訓練段階で模擬作業空間内での作業対象機器の現場作業を体験させる際、事故発生の危険性を訓練者に強く印象付けることができる。これにより、訓練者が訓練を終了して現場での作業員として作業対象機器の現場作業を行う際、事故発生の危険性を強く意識してその作業に臨むことができ、上記意識が充分とはいえなかったこれまでの現場作業に比べて、事故発生の危険性を大幅に低減することができる。
 本発明の請求項2に係るコンテンツ提示システムは、前記コンテンツ作成装置は、前記模擬的な事故の発生を、音、テキストメッセージ、光、振動などで前記訓練者に印象付けることを特徴とする。
 この構成により、本発明の請求項2に係るコンテンツ提示システムは、訓練段階で模擬的な事故発生を体験する訓練者に対して、当該事故発生の危険性をより強くかつ確実に印象付けることができ、現場での危険をより確実に抑制できる。
 本発明の請求項3に係るコンテンツ提示システムは、前記模擬的な事故の発生確率が高い作業項目を抽出し、該作業項目について危険発生要因を定義する危険行動判定処理手段(75b、76b)と、前記現場作業での前記作業項目の作業に際し、前記作業者に対し、前記危険発生要因による危険行動を抑制させるための報知を行う危険行動抑制制御手段(65f)と、をさらに有することを特徴とする。
 この構成により、本発明の請求項3に係るコンテンツ提示システムは、訓練段階で事故発生を体験した訓練者が、現場で作業者として作業を行う際に、段階的に危険を抑制できるようになる。
 本発明の請求項4に係るコンテンツ提示システムは、前記現場作業の作業環境を記述した作業報告書を作成する作成手段(75a、76a)と、作成された前記作業報告書と既に作成されている既作業報告書との間に前記作業環境が現状から変化した記述があるかを判定し、前記記述があった場合、変化した作業環境に応じ、前記作業項目についての前記危険発生要因の定義を更新する更新手段(65f)と、を有することを特徴とする。
 この構成により、本発明の請求項4に係るコンテンツ提示システムは、現場作業において、現況に変化があった場合でも、現況の変化に合わせて段階的に危険を抑制できるようになる。
 本発明の請求項5に係るコンテンツ提示システムは、前記作業項目についての前記危険対象の定義と、前記作業者の作業者スキルを含む指標情報に基づいて当該作業項目を含む前記現場作業中に段階的に実施する警告項目を設定する設定手段(75b)と、前記現場作業中、前記警告項目に基づいて段階的に警告を行う警告手段(65f)と、を有することを特徴とする。
 この構成により、本発明の請求項5に係るコンテンツ提示システムは、訓練で事故を模擬体験可能な訓練者が、訓練終了後、作業者としての現場作業時に、訓練中の事故発生率が高い項目について、自分の作業スキル等に合わせて段階的に危険を抑制することが可能となる。
 本発明は、訓練段階で模擬的な事故を発生させて該事故の危険性を訓練者に強く印象付け、現場における作業対象機器の現場作業での事故の危険性を確実に抑制可能なコンテンツ提示システムを提供することができる。
本発明の一実施形態に係るコンテンツ提示システムの全体構成図である。 本発明の一実施形態に係るコンテンツ提示システムの訓練管理サーバおよび訓練支援端末の機能構成を示すブロック図である。 本発明の一実施形態に係るコンテンツ提示システムの現場管理サーバおよび現場支援端末の機能構成を示すブロック図である。 本発明の一実施形態に係るコンテンツ提示システムの第1の危険行動抑制制御に係る現場管理サーバおよび現場支援端末間の動作シーケンスを示す図である。 本発明の一実施形態に係るコンテンツ提示システムの第1の危険行動抑制制御に係る現場管理サーバおよび訓練管理サーバ間の動作シーケンスを示す図である。 本発明の一実施形態に係るコンテンツ提示システムの第1の危険行動抑制制御に係る訓練管理サーバおよび訓練支援端末間の動作シーケンスを示す図である。 図6のステップ64における模擬作業空間内での模擬作業中に模擬的に発生した事故に係る評価判定結果の表示例を示す概略図である。 本発明の一実施形態に係るコンテンツ提示システムの第2の危険行動抑制制御に係る現場管理サーバおよび現場支援端末間の動作シーケンスを示す図である。 本発明の一実施形態に係るコンテンツ提示システムの現場支援端末における第3の危険行動抑制制御動作を示すフローチャートである。 本発明の一実施形態に係るコンテンツ提示システムの第4の危険行動抑制制御動作を示すフローチャートである。 本発明の一実施形態に係るコンテンツ提示システムにおける作業管理サーバで管理される複数の作業の進行状況を示す進行表コンテンツの説明図である。 図11に示す複数の作業のうち最初の作業の作業手順とその作業手順上の各段階で熟練者からの収報を含み訓練者に提示されるコンテンツデータ素材を例示する手順表コンテンツの説明図である。 図12に示すコンテンツデータ素材を熟練者から収集するための測定データシートの説明図である。
 以下、本発明に係るコンテンツ提示システム1の一実施形態について図面を用いて説明する。なお、本実施形態では、主として、作業対象機器の保守作業の訓練用コンテンツを訓練者R1に提示する場合について述べるが、本発明は、システムや設備を対象とする各種の現場作業の訓練用コンテンツを提示する場合に適用できるものである。
 本発明に係るコンテンツ提示システム1は、図1に示すように、それぞれネットワーク接続された訓練管理システム5、現場管理サーバ6、現場支援端末7を有している。訓練管理システム5は、模擬作業空間での訓練者R1による作業対象機器の現場作業に関する訓練の管理を行うものであり、訓練管理サーバ3、訓練支援端末4により構成される。
 コンテンツ提示システム1において、訓練管理サーバ3、現場管理サーバ6は、例えば、PC(パーソナル・コンピュータ)等の情報処理装置により構成される。また、訓練支援端末4、現場支援端末7としては、例えば、スマートフォン、タブレット、HMD(Head Mount Display)等の携帯型端末が用いられる。
 訓練管理サーバ3、訓練支援端末4、現場管理サーバ6、および現場支援端末7は、いずれも、3次元グラフィックデータ描画機能を有している。すなわち、コンテンツ提示システム1は、作業対象機器の保守作業に関する情報を訓練と現場間で相互に活用するばかりでなく、訓練で用いる画像と現場での情報収集に用いる画像の処理に3DCGを積極的に採用している。特に、本実施形態では、訓練においては作業対象機器の3DCGデータを用い、現場では上述した作業対象機器の3DCGを元にして、現実の作業対象機器に対する作業指令等の拡張表示(AR)を行う。
 まず、現場での模範作業者R2による作業対象機器(実機)の保守作業に係る訓練用コンテンツ作成のための情報収集と、その訓練用コンテンツに基づく訓練者R1に対する訓練の作業概要について説明する。
 図1において、現場で運用される現場管理サーバ6および現場支援端末7のうち、現場支援端末7は、模範作業者R2の現実の作業対象機器に対する保守作業の動作情報(活動情報)を、音声、手や足などの動作、視線などの身体動作情報とともに3次元作業動作記録(以下、単に作業動作という)として記憶する。ここで、作業対象機器の画像は3DCGデータとして処理される。
 上述した身体動作情報の収集に際しては、それに先立ち、模範作業者R2に対して、測定用の機材、例えば、HMD、DoFセンサ付手袋、マイクなどの身体動作情報検出用センサを装着することを報知する。この報知は、例えば、現場支援端末7の表示部73に対するメッセージ表示により行う。上述した保守作業が終了すると、現場支援端末7は、当該保守作業中に記憶した作業動作記録を現場管理サーバ6に配信する。
 現場管理サーバ6は、現場支援端末7から配信される作業動作記録に基づき、当該保守作業を模した模擬作業を行わせるための訓練用コンテンツを作成し、該訓練用コンテンツを保存する。また、現場管理サーバ6は、現場支援端末7から配信される作業動作記録を訓練管理サーバ3に配信する。
 訓練管理サーバ3は、現場管理サーバ6から配信される作業動作記録に基づき、模擬作業を行わせるための訓練用コンテンツを作成し、該訓練用コンテンツを保存する。その後、訓練管理サーバ3は、例えば、訓練者R1による所定の操作に基づく訓練開始指令に基づき、保存しておいた訓練用コンテンツを訓練支援端末4に送信する。
 訓練支援端末4は、訓練管理サーバ3から配信された訓練用コンテンツを受信し、該訓練用コンテンツに基づいて模擬作業を実行させる。具体的に、訓練支援端末4は、訓練用コンテンツに基づいて作業対象機器の3DCGデータを表示部43(図2参照)に表示する。これにより、訓練支援端末4において、訓練者R1に対し、仮想現実(Virtual Reality;VR)の模擬空間内で、作業対象機器の保守作業に関する模擬作業(訓練)を実行させるための環境が整う。
 訓練者R1による上記模擬空間による模擬作業の実行中、訓練支援端末4は、訓練用コンテンツに基づいて作業対象機器の3DCGデータを表示部43に表示し、かつ、保守作業の作業手順に従った、例えばテキスト文章などからなる作業命令を、当該模擬作業の進行に合わせかつ各段階に対応させて表示部43に表示する。これにより、訓練者R1は、仮想現実の模擬作業空間内で、3DCG表示された作業対象機器に対し、併せて表示された作業命令等に従って当該作業対象機器の保守作業の訓練を行うことが可能になる。
 上述した訓練(模擬作業)において、訓練支援端末4は、訓練者R1の仮想の作業対象機器に対する保守作業の動作情報(活動情報)を、身体動作情報検出用センサにより収集した手や腕などの動作、視線などの身体動作情報とともに訓練時作業動作記録Bとして取込む。さらに、訓練支援端末4は、訓練管理サーバ3が現場管理サーバ6から既に取得している模範作業者R2が行った保守作業の際の作業動作記録(以下、収集時作業動作記録Aという)を取込み、当該訓練時作業動作記録Bと収集時作業動作記録Aとに基づいて訓練者R1による作業手順の作業動作の正確性(熟練度)を評価する処理を行う。
 訓練支援端末4は、作業の正確性を評価する処理において、例えば、訓練時作業動作記録Bと収集時作業動作記録Aの各値を比較し、訓練時作業動作記録Bの値が収集時作業動作記録Aの値に対して近いほど評価値を高い価とする一方、訓練時作業動作記録Bに値が収集時作業動作記録Aの値に対して所定の閾値を超えて乖離している場合には評価値を低い値とするような処理を行う。このとき、訓練支援端末4は、上記評価結果を訓練者R1が目視確認できるように画像化して表示部43に表示する。
 上述した訓練、および現場での情報収集に際して訓練支援端末4および現場支援端末7が扱う3DCGデータは、3次元座標を有している。このため、事前に現場で収集している模範作業者R2の手の3次元座標と、訓練中の訓練者R1の手の3次元座標とを比較することで、訓練者R1の手が作業対象機器のどの箇所に接触したかを判定することができる。
 特に、本実施形態では、訓練中の3DCG処理については、訓練者R1の手や体が作業対象機器の危険対象因子(例えば、高温発生要素、高電圧発生要素)に相当する構成要素に近接、あるいは接触する状況を判断し、訓練者R1が行った作業が失敗に近い状態であること、あるいは失敗したことを訓練者R1の強く印象付ける方法で報知するようになっている。この報知の処理については、後で図6、図7を参照して詳述する。
 上述した現場での情報収集並びに訓練の作業概要を踏まえ、本実施形態に係るコンテンツ提示システム1の構成および動作について詳しく説明する。
 まず、コンテンツ提示システム1の各装置の構成について説明する。コンテンツ提示システム1において、訓練管理システム5に含まれる訓練管理サーバ3および訓練支援端末4は、例えば、図2に示す構成を有している。
 図2に示すように、訓練管理サーバ3は、CPU31、通信部32、表示部33、メモリ35、データベース(以下、DBという)36を有している。CPU31は、訓練管理サーバ3の全体の動作を制御する。通信部32は、訓練支援端末4および現場管理サーバ6との間で情報の通信を行うものである。表示部33は、各種情報を表示するものであり、例えば、LCD等により構成される。
 メモリ35は、例えば、ROM、RAM等を含み、訓練管理システム5としての機能動作を実現するためのプログラム等、各種の情報を記憶している。この例では、メモリ35は、動作測定処理部35a、評価基準作成処理部35b、コンテンツ作成処理部35c、コンテンツ配信処理部35d、模擬作業処理部35e、危険行動抑制処理部35fの各処理部を実現するための各プログラムを記憶している。なお、当該各処理部は、CPU31が各プログラムをメモリ35から読み出して実行することにより実現される。
 動作測定処理部35aは、後述する訓練支援端末4の測定情報取得部44で取得される訓練者R1の活動情報を通信部32経由で受け取り、訓練者R1の3次元作業動作の測定情報として処理する。
 評価基準作成処理部35bは、訓練者R1の3次元作業動作の測定情報に基づいて訓練者R1の作業動作についての評価基準情報を作成する。評価基準情報は、訓練者R1が後述する模擬作業空間内で行う作業対象機器の保守作業(模擬作業)の作業手順中、特定段階(危険対象因子を対象とする作業段階)または他の段階の作業動作にそれぞれ対応して作成される。
 コンテンツ作成処理部35cは、動作測定処理部35aにより処理される訓練者R1の3次元作業動作の測定情報と、評価基準作成処理部35bにより作成される評価基準情報とに基づいて訓練用コンテンツを作成する。
 コンテンツ配信処理部35dは、コンテンツ作成処理部35cにより作成された訓練用コンテンツを通信部32経由で現場管理サーバ6に配信する。
 模擬作業処理部35eは、訓練支援端末4と連携し、作業対象機器の保守作業を模擬作業として実現するための処理を行う。具体的に、模擬作業処理部35eは、作業対象機器の3次元形状情報と作業手順に基づく訓練用コンテンツを訓練支援端末4の表示部43に表示させて訓練者R1に提示し、仮想現実または拡張現実の模擬作業空間内で作業手順に従って保守作業の模擬作業を実行させる制御を行う。
 危険行動抑制処理部35fは、上記模擬作業空間内での模擬作業中、訓練者R1が作業対象機器の危険対象因子に接触するなどの危険動作を抑制するための制御を行う。危険対象因子とは、後述する高温発生要素、高電圧発生要素、あるいは高所作業等、当該箇所の作業にあたって訓練者R1に危険をもたらす要素のことをいうものとする。
 DB36は、コンテンツ管理DB36a、危険対象因子管理DB36b、受講履歴管理DB36cを有する。コンテンツ管理DB36aは、上述した訓練用コンテンツを記憶し、危険対象因子管理DB36bは、危険行動抑制処理部35fの危険動作抑制制御に用いられる上記危険対象因子に関する情報を記憶し、管理する。受講履歴管理DB36cは、模擬作業空間内での模擬作業による作業対象機器の保守作業のための訓練を受講した履歴情報を記憶、管理する。
 同じく図2に示すように、訓練支援端末4は、CPU41、通信部42、表示部43、測定情報取得部44、メモリ45およびDB46を有している。CPU31は、訓練支援端末4全体の動作を制御する。通信部42は、訓練管理サーバ3との間で情報の通信を行う。表示部43は、作業対象機器の保守作業の訓練に用いる模擬作業空間の情報等、各種情報を表示する。
 測定情報取得部44は、訓練者R1が装着しているToF(Time Of Flight)センサ等の各種センサの検出信号を、訓練者R1の3次元作業動作の活動情報として取得するものである。
 メモリ45は、例えば、ROM、RAM等を含み、訓練管理システム5としての機能動作を実現するためのプログラム等、各種の情報を記憶している。この例では、メモリ45は、危険行動判定処理部45aを実現するためのプログラムを記憶している。すなわち、危険行動判定処理部45aは、CPU41が上記プログラムをメモリ45から読み出して実行することにより実現される。危険行動判定処理部45aは、上記模擬作業空間内での模擬作業中、訓練者R1が作業対象機器の危険対象因子に接触するなどの危険行動を判定するための制御を行う。
 DB46は、危険対象因子管理DB46aを有する。危険対象因子管理DB46aは、危険行動判定処理部45aで危険行動と判定された危険対象因子の情報を記憶し、管理する。
 図2に示す構成中、コンテンツ管理DB36aは、本発明の記憶部に相当する。また、模擬作業処理部35e、表示部43は、本発明の出力部に相当する。また、これらコンテンツ管理DB36a、模擬作業処理部35eおよび表示部43を有する訓練管理サーバ3は、本発明のコンテンツ出力装置を構成する。また、動作測定処理部35a、評価基準作成処理部35b、コンテンツ作成処理部35cは、それぞれ、本発明の動作測定装置、評価基準作成装置、コンテンツ作成装置を構成する。
 また、コンテンツ提示システム1において、現場管理サーバ6および現場支援端末7は、図3に示す構成を有している。
 図3に示すように、現場管理サーバ6は、CPU61、通信部62、表示部63、メモリ65、DB66を有している。CPU61は、現場管理サーバ6全体の動作を制御する。通信部62は、現場支援端末7および訓練管理サーバ3との間で情報の通信を行うものである。表示部63は、各種情報を表示するものであり、例えば、LCD等により構成される。
 メモリ65は、例えば、ROM、RAM等を含み、各種機能動作を実現するためのプログラム等や各種情報を記憶している。この例では、メモリ65は、動作測定処理部65a、評価基準作成処理部65b、コンテンツ作成処理部65c、コンテンツ配信処理部65d、保守作業処理部65e、危険行動抑制処理部65fの各処理部を実現するための各プログラムを記憶している。なお、これらの各処理部は、CPU61が上記各プログラムをメモリ65から読み出して実行することにより実現される。
 動作測定処理部65aは、後述する現場支援端末7の測定情報取得部74で取得される模範作業者R2または作業者R3の活動情報を通信部72経由で受け取り、模範作業者R2または作業者R3の3次元作業動作の測定情報として処理する。ここで、作業者R3は、例えば、訓練管理システム5での訓練を終了した訓練者R1である。
 評価基準作成処理部65bは、例えば模範作業者R2または作業者R3の3次元作業動作の測定情報に基づいて該模範作業者R2または作業者R3の作業動作についての評価基準情報を作成する。評価基準情報は、模範作業者R2または作業者R3が後述する現場支援端末7の表示部73のAR画面を利用して行う作業対象機器の実機を用いた作業手順中、特定段階または他の段階の作業動作にそれぞれ対応して作成される。
 コンテンツ作成処理部65cは、動作測定処理部65aにより処理される模範作業者R2の3次元作業動作の測定情報と、評価基準作成処理部65bにより作成される評価基準情報とに基づいて訓練用コンテンツを作成する。
 コンテンツ配信処理部65dは、コンテンツ作成処理部65cにより作成された訓練用コンテンツを通信部62経由で訓練管理サーバ3に配信する。
 保守作業処理部65eは、現場支援端末7と連携し、作業者R3に作業対象機器の保守作業を実行させるための処理を行う。具体的に、保守作業処理部65eは、現場支援端末7である例えばHMDの透過型画面からなる表示部73上で、作業対象機器(実機)に対してその保守作業の作業手順に基づく作業指令等を追加的に表示(AR表示)させて作業者R3に提示する。これにより、作業者R3は、AR表示された作業指令を確認しながら、作業対象機器の保守作業をおこなうことができる。
 危険行動抑制処理部65fは、上記AR表示画面を用いた保守作業の実行中、作業者R3が作業対象機器の危険対象因子に接触するなどの危険動作を抑制する制御を行う。
 DB66は、危険対象因子管理DB66aを有する。危険対象因子管理DB66aは、危険行動抑制処理部65fの危険動作抑制制御に用いられる上記危険対象因子に関する情報を記憶し、管理する。
 同じく図3に示すように、現場支援端末7は、CPU71、通信部72、表示部73、測定情報取得部74、メモリ75およびDB76を有している。CPU71は、現場支援端末7全体の動作を制御する。通信部72は、現場管理サーバ6との間で情報の通信を行う。表示部73は、作業対象機器(実機)の保守作業に用いるAR表示画面等、各種情報を表示する。
 測定情報取得部74は、模範作業者R2または作業者R3が装着しているToFセンサ等の各種センサの検出信号を、模範作業者R2または作業者R3の3次元作業動作の活動情報として取得するものである。
 メモリ75は、例えば、ROM、RAM等を含み、各種機能動作を実現するためのプログラム等、及び各種情報を記憶している。この例では、メモリ75は、作業報告管理処理部75a、危険行動判定処理部75bを実現するためのプログラムを記憶している。すなわち、作業報告管理処理部75a、危険行動判定処理部75bは、CPU71が上記プログラムをメモリ75から読み出して実行することにより実現される。作業報告管理処理部75aは、上記AR表示画面を用いた作業対象機器の保守作業についての作業報告書を作成する。危険行動判定処理部75bは、保守作業の実行中、例えば、作業者R3が作業対象機器の危険対象因子に接触するなどの危険行動を判定するための制御を行う。
 DB76は、作業報告管理DB76a、危険対象因子管理DB76bを有する。作業報告管理DB76aは、作業報告管理処理部75aにより作成された作業報告書の情報を記憶し、管理する。危険対象因子管理DB76bは、危険行動判定処理部75bで危険行動と判定された危険対象因子の情報を記憶し、管理する。
 図3に示す構成中、動作測定処理部65a、評価基準作成処理部65b、コンテンツ作成処理部65cは、それぞれ、本発明の動作測定装置、評価基準作成装置、コンテンツ作成装置を構成する。
 次に、本実施例に係るコンテンツ提示システム1(図1~図3参照)における危険行動抑制機能について説明する。この機能は、訓練者R1が訓練を終了し、現場で作業者R3として対象作業機器(実機)の保守作業を行う際、対象作業機器の危険対象因子に対する接触事故などの事故を抑制するための機能である。本実施形態においては、特に、以下の第1から第4の危険行動抑制機能を例に挙げて説明する
(第1の危険行動抑制機能)
 第1の危険行動抑制機能は、訓練段階の模擬作業空間内での保守作業中に模擬的な事故を発生させ、訓練者R1に事故の発生を強く印象付けることにより、危険行動を抑制するものである。
 この機能を実現するため、例えば、訓練管理サーバ3の危険行動抑制処理部35fは、模範作業者R2の所定の3次元身体動作から保守作業の事故発生要因となり得る所定の情報が入力されたとき、該情報に係る保守作業の作業手順の特定段階または他の段階の作業動作について評価基準情報を調整するようになっている。
 そのうえで、危険行動抑制処理部35fは、コンテンツ作成処理部35cによって、模擬作業中の特定段階または他の段階の作業動作について模擬的な事故の発生確率を高め、模擬的な事故発生に、訓練者R1に事故発生を強く印象づけるような訓練用コンテンツを更新させるよう制御する。
 また、危険行動抑制処理部35fは、模擬的な事故の発生を、音、テキストメッセージ、光、振動などで訓練者R1に印象付けるようになっている。
 第1の危険行動抑制機能に係る制御動作について、図4~図7を参照して説明する。まず、現場において、模範作業者R2の所定の3次元身体動作から保守作業の事故発生要因となり得る所定の情報が入力されたとき、該情報に係る作業手順の特定段階または他の段階の作業動作について評価基準情報を調整する処理について図4および図5を参照して説明する。
 図4に示すように、この処理の開始にあたってはまず、現場管理サーバ6が、現場での模範作業者R2の活動情報を記憶すべく、現場支援端末7に対して作業指示を配信する(ステップS11)。
 現場支援端末7は、上記作業指示を受信すると、作業記録開始を検出したか否かを判定する(ステップS22)。作業記録開始は、例えば、「作業開始」と発生する、ハンドジェスチャで示す、専用マーカを現場支援端末7のカメラの前にかざすなどの方法によって指示することができる。ここで作業記録開始を検出していないと判定された場合(ステップS22でNO)、ステップS22での検出処理を続行する。これに対し、作業記録開始を検出したと判定された場合(ステップS22でYES)、動作測定処理部65aは、現場支援端末7の測定情報取得部74によって取得された活動情報を通信部62を通じて取込み、記憶する処理を行う(ステップS23)。
 活動情報の記憶処理実行中、動作測定処理部65aは、危険対象因子に対応する作業段階か否かを判定する(ステップS24)。ここで危険対象因子に対応する作業段階ではないと判定された場合(ステップS24でNO)、ステップS26へと進む。これに対し、危険対象因子に対応する作業段階であると判定された場合(ステップS24でYES)、動作測定処理部65aは、記録中の活動情報について、危険対象因子に対応する作業段階である旨を当該作業段階に対応付けて記録し(ステップS25)、記録完了後、ステップS26へと進む。
 なお、上記ステップS24の処理に合わせて、例えば、模範作業者R2は、3次元身体動作の作業記録中に、危険個所を例えば音声により危険個所を逐一知らせるアクションを実行する。具体的に、模範作業者R2は、作業対象機器の保守作業を段階的に実施していく中で、「ここには絶対触れないようにする。」、「ここを触ったら火傷する。」、「ここを触ったら感電する。」等の発生を行いつつ作業を続行する。
 一方、現場支援端末7において、危険行動判定処理部75bは、上述した発生に基づいて、危険対象因子を特定し、該特定対象因子を、その発生がなされた各作業段階に対応付けて危険対象因子管理DB76bに記憶させる処理を行う。そして、動作測定処理部65aは、危険対象因子管理DB76bを参照して、上記ステップS24での危険対象因子に対応する作業段階か否かについての判定処理を実行するようになっている。
 ステップS26において、動作測定処理部65aは、作業記録の終了を検出したか否かを判定する。ここで作業記録終了を検出していないと判定された場合(ステップS26でNO)、ステップS23以降の処理を繰り返し実行する。この間、作業記録終了を検出したと判定された場合(ステップS26でYES)、評価基準作成処理部65bは、それまでに作成した作業記録に基づいて、訓練中の模擬作業の各作業段階に対応した評価値を含む評価基準情報を作成する(ステップS27)。次いで、動作測定処理部65aは、作業記録、および評価基準情報を現場管理サーバ6に対して配信する(ステップS28)。
 一方、現場管理サーバ6は、現場支援端末7から作業記録、および評価基準情報を受信すると、評価基準情報が既に作成されているか否かを判定する(ステップS12)。ここで、評価基準情報が作成されていないと判定された場合(ステップS12でNO)、現場支援端末7から送られてきた作業記録に基づいて当該作業記録に対応する評価基準情報を作成し(ステップS13)、当該作業記録、および評価基準情報をそれぞれ保存する(ステップS16)。
 これに対し、現場管理サーバ6は、現場支援端末7から作業記録、および評価基準情報を受信すると、評価基準情報が既に作成されているか否かを判定する(ステップS12)。ここで、評価基準情報が作成されていると判定された場合(ステップS12でYES)、現場支援端末7から送られてきた作業記録内に危険対象因子に対応する作業段階の設定があるか否かを判定する(ステップS14)。ここで、作業記録内に危険対象因子に対応する作業段階(危険対象因子に対応する作業段階を特定段階という)の設定があると判定された場合(ステップS14でYES)、当該作業記録内の該当する作業段階に対応する評価基準情報の評価値を調整(ステップS15)し、該調整処理完了後、一連の処理を終了する。また、作業記録内に危険対象因子に対応する作業段階の設定がないと判定された場合(ステップS14でNO)、直ちに処理を終了する。
 上記ステップS16の処理終了後、あるいは、上記ステップS15での評価基準情報の調整処理後、現場管理サーバ6は、訓練管理サーバ3との間で図5に示す制御シーケンスに従った現場/訓練間情報伝達処理を実行する。
 図5に示す処理においてはまず、現場管理サーバ6は、訓練管理サーバ3に対して作業動作記録、および評価基準情報を配信する(ステップS31)。ここで、動作記録は、作業対象機器の保守作業中における危険対象因子を含むものであり、評価基準情報は、当該危険対象因子に対する保守作業の作業段階に対応して評価値が調整されたものである。
 訓練管理サーバ3は、上記作業動作記録、および評価基準情報を受信すると、既存の訓練マニュアルを読み込み(ステップS41)、上記作業動作記録に基づいて訓練用コンテンツを作成する処理を行う(ステップS42)。この訓練用コンテンツは、訓練者R1に作業対象機器の所定の作業手順に従った保守作業を模擬作業として訓練者R1に実行させるための情報であり、作業対象機器の3次元形状情報と、模擬作業として実行させるための模擬作業空間とを含むものである。
 上記ステップS42での訓練用コンテンツの作成処理が完了すると、訓練管理サーバ3は、作成された訓練用コンテンツを表示する画面(作成画面)を表示部33に表示させる(ステップ43)。この作成画面は、上述した危険対象因子に対応する作業段階にあっては、例えば、作業対象機器の3DCG画像に、当該危険対象因子に対応する作業指令としての危険動作抑制メッセージを重畳させた内容としてもよい。
 また、訓練管理サーバ3は、上記ステップS43で作成画面を表示させつつ、当該作成画面の内容を承認する指示があるか否かを判定する(ステップS44)。ここで、作成画面の内容を承認する指示がないと判定された場合(ステップS44でNO)、ステップS42以降の処理を続行する。これに対し、作成画面の内容を承認する指示があると判定された場合(ステップS44でYES)、ステップS42で作成された訓練用コンテンツをコンテンツ管理DB36aに記憶させる処理を行う。
 なお、図5に示す制御シーケンスにおいて、現場管理サーバ6は、ステップS31での配信処理の前後に、作業動作記録、および評価基準情報に基づいて訓練用コンテンツを作成する処理を実行してもよい。特に、図5においては、現場管理サーバ6は、ステップS31での配信処理完了後に訓練用コンテンツを作成する例を挙げている。なお、その際、訓練管理サーバ3では、危険行動抑制処理部35fが、受信した作業動作記録に含まれる上記危険対象因子の情報(危険対象因子管理DB76bと同内容)を危険対象因子管理DB36bに記憶させる処理を実行するようにしてもよい。
 図5における上記ステップS45での訓練用コンテンツの保存処理完後、訓練管理サーバ3は、訓練支援端末4と連携して図6に示す制御シーケンスに従った訓練作業評価制御を実行する。この訓練作業評価制御の中には、危険行動抑制処理部35fによる危険行動抑制制御が含まれている(ステップS63~S65参照)。そのため、図6は、第1の危険行動抑制制御に係る訓練管理サーバ3および訓練支援端末4間の動作シーケンスともいえる。
 図6に示す訓練作業評価制御においてはまず、訓練管理サーバ3は、模擬作業処理部35eにより、訓練支援端末4に対して訓練用コンテンツを配信する(ステップS51)。
 訓練支援端末4は、訓練管理サーバ3から訓練用コンテンツを受信すると、CPU41が当該訓練用コンテンツの実行を開始する(ステップS51)。ステップS51での処理において、CPU41は、作業対象機器の3次元形状情報と該作業対象機器の保守作業の作業手順に基づく上記訓練用コンテンツを訓練者R1に提示する。具体的に、CPU41は、仮想現実または拡張現実(Augmented Reality;AR)の模擬作業空間を表示部43に表示させ、当該模擬作業空間内で、作業対象機器の保守作業の作業手順に従って当該保守作業の模擬作業を実行させるようになっている。
 その際、訓練者R1は、熟練作業者R2と同様、HMD、DoFセンサ付手袋、マイクなどを装着して上記模擬作業を行う。これにより、訓練者R1の当該模擬作業中の手や足などの動作、視線などの身体動作情報が測定情報として測定情報取得部74から取り込まれる。そして、この測定情報から訓練者R1の当該模擬作業での作業動作記録が得られ、これが、後述するS64、S65の判定処理において、現場支援端末7から作業動作記録とともに受信した評価基準情報と比較され、当該模擬作業の評価判定がなされる。
 訓練支援端末4は、上記ステップS61での模擬作業空間内での作業対象機器の保守作業の模擬作業の開始後、該模擬作業としての保守作業の評価判定が必要とされる作業段階の画面になったか否かを判定する(ステップS62)。ここで、評価判定が必要とされる作業段階の画面になっていないと判定されると(ステップS62でNO)、CPU41は当該ステップS62の処理を続行する。
 これに対し、評価判定が必要とされる作業段階の画面になったと判定されると(ステップS62でYES)、次いでCPU41は、判定対象が危険対象因子であるか否かを判定する(ステップS63)。ここで、判定対象が危険対象因子ではないと判定されると(ステップS63でNO)、CPU41は、当該作業段階の評価基準情報に基づいてこの時の保守作業の評価判定処理を実行し、かつ、その判定結果を報知する処理を行う(ステップS65)。
 ステップS65においては、CPU41は、例えば訓練管理サーバ3の評価基準作成処理部35bから取得した評価基準情報に基づいて画面に表示されている作業段階の作業に関する評価処理を行う。
 一方、判定対象が危険対象因子であると判定されると(ステップS63でYES)、CPU41は、当該危険対象因子に対する作業段階の評価基準情報に基づく評価判定処理を行ったうえで、評価判定結果が所定のレベル以下の場合には、模擬的な事故が発生したことを強調する報知処理を実行する(ステップS64)。
 ステップS64の処理について、さらに詳しく説明する。図4の制御シーケンスによれば、現場管理サーバ6では、現場支援端末7から作業動作記録とともに受信した評価基準情報を元に、危険対象因子の設定があれば、当該作業段階に対応する評価基準値を調整するようになっている(ステップS14、S15参照)。その際、通常の作業段階よりも厳しい評価値となるよう基準評価情報を調整すると、当該評価値に基づく評価判定は通常の作業段階に対して低い評価値を得ることとなる。なお、基準評価情報の調整方法としては危険対象因子に対する作業時の危険度合いに応じた調整幅で評価値を調整する方法と、予め設定した調整幅で評価値を調整する方法がある。
 再び図6の制御シーケンスに戻って説明を続けると、ステップS64の処理においては、危険対象因子に対する作業段階の厳しい評価値に基づく評価判定においては、通常の作業段階の評価結果に対してより低い評価結果をもたらすこととなる。本実施形態において、訓練支援端末4では、ステップS64での評価判定結果が所定のレベル以下の場合、模擬的な事故が発生したことを強調するような報知処理を実行する。
 具体的には、例えば、模擬作業空間内で、作業対象機器に「ここを触ったら火傷する」という内容のメッセージがAR表示されているにも関わらず、この作業段階での作業を実行した結果、その評価判定値が上記所定レベルよりも低い場合には、例えば、図7に示すような態様のメッセージを表示する。図7の例では、作業対象機器Mの高温発生要素M1に対する保守作業の模擬作業に際し、評価判定結果が所定のレベルより低いために、「あなたは、今、やけどしました。」というテキストメッセージが当該要素の近接位置に表示されている。
 図7の例では、模擬作業の実行中、作業対象機器Mの高温発生要素M1の接触する模擬的な事故の発生について述べたが、本実施形態ではこれに限らず、種々の応用、あるいは変形が可能である。この種の模擬的な事故での危険報知として、作業対象機器Mの高電圧発生要素に接触する事故を模擬的に発生させて、「あなたは、今、感電しました。」という報知を行ってもよい。また、作業対象機器Mの先鋭、あるいは鋭利な構成要素に接触する模擬的な事故を発生させて、「あなたは、今、ケガをしました。」等の報知を行ってもよい。
 また、図7例では、模擬的な事故の発生を、テキストメッセージで報知するようになっているが、本実施形態では、これに限らず、音、光、振動などで報知する形態、あるいはテキストメッセージ、音、光、振動を任意に組み合わせた形態で報知してもよい。
 また、上記の説明では、図4に示すように、模範作業者R2の所定の3次元身体動作から保守作業の事故発生要因となり得る所定の情報が入力されたとき(ステップS24、S25)、該情報に係る保守作業の作業手順の特定段階または他の段階の作業動作について評価基準情報を調整する処理(ステップS15)について述べてきた。しかしながら、本実施形態は、これに限るものではない。この種の評価基準情報の調整処理については、訓練管理サーバ3と訓練支援端末4とにより、訓練者R1の所定の3次元身体動作から保守作業の事故発生要因となり得る所定の情報が入力されたとき、上述したような評価基準情報の調整処理を行うようにしてもよい。
 なお、本実施形態に係るコンテンツ提示システム1で扱う訓練用コンテンツの一例について図11~図13に基づいて説明する。
 図11は、コンテンツ提示システム1における現場管理サーバ6で管理される複数の作業の進行状況を示す進行表コンテンツの説明図である。図12は、図11に示す複数の作業のうち最初の作業の作業手順とその作業手順上の各段階で熟練者からの収報を含み訓練者に提示されるコンテンツデータ素材を例示する手順表コンテンツの説明図である。図13は、図12に示すコンテンツデータ素材を熟練者から収集するための測定データシートの説明図である。
 図11に示す進行表コンテンツにおいては、複数の作業の実施予定日、開始・終了時刻および該当する作業名とその結果が作業の予定順のIndex番号と併せて示されている。その作業のうち例えば最初の作業は、Index1の完了した作業「空調機、電気回路交換」であり、次の作業は、Index2の進行中の作業「空調集中コントロール機、基盤交換」であり、次の作業は、Index3の未実施の作業「空調集中コントロール機、配線点検」である。
 図12に示す手順表コンテンツは、図11に示す進行表コンテンツの最初の作業に対応する手順を例示しており、作業手順の各段階のIndexが番号で示されるとともに、複数段階の作業動作による作業の作業名が表示され、各段階の作業動作が対応するコンテンツデータ素材と共に、手順として示されている。
 この手順表コンテンツにおいては、同図に示す作業名「空調機、電気回路交換」について、複数段階の作業動作が、index1の作業動作「対象物を確認する」から、index2の作業動作「カバーを開ける」、index3の作業動作「回路を取り外す」、index4の作業動作「回路を取り付ける」、index5の作業動作「カバーを取り付ける」へと順に進行し、index6の「動作に問題ないことを確認する」という作業動作で終了する。
 そして、この進行表コンテンツに基づき、訓練支援端末4においては、index1の作業動作中に、作業対象領域や作業対象物を特定するための写真(item.jpg)や3DCG(item.fbx)と現作業動作上の注意点等について説明表示(manual_1.txt)がなされる。
 また、index2の作業動作中には、カバーを開けるために、カバーの写真(Cover.jpg)や3DCG(Cover.fbx)の表示がなされるとともに、現作業動作内容を説明する音声付の動画(instruction_2.mp4)の再生および説明表示(manual_2.txt)がなされ、index3の作業動作中には、交換前の電気回路を取り外すために、その電気回路基板等の写真(electronic_circuit.jpg)やその装着部位周辺の3DCG(electronic_circuit.fbx)が表示されるとともに、現作業動作内容を説明する音声付き動画(instruction_3.mp4)の再生および説明表示(manual_3.txt)がなされる。
 次のindex4の作業動作中には、新しい電気回路を交換対象部位に取り付けるために、その電気回路基板等の写真(electronic_circuit.jpg)やその装着部位周辺の3DCG(electronic_circuit.fbx)が表示されるとともに、現作業動作内容を説明する音声付き動画(instruction_4.mp4)の再生および説明表示(manual_4.txt)がなされる。
 次のindex5の作業動作中には、カバーを装着するために、そのカバーの写真(Cover.jpg)や3DCG(Cover.fbx)の表示がなされるとともに、現作業動作内容を説明する音声付の動画(instruction_5.mp4)の再生および説明表示(manual_5.txt)がなされ、最後のindex6の作業動作中には、一連作業手順における各段階の作業動作に問題ないことを確認するべく、作業後の作業対象領域や作業対象物を特定するための写真(Item.jpg)や3DCG(item.fbx)と現作業動作上の注意点等についての説明表示(manual_6.txt)がなされる。
 本実施形態では、以上に例示したような情報提示を伴う訓練用コンテンツを作成するに際して、その作業手順を盛り込んだコンテンツの作成前あるいはその作成途中に、現場支援端末7を装着した熟練作業者R2に所定の作業手順で模範作業をしてもらい、その作業のうち少なくとも熟練作業者R2のノウハウ活用や注意喚起を行うべき特定段階の作業動作を特定し、その特定段階の作業動作についての評価基準となる模範作業の作業動作の情報を取得する(図13参照)。
 図12に示した空調機の電気回路交換という作業については、作業対象機器が空調機であり、該空調機の回路を外す、あるいは取り付ける作業は危険対象因子(例えば、高温発生要素、高電圧発生要素)となり得るものである。また、本実施形態において、訓練用コンテンツとは、図12に示すようなコンテンツデータ素材を用いて、作業対象機器の3次元形状と作業手順を、映像、音、テキストメッセージ等を用いて模擬作業空間内に提示し得る情報のことである。
 このように、第1の危険行動抑制機能は、作業者R2または訓練者R1の所定の3次元身体動作から保守作業の事故発生要因となり得る所定の情報が入力されたとき、該情報に係る保守作業の作業手順の特定段階または他の段階の作業動作について評価基準情報を調整する(図4のS15参照)ようになっている。そのうえで、本制機能は、模擬作業中の特定段階(危険対象因子を対象する作業段階)または他の段階の作業動作について模擬的な事故の発生確率を高め、模擬的な事故発生に、訓練者R1に事故発生を強く印象づける(図6のS64、図7参照)よう訓練用コンテンツを更新するものである。
 この第1の危険行動抑制機能を有する構成によれば、訓練段階で模擬作業空間内での作業対象機器の保守作業における模擬的な事故発生を体験させる際、事故発生の危険性を訓練者R1に強く印象付けることができる。これにより、訓練者R1が訓練を終了して現場での作業員として作業対象機器の保守作業を行う際、事故発生の危険性を強く意識して作業に臨むことができ、上記意識が充分とはいえなかったこれまでの保守作業に比べて、事故発生の危険性を大幅に低減することができる。
 また、第1の危険行動抑制機能は、模擬的な事故の発生を、音、テキストメッセージ、光、振動などで訓練者R1に印象付けるようになっている。この構成によれば、訓練段階で模擬的な事故発生を体験する訓練者R1に対して、当該事故発生の危険性をより強くかつ確実に印象付けることができ、危険動作をより確実に抑制できるようになる。
(第2の危険行動抑制機能)
 第2の危険行動抑制機能は、訓練管理サーバ3での制御に基づく訓練支援端末4での所定の作業に関する模擬作業の訓練の結果、事故発生率が高い項目を抽出し、当該項目について危険対象(危険発生要因)を定義するものである。
 この機能を実現するため、コンテンツ提示システム1は、第1の危険行動抑制機能を実現するための構成に加え、以下の構成を有している。例えば、訓練支援端末4は、危険行動判定処理部45a、危険対象因子管理DB46aを有し、現場支援端末7は、危険行動判定処理部75b、危険対象因子管理DB76bを有している。訓練支援端末4において、危険行動判定処理部45aは、模擬作業空間における所定の作業の模擬作業(訓練)の実行中、事故の発生を監視し、事故発生率が高い作業項目について、危険因子を定義する。具体的には、事故発生率が高い項目ごとに、起こり得る危険を特定し、当該危険の内容(危険発生要因)とその危険の回避方法を上記項目に対応して危険対象因子管理DB46aに格納する。
 危険対象因子管理DB46aには、設定項目として、事故発生率が高い項目(第1の項目)、危険内容(第2の項目)が設けられている。危険行動判定処理部45aは、訓練の結果、事故発生率が高い項目として、例えば、高所作業を抽出した場合、第1の項目および第2の項目に、それぞれ、「高所作業」、「落下」を設定(定義)する。また、事故発生率が高い項目として、例えば、物品破損を抽出した場合、第1の項目および第2の項目に、それぞれ、「物品破損」、「確認不注意、歩行不注意」を設定する。
 コンテンツ提示システム1は、訓練支援端末4の危険対象因子管理DBに設定された定義情報を、訓練管理サーバ3を介して現場管理サーバ6に配信する。現場管理サーバ6は、訓練管理サーバ3から配信される上記定義内容をさらに現場支援端末7に配信する。そして、現場支援端末7では、危険行動判定処理部75bが、現場管理サーバ6から配信される上記定義内容を危険対象因子管理DB76bに格納する。
 以後、現場支援端末7では、CPU71が、現場管理サーバ6の危険行動抑制処理部65fの制御下で、危険対象因子管理DB76bに格納されている危険対象の定義に基づいて危険行動抑制制御を実行する。この危険行動抑制制御について、図8を参照して説明する。
 このコンテンツ提示システム1では、現場支援端末7での作業対象機器に対する作業を行わせるには、図8に示すように、現場管理サーバ6から現場支援端末7に対して保守作業開始指示を配信する(ステップS71)。
 現場支援端末7は、上記保守作業開始指示を受信することにより、作業対象機器に対する作業を開始する(ステップS81)。作業が開始されると、現場支援端末7は、作業の進行に合わせて当該作業の各段階に対応する画面を順次に更新して表示する(ステップS82)。表示される各作業段階の画面は、作業対象機器(実機)に対応する作業段階の作業指令等がAR表示された画面内容である。
 現場支援端末7は、作業の進行に合わせて危険対象因子管理DB76bを参照し、当該作業段階に対応して危険対象が定義されているか否かを判定する(ステップS83)。ここで、危険対象が定義されていると判定された場合(ステップS38でYES)、CPU71は、当該危険対象の定義内容に基づいて危険動作抑制メッセージを当該面中にAR表示する(ステップS84)。ここでは、例えば、高所作業の作業段階であれば、「落下注意」というメッセージを表示し、物品破損を引き起こす作業段階であれば、「確認注意、歩行注意」等のメッセージを表示させる。その後、現場支援端末7は、ステップS85に移行する。
 また、危険対象が定義されていないと判定された場合(ステップS83でNO)、現場支援端末7は、直ちにステップS85に移行する。ステップ85において、現場支援端末7は、作業が終了したか否かを判定する。ここで、作業が終了していないと判定された場合(ステップS85でNO)、CPU71は、ステップS83以降の処理を続行する。一方、作業が終了したと判定された場合(ステップS85でYES)、CPU71は、上述した一連の危険行動抑制制御を終了する。
 なお、上記の説明では、訓練支援端末4で、危険行動判定処理部45aが危険対象因子管理DB46aを構築して現場管理サーバ6および現場支援端末7に配信する例について述べたが、現場支援端末7において、危険行動判定処理部75bが、例えば作業者R3による作業対象機器に対する保守作業中に事故の発生を監視し、事故発生率が高い作業項目について、危険因子を危険対象因子管理DB76bとして定義するようにしてもよい。
 このように、第2の危険行動抑制機能は、模擬作業空間を使った訓練の結果、事故発生率が高い項目について、危険対象を定義し、現場作業時に、該定義に基づいて危険動作抑制メッセージをAR表示するようになっている。この機能を有する構成によれば、訓練段階で事故発生を体験した訓練者R1が、現場で作業者R3として作業を行う際に、段階的に危険を抑制できるようになる。
(第3の危険行動抑制機能)
 第3の危険行動抑制機能は、現場作業により作成される作業報告書に現状からの変化を示す記述がある場合、現状変化に合わせて危険対象を更新するものである。
 この機能に係る構成要素として、コンテンツ提示システム1は、上述した第1及び第2の危険行動抑制機能を実現するための構成に加え、以下の構成を有している。すなわち、現場支援端末7は、作業報告管理処理部75a、作業報告管理DB76aを有している。作業報告管理処理部75aは、例えば、作業対象機器の保守作業の作業内容、及び作業環境を記述した作業報告書を作成する処理、および該作業報告書を作業報告管理DB76aに登録する処理の各処理機能を有する。また、現場支援端末7において、CPU71は、新たに作成された作業報告書と、既に登録されている作業報告書との間に、作業内容、作業環境が変化したことに関する記述があるか否を判定する処理等に関する処理機能を有している。
 以下、現場支援端末7における現場作業時の第3の危険行動抑制制御について、図9を参照して説明する。この危険行動抑制制御を行うためにはまず、現場支援端末7において、作業報告管理処理部75aが、作業対象機器の保守作業が終わる度に、当該保守作業に関する作業報告書を新たに作成する(ステップS86)。
 次いで、作業報告管理処理部75aは、作業報告管理DB76aに登録されている既作業報告書を読み出し(ステップS87)、新たな作業報告書と既作業報告書との間に、例えば、作業環境が現状から変化したか否かを判定する(ステップS88)。この判定は、例えば、新たな作業報告書に、危険対象となり得る項目について、既作業報告書の記述に対して変化したことを示す記述があるか否かをチェックすることで実現できる。
 ここで、現状から変化したと判定された場合(ステップS88でYES)、作業報告管理処理部75aは、危険対象因子管理DB76bに設定されている危険対象を更新する処理を行う(ステップS89)。
 ステップS89での危険対象の更新処理の具体例について説明する。例えば、ステップS88での判定に際し、新たな作業報告書に、例えば、作業対象機器を設置している部屋のレイアウトが変わって狭い通路が形成された旨の記述があった場合、危険行動判定処理部75bは、危険対象因子管理DB76bに、第1の項目が「レイアウト変更により通路がせまくなった。」が定義され、第2の項目に「運搬時の壁破損注意」が定義された新たな設定項目を追記する。
 その後、現場支援端末7では、CPU71が、現場管理サーバ6の危険行動抑制処理部65fの制御下で、危険対象因子管理DB76bに格納されている危険対象の定義に基づいて危険行動抑制制御を実行する。この危険行動抑制制御は、危険対象の定義が変わる以外は、図8のフローチャートに示す手順で実行可能である。なお、図9のステップS87において、上述した設定項目を追記する更新処理が行われた場合、当該危険行動抑制制御においては、作業現場での上記画面に対して、「運搬時の壁破損注意」といった危険行動抑制メッセージが表示されることとなる。
 このように、第3の危険行動抑制機能は、作業報告書で現状変化に関する記述がある場合に、危険対象因子管理DB76bに設定されている危険対象を更新するようになっている。この機能を有する構成によれば、現場作業において、現況に変化があった場合でも、作業の進行を映す画面上に当該現況変化に合わせた危険動作抑制メッセージをAR表示することで、現況の変化に合わせて段階的に危険を抑制できるようになる。
(第4の危険行動抑制機能)
 第4の危険行動抑制機能を実現するために、コンテンツ提示システム1は、第1乃至第3の危険行動抑制機能を実現するための構成に加え、以下の構成を有している。例えば、現場支援端末7において、危険対象因子管理DB76bには、上述した危険対象の定義内容に加えて、対象機器の種別、現場状況、作業者スキルなどの指標情報が格納されている。この指標情報は、例えば、危険行動判定処理部75bの制御により事前に格納することができる。また、危険行動判定処理部75bは、危険対象因子管理DB76bに設定されている危険対象を元に、上記指標情報から段階的警告要素を抽出する機能と、該段階的警告要素に対応する段階的な警告表示を行う制御機能を有している。
 以下、現場支援端末7における現場作業時の第4の危険行動抑制制御について、図10を参照して説明する。
 この危険行動抑制制御が開始されると、現場支援端末7において、危険行動判定処理部75bは、危険対象因子管理DB76bから危険対象項目および指標情報を読み出す(ステップS91)。引き続き、危険行動判定処理部75bは、読出した危険対象項目から危険要素を抽出する(ステップS92)。さらに、危険行動判定処理部75bは、抽出した危険要素と上記指標情報とに基づいて段階的警告項目を決定する(ステップS93)。
 例えば、上記指標情報として、現場の作業対象機器の種別、現場状況、作業者スキルが設定されている場合、危険行動判定処理部75bでは、「作業対象機器の入出庫時に作業者スキルに応じて注意喚起」、「作業対象機器の作業時に作業者スキルに応じて注意喚起」といった段階的警告項目を決定可能である。さらに、危険行動判定処理部75bでは、危険度が高い作業については、「統制側への事前確認を要請する」、「作業対象機器の電源を強制OFF」等の段階的警告項目を決定することもできる。決定された段階的警告項目は、例えば、危険対象因子管理DB76bに設定される。
 上記ステップS93で段階的警告項目を設定した後、この危険行動抑制制御は、現場支援端末7において現場での作業対象機器の保守作業を実行(図8のステップS81~S85参照)する段階に移行する。当該作業対象機器の保守作業の実行中、危険行動判定処理部75bは、現場管理サーバ6の危険行動抑制処理部65fの制御下でステップS94の処理を実行する。すなわち、危険行動判定処理部75bは、現場での作業対象機器の保守作業時、当該作業の各段階に合わせて、ステップS93で決定され、危険対象因子管理DB76bに設定されている警告項目に基づいて段階的な危険行動抑制制御を実行し(ステップS94)、その後、一連の処理を終了する。具体的に、ステップS94においては、「作業対象機器の入出庫時に作業者スキルに応じて注意喚起」、「作業対象機器の作業時に作業者スキルに応じて注意喚起」等の処理を段階的に実行する。注意喚起の具体例としては、例えば、当該注意喚起を実現し得る危険行動抑制メッセージを各段階の画面上にAR表示する。
 このように、第4の危険行動抑制機能は、危険対象因子管理DB76bに設定(定義)されている危険対象を元に、現場の対象機器、現場状況、作業者スキルなどの情報から段階的警告要素を抽出し、該段階的警告要素に対応する段階的な警告表示を行うようになっている。この機能を有する構成によれば、訓練管理システム5での訓練で事故を仮想体験可能な訓練者R1が、訓練終了後、作業者としての現場作業時に、訓練中の事故発生率が高い項目について、自分の作業スキル等に合わせて段階的に危険を抑制することが可能となる。
 以上のように、本発明に係るコンテンツ提示システムは、訓練段階で模擬的な事故を発生させて事故の危険性を訓練者に強く印象付け、現場における作業対象機器の保守作業での事故の危険性を確実に抑制可能であるという効果を奏し、作業者に危険をもたらす構成要素を有する装置の3DCGを用いた訓練を行う訓練システム全般に適用可能である。
 1 コンテンツ提示システム
 3 訓練管理サーバ
 4 訓練支援端末
 5 訓練管理システム
 6 現場管理サーバ
 7 現場支援端末
 35a、65a 動作測定処理部(動作測定装置)
 35b、65b 評価基準作成処理部(評価基準作成装置)
 35c、65c コンテンツ作成処理部(コンテンツ作成装置)
 35f、65f 危険行動抑制処理部
 36a コンテンツ管理データベース(DB)(記憶部)
 45a、75b 危険行動判定処理部
 65f 危険行動抑制処理部(危険行動抑制制御手段、更新手段、警告手段)
 75a 作業報告管理処理部(作成手段)
 75b 危険行動判定処理部(危険行動判定処理手段、設定手段)
 76a 作業報告管理データベース(DB)(作成手段)
 76b 危険対象因子管理DB(危険行動判定処理手段)
 M 作業対象機器
 M1 高温発生要素
 R1 訓練者
 R2 模範作業者
 R3 作業者 

Claims (5)

  1.  作業対象機器の3次元形状情報と作業手順に基づく訓練用コンテンツを訓練者(R1)に提示し、仮想現実または拡張現実の模擬作業空間内で前記作業手順に従って現場作業の模擬作業を実行させるコンテンツ提示システムであって、
     前記作業対象機器の3次元形状情報を含む前記訓練用コンテンツおよび前記作業手順の作業動作についての評価基準情報を記憶する記憶部(36a)と前記訓練用コンテンツを前記訓練者に提示可能に出力する出力部(35e、43)とを有するコンテンツ出力装置(3)と、
     前記現場作業を実行する作業者(R2)または前記訓練者の3次元作業動作を測定情報として取得する動作測定装置(35a、65a)と、
     前記3次元作業動作の測定情報に基づいて前記作業動作についての評価基準情報を作成する評価基準作成装置(35b、65b)と、
     前記3次元作業動作の測定情報および前記評価基準情報に基づいて前記訓練用コンテンツを作成するコンテンツ作成装置(35c、65c)と、を備え、
     前記評価基準作成装置は、前記作業者または前記訓練者の所定の3次元身体動作から前記現場作業の事故発生要因となり得る所定の情報が入力されたとき、該情報に係る前記作業手順の特定段階または他の段階の作業動作について前記評価基準情報を調整し、
     前記コンテンツ作成装置は、前記模擬作業中の前記特定段階または他の段階の作業動作について模擬的な事故の発生確率を高め、前記模擬的な事故発生に、前記訓練者に事故発生を強く印象づけるよう前記訓練用コンテンツを更新することを特徴とするコンテンツ提示システム。
  2.  前記コンテンツ作成装置は、前記模擬的な事故の発生を、音、テキストメッセージ、光、振動などで前記訓練者に印象付けることを特徴とする請求項1に記載のコンテンツ提示システム。
  3.  前記模擬的な事故の発生確率が高い作業項目を抽出し、該作業項目について危険発生要因を定義する危険行動判定処理手段(75b、76b)と、
     前記現場作業での前記作業項目の作業に際し、前記作業者に対し、前記危険発生要因による危険行動を抑制させるための報知を行う危険行動抑制制御手段(65f)と、
     をさらに有することを特徴とする請求項1または2に記載のコンテンツ提示システム。
  4.  前記現場作業の作業環境を記述した作業報告書を作成する作成手段(75a、76a)と、
     作成された前記作業報告書と既に作成されている既作業報告書との間に前記作業環境が現状から変化した記述があるかを判定し、前記記述があった場合、変化した作業環境に応じ、前記作業項目についての前記危険発生要因の定義を更新する更新手段(65f)と、
     を有することを特徴とする請求項3に記載のコンテンツ提示システム。
  5.  前記作業項目についての前記危険対象の定義と、前記作業者の作業者スキルを含む指標情報に基づいて当該作業項目を含む前記現場作業中に段階的に実施する警告項目を設定する設定手段(75b)と、
     前記現場作業中、前記警告項目に基づいて段階的に警告を行う警告手段(65f)と、
     を有することを特徴とする請求項3または4に記載のコンテンツ提示システム。 
PCT/JP2018/031353 2018-06-29 2018-08-24 コンテンツ提示システム WO2020003546A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/626,023 US20210335148A1 (en) 2018-06-29 2018-08-24 Content presentation system
EP18924816.4A EP3637390A4 (en) 2018-06-29 2018-08-24 CONTENT PRESENTATION SYSTEM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018124689A JP7289190B2 (ja) 2018-06-29 2018-06-29 コンテンツ提示システム
JP2018-124689 2018-06-29

Publications (1)

Publication Number Publication Date
WO2020003546A1 true WO2020003546A1 (ja) 2020-01-02

Family

ID=68984791

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/031353 WO2020003546A1 (ja) 2018-06-29 2018-08-24 コンテンツ提示システム

Country Status (4)

Country Link
US (1) US20210335148A1 (ja)
EP (1) EP3637390A4 (ja)
JP (2) JP7289190B2 (ja)
WO (1) WO2020003546A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7210169B2 (ja) * 2018-06-29 2023-01-23 株式会社日立システムズ コンテンツ提示システムおよびコンテンツ提示方法
US12050577B1 (en) 2019-02-04 2024-07-30 Architecture Technology Corporation Systems and methods of generating dynamic event tree for computer based scenario training
US11508253B1 (en) * 2020-02-12 2022-11-22 Architecture Technology Corporation Systems and methods for networked virtual reality training
US11474596B1 (en) 2020-06-04 2022-10-18 Architecture Technology Corporation Systems and methods for multi-user virtual training
JP6987290B1 (ja) * 2021-07-15 2021-12-22 東京瓦斯株式会社 危険予知訓練支援装置
WO2023145250A1 (ja) * 2022-01-27 2023-08-03 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 装着型端末、提示方法、及び、プログラム
JP7200414B1 (ja) 2022-03-03 2023-01-06 旭国際テクネイオン株式会社 情報処理装置及び保全支援システム
WO2023223388A1 (ja) * 2022-05-16 2023-11-23 三菱電機株式会社 作業監視装置、作業監視方法、作業監視プログラム、作業教育システムおよび作業教育方法
US11995780B2 (en) 2022-09-09 2024-05-28 Snap Inc. Shooting interaction using augmented reality content in a messaging system
US11948266B1 (en) 2022-09-09 2024-04-02 Snap Inc. Virtual object manipulation with gestures in a messaging system
WO2024111266A1 (ja) * 2022-11-24 2024-05-30 パナソニックIpマネジメント株式会社 作業シミュレーションシステム、作業シミュレーション方法及びプログラム
JP7406038B1 (ja) * 2023-09-19 2023-12-26 株式会社日立パワーソリューションズ 作業支援システム及び作業支援方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008139479A (ja) 2006-11-30 2008-06-19 Toshiba Corp 教育用危険予知訓練採点装置、教育用危険予知訓練採点方法、および教育用危険予知訓練採点用プログラム
JP2010230996A (ja) * 2009-03-27 2010-10-14 Systec:Kk 電気事故防止のための作業者教育装置
JP2014081947A (ja) * 2013-12-04 2014-05-08 Denso Corp 情報配信装置
US20170148214A1 (en) * 2015-07-17 2017-05-25 Ivd Mining Virtual reality training
JP2017518530A (ja) * 2014-06-02 2017-07-06 リンカーン グローバル,インコーポレイテッド 手溶接訓練のためのシステム及び方法
US20180090029A1 (en) * 2016-09-29 2018-03-29 Simbionix Ltd. Method and system for medical simulation in an operating room in a virtual reality or augmented reality environment
US20180102061A1 (en) * 2014-08-18 2018-04-12 Illinois Tool Works Inc. Weld training systems and methods

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5320538A (en) * 1992-09-23 1994-06-14 Hughes Training, Inc. Interactive aircraft training system and method
KR100721713B1 (ko) * 2005-08-25 2007-05-25 명지대학교 산학협력단 몰입형 활선작업 교육시스템 및 그 방법
WO2011041262A2 (en) * 2009-09-30 2011-04-07 University Of Florida Research Foundation, Inc. Real-time feedback of task performance

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008139479A (ja) 2006-11-30 2008-06-19 Toshiba Corp 教育用危険予知訓練採点装置、教育用危険予知訓練採点方法、および教育用危険予知訓練採点用プログラム
JP2010230996A (ja) * 2009-03-27 2010-10-14 Systec:Kk 電気事故防止のための作業者教育装置
JP2014081947A (ja) * 2013-12-04 2014-05-08 Denso Corp 情報配信装置
JP2017518530A (ja) * 2014-06-02 2017-07-06 リンカーン グローバル,インコーポレイテッド 手溶接訓練のためのシステム及び方法
US20180102061A1 (en) * 2014-08-18 2018-04-12 Illinois Tool Works Inc. Weld training systems and methods
US20170148214A1 (en) * 2015-07-17 2017-05-25 Ivd Mining Virtual reality training
US20180090029A1 (en) * 2016-09-29 2018-03-29 Simbionix Ltd. Method and system for medical simulation in an operating room in a virtual reality or augmented reality environment

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3637390A4

Also Published As

Publication number Publication date
JP7506224B2 (ja) 2024-06-25
JP2023107814A (ja) 2023-08-03
EP3637390A1 (en) 2020-04-15
JP7289190B2 (ja) 2023-06-09
JP2020004218A (ja) 2020-01-09
EP3637390A4 (en) 2021-04-14
US20210335148A1 (en) 2021-10-28

Similar Documents

Publication Publication Date Title
WO2020003546A1 (ja) コンテンツ提示システム
US10769536B2 (en) Work support system and work support program
JP6903444B2 (ja) 作業者育成装置、作業者育成方法、作業者育成プログラム及び記録媒体
US9652590B2 (en) System and method to simulate maintenance of a device
JP6969807B2 (ja) 作業支援システム
KR101872806B1 (ko) 가상현실 기반 조업자의 안전훈련 시스템
JP7191560B2 (ja) コンテンツ作成システム
JP2013200440A (ja) 映像表示装置
JP7265667B2 (ja) 作業支援システムおよび作業支援方法
JP2021104535A (ja) 溶接制御装置、溶接ロボットシステム、および、溶接制御方法
EP3788510A1 (en) Operator characteristic-based visual overlays
JP7252703B2 (ja) 操作支援装置、操作支援方法、操作支援プログラム及び記録媒体
CN103700311A (zh) 一种印刷设备操作的仿真培训系统及培训方法
JP2020003708A (ja) コンテンツ提示システムおよびコンテンツ提示方法
US11062264B2 (en) Work support system, work support server, work situation determination apparatus, device for worker, and work object equipment
JP2021018751A (ja) プログラム、情報処理方法及び情報処理装置
JP7165108B2 (ja) 作業訓練システム及び作業訓練支援方法
CN112257200A (zh) 多晶硅生产场景的模拟仿真方法、装置、系统及设备
JP6836493B2 (ja) 保守手順生成装置、保守手順生成方法、及び保守手順生成プログラム
CN207259864U (zh) 纤维幅材机的信息装置
KR101885037B1 (ko) IoT DIY 시스템/서비스 시뮬레이션 방법 및 시스템
NL2019178B1 (en) Interactive display system, and method of interactive display
WO2024111266A1 (ja) 作業シミュレーションシステム、作業シミュレーション方法及びプログラム
JP2015004845A (ja) 情報処理装置
JP7418711B1 (ja) 注意抽出システム、及び注意抽出方法

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2018924816

Country of ref document: EP

Effective date: 20200109

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18924816

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE