WO2021187001A1 - 作業手順管理装置、作業手順管理方法及び作業手順管理プログラム - Google Patents

作業手順管理装置、作業手順管理方法及び作業手順管理プログラム Download PDF

Info

Publication number
WO2021187001A1
WO2021187001A1 PCT/JP2021/006209 JP2021006209W WO2021187001A1 WO 2021187001 A1 WO2021187001 A1 WO 2021187001A1 JP 2021006209 W JP2021006209 W JP 2021006209W WO 2021187001 A1 WO2021187001 A1 WO 2021187001A1
Authority
WO
WIPO (PCT)
Prior art keywords
work procedure
intention
question
management device
procedure management
Prior art date
Application number
PCT/JP2021/006209
Other languages
English (en)
French (fr)
Inventor
航史 山崎
千代 大野
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Priority to US17/798,676 priority Critical patent/US20230078915A1/en
Priority to CN202180016261.0A priority patent/CN115176256A/zh
Publication of WO2021187001A1 publication Critical patent/WO2021187001A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311—Scheduling, planning or task assignment for a person or group
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management

Definitions

  • the present invention relates to a work procedure management device, a work procedure management method, and a work procedure management program.
  • work procedure manuals are often used for the purpose of ensuring the quality of maintenance work by inexperienced workers.
  • the work procedure manual is also useful for passing on know-how from experienced workers to inexperienced workers.
  • the maintenance procedure generator of Patent Document 1 When the maintenance procedure generator of Patent Document 1 recognizes the maintenance target, it displays the maintenance work procedure for the maintenance target to the maintenance worker. When the actual work content of the maintenance worker is different from the displayed procedure, the maintenance procedure generator dynamically corrects the maintenance work procedure and then displays the corrected procedure to the maintenance worker. The maintenance procedure generator updates the maintenance work procedure by feeding back and accumulating past experience.
  • the maintenance procedure generator of Patent Document 1 can display the procedure of the maintenance work to the operator for the time being. And the displayed procedure reflects the knowledge of experienced workers for the time being.
  • an object of the present invention is to allow an inexperienced worker to easily know the intention of the work procedure as needed at the site.
  • a question processing unit that acquires a question posed by a worker at the site and an intention to give an instruction together with an instruction for the acquired question. It is characterized by having a language processing unit for determining. Other means will be described in the form for carrying out the invention.
  • an inexperienced worker can easily know the intention of the work procedure as needed at the site.
  • the present embodiment is an example in which an inexperienced worker working in the field communicates with an experienced worker in a remote place.
  • the “worker” means an inexperienced worker
  • the “leader” means an experienced worker.
  • a feature of the present invention is to attach an "intention request" to a question that a worker asks an instructor.
  • the instructor presents the worker with an "intention” to understand the work more essentially, in addition to the usual instructions for the question.
  • Instructor answers to worker questions often take the form of "instructions" such as "please do”. Then, the answer includes the intention of the instruction as necessary in addition to the instruction.
  • This embodiment is composed of the first to fourth embodiments, and each of the first to fourth embodiments can be implemented independently. It is common to all embodiments that the worker wears the wearable device. Then, the present embodiment is divided into the first to fourth embodiments depending on which device is responsible for the function (representative function) of attaching the "intention request" to the question.
  • a wearable device is a type of computer worn by an operator in the field. Wearable devices are usually attached to or integrated into eyeglasses, helmets, watches and the like. The wearable device has a microphone and a speaker as an input device and an output device, and enables the operator to have a hands-free conversation. From the viewpoint of enabling hands-free conversation, wearable devices are distinguished from mobile terminal devices such as smartphones and tablets.
  • FIG. 1 is a diagram illustrating equipment used in the first to fourth embodiments.
  • the wearable device W has the shape of eyeglasses (the same applies hereinafter) and communicates with the guidance device T.
  • the wearable device W plays a representative function.
  • ⁇ indicates that the device has a representative function (the same applies hereinafter).
  • the wearable device W communicates with the mobile terminal device S and the guidance device T.
  • the same worker uses the wearable device W and the mobile terminal device S at the same time.
  • the wearable device W and the mobile terminal device S share the representative functions. In this case, the operator may use the software keyboard of the mobile terminal device S or the like as the input device.
  • the wearable device W communicates with the guidance device T.
  • the guidance device T has a representative function.
  • three wearable devices W are described.
  • the number of wearable devices W is not an essential feature of the third embodiment.
  • the embodiment in which the instruction device T bundles a plurality of wearable devices W is preferable.
  • the server C in the cloud communicates with the wearable device W and the guidance device T.
  • the server C in the cloud is a set of one or a plurality of computers arranged at an arbitrary position in the network. Servers C in the cloud of one or more chassis play a representative function independently or in a shared manner.
  • the number of wearable devices W is not an essential feature of the fourth embodiment. When the number of wearable devices W is large and the existing computer can be effectively used in the network, the embodiment in which the server C in the cloud bundles the plurality of wearable devices W is preferable.
  • FIG. 2 is a diagram for explaining the configuration and the like of the work procedure management device 1 in the first and second embodiments.
  • the work procedure management device 1 is a wearable device W alone in column 61 of FIG. 1, or a combination of the wearable device W and mobile terminal device S in column 62 of FIG.
  • all the configurations of the work procedure management device 1 of FIG. 2 are provided in the wearable device W.
  • each configuration of the work procedure management device 1 of FIG. 2 is provided in at least one of the wearable device W and the mobile terminal device S.
  • the work procedure management device 1 includes a central control device 11, a touch panel, a camera, an input device 12 such as a microphone, a display, an eyeglass lens on which an extended reality image is projected, an output device 13 such as a speaker, a main storage device 14, and an auxiliary storage device. 15 and a communication device 16 are provided. These are connected to each other by a bus.
  • the auxiliary storage device 15 stores the work procedure manual 31 and the intention request 32 (both described in detail later).
  • the work management unit 21, the question processing unit 22, the language processing unit 23, and the intention request unit 24 in the main storage device 14 are programs.
  • the central control device 11 reads these programs from the auxiliary storage device 15 and loads them into the main storage device 14, thereby realizing the functions of the respective programs (details will be described later).
  • the work procedure management device 1 can communicate with the guidance device 3 (reference numeral T in FIG. 1) via the network 2.
  • the instruction device 3 is a general computer, and includes a central control device 41, an input device 42 such as a microphone and a keyboard, an output device 43 such as a display and a speaker, a main storage device 44, an auxiliary storage device 45, and a communication device 46. ..
  • the guidance device 3 is mainly operated by a leader.
  • FIG. 3 is an example of the work procedure manual 31.
  • the work procedure is stored in the work procedure column 102 and the work state is stored in the work status column 103 in association with the procedure number stored in the procedure number column 101.
  • the procedure number in the procedure number column 101 is a number indicating the order of work procedures that the operator should perform at the site.
  • the procedure number here has a hierarchy of a standard column 101a and an additional column 101b.
  • the work procedure in which the procedure number is stored in the standard column 101a is called a "standard work procedure”.
  • the work procedure in which the procedure number is stored in the additional column 101b is called an "additional work procedure".
  • the work procedure in the work procedure column 102 is an instruction to the worker.
  • the working state of the working state column 103 is either "OK” or "NG". “OK” indicates that the operator has input to the work procedure management device 1 that the work procedure has been successfully completed. “NG” indicates that the operator has input to the work procedure management device 1 that the work procedure has not been completed smoothly.
  • the intention 51 was displayed on the output device 13.
  • the content of the intent 51 is "to distinguish whether the basic confirmation LED is out of order or there is no signal".
  • the work procedure management device 1 automatically transmits an "intention request" (immediately described later) to the guidance device 3 from the standpoint of the worker.
  • FIG. 4 is an example of the intention request 32.
  • Intention request 32 requires the instructor to present the intent of the instruction to the worker in addition to the instruction.
  • Intention is often the background or purpose of the instruction.
  • the background or purpose often includes "basic confirmation", “past experience”, “somehow intuition” and the like.
  • FIG. 5 is a diagram illustrating the classification of questions.
  • the questions that the worker asks the instructor are classified into "5W1H type” and "yes / no type” as "major classification".
  • the 5W1H type is a question that cannot be answered with yes / no.
  • the yes / no type is a question that can be answered with yes / no.
  • "5W1H type” is classified into “factoid type” and "non-factoid type”.
  • the factoid type is a question that asks for an answer based on facts such as name, date, and numerical value.
  • the non-factoid type is a question that asks for an answer based on an explanation of the reason or event. As described above, the answer is the content that the instructor answered to the question from the worker, and includes "instruction” and "intention” if necessary.
  • non-factoid type is classified into “how type”, “why type” and “definition type”.
  • a “how type” is a question asking for an action or procedure.
  • “Why type” is a question asking for the cause or rationale.
  • a “definition type” is a question that asks for a definition of things.
  • FIG. 6 is a sequence diagram of the processing procedure of the first and second embodiments.
  • "WD” is an abbreviation for "wearable device”.
  • the work management unit 21 of the work procedure management device 1 is currently displaying the work procedure manual 31 (FIG. 3) on the output device 13.
  • step S201 the work management unit 21 of the work procedure management device 1 accepts the work state "NG". Specifically, the work management unit 21 accepts the worker to input the work state "NG" via the input device 12 such as a microphone. At this time, the operator sees the work procedure manual 31 (FIG. 3) projected on the spectacle lens as an augmented reality image. The worker then sees the record for the current work procedure highlighted (eg, blinking). In this state, the operator inputs "NG" to the microphone by voice (the same applies hereinafter).
  • step S202 the work management unit 21 receives a question. Specifically, the work management unit 21 accepts an operator to input a question by voice through an input device 12 such as a microphone.
  • the question here is, for example, "I have only two LEDs lit. What should I do?"
  • step S203 the work procedure management device 1 analyzes the question and creates an intention request as necessary.
  • the work procedure management device 1 determines whether or not to generate the intention request 32 (FIG. 4).
  • the work procedure management device 1 stores it in the auxiliary storage device 15.
  • "as needed” means that the transmission of the intention request 32 and the generation, transmission, and display of the intention are selective (or not).
  • step S204 the work management unit 21 of the work procedure management device 1 transmits a question and an intention request 32 as needed. Specifically, the work management unit 21 transmits the question received in step S202 and the intention request 32 generated in step S203 to the guidance device 3. Then, the guidance device 3 displays the received intention request 32 on the output device 43. If the intent request 32 is not generated in step S203, the intent request 32 is not transmitted.
  • step S205 the guidance device 3 generates an instruction and an intention as needed. Specifically, first, the instruction device 3 generates the instruction voice by accepting the instructor to input the voice to the microphone of the instruction device 3.
  • the instruction here is, for example, "Check the current value between terminal ⁇ and terminal ⁇ with a tester.”
  • the instruction device 3 generates the intended voice by accepting the instructor to input the voice to the microphone of the instruction device 3.
  • the intention here is, for example, “Basic confirmation: Please isolate whether the LED is out of order or there is no signal.” Intentions are often based on ideas such as “isolating the cause”, “preventing the spread of damage”, and “switching to another system” (the same applies hereinafter). If the intent request 32 is not generated in step S203, the intent is not generated.
  • the auxiliary storage device 45 of the guidance device 3 stores an intention candidate (“Is the LED out of order ...”, etc.) in association with (1), (2), and (3) of FIG. I will do it.
  • the instruction device 3 displays a "(1) basic confirmation” button, a "(2) past experience” button, and a "(3) somehow intuition” button on the output device 43.
  • the instruction device 3 accepts the instructor to press any button via the input device 42.
  • the instruction device 3 acquires an intention candidate corresponding to the pressed button from the auxiliary storage device 45 and displays it on the output device 43.
  • the leader selects one of the candidates. (The same applies to the third and fourth embodiments).
  • step S206 the guidance device 3 transmits an instruction and an intention as necessary. Specifically, the guidance device 3 transmits the instruction voice and the intention voice to the work procedure management device 1. If the intent request 32 is not generated in step S203, the intent is not transmitted.
  • step S207 the language processing unit 23 of the work procedure management device 1 extracts instructions and intentions. Specifically, the language processing unit 23 extracts an instruction part and an intention part from the voice transmitted in step S206. If the intent request 32 is not generated in step S203, the intent portion is not extracted.
  • step S208 the work management unit 21 of the work procedure management device 1 displays an instruction as an additional work procedure. Specifically, the work management unit 21 adds an additional work procedure “Check the current value between the terminal ⁇ and the terminal ⁇ with a tester” in the work procedure manual 31 (FIG. 3) displayed on the output device 13. Is displayed and the same audio is output from the speaker.
  • step S209 the work management unit 21 displays the intention as necessary. Specifically, the work management unit 21 associates the additional work procedure “checking the current value between the terminal ⁇ and the terminal ⁇ with the tester” displayed on the output device 13 with the intention “basic check”. "Determine whether the LED is out of order or there is no signal” is displayed. If the intent request 32 is not generated in step S203, step S209 is omitted. The processes of steps S201 to S209 are repeated each time the worker inputs the work state "NG".
  • FIG. 7 is a detailed flowchart of step S203.
  • the question processing unit 22 of the work procedure management device 1 acquires voice data. Specifically, the question processing unit 22 acquires a voice (time-series waveform) emitted by the user toward the microphone.
  • step S302 the language processing unit 23 of the work procedure management device 1 analyzes the voice data. Specifically, the language processing unit 23 analyzes and analyzes whether or not the voice data acquired in step S301 indicates a question as a natural language (corresponding to any type of FIG. 5). As a result, "a question of type XX" or "not a question” is generated.
  • step S303 the language processing unit 23 determines whether or not the voice data is a question. Specifically, when the analysis result of step S302 is "a question of type XX" (step S303 “Yes"), the language processing unit 23 proceeds to step S304 and the analysis result is "not a question”. If (step S303 “No”), step S203 is terminated.
  • step S304 the language processing unit 23 determines whether or not the instructor's intention is necessary. The details of step S304 will be described later, but if the intention is necessary as a result (step S304 “Yes”), the language processing unit 23 proceeds to step S305, and in other cases (step S304 “No”), step S203. To finish.
  • step S305 the intention request unit 24 of the work procedure management device 1 generates the intention request 32 (FIG. 4). Specifically, the intention request unit 24 generates an intention request 32 (FIG. 4) and stores it in the auxiliary storage device 15. After that, step S203 is completed.
  • FIG. 8 is a detailed flowchart of step S304.
  • step S401 the language processing unit 23 of the work procedure management device 1 determines whether or not the question is of the 5W1H type. Specifically, the language processing unit 23 proceeds to step S402 when the question is of the 5W1H type (step S401 “Yes”), and when the question is of the yes / no type (step S401 “No”), step S501. Proceed to (Fig. 9).
  • step S402 the language processing unit 23 determines whether or not the question is a factoid type. Specifically, the language processing unit 23 proceeds to step S403 when the question is of the factoid type (step S402 “Yes”), and when the question is of the non-factoid type (step S402 “No”), step S404. Proceed to.
  • step S403 the language processing unit 23 determines whether or not the question is for a past event. For example, the question "When did you do it?" For past events does not require the intent of the leader, as it often indicates that the worker is confirming the facts. The question "When is it?" For current or future events often indicates that the worker is seeking the intent of the instructor, so the intent of the instructor is required. Therefore, the language processing unit 23 ends step S203 when the question is for a past event (step S403 “Yes”), and when the question is for a current or future event (step S403 “No”). ), Proceed to step S305.
  • step S404 the language processing unit 23 determines whether or not the question is of the how type.
  • the instructor's intention is necessary because the worker often confirms the action or procedure with the instructor.
  • the instructor's intention should be the intention as it is, so the instructor's intention is not necessary.
  • the language processing unit 23 proceeds to step S305 when the question is of the how type (step S404 “Yes”), and ends step S203 when the question is of the why type or the definition type (step S404 “No”). do.
  • FIG. 9 is a detailed flowchart (continued) of step S304.
  • step S501 the language processing unit 23 of the work procedure management device 1 determines whether or not the question is for a past event. For example, the question “Did you do XX?" For past events does not require the intent of the instructor, as it often indicates that the worker is confirming the facts. For questions about current or future events, the leader's response (Yes or No) is required for the time being. Therefore, the language processing unit 23 ends step S203 when the question is for a past event (step S501 “Yes”), and when the question is for a current or future event (step S501 “No”). ), Proceed to step S502.
  • step S502 the language processing unit 23 receives a response from the instructor.
  • the response may include either “Yes” or “No”, but may also include intent. That is, unlike the "intention” included in the confident "answer” according to the intention request 32, the instructor may answer the intention half unconsciously by being prompted by the worker's question.
  • step S503 the language processing unit 23 determines whether or not the response is Yes. For example, if the answer to the question "Should I do XX?" For current or future events is Yes, the instructor has the same knowledge as the worker, so the instructor's intention is unnecessary. .. If the answer to the question is No, the instructor has different knowledge from the worker, and the instructor's intention is necessary. Therefore, if the response is Yes (step S503 “Yes”), the language processing unit 23 ends step S203, and if the response is No (step S503 “No”), proceeds to step S504.
  • step S504 the language processing unit 23 determines whether or not the response includes an intention. For example, suppose that the answer to the question "Should I do XX?" Is "No, there is a danger of XX, so please do ⁇ first.” In this reply, the part “because there is a danger of XX” corresponds to the intention of the leader. Suppose that the answer to the question "Should I do it?" Is "No, please do ⁇ first.” This reply does not include the part corresponding to the intent of the leader. Therefore, the language processing unit 23 ends step S203 when the reply contains an intention (step S504 “Yes”), and when the reply does not include an intention (step S504 “No”), step S305. Proceed to.
  • FIG. 10 is a diagram illustrating a configuration and the like of the work procedure management device 1 according to the third embodiment.
  • the work procedure management device 1 is the guidance device T in column 63 of FIG.
  • all the configurations of the work procedure management device 1 of FIG. 10 are provided in the guidance device T.
  • the work procedure management device 1 is mainly operated by an instructor.
  • the description of the configuration of the work procedure management device 1 is the same as the description of FIG. 2 in the first and second embodiments.
  • the work procedure management device 1 can communicate with the wearable device 4 (reference numeral W in column 63 of FIG. 1) via the network 2.
  • the wearable device 4 is a kind of computer worn by an operator in the field, and is an output of a central control device 41, a touch panel, a camera, an input device 42 such as a microphone, a display, a spectacle lens on which an augmented reality image is projected, a speaker, and the like. It includes a device 43, a main storage device 44, an auxiliary storage device 45, and a communication device 46.
  • FIGS. 2 and 10 the positions of the wearable device and the guidance device are reversed in FIGS. 2 and 10.
  • the wearable device or mobile terminal device
  • the configurations that carry out the representative functions are named "work procedure management devices", and each of the configurations includes reference numerals 11, 12, ... ⁇ , 31, 32 are assigned.
  • reference numerals 41 to 46 are assigned to the configurations of the devices that exchange information with the “work procedure management device”.
  • the description of the work procedure manual 31 and the intention request 32 is the same as the description of FIGS. 3 and 4 in the first and second embodiments.
  • the classification of the questions is the same as the explanation in FIG.
  • FIG. 11 is a sequence diagram of the processing procedure of the third embodiment. As a premise for starting the processing procedure, it is assumed that the work management unit 21 of the work procedure management device 1 is currently displaying the work procedure manual 31 (FIG. 3) on the output device 43 of the wearable device 4.
  • step S211 the wearable device 4 transmits the working state "NG". Specifically, first, the wearable device 4 accepts an operator to input a work state "NG” via an input device 42 such as a microphone. Second, the wearable device 4 transmits the received work state "NG" to the work procedure management device 1.
  • step S212 the wearable device 4 sends a question. Specifically, first, the wearable device 4 accepts an operator to input a question by voice through an input device 42 such as a microphone. The question here is, for example, "I have only two LEDs lit. What should I do?" Second, the wearable device 4 transmits the received question to the work procedure management device 1.
  • step S213 the work procedure management device 1 analyzes the question and creates an intention request as necessary.
  • the details of step S213 are the same as those described in FIGS. 7 to 9.
  • the work procedure management device 1 determines whether or not to generate the intention request 32 (FIG. 4).
  • the work procedure management device 1 stores it in the auxiliary storage device 15 and displays it on the output device 13.
  • "as needed” means that the generation, transmission, and display of intent are selective (or not).
  • step S214 the work management unit 21 of the work procedure management device 1 generates an instruction and an intention as necessary. Specifically, first, the work management unit 21 generates the instruction voice by accepting the instructor to input the voice to the microphone.
  • the instruction here is, for example, "Check the current value between terminal ⁇ and terminal ⁇ with a tester.”
  • the work management unit 21 generates the intended text by accepting the instructor to input the text (character string) to the keyboard.
  • the intention is, for example, “basic confirmation: to distinguish whether the LED is out of order or there is no signal”. If the intent request 32 is not generated in step S213, no intent is generated. Note that “(instruction)" indicates that the instruction is input by voice, and “ ⁇ intention>” indicates that the intention is input in text.
  • step S215 the work management unit 21 transmits an instruction and an intention as necessary. Specifically, the work management unit 21 transmits the voice of the instruction and the text of the intention to the wearable device 4. If the intent request 32 is not generated in step S213, the intent is not transmitted.
  • step S216 the wearable device 4 extracts an instruction. Specifically, the wearable device 4 extracts an instruction portion from the voice transmitted in step S215.
  • step S217 the wearable device 4 displays an instruction as an additional work procedure.
  • the additional work procedure “Check the current value between the terminal ⁇ and the terminal ⁇ with a tester” is added to the work procedure manual 31 (FIG. 3) displayed on the output device 43. indicate.
  • the wearable device 4 may output audio having the same content from the speaker.
  • step S218 the wearable device 4 displays an intent as needed. Specifically, the wearable device 4 is associated with the additional work procedure "check the current value between the terminal ⁇ and the terminal ⁇ with a tester" displayed on the output device 43, and the intention “basic check LED”. "Is it out of order or there is no signal?" Is displayed. If the intent request 32 is not generated in step S213, step S218 is omitted. The processes of steps S211 to S218 are repeated each time the worker inputs the work state "NG".
  • FIG. 12 is a diagram illustrating a configuration and the like of the work procedure management device 1 according to the fourth embodiment.
  • the work procedure management device 1 is the server C in the cloud in column 64 of FIG.
  • all the configurations of the work procedure management device 1 of FIG. 12 are provided in at least one of the plurality of in-cloud servers C.
  • the description of the configuration of the work procedure management device 1 is the same as the description of FIG. 2 in the first and second embodiments.
  • the work procedure management device 1 can communicate with the wearable device 4 (reference numeral W in the column 64 of FIG. 1) and the guidance device 3 (reference numeral T in the column 64 of FIG. 1) via the network 2.
  • the instruction device 3 is a general computer, and includes a central control device 41a, an input device 42a such as a microphone and a keyboard, an output device 43a such as a display and a speaker, a main storage device 44a, an auxiliary storage device 45a, and a communication device 46a. ..
  • the guidance device 3 is mainly operated by a leader.
  • the wearable device 4 is a kind of computer worn by an operator in the field, and is an output of a central control device 41b, a touch panel, a camera, an input device 42b such as a microphone, a display, a spectacle lens on which an extended reality image is projected, a speaker, and the like. It includes a device 43b, a main storage device 44b, an auxiliary storage device 45b, and a communication device 46b.
  • the configuration of the work procedure management device 1 in FIG. 10 is dispersed in the work procedure management device 1 and the guidance device 3 in FIG.
  • the work procedure management device 1 in FIG. 12 is described as one housing for convenience of explanation, it is actually a set of one or a plurality of computers arranged at an arbitrary position in the network (in the cloud). Server).
  • the instruction device is responsible for the representative function, whereas in FIG. 12, it is the server in the cloud.
  • the configurations that carry out the representative functions are named "work procedure management devices", and the respective configurations include reference numerals 11, 12, ..., 21, 22, ... ⁇ , 31, 32 are assigned.
  • the description of the work procedure manual 31 and the intention request 32 is the same as the description of FIGS. 3 and 4 in the first and second embodiments.
  • the classification of the questions is the same as the explanation in FIG.
  • FIG. 13 is a sequence diagram of the processing procedure of the fourth embodiment. As a premise for starting the processing procedure, it is assumed that the work management unit 21 of the work procedure management device 1 is currently displaying the work procedure manual 31 (FIG. 3) on the output device 43b of the wearable device 4.
  • step S221 the wearable device 4 transmits the working state "NG". Specifically, first, the wearable device 4 accepts an operator to input a work state "NG" via an input device 42b such as a microphone. Second, the wearable device 4 transmits the received work state "NG" to the work procedure management device 1 and the guidance device 3.
  • step S222 the wearable device 4 sends a question. Specifically, first, the wearable device 4 accepts an operator to input a question by voice through an input device 42b such as a microphone. The question here is, for example, "I have only two LEDs lit. What should I do?" Second, the wearable device 4 transmits the received question to the work procedure management device 1 and the instruction device 3.
  • step S223 the work procedure management device 1 analyzes the question and creates an intention request as necessary.
  • the details of step S223 are the same as those described in FIGS. 7 to 9.
  • the work procedure management device 1 determines whether or not to generate the intention request 32 (FIG. 4).
  • the work procedure management device 1 stores it in the auxiliary storage device 15.
  • "as needed” means that the transmission of the intention request 32 and the generation, transmission, and display of the intention are selective (or not).
  • step S224 the work management unit 21 of the work procedure management device 1 transmits an intention request 32 as necessary. Specifically, the work management unit 21 transmits the intention request 32 generated in step S223 to the guidance device 3. Then, the guidance device 3 displays the received intention request 32 on the output device 43a. If the intent request 32 is not generated in step S223, step S224 is omitted.
  • step S225 the guidance device 3 generates instructions and intents as needed. Specifically, first, the instruction device 3 generates the instruction voice by accepting the instructor to input the voice to the microphone. The instruction here is, for example, "Check the current value between terminal ⁇ and terminal ⁇ with a tester.” Second, the instruction device 3 generates the intended voice by accepting the instructor to input the voice to the microphone. The intent here is, for example, "to isolate whether the basic confirmation LED is out of order or there is no signal". If the intent request 32 is not generated in step S223, no intent is generated.
  • step S226 the guidance device 3 transmits an instruction and an intention as necessary. Specifically, the work management unit 21 transmits the instruction voice and the intention voice to the work procedure management device 1. If the intent request 32 is not generated in step S223, the intent is not transmitted.
  • step S227 the language processing unit 23 of the work procedure management device 1 extracts instructions and intentions. Specifically, the language processing unit 23 extracts an instruction part and an intention part from the voice transmitted in step S226. If the intent request 32 is not generated in step S223, the intent portion is not extracted.
  • step S228, the wearable device 4 displays an instruction as an additional work procedure. Specifically, for the wearable device 4, the additional work procedure “Check the current value between the terminal ⁇ and the terminal ⁇ with a tester” is added to the work procedure manual 31 (FIG. 3) displayed on the output device 43b. indicate.
  • the wearable device 4 may output audio having the same content from the speaker.
  • step S229 the wearable device 4 displays an intent as needed. Specifically, the wearable device 4 is associated with the additional work procedure "check the current value between the terminal ⁇ and the terminal ⁇ with a tester" displayed on the output device 43b, and the intention "basic check LED". "Is it out of order or there is no signal?" Is displayed. If the intent request 32 is not generated in step S223, step S229 is omitted. The processes of steps S221 to S229 are repeated each time the worker inputs the work state "NG".
  • the worker's question may be either voice or text.
  • Communication between the worker and the instructor may be either voice or text.
  • the input of intention may be either voice or text.
  • the camera of the wearable device 4 may acquire an image (defective image) in the field of view of the worker when the worker inputs "NG". Then, the intention requesting unit 24 of the work procedure management device 1 stores the combination of the past defect image and the intention input by the instructor in response to the past defect image in the auxiliary storage device 15 as learning data.
  • the intention request unit 24 optimizes parameters (for example, weights between nodes) of a model (for example, a neural network type model) that inputs a defect image and outputs an intention by using learning data.
  • the intention requesting unit 24 inputs a defect image to the trained model and acquires an intention as an output.
  • the intention requesting unit 24 may display the acquired intention to the instructor.
  • the effects of the work procedure management device of this embodiment are as follows.
  • the work procedure management device can determine whether or not the intention is necessary for the instruction to the question posed by the worker.
  • the work procedure management device can request the instructor to create an intention.
  • the work procedure management device can synchronize the presentation of instructions to the worker and the presentation of intentions.
  • the work procedure management device can determine the necessity of intention based on the classification result of the question.
  • the work procedure management device can present the experience of the instructor to the worker.
  • the work procedure management device can take the form of a wearable device, other devices, and other devices in the cloud.
  • the present invention is not limited to the above-described embodiment, and includes various modifications.
  • the above-described embodiment has been described in detail in order to explain the present invention in an easy-to-understand manner, and is not necessarily limited to the one including all the configurations described.
  • it is possible to replace a part of the configuration of one embodiment with the configuration of another embodiment and it is also possible to add the configuration of another embodiment to the configuration of one embodiment.
  • each of the above-mentioned configurations, functions, processing units, processing means and the like may be realized by hardware by designing a part or all of them by, for example, an integrated circuit. Further, each of the above configurations, functions, and the like may be realized by software by the processor interpreting and executing a program that realizes each function. Information such as programs, tables, and files that realize each function can be stored in a memory, a hard disk, a recording device such as an SSD (Solid State Drive), or a recording medium such as an IC card, an SD card, or a DVD.
  • SSD Solid State Drive
  • control lines and information lines indicate those that are considered necessary for explanation, and not all control lines and information lines are necessarily indicated on the product. In practice, it can be considered that almost all configurations are interconnected.

Landscapes

  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Development Economics (AREA)
  • Educational Administration (AREA)
  • Game Theory and Decision Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • General Factory Administration (AREA)

Abstract

本発明の作業手順管理装置（１）は、現場にいる作業者が発した質問を取得する質問処理部（２２）と、取得した質問に対する指示とともに指示がなされる意図が作業者に提示される必要があるか否かを判断する言語処理部（２３）を備えること、を特徴とする。さらに、作業手順管理装置は、必要がある場合、意図の生成を促す意図要求を生成する意図要求部（２４）を備えること、を特徴とする。

Description

作業手順管理装置、作業手順管理方法及び作業手順管理プログラム
　本発明は、作業手順管理装置、作業手順管理方法及び作業手順管理プログラムに関する。
　発電所等のプラントにおける保守作業において、特に経験の浅い作業者による保守作業の品質確保を目的として、作業手順書が使用される場合が多い。そして、作業手順書は、経験の豊かな作業者から経験の浅い作業者へのノウハウ継承にも役立つ。
　特許文献１の保守手順生成装置は、保守対象を認識すると、その保守対象向けの保守作業の手順を保守作業者に表示する。当該保守手順生成装置は、保守作業者の実際の作業内容が、表示した手順と異なる場合、保守作業の手順を動的に修正したうえで、修正後の手順を保守作業者に表示する。当該保守手順生成装置は、過去の経験をフィードバックして蓄積することにより、保守作業の手順を更新する。
特開２０１９－９１３６８号公報
　現場において作業者は、過去に体験したことがない状況に遭遇することがある。このような状態においても、特許文献１の保守手順生成装置は、作業者に対し、一応の保守作業の手順を表示することはできる。そして、表示される手順は、経験の豊かな作業者の知識が一応反映されてはいる。
　しかしながら、このような状況で作業者が真に必要とするのは、その手順を踏まなければならない本質的な意図等であることが多い。このような情報があれば、経験の浅い作業者であっても、自身で考える余裕が生じ、未体験の状況を解決できる場合が多い。そこで、本発明は、経験の浅い作業者が現場において必要に応じ作業手順の意図等を容易に知ることを目的とする。
　本発明の作業手順管理装置は、現場にいる作業者が発した質問を取得する質問処理部と、取得した質問に対する指示とともに指示がなされる意図が作業者に提示される必要があるか否かを判断する言語処理部を備えること、を特徴とする。
　その他の手段については、発明を実施するための形態のなかで説明する。
　本発明によれば、経験の浅い作業者が現場において必要に応じ作業手順の意図等を容易に知ることができる。
第１～第４の実施形態において使用される機器を説明する図である。 第１及び第２の実施形態における作業手順管理装置の構成等を説明する図である。 作業手順書の一例である。 意図要求の一例である。 質問の分類を説明する図である。 第１及び第２の実施形態の処理手順のシーケンス図である。 ステップＳ２０３の詳細フローチャートである。 ステップＳ３０４の詳細フローチャートである。 ステップＳ３０４の詳細フローチャート（続き）である。 第３の実施形態における作業手順管理装置の構成等を説明する図である。 第３の実施形態の処理手順のシーケンス図である。 第４の実施形態における作業手順管理装置の構成等を説明する図である。 第４の実施形態の処理手順のシーケンス図である。
　以降、本発明を実施するための形態（“本実施形態”という）を、図等を参照しながら詳細に説明する。本実施形態は、現場で作業をしている経験の浅い作業者が、遠隔地にいる経験の豊かな作業者と意思疎通する例である。以降では、“作業者”は、経験の浅い作業者を意味し、“指導者”は、経験の豊かな作業者を意味する。本発明の特徴は、作業者が指導者に対して発する質問に対し、“意図要求”を付すことである。“意図要求”に応じて指導者は、質問に対する通常の指示以外に、作業をより本質的に理解するための“意図”を作業者に提示する。作業者の質問に対する指導者の回答は、多くの場合、“〇〇してください”のような“指示”の型式を取る。そして、回答は、指示以外にも、必要に応じて指示の意図を含む。
　本実施形態は、第１～第４の実施形態から構成され、第１～第４の実施形態のそれぞれは、独立して実施可能である。作業者がウエアラブルデバイスを装着していることは、すべての実施形態に共通である。そして、“意図要求”を質問に付す機能（代表機能）をどの機器に担わせるかによって、本実施形態は、第１～第４の実施形態に分かれる。
（ウエアラブルデバイス）
　ウエアラブルデバイスとは、現場で作業者が装着する一種のコンピュータである。ウエアラブルデバイスは、通常、眼鏡、ヘルメット、腕時計等に取り付けられ、又は、それらに組み込まれて一体になっている。ウエアラブルデバイスは、入力装置及び出力装置としてマイクロフォン及びスピーカを有し、作業者がハンズフリーで会話することを可能にしている。ハンズフリーの会話を可能とするという観点から、ウエアラブルデバイスは、スマートフォン、タブレット等の携帯端末装置とは区別される。
（第１～第４の実施形態）
　図１は、第１～第４の実施形態において使用される機器を説明する図である。第１の実施形態（欄６１）においては、ウエアラブルデバイスＷは、眼鏡の形状を有しており（以下同様）、指導装置Ｔと通信を行う。ウエアラブルデバイスＷが、代表機能を担う。★は、その機器が代表機能を担うことを示す（以下同様）。
　第２の実施形態（欄６２）においては、ウエアラブルデバイスＷは、携帯端末装置Ｓ及び指導装置Ｔと通信を行う。同じ１人の作業者が、ウエアラブルデバイスＷ及び携帯端末装置Ｓを同時に使用する。ウエアラブルデバイスＷ及び携帯端末装置Ｓが分担して代表機能を担う。この場合、作業者は、入力装置として携帯端末装置Ｓのソフトウエアキーボード等を使用してもよい。
　第３の実施形態（欄６３）においては、ウエアラブルデバイスＷは、指導装置Ｔと通信を行う。指導装置Ｔが、代表機能を担う。欄６３では３個のウエアラブルデバイスＷが記載されている。しかしながら、ウエアラブルデバイスＷの数は、第３の実施形態の本質的な特徴ではない。但し、ウエアラブルデバイスＷの数が大きい場合、複数のウエアラブルデバイスＷを、指導装置Ｔが束ねる当該実施形態が好ましい。
　第４の実施形態（欄６４）においては、クラウド内サーバＣは、ウエアラブルデバイスＷ及び指導装置Ｔと通信を行う。クラウド内サーバＣは、ネットワーク内の任意の位置に配置される１又は複数のコンピュータの集合である。１又は複数の筐体のクラウド内サーバＣが、単独で又は分担して代表機能を担う。ウエアラブルデバイスＷの数は、第４の実施形態の本質的な特徴ではない。ウエアラブルデバイスＷの数が大きく、かつ、既存のコンピュータがネットワーク内で有効に活用できる場合、複数のウエアラブルデバイスＷを、クラウド内サーバＣが束ねる当該実施形態が好ましい。
　以降では、第１及び第２の実施形態をまとめて説明し、その次に、第３の実施形態及び第４の実施形態を説明する。
〈第１及び第２の実施形態〉
　図２は、第１及び第２の実施形態における作業手順管理装置１の構成等を説明する図である。作業手順管理装置１は、図１の欄６１におけるウエアラブルデバイスＷ単体、又は、図１の欄６２におけるウエアラブルデバイスＷ及び携帯端末装置Ｓの組み合わせである。第１の実施形態においては、図２の作業手順管理装置１のすべての構成が、ウエアラブルデバイスＷに備えられている。第２の実施形態においては、図２の作業手順管理装置１の各構成が、ウエアラブルデバイスＷ又は携帯端末装置Ｓの少なくともいずれか１つに備えられている。
　作業手順管理装置１は、中央制御装置１１、タッチパネル、カメラ、マイクロフォン等の入力装置１２、ディスプレイ、拡張現実画像が投影される眼鏡レンズ、スピーカ等の出力装置１３、主記憶装置１４、補助記憶装置１５及び通信装置１６を備える。これらは、バスで相互に接続されている。補助記憶装置１５は、作業手順書３１及び意図要求３２（いずれも詳細後記）を格納している。
　主記憶装置１４における作業管理部２１、質問処理部２２、言語処理部２３及び意図要求部２４は、プログラムである。中央制御装置１１は、これらのプログラムを補助記憶装置１５から読み出し主記憶装置１４にロードすることによって、それぞれのプログラムの機能（詳細後記）を実現する。作業手順管理装置１は、ネットワーク２を介して、指導装置３（図１においては符号Ｔ）と通信可能である。
　指導装置３は、一般的なコンピュータであり、中央制御装置４１、マイクロフォン、キーボード等の入力装置４２、ディスプレイ、スピーカ等の出力装置４３、主記憶装置４４、補助記憶装置４５及び通信装置４６を備える。指導装置３は、主として指導者によって操作される。
（作業手順書）
　図３は、作業手順書３１の一例である。作業手順書３１においては、手順番号欄１０１に記憶された手順番号に関連付けて、作業手順欄１０２には作業手順が、作業状態欄１０３には作業状態が記憶されている。
　手順番号欄１０１の手順番号は、作業者が現場で行うべき作業手順の順序を示す番号である。ここでの手順番号は、標準欄１０１ａ及び追加欄１０１ｂの階層を有している。標準欄１０１ａに手順番号が記憶されている作業手順は、“標準作業手順”と呼ばれる。追加欄１０１ｂに手順番号が記憶されている作業手順は、“追加作業手順”と呼ばれる。
　作業手順欄１０２の作業手順は、作業者に対する指示である。
　作業状態欄１０３の作業状態は、“ＯＫ”又は“ＮＧ”の何れかである。“ＯＫ”は、作業手順が順調に終了した旨を作業者が作業手順管理装置１に入力したことを示す。“ＮＧ”は、作業手順が順調に終了しなかった旨を作業者が作業手順管理装置１に入力したことを示す。
　図３を見ると、以下のことがわかる。
・作業当初、作業状態“ＯＫ”が連続している間は、標準作業手順が、標準欄１０１ａの手順番号の順（１、２、３、・・・）に、出力装置１３に表示されていた。
・ある時点で、作業者は、手順番号が“ｍ”である標準作業手順“すべてのＬＥＤが点灯していることを確認する”を行った。
・しかしながら、作業者は、３つのＬＥＤのうちの２つの点灯しか確認できなかった。そこで、作業者は、入力装置１２において、手順番号“ｍ”の作業状態欄１０３に“ＮＧ”を入力した。図３からは明らかではないが、この時点で作業者は、指導装置３に対して音声で質問し、指示を仰いだ。
・その結果、手順番号“ｍ１”の追加作業手順“テスタで端子○と端子●との間の電流値を確認する”が出力装置１３に表示された。実際には、この追加作業手順は、同じ内容の音声としても出力装置１３から出力されている。
・同じタイミングで意図５１が出力装置１３に表示された。意図５１の内容は、“基本的な確認　ＬＥＤが故障しているのか、それとも、信号がないのかを切り分ける”である。
・因みに、このタイミングで作業者が手順番号“ｍ１”の作業状態欄１０３に“ＯＫ”を入力すると、その後、手順番号“ｍ＋１”の標準作業手順が表示される。“ＮＧ”を入力すると、その後、手順番号“ｍ２”の追加作業手順が表示される。
　意図５１が作業者に表示されることによって、作業者は、作業内容を正確に理解したうえで、完全かつ迅速に作業を進め得る。現場において未体験の状況に遭遇している作業者が、指導者に対して冷静に意図を要求することは実際には困難である。そこで、作業手順管理装置１は、作業者の立場に立って自動的に、指導装置３に対して“意図要求”（直ちに後記）を送信する。
（意図要求）
　図４は、意図要求３２の一例である。意図要求３２は、指示に加えて指示の意図を作業者に提示することを、指導者に要求する。意図とは、多くの場合、その指示の背景又は目的である。さらに、背景又は目的は、“基本的な確認”、“過去の経験”、“何となくの直観”等を含むことが多い。
（質問の分類）
　図５は、質問の分類を説明する図である。作業者が指導者に対して発する質問は、“大分類”として、“５Ｗ１Ｈ型”及び“yes/no型”に分類される。５Ｗ１Ｈ型とは、yes/noで答えられない質問である。yes/no型とは、yes/noで答えられる質問である。
　“中分類”として、“５Ｗ１Ｈ型”は、“factoid型”及び“non-factoid型”に分類される。factoid型は、名称、日付、数値等の事実に基づく回答を求める質問である。non-factoid型は、理由又は事象の説明に基づく回答を求める質問である。なお、前記したように回答とは、作業者からの質問に対して指導者が答えた内容であり、“指示”及び必要に応じて“意図”を含む。
　“小分類”として、“non-factoid型”は、“ｈｏｗ型”、“ｗｈｙ型”及び“定義型”に分類される。“ｈｏｗ型”は、行動又は手順を求める質問である。“ｗｈｙ型”は、原因又は根拠を求める質問である。“定義型”は、物事の定義を求める質問である。
　図６は、第１及び第２の実施形態の処理手順のシーケンス図である。“ＷＤ”は、“ウエアラブルデバイス”の略である。処理手順を開始する前提として、いま、作業手順管理装置１の作業管理部２１は、出力装置１３に作業手順書３１（図３）を表示しているものとする。
　ステップＳ２０１において、作業手順管理装置１の作業管理部２１は、作業状態“ＮＧ”を受け付ける。具体的には、作業管理部２１は、作業者がマイクロフォン等の入力装置１２を介して作業状態“ＮＧ”を入力するのを受け付ける。このとき、作業者は、作業手順書３１（図３）が拡張現実画像として眼鏡レンズに投影されるのを見ている。そして、作業者は、現在の作業手順に係るレコードが強調表示されている（例えば点滅している）のを見ている。この状態で、作業者は、マイクに対して“ＮＧ”と音声で入力している（以下同様）。
　ステップＳ２０２において、作業管理部２１は、質問を受け付ける。具体的には、作業管理部２１は、作業者がマイクロフォン等の入力装置１２を介して質問を音声で入力するのを受け付ける。ここでの質問は、例えば“ＬＥＤが２つしか点灯していないのですが、どうすればよいですか？”である。
　ステップＳ２０３において、作業手順管理装置１は、質問を解析し、必要に応じ意図要求を作成する。ステップＳ２０３の詳細は後記するが、ここでは、作業手順管理装置１は、意図要求３２（図４）を生成するか否かを判断する。作業手順管理装置１は、意図要求３２を生成した場合、それを補助記憶装置１５に記憶する。以降、“必要に応じ”とは、意図要求３２の送信、並びに、意図の生成、送信及び表示が選択的である（ない場合もある）ことを示す。
　ステップＳ２０４において、作業手順管理装置１の作業管理部２１は、質問及び必要に応じ意図要求３２を送信する。具体的には、作業管理部２１は、ステップＳ２０２において受け付けた質問、及び、ステップＳ２０３において生成した意図要求３２を指導装置３に送信する。すると、指導装置３は、受信した意図要求３２を出力装置４３に表示する。ステップＳ２０３において意図要求３２が生成されない場合、意図要求３２は送信されない。
　ステップＳ２０５において、指導装置３は、指示及び必要に応じ意図を生成する。具体的には、第１に、指導装置３は、指導者が指導装置３のマイクロフォンに対して音声を入力するのを受け付けることによって、指示の音声を生成する。ここでの指示は、例えば“テスタで端子○と端子●との間の電流値を確認してください”である。
　第２に、指導装置３は、指導者が指導装置３のマイクロフォンに対して音声を入力するのを受け付けることによって、意図の音声を生成する。ここでの意図は、例えば“基本的な確認　ＬＥＤが故障しているのか、それとも、信号がないのかを切り分けてください”である。意図は、例えば“原因の切り分け”、“被害の拡大防止”、“別系統への切り替え”のような考え方が基礎になっている場合が多い（以下同様）。ステップＳ２０３において意図要求３２が生成されない場合、意図は生成されない。
　なお、指導者が短時間のうちに的確な理由を作成するのは容易ではない。そこで、指導装置３の補助記憶装置４５は、図４の（１）、（２）及び（３）に関連付けて、意図の候補（“ＬＥＤが故障しているのか・・・”等）を記憶しておく。指導装置３は、出力装置４３に、“（１）基本的な確認”ボタン、“（２）過去の経験”ボタン及び“（３）何となくの直観”ボタンを表示する。そして、指導装置３は、指導者が入力装置４２を介していずれかのボタンを押下するのを受け付ける。次に、指導装置３は、補助記憶装置４５から、押下されたボタンに対応する意図の候補を取得し出力装置４３に表示する。その後、指導者は、候補のうちの１つを選択する。（第３及び第４の実施形態においても同様）。
　ステップＳ２０６において、指導装置３は、指示及び必要に応じ意図を送信する。具体的には、指導装置３は、指示の音声及び意図の音声を作業手順管理装置１に送信する。ステップＳ２０３において意図要求３２が生成されない場合、意図は送信されない。
　ステップＳ２０７において、作業手順管理装置１の言語処理部２３は、指示及び意図を抽出する。具体的には、言語処理部２３は、ステップＳ２０６において送信された音声から、指示の部分及び意図の部分を抽出する。ステップＳ２０３において意図要求３２が生成されない場合、意図の部分は抽出されない。
　ステップＳ２０８において、作業手順管理装置１の作業管理部２１は、指示を追加作業手順として表示する。具体的には、作業管理部２１は、出力装置１３に表示している作業手順書３１（図３）に、追加作業手順“テスタで端子○と端子●との間の電流値を確認する”を表示するとともに、同じ内容の音声をスピーカから出力する。
　ステップＳ２０９において、作業管理部２１は、必要に応じ意図を表示する。具体的には、作業管理部２１は、出力装置１３に表示している追加作業手順“テスタで端子○と端子●との間の電流値を確認する”に関連付けて、意図“基本的な確認　ＬＥＤが故障しているのか、それとも、信号がないのかを切り分ける”を表示する。ステップＳ２０３において意図要求３２が生成されない場合、ステップＳ２０９は省略される。
　ステップＳ２０１～Ｓ２０９の処理は、作業者が作業状態“ＮＧ”を入力する都度繰り返される。
　図７は、ステップＳ２０３の詳細フローチャートである。
　ステップＳ３０１において、作業手順管理装置１の質問処理部２２は、音声データを取得する。具体的には、質問処理部２２は、ユーザがマイクロフォンに向かって発した音声（時系列の波形）を取得する。
　ステップＳ３０２において、作業手順管理装置１の言語処理部２３は、音声データを解析する。具体的には、言語処理部２３は、ステップＳ３０１において取得した音声データが、自然言語としての質問を示すものである（図５のいずれかの型に該当する）か否かを解析し、解析結果として“〇〇型の質問である”又は“質問ではない”を生成する。
　ステップＳ３０３において、言語処理部２３は、音声データが質問であるか否かを判断するする。具体的には、言語処理部２３は、ステップＳ３０２の解析結果が“〇〇型の質問である”である場合（ステップＳ３０３“Ｙｅｓ”）、ステップＳ３０４に進み、解析結果が“質問ではない”である場合（ステップＳ３０３“Ｎｏ”）、ステップＳ２０３を終了する。
　ステップＳ３０４において、言語処理部２３は、指導者の意図が必要であるか否かを判断する。ステップＳ３０４の詳細は後記するが、言語処理部２３は、結果として意図が必要である場合（ステップＳ３０４“Ｙｅｓ”）、ステップＳ３０５に進み、それ以外の場合（ステップＳ３０４“Ｎｏ”）、ステップＳ２０３を終了する。
　ステップＳ３０５において、作業手順管理装置１の意図要求部２４は、意図要求３２（図４）を生成する。具体的には、意図要求部２４は、意図要求３２（図４）を生成し、補助記憶装置１５に記憶する。
　その後、ステップＳ２０３を終了する。
　図８は、ステップＳ３０４の詳細フローチャートである。
　ステップＳ４０１において、作業手順管理装置１の言語処理部２３は、質問が５Ｗ１Ｈ型であるか否かを判断する。具体的には、言語処理部２３は、質問が５Ｗ１Ｈ型である場合（ステップＳ４０１“Ｙｅｓ”）、ステップＳ４０２に進み、質問がyes/no型である場合（ステップＳ４０１“Ｎｏ”）、ステップＳ５０１（図９）に進む。
　ステップＳ４０２において、言語処理部２３は、質問がfactoid型であるか否かを判断する。具体的には、言語処理部２３は、質問がfactoid型である場合（ステップＳ４０２“Ｙｅｓ”）、ステップＳ４０３に進み、質問がnon-factoid型である場合（ステップＳ４０２“Ｎｏ”）、ステップＳ４０４に進む。
　ステップＳ４０３において、言語処理部２３は、質問が過去の事象に対するものであるか否かを判断する。例えば、過去の事象に対する質問“〇〇〇したのはいつですか”は、作業者が事実を確認していることを示すことが多いので、指導者の意図を必要としない。現在又は将来の事象に対する質問“〇〇〇するのはいつですか”は、作業者が指導者の意図を求めていることを示すことが多いので、指導者の意図を必要とする。そこで、言語処理部２３は、質問が過去の事象に対するものである場合（ステップＳ４０３“Ｙｅｓ”）、ステップＳ２０３を終了し、質問が現在又は将来の事象に対するものである場合（ステップＳ４０３“Ｎｏ”）、ステップＳ３０５に進む。
　ステップＳ４０４において、言語処理部２３は、質問がｈｏｗ型であるか否かを判断する。ｈｏｗ型の質問の場合、作業者は指導者に行動又は手順を確認していることが多いので、指導者の意図は必要である。ｗｈｙ型の質問の場合、指導者の指示がそのまま意図になるはずであるので、指導者の意図は必要ではない。定義型の質問の場合も、指導者の指示は用語についての知識であるので、指導者の意図は必要ではない。そこで、言語処理部２３は、質問がｈｏｗ型である場合（ステップＳ４０４“Ｙｅｓ”）、ステップＳ３０５に進み、質問がｗｈｙ型又は定義型である場合（ステップＳ４０４“Ｎｏ”）、ステップＳ２０３を終了する。
　図９は、ステップＳ３０４の詳細フローチャート（続き）である。
　ステップＳ５０１において、作業手順管理装置１の言語処理部２３は、質問が過去の事象に対するものであるか否かを判断する。例えば、過去の事象に対する質問“〇〇〇しましたか”は、作業者が事実を確認していることを示すことが多いので、指導者の意図を必要としない。現在又は将来の事象に対する質問の場合、ひとまず指導者の返答（Ｙｅｓ又はＮｏ）が必要になる。そこで、言語処理部２３は、質問が過去の事象に対するものである場合（ステップＳ５０１“Ｙｅｓ”）、ステップＳ２０３を終了し、質問が現在又は将来の事象に対するものである場合（ステップＳ５０１“Ｎｏ”）、ステップＳ５０２に進む。
　ステップＳ５０２において、言語処理部２３は、指導者から返答を受け付ける。返答は、“Ｙｅｓ”又は“Ｎｏ”の何れかを含むが、それ以外にも、意図が含まれている場合がある。つまり、意図要求３２に応じた確信的な“回答”に含まれる“意図”とは異なり、指導者は、作業者の質問に促されて半ば無意識的に意図を回答する場合がある。
　ステップＳ５０３において、言語処理部２３は、返答がＹｅｓであるか否かを判断する。例えば、現在又は将来の事象に対する質問“〇〇〇すればよいですか”に対する返答がＹｅｓである場合、指導者は作業者と同じ知見を有しているので、指導者の意図は不要である。当該質問に対する返答がＮｏである場合、指導者は作業者と異なる知見を有しているので、指導者の意図が必要である。そこで、言語処理部２３は、返答がＹｅｓである場合（ステップＳ５０３“Ｙｅｓ”）、ステップＳ２０３を終了し、返答がＮｏである場合（ステップＳ５０３“Ｎｏ”）、ステップＳ５０４に進む。
　ステップＳ５０４において、言語処理部２３は、返答に意図が含まれているか否かを判断する。例えば、質問“〇〇〇すればよいですか”に対する返答が“いいえ、〇〇の危険があるから、先に●●を実施してください”であったとする。この返答のうち、“〇〇の危険があるから”の部分は、指導者の意図に相当する。質問“〇〇〇すればよいですか”に対する返答が“いいえ、先に●●を実施してください”であったとする。この返答は、指導者の意図に相当する部分を含んでいない。そこで、言語処理部２３は、返答に意図が含まれている場合（ステップＳ５０４“Ｙｅｓ”）、ステップＳ２０３を終了し、返答に意図が含まれていない場合（ステップＳ５０４“Ｎｏ”）、ステップＳ３０５に進む。
〈第３の実施形態〉
　図１０は、第３の実施形態における作業手順管理装置１の構成等を説明する図である。作業手順管理装置１は、図１の欄６３における指導装置Ｔである。第３の実施形態においては、図１０の作業手順管理装置１のすべての構成が、指導装置Ｔに備えられている。作業手順管理装置１は、主として指導者によって操作される。
　作業手順管理装置１の構成についての説明は、第１及び第２の実施形態における図２の説明と同様である。作業手順管理装置１は、ネットワーク２を介して、ウエアラブルデバイス４（図１の欄６３においては符号Ｗ）と通信可能である。
　ウエアラブルデバイス４は、現場で作業者が装着する一種のコンピュータであり、中央制御装置４１、タッチパネル、カメラ、マイクロフォン等の入力装置４２、ディスプレイ、拡張現実画像が投影される眼鏡レンズ、スピーカ等の出力装置４３、主記憶装置４４、補助記憶装置４５及び通信装置４６を備える。
　図２及び図１０を対比すると明らかなように、図２と図１０とでは、ウエアラブルデバイスと指導装置の立場が逆転している。代表機能を担うのは、図２ではウエアラブルデバイス（又は携帯端末装置）であるのに対し、図１０では、指導装置である。説明の便宜上、図２においても図１０においても、代表機能を担う構成は“作業手順管理装置”と命名され、その各構成には、符号１１、１２、・・・、２１、２２、・・・、３１、３２が割り当てられる。同様に、図２においても図１０においても、“作業手順管理装置”と情報の遣り取りを行う機器の構成には、符号４１～４６が割り当てられる。
　作業手順書３１及び意図要求３２についての説明は、第１及び第２の実施形態における図３及び図４の説明と同様である。質問の分類も、図５の説明と同様である。
　図１１は、第３の実施形態の処理手順のシーケンス図である。処理手順を開始する前提として、いま、作業手順管理装置１の作業管理部２１は、ウエアラブルデバイス４の出力装置４３に作業手順書３１（図３）を表示しているものとする。
　ステップＳ２１１において、ウエアラブルデバイス４は、作業状態“ＮＧ”を送信する。具体的には、第１に、ウエアラブルデバイス４は、作業者がマイクロフォン等の入力装置４２を介して作業状態“ＮＧ”を入力するのを受け付ける。
　第２に、ウエアラブルデバイス４は、受け付けた作業状態“ＮＧ”を作業手順管理装置１に送信する。
　ステップＳ２１２において、ウエアラブルデバイス４は、質問を送信する。具体的には、第１に、ウエアラブルデバイス４は、作業者がマイクロフォン等の入力装置４２を介して質問を音声で入力するのを受け付ける。ここでの質問は、例えば“ＬＥＤが２つしか点灯していないのですが、どうすればよいですか？”である。
　第２に、ウエアラブルデバイス４は、受け付けた質問を作業手順管理装置１に送信する。
　ステップＳ２１３において、作業手順管理装置１は、質問を解析し、必要に応じ意図要求を作成する。ステップＳ２１３の詳細は、図７～図９の説明と同様である。ここでは、作業手順管理装置１は、意図要求３２（図４）を生成するか否かを判断する。作業手順管理装置１は、意図要求３２を生成した場合、それを補助記憶装置１５に記憶するとともに、出力装置１３に表示する。以降、“必要に応じ”とは、意図の生成、送信及び表示が選択的である（ない場合もある）ことを示す。
　ステップＳ２１４において、作業手順管理装置１の作業管理部２１は、指示及び必要に応じ意図を生成する。具体的には、第１に、作業管理部２１は、指導者がマイクロフォンに対して音声を入力するのを受け付けることによって、指示の音声を生成する。ここでの指示は、例えば“テスタで端子○と端子●との間の電流値を確認してください”である。
　第２に、作業管理部２１は、指導者がキーボードに対してテキスト（文字列）を入力するのを受け付けることによって、意図のテキストを生成する。ここでの意図は、例えば“基本的な確認　ＬＥＤが故障しているのか、それとも、信号がないのかを切り分ける”である。ステップＳ２１３において意図要求３２が生成されない場合、意図は生成されない。なお“（指示）”は、指示が音声で入力されることを示し、“〈意図〉”は、意図がテキストで入力されることを示している。
　ステップＳ２１５において、作業管理部２１は、指示及び必要に応じ意図を送信する。具体的には、作業管理部２１は、指示の音声及び意図のテキストをウエアラブルデバイス４に送信する。ステップＳ２１３において意図要求３２が生成されない場合、意図は送信されない。
　ステップＳ２１６において、ウエアラブルデバイス４は、指示を抽出する。具体的には、ウエアラブルデバイス４は、ステップＳ２１５において送信された音声から、指示の部分を抽出する。
　ステップＳ２１７において、ウエアラブルデバイス４は、指示を追加作業手順として表示する。具体的には、ウエアラブルデバイス４は、出力装置４３に表示している作業手順書３１（図３）に、追加作業手順“テスタで端子○と端子●との間の電流値を確認する”を表示する。ウエアラブルデバイス４は、同じ内容の音声をスピーカから出力してもよい。
　ステップＳ２１８において、ウエアラブルデバイス４は、必要に応じ意図を表示する。具体的には、ウエアラブルデバイス４は、出力装置４３に表示している追加作業手順“テスタで端子○と端子●との間の電流値を確認する”に関連付けて、意図“基本的な確認　ＬＥＤが故障しているのか、それとも、信号がないのかを切り分ける”を表示する。ステップＳ２１３において意図要求３２が生成されない場合、ステップＳ２１８は省略される。
　ステップＳ２１１～Ｓ２１８の処理は、作業者が作業状態“ＮＧ”を入力する都度繰り返される。
〈第４の実施形態〉
　図１２は、第４の実施形態における作業手順管理装置１の構成等を説明する図である。作業手順管理装置１は、図１の欄６４におけるクラウド内サーバＣである。第４の実施形態においては、図１２の作業手順管理装置１のすべての構成が、複数のクラウド内サーバＣのうちの少なくとも１つに備えられている。
　作業手順管理装置１の構成についての説明は、第１及び第２の実施形態における図２の説明と同様である。作業手順管理装置１は、ネットワーク２を介して、ウエアラブルデバイス４（図１の欄６４においては符号Ｗ）及び指導装置３（図１の欄６４においては符号Ｔ）と通信可能である。
　指導装置３は、一般的なコンピュータであり、中央制御装置４１ａ、マイクロフォン、キーボード等の入力装置４２ａ、ディスプレイ、スピーカ等の出力装置４３ａ、主記憶装置４４ａ、補助記憶装置４５ａ及び通信装置４６ａを備える。指導装置３は、主として指導者によって操作される。
　ウエアラブルデバイス４は、現場で作業者が装着する一種のコンピュータであり、中央制御装置４１ｂ、タッチパネル、カメラ、マイクロフォン等の入力装置４２ｂ、ディスプレイ、拡張現実画像が投影される眼鏡レンズ、スピーカ等の出力装置４３ｂ、主記憶装置４４ｂ、補助記憶装置４５ｂ及び通信装置４６ｂを備える。
　図１０及び図１２を対比すると明らかなように、図１０における作業手順管理装置１の構成が、図１２においては、作業手順管理装置１及び指導装置３に分散している。さらに、図１２における作業手順管理装置１は、説明の便宜上１つの筐体として記載されているが、実際には、ネットワーク内の任意の位置に配置される１又は複数のコンピュータの集合（クラウド内サーバ）である。代表機能を担うのは、図１０では指導装置であるのに対し、図１２ではクラウド内サーバである。説明の便宜上、図１０においても図１２においても、代表機能を担う構成は“作業手順管理装置”と命名され、その各構成には、符号１１、１２、・・・、２１、２２、・・・、３１、３２が割り当てられる。
　作業手順書３１及び意図要求３２についての説明は、第１及び第２の実施形態における図３及び図４の説明と同様である。質問の分類も、図５の説明と同様である。
　図１３は、第４の実施形態の処理手順のシーケンス図である。処理手順を開始する前提として、いま、作業手順管理装置１の作業管理部２１は、ウエアラブルデバイス４の出力装置４３ｂに作業手順書３１（図３）を表示しているものとする。
　ステップＳ２２１において、ウエアラブルデバイス４は、作業状態“ＮＧ”を送信する。具体的には、第１に、ウエアラブルデバイス４は、作業者がマイクロフォン等の入力装置４２ｂを介して作業状態“ＮＧ”を入力するのを受け付ける。
　第２に、ウエアラブルデバイス４は、受け付けた作業状態“ＮＧ”を作業手順管理装置１及び指導装置３に送信する。
　ステップＳ２２２において、ウエアラブルデバイス４は、質問を送信する。具体的には、第１に、ウエアラブルデバイス４は、作業者がマイクロフォン等の入力装置４２ｂを介して質問を音声で入力するのを受け付ける。ここでの質問は、例えば“ＬＥＤが２つしか点灯していないのですが、どうすればよいですか？”である。
　第２に、ウエアラブルデバイス４は、受け付けた質問を作業手順管理装置１及び指導装置３に送信する。
　ステップＳ２２３において、作業手順管理装置１は、質問を解析し、必要に応じ意図要求を作成する。ステップＳ２２３の詳細は、図７～図９の説明と同様である。ここでは、作業手順管理装置１は、意図要求３２（図４）を生成するか否かを判断する。作業手順管理装置１は、意図要求３２を生成した場合、それを補助記憶装置１５に記憶する。以降、“必要に応じ”とは、意図要求３２の送信、並びに、意図の生成、送信及び表示が選択的である（ない場合もある）ことを示す。
　ステップＳ２２４において、作業手順管理装置１の作業管理部２１は、必要に応じ意図要求３２を送信する。具体的には、作業管理部２１は、ステップＳ２２３において生成した意図要求３２を指導装置３に送信する。すると、指導装置３は、受信した意図要求３２を出力装置４３ａに表示する。ステップＳ２２３において意図要求３２が生成されない場合、ステップＳ２２４は省略される。
　ステップＳ２２５において、指導装置３は、指示及び必要に応じ意図を生成する。具体的には、第１に、指導装置３は、指導者がマイクロフォンに対して音声を入力するのを受け付けることによって、指示の音声を生成する。ここでの指示は、例えば“テスタで端子○と端子●との間の電流値を確認してください”である。
　第２に、指導装置３は、指導者がマイクロフォンに対して音声を入力するのを受け付けることによって、意図の音声を生成する。ここでの意図は、例えば“基本的な確認　ＬＥＤが故障しているのか、それとも、信号がないのかを切り分けてください”である。ステップＳ２２３において意図要求３２が生成されない場合、意図は生成されない。
　ステップＳ２２６において、指導装置３は、指示及び必要に応じ意図を送信する。具体的には、作業管理部２１は、指示の音声及び意図の音声を作業手順管理装置１に送信する。ステップＳ２２３において意図要求３２が生成されない場合、意図は送信されない。
　ステップＳ２２７において、作業手順管理装置１の言語処理部２３は、指示及び意図を抽出する。具体的には、言語処理部２３は、ステップＳ２２６において送信された音声から、指示の部分及び意図の部分を抽出する。ステップＳ２２３において意図要求３２が生成されない場合、意図の部分は抽出されない。
　ステップＳ２２８において、ウエアラブルデバイス４は、指示を追加作業手順として表示する。具体的には、ウエアラブルデバイス４は、出力装置４３ｂに表示している作業手順書３１（図３）に、追加作業手順“テスタで端子○と端子●との間の電流値を確認する”を表示する。ウエアラブルデバイス４は、同じ内容の音声をスピーカから出力してもよい。
　ステップＳ２２９において、ウエアラブルデバイス４は、必要に応じ意図を表示する。具体的には、ウエアラブルデバイス４は、出力装置４３ｂに表示している追加作業手順“テスタで端子○と端子●との間の電流値を確認する”に関連付けて、意図“基本的な確認　ＬＥＤが故障しているのか、それとも、信号がないのかを切り分ける”を表示する。ステップＳ２２３において意図要求３２が生成されない場合、ステップＳ２２９は省略される。
　ステップＳ２２１～Ｓ２２９の処理は、作業者が作業状態“ＮＧ”を入力する都度繰り返される。
（変形例１）
　作業者の質問は、音声又はテキストのいずれでもよい。作業者及び指導者間の通信は、音声又はテキストのいずれでもよい。意図の入力は、音声又はテキストのいずれでもよい。
（変形例２）
　第１～第４の実施形態において、ウエアラブルデバイス４のカメラは、作業者が“ＮＧ”を入力した時点で、作業者の視野内の画像（不具合画像）を取得してもよい。そして、作業手順管理装置１の意図要求部２４は、過去の不具合画像と、それに対応して指導者が入力した意図との組合せを、学習データとして補助記憶装置１５に記憶しておく。意図要求部２４は、不具合画像を入力とし意図を出力とするモデル（例えばニューラルネットワーク型モデル）のパラメータ（例えばノード間の重み）を、学習データを使用して最適化しておく。意図要求部２４は、学習済みのモデルに対して不具合画像を入力し、出力としての意図を取得する。意図要求部２４は、取得した意図を、指導者に対して表示してもよい。
（本実施形態の効果）
　本実施形態の作業手順管理装置の効果は以下の通りである。
（１）作業手順管理装置は、作業者が発した質問に対する指示に、その意図が必要であるか否かを判断することができる。
（２）作業手順管理装置は、指導者に対して意図を作成する旨を要求することができる。
（３）作業手順管理装置は、作業者に対する指示の提示及び意図の提示の同期を取ることができる。
（４）作業手順管理装置は、意図の必要性を質問の分類結果に基づいて判断することができる。
（５）作業手順管理装置は、指導者の経験を作業者に提示することができる。
（６）作業手順管理装置は、ウエアラブルデバイス、それ以外の装置、それら以外のクラウド内の装置等の形態を取ることができる。
　なお、本発明は前記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、前記した実施例は、本発明を分かり易く説明するために詳細に説明したものであり、必ずしも説明したすべての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
　また、前記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウエアで実現してもよい。また、前記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウエアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Solid State Drive）等の記録装置、又は、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。
　また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしもすべての制御線や情報線を示しているとは限らない。実際には殆どすべての構成が相互に接続されていると考えてもよい。
　１　　　作業手順管理装置（ウエアラブルデバイス、指導装置、クラウド内サーバ）
　２　　　ネットワーク
　３　　　指導装置
　４　　　ウエアラブルデバイス
　１１　　中央制御装置
　１２　　入力装置
　１３　　出力装置
　１４　　主記憶装置
　１５　　補助記憶装置
　１６　　通信装置
　２１　　作業管理部
　２２　　質問処理部
　２３　　言語処理部
　２４　　意図要求部
　３１　　作業手順書
　３２　　意図要求
　５１　　意図

Claims (10)

  1. 　現場にいる作業者が発した質問を取得する質問処理部と、
    　前記取得した質問に対する指示とともに前記指示がなされる意図が前記作業者に提示される必要があるか否かを判断する言語処理部を備えること、
    　を特徴とする作業手順管理装置。
  2. 　前記必要がある場合、前記意図の生成を促す意図要求を生成する意図要求部を備えること、
    　を特徴とする請求項１に記載の作業手順管理装置。
  3. 　前記意図要求部は、
    　前記質問がなされた後、前記指示が提示される前に前記意図要求を生成すること、
    　を特徴とする請求項２に記載の作業手順管理装置。
  4. 　前記言語処理部は、
    　前記質問を分類した結果に基づき、前記必要があるか否かを判断すること、
    　を特徴とする請求項３に記載の作業手順管理装置。
  5. 　前記意図は、
    　前記作業者を指導する立場にある者によって生成されるものでること、
    　を特徴とする請求項４に記載の作業手順管理装置。
  6. 　前記作業手順管理装置は、
    　前記作業者が装着する装置であり、
    　前記指示とともに前記意図を前記作業者に提示すること、
    　を特徴とする請求項５に記載の作業手順管理装置。
  7. 　前記作業手順管理装置は、
    　前記作業者が装着する装置と通信する装置であり、
    　前記指示とともに前記意図を前記作業者が装着する装置に提示すること、
    　を特徴とする請求項５に記載の作業手順管理装置。
  8. 　前記作業手順管理装置は、
    　前記作業者が装着する装置及び前記指導する立場にある者が操作する装置と通信する１又は複数の装置であり、
    　前記指示とともに前記意図を前記作業者が装着する装置に提示すること、
    　を特徴とする請求項５に記載の作業手順管理装置。
  9. 　作業手順管理装置の質問処理部は、
    　現場にいる作業者が発した質問を取得し、
    　前記作業手順管理装置の言語処理部は、
    　前記取得した質問に対する指示とともに前記指示がなされる意図が前記作業者に提示される必要があるか否かを判断すること、
    　を特徴とする作業手順管理装置の作業手順管理方法。
  10. 　コンピュータを、
    　現場にいる作業者が発した質問を取得する質問処理部と、
    　前記取得した質問に対する指示とともに前記指示がなされる意図が前記作業者に提示される必要があるか否かを判断する言語処理部と、
    　して機能させることを特徴とする作業手順管理プログラム。
PCT/JP2021/006209 2020-03-17 2021-02-18 作業手順管理装置、作業手順管理方法及び作業手順管理プログラム WO2021187001A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/798,676 US20230078915A1 (en) 2020-03-17 2021-02-18 Work sequence management device, work sequence management method, and work sequence management program
CN202180016261.0A CN115176256A (zh) 2020-03-17 2021-02-18 工作流程管理装置、工作流程管理方法和工作流程管理程序

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-046507 2020-03-17
JP2020046507A JP2021149287A (ja) 2020-03-17 2020-03-17 作業手順管理装置、作業手順管理方法及び作業手順管理プログラム

Publications (1)

Publication Number Publication Date
WO2021187001A1 true WO2021187001A1 (ja) 2021-09-23

Family

ID=77768077

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/006209 WO2021187001A1 (ja) 2020-03-17 2021-02-18 作業手順管理装置、作業手順管理方法及び作業手順管理プログラム

Country Status (4)

Country Link
US (1) US20230078915A1 (ja)
JP (1) JP2021149287A (ja)
CN (1) CN115176256A (ja)
WO (1) WO2021187001A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011100190A (ja) * 2009-11-04 2011-05-19 Nec Fielding Ltd 機器保守システムおよび機器保守方法、障害推定装置
JP2017068418A (ja) * 2015-09-29 2017-04-06 株式会社日立製作所 計画支援システム及び計画支援方法
JP2017220109A (ja) * 2016-06-09 2017-12-14 大和ハウス工業株式会社 情報提供システム及び情報提供方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011100190A (ja) * 2009-11-04 2011-05-19 Nec Fielding Ltd 機器保守システムおよび機器保守方法、障害推定装置
JP2017068418A (ja) * 2015-09-29 2017-04-06 株式会社日立製作所 計画支援システム及び計画支援方法
JP2017220109A (ja) * 2016-06-09 2017-12-14 大和ハウス工業株式会社 情報提供システム及び情報提供方法

Also Published As

Publication number Publication date
US20230078915A1 (en) 2023-03-16
CN115176256A (zh) 2022-10-11
JP2021149287A (ja) 2021-09-27

Similar Documents

Publication Publication Date Title
JP6317853B2 (ja) 保護必要情報の安全なスクリーン共有を伴う電子通信
CN109191964A (zh) 一种基于虚拟现实的教学交互系统
US11126938B2 (en) Targeted data element detection for crowd sourced projects with machine learning
Pejoska-Laajola et al. Mobile augmented communication for remote collaboration in a physical work context
EP4268226A1 (en) Ambient cooperative intelligence system and method
JP7265667B2 (ja) 作業支援システムおよび作業支援方法
US20230085195A1 (en) Enhanced learning content in an interconnected environment
WO2021187001A1 (ja) 作業手順管理装置、作業手順管理方法及び作業手順管理プログラム
JP6826322B2 (ja) 故障部品交換支援方法
US10832586B2 (en) Providing partial answers to users
Brown et al. Tackling structural stigma: a systems perspective
Klein et al. Exploring the context of use for voice user interfaces: Toward context‐dependent user experience quality testing
US11887569B2 (en) Performance system, performance mode setting method, and performance mode setting device
CN210072615U (zh) 一种沉浸式教练系统及可穿戴设备
KR20150103884A (ko) 디바이스 소셜관계를 이용한 스마트 학습 시스템 및 그 방법
Alfredo et al. Slade: A method for designing human-centred learning analytics systems
CN112256521A (zh) 基于在线课堂的异常处理方法、装置、存储介质及终端
CN110049124A (zh) 在线教育资源自动切换方法、装置、电子设备、存储介质
CN112669982A (zh) 密切接触者的确定方法、装置、设备和存储介质
Bidarra et al. Development of an interactive kiosk with screen amplifier for the elderly and those with low vision
JP2023123980A (ja) 情報処理装置、情報処理方法、およびシステム
JP7382372B2 (ja) 作業支援装置、作業支援システム及び作業支援プログラム
KR20220041458A (ko) 객체 인식을 이용한 시선 기반 콘텐츠 교육 방법 및 이를 수행하기 위한 시스템
Gupta et al. Hybrid Learning Challenges and Knowledge Management: Role of Information Technology
US20230306376A1 (en) Data center guide creation for augmented reality headsets

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21770923

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21770923

Country of ref document: EP

Kind code of ref document: A1