JP2018067119A - Task instruction device - Google Patents

Task instruction device Download PDF

Info

Publication number
JP2018067119A
JP2018067119A JP2016204834A JP2016204834A JP2018067119A JP 2018067119 A JP2018067119 A JP 2018067119A JP 2016204834 A JP2016204834 A JP 2016204834A JP 2016204834 A JP2016204834 A JP 2016204834A JP 2018067119 A JP2018067119 A JP 2018067119A
Authority
JP
Japan
Prior art keywords
instruction
work
work instruction
display
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016204834A
Other languages
Japanese (ja)
Inventor
靖久 中川
Yasuhisa Nakagawa
靖久 中川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Wiring Systems Ltd
Original Assignee
Sumitomo Wiring Systems Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Wiring Systems Ltd filed Critical Sumitomo Wiring Systems Ltd
Priority to JP2016204834A priority Critical patent/JP2018067119A/en
Priority to PCT/JP2017/035798 priority patent/WO2018074206A1/en
Publication of JP2018067119A publication Critical patent/JP2018067119A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/418Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

PROBLEM TO BE SOLVED: To enable a user to easily refer to a task instruction corresponding to each tack when the worker performs a plurality of tasks.SOLUTION: A task instruction device comprises: a head mounted display device; an instruction acceptance unit which accepts an instruction relating to the start or end of a task as a gesture or speech; and a control unit which includes a storage unit in which a plurality of task instruction screens corresponding to a plurality of tasks respectively are stored, and causes the head mounted display device to display one of the plurality of task instruction screens stored in the storage unit and switches the task instruction screen displayed on the head mounted display device to another task instruction screen in response to an instruction accepted by the instruction acceptance unit.SELECTED DRAWING: Figure 5

Description

この発明は、ワイヤーハーネスの製造に関する作業指示を作業者等に提示するための技術に関する。   The present invention relates to a technique for presenting work instructions relating to the manufacture of a wire harness to an operator or the like.

特許文献1に開示されているように、車両に搭載されるワイヤーハーネスは、電線の端部に端子を圧着する工程、端子付電線の端部をコネクタに挿入してワイヤーハーネスを構成する複数の電線の一部を1つのまとまりとした仮結を製造する工程、ワイヤーハーネス組立図板上で仮結を布線して端子付電線の端部をコネクタに挿入したり、電線を結束したりする工程、各種検査工程等、多数の工程を経て製造される。   As disclosed in Patent Document 1, a wire harness mounted on a vehicle includes a step of crimping a terminal to an end portion of an electric wire, and a plurality of wire harnesses configured by inserting the end portion of a terminal-attached electric wire into a connector. The process of manufacturing temporary concatenation with a part of the electric wire as one unit, wiring the temporary conjoint on the wire harness assembly drawing board, inserting the end of the electric wire with terminal into the connector, or binding the electric wire It is manufactured through a number of processes such as processes and various inspection processes.

特開2016−18600号公報Japanese Patent Laid-Open No. 2006-18600

ところで、各工程において、作業者が行う作業は多様性に富む。例えば、ワイヤーハーネスの組立完了後における検査工程においては、粘着テープの巻回態様、コルゲートチューブの取付箇所等多数の箇所を検査する必要がある。   By the way, in each process, the work performed by the worker is rich in diversity. For example, in the inspection process after the assembly of the wire harness is completed, it is necessary to inspect a number of locations such as the winding mode of the adhesive tape and the location where the corrugated tube is attached.

この場合、例えば、各作業者が担当する作業毎に、多数の作業指示を記述した紙製のマニュアルが冊子として準備されることが考えられる。作業者は、当該マニュアルの各頁をめくりながら、当該作業工程における多種の作業を行うことになる。   In this case, for example, it is conceivable that a paper manual describing a large number of work instructions is prepared as a booklet for each work handled by each worker. The operator performs various operations in the operation process while turning each page of the manual.

しかしながら、紙製のマニュアルをめくりつつ参照しながら多数の作業を行うことは困難である。   However, it is difficult to perform many operations while referring to a paper manual.

そこで、本発明は、作業者が複数の作業を行う際に、各作業に応じた作業指示を容易に参照できるようにすることを目的とする。   Therefore, an object of the present invention is to make it possible to easily refer to work instructions corresponding to each work when the worker performs a plurality of work.

上記課題を解決するため、第1の態様に係る作業指示装置は、頭部装着型ディスプレイ装置と、作業開始又は作業終了に関する指示をジェスチャ又は音声により受付ける指示受付部と、複数の作業のそれぞれに応じた複数の作業指示画面を記憶した記憶部を含み、前記記憶部に記憶された前記複数の作業指示画面のうちの1つを前記頭部装着型ディスプレイ装置に表示させると共に、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替える制御ユニットとを備える。   In order to solve the above-described problem, a work instruction device according to a first aspect includes a head-mounted display device, an instruction receiving unit that receives an instruction regarding work start or work end by gesture or voice, and each of a plurality of works. A storage unit that stores a plurality of corresponding work instruction screens, and displays one of the plurality of work instruction screens stored in the storage unit on the head-mounted display device, and the instruction receiving unit And a control unit that switches the work instruction screen to be displayed on the head-mounted display device to another one in accordance with the instruction received in step (b).

第2の態様は、第1の態様に係る作業指示装置であって、前記記憶部に、複数の作業指示画面が切替え順序と共に記憶され、前記制御ユニットは、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を前記切替え順序に従って他の1つに切替えるものである。   A second aspect is a work instruction device according to the first aspect, wherein a plurality of work instruction screens are stored in the storage unit together with a switching order, and the control unit receives an instruction received by the instruction receiving unit. Accordingly, the work instruction screen displayed on the head-mounted display device is switched to another one in accordance with the switching order.

第3の態様は、第1又は第2の態様に係る作業指示装置であって、前記指示受付部は、音声を受付ける音声入力受付部を含み、前記制御ユニットは、音声入力受付部を介して受付けられた音声入力に基づいて、前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替えるものである。   A third aspect is a work instruction device according to the first or second aspect, wherein the instruction receiving unit includes a voice input receiving unit that receives voice, and the control unit is connected via the voice input receiving unit. Based on the received voice input, the work instruction screen displayed on the head-mounted display device is switched to another one.

第4の態様は、第1から第3のいずれか1つの態様に係る作業指示装置であって、前記記憶部に記憶される複数の作業指示画面の少なくとも1つは動画データを含み、前記制御ユニットは、前記複数の作業指示画面の少なくとも1つとして前記動画データに基づく動画を表示するものである。   A fourth aspect is the work instruction device according to any one of the first to third aspects, wherein at least one of the plurality of work instruction screens stored in the storage unit includes moving image data, and the control The unit displays a moving image based on the moving image data as at least one of the plurality of work instruction screens.

第5の態様は、第1から第4のいずれか1つの態様に係る作業指示装置であって、前記制御ユニットは、前記複数の作業指示画面の表示回数又は累積表示時間の少なくとも一方を、表示履歴として前記記憶部に記憶させるものである。   A fifth aspect is the work instruction device according to any one of the first to fourth aspects, wherein the control unit displays at least one of the number of display times or the cumulative display time of the plurality of work instruction screens. This is stored in the storage unit as a history.

第1の態様によると、頭部装着型ディスプレイ装置に前記複数の作業指示画面のうちの1つが表示されるため、作業者は、作業指示画面を参照しながら作業を行い易い。また、続けて別の作業を行う際には、前記作業指示画面を他の1つに容易に切替えることができ、続けて、他の作業指示画面を容易に参照できる。このため、作業者が複数の作業を行う際に、各作業に応じた作業指示画面を容易に参照できる。   According to the first aspect, since one of the plurality of work instruction screens is displayed on the head-mounted display device, the worker can easily perform work while referring to the work instruction screen. Further, when another work is continuously performed, the work instruction screen can be easily switched to another one, and the other work instruction screen can be easily referred to. For this reason, when the worker performs a plurality of operations, the operation instruction screen corresponding to each operation can be easily referred to.

第2の態様によると、作業者は、作業順序に応じて、作業指示画面を順次切替えていくことができるため、各作業に応じた作業指示画面をより容易に参照できる。   According to the second aspect, since the operator can sequentially switch the work instruction screen according to the work order, the worker can more easily refer to the work instruction screen corresponding to each work.

第3の態様によると、作業者は、音声を発することによって、手等を使わなくても、前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替えることができる。   According to the third aspect, the worker can switch the work instruction screen to be displayed on the head-mounted display device to another one by using a voice without using a hand or the like.

第4の態様によると、作業者は動画を見て作業指示を参照することができ、作業内容を容易に理解することができる。   According to the fourth aspect, the worker can refer to the work instruction by watching the moving image, and can easily understand the work content.

第5の態様によると、表示履歴を参照することによって、各作業指示画面のわかりやすさ、作業の難易度等の解析に役立てることができる。   According to the fifth aspect, by referring to the display history, it is possible to make use of it for analysis of easiness of understanding each work instruction screen, difficulty of work, and the like.

作業指示装置を示す概略斜視図である。It is a schematic perspective view which shows a work instruction | indication apparatus. 作業指示装置の電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of a work instruction | indication apparatus. 工程指示データに関するデータ構造例を示す図である。It is a figure which shows the example of a data structure regarding process instruction data. マイクロフォン及びジェスチャセンサ32を通じた指示と機能との関係を示す図である。It is a figure which shows the relationship between the instruction | indication through a microphone and the gesture sensor 32, and a function. 制御ユニットにおける表示制御処理を示すフローチャートである。It is a flowchart which shows the display control process in a control unit. 作業指示装置を用いた作業工程例を示す説明図である。It is explanatory drawing which shows the work process example using a work instruction | indication apparatus. 作業指示装置を用いた作業工程例を示す説明図である。It is explanatory drawing which shows the work process example using a work instruction | indication apparatus. 作業指示画面例を示す図である。It is a figure which shows the example of a work instruction | indication screen. 作業指示画面例を示す図である。It is a figure which shows the example of a work instruction screen. 作業指示画面例を示す図である。It is a figure which shows the example of a work instruction | indication screen. 作業指示画面例を示す図である。It is a figure which shows the example of a work instruction | indication screen. 作業指示画面例を示す図である。It is a figure which shows the example of a work instruction | indication screen. 表示履歴の表示例を示す図である。It is a figure which shows the example of a display of a display history. 表示履歴の表示例を示す図である。It is a figure which shows the example of a display of a display history.

以下、実施形態に係る作業指示装置について説明する。図1は作業指示装置20を示す概略斜視図である。   The work instruction apparatus according to the embodiment will be described below. FIG. 1 is a schematic perspective view showing the work instruction device 20.

作業指示装置20は、頭部装着型ディスプレイ装置22と、指示受付部としてのマイクロフォン30及びジェスチャセンサ32と、制御ユニット40とを備える。   The work instruction device 20 includes a head-mounted display device 22, a microphone 30 and a gesture sensor 32 as an instruction receiving unit, and a control unit 40.

頭部装着型ディスプレイ装置22は、表示部28を含み、当該表示部28を作業者に対して視認可能な位置及び姿勢で作業者の頭部に装着可能な装置である。   The head-mounted display device 22 includes a display unit 28, and is a device that can be mounted on the operator's head in a position and posture where the display unit 28 can be visually recognized by the operator.

ここでは、頭部装着型ディスプレイ装置22は、筐体部24と、延長支持部26と、表示筐体部27とを備える。   Here, the head-mounted display device 22 includes a housing part 24, an extension support part 26, and a display housing part 27.

筐体部24は、直方体ケース状に形成され、眼鏡17のテンプル18に取付可能に構成されている。筐体部24は、眼鏡17のテンプル18に一体的に固定されていてもよいし、着脱可能に取付けられていてもよい。筐体部24には、指示を受付ける操作スイッチ24SWも設けられている。   The housing part 24 is formed in a rectangular parallelepiped case shape, and is configured to be attachable to the temple 18 of the glasses 17. The housing | casing part 24 may be integrally fixed to the temple 18 of the spectacles 17, and may be attached so that attachment or detachment is possible. The casing unit 24 is also provided with an operation switch 24SW that receives an instruction.

延長支持部26は、筐体部24の一端部からテンプル18の延在方向で沿ってレンズ19gを保持するフレーム19側に向けて延在している。延長支持部26の先端部は、レンズ19gを越えている。なお、眼鏡17は、作業用の保護眼鏡等、度が入っていないレンズ19gを備えたものであってもよい。   The extension support portion 26 extends from one end portion of the housing portion 24 toward the frame 19 that holds the lens 19 g along the extending direction of the temple 18. The distal end portion of the extension support portion 26 exceeds the lens 19g. The eyeglasses 17 may be provided with a lens 19g that is not included, such as protective eyeglasses for work.

表示筐体部27は、延長支持部26の先端部から一方のレンズ19gの前方側に向けて延出している。表示筐体部27のうちレンズ19gを向く部分には、不透明な液晶表示装置等により構成される表示部28が組込まれている。表示部28の表示画面は、眼鏡17を装着した作業者の片目の視野の一部を占める。このため、作業者は、表示部28を参照しつつ、視野のその他の範囲で、周囲の作業範囲を直接視認することができる。   The display housing portion 27 extends from the distal end portion of the extension support portion 26 toward the front side of the one lens 19g. A display unit 28 composed of an opaque liquid crystal display device or the like is incorporated in a portion of the display housing unit 27 facing the lens 19g. The display screen of the display unit 28 occupies a part of the visual field of one eye of the worker wearing the glasses 17. For this reason, the worker can directly view the surrounding work range in the other range of the visual field while referring to the display unit 28.

なお、ここでは、頭部装着型ディスプレイ装置22が眼鏡17によって頭部に装着されるタイプである例で説明するが、その他、帽子、ヘルメット、頭部に装着されるベルト等によって装着されるタイプであってもよい。また、表示部として、透過型の液晶表示装置等が用いられてもよい。   Here, an example in which the head-mounted display device 22 is a type that is mounted on the head by the glasses 17 will be described, but other types that are mounted by a hat, a helmet, a belt mounted on the head, or the like. It may be. A transmissive liquid crystal display device or the like may be used as the display unit.

指示受付部は、作業開始又は作業終了に関する指示を受付け可能に構成されている。   The instruction receiving unit is configured to be able to receive an instruction regarding work start or work end.

マイクロフォン30は、作業開始又は作業終了に関する指示を音声により受付け可能に構成されている。すなわち、マイクロフォン30は、作業者が発した音声を電気信号に変換する装置であり、変換された電気信号は制御ユニット40に入力される。マイクロフォン30は、表示筐体部27に組込まれているが、他の箇所に組込まれていてもよい。マイクロフォン30から出力された音声電気信号は、制御ユニット40に入力され、制御ユニット40において、パターンマッチング処理等を経て音声認識処理される。音声認識された内容が、作業開始又は作業終了に関する指示として受付けられる。   The microphone 30 is configured to be able to receive an instruction regarding work start or work end by voice. In other words, the microphone 30 is a device that converts voice uttered by the worker into an electric signal, and the converted electric signal is input to the control unit 40. The microphone 30 is incorporated in the display housing unit 27, but may be incorporated in another location. The audio electrical signal output from the microphone 30 is input to the control unit 40, and the control unit 40 performs speech recognition processing through pattern matching processing and the like. The speech-recognized content is accepted as an instruction regarding work start or work end.

ジェスチャセンサ32は、作業開始又は作業終了に関する指示をジェスチャ(手の動き)により受付け可能に構成されている。すなわち、ジェスチャセンサ32は、作業者の手のジェスチャ等を検出する装置であり、その検出信号は制御ユニット40に入力される。ここでは、ジェスチャセンサ32は、表示筐体部27の外向き側端部部分に組込まれており、手が接近するジェスチャ(矢符M1参照)及び手がテンプル18に沿って前方から後方へ移動するジェスチャ(矢符M2参照)を検出可能に構成されている。かかるジェスチャセンサ32としては、複数の光センサを少なくとも前後方向に分散させてユニット化し、各光センサの出力変化等に基づいてジェスチャを検出するもの、撮像装置によって撮像された動画中における物体のジェスチャを検出する装置等、周知構成を含む種々構成を用いることができる。   The gesture sensor 32 is configured to be able to accept an instruction regarding work start or work end by gesture (hand movement). That is, the gesture sensor 32 is a device that detects a gesture of an operator's hand, and the detection signal is input to the control unit 40. Here, the gesture sensor 32 is incorporated in the outward side end portion of the display housing portion 27, and the hand approaches (see arrow M <b> 1) and the hand moves from the front to the rear along the temple 18. The gesture (see arrow M2) to be detected is configured to be detectable. As such a gesture sensor 32, a plurality of optical sensors are dispersed and unitized at least in the front-rear direction, and a gesture is detected based on an output change or the like of each optical sensor. A gesture of an object in a moving image captured by an imaging device. Various configurations including well-known configurations, such as a device for detecting stagnation, can be used.

制御ユニット40は、表示部28における表示内容を制御可能に構成されている。図2は作業指示装置20の電気的構成を示すブロック図である。   The control unit 40 is configured to be able to control display contents on the display unit 28. FIG. 2 is a block diagram showing an electrical configuration of the work instruction apparatus 20.

制御ユニット40は、CPU42、RAM43、記憶部34等がバスライン41を介して相互接続された一般的なコンピュータによって構成されている。記憶部34は、フラッシュメモリ或はハードディスク装置等の不揮発性の記憶装置によって構成されており、基本プログラム、表示用プログラム34a、各工程の工程I指示データ34b1、工程II指示データ34b2、工程III指示データ34b3、表示履歴34c等を記憶している。また、表示部28が画像信号用の入出力部45を介してバスライン41に接続されると共に、マイクロフォン30、ジェスチャセンサ32、操作スイッチ24SWが入出力部46を介してバスライン41に接続されている。さらに、外部通信用入出力部47もバスライン41に接続されており、他のコンピュータ等を通じて本制御ユニット40における各工程の指示データ34b1、34b2、34b3の設定、入力、表示履歴34cの取出し等を行える。外部通信用入出力部47は、有線通信インターフェースであってもよいし、無線通信インターフェースであってもよい。   The control unit 40 is configured by a general computer in which a CPU 42, a RAM 43, a storage unit 34, and the like are interconnected via a bus line 41. The storage unit 34 includes a nonvolatile storage device such as a flash memory or a hard disk device, and includes a basic program, a display program 34a, process I instruction data 34b1, process II instruction data 34b2, and process III instructions for each process. Data 34b3, display history 34c, and the like are stored. The display unit 28 is connected to the bus line 41 via the image signal input / output unit 45, and the microphone 30, the gesture sensor 32, and the operation switch 24 SW are connected to the bus line 41 via the input / output unit 46. ing. Further, the external communication input / output unit 47 is also connected to the bus line 41, and through other computers or the like, setting of the instruction data 34b1, 34b2, 34b3 of each process in the control unit 40, input, extraction of the display history 34c, etc. Can be done. The external communication input / output unit 47 may be a wired communication interface or a wireless communication interface.

工程I指示データ34b1、工程II指示データ34b2、工程III指示データ34b3は、ワイヤーハーネスを製造する複数の工程I、II、IIIのそれぞれに対して設定された作業用の指示データである。後述するように、工程I指示データ34b1は、ある工程に含まれる複数の作業のそれぞれに応じた複数の作業指示データを含む。表示用プログラム34aは、マイクロフォン30又はジェスチャセンサ32を通じて入力される指示に応じて、表示部28に表示させる指令を記憶したプログラムである。制御ユニット40が当該表示用プログラム34aに記述された指令に従って演算処理を実行することで、記憶部34に記憶された複数の作業指示データのうちの1つに応じた作業指示画面を頭部装着型ディスプレイ装置22に表示させると共に、マイクロフォン30及びジェスチャセンサ32で受付けられた指示に応じて頭部装着型ディスプレイ装置22に表示させる作業指示画面を作業指示データのうち他の1つに応じたものに切替える処理を実行する。   The process I instruction data 34b1, the process II instruction data 34b2, and the process III instruction data 34b3 are instruction data for work set for each of the plurality of processes I, II, and III for manufacturing the wire harness. As will be described later, the process I instruction data 34b1 includes a plurality of work instruction data corresponding to a plurality of works included in a certain process. The display program 34 a is a program that stores a command to be displayed on the display unit 28 in accordance with an instruction input through the microphone 30 or the gesture sensor 32. The control unit 40 executes arithmetic processing in accordance with a command described in the display program 34a, so that a work instruction screen corresponding to one of the plurality of work instruction data stored in the storage unit 34 is mounted on the head. A work instruction screen to be displayed on the head-mounted display device 22 in accordance with an instruction received by the microphone 30 and the gesture sensor 32 according to the other one of the work instruction data. The process to switch to is executed.

図3は工程I指示データ34b1、工程II指示データ34b2、工程III指示データ34b3に関するデータ構造例を示す図である。図3では、工程Iに含まれる作業番号0001の作業に対して指示画面1が対応付けて記憶され、作業番号0002の作業に対して指示画面2が対応付けて記憶され、作業番号0003の作業に対して指示画面3が対応付けて記憶されている。また、工程IIにおける作業番号1001の作業に対して指示画面11が対応付けて記憶され、作業番号1002の作業に対して指示画面12が対応付けて記憶されている。また、工程IIIにおける作業番号2001の作業に対して指示画面31が対応付けて記憶されている。各指示画面1、2,3等は、対応付けられた作業指示を表した画面であり、静止画像データ又は動画像データの形式等で記憶されている。指示画面の例については後述する。   FIG. 3 is a diagram showing a data structure example relating to the process I instruction data 34b1, the process II instruction data 34b2, and the process III instruction data 34b3. In FIG. 3, the instruction screen 1 is stored in association with the work having the work number 0001 included in the process I, the instruction screen 2 is stored in association with the work having the work number 0002, and the work having the work number 0003 is performed. Is stored in association with the instruction screen 3. In addition, the instruction screen 11 is stored in association with the work of the work number 1001 in the process II, and the instruction screen 12 is stored in association with the work of the work number 1002. In addition, an instruction screen 31 is stored in association with the work of work number 2001 in step III. Each instruction screen 1, 2, 3, etc. is a screen representing the associated work instruction, and is stored in the form of still image data or moving image data. An example of the instruction screen will be described later.

図4はマイクロフォン30を通じた指示及びジェスチャセンサ32を通じた指示と機能との関係を示す図である。   FIG. 4 is a diagram illustrating a relationship between an instruction through the microphone 30 and an instruction through the gesture sensor 32 and a function.

制御ユニット40による表示部28の制御を行うにあたって、図4の左列に示す各機能が実行される。“呼出開始”機能に対しては、音声“メニュー”が割当てられ、“番号”機能に対しては音声“(数字)”(上記作業番号を称呼する)が割当てられ、“次番号へ”機能に対しては音声“次へ”及び接近移動ジェスチャ(図1の矢符M1)が割当てられ、“前番号へ”機能に対しては音声“戻す”が割当てられ、“再生停止”機能に対しては音声“ストップ”及び後ろへ移動させるジェスチャ(図1の矢符M2)が割当てられている。   When the display unit 28 is controlled by the control unit 40, each function shown in the left column of FIG. 4 is executed. The “call” function is assigned the voice “menu”, the “number” function is assigned the voice “(number)” (calling the above work number), and the “next number” function Is assigned the voice “next” and approach movement gesture (arrow M1 in FIG. 1), the voice “return” is assigned to the “previous number” function, and the “playback stop” function is assigned. The voice “stop” and the gesture to move backward (arrow M2 in FIG. 1) are assigned.

図5は制御ユニットにおける表示制御処理を示すフローチャートである。   FIG. 5 is a flowchart showing display control processing in the control unit.

処理開始後、ステップS1において、制御ユニット40は、表示部28に初期の指示画面を表示させる。初期の指示画面は、前回の処理時における工程の最初の指示画面(例えば、前回の処理時において工程Iに関する指示画面を表示していた場合には、作業番号0001に対応する指示画面1)であってもよいし、前回の処理時において最後に表示していた指示画面であってもよい。   After the process starts, in step S1, the control unit 40 causes the display unit 28 to display an initial instruction screen. The initial instruction screen is the first instruction screen of the process at the time of the previous processing (for example, the instruction screen 1 corresponding to the work number 0001 when the instruction screen regarding the process I was displayed at the time of the previous processing). It may be an instruction screen that was last displayed during the previous processing.

次ステップS2において、作業番号の入力の有無が判定される。作業番号の入力は、例えば、作業者が“メニュー”を発話した後、いずれかの指示画面に対応する作業番号を発話し、これらの発話内容がマイクロフォン30を通じて電気信号として制御ユニット40に入力されて音声認識されることによりなされる。ステップS2において、作業番号の入力有りと判定されると、ステップS3に進み、作業番号の入力無しと判定されると、ステップS4に進む。   In the next step S2, it is determined whether or not a work number has been input. For example, after the operator utters “menu”, the work number is input by speaking the work number corresponding to one of the instruction screens, and the content of these utterances is input to the control unit 40 through the microphone 30 as an electrical signal. This is done by voice recognition. If it is determined in step S2 that the work number has been input, the process proceeds to step S3. If it is determined that the work number has not been input, the process proceeds to step S4.

ステップS3では、制御ユニット40は、入力された作業番号に応じた指示画面を表示部28に表示させ、その後、次ステップS4に進む。   In step S3, the control unit 40 causes the display unit 28 to display an instruction screen corresponding to the input work number, and then proceeds to next step S4.

ステップS4では、次の番号に進む旨の指示の有無が判定される。次の番号に進む旨の指示は、例えば、作業者が“次へ”を発話した後、この発話内容を制御ユニット40が音声認識すること、又は、作業者が後ろへ移動させるジェスチャを行い、これを制御ユニット40が認識することのいずれかによりなされる。ステップS4において、次の番号に進む旨の指示有りと判定されると、ステップS5に進み、次の番号に進む旨の指示無しと判定されると、ステップS6に進む。   In step S4, it is determined whether there is an instruction to proceed to the next number. The instruction to proceed to the next number is, for example, after the operator utters “next”, the control unit 40 performs voice recognition of the utterance content, or the operator moves the gesture backward, This is done either by the control unit 40 recognizing it. If it is determined in step S4 that there is an instruction to proceed to the next number, the process proceeds to step S5. If it is determined that there is no instruction to proceed to the next number, the process proceeds to step S6.

つまり、記憶部34には、複数の指示画面1、指示画面2、指示画面3が切替え順序(番号0001、0002、0003)と共に記憶されており、制御ユニット40は、受付けられた指示に応じて表示部28に表示させる指示画面1、指示画面2、指示画面3を、当該切替え順序に従ってそのうちの1つに切替える。   That is, the storage unit 34 stores a plurality of instruction screens 1, an instruction screen 2, and an instruction screen 3 together with a switching order (numbers 0001, 0002, and 0003), and the control unit 40 responds to the received instructions. The instruction screen 1, the instruction screen 2, and the instruction screen 3 displayed on the display unit 28 are switched to one of them according to the switching order.

ステップS5では、制御ユニット40は、現在表示中の指示画面の番号の次の番号の指示画面を表示部28に表示させ、その後、次ステップS6に進む。   In step S5, the control unit 40 causes the display unit 28 to display an instruction screen having a number next to the number of the instruction screen currently being displayed, and then proceeds to next step S6.

ステップS6では、番号を戻る旨の指示の有無が判定される。番号を戻る旨の指示は、例えば、作業者が“戻す”を発話した後、この発話内容を制御ユニット40が音声認識することによりなされる。ステップS6において、番号を戻る旨の指示有りと判定されると、ステップS7に進み、番号を戻る旨の指示無しと判定されると、ステップS2に戻る。   In step S6, it is determined whether or not there is an instruction to return the number. The instruction to return the number is made, for example, when the control unit 40 recognizes the content of the utterance after the operator utters “return”. If it is determined in step S6 that there is an instruction to return the number, the process proceeds to step S7. If it is determined that there is no instruction to return the number, the process returns to step S2.

ステップS7では、制御ユニット40は、現在表示中の指示画面の番号の前の番号の指示画面を表示部28に表示させ、その後、次ステップS2に戻る。   In step S7, the control unit 40 causes the display unit 28 to display an instruction screen having a number preceding the number of the instruction screen currently being displayed, and then returns to next step S2.

なお、指示画面が動画を含む場合、上記処理中において、作業者により再生停止指示が与えられると、当該動画の再生を停止させるとよい。再生停止の指示は、例えば、作業者が“ストップ”を発話した後、この発話内容を制御ユニット40が音声認識すること、又は、作業者が接近ジェスチャを行い、これを制御ユニット40が認識することのいずれかによりなされる。動画の再生を停止した後は、上記各処理を繰返し、ステップS2、S4、S6のいずれかにおいてYES判定がなされることにより、上記処理を継続して行うことができる。   When the instruction screen includes a moving image, the reproduction of the moving image may be stopped when a reproduction stop instruction is given by the operator during the above process. For example, after the operator utters “stop”, the control unit 40 recognizes the voice of the utterance content, or the operator performs an approach gesture, and the control unit 40 recognizes this. It is done by either. After the reproduction of the moving image is stopped, each of the above processes is repeated, and a YES determination is made in any of steps S2, S4, and S6, whereby the above processes can be continued.

また、制御ユニット40は、上記指示画面を切替える際に、表示画面の表示回数及び累積表示時間を含む表示履歴34cを更新して記憶部34に記憶する。本作業指示装置20の管理者等は、当該表示履歴をパソコン等に読出して、表示させることができる。表示履歴の表示例については後述する。   Further, when switching the instruction screen, the control unit 40 updates the display history 34 c including the display screen display count and the cumulative display time and stores the updated display history 34 c in the storage unit 34. An administrator or the like of the work instruction apparatus 20 can read the display history to a personal computer or the like and display it. A display history display example will be described later.

上記作業指示装置20を用いて作業者が作業を行う例について、指示画面の例と共に説明する。本例では、作業者Pが製造されたワイヤーハーネスWHの検査を行う例で説明する。   An example in which an operator performs work using the work instruction device 20 will be described together with an example of an instruction screen. In this example, an example in which the worker P inspects the manufactured wire harness WH will be described.

すなわち、図6及び図7に示すように、ワイヤーハーネスWHが検査用図板10上に製造されたワイヤーハーネスWHがセットされる。ワイヤーハーネスWHは、複数の電線を車両における配設経路に沿って分岐させつつ束ねたものである。各電線の分岐端部にはコネクタ11が取付けられている。ワイヤーハーネスWHが車両に組付けられた状態で、各コネクタ11が車両に搭載された各種電気部品にコネクタ接続される。これにより、ワイヤーハーネスWHは、各種電気部品同士を電気的に接続する配線材として用いられる。ワイヤーハーネスWHが製造された後、各種検査がなされる。ここでは、プロテクタ12の取付状態、識別ラベル13の取付状態、粘着テープ14の巻付状態を検査する例で説明する。   That is, as shown in FIG.6 and FIG.7, the wire harness WH with which the wire harness WH was manufactured on the test | inspection board 10 is set. The wire harness WH is obtained by bundling a plurality of electric wires while branching along an arrangement route in the vehicle. A connector 11 is attached to the branch end of each electric wire. With the wire harness WH assembled to the vehicle, each connector 11 is connected to various electrical components mounted on the vehicle. Thereby, wire harness WH is used as a wiring material which electrically connects various electric components. After the wire harness WH is manufactured, various inspections are performed. Here, an example in which the protector 12 is attached, the identification label 13 is attached, and the adhesive tape 14 is wound is described.

検査用図板10上にワイヤーハーネスWHがセットされた状態で、作業者Pは、作業指示装置20を頭部にセットして当該ワイヤーハーネスWHの検査作業を行う。検査作業としては、プロテクタ12の取付位置P1に対する検査作業1(作業番号0001)、識別ラベル13の取付位置P2に対する検査作業2(作業番号0002)、粘着テープ14の取付位置P3に対する検査作業3(作業番号0003)とがあるとする。   In a state where the wire harness WH is set on the inspection board 10, the worker P sets the work instruction device 20 on the head and performs the inspection work of the wire harness WH. As inspection work, inspection work 1 (work number 0001) for the attachment position P1 of the protector 12, inspection work 2 (work number 0002) for the attachment position P2 of the identification label 13, and inspection work 3 for the attachment position P3 of the adhesive tape 14 ( Work number 0003).

作業者Pが検査作業を行う初期状態においては、図8に示すように、表示部28には、作業番号0001に対応する指示画面1が表示される。この指示画面1では、検査が“OK”である旨の表示及び作業番号“0001”の表示と共に、プロテクタ12の取付状態における検査ポイントを示す画像が表示されている。図8において、上側の画像は、プロテクタ12をワイヤーハーネスWHに固定すべく巻付けられた粘着テープの端位置の正しい位置を示しており、検査ポイントとして“テープの端位置”という文字も表示されている。図8において下側の画像はプロテクタ12の左右のロック部の正しい状態(左右のロック部がロックされた状態)を示しており、検査ポイントとして“ロックの確認(左右有り)”の文字も表示されている。これらの各画像は、実際に正常箇所を撮像した画像であるが、その他、イラストによって示された画像であってもよい。作業者Pは、それらの表示部28に表示された指示画面1を参照することで、検査箇所及び正常な状態を確認しつつ、取付位置P1における粘着テープの端の位置、及び、左右のロック部が正しくロックされているか否かを検査することができる。   In the initial state where the worker P performs the inspection work, as shown in FIG. 8, the instruction screen 1 corresponding to the work number 0001 is displayed on the display unit 28. On this instruction screen 1, an image indicating the inspection point when the protector 12 is attached is displayed together with a display indicating that the inspection is “OK” and a work number “0001”. In FIG. 8, the upper image shows the correct position of the end position of the adhesive tape wound to fix the protector 12 to the wire harness WH, and the characters “tape end position” are also displayed as inspection points. ing. In FIG. 8, the lower image shows the correct state of the left and right lock parts of the protector 12 (the left and right lock parts are locked), and the text “Confirm lock (with left and right)” is also displayed as the inspection point. Has been. Each of these images is an image obtained by actually capturing a normal part, but may be an image shown by an illustration. The operator P refers to the instruction screen 1 displayed on the display unit 28 to confirm the inspection location and the normal state, and the position of the end of the adhesive tape at the attachment position P1 and the left and right locks. It can be checked whether the part is locked correctly.

指示画面1には、作業者Pに対してわかりやすく検査ポイントを表示するため、動画が含まれていることが好ましい。例えば、図9に示すように、粘着テープの端位置の正しい位置を示す上側の画像が表示された後、プロテクタ12の左右のロック部の正しい状態を示す下側の画像が表示されてもよい。また、図10に示すように、プロテクタ12の正しい取付状態を示す画面を表示した後、プロテクタ12の取付状態が非正常な場合を示す画面を表示させてもよい。図10に示す例では、上側の画像として粘着テープ14の端部の位置が不足している場合(電線に巻付けられていない場合)を表示すると共に、下側の画像として左側のロック部が正常にロックされていない状態を示している。   The instruction screen 1 preferably includes a moving image in order to display the inspection points in an easily understandable manner for the worker P. For example, as shown in FIG. 9, after the upper image indicating the correct position of the end position of the adhesive tape is displayed, the lower image indicating the correct state of the left and right lock portions of the protector 12 may be displayed. . Moreover, as shown in FIG. 10, after displaying the screen which shows the correct attachment state of the protector 12, you may display the screen which shows the case where the attachment state of the protector 12 is abnormal. In the example shown in FIG. 10, when the position of the end of the adhesive tape 14 is insufficient as the upper image (when it is not wrapped around the electric wire), the left lock portion is displayed as the lower image. Indicates a state that is not normally locked.

動画としては、表示させるべき内容が変化するものであればよく、上記のように、表示内容を別の内容に変化させる場合を含む。その他、動画は、検査箇所として注意すべき箇所をアニメーション動画で表示してもよい。また、動画として、作業内容を動画にて撮像したものを表示させるようにしてもよい。   The moving image only needs to change the content to be displayed, and includes the case where the display content is changed to another content as described above. In addition, the moving image may be displayed as an animated moving image where attention should be paid to the inspection location. Moreover, you may make it display what image | photographed the work content as a moving image as a moving image.

また、指示画面1の表示と同時に音声による指示がなされてもよい。   In addition, a voice instruction may be given simultaneously with the display of the instruction screen 1.

なお、指示画面1が動画として再生されている場合において、作業者Pが、作業内容が分り難いと考えたときには、 “ストップ”を発話するか、後ろへ移動させるジェスチャを行えば、再生が停止する。あるいは、作業者Pが、 “メニュー”を発話した後、作業者が“0001”を発話すれば、指示画面1が最初から再生される。   When the instruction screen 1 is reproduced as a moving image, if the worker P thinks that the work content is difficult to understand, the reproduction stops if he speaks “stop” or makes a gesture to move backward. To do. Alternatively, if the worker P utters “Menu” and then the worker utters “0001”, the instruction screen 1 is reproduced from the beginning.

上記のような指示画面は、例えば、各種プレゼンテーションプログラムを用いて作成することができる。   The instruction screen as described above can be created using, for example, various presentation programs.

作業者Pが位置P1における検査を終了すると、作業者Pは、“次へ”を発話するか、接近移動ジェスチャを行う。すると、図11に示すように、次の作業順序(位置P2)に対応する指示画面2が表示される。   When the worker P finishes the inspection at the position P1, the worker P speaks “next” or performs an approach movement gesture. Then, as shown in FIG. 11, an instruction screen 2 corresponding to the next work sequence (position P2) is displayed.

指示画面2には、作業番号“0002”が表示されている。また、指示画面2の左側には、“OK”の表示と共に識別ラベル13の正しい取付状態を示す画像が表示され、検査ポイントとして“番号が見えている”という文字も表示されている。また、指示画面2の右側には“NG”の表示と共に識別ラベル13の非正常な取付状態を示す画像が表示され、検査ポイントとして“番号隠れ”という文字も表示されている。このため、作業者Pは、それらの表示部28に表示された指示画面2を参照することで、検査箇所及び正常な状態等を確認しつつ、取付位置P2における識別ラベル13が正常に取付けられているか否かを検査することができる。   The instruction screen 2 displays a work number “0002”. In addition, on the left side of the instruction screen 2, an image indicating “OK” is displayed and an image indicating the correct attachment state of the identification label 13 is displayed, and characters “numbers are visible” are also displayed as inspection points. Further, on the right side of the instruction screen 2, “NG” is displayed together with an image indicating an abnormal mounting state of the identification label 13, and characters “number hidden” are also displayed as inspection points. For this reason, the worker P can normally attach the identification label 13 at the attachment position P2 while referring to the instruction screen 2 displayed on the display unit 28 while confirming the inspection location and the normal state. It can be checked whether or not.

なお、位置P2における検査中に、位置P1における検査をやり直したいと思ったときには、作業者Pは、“戻る”を発話すると、表示部28に指示画面1が表示される。このため、当該指示画面1を参照しつつ位置P1における検査をやり直せる。   When the operator P utters “Return” when he / she wants to redo the inspection at the position P1 during the inspection at the position P2, the instruction screen 1 is displayed on the display unit 28. Therefore, the inspection at the position P1 can be redone while referring to the instruction screen 1.

作業者Pが位置P2における検査を終了すると、作業者Pは、“次へ”を発話するか、接近移動ジェスチャを行う。すると、図12に示すように、次の作業順序(位置P3)に対応する指示画面2が表示される。   When the worker P finishes the inspection at the position P2, the worker P speaks “next” or performs an approach movement gesture. Then, as shown in FIG. 12, an instruction screen 2 corresponding to the next work sequence (position P3) is displayed.

指示画面3には、作業番号“0003”が表示されている。また、指示画面2の上側には、“OK”の表示と共に粘着テープ14の正しい取付状態を示す画像が表示され、検査ポイントとして“ハーフラップ巻されている”という文字も表示されている。また、指示画面2の下側には“NG”の表示と共に粘着テープ14の非正常な取付状態を示す画像が表示され、検査ポイントとして“露出している”という文字も表示されている。このため、作業者Pは、それらの表示部28に表示された指示画面3を参照することで、検査箇所及び正常な状態等を確認しつつ、取付位置P3における粘着テープ14が正常に取付けられているか否かを検査することができる。   The instruction screen 3 displays a work number “0003”. Further, on the upper side of the instruction screen 2, an image indicating “OK” is displayed together with an image indicating a correct attachment state of the adhesive tape 14, and a character “Half-wrapped” is also displayed as an inspection point. Further, on the lower side of the instruction screen 2, “NG” is displayed and an image indicating an abnormal attachment state of the adhesive tape 14 is displayed, and “exposed” characters are also displayed as an inspection point. For this reason, the worker P refers to the instruction screen 3 displayed on the display unit 28, and the adhesive tape 14 at the attachment position P3 is normally attached while checking the inspection location and the normal state. It can be checked whether or not.

上記のように各指示画面1,2,3を表示させた表示履歴34cは、記憶部34に記憶されており、本装置の管理者は、当該表示履歴34cをコンピュータにダウンロード等して確認することができる。   The display history 34c on which the instruction screens 1, 2, and 3 are displayed as described above is stored in the storage unit 34, and the administrator of the apparatus checks the display history 34c by downloading it to a computer or the like. be able to.

図13は各指示画面1〜3(作業番号0001〜0003)毎の表示回数を示す棒グラフであり、図14は各指示画面1〜3(作業番号0001〜0003)毎の累積表示時間を示す棒グラフである。   FIG. 13 is a bar graph showing the number of displays for each of the instruction screens 1 to 3 (work numbers 0001 to 0003), and FIG. 14 is a bar graph showing the accumulated display time for each of the instruction screens 1 to 3 (work numbers 0001 to 0003). It is.

本作業指示装置20の管理者等は、上記表示履歴をグラフ形式等で確認することで、各指示画面1〜3のわかりやすさ、各作業の難易度等を推測等することができる。例えば、指示画面(作業番号)の表示回数が多いもの、或は、累積表示時間が長いものは、指示画面1〜3が分り難いこと、或は、作業が難しいことを示すと推測することができる。   The administrator or the like of the work instruction apparatus 20 can estimate the ease of understanding of each instruction screen 1 to 3, the difficulty level of each work, and the like by confirming the display history in a graph format or the like. For example, it may be assumed that an instruction screen (work number) with a large number of display times or a long accumulated display time indicates that the instruction screens 1 to 3 are difficult to understand or work is difficult. it can.

以上のように構成された作業指示装置20によると、頭部装着型ディスプレイ装置22の表示部28に、複数の作業指示画面のうちの1つが表示されるため、作業者Pは、作業指示画面を参照しながら作業を行い易い。また、続けて別の作業を行う際には、マイクロフォン30又はジェスチャセンサ32を通じて作業指示画面を他の1つに容易に切替えることができる。作業者Pが複数の作業を行う際に、各作業に応じた作業指示画面を容易に参照できる。   According to the work instruction device 20 configured as described above, since one of the plurality of work instruction screens is displayed on the display unit 28 of the head-mounted display device 22, the worker P It is easy to work while referring to. Further, when another work is subsequently performed, the work instruction screen can be easily switched to another one through the microphone 30 or the gesture sensor 32. When the worker P performs a plurality of works, the work instruction screen corresponding to each work can be easily referred to.

また、記憶部34には、複数の作業指示画面1〜3が切替え順序(番号0001〜0003)と共に記憶され、制御ユニット40は、マイクロフォン30又はジェスチャセンサ32で受付けられた指示に応じて表示部28に表示させる作業指示画面1〜3を前記切替え順序に従って他の1つに切替える。このため、作業者Pは、作業順序に応じて、作業指示画面1〜3を容易に順次切替えていくことができる。このため、作業者Pは、各作業に応じて作業指示画面1〜3を容易に参照できる。   The storage unit 34 stores a plurality of work instruction screens 1 to 3 together with a switching order (numbers 0001 to 0003), and the control unit 40 displays a display unit according to an instruction received by the microphone 30 or the gesture sensor 32. The work instruction screens 1 to 3 displayed on the screen 28 are switched to another one in accordance with the switching order. For this reason, the worker P can easily and sequentially switch the work instruction screens 1 to 3 according to the work order. For this reason, the worker P can easily refer to the work instruction screens 1 to 3 according to each work.

また、マイクロフォン30を通じて音声が受付けられ、制御ユニット40は、マイクロフォン30を通じて受付けられた音声入力に基づいて、表示部28に表示させる作業指示画面1〜3を他の1つに切替える。このため、作業者Pは、手等を使わなくても、音声を発することによって、表示部28に表示させる作業指示画面1〜3を他の1つに容易に切替えることができ、順次作業を円滑に実施できる。   In addition, the voice is received through the microphone 30, and the control unit 40 switches the work instruction screens 1 to 3 to be displayed on the display unit 28 to another one based on the voice input received through the microphone 30. For this reason, the worker P can easily switch the work instruction screens 1 to 3 to be displayed on the display unit 28 to another one by emitting a sound without using a hand or the like. Can be implemented smoothly.

また、作業指示画面1は、動画データを含んでおり、表示部28に当該動画データが再生されるため、作業者Pは、動画を見て作業指示を認識することができ、作業内容を容易に理解できる。   In addition, the work instruction screen 1 includes moving image data, and the moving image data is reproduced on the display unit 28. Therefore, the worker P can recognize the work instruction by watching the moving image, and easily perform the work contents. Can understand.

また、記憶部34には、複数の作業指示画面1〜3それぞれの表示回数及び累積表示時間が表示履歴として記憶されている。このため、表示履歴を参照することによって、各作業指示画面1〜3のわかりやすさ、作業の難易度等の解析に役立てることができる。なお、表示履歴として、複数の作業指示画面1〜3それぞれの表示回数及び累積表示時間の両方が記憶されていることは必須ではなく、それらの一方のみが記憶されていてもよい。   Further, the storage unit 34 stores the display count and the accumulated display time of each of the plurality of work instruction screens 1 to 3 as a display history. For this reason, by referring to the display history, it is possible to use it for analysis of the ease of understanding of each of the work instruction screens 1 to 3 and the difficulty level of the work. Note that it is not essential to store both the display count and the cumulative display time of each of the plurality of work instruction screens 1 to 3 as the display history, and only one of them may be stored.

{変形例}
上記実施形態では、作業指示装置を検査工程に用いた例で説明したが、その他、ワイヤーハーネスWHを図板上で製造する工程、端子の圧着工程等、手作業にて行われる各種工程に適用することが可能である。
{Modifications}
In the said embodiment, although demonstrated using the example which used the work instruction | indication apparatus for the test | inspection process, it applies to various processes performed manually, such as the process of manufacturing the wire harness WH on a drawing board, the crimping | compression-bonding process of a terminal Is possible.

なお、上記実施形態及び各変形例で説明した各構成は、相互に矛盾しない限り適宜組合わせることができる。   In addition, each structure demonstrated in the said embodiment and each modification can be suitably combined unless it mutually contradicts.

以上のようにこの発明は詳細に説明されたが、上記した説明は、すべての局面において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。   As described above, the present invention has been described in detail. However, the above description is illustrative in all aspects, and the present invention is not limited thereto. It is understood that countless variations that are not illustrated can be envisaged without departing from the scope of the present invention.

17 眼鏡
20 作業指示装置
22 頭部装着型ディスプレイ装置
28 表示部
30 マイクロフォン
32 ジェスチャセンサ
34 記憶部
34a 表示用プログラム
34b1 工程I指示データ
34b2 工程II指示データ
34b3 工程III指示データ
34c 表示履歴
40 制御ユニット
WH ワイヤーハーネス
DESCRIPTION OF SYMBOLS 17 Glasses 20 Work instruction | indication apparatus 22 Head-mounted display apparatus 28 Display part 30 Microphone 32 Gesture sensor 34 Memory | storage part 34a Display program 34b1 Process I instruction data 34b2 Process II instruction data 34b3 Process III instruction data 34c Display history 40 Control unit WH Wire Harness

Claims (5)

頭部装着型ディスプレイ装置と、
作業開始又は作業終了に関する指示をジェスチャ又は音声により受付ける指示受付部と、
複数の作業のそれぞれに応じた複数の作業指示画面を記憶した記憶部を含み、前記記憶部に記憶された前記複数の作業指示画面のうちの1つを前記頭部装着型ディスプレイ装置に表示させると共に、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替える制御ユニットと、
を備える作業指示装置。
A head-mounted display device;
An instruction receiving unit that receives an instruction regarding work start or work end by gesture or voice;
A storage unit storing a plurality of work instruction screens corresponding to each of the plurality of tasks, and causing the head-mounted display device to display one of the plurality of work instruction screens stored in the storage unit And a control unit that switches the work instruction screen to be displayed on the head-mounted display device according to an instruction received by the instruction receiving unit to another one,
A work instruction device comprising:
請求項1記載の作業指示装置であって、
前記記憶部に、複数の作業指示画面が切替え順序と共に記憶され、
前記制御ユニットは、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を前記切替え順序に従って他の1つに切替える、作業指示装置。
The work instruction device according to claim 1,
In the storage unit, a plurality of work instruction screens are stored together with a switching order,
The control unit switches the work instruction screen to be displayed on the head-mounted display device according to an instruction received by the instruction receiving unit to another one according to the switching order.
請求項1又は請求項2に記載の作業指示装置であって、
前記指示受付部は、音声を受付ける音声入力受付部を含み、
前記制御ユニットは、音声入力受付部を介して受付けられた音声入力に基づいて、前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替える、作業指示装置。
The work instruction device according to claim 1 or 2,
The instruction receiving unit includes a voice input receiving unit that receives voice,
The said control unit is a work instruction apparatus which switches the said work instruction screen displayed on the said head mounted display apparatus to another one based on the audio | voice input received via the audio | voice input reception part.
請求項1から請求項3のいずれか1つに記載の作業指示装置であって、
前記記憶部に記憶される複数の作業指示画面の少なくとも1つは動画データを含み、
前記制御ユニットは、前記複数の作業指示画面の少なくとも1つとして前記動画データに基づく動画を表示する、作業指示装置。
The work instruction device according to any one of claims 1 to 3,
At least one of the plurality of work instruction screens stored in the storage unit includes moving image data,
The control unit displays a moving image based on the moving image data as at least one of the plurality of work instruction screens.
請求項1から請求項4のいずれか1つに記載の作業指示装置であって、
前記制御ユニットは、前記複数の作業指示画面の表示回数又は累積表示時間の少なくとも一方を、表示履歴として前記記憶部に記憶させる、作業指示装置。
The work instruction device according to any one of claims 1 to 4, wherein
The said control unit is a work instruction | indication apparatus which memorize | stores in the said memory | storage part as display history at least one of the display frequency of these work instruction | indication screens, or accumulation display time.
JP2016204834A 2016-10-19 2016-10-19 Task instruction device Pending JP2018067119A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016204834A JP2018067119A (en) 2016-10-19 2016-10-19 Task instruction device
PCT/JP2017/035798 WO2018074206A1 (en) 2016-10-19 2017-10-02 Operation instruction device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016204834A JP2018067119A (en) 2016-10-19 2016-10-19 Task instruction device

Publications (1)

Publication Number Publication Date
JP2018067119A true JP2018067119A (en) 2018-04-26

Family

ID=62019287

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016204834A Pending JP2018067119A (en) 2016-10-19 2016-10-19 Task instruction device

Country Status (2)

Country Link
JP (1) JP2018067119A (en)
WO (1) WO2018074206A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020067788A (en) * 2018-10-24 2020-04-30 パナソニックIpマネジメント株式会社 Operation inputting method, operation inputting system and operation terminal
WO2023176030A1 (en) * 2022-03-18 2023-09-21 株式会社島津製作所 Error reporting system and control device

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001060109A (en) * 1999-08-20 2001-03-06 Shimadzu Corp Maintenance system
JP3735086B2 (en) * 2002-06-20 2006-01-11 ウエストユニティス株式会社 Work guidance system
JP5193988B2 (en) * 2009-12-03 2013-05-08 東芝テック株式会社 Cooking assistance terminal and program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020067788A (en) * 2018-10-24 2020-04-30 パナソニックIpマネジメント株式会社 Operation inputting method, operation inputting system and operation terminal
JP7203334B2 (en) 2018-10-24 2023-01-13 パナソニックIpマネジメント株式会社 Operation input method, operation input system and operation terminal
WO2023176030A1 (en) * 2022-03-18 2023-09-21 株式会社島津製作所 Error reporting system and control device

Also Published As

Publication number Publication date
WO2018074206A1 (en) 2018-04-26

Similar Documents

Publication Publication Date Title
US10817240B2 (en) Multi-screen display method and display device
US20170243580A1 (en) Speech recognition system
KR101596751B1 (en) Method and apparatus for displaying blind spot customized by driver
US8831828B2 (en) In-vehicle information system, in-vehicle apparatus and information terminal
US9881605B2 (en) In-vehicle control apparatus and in-vehicle control method
KR20200045660A (en) Foldable electronic device for controlling user interface and operating method thereof
KR102657519B1 (en) Electronic device for providing graphic data based on voice and operating method thereof
US20130250141A1 (en) Terminal device, image displaying method and image displaying program executed by terminal device
US20190056813A1 (en) Display linking system
WO2018074206A1 (en) Operation instruction device
US20170199543A1 (en) Glass-type terminal and method of controling the same
KR20180048125A (en) Display apparatus and method for controlling a display apparatus
JPWO2018158812A1 (en) Inspection support device, inspection support method and program
JP6106402B2 (en) In-vehicle device
CN104417706A (en) Safety apparatus of electric bicycle and safety driving method thereof
US8706492B2 (en) Voice recognition terminal
JPWO2020012955A1 (en) Information processing equipment, information processing methods, and programs
JP6369758B2 (en) Wire harness manufacturing method and manufacturing apparatus
JP6459684B2 (en) Information output device, information output method, and program
CN110603572B (en) Elevator design presentation device, elevator design presentation method, and storage medium
JP2019200125A (en) Route guidance control device and route guidance control method
CN112506272A (en) Data processing method, device and equipment of split head-mounted equipment
CN111221482B (en) Interface layout adjusting method based on command console
JP2011248733A (en) Electronic apparatus
JP6509468B1 (en) Programmable display system and programmable display