JP2018067119A - Task instruction device - Google Patents
Task instruction device Download PDFInfo
- Publication number
- JP2018067119A JP2018067119A JP2016204834A JP2016204834A JP2018067119A JP 2018067119 A JP2018067119 A JP 2018067119A JP 2016204834 A JP2016204834 A JP 2016204834A JP 2016204834 A JP2016204834 A JP 2016204834A JP 2018067119 A JP2018067119 A JP 2018067119A
- Authority
- JP
- Japan
- Prior art keywords
- instruction
- work
- work instruction
- display
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Abstract
Description
この発明は、ワイヤーハーネスの製造に関する作業指示を作業者等に提示するための技術に関する。 The present invention relates to a technique for presenting work instructions relating to the manufacture of a wire harness to an operator or the like.
特許文献1に開示されているように、車両に搭載されるワイヤーハーネスは、電線の端部に端子を圧着する工程、端子付電線の端部をコネクタに挿入してワイヤーハーネスを構成する複数の電線の一部を1つのまとまりとした仮結を製造する工程、ワイヤーハーネス組立図板上で仮結を布線して端子付電線の端部をコネクタに挿入したり、電線を結束したりする工程、各種検査工程等、多数の工程を経て製造される。
As disclosed in
ところで、各工程において、作業者が行う作業は多様性に富む。例えば、ワイヤーハーネスの組立完了後における検査工程においては、粘着テープの巻回態様、コルゲートチューブの取付箇所等多数の箇所を検査する必要がある。 By the way, in each process, the work performed by the worker is rich in diversity. For example, in the inspection process after the assembly of the wire harness is completed, it is necessary to inspect a number of locations such as the winding mode of the adhesive tape and the location where the corrugated tube is attached.
この場合、例えば、各作業者が担当する作業毎に、多数の作業指示を記述した紙製のマニュアルが冊子として準備されることが考えられる。作業者は、当該マニュアルの各頁をめくりながら、当該作業工程における多種の作業を行うことになる。 In this case, for example, it is conceivable that a paper manual describing a large number of work instructions is prepared as a booklet for each work handled by each worker. The operator performs various operations in the operation process while turning each page of the manual.
しかしながら、紙製のマニュアルをめくりつつ参照しながら多数の作業を行うことは困難である。 However, it is difficult to perform many operations while referring to a paper manual.
そこで、本発明は、作業者が複数の作業を行う際に、各作業に応じた作業指示を容易に参照できるようにすることを目的とする。 Therefore, an object of the present invention is to make it possible to easily refer to work instructions corresponding to each work when the worker performs a plurality of work.
上記課題を解決するため、第1の態様に係る作業指示装置は、頭部装着型ディスプレイ装置と、作業開始又は作業終了に関する指示をジェスチャ又は音声により受付ける指示受付部と、複数の作業のそれぞれに応じた複数の作業指示画面を記憶した記憶部を含み、前記記憶部に記憶された前記複数の作業指示画面のうちの1つを前記頭部装着型ディスプレイ装置に表示させると共に、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替える制御ユニットとを備える。 In order to solve the above-described problem, a work instruction device according to a first aspect includes a head-mounted display device, an instruction receiving unit that receives an instruction regarding work start or work end by gesture or voice, and each of a plurality of works. A storage unit that stores a plurality of corresponding work instruction screens, and displays one of the plurality of work instruction screens stored in the storage unit on the head-mounted display device, and the instruction receiving unit And a control unit that switches the work instruction screen to be displayed on the head-mounted display device to another one in accordance with the instruction received in step (b).
第2の態様は、第1の態様に係る作業指示装置であって、前記記憶部に、複数の作業指示画面が切替え順序と共に記憶され、前記制御ユニットは、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を前記切替え順序に従って他の1つに切替えるものである。 A second aspect is a work instruction device according to the first aspect, wherein a plurality of work instruction screens are stored in the storage unit together with a switching order, and the control unit receives an instruction received by the instruction receiving unit. Accordingly, the work instruction screen displayed on the head-mounted display device is switched to another one in accordance with the switching order.
第3の態様は、第1又は第2の態様に係る作業指示装置であって、前記指示受付部は、音声を受付ける音声入力受付部を含み、前記制御ユニットは、音声入力受付部を介して受付けられた音声入力に基づいて、前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替えるものである。 A third aspect is a work instruction device according to the first or second aspect, wherein the instruction receiving unit includes a voice input receiving unit that receives voice, and the control unit is connected via the voice input receiving unit. Based on the received voice input, the work instruction screen displayed on the head-mounted display device is switched to another one.
第4の態様は、第1から第3のいずれか1つの態様に係る作業指示装置であって、前記記憶部に記憶される複数の作業指示画面の少なくとも1つは動画データを含み、前記制御ユニットは、前記複数の作業指示画面の少なくとも1つとして前記動画データに基づく動画を表示するものである。 A fourth aspect is the work instruction device according to any one of the first to third aspects, wherein at least one of the plurality of work instruction screens stored in the storage unit includes moving image data, and the control The unit displays a moving image based on the moving image data as at least one of the plurality of work instruction screens.
第5の態様は、第1から第4のいずれか1つの態様に係る作業指示装置であって、前記制御ユニットは、前記複数の作業指示画面の表示回数又は累積表示時間の少なくとも一方を、表示履歴として前記記憶部に記憶させるものである。 A fifth aspect is the work instruction device according to any one of the first to fourth aspects, wherein the control unit displays at least one of the number of display times or the cumulative display time of the plurality of work instruction screens. This is stored in the storage unit as a history.
第1の態様によると、頭部装着型ディスプレイ装置に前記複数の作業指示画面のうちの1つが表示されるため、作業者は、作業指示画面を参照しながら作業を行い易い。また、続けて別の作業を行う際には、前記作業指示画面を他の1つに容易に切替えることができ、続けて、他の作業指示画面を容易に参照できる。このため、作業者が複数の作業を行う際に、各作業に応じた作業指示画面を容易に参照できる。 According to the first aspect, since one of the plurality of work instruction screens is displayed on the head-mounted display device, the worker can easily perform work while referring to the work instruction screen. Further, when another work is continuously performed, the work instruction screen can be easily switched to another one, and the other work instruction screen can be easily referred to. For this reason, when the worker performs a plurality of operations, the operation instruction screen corresponding to each operation can be easily referred to.
第2の態様によると、作業者は、作業順序に応じて、作業指示画面を順次切替えていくことができるため、各作業に応じた作業指示画面をより容易に参照できる。 According to the second aspect, since the operator can sequentially switch the work instruction screen according to the work order, the worker can more easily refer to the work instruction screen corresponding to each work.
第3の態様によると、作業者は、音声を発することによって、手等を使わなくても、前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替えることができる。 According to the third aspect, the worker can switch the work instruction screen to be displayed on the head-mounted display device to another one by using a voice without using a hand or the like.
第4の態様によると、作業者は動画を見て作業指示を参照することができ、作業内容を容易に理解することができる。 According to the fourth aspect, the worker can refer to the work instruction by watching the moving image, and can easily understand the work content.
第5の態様によると、表示履歴を参照することによって、各作業指示画面のわかりやすさ、作業の難易度等の解析に役立てることができる。 According to the fifth aspect, by referring to the display history, it is possible to make use of it for analysis of easiness of understanding each work instruction screen, difficulty of work, and the like.
以下、実施形態に係る作業指示装置について説明する。図1は作業指示装置20を示す概略斜視図である。
The work instruction apparatus according to the embodiment will be described below. FIG. 1 is a schematic perspective view showing the
作業指示装置20は、頭部装着型ディスプレイ装置22と、指示受付部としてのマイクロフォン30及びジェスチャセンサ32と、制御ユニット40とを備える。
The
頭部装着型ディスプレイ装置22は、表示部28を含み、当該表示部28を作業者に対して視認可能な位置及び姿勢で作業者の頭部に装着可能な装置である。
The head-mounted
ここでは、頭部装着型ディスプレイ装置22は、筐体部24と、延長支持部26と、表示筐体部27とを備える。
Here, the head-mounted
筐体部24は、直方体ケース状に形成され、眼鏡17のテンプル18に取付可能に構成されている。筐体部24は、眼鏡17のテンプル18に一体的に固定されていてもよいし、着脱可能に取付けられていてもよい。筐体部24には、指示を受付ける操作スイッチ24SWも設けられている。
The
延長支持部26は、筐体部24の一端部からテンプル18の延在方向で沿ってレンズ19gを保持するフレーム19側に向けて延在している。延長支持部26の先端部は、レンズ19gを越えている。なお、眼鏡17は、作業用の保護眼鏡等、度が入っていないレンズ19gを備えたものであってもよい。
The
表示筐体部27は、延長支持部26の先端部から一方のレンズ19gの前方側に向けて延出している。表示筐体部27のうちレンズ19gを向く部分には、不透明な液晶表示装置等により構成される表示部28が組込まれている。表示部28の表示画面は、眼鏡17を装着した作業者の片目の視野の一部を占める。このため、作業者は、表示部28を参照しつつ、視野のその他の範囲で、周囲の作業範囲を直接視認することができる。
The
なお、ここでは、頭部装着型ディスプレイ装置22が眼鏡17によって頭部に装着されるタイプである例で説明するが、その他、帽子、ヘルメット、頭部に装着されるベルト等によって装着されるタイプであってもよい。また、表示部として、透過型の液晶表示装置等が用いられてもよい。
Here, an example in which the head-mounted
指示受付部は、作業開始又は作業終了に関する指示を受付け可能に構成されている。 The instruction receiving unit is configured to be able to receive an instruction regarding work start or work end.
マイクロフォン30は、作業開始又は作業終了に関する指示を音声により受付け可能に構成されている。すなわち、マイクロフォン30は、作業者が発した音声を電気信号に変換する装置であり、変換された電気信号は制御ユニット40に入力される。マイクロフォン30は、表示筐体部27に組込まれているが、他の箇所に組込まれていてもよい。マイクロフォン30から出力された音声電気信号は、制御ユニット40に入力され、制御ユニット40において、パターンマッチング処理等を経て音声認識処理される。音声認識された内容が、作業開始又は作業終了に関する指示として受付けられる。
The
ジェスチャセンサ32は、作業開始又は作業終了に関する指示をジェスチャ(手の動き)により受付け可能に構成されている。すなわち、ジェスチャセンサ32は、作業者の手のジェスチャ等を検出する装置であり、その検出信号は制御ユニット40に入力される。ここでは、ジェスチャセンサ32は、表示筐体部27の外向き側端部部分に組込まれており、手が接近するジェスチャ(矢符M1参照)及び手がテンプル18に沿って前方から後方へ移動するジェスチャ(矢符M2参照)を検出可能に構成されている。かかるジェスチャセンサ32としては、複数の光センサを少なくとも前後方向に分散させてユニット化し、各光センサの出力変化等に基づいてジェスチャを検出するもの、撮像装置によって撮像された動画中における物体のジェスチャを検出する装置等、周知構成を含む種々構成を用いることができる。
The
制御ユニット40は、表示部28における表示内容を制御可能に構成されている。図2は作業指示装置20の電気的構成を示すブロック図である。
The
制御ユニット40は、CPU42、RAM43、記憶部34等がバスライン41を介して相互接続された一般的なコンピュータによって構成されている。記憶部34は、フラッシュメモリ或はハードディスク装置等の不揮発性の記憶装置によって構成されており、基本プログラム、表示用プログラム34a、各工程の工程I指示データ34b1、工程II指示データ34b2、工程III指示データ34b3、表示履歴34c等を記憶している。また、表示部28が画像信号用の入出力部45を介してバスライン41に接続されると共に、マイクロフォン30、ジェスチャセンサ32、操作スイッチ24SWが入出力部46を介してバスライン41に接続されている。さらに、外部通信用入出力部47もバスライン41に接続されており、他のコンピュータ等を通じて本制御ユニット40における各工程の指示データ34b1、34b2、34b3の設定、入力、表示履歴34cの取出し等を行える。外部通信用入出力部47は、有線通信インターフェースであってもよいし、無線通信インターフェースであってもよい。
The
工程I指示データ34b1、工程II指示データ34b2、工程III指示データ34b3は、ワイヤーハーネスを製造する複数の工程I、II、IIIのそれぞれに対して設定された作業用の指示データである。後述するように、工程I指示データ34b1は、ある工程に含まれる複数の作業のそれぞれに応じた複数の作業指示データを含む。表示用プログラム34aは、マイクロフォン30又はジェスチャセンサ32を通じて入力される指示に応じて、表示部28に表示させる指令を記憶したプログラムである。制御ユニット40が当該表示用プログラム34aに記述された指令に従って演算処理を実行することで、記憶部34に記憶された複数の作業指示データのうちの1つに応じた作業指示画面を頭部装着型ディスプレイ装置22に表示させると共に、マイクロフォン30及びジェスチャセンサ32で受付けられた指示に応じて頭部装着型ディスプレイ装置22に表示させる作業指示画面を作業指示データのうち他の1つに応じたものに切替える処理を実行する。
The process I instruction data 34b1, the process II instruction data 34b2, and the process III instruction data 34b3 are instruction data for work set for each of the plurality of processes I, II, and III for manufacturing the wire harness. As will be described later, the process I instruction data 34b1 includes a plurality of work instruction data corresponding to a plurality of works included in a certain process. The
図3は工程I指示データ34b1、工程II指示データ34b2、工程III指示データ34b3に関するデータ構造例を示す図である。図3では、工程Iに含まれる作業番号0001の作業に対して指示画面1が対応付けて記憶され、作業番号0002の作業に対して指示画面2が対応付けて記憶され、作業番号0003の作業に対して指示画面3が対応付けて記憶されている。また、工程IIにおける作業番号1001の作業に対して指示画面11が対応付けて記憶され、作業番号1002の作業に対して指示画面12が対応付けて記憶されている。また、工程IIIにおける作業番号2001の作業に対して指示画面31が対応付けて記憶されている。各指示画面1、2,3等は、対応付けられた作業指示を表した画面であり、静止画像データ又は動画像データの形式等で記憶されている。指示画面の例については後述する。
FIG. 3 is a diagram showing a data structure example relating to the process I instruction data 34b1, the process II instruction data 34b2, and the process III instruction data 34b3. In FIG. 3, the
図4はマイクロフォン30を通じた指示及びジェスチャセンサ32を通じた指示と機能との関係を示す図である。
FIG. 4 is a diagram illustrating a relationship between an instruction through the
制御ユニット40による表示部28の制御を行うにあたって、図4の左列に示す各機能が実行される。“呼出開始”機能に対しては、音声“メニュー”が割当てられ、“番号”機能に対しては音声“(数字)”(上記作業番号を称呼する)が割当てられ、“次番号へ”機能に対しては音声“次へ”及び接近移動ジェスチャ(図1の矢符M1)が割当てられ、“前番号へ”機能に対しては音声“戻す”が割当てられ、“再生停止”機能に対しては音声“ストップ”及び後ろへ移動させるジェスチャ(図1の矢符M2)が割当てられている。
When the
図5は制御ユニットにおける表示制御処理を示すフローチャートである。 FIG. 5 is a flowchart showing display control processing in the control unit.
処理開始後、ステップS1において、制御ユニット40は、表示部28に初期の指示画面を表示させる。初期の指示画面は、前回の処理時における工程の最初の指示画面(例えば、前回の処理時において工程Iに関する指示画面を表示していた場合には、作業番号0001に対応する指示画面1)であってもよいし、前回の処理時において最後に表示していた指示画面であってもよい。
After the process starts, in step S1, the
次ステップS2において、作業番号の入力の有無が判定される。作業番号の入力は、例えば、作業者が“メニュー”を発話した後、いずれかの指示画面に対応する作業番号を発話し、これらの発話内容がマイクロフォン30を通じて電気信号として制御ユニット40に入力されて音声認識されることによりなされる。ステップS2において、作業番号の入力有りと判定されると、ステップS3に進み、作業番号の入力無しと判定されると、ステップS4に進む。
In the next step S2, it is determined whether or not a work number has been input. For example, after the operator utters “menu”, the work number is input by speaking the work number corresponding to one of the instruction screens, and the content of these utterances is input to the
ステップS3では、制御ユニット40は、入力された作業番号に応じた指示画面を表示部28に表示させ、その後、次ステップS4に進む。
In step S3, the
ステップS4では、次の番号に進む旨の指示の有無が判定される。次の番号に進む旨の指示は、例えば、作業者が“次へ”を発話した後、この発話内容を制御ユニット40が音声認識すること、又は、作業者が後ろへ移動させるジェスチャを行い、これを制御ユニット40が認識することのいずれかによりなされる。ステップS4において、次の番号に進む旨の指示有りと判定されると、ステップS5に進み、次の番号に進む旨の指示無しと判定されると、ステップS6に進む。
In step S4, it is determined whether there is an instruction to proceed to the next number. The instruction to proceed to the next number is, for example, after the operator utters “next”, the
つまり、記憶部34には、複数の指示画面1、指示画面2、指示画面3が切替え順序(番号0001、0002、0003)と共に記憶されており、制御ユニット40は、受付けられた指示に応じて表示部28に表示させる指示画面1、指示画面2、指示画面3を、当該切替え順序に従ってそのうちの1つに切替える。
That is, the
ステップS5では、制御ユニット40は、現在表示中の指示画面の番号の次の番号の指示画面を表示部28に表示させ、その後、次ステップS6に進む。
In step S5, the
ステップS6では、番号を戻る旨の指示の有無が判定される。番号を戻る旨の指示は、例えば、作業者が“戻す”を発話した後、この発話内容を制御ユニット40が音声認識することによりなされる。ステップS6において、番号を戻る旨の指示有りと判定されると、ステップS7に進み、番号を戻る旨の指示無しと判定されると、ステップS2に戻る。
In step S6, it is determined whether or not there is an instruction to return the number. The instruction to return the number is made, for example, when the
ステップS7では、制御ユニット40は、現在表示中の指示画面の番号の前の番号の指示画面を表示部28に表示させ、その後、次ステップS2に戻る。
In step S7, the
なお、指示画面が動画を含む場合、上記処理中において、作業者により再生停止指示が与えられると、当該動画の再生を停止させるとよい。再生停止の指示は、例えば、作業者が“ストップ”を発話した後、この発話内容を制御ユニット40が音声認識すること、又は、作業者が接近ジェスチャを行い、これを制御ユニット40が認識することのいずれかによりなされる。動画の再生を停止した後は、上記各処理を繰返し、ステップS2、S4、S6のいずれかにおいてYES判定がなされることにより、上記処理を継続して行うことができる。
When the instruction screen includes a moving image, the reproduction of the moving image may be stopped when a reproduction stop instruction is given by the operator during the above process. For example, after the operator utters “stop”, the
また、制御ユニット40は、上記指示画面を切替える際に、表示画面の表示回数及び累積表示時間を含む表示履歴34cを更新して記憶部34に記憶する。本作業指示装置20の管理者等は、当該表示履歴をパソコン等に読出して、表示させることができる。表示履歴の表示例については後述する。
Further, when switching the instruction screen, the
上記作業指示装置20を用いて作業者が作業を行う例について、指示画面の例と共に説明する。本例では、作業者Pが製造されたワイヤーハーネスWHの検査を行う例で説明する。
An example in which an operator performs work using the
すなわち、図6及び図7に示すように、ワイヤーハーネスWHが検査用図板10上に製造されたワイヤーハーネスWHがセットされる。ワイヤーハーネスWHは、複数の電線を車両における配設経路に沿って分岐させつつ束ねたものである。各電線の分岐端部にはコネクタ11が取付けられている。ワイヤーハーネスWHが車両に組付けられた状態で、各コネクタ11が車両に搭載された各種電気部品にコネクタ接続される。これにより、ワイヤーハーネスWHは、各種電気部品同士を電気的に接続する配線材として用いられる。ワイヤーハーネスWHが製造された後、各種検査がなされる。ここでは、プロテクタ12の取付状態、識別ラベル13の取付状態、粘着テープ14の巻付状態を検査する例で説明する。
That is, as shown in FIG.6 and FIG.7, the wire harness WH with which the wire harness WH was manufactured on the test |
検査用図板10上にワイヤーハーネスWHがセットされた状態で、作業者Pは、作業指示装置20を頭部にセットして当該ワイヤーハーネスWHの検査作業を行う。検査作業としては、プロテクタ12の取付位置P1に対する検査作業1(作業番号0001)、識別ラベル13の取付位置P2に対する検査作業2(作業番号0002)、粘着テープ14の取付位置P3に対する検査作業3(作業番号0003)とがあるとする。
In a state where the wire harness WH is set on the
作業者Pが検査作業を行う初期状態においては、図8に示すように、表示部28には、作業番号0001に対応する指示画面1が表示される。この指示画面1では、検査が“OK”である旨の表示及び作業番号“0001”の表示と共に、プロテクタ12の取付状態における検査ポイントを示す画像が表示されている。図8において、上側の画像は、プロテクタ12をワイヤーハーネスWHに固定すべく巻付けられた粘着テープの端位置の正しい位置を示しており、検査ポイントとして“テープの端位置”という文字も表示されている。図8において下側の画像はプロテクタ12の左右のロック部の正しい状態(左右のロック部がロックされた状態)を示しており、検査ポイントとして“ロックの確認(左右有り)”の文字も表示されている。これらの各画像は、実際に正常箇所を撮像した画像であるが、その他、イラストによって示された画像であってもよい。作業者Pは、それらの表示部28に表示された指示画面1を参照することで、検査箇所及び正常な状態を確認しつつ、取付位置P1における粘着テープの端の位置、及び、左右のロック部が正しくロックされているか否かを検査することができる。
In the initial state where the worker P performs the inspection work, as shown in FIG. 8, the
指示画面1には、作業者Pに対してわかりやすく検査ポイントを表示するため、動画が含まれていることが好ましい。例えば、図9に示すように、粘着テープの端位置の正しい位置を示す上側の画像が表示された後、プロテクタ12の左右のロック部の正しい状態を示す下側の画像が表示されてもよい。また、図10に示すように、プロテクタ12の正しい取付状態を示す画面を表示した後、プロテクタ12の取付状態が非正常な場合を示す画面を表示させてもよい。図10に示す例では、上側の画像として粘着テープ14の端部の位置が不足している場合(電線に巻付けられていない場合)を表示すると共に、下側の画像として左側のロック部が正常にロックされていない状態を示している。
The
動画としては、表示させるべき内容が変化するものであればよく、上記のように、表示内容を別の内容に変化させる場合を含む。その他、動画は、検査箇所として注意すべき箇所をアニメーション動画で表示してもよい。また、動画として、作業内容を動画にて撮像したものを表示させるようにしてもよい。 The moving image only needs to change the content to be displayed, and includes the case where the display content is changed to another content as described above. In addition, the moving image may be displayed as an animated moving image where attention should be paid to the inspection location. Moreover, you may make it display what image | photographed the work content as a moving image as a moving image.
また、指示画面1の表示と同時に音声による指示がなされてもよい。
In addition, a voice instruction may be given simultaneously with the display of the
なお、指示画面1が動画として再生されている場合において、作業者Pが、作業内容が分り難いと考えたときには、 “ストップ”を発話するか、後ろへ移動させるジェスチャを行えば、再生が停止する。あるいは、作業者Pが、 “メニュー”を発話した後、作業者が“0001”を発話すれば、指示画面1が最初から再生される。
When the
上記のような指示画面は、例えば、各種プレゼンテーションプログラムを用いて作成することができる。 The instruction screen as described above can be created using, for example, various presentation programs.
作業者Pが位置P1における検査を終了すると、作業者Pは、“次へ”を発話するか、接近移動ジェスチャを行う。すると、図11に示すように、次の作業順序(位置P2)に対応する指示画面2が表示される。
When the worker P finishes the inspection at the position P1, the worker P speaks “next” or performs an approach movement gesture. Then, as shown in FIG. 11, an
指示画面2には、作業番号“0002”が表示されている。また、指示画面2の左側には、“OK”の表示と共に識別ラベル13の正しい取付状態を示す画像が表示され、検査ポイントとして“番号が見えている”という文字も表示されている。また、指示画面2の右側には“NG”の表示と共に識別ラベル13の非正常な取付状態を示す画像が表示され、検査ポイントとして“番号隠れ”という文字も表示されている。このため、作業者Pは、それらの表示部28に表示された指示画面2を参照することで、検査箇所及び正常な状態等を確認しつつ、取付位置P2における識別ラベル13が正常に取付けられているか否かを検査することができる。
The
なお、位置P2における検査中に、位置P1における検査をやり直したいと思ったときには、作業者Pは、“戻る”を発話すると、表示部28に指示画面1が表示される。このため、当該指示画面1を参照しつつ位置P1における検査をやり直せる。
When the operator P utters “Return” when he / she wants to redo the inspection at the position P1 during the inspection at the position P2, the
作業者Pが位置P2における検査を終了すると、作業者Pは、“次へ”を発話するか、接近移動ジェスチャを行う。すると、図12に示すように、次の作業順序(位置P3)に対応する指示画面2が表示される。
When the worker P finishes the inspection at the position P2, the worker P speaks “next” or performs an approach movement gesture. Then, as shown in FIG. 12, an
指示画面3には、作業番号“0003”が表示されている。また、指示画面2の上側には、“OK”の表示と共に粘着テープ14の正しい取付状態を示す画像が表示され、検査ポイントとして“ハーフラップ巻されている”という文字も表示されている。また、指示画面2の下側には“NG”の表示と共に粘着テープ14の非正常な取付状態を示す画像が表示され、検査ポイントとして“露出している”という文字も表示されている。このため、作業者Pは、それらの表示部28に表示された指示画面3を参照することで、検査箇所及び正常な状態等を確認しつつ、取付位置P3における粘着テープ14が正常に取付けられているか否かを検査することができる。
The
上記のように各指示画面1,2,3を表示させた表示履歴34cは、記憶部34に記憶されており、本装置の管理者は、当該表示履歴34cをコンピュータにダウンロード等して確認することができる。
The
図13は各指示画面1〜3(作業番号0001〜0003)毎の表示回数を示す棒グラフであり、図14は各指示画面1〜3(作業番号0001〜0003)毎の累積表示時間を示す棒グラフである。
FIG. 13 is a bar graph showing the number of displays for each of the
本作業指示装置20の管理者等は、上記表示履歴をグラフ形式等で確認することで、各指示画面1〜3のわかりやすさ、各作業の難易度等を推測等することができる。例えば、指示画面(作業番号)の表示回数が多いもの、或は、累積表示時間が長いものは、指示画面1〜3が分り難いこと、或は、作業が難しいことを示すと推測することができる。
The administrator or the like of the
以上のように構成された作業指示装置20によると、頭部装着型ディスプレイ装置22の表示部28に、複数の作業指示画面のうちの1つが表示されるため、作業者Pは、作業指示画面を参照しながら作業を行い易い。また、続けて別の作業を行う際には、マイクロフォン30又はジェスチャセンサ32を通じて作業指示画面を他の1つに容易に切替えることができる。作業者Pが複数の作業を行う際に、各作業に応じた作業指示画面を容易に参照できる。
According to the
また、記憶部34には、複数の作業指示画面1〜3が切替え順序(番号0001〜0003)と共に記憶され、制御ユニット40は、マイクロフォン30又はジェスチャセンサ32で受付けられた指示に応じて表示部28に表示させる作業指示画面1〜3を前記切替え順序に従って他の1つに切替える。このため、作業者Pは、作業順序に応じて、作業指示画面1〜3を容易に順次切替えていくことができる。このため、作業者Pは、各作業に応じて作業指示画面1〜3を容易に参照できる。
The
また、マイクロフォン30を通じて音声が受付けられ、制御ユニット40は、マイクロフォン30を通じて受付けられた音声入力に基づいて、表示部28に表示させる作業指示画面1〜3を他の1つに切替える。このため、作業者Pは、手等を使わなくても、音声を発することによって、表示部28に表示させる作業指示画面1〜3を他の1つに容易に切替えることができ、順次作業を円滑に実施できる。
In addition, the voice is received through the
また、作業指示画面1は、動画データを含んでおり、表示部28に当該動画データが再生されるため、作業者Pは、動画を見て作業指示を認識することができ、作業内容を容易に理解できる。
In addition, the
また、記憶部34には、複数の作業指示画面1〜3それぞれの表示回数及び累積表示時間が表示履歴として記憶されている。このため、表示履歴を参照することによって、各作業指示画面1〜3のわかりやすさ、作業の難易度等の解析に役立てることができる。なお、表示履歴として、複数の作業指示画面1〜3それぞれの表示回数及び累積表示時間の両方が記憶されていることは必須ではなく、それらの一方のみが記憶されていてもよい。
Further, the
{変形例}
上記実施形態では、作業指示装置を検査工程に用いた例で説明したが、その他、ワイヤーハーネスWHを図板上で製造する工程、端子の圧着工程等、手作業にて行われる各種工程に適用することが可能である。
{Modifications}
In the said embodiment, although demonstrated using the example which used the work instruction | indication apparatus for the test | inspection process, it applies to various processes performed manually, such as the process of manufacturing the wire harness WH on a drawing board, the crimping | compression-bonding process of a terminal Is possible.
なお、上記実施形態及び各変形例で説明した各構成は、相互に矛盾しない限り適宜組合わせることができる。 In addition, each structure demonstrated in the said embodiment and each modification can be suitably combined unless it mutually contradicts.
以上のようにこの発明は詳細に説明されたが、上記した説明は、すべての局面において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。 As described above, the present invention has been described in detail. However, the above description is illustrative in all aspects, and the present invention is not limited thereto. It is understood that countless variations that are not illustrated can be envisaged without departing from the scope of the present invention.
17 眼鏡
20 作業指示装置
22 頭部装着型ディスプレイ装置
28 表示部
30 マイクロフォン
32 ジェスチャセンサ
34 記憶部
34a 表示用プログラム
34b1 工程I指示データ
34b2 工程II指示データ
34b3 工程III指示データ
34c 表示履歴
40 制御ユニット
WH ワイヤーハーネス
DESCRIPTION OF
Claims (5)
作業開始又は作業終了に関する指示をジェスチャ又は音声により受付ける指示受付部と、
複数の作業のそれぞれに応じた複数の作業指示画面を記憶した記憶部を含み、前記記憶部に記憶された前記複数の作業指示画面のうちの1つを前記頭部装着型ディスプレイ装置に表示させると共に、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替える制御ユニットと、
を備える作業指示装置。 A head-mounted display device;
An instruction receiving unit that receives an instruction regarding work start or work end by gesture or voice;
A storage unit storing a plurality of work instruction screens corresponding to each of the plurality of tasks, and causing the head-mounted display device to display one of the plurality of work instruction screens stored in the storage unit And a control unit that switches the work instruction screen to be displayed on the head-mounted display device according to an instruction received by the instruction receiving unit to another one,
A work instruction device comprising:
前記記憶部に、複数の作業指示画面が切替え順序と共に記憶され、
前記制御ユニットは、前記指示受付部で受付けられた指示に応じて前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を前記切替え順序に従って他の1つに切替える、作業指示装置。 The work instruction device according to claim 1,
In the storage unit, a plurality of work instruction screens are stored together with a switching order,
The control unit switches the work instruction screen to be displayed on the head-mounted display device according to an instruction received by the instruction receiving unit to another one according to the switching order.
前記指示受付部は、音声を受付ける音声入力受付部を含み、
前記制御ユニットは、音声入力受付部を介して受付けられた音声入力に基づいて、前記頭部装着型ディスプレイ装置に表示させる前記作業指示画面を他の1つに切替える、作業指示装置。 The work instruction device according to claim 1 or 2,
The instruction receiving unit includes a voice input receiving unit that receives voice,
The said control unit is a work instruction apparatus which switches the said work instruction screen displayed on the said head mounted display apparatus to another one based on the audio | voice input received via the audio | voice input reception part.
前記記憶部に記憶される複数の作業指示画面の少なくとも1つは動画データを含み、
前記制御ユニットは、前記複数の作業指示画面の少なくとも1つとして前記動画データに基づく動画を表示する、作業指示装置。 The work instruction device according to any one of claims 1 to 3,
At least one of the plurality of work instruction screens stored in the storage unit includes moving image data,
The control unit displays a moving image based on the moving image data as at least one of the plurality of work instruction screens.
前記制御ユニットは、前記複数の作業指示画面の表示回数又は累積表示時間の少なくとも一方を、表示履歴として前記記憶部に記憶させる、作業指示装置。 The work instruction device according to any one of claims 1 to 4, wherein
The said control unit is a work instruction | indication apparatus which memorize | stores in the said memory | storage part as display history at least one of the display frequency of these work instruction | indication screens, or accumulation display time.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016204834A JP2018067119A (en) | 2016-10-19 | 2016-10-19 | Task instruction device |
PCT/JP2017/035798 WO2018074206A1 (en) | 2016-10-19 | 2017-10-02 | Operation instruction device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016204834A JP2018067119A (en) | 2016-10-19 | 2016-10-19 | Task instruction device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2018067119A true JP2018067119A (en) | 2018-04-26 |
Family
ID=62019287
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016204834A Pending JP2018067119A (en) | 2016-10-19 | 2016-10-19 | Task instruction device |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2018067119A (en) |
WO (1) | WO2018074206A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020067788A (en) * | 2018-10-24 | 2020-04-30 | パナソニックIpマネジメント株式会社 | Operation inputting method, operation inputting system and operation terminal |
WO2023176030A1 (en) * | 2022-03-18 | 2023-09-21 | 株式会社島津製作所 | Error reporting system and control device |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001060109A (en) * | 1999-08-20 | 2001-03-06 | Shimadzu Corp | Maintenance system |
JP3735086B2 (en) * | 2002-06-20 | 2006-01-11 | ウエストユニティス株式会社 | Work guidance system |
JP5193988B2 (en) * | 2009-12-03 | 2013-05-08 | 東芝テック株式会社 | Cooking assistance terminal and program |
-
2016
- 2016-10-19 JP JP2016204834A patent/JP2018067119A/en active Pending
-
2017
- 2017-10-02 WO PCT/JP2017/035798 patent/WO2018074206A1/en active Application Filing
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020067788A (en) * | 2018-10-24 | 2020-04-30 | パナソニックIpマネジメント株式会社 | Operation inputting method, operation inputting system and operation terminal |
JP7203334B2 (en) | 2018-10-24 | 2023-01-13 | パナソニックIpマネジメント株式会社 | Operation input method, operation input system and operation terminal |
WO2023176030A1 (en) * | 2022-03-18 | 2023-09-21 | 株式会社島津製作所 | Error reporting system and control device |
Also Published As
Publication number | Publication date |
---|---|
WO2018074206A1 (en) | 2018-04-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10817240B2 (en) | Multi-screen display method and display device | |
US20170243580A1 (en) | Speech recognition system | |
KR101596751B1 (en) | Method and apparatus for displaying blind spot customized by driver | |
US8831828B2 (en) | In-vehicle information system, in-vehicle apparatus and information terminal | |
US9881605B2 (en) | In-vehicle control apparatus and in-vehicle control method | |
KR20200045660A (en) | Foldable electronic device for controlling user interface and operating method thereof | |
KR102657519B1 (en) | Electronic device for providing graphic data based on voice and operating method thereof | |
US20130250141A1 (en) | Terminal device, image displaying method and image displaying program executed by terminal device | |
US20190056813A1 (en) | Display linking system | |
WO2018074206A1 (en) | Operation instruction device | |
US20170199543A1 (en) | Glass-type terminal and method of controling the same | |
KR20180048125A (en) | Display apparatus and method for controlling a display apparatus | |
JPWO2018158812A1 (en) | Inspection support device, inspection support method and program | |
JP6106402B2 (en) | In-vehicle device | |
CN104417706A (en) | Safety apparatus of electric bicycle and safety driving method thereof | |
US8706492B2 (en) | Voice recognition terminal | |
JPWO2020012955A1 (en) | Information processing equipment, information processing methods, and programs | |
JP6369758B2 (en) | Wire harness manufacturing method and manufacturing apparatus | |
JP6459684B2 (en) | Information output device, information output method, and program | |
CN110603572B (en) | Elevator design presentation device, elevator design presentation method, and storage medium | |
JP2019200125A (en) | Route guidance control device and route guidance control method | |
CN112506272A (en) | Data processing method, device and equipment of split head-mounted equipment | |
CN111221482B (en) | Interface layout adjusting method based on command console | |
JP2011248733A (en) | Electronic apparatus | |
JP6509468B1 (en) | Programmable display system and programmable display |