JP2021033962A - Production navigation device, production navigation method, and program - Google Patents

Production navigation device, production navigation method, and program Download PDF

Info

Publication number
JP2021033962A
JP2021033962A JP2019157278A JP2019157278A JP2021033962A JP 2021033962 A JP2021033962 A JP 2021033962A JP 2019157278 A JP2019157278 A JP 2019157278A JP 2019157278 A JP2019157278 A JP 2019157278A JP 2021033962 A JP2021033962 A JP 2021033962A
Authority
JP
Japan
Prior art keywords
work
information
shelf
scheduled
worker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019157278A
Other languages
Japanese (ja)
Other versions
JP7358848B2 (en
Inventor
博一 貞富
Hiroichi Sadatomi
博一 貞富
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2019157278A priority Critical patent/JP7358848B2/en
Publication of JP2021033962A publication Critical patent/JP2021033962A/en
Application granted granted Critical
Publication of JP7358848B2 publication Critical patent/JP7358848B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • General Factory Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

To enable a worker to easily recognize need to move between work areas when the worker should move between the work areas.SOLUTION: A production navigation device is provided that comprises: an acquisition unit acquiring planned work information indicating planned work to be carried out by a worker in a first work area; a determination unit determining whether or not the planned work information matches past-recorded work information indicating the work carried out in the first work area by the worker; and a presentation control unit controlling a presentation unit so that information for prompting movement to a second work area is presented when the past-recorded work information and the planned work information match each other and a plan is registered, the plan indicating that work is carried in the second work area by the worker subsequent to the work indicated by the planned work information.SELECTED DRAWING: Figure 1

Description

本発明は、生産ナビゲーション装置、生産ナビゲーション方法及びプログラムに関する。 The present invention relates to a production navigation device, a production navigation method and a program.

近年、多くの工場においては多品種少量生産が行われている。多品種少量生産を行う工場では、1人の作業者が、部品倉庫に格納された多様な部品の中から生産対象の製品に応じた部品を採取し、製品を組み立てる場合が多い。そのため、作業者による誤作業の防止や組立作業の効率化のための技術が求められている。 In recent years, many factories have been producing a wide variety of products in small quantities. In a factory that produces a wide variety of products in small quantities, one worker often collects parts according to the product to be produced from various parts stored in the parts warehouse and assembles the product. Therefore, there is a demand for technology for preventing erroneous work by workers and improving the efficiency of assembly work.

その例として、下記特許文献1には、複数の棚の中から作業内容に応じてピッキングを行うべき棚を決定し、決定した棚に作業者を誘導する技術が開示されている。かかる技術では、作業者が誤った間口から物品を取り出した場合などに、バイブレーションによる刺激として注意を作業者に対して与えることができる。 As an example, Patent Document 1 below discloses a technique of determining a shelf to be picked from a plurality of shelves according to a work content and guiding a worker to the determined shelf. In such a technique, when an article is taken out from an erroneous frontage by an operator, attention can be given to the operator as a stimulus by vibration.

また、下記特許文献2には、作業者が指示された作業と異なる作業を行うと、作業者に対して警告を行う技術が開示されている。さらに、下記特許文献3には、板状部材が設けられた棚を部品倉庫として用い、組み立て手順や採取すべき部品を指示する情報をプロジェクタによって板状部材に投影する技術が開示されている。 Further, Patent Document 2 below discloses a technique for giving a warning to an operator when the operator performs an operation different from the instructed operation. Further, Patent Document 3 below discloses a technique in which a shelf provided with a plate-shaped member is used as a parts warehouse, and information indicating an assembly procedure and parts to be collected is projected onto the plate-shaped member by a projector.

特開2014−122075号公報Japanese Unexamined Patent Publication No. 2014-12207 特開2013−20433号公報Japanese Unexamined Patent Publication No. 2013-20433 特開2018−45669号公報Japanese Unexamined Patent Publication No. 2018-45669

しかし、一つの作業エリアに置くことができる部品には限りがある。そのため、作業者は、一つの作業エリアから他の作業エリアに移動する必要が生じる場合がある。 However, the parts that can be placed in one work area are limited. Therefore, the worker may need to move from one work area to another.

そこで、本発明は上記課題に鑑みてなされたものであり、本発明の目的とするところは、作業者が作業エリア間を移動すべき場合に、作業エリア間を移動すべきことを容易に把握することが可能な、新規且つ改良された仕組みを提供することにある。 Therefore, the present invention has been made in view of the above problems, and an object of the present invention is to easily understand that when a worker should move between work areas, he / she should move between work areas. The purpose is to provide a new and improved mechanism that can be done.

上記課題を解決するために、本発明のある観点によれば、第1の作業エリアにおいて作業者によって実施される予定の作業を示す予定作業情報を取得する取得部と、前記予定作業情報と前記作業者によって前記第1の作業エリアにおいて実施された作業を示す実績作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアへの移動を促すための情報が提示されるように提示部を制御する提示制御部と、
を備える、生産ナビゲーション装置が提供される。
In order to solve the above problems, according to a certain viewpoint of the present invention, an acquisition unit that acquires scheduled work information indicating a scheduled work to be performed by a worker in a first work area, the scheduled work information, and the above. When the actual work information indicating the work performed by the worker in the first work area matches, and the work is performed by the worker in the second work area following the work indicated by the scheduled work information. When the schedule to be set is registered, the presentation control unit that controls the presentation unit so that the information for prompting the movement to the second work area is presented, and the presentation control unit.
A production navigation device is provided.

前記生産ナビゲーション装置は、前記実績作業情報と前記予定作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて前記第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアに対応する生産ナビゲーションシステムに作業完了情報が送信されるように通信部を制御する通信制御部を備えてもよい。 In the production navigation device, when the actual work information and the scheduled work information match, and the work is scheduled to be performed by the worker in the second work area following the work indicated by the scheduled work information. When is registered, a communication control unit that controls the communication unit so that the work completion information is transmitted to the production navigation system corresponding to the second work area may be provided.

前記提示制御部は、第3の作業エリアに対応する生産ナビゲーションシステムから作業完了情報が受信された場合、前記予定作業情報が示す作業のナビゲーションを開始してもよい。 When the work completion information is received from the production navigation system corresponding to the third work area, the presentation control unit may start the navigation of the work indicated by the scheduled work information.

前記作業完了情報は、前記予定作業情報が示す作業によって組み立てられる製品の識別情報であってもよい。 The work completion information may be identification information of a product assembled by the work indicated by the scheduled work information.

前記提示制御部は、作業開始情報が読み取られた場合、前記第1の作業エリアが最初に作業を行うべき作業エリアであるかが判定され、前記第1の作業エリアが最初に作業を行うべき作業エリアではないと判定された場合、最初に作業を行うべき作業エリアへの移動を促すための情報が提示されるように前記提示部を制御してもよい。 When the work start information is read, the presentation control unit determines whether the first work area is the work area where the work should be performed first, and the first work area should perform the work first. If it is determined that the area is not the work area, the presentation unit may be controlled so that information for prompting the movement to the work area where the work should be performed first is presented.

前記提示制御部は、前記第1の作業エリアが最初に作業を行うべき作業エリアであると判定された場合、前記予定作業情報が示す作業のナビゲーションを開始してもよい。 When it is determined that the first work area is the work area where the work should be performed first, the presentation control unit may start the navigation of the work indicated by the scheduled work information.

前記作業開始情報は、前記予定作業情報が示す作業によって組み立てられる製品の識別情報であってもよい。 The work start information may be identification information of a product assembled by the work indicated by the scheduled work information.

また、上記課題を解決するために、本発明の別の観点によれば、第1の作業エリアにおいて作業者によって実施される予定の作業を示す予定作業情報を取得することと、前記予定作業情報と前記作業者によって前記第1の作業エリアにおいて実施された作業を示す実績作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアへの移動を促すための情報が提示されるように提示部を制御することと、を備える、生産ナビゲーション方法が提供される。 Further, in order to solve the above-mentioned problems, according to another viewpoint of the present invention, it is possible to acquire scheduled work information indicating the scheduled work to be performed by the worker in the first work area, and to obtain the scheduled work information. When the actual work information indicating the work performed by the worker in the first work area matches, and the work is performed by the worker in the second work area following the work indicated by the scheduled work information. Is provided, a production navigation method comprising controlling the presentation unit so that information for prompting the movement to the second work area is presented when the schedule to be implemented is registered. ..

また、上記課題を解決するために、本発明の別の観点によれば、コンピュータを、第1の作業エリアにおいて作業者によって実施される予定の作業を示す予定作業情報を取得する取得部と、前記予定作業情報と前記作業者によって前記第1の作業エリアにおいて実施された作業を示す実績作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアへの移動を促すための情報が提示されるように提示部を制御する提示制御部と、を備える生産ナビゲーション装置として機能させるためのプログラムが提供される。 Further, in order to solve the above problems, according to another viewpoint of the present invention, a computer is used as an acquisition unit for acquiring scheduled work information indicating a work scheduled to be performed by a worker in the first work area. When the scheduled work information and the actual work information indicating the work performed by the worker in the first work area match, and the work indicated by the scheduled work information is followed by the work in the second work area. Production navigation including a presentation control unit that controls the presentation unit so that information for prompting the movement to the second work area is presented when the work is scheduled to be performed by the worker. A program for functioning as a device is provided.

以上説明したように本発明によれば、作業者が作業エリア間を移動すべきタイミングを把握することが可能な仕組みが提供される。 As described above, according to the present invention, there is provided a mechanism capable of grasping the timing when a worker should move between work areas.

本発明の一実施形態に係るシステムの概略的な構成の一例を示す図である。It is a figure which shows an example of the schematic structure of the system which concerns on one Embodiment of this invention. 本実施形態に係る生産ナビゲーションシステムの論理的な構成の一例を示す図である。It is a figure which shows an example of the logical structure of the production navigation system which concerns on this embodiment. 本実施形態に係る生産ナビゲーションシステムの物理的な構成の一例を示す図である。It is a figure which shows an example of the physical structure of the production navigation system which concerns on this embodiment. 本実施形態に係る表示機構による情報表示の様子を概略的に示す図である。It is a figure which shows the state of the information display by the display mechanism which concerns on this embodiment schematicly. 本実施形態に係る生産ナビゲーションシステムの詳細な構成の一例を示す図である。It is a figure which shows an example of the detailed structure of the production navigation system which concerns on this embodiment. 本実施形態に係る生産ナビゲーションシステムを前方から見たときの構成の一例を示す図である。It is a figure which shows an example of the structure when the production navigation system which concerns on this embodiment is seen from the front. 製品番号、予定作業情報及びガイダンス情報の例を示す図である。It is a figure which shows the example of a product number, a scheduled work information and guidance information. 生産ナビゲーションシステムの制御装置によって取得される前後作業棚情報の例を示す図である。It is a figure which shows the example of the front-rear work shelf information acquired by the control device of a production navigation system. 生産ナビゲーションシステムの制御装置によって取得される前後作業棚情報の例を示す図である。It is a figure which shows the example of the front-rear work shelf information acquired by the control device of a production navigation system. 作業開始前のガイダンス情報の例を示す図である。It is a figure which shows the example of the guidance information before the start of work. 本実施形態に係る採取指示情報の表示の一例を説明するための図である。It is a figure for demonstrating an example of the display of the collection instruction information which concerns on this embodiment. 本実施形態に係る警告情報の表示の一例を説明するための図である。It is a figure for demonstrating an example of display of warning information which concerns on this Embodiment. 本実施形態に係る警告情報の表示の一例を説明するための図である。It is a figure for demonstrating an example of display of warning information which concerns on this Embodiment. 作業完了後のガイダンス情報の例を示す図である。It is a figure which shows the example of the guidance information after the work completion. 本実施形態に係る生産ナビゲーションシステムによる表示処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the display processing by the production navigation system which concerns on this embodiment. 生産ナビゲーションシステムのハードウェア構成を示したブロック図である。It is a block diagram which showed the hardware configuration of a production navigation system.

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。 Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the present specification and the drawings, components having substantially the same functional configuration are designated by the same reference numerals, so that duplicate description will be omitted.

<<1.構成例>>
<1.1.全体構成例>
図1は、本発明の一実施形態に係るシステム1の概略的な構成の一例を示す図である。システム1は、サーバ90及び複数の生産ナビゲーションシステム10を含む。システム1は、製品を生産する(即ち、組み立てる)工場において実装される。
<< 1. Configuration example >>
<1.1. Overall configuration example>
FIG. 1 is a diagram showing an example of a schematic configuration of a system 1 according to an embodiment of the present invention. System 1 includes a server 90 and a plurality of production navigation systems 10. System 1 is implemented in the factory that produces (ie, assembles) the product.

生産ナビゲーションシステム10は、工場で働く作業者に対し様々な情報を提示して、製品の組立作業を支援するシステムである。図1に示すように、システム1は、複数の生産ナビゲーションシステム10(図1に示した例では、生産ナビゲーションシステム10−1及び生産ナビゲーションシステム10−2)を含む。生産ナビゲーションシステム10の数は、2つに限定されない。以下では、生産ナビゲーションシステム10−1及び生産ナビゲーションシステム10−2を特に区別する必要がない場合に、単に「生産ナビゲーションシステム10」と称する場合がある。生産ナビゲーションシステム10の構成については、後に詳しく説明する。 The production navigation system 10 is a system that supports the assembly work of products by presenting various information to workers working in the factory. As shown in FIG. 1, the system 1 includes a plurality of production navigation systems 10 (in the example shown in FIG. 1, production navigation system 10-1 and production navigation system 10-2). The number of production navigation systems 10 is not limited to two. In the following, when it is not necessary to distinguish between the production navigation system 10-1 and the production navigation system 10-2, it may be simply referred to as "production navigation system 10". The configuration of the production navigation system 10 will be described in detail later.

作業者(本実施形態では、主に組立作業者)は、生産ナビゲーションシステム10による支援を受けて、単位期間において1種類の製品を生産する(即ち、組み立てる)。 A worker (mainly an assembly worker in the present embodiment) produces (that is, assembles) one type of product in a unit period with the support of the production navigation system 10.

サーバ90は、システム1に含まれる生産ナビゲーションシステム10を管理する情報処理装置である。サーバ90は、管理下の生産ナビゲーションシステム10と有線又は無線のネットワーク80を介して接続され、互いに情報を送受信する。 The server 90 is an information processing device that manages the production navigation system 10 included in the system 1. The server 90 is connected to the production navigation system 10 under control via a wired or wireless network 80 to send and receive information to and from each other.

<1.2.論理的な構成例>
図2は、本実施形態に係る生産ナビゲーションシステム10の論理的な構成の一例を示す図である。図2に示すように、本実施形態に係る生産ナビゲーションシステム10は、通信部110、表示部120、センサ部130、入力部140、記憶部150、及び制御部160を含む。
<1.2. Logical configuration example>
FIG. 2 is a diagram showing an example of a logical configuration of the production navigation system 10 according to the present embodiment. As shown in FIG. 2, the production navigation system 10 according to the present embodiment includes a communication unit 110, a display unit 120, a sensor unit 130, an input unit 140, a storage unit 150, and a control unit 160.

(通信部110)
通信部110は、他の装置との間で情報の送受信を行う機能を有する。通信部110は、LAN(Local Area Network)、無線LAN、又はWi−Fi(登録商標)等の有線/無線の任意の通信規格に準拠した通信を行う。例えば、通信部110は、サーバ90との間で情報を送受信する。
(Communication unit 110)
The communication unit 110 has a function of transmitting and receiving information to and from other devices. The communication unit 110 performs communication conforming to any wired / wireless communication standard such as LAN (Local Area Network), wireless LAN, or Wi-Fi (registered trademark). For example, the communication unit 110 transmits / receives information to / from the server 90.

(表示部120)
表示部120は、情報の表示を行う機能を有する。表示部120は、例えば作業者に対する情報を表示する。
(Display unit 120)
The display unit 120 has a function of displaying information. The display unit 120 displays information for, for example, an operator.

(センサ部130)
センサ部130は、作業者による作業に関する情報をセンシングする機能を有する。センシングの対象は、例えば、作業者全体、作業者の特定部位(例えば、手)、部品、又は部品倉庫の少なくともいずれかである。センサ部130は、画像、音、深度情報、慣性情報、又は生体情報等の任意の情報をセンシングする。センサ部130は、センシング結果を示す情報を制御部160に出力する。
(Sensor unit 130)
The sensor unit 130 has a function of sensing information about work by the operator. The target of sensing is, for example, the entire worker, a specific part of the worker (for example, a hand), a part, or at least one of a parts warehouse. The sensor unit 130 senses arbitrary information such as an image, sound, depth information, inertial information, or biological information. The sensor unit 130 outputs information indicating the sensing result to the control unit 160.

(入力部140)
入力部140は、情報の入力を受け付ける機能を有する。入力部140は、作業者からの情報の入力を受け付ける。
(Input unit 140)
The input unit 140 has a function of accepting input of information. The input unit 140 accepts the input of information from the operator.

(記憶部150)
記憶部150は、生産ナビゲーションシステム10の動作のための各種情報を記憶する機能を有する。例えば、記憶部150は、入力部140により入力された情報、並びに部品載置部21(図3)ごとの載置された部品の識別情報及び数等を記憶する。
(Memory unit 150)
The storage unit 150 has a function of storing various information for the operation of the production navigation system 10. For example, the storage unit 150 stores the information input by the input unit 140, the identification information and the number of the mounted parts for each component mounting unit 21 (FIG. 3), and the like.

(制御部160)
制御部160は、生産ナビゲーションシステム10の動作全般を制御する機能を有する。制御部160は、取得部161、判定部163、提示制御部165、通信制御部167、及び記憶制御部169を含む。例えば、提示制御部165は、表示部120による情報の表示を制御する機能を有する。記憶制御部169は、記憶部150への情報の記憶及びその読み出しを制御する機能を有する。これらの構成要素の詳細な動作については、後に詳しく説明する。
(Control unit 160)
The control unit 160 has a function of controlling the overall operation of the production navigation system 10. The control unit 160 includes an acquisition unit 161, a determination unit 163, a presentation control unit 165, a communication control unit 167, and a memory control unit 169. For example, the presentation control unit 165 has a function of controlling the display of information by the display unit 120. The storage control unit 169 has a function of controlling the storage and reading of information in the storage unit 150. The detailed operation of these components will be described in detail later.

<1.3.物理的な構成例>
以下、図3〜図9を参照しながら、本実施形態に係る生産ナビゲーションシステム10の物理的な構成の一例を説明する。
<1.3. Physical configuration example>
Hereinafter, an example of the physical configuration of the production navigation system 10 according to the present embodiment will be described with reference to FIGS. 3 to 9.

図3は、本実施形態に係る生産ナビゲーションシステム10の物理的な構成の一例を示す図である。図3に示すように、生産ナビゲーションシステム10は、制御装置11、棚12、作業台13、撮像部14、表示機構15、コード入力部19、及びモーションキャプチャカメラ20を備える。図3に示すように、本明細書及び図面では、棚12から作業台13への方向を前方向とし、その逆方向を後方向とし、作業台13から棚12を見たときの上下左右の方向を、それぞれ上方向、下方向、左方向、及び右方向とする。 FIG. 3 is a diagram showing an example of the physical configuration of the production navigation system 10 according to the present embodiment. As shown in FIG. 3, the production navigation system 10 includes a control device 11, a shelf 12, a workbench 13, an imaging unit 14, a display mechanism 15, a code input unit 19, and a motion capture camera 20. As shown in FIG. 3, in the present specification and the drawings, the direction from the shelf 12 to the workbench 13 is the forward direction, and the opposite direction is the rearward direction. The directions are up, down, left, and right, respectively.

図4は、本実施形態に係る表示機構15による情報表示の様子を概略的に示す図である。図4では、生産ナビゲーションシステム10を左方向から見たときの様子が図示されている。図5は、本実施形態に係る生産ナビゲーションシステム10の詳細な構成の一例を示す図である。図5では、棚12の一部を左方向から見たときの詳細な構成が示されている。図6は、本実施形態に係る生産ナビゲーションシステム10を前方から見たときの構成の一例を示す図である。 FIG. 4 is a diagram schematically showing a state of information display by the display mechanism 15 according to the present embodiment. FIG. 4 shows a state when the production navigation system 10 is viewed from the left. FIG. 5 is a diagram showing an example of a detailed configuration of the production navigation system 10 according to the present embodiment. FIG. 5 shows a detailed configuration when a part of the shelf 12 is viewed from the left. FIG. 6 is a diagram showing an example of a configuration when the production navigation system 10 according to the present embodiment is viewed from the front.

図4に示すように、棚12の前方には、組立作業を行うための組立作業空間SP1が設けられている。組立作業者は、組立作業空間SP1に立ち、棚12から部品を採取しながら作業台13上で組立作業を行う。 As shown in FIG. 4, an assembly work space SP1 for performing assembly work is provided in front of the shelf 12. The assembly worker stands in the assembly work space SP1 and performs the assembly work on the workbench 13 while collecting parts from the shelf 12.

(制御装置11)
制御装置11は、生産ナビゲーションシステム10の動作全般を制御する情報処理装置(ナビゲーション装置)である。制御装置11は、図2を参照しながら説明した、通信部110、記憶部150及び制御部160に相当する。
(Control device 11)
The control device 11 is an information processing device (navigation device) that controls the overall operation of the production navigation system 10. The control device 11 corresponds to the communication unit 110, the storage unit 150, and the control unit 160 described with reference to FIG.

(棚12)
棚12は、部品倉庫として機能する。棚12には、部品が載置される複数の部品載置部21が設けられており、図3〜図6に示した例では、縦方向に4段、横方向に6列、合計24個の部品載置部21が設けられている。これら複数の部品載置部21は、例えばトレイとして構成され、隣接するトレイの間は各々のトレイの側壁により区切られる。さらに、棚12には、複数の仕切板22が設けられている。それぞれの仕切板22は、略鉛直方向に配置されており、個々の部品載置部21を区切っている。図5に示すように、仕切板22は、先端が棚12の前面から前方に突出するように配置されている。他方、仕切板22は、後端が棚12の後面から後方に突出するように配置されていてもよい。各部品載置部21には、トレイが載置されており、そのトレイには単一種類の部品(例えば、ネジやブラケット、ローラ等)が収納されている。なお、部品載置部21には、例えば、電動ドライバ等の組立ツールが載置されてもよい。
(Shelves 12)
The shelf 12 functions as a parts warehouse. The shelf 12 is provided with a plurality of component mounting portions 21 on which components are mounted. In the examples shown in FIGS. 3 to 6, there are a total of 24 components, 4 steps in the vertical direction and 6 rows in the horizontal direction. The component mounting portion 21 of the above is provided. The plurality of component mounting portions 21 are configured as, for example, trays, and adjacent trays are separated by a side wall of each tray. Further, the shelf 12 is provided with a plurality of partition plates 22. Each partition plate 22 is arranged in a substantially vertical direction, and separates individual component mounting portions 21. As shown in FIG. 5, the partition plate 22 is arranged so that the tip of the partition plate 22 projects forward from the front surface of the shelf 12. On the other hand, the partition plate 22 may be arranged so that the rear end projects rearward from the rear surface of the shelf 12. A tray is mounted on each component mounting section 21, and a single type of component (for example, screws, brackets, rollers, etc.) is stored in the tray. An assembly tool such as an electric screwdriver may be mounted on the component mounting portion 21.

図5に示す、各々の部品載置部21の前方の開口51(51A〜51D)を、以下では採取口51も称する。例えば、組立作業者は、採取口51から部品載置部21に手を入れて、部品載置部21に載置された部品を採取する。なお、採取口51は、典型的には、上を第2の板状部材34により、下を部品載置部21により区切られた空間である。 The opening 51 (51A to 51D) in front of each component mounting portion 21 shown in FIG. 5 is hereinafter also referred to as a sampling port 51. For example, the assembly worker puts his / her hand into the component mounting section 21 from the sampling port 51 and collects the components mounted on the component mounting section 21. The sampling port 51 is typically a space whose upper part is separated by a second plate-shaped member 34 and whose lower part is separated by a component mounting portion 21.

図5に示すように、各部品載置部21は、後方部分よりも前方部分が下がるように、傾斜して設けられている。最下段の部品載置部21の下方の空間は、棚12の前面部分からアクセスし難いデッドスペースになっており、図3及び図4に示すように、そのスペースに制御装置11が配置されている。これにより、棚12内の空間の効率的な活用が可能となる。また、部品載置部21には、複数のトレイが載置されてもよい。これにより、生産ナビゲーションシステム10は、空になった前方のトレイを取り除いて、空になったトレイの後方に載置されていた新しいトレイを棚12の前面付近の位置に配置させることができる。 As shown in FIG. 5, each component mounting portion 21 is provided so as to be inclined so that the front portion is lowered from the rear portion. The space below the lowermost component mounting portion 21 is a dead space that is difficult to access from the front portion of the shelf 12, and as shown in FIGS. 3 and 4, the control device 11 is arranged in that space. There is. This makes it possible to efficiently utilize the space in the shelf 12. Further, a plurality of trays may be mounted on the component mounting portion 21. As a result, the production navigation system 10 can remove the empty front tray and place a new tray placed behind the empty tray at a position near the front surface of the shelf 12.

なお、図6に示すように、各々の部品載置部21は、符号「21」の後に付されたアルファベット2文字により区別され得る。アルファベット1文字目は、部品載置部21が配置された段(上から下にかけて1段目はa、2段目はb、3段目はc、4段目はd)を示す。アルファベット2文字目は、部品載置部21が配置された列(左から右にかけて1列目はa、2列目はb、3列目はc、4列目はd、5列目はe、6列目はf)を示す。例えば、上から1段目、右から2列目の部品載置部21は、部品載置部21abである。 As shown in FIG. 6, each component mounting portion 21 can be distinguished by two letters of the alphabet added after the reference numeral “21”. The first character of the alphabet indicates a stage in which the component mounting portion 21 is arranged (from top to bottom, the first stage is a, the second stage is b, the third stage is c, and the fourth stage is d). The second letter of the alphabet is the row in which the component mounting unit 21 is arranged (from left to right, the first row is a, the second row is b, the third row is c, the fourth row is d, and the fifth row is e. , The sixth column shows f). For example, the component mounting section 21 in the first row from the top and the second row from the right is the component mounting section 21ab.

(作業台13)
作業台13は、組立作業者が部品組立等に利用する台である。作業台13は、平坦な台面(上面)を備えている。その台面は、棚12の全幅に亘って、水平方向に延在するように配置されている。また、作業台13は、プロジェクタ31から投影された投影画像が結像される投影可能領域としても機能し得る。図6に示した例では、作業台13に、組み立ての見本を撮影した動画(組立動画)が表示される領域である組立動画表示領域37、注意喚起が表示される領域である注意喚起表示領域38、及び、作業指示書が表示される領域である作業指示書表示領域39が存在している。しかし、組立動画表示領域37、注意喚起表示領域38及び作業指示書表示領域39は、作業台13とは異なる場所に存在してもよい。
(Workbench 13)
The workbench 13 is a table used by assembly workers for parts assembly and the like. The workbench 13 has a flat table surface (upper surface). The pedestal surface is arranged so as to extend in the horizontal direction over the entire width of the shelf 12. The workbench 13 can also function as a projectable region in which the projected image projected from the projector 31 is imaged. In the example shown in FIG. 6, the workbench 13 has an assembly video display area 37, which is an area in which a moving image (assembly movie) of an assembly sample is displayed, and a caution display area, which is an area in which a warning is displayed. There are 38 and a work instruction display area 39, which is an area where work instructions are displayed. However, the assembly moving image display area 37, the caution display area 38, and the work instruction manual display area 39 may exist in a place different from the workbench 13.

(撮像部14)
撮像部14は、作業者を撮像し、作業者を含む撮像画像を制御装置11に出力する。撮像部14は、例えばUSB(Universal Serial Bus)カメラであってもよい。撮像部14は、図2を参照しながら説明したセンサ部130に相当する。
(Imaging unit 14)
The image pickup unit 14 takes an image of the worker and outputs the captured image including the worker to the control device 11. The image pickup unit 14 may be, for example, a USB (Universal Serial Bus) camera. The imaging unit 14 corresponds to the sensor unit 130 described with reference to FIG.

撮像部14は、作業者(組立作業者)を撮像する。撮像部14は、ミラー32を支持する支持フレーム44によって、標準的な身長の作業者の頭の高さよりも上の位置(例えば、最上段の部品載置部21よりも上方の位置)で、かつ、棚12の前面よりも前方の位置に配置される。これにより、生産ナビゲーションシステム10の前方に位置する組立作業者を含む撮像画像を撮像することができる。ここで、撮像部14は、撮像方向を棚12の方向に向けて配置されており、棚12に設けられた全ての部品載置部21の採取口51を撮像範囲に含むよう配置される。これにより、部品を採取するために、又は一度採取した部品を元に戻すために、組立作業者が採取口51から部品載置部21に入れた手を含む、棚12の前面の撮像画像を撮像することができる。 The image pickup unit 14 takes an image of a worker (assembly worker). The image pickup unit 14 is provided with a support frame 44 that supports the mirror 32 at a position above the head height of a worker of standard height (for example, a position above the uppermost component mounting unit 21). Moreover, it is arranged at a position in front of the front surface of the shelf 12. As a result, it is possible to capture an captured image including an assembly worker located in front of the production navigation system 10. Here, the imaging unit 14 is arranged so that the imaging direction is directed toward the shelf 12, and the sampling ports 51 of all the component mounting units 21 provided on the shelf 12 are included in the imaging range. As a result, the captured image of the front surface of the shelf 12 including the hand that the assembly worker puts into the part mounting portion 21 from the collection port 51 in order to collect the parts or to return the once collected parts is obtained. It can be imaged.

(表示機構15)
表示機構15は、作業者に対し各種情報を表示するための機構である。表示機構15は、図2を参照しながら説明した表示部120に相当する。本実施形態では、表示機構15は、プロジェクタ31、ミラー32、第1の板状部材33、及び第2の板状部材34を含む。表示機構15は、いわゆるプロジェクションマッピング技術を用いて、第1の板状部材33及び第2の板状部材34に情報(詳しくは、投影画像)を投影する。
(Display mechanism 15)
The display mechanism 15 is a mechanism for displaying various information to the operator. The display mechanism 15 corresponds to the display unit 120 described with reference to FIG. In the present embodiment, the display mechanism 15 includes a projector 31, a mirror 32, a first plate-shaped member 33, and a second plate-shaped member 34. The display mechanism 15 projects information (specifically, a projected image) onto the first plate-shaped member 33 and the second plate-shaped member 34 by using a so-called projection mapping technique.

・プロジェクタ31
図3及び図4に示すように、プロジェクタ31は、棚12の上に配置されている。プロジェクタ31は、ミラー32に向けて投影光を照射する。プロジェクタ31から照射された投影光は、ミラー32に反射されて、第1の板状部材33及び第2の板状部材34に到達する。即ち、プロジェクタ31は、ミラー32を介して第1の板状部材33及び第2の板状部材34に情報を投影する。ミラー32は、作業台13の上面又は床面等の他の領域にも情報を投影してもよい。なお、プロジェクタ31は、棚12の上に限らず、第1の板状部材33及び第2の板状部材34、作業台13の上面又は床面等の他の領域に直接投影光が到達する角度の位置(図示しない天井や壁)に配置されてもよい。その場合、プロジェクタ31は、複数配置されてもよく、第1の板状部材33及び第2の板状部材34に直接投影光を投影するプロジェクタと、作業台13の上面又は床面等の他の領域に直接投影光を投影するプロジェクタとに分けて配置されてもよい。
Projector 31
As shown in FIGS. 3 and 4, the projector 31 is arranged on the shelf 12. The projector 31 irradiates the projected light toward the mirror 32. The projected light emitted from the projector 31 is reflected by the mirror 32 and reaches the first plate-shaped member 33 and the second plate-shaped member 34. That is, the projector 31 projects information on the first plate-shaped member 33 and the second plate-shaped member 34 via the mirror 32. The mirror 32 may also project information on other areas such as the top surface of the workbench 13 or the floor surface. The projector 31 is not limited to the top of the shelf 12, but the projected light directly reaches other regions such as the first plate-shaped member 33, the second plate-shaped member 34, the upper surface of the workbench 13 or the floor surface. It may be arranged at an angular position (ceiling or wall (not shown)). In that case, a plurality of projectors 31 may be arranged, and the projector that directly projects the projected light onto the first plate-shaped member 33 and the second plate-shaped member 34, the upper surface or the floor surface of the work table 13, and the like. It may be arranged separately from the projector that directly projects the projected light onto the area of.

・ミラー32
図4に示すように、ミラー32は、支持フレーム44によって、標準的な身長の作業者の頭の高さよりも上の位置(例えば、最上段の部品載置部21よりも上方の位置)で、且つ、棚12の前面よりも前方の位置に配置されている。具体的には、ミラー32は、作業台13の上方でかつ棚12の斜め上方向に、反射面がプロジェクタ31並びに第1の板状部材33に対向するように配置されている。そして、図4に示すように、ミラー32は、プロジェクタ31から照射された投影光を、第1の板状部材33及び第2の板状部材34に向けて反射する。
Mirror 32
As shown in FIG. 4, the mirror 32 is provided by the support frame 44 at a position above the head height of a worker of standard height (for example, above the uppermost component mounting portion 21). Moreover, it is arranged at a position in front of the front surface of the shelf 12. Specifically, the mirror 32 is arranged above the workbench 13 and diagonally upward of the shelf 12 so that the reflecting surface faces the projector 31 and the first plate-shaped member 33. Then, as shown in FIG. 4, the mirror 32 reflects the projected light emitted from the projector 31 toward the first plate-shaped member 33 and the second plate-shaped member 34.

ミラー32は、反射角度が上下方向に変更できるように、支持機構によって回動可能に支持されており、任意の反射角度で固定設置され得る。 The mirror 32 is rotatably supported by a support mechanism so that the reflection angle can be changed in the vertical direction, and can be fixedly installed at an arbitrary reflection angle.

・第1の板状部材33
第1の板状部材33は、プロジェクタ31から投影された投影画像が結像される投影可能領域として機能する。第1の板状部材33は、棚12の全幅に亘って左右方向(横方向)に延在し、且つ上下方向(縦方向)の長さは第2の板状部材34と比較して長い。そのため、第1の板状部材33は、比較的広い面積を要する情報の提示に適している。図6に示した例では、第1の板状部材33に、作業者の識別情報(作業者ID)が表示される領域である作業者ID表示領域35、及び、組立作業者が組み立てるべき製品の識別情報(製品番号)が表示される領域である製品番号表示領域36が存在している。しかし、作業者ID表示領域35及び製品番号表示領域36は、第1の板状部材33とは異なる場所に存在してもよい。第1の板状部材33は、部品載置部21の上方及び下方のいずれか一方又は双方の位置に配置される。好ましくは、第1の板状部材33は、部品載置部21の上方(即ち、棚12の最上段)に配置されることが望ましい。これにより、作業者がどの部品載置部21に手を入れた場合であっても、投影光が作業者の手により遮られることがないので、投影された情報の視認性を常に高く維持することが可能となる。
-First plate-shaped member 33
The first plate-shaped member 33 functions as a projectable region on which the projected image projected from the projector 31 is formed. The first plate-shaped member 33 extends in the left-right direction (horizontal direction) over the entire width of the shelf 12, and the length in the vertical direction (vertical direction) is longer than that of the second plate-shaped member 34. .. Therefore, the first plate-shaped member 33 is suitable for presenting information that requires a relatively large area. In the example shown in FIG. 6, the worker ID display area 35, which is an area in which the worker's identification information (worker ID) is displayed, and the product to be assembled by the assembly worker are on the first plate-shaped member 33. There is a product number display area 36, which is an area in which the identification information (product number) of the above is displayed. However, the worker ID display area 35 and the product number display area 36 may exist in a place different from that of the first plate-shaped member 33. The first plate-shaped member 33 is arranged at one or both positions above and below the component mounting portion 21. Preferably, the first plate-shaped member 33 is arranged above the component mounting portion 21 (that is, the uppermost stage of the shelf 12). As a result, the projected light is not blocked by the operator's hand regardless of which component mounting portion 21 is touched by the operator, so that the visibility of the projected information is always maintained high. It becomes possible.

・第2の板状部材34
第2の板状部材34もまた、プロジェクタ31から投影された投影画像が結像される投影可能領域として機能する。第2の板状部材34は、棚12の全幅に亘って左右方向(横方向)に延在し、且上下方向(縦方向)の長さは第1の板状部材33と比較して短い。第2の板状部材34は、比較的狭い面積しか要さない情報の提示に適している。そのような情報の一例として、部品の採取を指示する指示情報(後述する採取指示情報)が挙げられる。例えば、第2の板状部材34のうち、作業者が部品を採取すべき部品載置部21付近の領域に採取指示情報が投影される。これにより、作業者は、部品を採取すべき部品載置部21を容易に認識することが可能となる。第2の板状部材34は、各々の部品載置部21の上方及び下方のいずれか一方又は双方の位置に配置される。好ましくは、第2の板状部材34は、各々の部品載置部21の上方にそれぞれ配置されることが望ましい。その結果、採取指示情報に従って部品載置部21に作業者が手を入れた際に、当該指示情報の投影光が作業者の手により遮られずに済むので、指示情報の視認性を維持することが可能となる。
-Second plate-shaped member 34
The second plate-shaped member 34 also functions as a projectable region in which the projected image projected from the projector 31 is imaged. The second plate-shaped member 34 extends in the left-right direction (horizontal direction) over the entire width of the shelf 12, and the length in the vertical direction (vertical direction) is shorter than that of the first plate-shaped member 33. .. The second plate-shaped member 34 is suitable for presenting information that requires only a relatively small area. As an example of such information, instruction information for instructing the collection of parts (collection instruction information described later) can be mentioned. For example, in the second plate-shaped member 34, the collection instruction information is projected on the area near the component mounting portion 21 on which the operator should collect the component. As a result, the operator can easily recognize the component mounting portion 21 from which the component should be collected. The second plate-shaped member 34 is arranged at one or both positions above and below each component mounting portion 21. Preferably, it is desirable that the second plate-shaped member 34 is arranged above each component mounting portion 21. As a result, when the operator puts his / her hand on the component mounting unit 21 according to the collection instruction information, the projected light of the instruction information is not blocked by the operator's hand, so that the visibility of the instruction information is maintained. It becomes possible.

図6に示すように、前方から棚12をみると、上から1段目〜3段目の部品載置部21の下部には、第2の板状部材34が配置される。他方、上から4段目の部品載置部21の下部には第2の板状部材34が配置されない。 As shown in FIG. 6, when the shelf 12 is viewed from the front, the second plate-shaped member 34 is arranged below the component mounting portions 21 in the first to third stages from the top. On the other hand, the second plate-shaped member 34 is not arranged below the component mounting portion 21 at the fourth stage from the top.

・第1の板状部材33及び第2の板状部材34の傾斜
図5に示すように、第1の板状部材33及び第2の板状部材34は、棚12の前面に斜めに傾斜して配置される。とりわけ、第1の板状部材33及び第2の板状部材34は、上端よりも下端の方が前方に位置するように、傾斜して配置される。そして、その傾斜は下方に配置されるものほど強い(即ち、水平に近づく)。これにより、第1の板状部材33及び第2の板状部材34と投影光との角度をより垂直に近づけることができ、より視認性のよい投影が可能となる。
-Inclination of the first plate-shaped member 33 and the second plate-shaped member 34 As shown in FIG. 5, the first plate-shaped member 33 and the second plate-shaped member 34 are inclined obliquely to the front surface of the shelf 12. And are placed. In particular, the first plate-shaped member 33 and the second plate-shaped member 34 are arranged so as to be inclined so that the lower end is located forward of the upper end. And the inclination is stronger (that is, closer to horizontal) as it is placed downward. As a result, the angle between the first plate-shaped member 33 and the second plate-shaped member 34 and the projected light can be made closer to the vertical, and the projection with better visibility becomes possible.

(コード入力部19)
コード入力部19は、情報コードの読み取りを行う。コード入力部19は、図2を参照しながら説明した入力部140に相当する。例えば、コード入力部19は、スキャナとして構成され、バーコード又は二次元コード等の各種情報コードを読み取る。コード入力部19は、スキャナに限定されず、例えばICカードリーダ又はキーボード等の各種入力装置により構成されてもよい。
(Code input unit 19)
The code input unit 19 reads the information code. The code input unit 19 corresponds to the input unit 140 described with reference to FIG. For example, the code input unit 19 is configured as a scanner and reads various information codes such as a bar code or a two-dimensional code. The code input unit 19 is not limited to the scanner, and may be composed of various input devices such as an IC card reader or a keyboard.

(モーションキャプチャカメラ20)
モーションキャプチャカメラ20は、作業者の様子を撮像する。モーションキャプチャカメラ20は、図2を参照して上記説明したセンサ部130に相当する。モーションキャプチャカメラ20は、少なくとも作業者の上半身を含む、作業者のほぼ全体像を撮像する。モーションキャプチャカメラ20は、例えば棚12の側方に配置されている。制御装置11は、モーションキャプチャカメラ20によって撮像された動画像に基づいて、作業者の動線や顔の向き等を解析することができる。
(Motion capture camera 20)
The motion capture camera 20 captures the state of the operator. The motion capture camera 20 corresponds to the sensor unit 130 described above with reference to FIG. The motion capture camera 20 captures almost the entire image of the operator, including at least the upper body of the operator. The motion capture camera 20 is arranged, for example, on the side of the shelf 12. The control device 11 can analyze the flow line of the operator, the direction of the face, and the like based on the moving image captured by the motion capture camera 20.

<<2.技術的特徴>>
<2.1.組立作業のナビゲーション>
制御装置11は、作業者(組立作業者)による組立作業、とりわけ組立のために部品を棚12から採取する採取作業を支援するための、ナビゲーションを行う。以下、この点について詳しく説明する。なお、棚12は、作業者によって作業が行われるエリア(作業エリア)の一例に該当する。したがって、作業エリアは、棚12でなくてもよく、作業者によって作業が行われるエリアの単位であてもよい。例えば、部品が台に載置される場合には、作業エリアは、部品が載置される台であってもよい。
<< 2. Technical features >>
<2.1. Assembling work navigation >
The control device 11 performs navigation to support the assembly work by the worker (assembly worker), particularly the collection work of collecting parts from the shelf 12 for assembly. This point will be described in detail below. The shelf 12 corresponds to an example of an area (work area) in which work is performed by an operator. Therefore, the work area does not have to be the shelf 12, and may be a unit of an area where the work is performed by the worker. For example, when the parts are placed on a table, the work area may be a table on which the parts are placed.

ここでは、ある製品番号「1234」の製品を作業者が組み立てるに際して、生産ナビゲーションシステム10−1に対応する棚12での作業を最初に行い、生産ナビゲーションシステム10−2に対応する棚12での作業を次に行うのが正常である場合を主に想定する。 Here, when a worker assembles a product having a certain product number "1234", the work is first performed on the shelf 12 corresponding to the production navigation system 10-1, and then on the shelf 12 corresponding to the production navigation system 10-2. It is mainly assumed that the next work is normal.

(1)情報の取得
制御装置11において、取得部161は、製品番号及び作業者IDを取得する。ここでは、一例として、製品番号及び作業者IDは、情報コードとして作業計画書等の書類に付され、最初に作業を行うべき棚に対応する生産ナビゲーションシステム10−1のコード入力部19から読み取られる場合を想定する。この場合、採取作業者は、最初に作業を行うべき棚での採取作業の開始前に、作業計画書に付された情報コードをコード入力部19にかざして読み取らせる。製品番号の読み取りによって、ナビゲーション(以下の(3)採取指示情報の表示)が開始される。
(1) Information acquisition In the control device 11, the acquisition unit 161 acquires the product number and the worker ID. Here, as an example, the product number and the worker ID are attached to documents such as a work plan as information codes, and are read from the code input unit 19 of the production navigation system 10-1 corresponding to the shelf on which the work should be performed first. It is assumed that the case is possible. In this case, the collecting worker holds the information code attached to the work plan over the code input unit 19 to read the information code attached to the work plan before starting the collecting work on the shelf on which the work should be performed first. Navigation (the following (3) display of collection instruction information) is started by reading the product number.

一方、2番目以降に作業を行うべき棚に対応する生産ナビゲーションシステム10−2においては、通信部110によって、直前に作業を行うべき棚に対応する生産ナビゲーションシステム10−1から、製品番号及び作業者IDを受信する。そして、製品番号の受信によって、ナビゲーションが開始される。なお、生産ナビゲーションシステム間を送受信される製品番号は、作業が完了したことを示す情報(作業完了情報)の一例に該当し得る。 On the other hand, in the production navigation system 10-2 corresponding to the second and subsequent shelves, the communication unit 110 starts with the product number and the work from the production navigation system 10-1 corresponding to the shelf on which the work should be performed immediately before. Receive the person ID. Then, upon receiving the product number, navigation is started. The product number transmitted and received between the production navigation systems may correspond to an example of information indicating that the work has been completed (work completion information).

そして、取得部161は、製品番号に対応する、予定作業情報、前後作業棚情報、及びガイダンス情報を取得する。ここでは、予定作業情報、前後作業棚情報、及びガイダンス情報が、製品番号に対応付けられて生産ナビゲーションシステム10の記憶部150によってあらかじめ記憶されている場合を想定する。そして、取得部161によって、製品番号に対応する、予定作業情報、前後作業棚情報、及びガイダンス情報が、記憶部150によって取得される場合を想定する。しかし、他の一例として、予定作業情報、前後作業棚情報、及びガイダンス情報は、製品番号に対応付けられてサーバ90によってあらかじめ記憶されていてもよい。かかる場合には、取得部161によって、製品番号に対応する予定作業情報、前後作業棚情報、及びガイダンス情報が、通信部110を介してサーバ90から取得されてよい。 Then, the acquisition unit 161 acquires the scheduled work information, the front and rear work shelf information, and the guidance information corresponding to the product number. Here, it is assumed that the scheduled work information, the front and rear work shelf information, and the guidance information are associated with the product numbers and stored in advance by the storage unit 150 of the production navigation system 10. Then, it is assumed that the acquisition unit 161 acquires the scheduled work information, the front and rear work shelf information, and the guidance information corresponding to the product numbers by the storage unit 150. However, as another example, the scheduled work information, the front and rear work shelf information, and the guidance information may be stored in advance by the server 90 in association with the product number. In such a case, the acquisition unit 161 may acquire the scheduled work information, the front / rear work shelf information, and the guidance information corresponding to the product numbers from the server 90 via the communication unit 110.

予定作業情報は、棚12に載置された部品を用いた製品の組立計画を示す。ここで、取得部161によって取得される予定作業情報は、当該生産ナビゲーションシステム10に対応する棚12での予定作業情報である。より詳細には、生産ナビゲーションシステム10−1において、取得部161は、生産ナビゲーションシステム10−1に対応する棚12での予定作業情報を取得し、生産ナビゲーションシステム10−2において、取得部161は、生産ナビゲーションシステム10−2に対応する棚12での予定作業情報を取得する。 Scheduled work information indicates a product assembly plan using the parts placed on the shelves 12. Here, the scheduled work information acquired by the acquisition unit 161 is the scheduled work information on the shelf 12 corresponding to the production navigation system 10. More specifically, in the production navigation system 10-1, the acquisition unit 161 acquires the scheduled work information on the shelf 12 corresponding to the production navigation system 10-1, and in the production navigation system 10-2, the acquisition unit 161 acquires the scheduled work information. , Acquires scheduled work information on the shelf 12 corresponding to the production navigation system 10-2.

図7は、製品番号、予定作業情報及びガイダンス情報の例を示す図である。図7に示したように、予定作業情報は、順序、行、列、及び必要数量を含む。順序、行、列及び必要要数量によって、上記した採取指示情報61が構成される。順序は、部品の採取順序を示す情報である。行と列は、組立作業者が製品の組み立てのために採取すべきひとつ以上の部品の各々についての、採取先の部品載置部21である。例えば、行が1、列が2の部品載置部21は、上から1段目、右から2列目の部品載置部21に該当し、部品載置部21ab(図6)に該当する。必要数量は、組立作業者が製品の組み立てのために採取すべきひとつ以上の部品の各々についての、採取すべき数を示す情報である。 FIG. 7 is a diagram showing examples of product numbers, scheduled work information, and guidance information. As shown in FIG. 7, the scheduled work information includes the order, rows, columns, and required quantity. The above-mentioned collection instruction information 61 is configured according to the order, rows, columns, and required quantity. The order is information indicating the collection order of parts. Rows and columns are part placement units 21 at the collection destination for each of the one or more parts that the assembler should collect for assembling the product. For example, the component mounting section 21 having 1 row and 2 columns corresponds to the component mounting section 21 in the first row from the top and the second column from the right, and corresponds to the component mounting section 21ab (FIG. 6). .. The required quantity is information indicating the number to be collected for each of one or more parts to be collected by the assembly worker for assembling the product.

また、図7に示したように、ガイダンス情報は、予定作業情報の各順序(各作業)に対応付けられており、組立動画ファイル名(組立動画)、指示書ファイル名(作業指示書)、及び注意喚起を含む。これらのガイダンス情報は、後にも説明するように、各作業に対応して表示される。 Further, as shown in FIG. 7, the guidance information is associated with each order (each work) of the scheduled work information, and the assembly video file name (assembly video), the instruction file name (work instruction), and so on. And alerts. These guidance information is displayed corresponding to each work, as will be described later.

なお、ここでは、図7に示した予定作業情報及びガイダンス情報が、生産ナビゲーションシステム10−1の取得部161によって取得される場合を主に想定する。しかし、生産ナビゲーションシステム10−2の取得部161によって取得される予定作業情報及びガイダンス情報の形式も、生産ナビゲーションシステム10−1の取得部161によって取得される予定作業情報及びガイダンス情報と同様の形式であってよい。 Here, it is mainly assumed that the scheduled work information and the guidance information shown in FIG. 7 are acquired by the acquisition unit 161 of the production navigation system 10-1. However, the format of the scheduled work information and the guidance information acquired by the acquisition unit 161 of the production navigation system 10-2 is the same as the format of the scheduled work information and the guidance information acquired by the acquisition unit 161 of the production navigation system 10-1. It may be.

前後作業棚情報は、当該棚12での作業の直前に作業を行うべき棚、及び、当該棚12での作業の次に作業を行うべき棚を示す。 The front and rear work shelf information indicates a shelf on which work should be performed immediately before the work on the shelf 12 and a shelf on which work should be performed next to the work on the shelf 12.

図8は、生産ナビゲーションシステム10−1の制御装置11によって取得される前後作業棚情報の例を示す図である。図8に示したように、生産ナビゲーションシステム10−1の取得部161によって取得される前後作業棚情報は、直前に作業を行うべき棚を示す情報(直前作業棚)、及び、次に作業を行うべき棚を示す情報(次作業棚)を有する。ここで、生産ナビゲーションシステム10−1に対応する棚12での作業の前に作業が行われるべき棚はないため、直前作業棚には「−(なし)」が設定されている。さらに、生産ナビゲーションシステム10−2に対応する棚12での作業の次に作業が行われるべき棚は、生産ナビゲーションシステム10−2に対応する棚であるため、次作業棚には「002(生産ナビゲーションシステム10−2に対応する棚)」が設定されている。 FIG. 8 is a diagram showing an example of front and rear work shelf information acquired by the control device 11 of the production navigation system 10-1. As shown in FIG. 8, the front and rear work shelf information acquired by the acquisition unit 161 of the production navigation system 10-1 includes information indicating the shelf on which the work should be performed immediately before (immediate work shelf), and the next work. It has information (next work shelf) indicating the shelf to be performed. Here, since there is no shelf on which the work should be performed before the work on the shelf 12 corresponding to the production navigation system 10-1, "-(none)" is set for the immediately preceding work shelf. Further, since the shelf to which the work should be performed next to the work on the shelf 12 corresponding to the production navigation system 10-2 is the shelf corresponding to the production navigation system 10-2, the next work shelf is "002 (production). (Shelves corresponding to the navigation system 10-2) ”is set.

図9は、生産ナビゲーションシステム10−2の制御装置11によって取得される前後作業棚情報の例を示す図である。図9に示したように、生産ナビゲーションシステム10−2の取得部161によって取得される前後作業棚情報は、直前作業棚、及び、次作業棚を有する。ここで、生産ナビゲーションシステム10−2に対応する棚12での作業の前に作業が行われるべき棚は、生産ナビゲーションシステム10−1に対応する棚であるため、直前作業棚には「001(生産ナビゲーションシステム10−1に対応する棚)」が設定されている。さらに、生産ナビゲーションシステム10−2に対応する棚12での作業の次に作業が行われるべき棚はないため、次作業棚には「−(なし)」が設定されている。 FIG. 9 is a diagram showing an example of front and rear work shelf information acquired by the control device 11 of the production navigation system 10-2. As shown in FIG. 9, the front and rear work shelf information acquired by the acquisition unit 161 of the production navigation system 10-2 includes the immediately preceding work shelf and the next work shelf. Here, since the shelf to which the work should be performed before the work on the shelf 12 corresponding to the production navigation system 10-2 is the shelf corresponding to the production navigation system 10-1, the immediately preceding work shelf is "001 ( (Shelves corresponding to the production navigation system 10-1) ”is set. Further, since there is no shelf on which the work should be performed next to the work on the shelf 12 corresponding to the production navigation system 10-2, "-(none)" is set for the next work shelf.

(2)作業開始前のガイダンス表示
上記したように、作業者が製品を組み立てるに際して、生産ナビゲーションシステム10−1に対応する棚12での作業を最初に行い、生産ナビゲーションシステム10−2に対応する棚12での作業を次に行うのが正常である。したがって、作業者が、最初に作業を行うべき棚に対応する生産ナビゲーションシステム10−1から最初に作業を開始しようとした場合には、正常にナビゲーションが開始される。
(2) Guidance display before the start of work As described above, when the worker assembles the product, the work on the shelf 12 corresponding to the production navigation system 10-1 is performed first, and the work corresponds to the production navigation system 10-2. It is normal to work on the shelf 12 next. Therefore, when the worker first tries to start the work from the production navigation system 10-1 corresponding to the shelf on which the work should be performed first, the navigation is normally started.

一方、作業者が誤って、2番目以降に作業を行うべき棚に対応する生産ナビゲーションシステム10−2から最初に作業を開始しようとした場合には、最初に作業を行うべき棚への移動を促すための情報が表示される。これによって、作業者は、最初に作業を行う棚を誤ったこと、及び、直前に作業を行うべき棚を認識することができる。 On the other hand, if the worker mistakenly tries to start the work from the production navigation system 10-2 corresponding to the shelf on which the work should be performed first, move to the shelf on which the work should be performed first. Information to encourage is displayed. This allows the operator to recognize that the first shelf to work on is wrong and the shelf to work on immediately before.

より詳細には、コード入力部19によって製品番号が読み取られ、取得部161によって取得された場合には、判定部163は、製品番号を読み取ったコード入力部19に対応する棚が最初に作業を行うべき棚であるかを判定する。一例として、判定部163は、前後作業棚情報の直前作業棚に「−(なし)」が設定されているか否かによって、製品番号を読み取ったコード入力部19に対応する棚が最初に作業を行うべき棚であるか否かを判定してもよい。なお、コード入力部19によって読み取られる製品番号は、作業の開始を示す情報(作業開始情報)の一例に該当し得る。 More specifically, when the product number is read by the code input unit 19 and acquired by the acquisition unit 161 in the determination unit 163, the shelf corresponding to the code input unit 19 that has read the product number first performs the work. Determine if it is a shelf to do. As an example, in the determination unit 163, the shelf corresponding to the code input unit 19 that has read the product number first performs the work depending on whether or not "-(none)" is set in the work shelf immediately before the front and rear work shelf information. You may decide whether or not it is a shelf to do. The product number read by the code input unit 19 may correspond to an example of information indicating the start of work (work start information).

提示制御部165は、判定部163によって、製品番号を読み取ったコード入力部19に対応する棚が最初に作業を行うべき棚であると判定された場合には、ナビゲーションを行う。一方、提示制御部165は、判定部163によって、製品番号を読み取ったコード入力部19に対応する棚が最初に作業を行うべき棚ではないと判定された場合には、最初に作業を行うべき棚への移動を促すための情報、及び、直前に作業を行うべき棚(直前に作業を行うべき棚の識別情報)が表示されるように表示部120を制御する。 When the determination unit 163 determines that the shelf corresponding to the code input unit 19 that has read the product number is the shelf on which the work should be performed first, the presentation control unit 165 performs navigation. On the other hand, when the determination unit 163 determines that the shelf corresponding to the code input unit 19 that has read the product number is not the shelf on which the work should be performed first, the presentation control unit 165 should perform the work first. The display unit 120 is controlled so that information for prompting the movement to the shelf and the shelf on which the work should be performed immediately before (identification information of the shelf on which the work should be performed immediately before) are displayed.

例として、生産ナビゲーションシステム10−1において、コード入力部19によって製品番号が読み取られ、取得部161によって取得された場合には、判定部163は、前後作業棚情報(図8)の直前作業棚に「−(なし)」が設定されているため、生産ナビゲーションシステム10−1に対応する棚が最初に作業を行うべき棚であると判定してよい。そして、提示制御部165は、ナビゲーションを行ってよい。 As an example, in the production navigation system 10-1, when the product number is read by the code input unit 19 and acquired by the acquisition unit 161, the determination unit 163 is the work shelf immediately before the front and rear work shelf information (FIG. 8). Since "-(none)" is set in, it may be determined that the shelf corresponding to the production navigation system 10-1 is the shelf on which the work should be performed first. Then, the presentation control unit 165 may perform navigation.

一方、生産ナビゲーションシステム10−2において、コード入力部19によって製品番号が読み取られ、取得部161によって取得された場合には、判定部163は、前後作業棚情報(図9)の直前作業棚に「001(生産ナビゲーションシステム10−1に対応する棚)」が設定されているため、生産ナビゲーションシステム10−2に対応する棚が最初に作業を行うべき棚ではないと判定してよい。そして、提示制御部165は、最初に作業を行うべき棚への移動を促すための情報、及び、直前作業棚「001(生産ナビゲーションシステム10−1に対応する棚)」が表示されるように表示部120を制御してよい。 On the other hand, in the production navigation system 10-2, when the product number is read by the code input unit 19 and acquired by the acquisition unit 161, the determination unit 163 is placed on the work shelf immediately before the front / rear work shelf information (FIG. 9). Since "001 (shelf corresponding to the production navigation system 10-1)" is set, it may be determined that the shelf corresponding to the production navigation system 10-2 is not the shelf on which the work should be performed first. Then, the presentation control unit 165 displays the information for prompting the movement to the shelf on which the work should be performed first, and the immediately preceding work shelf "001 (the shelf corresponding to the production navigation system 10-1)". The display unit 120 may be controlled.

図10は、作業開始前のガイダンス情報の例を示す図である。図10に示したように、作業開始前のガイダンス情報は、「最初に作業を行うべき棚に移動してください 棚001(生産ナビゲーションシステム10−1に対応する棚)での作業を先に行ってください」といったメッセージであってもよい。なお、図10に示したように、作業開始前のガイダンス情報は、典型的には、生産ナビゲーションシステム10−2に対応する作業台13の注意喚起表示領域38に表示されてよい。しかし、作業開始前のガイダンス情報が表示される場所は限定されない。 FIG. 10 is a diagram showing an example of guidance information before the start of work. As shown in FIG. 10, the guidance information before starting the work is "Please move to the shelf where the work should be performed first. Work on the shelf 001 (the shelf corresponding to the production navigation system 10-1) is performed first. It may be a message such as "Please." As shown in FIG. 10, the guidance information before the start of work may be typically displayed in the warning display area 38 of the workbench 13 corresponding to the production navigation system 10-2. However, the place where the guidance information before the start of work is displayed is not limited.

(3)採取指示情報の表示
制御装置11(例えば、提示制御部165)は、部品が載置される複数の部品載置部21が設けられた棚12からの、組立作業者による部品の採取作業を指示する採取指示情報を生成し、生成した採取指示情報を表示するよう表示機構15を制御する。制御装置11は、予定作業情報に従って、採取指示情報を生成する。採取指示情報は、第1の板状部材33及び/又は第2の板状部材34に表示される。採取指示情報は、予定作業情報において計画された製品の組み立てのために採取すべきひとつ以上の部品のうち、未採取の部品の採取を指示する情報である。
(3) Display of Collection Instruction Information The control device 11 (for example, the presentation control unit 165) collects parts by an assembler from a shelf 12 provided with a plurality of parts mounting units 21 on which parts are placed. The display mechanism 15 is controlled so as to generate collection instruction information instructing work and display the generated collection instruction information. The control device 11 generates collection instruction information according to the scheduled work information. The collection instruction information is displayed on the first plate-shaped member 33 and / or the second plate-shaped member 34. The collection instruction information is information for instructing the collection of uncollected parts among one or more parts to be collected for assembling the planned product in the scheduled work information.

・部品を採取すべき部品載置部21を示す情報
採取指示情報は、部品を採取すべき部品載置部21を示す情報を含む。かかる情報が表示されることにより、採取作業者は、どの部品載置部21から部品を採取すべきかを認識することが可能となる。そして、採取指示情報は、部品を採取すべき部品載置部21に対応付けられた領域に表示される。これにより、部品を採取すべき部品載置部21を示す情報が、当該部品載置部21に対応付けられた領域に表示されるので、どの部品載置部21から部品を採取すべきかをより容易に認識することが可能となる。採取示情報の表示例について、図11を参照して具体的に説明する。
-Information indicating the component mounting unit 21 from which the component should be collected The collection instruction information includes information indicating the component mounting section 21 from which the component should be collected. By displaying such information, the sampling operator can recognize from which component mounting unit 21 the component should be sampled. Then, the collection instruction information is displayed in the area associated with the component mounting unit 21 on which the component should be collected. As a result, information indicating the component mounting section 21 from which the component should be collected is displayed in the area associated with the component mounting section 21, so that it is possible to determine from which component mounting section 21 the component should be sampled. It can be easily recognized. A display example of the collection indication information will be specifically described with reference to FIG.

図11は、本実施形態に係る採取指示情報の表示の一例を説明するための図である。図11では、生産ナビゲーションシステム10を前方から見たときの採取指示情報の表示の一例が示されている。図11では、矢印として採取指示情報61が表示されている。採取指示情報61は、矢印の向く先にある部品載置部21abを、部品を採取すべき部品載置部21として示している。そして、採取指示情報61は、部品を採取すべき部品載置部21abに対応付けられた領域として、部品載置部21abの直上の第2の板状部材34に表示される。このように、採取指示情報61が、部品載置部21abの付近に表示されることで、採取作業者は、部品を部品載置部21abから採取すべきことを容易に認識することが可能となる。 FIG. 11 is a diagram for explaining an example of displaying the collection instruction information according to the present embodiment. FIG. 11 shows an example of displaying the collection instruction information when the production navigation system 10 is viewed from the front. In FIG. 11, the collection instruction information 61 is displayed as an arrow. The collection instruction information 61 indicates the component mounting section 21ab at the tip of the arrow as the component mounting section 21 on which the component should be sampled. Then, the collection instruction information 61 is displayed on the second plate-shaped member 34 directly above the component mounting portion 21ab as an area associated with the component mounting portion 21ab on which the component should be collected. By displaying the collection instruction information 61 in the vicinity of the component mounting portion 21ab in this way, the sampling operator can easily recognize that the component should be sampled from the component mounting portion 21ab. Become.

なお、部品を採取すべき部品載置部21を指示する情報は、矢印の他に、テキスト、動画、又は画像として表示されてもよい。 In addition to the arrows, the information indicating the component mounting unit 21 from which the components should be collected may be displayed as text, moving images, or images.

・採取すべき部品の識別情報
採取指示情報は、採取すべき部品の識別情報を含んでいてもよい。ここでの部品の識別情報は、例えば、部品の名称、部品の画像、又は部品のイラスト等である。これにより、採取すべき部品を誤ることが防止される。また、採取指示情報が採取すべき部品の識別情報を含む場合、複数の部品に関する採取指示情報が一度に投影されてもよい。
-Identification information of parts to be collected The collection instruction information may include identification information of parts to be collected. The component identification information here is, for example, the name of the component, the image of the component, the illustration of the component, or the like. This prevents mistakes in the parts to be collected. Further, when the collection instruction information includes the identification information of the parts to be collected, the collection instruction information regarding a plurality of parts may be projected at once.

・採取すべき部品の数を示す情報
採取指示情報は、採取すべき部品の数を示す情報を含んでいてもよい。なお、採取すべき部品の数は、採取すべき部品の総数であってもよいし、採取すべき部品の総数からすでに採取された部品の数を差し引いた、採取すべき部品の残数であってもよい。いずれにしろ、採取作業者は、採取すべき部品の数を容易に認識することが可能となる。
-Information indicating the number of parts to be collected The collection instruction information may include information indicating the number of parts to be collected. The number of parts to be collected may be the total number of parts to be collected, or is the remaining number of parts to be collected obtained by subtracting the number of already collected parts from the total number of parts to be collected. You may. In any case, the collecting operator can easily recognize the number of parts to be collected.

・その他の情報
さらに、提示制御部165は、採取指示情報以外の情報も表示されるように表示部120を制御する。例えば、図6に示したように、提示制御部165は、組み立ての見本を撮影した組立動画を組立動画表示領域37に表示させ、注意喚起を注意喚起表示領域38に表示させ、作業指示書を作業指示書表示領域39に表示させてよい。また、提示制御部165は、コード入力部19によって読み取られた作業者ID、又は、通信部110によって受信された作業者IDを作業者ID表示領域35に表示させてよい。また、提示制御部165は、コード入力部19によって読み取られた製品番号、又は、通信部110によって受信された製品番号を、製品番号表示領域36に表示させてよい。
-Other information Further, the presentation control unit 165 controls the display unit 120 so that information other than the collection instruction information is also displayed. For example, as shown in FIG. 6, the presentation control unit 165 displays an assembly moving image of an assembly sample in the assembly moving image display area 37, displays a warning in the warning display area 38, and displays a work instruction. It may be displayed in the work instruction display area 39. Further, the presentation control unit 165 may display the worker ID read by the code input unit 19 or the worker ID received by the communication unit 110 in the worker ID display area 35. Further, the presentation control unit 165 may display the product number read by the code input unit 19 or the product number received by the communication unit 110 in the product number display area 36.

・補足
提示制御部165は、後述する作業状況の判定により、採取指示情報において指示された採取作業が完了したと判定部163によって判定された場合、次に採取すべき部品に関する採取指示情報が表示されるように表示部120を制御する。提示制御部165は、予定作業情報において採取が計画された全ての部品の採取が完了するまで、対象とする部品を切り替えながら採取指示情報を表示する。
-Supplement The presentation control unit 165 displays the collection instruction information regarding the part to be collected next when the determination unit 163 determines that the collection work instructed in the collection instruction information has been completed by the determination of the work status described later. The display unit 120 is controlled so as to be performed. The presentation control unit 165 displays the collection instruction information while switching the target parts until the collection of all the parts planned to be collected in the scheduled work information is completed.

(4)作業状況の判定
制御装置11(例えば、判定部163)は、撮像部14により撮像された作業者を含む撮像画像に基づいて、作業者による採取作業の状況を判定する。以下、判定対象について詳しく説明する。
(4) Judgment of work status The control device 11 (for example, the determination unit 163) determines the status of the collection work by the worker based on the captured image including the worker captured by the image pickup unit 14. Hereinafter, the determination target will be described in detail.

・採取作業の内容の判定
制御装置11は、採取作業者が部品載置部21に手を入れたか否かを判定する。例えば、制御装置11は、予め作業開始前に撮像された撮像画像と、作業中に撮像された撮像画像との間で差分が生じた領域が、採取口51に対応する領域である場合に、採取作業者が部品載置部21に手を入れたと判定する。
-Determining the content of the sampling work The control device 11 determines whether or not the sampling worker has touched the component mounting unit 21. For example, in the control device 11, when the region where the difference occurs between the captured image captured before the start of the work and the captured image captured during the work is the region corresponding to the collection port 51. It is determined that the sampling worker has put his / her hand on the component mounting unit 21.

制御装置11は、採取作業者が部品載置部21に手を入れたと判定した場合、採取作業者が手を入れた部品載置部21を特定する。例えば、制御装置11は、上記の撮像画像間で差分が生じた領域がどの部品載置部21の採取口51に対応する領域であるかを判定することで、採取作業者が手を入れた部品載置部21を特定する。 When the control device 11 determines that the collecting worker has put his / her hand on the component mounting unit 21, the control device 11 identifies the part placing unit 21 that the collecting worker has put his / her hand on. For example, the control device 11 is modified by the sampling operator by determining which region of the component mounting portion 21 corresponds to the sampling port 51 in which the difference occurs between the captured images. The component mounting portion 21 is specified.

制御装置11は、一度の採取作業において、採取作業者が部品載置部21から採取する部品の数を識別する。例えば、制御装置11は、採取作業者が部品載置部21に手を入れて出す回数を撮像画像から認識することによって、採取作業者が部品載置部21から採取した部品の数を識別する。 The control device 11 identifies the number of parts to be collected from the component mounting unit 21 by the collection operator in one collection operation. For example, the control device 11 identifies the number of parts collected from the component mounting unit 21 by recognizing from the captured image the number of times the collecting worker puts his / her hand in the component mounting unit 21 and puts it out. ..

・採取作業の正誤の判定
制御装置11は、上記説明した、採取作業の内容の判定結果に基づいて、採取指示情報により示される採取作業が採取作業者により行われたか否かを判定する。採取指示情報により示される採取作業と同一の作業を、以下では正しい採取作業とも称する。採取指示情報により示される採取作業と異なる採取作業を、以下では誤った採取作業とも称する。
-Determining the Correctness of the Collection Work The control device 11 determines whether or not the collection work indicated by the collection instruction information has been performed by the collection worker based on the determination result of the content of the collection work described above. The same work as the collection work indicated by the collection instruction information is also referred to as a correct collection work below. The collection work that is different from the collection work indicated by the collection instruction information is also referred to as an erroneous collection work below.

制御装置11は、採取作業者が採取した部品に関し、採取作業の正誤を判定する。この場合、正しい採取作業は、採取指示情報において採取先として指示された部品載置部21から部品を採取することである。他方、誤った採取作業は、採取指示情報において採取先として指示された部品載置部21とは異なる部品載置部21から部品を採取することである。 The control device 11 determines whether the sampling operation is correct or incorrect with respect to the parts collected by the sampling operator. In this case, the correct sampling operation is to sample the parts from the component mounting unit 21 specified as the sampling destination in the sampling instruction information. On the other hand, the erroneous sampling operation is to sample the parts from the component mounting section 21 different from the component mounting section 21 specified as the sampling destination in the sampling instruction information.

・採取作業の経過の把握
制御装置11は、上記説明した、採取作業の内容の判定結果に基づいて、部品載置部21ごとに載置された部品の数を、部品が採取される度に減算し、部品が戻される度に加算する。かかる計算は、識別情報が同一の部品ごとに行われる。これにより、制御装置11は、どの部品載置部21にどの部品が何個載置されているかを、常時把握することが可能となる。
-Understanding the progress of the sampling work The control device 11 determines the number of parts mounted for each component mounting unit 21 based on the determination result of the content of the sampling work described above, each time a component is sampled. Subtract and add each time a part is returned. Such a calculation is performed for each component having the same identification information. As a result, the control device 11 can always grasp which component is mounted on which component mounting unit 21 and how many.

制御装置11(例えば、判定部163)は、採取指示情報において指示された採取作業が完了したか否かを判定する。例えば、制御装置11は、予定作業情報において採取が計画された部品の全てに対し、正しい採取作業が行われた場合に完了したと判定し、そうでない場合に未完了であると判定する。 The control device 11 (for example, the determination unit 163) determines whether or not the collection operation instructed in the collection instruction information has been completed. For example, the control device 11 determines that all the parts planned to be collected in the scheduled work information are completed when the correct collection work is performed, and determines that the parts are not completed otherwise.

(5)警告情報の表示
制御装置11(例えば、提示制御部165)は、誤った採取作業が採取作業者により行われると判定された場合に、警告情報を表示するよう表示機構15を制御する。これにより、採取作業者は、誤った採取作業を行ったことを容易に認識することができ、誤った採取作業をやり直すことが可能となり、部品の誤採取が防止される。警告情報の一例を、図12を参照しながら説明する。
(5) Display of warning information The control device 11 (for example, the presentation control unit 165) controls the display mechanism 15 to display warning information when it is determined that an erroneous collection operation is performed by a collection operator. .. As a result, the collection worker can easily recognize that the erroneous collection work has been performed, the erroneous collection work can be repeated, and the erroneous collection of parts can be prevented. An example of the warning information will be described with reference to FIG.

図12は、本実施形態に係る警告情報の表示の一例を説明するための図である。図12では、生産ナビゲーションシステム10を前方から見たときの警告情報の表示の一例が示されている。図12に示すように、採取指示情報61と共に、警告情報62が表示されている。警告情報62は4段の第2の板状部材34の全てに亘って表示される。これにより、警告情報62の視認性が確保される。ここで、警告情報62は、採取指示情報61とは異なる形態で表示される。一例として、採取指示情報61は緑で表示され、警告情報62は赤で表示される。他の一例として、採取指示情報61は点灯し続け、警告情報62は点滅してもよい。これによっても、警告情報62の視認性が確保される。なお、図12では、採取指示情報61と警告情報62とが同時に表示される例が示されているが、採取指示情報61の表示が中断され、警告情報62のみが表示されてもよい。 FIG. 12 is a diagram for explaining an example of displaying warning information according to the present embodiment. FIG. 12 shows an example of displaying warning information when the production navigation system 10 is viewed from the front. As shown in FIG. 12, warning information 62 is displayed together with collection instruction information 61. The warning information 62 is displayed over all of the second plate-shaped members 34 in the fourth stage. As a result, the visibility of the warning information 62 is ensured. Here, the warning information 62 is displayed in a form different from that of the collection instruction information 61. As an example, the collection instruction information 61 is displayed in green, and the warning information 62 is displayed in red. As another example, the collection instruction information 61 may remain lit and the warning information 62 may blink. This also ensures the visibility of the warning information 62. Although FIG. 12 shows an example in which the collection instruction information 61 and the warning information 62 are displayed at the same time, the display of the collection instruction information 61 may be interrupted and only the warning information 62 may be displayed.

警告情報は、誤った採取作業において部品が採取された部品載置部21を示す情報を含んでいてもよい。これにより、採取作業者は、誤って採取された部品を戻そうとする際に、どの部品載置部21に部品を戻せばよいかを容易に認識することが可能となる。この点について、図13を参照して詳しく説明する。 The warning information may include information indicating a component mounting unit 21 in which a component has been sampled in an erroneous sampling operation. As a result, the sampling operator can easily recognize to which component mounting unit 21 the component should be returned when attempting to return the component that has been erroneously sampled. This point will be described in detail with reference to FIG.

図13は、本実施形態に係る警告情報の表示の一例を説明するための図である。図13では、生産ナビゲーションシステム10を前方から見たときの警告情報の表示の一例が示されている。図13に示すように、採取指示情報61と共に、警告情報62が表示されている。ここでは一例として、採取指示情報61において部品載置部21abから部品を採取するよう指示されていたにもかかわらず、部品載置部21bcから部品が採取されたものとする。そのため、図13に示す警告情報62は、誤った採取作業において部品が採取された部品載置部21bcを示す誤り位置情報63を含んでいる。誤り位置情報63は、誤った採取作業において部品が採取された部品載置部21bcに対応付けられた領域として、部品載置部21bcの直上の第2の板状部材34に表示される。このように、誤り位置情報63が、部品載置部21bcの付近に表示されることで、採取作業者は、部品載置部21bcから誤って部品を採取したこと、及び部品載置部21bcにかかる部品を戻すべきことを容易に認識することが可能となる。 FIG. 13 is a diagram for explaining an example of displaying warning information according to the present embodiment. FIG. 13 shows an example of displaying warning information when the production navigation system 10 is viewed from the front. As shown in FIG. 13, warning information 62 is displayed together with collection instruction information 61. Here, as an example, it is assumed that the parts have been collected from the part mounting unit 21bc even though the collection instruction information 61 has been instructed to collect the parts from the component mounting unit 21ab. Therefore, the warning information 62 shown in FIG. 13 includes erroneous position information 63 indicating the component mounting portion 21bc from which the component was sampled in the erroneous sampling operation. The erroneous position information 63 is displayed on the second plate-shaped member 34 directly above the component mounting portion 21bc as an area associated with the component mounting portion 21 bc from which the component was sampled in the erroneous sampling operation. In this way, the error position information 63 is displayed in the vicinity of the component mounting section 21bc, so that the collecting operator mistakenly picked up the component from the component mounting section 21bc, and the component mounting section 21bc. It becomes possible to easily recognize that such a part should be returned.

なお、警告情報は、テキスト、動画、又は画像として表示されてもよい。また、警告情報は、上記説明した情報に付随して、任意の情報を含み得る。 The warning information may be displayed as text, moving image, or an image. In addition, the warning information may include arbitrary information in addition to the information described above.

一例として、警告情報は、誤った採取作業において採取された部品の識別情報を含んでいてもよい。ここでの部品の識別情報は、例えば、部品の名称、部品の画像、又は部品のイラスト等である。これにより、誤って採取された部品を戻そうとする際に、部品の戻し間違いが防止される。 As an example, the warning information may include identification information of parts collected in an erroneous collection operation. The component identification information here is, for example, the name of the component, the image of the component, the illustration of the component, or the like. This prevents mistakes in returning parts when attempting to return parts that have been erroneously collected.

制御装置11は、誤った採取作業において採取された部品が部品載置部21に戻された場合に、警告情報の表示を停止するよう表示機構15を制御する。例えば、図13に示した例において、部品載置部21bcに誤って採取された部品が戻されると、制御装置11は、警告情報62の表示を停止する。なお、誤って採取された部品が正しく戻されたか否かは、採取作業者が誤って部品が採取された部品載置部21に手を入れて出す動作が撮像画像から認識されるか否かによって判定されてもよい。これにより、採取作業者は、誤って採取された部品が、取り違えることなく戻されたことを容易に認識することが可能となる。 The control device 11 controls the display mechanism 15 so as to stop the display of the warning information when the parts collected in the erroneous collection operation are returned to the component mounting unit 21. For example, in the example shown in FIG. 13, when a component erroneously collected is returned to the component mounting unit 21bc, the control device 11 stops displaying the warning information 62. It should be noted that whether or not the erroneously collected parts are correctly returned is whether or not the operation of the collecting operator putting his / her hand into the component mounting unit 21 where the erroneously collected parts is taken out is recognized from the captured image. May be determined by. As a result, the collecting operator can easily recognize that the parts collected by mistake have been returned without being mistaken.

(6)作業完了後のガイダンス表示
上記したように、制御装置11(例えば、判定部163)は、採取指示情報において指示された採取作業が完了したか否かを判定する。
(6) Guidance Display after Completion of Work As described above, the control device 11 (for example, the determination unit 163) determines whether or not the collection work instructed in the collection instruction information has been completed.

より詳細に、判定部163は、正しい採取作業が行われる度に、当該生産ナビゲーションシステム10に対応する棚12において作業者によって実施される予定の作業を示す予定作業情報(図7)と作業者によって当該棚12において実施された作業を示す実績作業情報とが合致するか否かを判定する。これによって、判定部163は、採取作業が完了したか否かを判定する。 More specifically, the determination unit 163 includes scheduled work information (FIG. 7) indicating the work scheduled to be performed by the worker on the shelf 12 corresponding to the production navigation system 10 and the worker each time the correct sampling work is performed. It is determined whether or not the actual work information indicating the work performed on the shelf 12 matches with the actual work information. As a result, the determination unit 163 determines whether or not the collection work has been completed.

提示制御部165は、作業予定情報と実績作業情報とが合致する場合、かつ、当該予定作業情報が示す作業に続いて、他の棚において作業者によって作業が実施される予定の情報が登録されている場合、当該他の棚への移動を促すための情報(以下、「作業完了後のガイダンス情報」とも言う。)が表示されるように表示部120を制御する。これによって、作業者が作業エリア間を移動すべき場合に、作業エリア間を移動すべきことを容易に把握することが可能となる。 When the work schedule information and the actual work information match, the presentation control unit 165 registers the information that the worker plans to perform the work on another shelf following the work indicated by the scheduled work information. If so, the display unit 120 is controlled so that the information for prompting the movement to the other shelf (hereinafter, also referred to as “guidance information after the work is completed”) is displayed. This makes it possible for an operator to easily understand that he / she should move between work areas when he / she should move between work areas.

例として、生産ナビゲーションシステム10−1において、取得部161によって取得された予定作業情報(図7)の順序1〜4の「行」「列」「必要数量」に示される通りに作業が実施されたと判定部163によって判定された場合を想定する。このとき、前後作業棚情報(図8)の次作業棚に「002(生産ナビゲーションシステム10−2に対応する棚)」が設定されているため、提示制御部165は、生産ナビゲーションシステム10−2に対応する棚への移動を促すための情報(作業完了後のガイダンス情報)が表示されるように表示部120を制御してよい。そして、通信制御部167は、製品番号及び作業者IDが生産ナビゲーションシステム10−2に送信されるように通信部110を制御してよい。上記したように、生産ナビゲーションシステム間を送受信される製品番号は、作業完了情報の一例に該当し得る。 As an example, in the production navigation system 10-1, the work is carried out as shown in the “row”, “column”, and “required quantity” of the scheduled work information (FIG. 7) acquired by the acquisition unit 161 in the order 1 to 4. It is assumed that the determination is made by the determination unit 163. At this time, since "002 (a shelf corresponding to the production navigation system 10-2)" is set in the next work shelf of the front and rear work shelf information (FIG. 8), the presentation control unit 165 is set to the production navigation system 10-2. The display unit 120 may be controlled so that information (guidance information after the work is completed) for prompting the movement to the corresponding shelf is displayed. Then, the communication control unit 167 may control the communication unit 110 so that the product number and the worker ID are transmitted to the production navigation system 10-2. As described above, the product number transmitted and received between the production navigation systems may correspond to an example of work completion information.

図14は、作業完了後のガイダンス情報の例を示す図である。図14に示したように、作業完了後のガイダンス情報は、「棚002(生産ナビゲーションシステム10−2に対応する棚)での作業を次に行ってください」といったメッセージであってもよい(次作業棚の識別情報を含んでもよい)。なお、図14に示したように、作業完了後のガイダンス情報は、典型的には、生産ナビゲーションシステム10−1に対応する作業台13の注意喚起表示領域38に表示されてよい。しかし、作業完了後のガイダンス情報が表示される場所は限定されない。 FIG. 14 is a diagram showing an example of guidance information after the work is completed. As shown in FIG. 14, the guidance information after the work is completed may be a message such as "Please perform the work on the shelf 002 (the shelf corresponding to the production navigation system 10-2) next" (next). It may include work shelf identification information). As shown in FIG. 14, the guidance information after the work is completed may be typically displayed in the warning display area 38 of the workbench 13 corresponding to the production navigation system 10-1. However, the place where the guidance information after the work is completed is not limited.

一方、生産ナビゲーションシステム10−2において、取得部161によって取得された予定作業情報に示される通りに作業が実施されたと判定部163によって判定された場合を想定する。このとき、前後作業棚情報(図9)の次作業棚に「−(なし)」が設定されているため、提示制御部165は、次の棚への移動を促すための(作業完了後のガイダンス情報)を表示させなくてよい。その代わりに、提示制御部165は、製品の組み立て完了を示す情報が表示されるように表示部120を制御してよい。 On the other hand, in the production navigation system 10-2, it is assumed that the determination unit 163 determines that the work has been performed as shown in the scheduled work information acquired by the acquisition unit 161. At this time, since "-(none)" is set for the next work shelf of the front and rear work shelf information (FIG. 9), the presentation control unit 165 is for prompting the movement to the next shelf (after the work is completed). Guidance information) does not have to be displayed. Instead, the presentation control unit 165 may control the display unit 120 so that information indicating the completion of assembly of the product is displayed.

<2.3.記録処理>
制御装置11(例えば、記憶制御部169)は、作業者による作業の様子を記録してもよい。例えば、制御装置11は、撮像部14及び/又はモーションキャプチャカメラ20により撮像された画像(静止画像/動画像)を記憶する。
<2.3. Recording process>
The control device 11 (for example, the memory control unit 169) may record the state of work by the operator. For example, the control device 11 stores an image (still image / moving image) captured by the imaging unit 14 and / or the motion capture camera 20.

そして、制御装置11は、記憶された画像に基づいて作業者の作業内容を分析する。例えば、作業者の動線、顔の向き、部品の採取のために手が入れられた部品載置部21の分布、及び作業時間等が解析される。その結果、例えば、部品の採取のために手が入れられる頻度の高い部品載置部21ほど手を入れやすい位置に分布するよう、棚12における部品の配置が改善され得る。分析結果は、例えばシステム1の管理者に対して出力され得る。 Then, the control device 11 analyzes the work contents of the worker based on the stored image. For example, the flow line of the worker, the orientation of the face, the distribution of the component mounting portion 21 that has been modified for collecting the component, the working time, and the like are analyzed. As a result, for example, the arrangement of the parts on the shelf 12 can be improved so that the parts mounting portion 21 which is frequently maintained for collecting the parts is distributed at a position where the hands can be easily accessed. The analysis result can be output to, for example, the administrator of the system 1.

<2.4.処理の流れ>
図15は、本実施形態に係る生産ナビゲーションシステム10による表示処理の流れの一例を示すフローチャートである。図15に示すように、まず、判定部163は、コード入力部19によって作業計画書に付された製品番号(作業開始情報)が読み取られたかを判定する(ステップS100)。判定部163は、コード入力部19によって製品番号が読み取られなかったと判定した場合(ステップS100/NO)、通信部110によって製品番号(作業完了情報)が受信されたかを判定する(ステップS106)。判定部163によって、製品番号(作業完了情報)が受信されなかったと判定された場合(ステップS106/NO)、処理はステップ100に戻る。一方、判定部163によって、製品番号(作業完了情報)が受信されたと判定された場合(ステップS106/YES)、処理はステップS108に進む。
<2.4. Process flow>
FIG. 15 is a flowchart showing an example of the flow of display processing by the production navigation system 10 according to the present embodiment. As shown in FIG. 15, first, the determination unit 163 determines whether the product number (work start information) attached to the work plan has been read by the code input unit 19 (step S100). When the determination unit 163 determines that the product number has not been read by the code input unit 19 (step S100 / NO), the determination unit 163 determines whether the product number (work completion information) has been received by the communication unit 110 (step S106). When the determination unit 163 determines that the product number (work completion information) has not been received (step S106 / NO), the process returns to step 100. On the other hand, when the determination unit 163 determines that the product number (work completion information) has been received (step S106 / YES), the process proceeds to step S108.

判定部163は、コード入力部19によって製品番号が読み取られたと判定した場合(ステップS100/YES)、当該生産ナビゲーションシステム10に対応する棚が最初に作業を行うべき棚であるかを判定する(ステップS102)。提示制御部165は、判定部163によって、当該生産ナビゲーションシステム10に対応する棚が最初に作業を行うべき棚ではないと判定された場合(ステップS102/NO)、最初に作業を行うべき棚への移動を促すための情報が表示されるように表示部120を制御して(ステップS104)、処理は終了する。このとき、提示制御部165は、直前に作業を行うべき棚の識別情報を表示させてもよい。一方、判定部163によって、当該生産ナビゲーションシステム10に対応する棚が最初に作業を行うべき棚であると判定された場合(ステップS102/YES)、処理はステップS108に進む。 When the determination unit 163 determines that the product number has been read by the code input unit 19 (step S100 / YES), the determination unit 163 determines whether the shelf corresponding to the production navigation system 10 is the shelf on which the work should be performed first (step S100 / YES). Step S102). When the determination unit 163 determines that the shelf corresponding to the production navigation system 10 is not the shelf on which the work should be performed first (step S102 / NO), the presentation control unit 165 moves to the shelf on which the work should be performed first. The display unit 120 is controlled so that the information for prompting the movement of the above is displayed (step S104), and the process ends. At this time, the presentation control unit 165 may display the identification information of the shelf on which the work should be performed immediately before. On the other hand, when the determination unit 163 determines that the shelf corresponding to the production navigation system 10 is the shelf on which the work should be performed first (step S102 / YES), the process proceeds to step S108.

続いて、提示制御部165は、当該生産ナビゲーションシステム10に対応する棚における作業のナビゲーションを行う(ステップS108)。詳しくは、提示制御部165は、第1の板状部材33及び/又は第2の板状部材34に採取指示情報を表示するよう表示機構15を制御する。次いで、判定部163は、正しい採取作業が行われたか否かを判定する(ステップS110)。誤った採取作業が行われたと判定された場合(ステップS110/NO)、提示制御部165は、警告情報を表示するよう表示機構15を制御する(ステップS112)。誤って採取された部品が部品載置部21に戻されると、警告情報の表示は停止され、処理はステップS108に戻る。正しい採取作業が行われたと判定された場合(ステップS110/YES)、判定部163は、予定作業情報において計画された組立作業が完了したか否かを判定する(ステップS114)。計画された組立作業が完了していないと判定された場合(ステップS114/NO)、処理はステップS108に戻る。一方、判定部163は、計画された組立作業が完了したと判定された場合(ステップS114/YES)、処理はステップS116に進む。 Subsequently, the presentation control unit 165 navigates the work on the shelf corresponding to the production navigation system 10 (step S108). Specifically, the presentation control unit 165 controls the display mechanism 15 so as to display the collection instruction information on the first plate-shaped member 33 and / or the second plate-shaped member 34. Next, the determination unit 163 determines whether or not the correct collection work has been performed (step S110). When it is determined that an erroneous collection operation has been performed (step S110 / NO), the presentation control unit 165 controls the display mechanism 15 to display the warning information (step S112). When the erroneously collected parts are returned to the component mounting unit 21, the display of the warning information is stopped, and the process returns to step S108. When it is determined that the correct collection work has been performed (step S110 / YES), the determination unit 163 determines whether or not the assembly work planned in the scheduled work information has been completed (step S114). If it is determined that the planned assembly work has not been completed (step S114 / NO), the process returns to step S108. On the other hand, when the determination unit 163 determines that the planned assembly work has been completed (step S114 / YES), the process proceeds to step S116.

次いで、判定部163は、当該生産ナビゲーションシステム10に対応する棚の次に作業を行うべき棚があるかを判定する(ステップS116)。そして、次に作業を行うべき棚がないと判定された場合(ステップS116/NO)、処理は終了する。一方、次に作業を行うべき棚があると判定された場合(ステップS116/YES)、提示制御部165は、次に作業を行うべき棚への移動を促すための情報が表示されるように表示部120を制御する(ステップS118)。このとき、提示制御部165は、次に作業を行うべき棚の識別情報を表示させてもよい。また、通信制御部167は、次に作業を行うべき棚に対応する生産ナビゲーションシステム10に製品番号(作業完了情報)が送信されるように通信部110を制御する(ステップS119)。その後、処理は終了する。 Next, the determination unit 163 determines whether there is a shelf on which the work should be performed next to the shelf corresponding to the production navigation system 10 (step S116). Then, when it is determined that there is no shelf for the next work (step S116 / NO), the process ends. On the other hand, when it is determined that there is a shelf on which the work should be performed next (step S116 / YES), the presentation control unit 165 displays information for prompting the movement to the shelf on which the work should be performed next. The display unit 120 is controlled (step S118). At this time, the presentation control unit 165 may display the identification information of the shelf on which the work should be performed next. Further, the communication control unit 167 controls the communication unit 110 so that the product number (work completion information) is transmitted to the production navigation system 10 corresponding to the shelf on which the work should be performed next (step S119). After that, the process ends.

<<3.変形例>>
上記実施形態では、作業者が手で部品を採取するものと説明したが、本発明はかかる例に限定されない。例えば、作業者が、ロボットアーム等を操作して部品を採取してもよい。その場合も、作業者が手で作業する場合と同様の採取指示情報の表示、作業状況の判定、及び警告情報の表示、各種のガイダンス情報の表示等が行われる。
<< 3. Modification example >>
In the above embodiment, it has been described that the operator manually collects the parts, but the present invention is not limited to such an example. For example, an operator may operate a robot arm or the like to collect parts. In that case as well, the collection instruction information is displayed, the work status is determined, the warning information is displayed, and various guidance information is displayed in the same manner as when the worker manually works.

上記実施形態では、採取指示情報、警告情報及び各種のガイダンス情報が表示されるものとして説明したが、本発明はかかる例に限定されない。採取指示情報、警告情報及び各種のガイダンス情報は、表示と共に、又は表示に変えて、音又は触覚刺激等の任意の手段により出力されてもよい。すなわち、表示部120は、採取指示情報、警告情報及び各種のガイダンス情報を提示する提示部に置き換えられてもよい。このとき、提示制御部165は、これらの情報が提示部によって提示されるように提示部を制御してもよい。 In the above embodiment, the collection instruction information, the warning information, and various guidance information are displayed, but the present invention is not limited to such an example. The collection instruction information, the warning information, and various guidance information may be output by any means such as sound or tactile stimulus together with or in place of the display. That is, the display unit 120 may be replaced with a presentation unit that presents collection instruction information, warning information, and various guidance information. At this time, the presentation control unit 165 may control the presentation unit so that the present information is presented by the presentation unit.

上記実施形態では、ある棚での作業が完了して次の棚に対応する生産ナビゲーションシステムから製品情報(作業完了情報)が送信されると、当該次の棚に対応する生産ナビゲーションシステムにおける製品情報の受信によって当該次の棚におけるナビゲーションが始まる。このとき、作業者は、次の棚に表示される採取指示情報61を見ても、次の棚を認識することができる。しかし、複数の作業者によって同時に作業が行われる場合などには、複数の棚それぞれに同時に採取指示情報61が表示されてしまう場合もある。かかる場合であっても、作業者は、各棚に表示される作業者IDを見れば、自分が作業すべき次の棚を認識することができる。あるいは、棚で作業を行う作業者IDに応じて採取指示情報61の色が異なってもよい。 In the above embodiment, when the work on one shelf is completed and the product information (work completion information) is transmitted from the production navigation system corresponding to the next shelf, the product information in the production navigation system corresponding to the next shelf is transmitted. Will start navigation on the next shelf. At this time, the worker can recognize the next shelf by looking at the collection instruction information 61 displayed on the next shelf. However, when the work is performed by a plurality of workers at the same time, the collection instruction information 61 may be displayed on each of the plurality of shelves at the same time. Even in such a case, the worker can recognize the next shelf on which he / she should work by looking at the worker ID displayed on each shelf. Alternatively, the color of the collection instruction information 61 may be different depending on the worker ID who performs the work on the shelf.

上記実施形態では、生産ナビゲーションシステム10ごとに、当該生産ナビゲーションシステム10に対応する棚での予定作業情報を記憶する場合を説明した。しかし、複数の生産ナビゲーションシステム10に対応する棚での予定作業情報は、サーバ90によって一括して記憶されていてもよい。かかる場合には、判定部163による判定(例えば、次に作業を行うべき棚があるか、当該生産ナビゲーションシステムに対応する棚が最初に作業を行うべき棚であるか、といった判定など)は、生産ナビゲーションシステム10の代わりに、サーバ90によって行われてもよい。 In the above embodiment, the case where the scheduled work information on the shelf corresponding to the production navigation system 10 is stored for each production navigation system 10 has been described. However, the scheduled work information on the shelves corresponding to the plurality of production navigation systems 10 may be collectively stored by the server 90. In such a case, the determination unit 163 (for example, whether there is a shelf for which work should be performed next, or whether the shelf corresponding to the production navigation system is the shelf for which work should be performed first, etc.) is determined. Instead of the production navigation system 10, it may be done by the server 90.

上記実施形態では、当該生産ナビゲーションシステムに対応する棚の次に作業を行うべき棚が1つである場合を説明した。しかし、次に作業を行うべき棚として複数の棚が設定されていてもよい。かかる場合には、当該複数の棚のいずれかに作業者は移動すればよい。これに関連して、当該生産ナビゲーションシステムに対応する棚の直前に作業を行うべき棚として複数の棚が設定されていてもよい。かかる場合には、当該複数の棚のいずれかから作業者が移動してくる可能性がある。 In the above embodiment, the case where the work should be performed next to the shelf corresponding to the production navigation system has been described. However, a plurality of shelves may be set as shelves for which work should be performed next. In such a case, the worker may move to any of the plurality of shelves. In this regard, a plurality of shelves may be set as shelves on which work should be performed immediately before the shelves corresponding to the production navigation system. In such a case, the worker may move from any of the plurality of shelves.

上記実施形態では、1つの予定作業情報によって示される作業が1つの棚だけで行われる場合を説明した。しかし、製品の組み立てに必要な部品の数が多い場合、又は、1つあたりの棚のサイズが小さい場合などには、1つの予定作業情報によって示される作業を複数の棚で行いたい場合も想定される。したがって、作業予定情報に作業を行うべき棚の識別情報も設定しておき、提示制御部165は、作業を行うべき棚の識別情報に基づいて、複数の棚のいずれの棚に対して作業を行うべきかをナビゲーションしてもよい。 In the above embodiment, the case where the work indicated by one scheduled work information is performed on only one shelf has been described. However, if the number of parts required for assembling the product is large, or if the size of each shelf is small, it is assumed that the work indicated by one scheduled work information may be performed on multiple shelves. Will be done. Therefore, the identification information of the shelf on which the work should be performed is also set in the work schedule information, and the presentation control unit 165 performs the work on any of the plurality of shelves based on the identification information of the shelf on which the work should be performed. You may navigate what to do.

<<4.ハードウェア構成>>
以上、本発明の各実施形態を説明した。上述した作業状況の判定、並びに採取指示情報の表示、警告情報の表示、各種のガイダンス情報の表示等の情報処理は、ソフトウェアと、以下に説明する生産ナビゲーションシステム10のハードウェアとの協働により実現される。
<< 4. Hardware configuration >>
Each embodiment of the present invention has been described above. Information processing such as determination of the above-mentioned work status, display of collection instruction information, display of warning information, display of various guidance information, etc. is performed by cooperation between the software and the hardware of the production navigation system 10 described below. It will be realized.

図16は、生産ナビゲーションシステム10のハードウェア構成を示したブロック図である。生産ナビゲーションシステム10は、CPU(Central Processing Unit)201と、ROM(Read Only Memory)202と、RAM(Random Access Memory)203と、ホストバス204と、を備える。また、生産ナビゲーションシステム10は、ブリッジ205と、外部バス206と、インタフェース207と、入力装置208と、表示装置209と、音声出力装置210と、ストレージ装置(HDD)211と、ドライブ212と、ネットワークインタフェース215とを備える。 FIG. 16 is a block diagram showing a hardware configuration of the production navigation system 10. The production navigation system 10 includes a CPU (Central Processing Unit) 201, a ROM (Read Only Memory) 202, a RAM (Random Access Memory) 203, and a host bus 204. Further, the production navigation system 10 includes a bridge 205, an external bus 206, an interface 207, an input device 208, a display device 209, an audio output device 210, a storage device (HDD) 211, a drive 212, and a network. It includes an interface 215.

CPU201は、演算処理装置および制御装置として機能し、各種プログラムに従って生産ナビゲーションシステム10内の動作全般を制御する。また、CPU201は、マイクロプロセッサであってもよい。ROM202は、CPU201が使用するプログラムや演算パラメータ等を記憶する。RAM203は、CPU201の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはCPUバスなどから構成されるホストバス204により相互に接続されている。CPU201はRAM203においてソフトウェアに従った処理を行うことにより、上述した制御部160の機能を実現し得る。 The CPU 201 functions as an arithmetic processing unit and a control device, and controls the overall operation in the production navigation system 10 according to various programs. Further, the CPU 201 may be a microprocessor. The ROM 202 stores programs, calculation parameters, and the like used by the CPU 201. The RAM 203 temporarily stores a program used in the execution of the CPU 201, parameters that change appropriately in the execution, and the like. These are connected to each other by a host bus 204 composed of a CPU bus or the like. The CPU 201 can realize the function of the control unit 160 described above by performing the processing according to the software in the RAM 203.

ホストバス204は、ブリッジ205を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス206に接続されている。なお、必ずしもホストバス204、ブリッジ205および外部バス206を分離構成する必要はなく、1つのバスにこれらの機能を実装してもよい。 The host bus 204 is connected to an external bus 206 such as a PCI (Peripheral Component Interconnect / Interface) bus via a bridge 205. It is not always necessary to separately configure the host bus 204, the bridge 205, and the external bus 206, and these functions may be implemented in one bus.

入力装置208は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチおよびレバーなど作業者が情報を入力するための入力手段と、作業者による入力に基づいて入力信号を生成し、CPU201に出力する入力制御回路などから構成されている。作業者は、該入力装置208を操作することにより、生産ナビゲーションシステム10に対して各種のデータを入力したり処理動作を指示したりすることができる。これらの入力装置208は、入力部140の機能を実現し得る。 The input device 208 is an input means for an operator to input information such as a mouse, a keyboard, a touch panel, a button, a microphone, a switch, and a lever, and an input that generates an input signal based on the input by the operator and outputs the input signal to the CPU 201. It is composed of a control circuit and the like. By operating the input device 208, the operator can input various data to the production navigation system 10 and instruct the processing operation. These input devices 208 can realize the function of the input unit 140.

また、入力装置208は、作業者に関する情報を検出する装置により形成され得る。例えば、入力装置208は、画像センサ(例えば、カメラ)、深度センサ(例えば、ステレオカメラ)、加速度センサ、ジャイロセンサ、地磁気センサ、光センサ、音センサ、測距センサ、力センサ等の各種のセンサを含み得る。これらの入力装置208は、センサ部130の機能を実現し得る。 Also, the input device 208 may be formed by a device that detects information about the operator. For example, the input device 208 includes various sensors such as an image sensor (for example, a camera), a depth sensor (for example, a stereo camera), an acceleration sensor, a gyro sensor, a geomagnetic sensor, an optical sensor, a sound sensor, a distance measuring sensor, and a force sensor. May include. These input devices 208 can realize the function of the sensor unit 130.

表示装置209は、例えば、CRT(Cathode Ray Tube)ディスプレイ装置、液晶ディスプレイ(LCD)装置、プロジェクタ装置、OLED(Organic Light Emitting Diode)装置およびランプなどの表示装置を含む。また、音声出力装置210は、スピーカおよびヘッドホンなどの音声出力装置を含む。表示装置209は、上述した表示部120の機能を実現し得る。 The display device 209 includes, for example, a display device such as a CRT (Cathode Ray Tube) display device, a liquid crystal display (LCD) device, a projector device, an OLED (Organic Light Emitting Mode) device, and a lamp. Further, the audio output device 210 includes an audio output device such as a speaker and headphones. The display device 209 can realize the function of the display unit 120 described above.

ストレージ装置211は、本実施形態にかかる生産ナビゲーションシステム10の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置211は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。ストレージ装置211は、例えば、HDD(Hard Disk Drive)またはSSD(Solid Strage Drive)、あるいは同等の機能を有するメモリ等で構成される。このストレージ装置211は、ストレージを駆動し、CPU201が実行するプログラムや各種データを格納する。当該ストレージ装置211は、上述した記憶部150の機能を実現し得る。 The storage device 211 is a data storage device configured as an example of the storage unit of the production navigation system 10 according to the present embodiment. The storage device 211 may include a storage medium, a recording device that records data on the storage medium, a reading device that reads data from the storage medium, a deleting device that deletes the data recorded on the storage medium, and the like. The storage device 211 is composed of, for example, an HDD (Hard Disk Drive) or SSD (Solid Stage Drive), or a memory having an equivalent function. The storage device 211 drives the storage and stores programs and various data executed by the CPU 201. The storage device 211 can realize the function of the storage unit 150 described above.

ドライブ212は、記憶媒体用リーダライタであり、生産ナビゲーションシステム10に内蔵、あるいは外付けされる。ドライブ212は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体214に記録されている情報を読み出して、RAM203またはストレージ装置211に出力する。また、ドライブ212は、リムーバブル記憶媒体214に情報を書き込むこともできる。 The drive 212 is a reader / writer for a storage medium, and is built in or externally attached to the production navigation system 10. The drive 212 reads the information recorded in the removable storage medium 214 such as the mounted magnetic disk, optical disk, magneto-optical disk, or semiconductor memory, and outputs the information to the RAM 203 or the storage device 211. The drive 212 can also write information to the removable storage medium 214.

ネットワークインタフェース215は、例えば、ネットワークに接続するための通信デバイス等で構成された通信インタフェースである。また、ネットワークインタフェース215は、無線LAN(Local Area Network)対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。ネットワークインタフェース215は、上述した通信部110の機能を実現し得る。 The network interface 215 is, for example, a communication interface composed of a communication device or the like for connecting to a network. Further, the network interface 215 may be a wireless LAN (Local Area Network) compatible communication device or a wire communication device that performs wired communication. The network interface 215 can realize the function of the communication unit 110 described above.

<<5.補足>>
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
<< 5. Supplement >>
Although the preferred embodiments of the present invention have been described in detail with reference to the accompanying drawings, the present invention is not limited to such examples. It is clear that a person having ordinary knowledge in the field of technology to which the present invention belongs can come up with various modifications or modifications within the scope of the technical idea described in the claims. , These are also naturally understood to belong to the technical scope of the present invention.

例えば、本明細書においてフローチャート及びシーケンス図を用いて説明した処理は、必ずしも図示された順序で実行されなくてもよい。いくつかの処理ステップは、並列的に実行されてもよい。また、追加的な処理ステップが採用されてもよく、一部の処理ステップが省略されてもよい。 For example, the processes described with reference to the flowcharts and sequence diagrams herein may not necessarily be performed in the order shown. Some processing steps may be performed in parallel. Further, additional processing steps may be adopted, and some processing steps may be omitted.

また、本明細書において説明した各装置による一連の処理は、ソフトウェア、ハードウェア、及びソフトウェアとハードウェアとの組合せのいずれを用いて実現されてもよい。ソフトウェアを構成するプログラムは、例えば、各装置の内部又は外部に設けられる記憶媒体(非一時的な媒体:non-transitory media)に予め格納される。そして、各プログラムは、例えば、コンピュータによる実行時にRAMに読み込まれ、CPUなどのプロセッサにより実行される。上記記憶媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。また、上記のコンピュータプログラムは、記憶媒体を用いずに、例えばネットワークを介して配信されてもよい。 In addition, the series of processes by each device described in the present specification may be realized by using software, hardware, or a combination of software and hardware. The programs constituting the software are stored in advance in, for example, a storage medium (non-transitory media) provided inside or outside each device. Then, each program is read into RAM at the time of execution by a computer and executed by a processor such as a CPU. The storage medium is, for example, a magnetic disk, an optical disk, a magneto-optical disk, a flash memory, or the like. Further, the above computer program may be distributed via, for example, a network without using a storage medium.

また、上記説明した制御装置11の機能は、複数の装置に分散して実装されてもよい。 Further, the functions of the control device 11 described above may be distributed and implemented in a plurality of devices.

1 システム
10 生産ナビゲーションシステム
11 制御装置
12 棚
13 作業台
14 撮像部
15 表示機構
19 コード入力部
110 通信部
120 表示部
130 センサ部
140 入力部
150 記憶部
160 制御部
161 取得部
163 判定部
165 提示制御部
167 通信制御部
169 記憶制御部
20 モーションキャプチャカメラ
21 部品載置部
22 仕切板
31 プロジェクタ
32 ミラー
33 第1の板状部材
34 第2の板状部材
35 作業者ID表示領域
36 製品番号表示領域
37 組立動画表示領域
38 注意喚起表示領域
39 作業指示書表示領域
44 支持フレーム
51 採取口
61 採取指示情報
62 警告情報
63 位置情報
80 ネットワーク
90 サーバ

1 System 10 Production navigation system 11 Control device 12 Shelf 13 Worktable 14 Imaging unit 15 Display mechanism 19 Code input unit 110 Communication unit 120 Display unit 130 Sensor unit 140 Input unit 150 Storage unit 160 Control unit 161 Acquisition unit 163 Judgment unit 165 Presentation Control unit 167 Communication control unit 169 Memory control unit 20 Motion capture camera 21 Parts mounting unit 22 Partition plate 31 Projector 32 Mirror 33 First plate-shaped member 34 Second plate-shaped member 35 Worker ID display area 36 Product number display Area 37 Assembly video display area 38 Warning display area 39 Work instruction display area 44 Support frame 51 Collection port 61 Collection instruction information 62 Warning information 63 Location information 80 Network 90 Server

Claims (9)

第1の作業エリアにおいて作業者によって実施される予定の作業を示す予定作業情報を取得する取得部と、
前記予定作業情報と前記作業者によって前記第1の作業エリアにおいて実施された作業を示す実績作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアへの移動を促すための情報が提示されるように提示部を制御する提示制御部と、
を備える、生産ナビゲーション装置。
An acquisition unit that acquires scheduled work information indicating scheduled work to be performed by a worker in the first work area, and an acquisition unit.
When the scheduled work information and the actual work information indicating the work performed by the worker in the first work area match, and the work indicated by the scheduled work information is followed by the work in the second work area. When the work is scheduled to be performed by the worker, the presentation control unit that controls the presentation unit so as to present the information for prompting the movement to the second work area, and the presentation control unit.
A production navigation device.
前記生産ナビゲーション装置は、
前記実績作業情報と前記予定作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて前記第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアに対応する生産ナビゲーションシステムに作業完了情報が送信されるように通信部を制御する通信制御部を備える、
請求項1に記載の生産ナビゲーション装置。
The production navigation device is
When the actual work information and the scheduled work information match, and when the work scheduled to be performed by the worker is registered in the second work area following the work indicated by the scheduled work information. The communication control unit that controls the communication unit so that the work completion information is transmitted to the production navigation system corresponding to the second work area is provided.
The production navigation device according to claim 1.
前記提示制御部は、第3の作業エリアに対応する生産ナビゲーションシステムから作業完了情報が受信された場合、前記予定作業情報が示す作業のナビゲーションを開始する、
請求項1または2に記載の生産ナビゲーション装置。
When the work completion information is received from the production navigation system corresponding to the third work area, the presentation control unit starts the navigation of the work indicated by the scheduled work information.
The production navigation device according to claim 1 or 2.
前記作業完了情報は、前記予定作業情報が示す作業によって組み立てられる製品の識別情報である、
請求項2または3に記載の生産ナビゲーション装置。
The work completion information is identification information of a product assembled by the work indicated by the scheduled work information.
The production navigation device according to claim 2 or 3.
前記提示制御部は、作業開始情報が読み取られた場合、前記第1の作業エリアが最初に作業を行うべき作業エリアであるかが判定され、前記第1の作業エリアが最初に作業を行うべき作業エリアではないと判定された場合、最初に作業を行うべき作業エリアへの移動を促すための情報が提示されるように前記提示部を制御する、
請求項1に記載の生産ナビゲーション装置。
When the work start information is read, the presentation control unit determines whether the first work area is the work area where the work should be performed first, and the first work area should perform the work first. If it is determined that it is not a work area, the presenting unit is controlled so that information for prompting the movement to the work area where the work should be performed first is presented.
The production navigation device according to claim 1.
前記提示制御部は、前記第1の作業エリアが最初に作業を行うべき作業エリアであると判定された場合、前記予定作業情報が示す作業のナビゲーションを開始する、
請求項5に記載の生産ナビゲーション装置。
When it is determined that the first work area is the work area where the work should be performed first, the presentation control unit starts the navigation of the work indicated by the scheduled work information.
The production navigation device according to claim 5.
前記作業開始情報は、前記予定作業情報が示す作業によって組み立てられる製品の識別情報である、
請求項5または6に記載の生産ナビゲーション装置。
The work start information is identification information of a product assembled by the work indicated by the scheduled work information.
The production navigation device according to claim 5 or 6.
第1の作業エリアにおいて作業者によって実施される予定の作業を示す予定作業情報を取得することと、
前記予定作業情報と前記作業者によって前記第1の作業エリアにおいて実施された作業を示す実績作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアへの移動を促すための情報が提示されるように提示部を制御することと、
を備える、生産ナビゲーション方法。
Acquiring scheduled work information indicating the work scheduled to be performed by the worker in the first work area,
When the scheduled work information and the actual work information indicating the work performed by the worker in the first work area match, and the work indicated by the scheduled work information is followed by the work in the second work area. When the work is scheduled to be carried out by the worker, the presenting unit is controlled so that the information for prompting the movement to the second work area is presented.
Production navigation method.
コンピュータを、
第1の作業エリアにおいて作業者によって実施される予定の作業を示す予定作業情報を取得する取得部と、
前記予定作業情報と前記作業者によって前記第1の作業エリアにおいて実施された作業を示す実績作業情報とが合致する場合、かつ、前記予定作業情報が示す作業に続いて第2の作業エリアにおいて前記作業者によって作業が実施される予定が登録されている場合、前記第2の作業エリアへの移動を促すための情報が提示されるように提示部を制御する提示制御部と、
を備える生産ナビゲーション装置として機能させるためのプログラム。
Computer,
An acquisition unit that acquires scheduled work information indicating scheduled work to be performed by a worker in the first work area, and an acquisition unit.
When the scheduled work information and the actual work information indicating the work performed by the worker in the first work area match, and the work indicated by the scheduled work information is followed by the work in the second work area. When the work is scheduled to be performed by the worker, the presentation control unit that controls the presentation unit so as to present the information for prompting the movement to the second work area, and the presentation control unit.
A program to function as a production navigation device equipped with.
JP2019157278A 2019-08-29 2019-08-29 Production navigation device, production navigation method and program Active JP7358848B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019157278A JP7358848B2 (en) 2019-08-29 2019-08-29 Production navigation device, production navigation method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019157278A JP7358848B2 (en) 2019-08-29 2019-08-29 Production navigation device, production navigation method and program

Publications (2)

Publication Number Publication Date
JP2021033962A true JP2021033962A (en) 2021-03-01
JP7358848B2 JP7358848B2 (en) 2023-10-11

Family

ID=74675990

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019157278A Active JP7358848B2 (en) 2019-08-29 2019-08-29 Production navigation device, production navigation method and program

Country Status (1)

Country Link
JP (1) JP7358848B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018030189A1 (en) * 2016-08-10 2018-02-15 コニカミノルタ株式会社 Terminal device
JP2018045669A (en) * 2016-09-12 2018-03-22 沖電気工業株式会社 Production navigation system, support system therefor, and data management method
JP2020095617A (en) * 2018-12-14 2020-06-18 コニカミノルタ株式会社 Safety management support system and control program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018030189A1 (en) * 2016-08-10 2018-02-15 コニカミノルタ株式会社 Terminal device
JP2018045669A (en) * 2016-09-12 2018-03-22 沖電気工業株式会社 Production navigation system, support system therefor, and data management method
JP2020095617A (en) * 2018-12-14 2020-06-18 コニカミノルタ株式会社 Safety management support system and control program

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"ニッポン製造業の生きる道 身の丈カイゼンで強さ伸ばし弱点補う", 日経ビジネス, vol. 第1886号, JPN6023024754, 10 April 2017 (2017-04-10), pages 32 - 37, ISSN: 0005086453 *
杉本 榮次: "デジタル表示器による物流・生産効率化推進システム", 月刊自動認識, vol. 第24巻 第6号, JPN6023024753, 10 June 2011 (2011-06-10), pages 1 - 5, ISSN: 0005086454 *

Also Published As

Publication number Publication date
JP7358848B2 (en) 2023-10-11

Similar Documents

Publication Publication Date Title
JP7521557B2 (en) Navigation system, projection method, and program
JP6517726B2 (en) Pickup device
CN102194254A (en) Information processing device, information processing method, and program
JP5482522B2 (en) Display control apparatus, display control method, and program
CN110889317A (en) Operation assisting device
EP3611117A1 (en) Article management assistance device, article management assistance system, and article management assistance method
JP7322423B2 (en) Information processing device, production navigation system, information processing method and program
JP6528964B2 (en) INPUT OPERATION DETECTING DEVICE, IMAGE DISPLAY DEVICE, PROJECTOR DEVICE, PROJECTOR SYSTEM, AND INPUT OPERATION DETECTING METHOD
JP2024107437A (en) Guidance control device, information processing system, information processing method, and program
JP5773003B2 (en) Display control apparatus, display control method, and program
JP7358848B2 (en) Production navigation device, production navigation method and program
JP2005096956A (en) Book management system
JP7452088B2 (en) Work support device, work support method and program
JP7559609B2 (en) Information processing device, information processing system, and program
JP7447543B2 (en) Information processing device, information processing method, program, and information processing system
JP2021009537A (en) Commodity expiration management system
US11367176B2 (en) Commodity management device and commodity management system
CN104520804A (en) A method, a server and a pointing device for enhancing presentations
JP2023034399A (en) Information processing device, information processing system, information processing method, and program
JP2024121502A (en) Information processing device, information processing system, information processing method, and program
WO2023080230A1 (en) Management device, management system, management method, and management program
JP2024020698A (en) Information processing device, information processing method, and program
JP2022129435A (en) Information processing device, information processing system, and program
EP4332710A1 (en) Methods and autonomous robots for taking inventory in a structure
JP7287877B2 (en) 3D part data creation method and device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220510

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230602

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230620

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230815

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230829

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230911

R150 Certificate of patent or registration of utility model

Ref document number: 7358848

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150