JP2022122201A - Picking work support system - Google Patents

Picking work support system Download PDF

Info

Publication number
JP2022122201A
JP2022122201A JP2021019380A JP2021019380A JP2022122201A JP 2022122201 A JP2022122201 A JP 2022122201A JP 2021019380 A JP2021019380 A JP 2021019380A JP 2021019380 A JP2021019380 A JP 2021019380A JP 2022122201 A JP2022122201 A JP 2022122201A
Authority
JP
Japan
Prior art keywords
product
information
warehouse
support system
work support
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021019380A
Other languages
Japanese (ja)
Other versions
JP6949340B1 (en
Inventor
智太 古川
Tomota Furukawa
嘉紀 稲垣
Yoshinori Inagaki
兼次 河井
Kenji Kawai
達生 大滝
Tatsuo Otaki
マルコス クーパー
Marcos Cooper
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Belle Management Wise Co Ltd
Rakudo
Rakudo Co Ltd
Original Assignee
Belle Management Wise Co Ltd
Rakudo
Rakudo Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Belle Management Wise Co Ltd, Rakudo, Rakudo Co Ltd filed Critical Belle Management Wise Co Ltd
Priority to JP2021019380A priority Critical patent/JP6949340B1/en
Application granted granted Critical
Publication of JP6949340B1 publication Critical patent/JP6949340B1/en
Publication of JP2022122201A publication Critical patent/JP2022122201A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30—Computing systems specially adapted for manufacturing

Abstract

To provide a highly reliable picking work support system which is rich in versatility, can be introduced inexpensively and easily, and is extremely unlikely to pick up a commodity different from a desired commodity.SOLUTION: A picking work support system S is configured by connecting a head-mounted device H that can be worn by an operator O to a computer C via a communication network N. The head-mounted device H is provided with a camera for acquiring unique information of a commodity G to be picked from a picking list. The computer C is provided with storage means for storing positional information of the commodity G in a warehouse I in association with a plurality of types of specific information on the commodity G, and transmission means for calling up position information corresponding to unique information of the commodity G acquired by the camera of the head-mounted device H from storage means and transmitting it to the worker O.SELECTED DRAWING: Figure 1

Description

本発明は、倉庫内等における商品・部品のピッキング作業（すなわち、所望する商品・部品を探して取り出す作業）を支援するためのピッキング作業支援システムに関するものである。 The present invention relates to a picking work support system for supporting picking work of products/parts in a warehouse or the like (that is, work of searching for and taking out desired products/parts).

物流に従事する作業者が、倉庫内にある多種多様な商品の中から、リストや発注書に記載された商品をピッキングする際に、データベースに記憶されている当該商品の保管場所に関する情報を、画像や音声等により作業者に提供することによって、ピッキング作業を効率的に実行可能とするピッキング作業支援システムが知られている。 When a worker engaged in logistics picks a product listed in a list or purchase order from among the wide variety of products in the warehouse, the information on the storage location of the product stored in the database is There is known a picking work support system that enables efficient execution of picking work by providing an image, sound, or the like to a worker.

そのようなピッキング作業支援システムとして、商品を識別するための商品コードを人体通信によって送信可能なタッチタグを、商品毎に商品棚に貼付するとともに、作業者が装着するハンディ・ターミナルに、ピッキング用伝票から読み取った商品コードを記憶させて、当該ハンディ・ターミナルによって、作業者がタッチタグに近接したときにタッチタグから送信される商品コードを人体通信により受信し、受信した商品コードと記憶されている商品コードとが一致するか否かを照合し、その照合結果に応じて所定の音声を出力するように構成したものが知られている（特許文献１）。 As such a picking work support system, a touch tag capable of transmitting a product code for identifying a product by human body communication is attached to the product shelf for each product, and a picking slip is attached to a handy terminal worn by a worker. store the product code read from the handheld terminal, receive the product code transmitted from the touch tag by human body communication when the worker approaches the touch tag, and the received product code and the stored product code (Patent Document 1).

特開２０１０－６５９５号公報Japanese Patent Application Laid-Open No. 2010-6595

しかしながら、上記特許文献１の如き従来のピッキング作業支援システムは、ピッキング用伝票がバーコード等の商品コードのみによってピッキングすべき商品を特定するものであるため、汎用性が乏しく、初期導入にコストと手間を要する、という不具合があった。また、ピッキング用伝票にピッキングすべき商品の商品コードと異なる商品コードが記載されている場合には、所望した商品と異なる商品がピッキングされる事態に直結してしまう。 However, the conventional picking work support system such as the above-mentioned Patent Literature 1 specifies the goods to be picked only by means of the goods code such as the bar code on the picking slip. There was a problem that it required time and effort. Also, if a product code different from the product code of the product to be picked is described in the picking slip, it directly leads to the situation where the product different from the desired product is picked.

本発明の目的は、上記特許文献１の如き従来のピッキング作業支援システムの問題点を解消し、汎用性に富んでおり、安価かつ容易に導入することができる上、所望した商品と異なる商品がピッキングされてしまう事態がきわめて起こりにくい信頼性の高いピッキング作業支援システムを提供することにある。 An object of the present invention is to solve the problems of the conventional picking work support system such as the above-mentioned Patent Document 1, to be highly versatile, to be inexpensive and easy to introduce, and to provide a product different from the desired product. To provide a highly reliable picking work support system in which picking is extremely unlikely to occur.

本発明の内、請求項１に記載された発明は、作業者が倉庫内に保管された多数の商品の中から商品リストに表示された商品をピッキングする際に、そのピッキング作業者に対して、倉庫内における商品の保管位置に関する情報を提供するためのピッキング作業支援システムであって、各商品の倉庫内における位置情報を各商品に関する固有情報と対応付けて記憶させた記憶手段と、前記商品リストからピッキングすべき商品の固有情報を取得するための取得手段と、前記取得手段によって取得された商品の固有情報と対応したその商品の倉庫内における位置情報を、前記記憶手段から呼び出して、作業者に伝える伝達手段とを有しているとともに、前記記憶手段が、商品の倉庫内の位置情報を、商品に関する複数種類の固有情報と対応付けて記憶したものであることを特徴とするものである。 Among the present invention, the invention described in claim 1 provides a picking worker when picking a product displayed on a product list from a large number of products stored in a warehouse. 1. A picking work support system for providing information on a storage position of a product in a warehouse, the storage means storing location information of each product in the warehouse in association with unique information about each product; An acquisition means for acquiring the unique information of the product to be picked from the list, and the position information of the product in the warehouse corresponding to the unique information of the product acquired by the acquisition means are called from the storage means, and the operation is performed. and a means for transmitting information to a third party, and the storage means stores location information of the product in the warehouse in association with a plurality of types of unique information about the product. be.

請求項２に記載された発明は、請求項１に記載された発明において、前記記憶手段において商品の倉庫内の位置情報と対応付けて記憶された商品に関する複数種類の固有情報が、商品を撮影した画像から生成された情報、商品の固有番号、商品を表す記号、商品の名称の内の２種類以上を含んでいることを特徴とするものである。 The invention described in claim 2 is based on the invention described in claim 1, wherein the plurality of types of unique information related to the product stored in the storage means in association with the position information of the product in the warehouse is used to photograph the product. It is characterized by including two or more types of information generated from the image obtained from the image, the unique number of the product, the symbol representing the product, and the name of the product.

請求項３に記載された発明は、請求項１、または２に記載された発明において、前記記憶手段において商品の倉庫内の位置情報と対応付けて記憶された商品に関する複数種類の固有情報が、商品を複数のアングルで撮影した画像を含んでいることを特徴とするものである。 The invention described in claim 3 is the invention described in claim 1 or 2, wherein the plurality of types of unique information about the product stored in the storage means in association with the position information of the product in the warehouse are: It is characterized by including images of the product photographed from multiple angles.

請求項４に記載された発明は、請求項１～３のいずれかに記載された発明において、前記取得手段が、前記商品リストの画像を撮影することによってピッキングすべき商品の固有情報を取得することを特徴とするものである。 The invention recited in claim 4 is the invention recited in any one of claims 1 to 3, wherein the acquisition means acquires unique information of the product to be picked by photographing an image of the product list. It is characterized by

請求項５に記載された発明は、請求項１～４のいずれかに記載された発明において、前記伝達手段が、ピッキングすべき商品の倉庫内における位置情報を、作業者が装着するヘッドマウントデバイス上に、実際の風景と重ねて表示するものであることを特徴とするものである。 The invention recited in claim 5 is the invention recited in any one of claims 1 to 4, wherein the transmission means is a head-mounted device worn by a worker that transmits positional information in the warehouse of the product to be picked. Moreover, it is characterized in that it is superimposed on the actual landscape and displayed.

請求項１に記載のピッキング作業支援システムは、記憶手段が商品の倉庫内の位置情報を商品に関する複数種類の固有情報と対応付けて記憶したものであるため、異なる種類の固有情報で商品が特定された複数種類の商品リストを利用することができるので、汎用性に富んでおり、安価かつ容易に導入することができる。また、作業者によってピッキングされた商品が適正なものであるか否かを、記憶手段に記憶された異なる種類の固有情報に基づいて照合することができるので、商品リストで指定された商品を正確にピッキングすることができる。 In the picking work support system according to claim 1, since the storage means stores the position information of the product in the warehouse in association with a plurality of types of unique information related to the product, the product can be identified by different types of unique information. Since it is possible to use a plurality of types of product lists, it is highly versatile and can be introduced inexpensively and easily. In addition, since it is possible to verify whether or not the product picked by the worker is appropriate based on different types of unique information stored in the storage means, the product specified in the product list can be accurately identified. can be picked.

請求項２に記載のピッキング作業支援システムは、商品の倉庫内の位置情報を、商品を撮影した画像から生成された情報、商品の固有番号、商品を表す記号、商品の名称の内の２種類以上と対応付けて記憶したものであるため、きわめて汎用性に富んでいるので、非常に容易に導入することができる。また、商品リストで指定された商品を非常に正確にピッキングすることができる。 In the picking work support system according to claim 2, the positional information of the product in the warehouse is of two types: information generated from the photographed image of the product, the unique number of the product, the symbol representing the product, and the name of the product. Since it is stored in association with the above, it is extremely versatile and can be introduced very easily. Also, the goods specified in the goods list can be picked very accurately.

請求項３に記載のピッキング作業支援システムは、記憶手段において商品の倉庫内の位置情報と対応付けて記憶された商品に関する複数種類の固有情報の中に、商品を複数のアングルで撮影した画像に基づいて生成された情報が含まれているため、商品リストで指定された商品をきわめて正確にピッキングすることができる。 In the picking work support system according to claim 3, the plurality of types of unique information related to the product stored in the storage means in association with the position information of the product in the warehouse are stored in images of the product photographed from a plurality of angles. Because the information generated based on the product list is included, the product specified in the product list can be picked very accurately.

請求項４に記載のピッキング作業支援システムは、商品リストの画像を撮影することによって、ピッキングすべき商品の固有情報を短時間で確実に取得することができるので、ピッキング作業を非常に効率的なものとすることができる。 According to the picking work support system described in claim 4, by photographing the image of the product list, the specific information of the product to be picked can be reliably obtained in a short time, so the picking work can be performed very efficiently. can be

請求項４に記載のピッキング作業支援システムは、ピッキングすべき商品の倉庫内における位置情報が作業者が装着するヘッドマウントデバイス上に実際の風景と重ねて表示されるため、作業者がその位置情報を認識し易いので、ピッキング作業の手間をより軽減することができる。 In the picking work support system according to claim 4, the position information of the product to be picked in the warehouse is superimposed on the actual scenery on the head-mounted device worn by the worker. is easy to recognize, the labor of the picking work can be further reduced.

ピッキング作業支援システムの概念を示す説明図である。1 is an explanatory diagram showing the concept of a picking work support system; FIG. 商品が保管された倉庫内の様子を示す説明図（平面図）である。FIG. 3 is an explanatory diagram (plan view) showing a state in a warehouse where products are stored; 商品が収納された収納棚の様子を示す説明図（斜視図）である。It is an explanatory view (perspective view) showing a storage shelf in which products are stored. ヘッドマウントデバイスの制御機構を示すブロック図である。4 is a block diagram showing a control mechanism of the head mounted device; FIG. メインコンピュータの制御機構を示すブロック図である。4 is a block diagram showing a control mechanism of the main computer; FIG. メインコンピュータの記憶手段の商品情報記憶部に商品に関する情報が記憶されている様子を示す説明図である。FIG. 4 is an explanatory diagram showing how information about products is stored in a product information storage unit of storage means of a main computer; メインコンピュータの記憶手段の倉庫情報記憶部に倉庫に関する情報（フロアマーカーに関する情報）が記憶されている様子を示す説明図である。FIG. 4 is an explanatory diagram showing how information about a warehouse (information about a floor marker) is stored in a warehouse information storage section of a storage means of a main computer; メインコンピュータの記憶手段の倉庫情報記憶部に倉庫に関する情報（棚マーカーに関する情報）が記憶されている様子を示す説明図である。FIG. 4 is an explanatory diagram showing how information on warehouses (information on shelf markers) is stored in a warehouse information storage section of storage means of a main computer; ピッキング作業支援システムの作動内容を示すフローチャートである。4 is a flow chart showing operation contents of the picking work support system. ピッキング作業支援システムの作動内容を示すフローチャートである。4 is a flow chart showing operation contents of the picking work support system.

＜ピッキング作業支援システムの構造＞
以下、本発明に係るピッキング作業支援システムの一実施形態について、図面に基づいて詳細に説明する。図１は、作業者がピッキングリストで指定された商品を倉庫内でピッキングする際の作業を容易にするためのピッキング作業支援システムの概念図であり、ピッキング作業支援システムＳは、作業者Ｏが装着可能な眼鏡型のヘッドマウントデバイスＨを、インターネット等の通信ネットワークＮを介して、倉庫Ｉ外に設置されたデータベースとして機能するコンピュータＣ（サーバー）と接続することによって構成されている。 <Structure of picking work support system>
An embodiment of a picking work support system according to the present invention will be described in detail below with reference to the drawings. FIG. 1 is a conceptual diagram of a picking work support system for facilitating work when a worker picks a product specified in a picking list in a warehouse. A wearable eyeglass-type head-mounted device H is connected to a computer C (server) installed outside the warehouse I and functioning as a database via a communication network N such as the Internet.

また、図２は、作業者Ｏが商品Ｇのピッキングを行う倉庫Ｉの内部を示したものであり、倉庫Ｉの内部には、複数の収納棚Ｔ，Ｔ・・が規則正しく配置されており、それらの収納棚Ｔ，Ｔ・・の内部に、多数の商品Ｇ，Ｇ・・が保管（収納）されている。そして、倉庫Ｉの床面には、各ポイントの倉庫Ｉ内における位置（平面座標（ｘ、ｙ））を二次元コードで示したフロアマーカーＭｆ，Ｍｆ・・が表示されている。一方、図３は、収納棚Ｔ内に商品Ｇ，Ｇ・・が収納（保管）された状態を示したものであり、各収納棚Ｔ，Ｔ・・の各段の前面には、当該収納棚Ｔの識別番号、倉庫Ｉ内における位置（三次元座標（ｘ、ｙ、ｚ））を二次元コードで示した棚マーカーＭｓ，Ｍｓ・・が表示されている。また、収納棚Ｔ内に収納された各商品Ｇ，Ｇ・・には、商品番号（すなわち、識別番号である数字や文字等）、商品の識別番号を示す記号（バーコードや二次元コード等）、商品の名称（日本語、英語等）、商品を示すロコマーク等の情報を記載したラベルＬが貼着されている。 Moreover, FIG. 2 shows the inside of the warehouse I where the worker O picks the goods G. Inside the warehouse I, a plurality of storage shelves T, T . . . A large number of commodities G, G, . On the floor surface of the warehouse I, floor markers Mf, Mf, . On the other hand, FIG. 3 shows a state in which commodities G, G, . Shelf markers Ms, Ms, . In addition, each of the products G, G, . ), the name of the product (Japanese, English, etc.), and a label L on which information such as a loco mark indicating the product is attached.

また、図４は、ヘッドマウントデバイスＨの制御機構を示すブロック図であり、ヘッドマウントデバイスＨには、ピッキングリスト（商品リスト）からピッキングすべき商品の固有情報を取得するための取得手段として機能するカメラ（ＣＣＤカメラ）１９、コンピュータＣと信号の送受信を行うための受信手段１６および送信手段１７、ヘッドマウントデバイスＨの左右のレンズ上に、文字、図形、映像や動画等を、実際に目視されるものの像と重ねて表示するためのディスプレイ１８、作業者がマニュアルで信号の入力等をするための入力手段２０、カメラ１９で撮影した画像を処理するための画像処理手段１０、カメラ１９で撮影したコード（バーコードや二次元コード等）を読み取るためのコード読取手段９等が設けられている。また、ヘッドマウントデバイスＨには、ＣＰＵ１３、ＲＯＭ・ＲＡＭ等の記憶手段１４、クロック１２等を搭載した制御装置１１が内蔵されており、当該制御装置１１は、インターフェイス１５を介して、カメラ１９、受信手段１６、送信手段１７、ディスプレイ１８、入力手段２０、画像処理手段１０、コード読取手段９等と接続されている。加えて、ヘッドマウントデバイスＨには、多数（１，０００枚以上）のタグ付けされた商品のラベルの写真に基づいて作成した機械学習のオブジェクト検出器のモデルが内蔵されており、商品Ｇ，Ｇ・・のラベルＬおよびその表示内容をきわめて高い精度で認識することができるようになっている。 FIG. 4 is a block diagram showing the control mechanism of the head-mounted device H. The head-mounted device H functions as acquisition means for acquiring unique information of products to be picked from a picking list (product list). A camera (CCD camera) 19, a receiving means 16 and a transmitting means 17 for transmitting and receiving signals to and from the computer C, and characters, figures, images, moving images, etc. on the left and right lenses of the head-mounted device H are actually visually observed. A display 18 for superimposing and displaying an image of an object to be processed, an input means 20 for an operator to manually input a signal, etc., an image processing means 10 for processing an image taken by the camera 19, and a camera 19. A code reading means 9 or the like for reading a photographed code (bar code, two-dimensional code, etc.) is provided. The head-mounted device H also incorporates a control device 11 including a CPU 13, a storage means 14 such as ROM/RAM, a clock 12, and the like. It is connected to receiving means 16, transmitting means 17, display 18, input means 20, image processing means 10, code reading means 9, and the like. In addition, the head-mounted device H contains a machine-learning object detector model based on a large number (more than 1,000) of tagged product label photos. The label L of G . . . and its display content can be recognized with extremely high accuracy.

一方、図５は、データベースとして機能するメインコンピュータＣの制御機構を示すブロック図であり、メインコンピュータＣには、ヘッドマウントデバイスＨと信号の送受信を行うための受信手段２９および送信手段３０、管理者等がマニュアルで信号の入力等をするための入力手段３２、ヘッドマウントデバイスＨから送信された画像データを画像処理（画像解析）するための画像処理手段３３、ヘッドマウントデバイスＨから送信される画像データ等を表示するためのモニタ３１等が設けられている。また、メインコンピュータＣには、ＣＰＵ２３、ＲＯＭ・ＲＡＭ等の記憶手段２４、クロック２２等が設けられており、インターフェイス２８を介して、受信手段２９、送信手段３０、モニタ３１、入力手段３２、画像処理手段３３等と接続されている。 On the other hand, FIG. 5 is a block diagram showing the control mechanism of the main computer C that functions as a database. Input means 32 for manually inputting signals by a person, etc., image processing means 33 for performing image processing (image analysis) on image data transmitted from the head-mounted device H, and data transmitted from the head-mounted device H A monitor 31 and the like are provided for displaying image data and the like. Further, the main computer C is provided with a CPU 23, a storage means 24 such as a ROM/RAM, a clock 22, and the like. It is connected to the processing means 33 and the like.

さらに、メインコンピュータＣの記憶手段２４の中には、商品Ｇの識別情報等の商品Ｇに関する各種の情報を記憶するための商品情報記憶部（記憶領域）２５、倉庫Ｉ内に表示された各種のマーカー（Ｍｆ，Ｍｓ）の内容等の倉庫Ｉに関する各種の情報を記憶するための倉庫情報記憶部（記憶領域）２６、作業者や管理者のＩＤ等のユーザーに関する各種の情報を記憶するためのユーザー情報記憶部（記憶領域）２７が設けられている。 Further, in the storage means 24 of the main computer C, there are a product information storage section (storage area) 25 for storing various information related to the product G such as identification information of the product G, and various items displayed in the warehouse I. A warehouse information storage unit (storage area) 26 for storing various information about the warehouse I such as the contents of the markers (Mf, Ms), and for storing various information about users such as the IDs of workers and managers. A user information storage unit (storage area) 27 is provided.

図６は、商品情報記憶部２５に商品Ｇに関する情報が記憶されている様子を示したものであり、当該商品情報記憶部２５のＲＯＭ等の記憶領域においては、倉庫Ｉ内に保管（収納）されているすべての商品Ｇ，Ｇ・・の保管場所の位置（三次元座標）および収納棚Ｔの識別番号が、各商品Ｇ，Ｇ・・に貼着されたラベルＬに表示されている識別情報（すなわち、商品番号（商品の識別番号である数字や文字等）、商品の識別番号を示す記号（バーコードや二次元コード等）、商品の名称（日本語、英語等）、商品を示すロコマーク等の数値データ）と対応した状態で記憶されている。また、商品情報記憶部２５においては、各商品Ｇ，Ｇ・・の保管場所の位置（三次元座標）および収納棚Ｔの識別番号が、各商品Ｇ，Ｇ・・に貼着されたラベルＬを様々なアングルで撮影した複数の画像データと対応付けられて記憶されている。なお、ピッキング作業支援システムＳにおいては、倉庫Ｉ内に新たな商品Ｇが収納される毎に、当該商品Ｇを保管する場所の位置（三次元座標）および収納棚Ｔの識別番号を、その商品Ｇに貼着されたラベルＬに表示されている識別情報と対応させて商品情報記憶部２５（ＲＯＭ等の記憶領域）に記憶させる必要がある。 FIG. 6 shows how information about the product G is stored in the product information storage unit 25. In a storage area such as a ROM of the product information storage unit 25, storage (storage) is performed in the warehouse I. The position (three-dimensional coordinates) of the storage location of all the products G, G . Information (i.e., product number (numbers, letters, etc. that are product identification numbers), symbols that indicate product identification numbers (barcodes, two-dimensional codes, etc.), product names (Japanese, English, etc.), product descriptions Numerical data such as locomarks) are stored in correspondence with each other. In addition, in the product information storage unit 25, the position (three-dimensional coordinates) of the storage location of each product G, G . are stored in association with a plurality of image data shot at various angles. In the picking work support system S, each time a new product G is stored in the warehouse I, the position (three-dimensional coordinates) of the place where the product G is stored and the identification number of the storage shelf T are displayed. It is necessary to store in the product information storage unit 25 (a storage area such as a ROM) in association with the identification information displayed on the label L attached to G.

また、図７、図８は、倉庫情報記憶部２６に倉庫に関する情報が記憶されている様子を示したものであり、当該倉庫情報記憶部２６においては、図７の如く、倉庫Ｉ内の床面に表示されているフロアマーカーＭｆ，Ｍｆ・・の位置（倉庫Ｉの床面全体における平面座標）が、各フロアマーカーＭｆ，Ｍｆ・・の識別番号（倉庫Ｉ内の床面に表示されている二次元コードと対応したもの）と対応した状態で記憶されている。加えて、倉庫情報記憶部２６においては、倉庫Ｉ内の各収納棚Ｔ，Ｔ・・に表示されている棚マーカーＭｓ，Ｍｓ・・の位置（倉庫Ｉの内部全体における三次元座標）が、図８の如く、各棚マーカーＭｓ，Ｍｓ・・の識別番号（収納棚Ｔに表示されている二次元コードと対応したもの）と対応した状態で記憶されている。 7 and 8 show how information about warehouses is stored in the warehouse information storage unit 26. In the warehouse information storage unit 26, as shown in FIG. The positions of the floor markers Mf, Mf . (corresponding to the existing two-dimensional code). In addition, in the warehouse information storage unit 26, the positions of the shelf markers Ms, Ms, ... displayed on the storage shelves T, T, ... in the warehouse I (three-dimensional coordinates in the entire interior of the warehouse I) are As shown in FIG. 8, the identification number of each shelf marker Ms, Ms .

さらに、倉庫情報記憶部２６内には、倉庫Ｉの内部が三次元データ（ＶＲデータ）として記憶されており、当該三次元データにおいては、倉庫Ｉの各通路（収納棚Ｔと収納棚Ｔとの間のスペースや、収納棚Ｔと壁面との間のスペース）が、作業者が移動可能な領域・パスの集合体であるナビゲーションメッシュとして表現されている。また、当該三次元データにおいては、倉庫Ｉ内の床面に表示された各フロアマーカーＭｆ，Ｍｆ・・が、アンカーとして配置されている。 Furthermore, in the warehouse information storage unit 26, the interior of the warehouse I is stored as three-dimensional data (VR data). and the space between the storage shelf T and the wall surface) are expressed as a navigation mesh, which is a collection of areas/paths where the worker can move. Further, in the three-dimensional data, each floor marker Mf, Mf, .

＜ピッキング作業支援システムの作動内容＞
図９は、ピッキング作業支援システムＳを利用して、作業者Ｏが所望する商品Ｇのピッキング作業を行う際の処理内容を示すフローチャートである。このピッキング作業支援システムＳでは、ピッキング作業の指示書（発注書）としてピッキングリストが用いられる。当該ピッキングリストには、印字・手書きされた文字、あるいは、バーコードやＱＲコード（登録商標）等のコードによって、ピッキングすべき単一あるいは複数の商品を指定することができるが、この実施形態においては、ピッキングリストにピッキングすべき単一の商品Ｇ１が指定されているものとする。 <Operating contents of the picking work support system>
FIG. 9 is a flow chart showing the details of the processing when the picking work support system S is used to perform the picking work for the product G desired by the worker O. As shown in FIG. In this picking work support system S, a picking list is used as an instruction sheet (order sheet) for picking work. In the picking list, single or multiple products to be picked can be designated by printed/handwritten characters or codes such as bar codes and QR codes (registered trademark). assume that the picking list specifies a single item G1 to be picked.

作業者Ｏがピッキング作業を行う際には、まず、ステップ（以下、Ｓで示す）１で、ヘッドマウントデバイスＨに内蔵されたカメラ１９を利用して、ピッキングリスト（商品リスト）の内容を読み取る（撮像する）。また、そのようにピッキングリストの内容の読み取るととともに、カメラ１９を利用して作業者Ｏの近くのマーカー（フロアマーカーＭｆや棚マーカーＭｓ）の内容を読み取る。また、ヘッドマウントデバイスＨに内蔵された画像処理手段１０によって、カメラ１９によって撮影された画像の画像処理（画像解析）を実行する。なお、かかる画像処理により、ピッキングリストやマーカー等の画像のデータは、画像認識のモデルを作成するための機械学習用のデータとして利用可能な状態に変換される。そして、続くＳ２で、読み取って画像処理したピッキングリストおよびマーカーの画像のデータ（すなわち、画像認識のモデルのデータ）を、送信手段１７を利用して、ネットワークＮを介して、メインコンピュータＣに送信する。また、それらの画像処理後のデータ（画像認識のモデルのデータ）が、ヘッドマウントデバイスＨの記憶手段１４のＲＡＭ内に記憶される。さらに、ピッキングリストにおいてコードによって商品Ｇ１が指定されている場合には、ヘッドマウントデバイスＨのコード読取手段９によって当該コードが読み取られ、その読み取られた内容（識別情報）がヘッドマウントデバイスＨの記憶手段１４のＲＡＭ内に記憶される。 When the operator O performs the picking work, first, in step (hereinafter referred to as S) 1, the content of the picking list (product list) is read using the camera 19 built in the head mounted device H. (take an image). In addition to reading the contents of the picking list, the camera 19 is used to read the contents of the markers (floor marker Mf and shelf marker Ms) near the worker O. FIG. Further, the image processing means 10 incorporated in the head-mounted device H executes image processing (image analysis) of the image photographed by the camera 19 . Note that image data such as picking lists and markers are converted into a state that can be used as machine learning data for creating an image recognition model by such image processing. Then, in subsequent S2, the picking list and marker image data read and image-processed (i.e., image recognition model data) are transmitted to the main computer C via the network N using the transmission means 17. do. In addition, the data after the image processing (the data of the image recognition model) are stored in the RAM of the storage means 14 of the head mounted device H. FIG. Further, when the product G1 is designated by a code in the picking list, the code is read by the code reading means 9 of the head mounted device H, and the read content (identification information) is read from the head mounted device H. It is stored in the RAM of the storage means 14 .

上記の如く、ヘッドマウントデバイスＨがピッキングリストの画像のデータ（画像認識のモデルのデータ）を送信すると、メインコンピュータＣは、Ｓ３で、受信手段２９によって、それらのデータを受信する。そして、Ｓ４で、必要に応じて、画像処理手段３３を利用して、受信したピッキングリストの画像のデータを処理（解析）するとともに、Ｓ５で、その処理後のデータを、商品情報記憶部２５に記憶されている各商品Ｇ，Ｇ・・に関するデータ（図６）と照合する。 As described above, when the head-mounted device H transmits the data of the image of the picking list (the data of the image recognition model), the main computer C receives the data by the receiving means 29 in S3. Then, in S4, the image processing means 33 is used as necessary to process (analyze) the received picking list image data. are compared with the data (FIG. 6) on each product G, G, . . .

すなわち、ピッキングリストの画像のデータがバーコードやＱＲコード（登録商標）等のコードのデータである場合には、Ａ／Ｄ変換して、商品情報記憶部２５に記憶されている各商品Ｇ，Ｇ・・に関する識別情報（数値データ）と照合する。また、ピッキングリストの画像のデータが印字・手書きされた文字である場合には、ＯＣＲ（Optical character recognition）システムによって文字コードに変換して、商品情報記憶部２５に記憶されている各商品Ｇ，Ｇ・・に関する識別情報（数値データ）と照合する。 That is, when the image data of the picking list is code data such as a barcode or QR code (registered trademark), each product G, stored in the product information storage unit 25 is A/D-converted. It is collated with the identification information (numerical data) related to G. If the image data of the picking list is printed or handwritten characters, it is converted into character code by an OCR (Optical character recognition) system, and each product G, stored in the product information storage unit 25 is converted into character code. It is collated with the identification information (numerical data) related to G.

上記の如く、ピッキングリストの画像のデータと、商品情報記憶部２５に記憶されている各商品Ｇ，Ｇ・・に関する識別情報とを照合した後には、続くＳ６で、ピッキングリストの画像のデータと合致した識別情報を有する商品Ｇｄを選択し、商品情報記憶部２５のＲＯＭから、当該商品Ｇｄに関するすべてのデータ（「保管場所」のデータ（位置座標および収納棚Ｔ，Ｔ・・の識別データ）および商品Ｇｄの識別情報（数値データ、および、様々なアングルで撮影された商品ＧｄのラベルＬの画像データ））を呼び出して、記憶手段２４のＲＡＭ内に記憶する（すなわち、商品Ｇｄがピッキングすべき商品として認識される）。 As described above, after matching the image data of the picking list with the identification information about each product G, G, . . . A product Gd having matching identification information is selected, and all data related to the product Gd ("storage location" data (positional coordinates and identification of storage shelves T, T . . . ) are retrieved from the ROM of the product information storage unit 25 data) and identification information of the product Gd (numerical data and image data of the label L of the product Gd taken at various angles)) and stored in the RAM of the storage means 24 (that is, the product G d is recognized as the item to be picked).

また、上記の如く、Ｓ３でマーカーの画像のデータを受信すると、Ｓ４で、必要に応じて、画像処理手段３３を利用して、受信したマーカーの画像のデータを解析し、しかる後、その解析されたマーカーの内容に基づいて、倉庫情報記憶部２６に記憶されているフロアマーカーＭｆの情報（図７）および棚マーカーＭｓの情報（図８）を参照して、解析されたマーカーと対応した倉庫Ｉ内の位置（すなわち、作業者Ｏの現在位置）のデータを呼び出し、記憶手段２４のＲＡＭ内に記憶する。 Further, as described above, when the marker image data is received in S3, in S4, the image processing means 33 is used as necessary to analyze the received marker image data, and then the analysis is performed. Based on the contents of the analyzed marker, the information of the floor marker Mf (FIG. 7) and the information of the shelf marker Ms (FIG. 8) stored in the warehouse information storage unit 26 are referred to correspond to the analyzed marker. The data of the position in the warehouse I (that is, the current position of the worker O) is called up and stored in the RAM of the storage means 24 .

上記の如く、Ｓ３～Ｓ６によってピッキングすべき商品Ｇｄの「保管場所」およびマーカーと対応した倉庫Ｉ内の位置（作業者Ｏの現在位置）を呼び出して記憶手段２４のＲＡＭ内に記憶させた後には、Ｓ７で、当該倉庫Ｉ内の位置（作業者の位置）から商品Ｇｄの「保管場所」までの最短のルートを算出する。なお、かかる最短ルートの算出には、所謂“巡回セールスマン問題解決アルゴリズム”が利用される。また、最短ルートの算出は、記憶手段２４の倉庫情報記憶部２６内に記憶されている倉庫Ｉの内部の三次元データ（ＶＲデータ）が用いられる。 As described above, the "storage location" of the product Gd to be picked and the position in the warehouse I corresponding to the marker (the current position of the worker O) are called and stored in the RAM of the storage means 24 by S3 to S6. Later, in S7, the shortest route from the position (worker's position) in the warehouse I to the "storage place" of the product Gd is calculated. A so-called "traveling salesman problem solving algorithm" is used to calculate the shortest route. The three-dimensional data (VR data) inside the warehouse I stored in the warehouse information storage unit 26 of the storage means 24 is used for calculating the shortest route.

そして、上記の如く、当該倉庫Ｉ内の位置（作業者の位置）から商品Ｇｄの「保管場所」までの最短ルートを算出した後には、Ｓ８で、送信手段３０を利用して、ピッキングすべき商品Ｇｄの「保管場所」のデータを送信する。さらに、Ｓ９で、ＣＰＵ２３を利用して、Ｓ７において算出された最短ルートに基づいてナビゲーションデータ（たとえば、作業者Ｏの歩行すべき方向や距離等）を作成し、そのナビゲーションデータをネットワークＮを介して、ヘッドマウントデバイスＨに送信する。当該ナビゲーションデータの作成の際にも、記憶手段２４の倉庫情報記憶部２６内に記憶されている倉庫Ｉの内部の三次元データ（ＶＲデータ）が用いられる。 Then, as described above, after calculating the shortest route from the position (worker's position) in the warehouse I to the "storage place" of the product Gd , in S8, the transmission means 30 is used for picking. The data of the "storage location" of the product Gd to be delivered is transmitted. Furthermore, in S9, the CPU 23 is used to create navigation data (for example, the direction and distance in which the worker O should walk) based on the shortest route calculated in S7, and the navigation data is transmitted via the network N. and transmits it to the head-mounted device H. The three-dimensional data (VR data) inside the warehouse I stored in the warehouse information storage unit 26 of the storage means 24 is also used when creating the navigation data.

ヘッドマウントデバイスＨは、メインコンピュータＣからピッキングすべき商品Ｇｄの「保管場所」のデータおよびナビゲーションデータ（たとえば、歩行すべき方向や距離等）が送信されると、Ｓ１０で、受信手段１６によって、それらの情報を受信して、記憶手段１４のＲＡＭに記憶するとともに、Ｓ１１で、それらの情報をディスプレイ１８上に表示する（作業者Ｏの肉眼によって捉えられる実際の像と重ねて表示する）。作業者Ｏは、それらの情報を参考にすることによって、ピッキングリストに記載された商品Ｇ１（商品＝Ｇｄ）を効率良くピッキングすることが可能となる。 When the head-mounted device H receives from the main computer C the data of the "storage location" of the product Gd to be picked and the navigation data (for example, walking direction and distance), in S10, the reception means 16 , the information is received and stored in the RAM of the storage means 14, and in S11, the information is displayed on the display 18 (overlaid with the actual image captured by the naked eye of the worker O). . The worker O can efficiently pick the product G 1 (product=G d ) described in the picking list by referring to the information.

そして、ピッキング作業支援システムＳにおいては、作業者Ｏが、メインコンピュータＣからのデータ（すなわち、「保管場所」のデータおよびナビゲーションデータ）に基づいて、指定された「保管場所」に存在する商品Ｇをピッキングすると、その商品Ｇがピッキングリストに表示された商品Ｇ１（商品＝Ｇｄ）と一致しているか否かが判断される（すなわち、ピッキングされた商品Ｇが適正なものであるか否かが判断される）。 Then, in the picking work support system S, the worker O selects the goods G existing in the designated "storage location" based on the data from the main computer C (that is, the "storage location" data and the navigation data). is picked, it is determined whether or not the product G matches the product G 1 (product=G d ) displayed on the picking list (i.e., whether or not the picked product G is correct). is determined).

図１０は、作業者Ｏによってピッキングされた商品Ｇが適正なもの（すなわち、商品Ｇ１（商品＝Ｇｄ））であるか否かを判断する際の処理の内容を示すフローチャートである。かかる商品の照合処理においては、まず、Ｓ１０１において、ヘッドマウントデバイスＨのカメラ１９によって、作業者Ｏがピッキングした商品ＧのラベルＬの画像が撮像され、続くＳ１０２で、当該商品ＧのラベルＬの画像中にコード（バーコードあるいはＱＲコード（登録商標）等の二次元コード）が存在するか否かが判断される。 FIG. 10 is a flow chart showing the details of the processing when determining whether or not the product G picked by the worker O is proper (that is, the product G 1 (product=G d )). In the product matching process, first, in S101, the image of the label L of the product G picked by the worker O is captured by the camera 19 of the head-mounted device H, and in S102, the label L of the product G is captured. It is determined whether or not a code (two-dimensional code such as a bar code or QR code (registered trademark)) exists in the image.

そして、Ｓ１０２で“ＹＥＳ”と判断された場合には、続くＳ１０３で、ヘッドマウントデバイスＨに内蔵されたコードリーダー（バーコードリーダーあるいはＱＲコード（登録商標）リーダー）によって、カメラ１９によって撮像された商品ＧのラベルＬの画像中のコードが読み取られて、当該コードの内容が、ピッキングリストに表示された商品Ｇ１（商品＝Ｇｄ）の内容と照合される。しかる後、Ｓ１０４で、記憶手段１４のＲＡＭの内容が参照され、カメラ１９によって撮像された商品ＧのラベルＬの画像中のコードの内容が、ピッキングリストに表示された商品Ｇ１（商品＝Ｇｄ）の内容と一致するか否か判断される。 Then, when it is determined as "YES" in S102, in the following S103, the code reader (bar code reader or QR code (registered trademark) reader) built in the head-mounted device H captures an image with the camera 19. The code in the image of label L of product G is read, and the content of the code is compared with the content of product G 1 (product=G d ) displayed on the picking list. After that, in S104, the content of the RAM of the storage means 14 is referred to, and the content of the code in the image of the label L of the product G captured by the camera 19 is displayed on the picking list for the product G1 (product=G d ) is determined whether or not it matches the content of d).

そして、両者が一致すると判断された場合には、続くＳ１０５で、その一致する旨の情報を、ヘッドマウントデバイスＨのディスプレイ１８上に表示する。さらに、ヘッドマウントデバイスＨの記憶手段１４およびメインコンピュータＣの記憶手段２４のＲＡＭ内の情報（すなわち、商品Ｇｄに関する「保管場所」等のすべてのデータ）をリセットする。なお、ピッキングされた商品ＧのラベルＬにコードが表示されており、そのコードに基づいてピッキングされた商品Ｇが適正なものであるか否かを判断する場合には、１００％に近いきわめて高い信頼度で、ピッキングされた商品Ｇが適正なものであるか否か判断される。また、上記の如く、コードに基づいてピッキングされた商品Ｇが適正なものであるか否かを判断する場合には、メインコンピュータＣを介することなくヘッドマウントデバイスＨの内部で判断がなされるため、非常に短時間の内に判断が完了する。 Then, when it is determined that both match, information to the effect that they match is displayed on the display 18 of the head mounted device H in subsequent S105. In addition, the information in the RAMs of the storage means 14 of the head-mounted device H and the storage means 24 of the main computer C (that is, all data such as "storage location" regarding the product Gd ) is reset. In addition, a code is displayed on the label L of the picked product G, and when judging whether or not the picked product G is appropriate based on the code, it is very high, close to 100%. Whether or not the picked product G is proper is determined based on the reliability. Further, as described above, when judging whether or not the picked product G is appropriate based on the code, the judgment is made inside the head-mounted device H without going through the main computer C. , the decision is completed within a very short time.

一方、Ｓ１０４で、カメラ１９によって撮像された商品ＧのラベルＬの画像中のコードの内容が、ピッキングリストに表示された商品Ｇ１（商品＝Ｇｄ）の内容と一致しないと判断された場合には、Ｓ１０６で、その一致しない旨の情報を、ヘッドマウントデバイスＨのディスプレイ１８上に表示する。 On the other hand, if it is determined in S104 that the content of the code in the image of the label L of the product G captured by the camera 19 does not match the content of the product G1 (product= Gd ) displayed in the picking list. Then, information indicating that they do not match is displayed on the display 18 of the head mounted device H in S106.

また、Ｓ１０２で“ＮＯ”と判断された場合（すなわち、当該商品ＧのラベルＬの画像中にコードが存在しないと判断された場合）には、作業者Ｏがピッキングした商品ＧのラベルＬの画像が画像処理手段１０によって画像処理され、Ｓ１０７で、その画像処理後のデータ中に二項分類による認識が存在するか否か（すなわち、ピッキングした商品ＧのラベルＬの画像とヘッドマウントデバイスＨの記憶手段１４のＲＡＭ内に記憶されているピッキングすべき商品Ｇ１の画像データとの間で“Ｇ＝Ｇ１ ｏｒ Ｇ≠Ｇ１”の判断ができるか否か）が判断される。そして、Ｓ１０７で“ＹＥＳ”と判断された場合には、Ｓ１０４で、ヘッドマウントデバイスＨの記憶手段１４のＲＡＭの内容が参照され、カメラ１９によって撮像された商品ＧのラベルＬの画像データの内容が、ピッキングリストに表示された商品Ｇ１（商品＝Ｇｄ）の画像データの内容と一致するか否か判断される。 In addition, when it is determined "NO" in S102 (ie, when it is determined that the code does not exist in the image of the label L of the product G), the label L of the product G picked by the worker O The image is image-processed by the image processing means 10, and in S107, it is determined whether recognition by binary classification exists in the data after the image processing (that is, the image of the label L of the picked product G and the head-mounted device H It is determined whether or not "G=G1 or G ≠ G1 " can be determined between the image data of the product G1 to be picked and stored in the RAM of the storage means 14 of . If "YES" is determined in S107, the content of the RAM of the storage means 14 of the head-mounted device H is referred to in S104, and the content of the image data of the label L of the product G imaged by the camera 19. matches the content of the image data of the product G 1 (product=G d ) displayed in the picking list.

そして、両者が一致すると判断された場合には、コードを介して照合した場合と同様に、続くＳ１０５で、その一致する旨の情報を、ヘッドマウントデバイスＨのディスプレイ１８上に表示するとともに、メインコンピュータＣの記憶手段２４のＲＡＭ内の情報（すなわち、商品Ｇｄに関する「保管場所」等のすべてのデータ）をリセットする。なお、上記の如く、ピッキングされた商品ＧのラベルＬの画像に基づいて二項分類により商品Ｇが適正なものであるか否かを判断する場合には、概ね８０～１００％の信頼度で、ピッキングされた商品Ｇが適正なものであるか否か判断される。また、メインコンピュータＣを介することなくヘッドマウントデバイスＨの内部で２つの画像データが対比されるだけで判断されるので、きわめて短時間の内に判断が完了する。 Then, if it is determined that both match, in the following S105, information indicating that they match is displayed on the display 18 of the head-mounted device H, as in the case of matching via the code, and the main Reset the information in the RAM of the storage means 24 of the computer C (ie all the data regarding the item Gd , such as "storage location"). As described above, when judging whether or not the product G is appropriate by binary classification based on the image of the label L of the picked product G, the reliability is approximately 80 to 100%. , it is determined whether or not the picked product G is proper. In addition, since the judgment is made only by comparing the two image data inside the head-mounted device H without going through the main computer C, the judgment is completed within a very short time.

一方、Ｓ１０７で“ＮＯ”と判断された場合には、Ｓ１０８で、ヘッドマウントデバイスＨのカメラ１９によって撮像された商品ＧのラベルＬの画像がメインコンピュータＣに送信される。そして、商品ＧのラベルＬの画像がメインコンピュータＣに送信された後には、サーバーの画像処理ユニットで、ヘッドマウントデバイスＨから送信されたラベルＬの画像の画像処理が行われ、Ｓ１０９で、ラベルＬの画像内に、ＯＣＲ（Optical character recognition）可能な部分が存在するか否か判断される。 On the other hand, if "NO" is determined in S107, the image of the label L of the product G captured by the camera 19 of the head mounted device H is transmitted to the main computer C in S108. After the image of the label L of the product G is transmitted to the main computer C, the image processing unit of the server processes the image of the label L transmitted from the head-mounted device H, and in S109, the image of the label L is processed. It is determined whether or not there is a portion in the image of L that allows OCR (Optical Character Recognition).

そして、Ｓ１０９で“ＹＥＳ”と判断された場合（すなわち、当該商品ＧのラベルＬの画像中にＯＣＲ可能な部分が存在すると判断された場合）には、続くＳ１１０で、そのＯＣＲ可能な部分と、メインコンピュータＣの記憶手段２４の商品情報記憶部２５のＲＡＭ内に記憶されている商品Ｇｄの識別情報とが照合される。しかる後、Ｓ１０４で、ピッキングされた商品ＧのラベルＬの画像中のＯＣＲ化された部分の内容が、ピッキングリストに表示された商品Ｇ１（商品＝Ｇｄ）の内容と一致するか否か判断される。 If "YES" is determined in S109 (that is, if it is determined that an OCR-enabled portion exists in the image of the label L of the product G), then in S110, the OCR-enabled portion is , and the identification information of the product Gd stored in the RAM of the product information storage unit 25 of the storage means 24 of the main computer C is collated. After that, in S104, it is determined whether or not the content of the OCR converted part in the image of the label L of the picked product G matches the content of the product G 1 (product=G d ) displayed on the picking list. be judged.

そして、両者が一致すると判断された場合には、コードを介して照合した場合と同様に、続くＳ１０５で、その一致する旨の情報を、ヘッドマウントデバイスＨのディスプレイ１８上に表示するとともに、メインコンピュータＣの記憶手段２４のＲＡＭ内の情報（すなわち、商品Ｇｄに関する「保管場所」等のすべてのデータ）をリセットする。なお、ピッキングされた商品ＧのラベルＬの画像中にＯＣＲ可能な部分が存在しており、そのＯＣＲデータに基づいてピッキングされた商品Ｇが適正なものであるか否かを判断する場合には、概ね８０～１００％の信頼度で、ピッキングされた商品Ｇが適正なものであるか否か判断される。 Then, if it is determined that both match, in the following S105, information indicating that they match is displayed on the display 18 of the head-mounted device H, as in the case of matching via the code, and the main Reset the information in the RAM of the storage means 24 of the computer C (ie all the data regarding the item Gd , such as "storage location"). If there is a portion that can be OCRed in the image of the label L of the picked product G, and it is determined whether the picked product G is appropriate or not based on the OCR data, , it is determined whether or not the picked product G is appropriate with a reliability of approximately 80 to 100%.

一方、Ｓ１０９で“ＮＯ”と判断された場合（すなわち、当該商品ＧのラベルＬの画像中にＯＣＲ可能な部分が存在しないと判断された場合）には、当該商品ＧのラベルＬの画像を読み取ることができなかったと判断し、Ｓ１１１で、その旨の情報を、ヘッドマウントデバイスＨのディスプレイ１８上に表示する（なお、この場合には、ピッキングした商品Ｇとピッキングリストに表示された商品Ｇ１ との照合ができないため、作業者がマニュアルで照合作業を実施することになる）。 On the other hand, if it is determined "NO" in S109 (that is, if it is determined that there is no portion that can be OCRed in the image of the label L of the product G), the image of the label L of the product G is displayed. In S111, information to that effect is displayed on the display 18 of the head-mounted device H (in this case, the picked product G and the product G displayed on the picking list are displayed). 1 cannot be verified, the operator must manually perform the verification work).

また、ピッキング作業支援システムＳにおいては、作業者Ｏが、ピッキング作業を行っている間中、ヘッドマウントデバイスＨのカメラ１９によって作業者Ｏの付近のマーカー（フロアマーカーＭｆおよび棚マーカーＭｓ）の画像を撮像してメインコンピュータＣへ送信するステップと、それらのマーカーの画像の解析結果に対応した“ピッキングすべき商品Ｇの保管場所までの最短ルート”に関するデータをメインコンピュータＣから受信するステップとを繰り返すことによって、作業者Ｏがピッキングすべき商品Ｇ１の保管場所まで短時間で辿り着けるように、ヘッドマウントデバイスＨのディスプレイ１８の表示が更新される。 In the picking work support system S, the camera 19 of the head-mounted device H captures images of markers (floor markers Mf and shelf markers Ms) in the vicinity of the worker O while the worker O is performing the picking work. and transmitting to the main computer C, and the step of receiving from the main computer C the data on the "shortest route to the storage location of the product G to be picked" corresponding to the analysis results of the images of those markers. By repeating this, the display on the display 18 of the head - mounted device H is updated so that the worker O can quickly reach the storage location of the product G1 to be picked.

さらに、ピッキング作業支援システムＳにおいては、ピッキングリストに複数の商品Ｇ１，Ｇ２・・が表示されている場合には、作業者Ｏが、ピッキングリストに記載されたすべての商品商品Ｇ１，Ｇ２・・のピッキングを終了するまで、Ｓ１～Ｓ１１までのステップ（Ｓ１０１～Ｓ１１０の照合処理を含む）を繰り返し実行する。加えて、ピッキング作業支援システムＳにおいては、ピッキングリストに複数の商品Ｇ１，Ｇ２・・が表示されている場合には、Ｓ９で、作業者Ｏが最も短い移動距離で全ての商品商品Ｇ１，Ｇ２・・をピッキングできるルートを算出し、ヘッドマウントデバイスＨのディスプレイ１８上に表示するようになっている。 Furthermore, in the picking work support system S, when a plurality of products G 1 , G 2 . Until the picking of G 2 . In addition, in the picking work support system S, when a plurality of products G 1 , G 2 . A route for picking 1 , G 2 . . . is calculated and displayed on the display 18 of the head mounted device H.

＜ピッキング作業支援システムの効果＞
ピッキング作業支援システムＳは、上記の如く、各商品Ｇ，Ｇ・・の倉庫Ｉ内における位置情報を各商品Ｇ，Ｇ・・に関する固有情報と対応付けて記憶させた記憶手段２４と、商品リストからピッキングすべき商品Ｇの固有情報を取得するための取得手段であるカメラ１９と、カメラ１９によって取得した商品Ｇの固有情報と対応したその商品Ｇの倉庫Ｉ内における位置情報を、記憶手段２４から呼び出して、作業者Ｏに伝える伝達手段（すなわち、ヘッドマウントデバイスＨの送受信手段、メインコンピュータＣの送受信手段、および、ヘッドマウントデバイスＨのディスプレイ１８）とを有しているとともに、記憶手段２４が、商品Ｇの倉庫Ｉ内の位置情報を、商品Ｇに関する複数種類の固有情報と対応付けて記憶したものである。したがって、ピッキング作業支援システムＳは、異なる種類の固有情報で商品Ｇが特定された複数種類の商品リスト（ピッキングリスト）を利用することができるので、汎用性に富んでおり、安価かつ容易に導入することができる。その上、作業者Ｏによってピッキングされた商品Ｇが適正なものであるか否かを、記憶手段２４に記憶された異なる種類の固有情報に基づいて照合することができるので、商品リスト（ピッキングリスト）で指定された商品Ｇを正確にピッキングすることができる。 <Effects of picking work support system>
As described above, the picking work support system S includes the storage means 24 storing the position information of each product G, G, . A camera 19, which is an acquisition means for acquiring the unique information of the product G to be picked from the storage unit 24, and the position information of the product G in the warehouse I corresponding to the unique information of the product G acquired by the camera 19 are stored in the storage means 24. and a transmission means (that is, the transmission/reception means of the head-mounted device H, the transmission/reception means of the main computer C, and the display 18 of the head-mounted device H), and the storage means 24 However, the positional information of the product G in the warehouse I is stored in association with a plurality of types of specific information about the product G. FIG. Therefore, since the picking work support system S can use a plurality of types of product lists (picking lists) in which the products G are specified by different types of unique information, it is highly versatile, inexpensive and easy to introduce. can do. In addition, whether or not the product G picked by the worker O is proper can be collated based on different types of unique information stored in the storage means 24, so a product list (picking list) can be obtained. ) can be accurately picked.

また、ピッキング作業支援システムＳは、記憶手段２４において商品Ｇの倉庫Ｉ内の位置情報と対応付けて記憶された商品Ｇに関する複数種類の固有情報が、商品Ｇを撮影した画像から生成された情報、商品Ｇの固有番号、商品Ｇを表す記号、商品Ｇの名称、商品Ｇの形状の内の２種類以上を含んでいるため、きわめて汎用性に富んでいるので、非常に容易に導入することができる上、商品リスト（ピッキングリスト）で指定された商品Ｇを非常に正確にピッキングすることができる。 Further, in the picking work support system S, the plurality of types of unique information related to the product G stored in the storage means 24 in association with the position information of the product G in the warehouse I is information generated from the photographed image of the product G. , the unique number of the product G, the symbol representing the product G, the name of the product G, and the shape of the product G. In addition, it is possible to very accurately pick the product G specified in the product list (picking list).

さらに、ピッキング作業支援システムＳは、記憶手段２４において商品Ｇの倉庫Ｉ内の位置情報と対応付けて記憶された商品Ｇに関する複数種類の固有情報が、商品Ｇを複数のアングルで撮影した画像に基づいて生成された情報を含んでいるため、商品リスト（ピッキングリスト）で指定された商品Ｇをきわめて正確にピッキングすることができる。 Further, in the picking work support system S, the plurality of types of unique information about the product G stored in the storage means 24 in association with the position information of the product G in the warehouse I are converted into images of the product G photographed from a plurality of angles. Since it contains information generated based on the product list (picking list), the product G specified in the product list (picking list) can be picked very accurately.

加えて、ピッキング作業支援システムは、取得手段であるカメラ１９が、商品リストの画像を撮影することによってピッキングすべき商品Ｇの固有情報を取得するため、ピッキングすべき商品Ｇの固有情報を短時間で確実に取得することができるので、ピッキング作業を非常に効率的なものとすることができる。 In addition, in the picking work support system, the camera 19, which is the acquisition means, acquires the unique information of the product G to be picked by photographing the image of the product list. Since it is possible to reliably obtain the data at the time, the picking work can be made very efficient.

また、ピッキング作業支援システムは、商品Ｇの倉庫Ｉ内における位置情報を作業者Ｏに伝える伝達手段が、ピッキングすべき商品Ｇの倉庫Ｉ内における位置情報を、作業者Ｏが装着するヘッドマウントデバイスＨのディスプレイ１８上に、実際の風景と重ねて表示するものであり、作業者Ｏがその位置情報を認識し易いので、ピッキング作業の手間をより軽減することができる。 Further, in the picking work support system, the transmission means for transmitting the position information of the product G in the warehouse I to the worker O is a head-mounted device worn by the worker O that transmits the position information of the product G to be picked in the warehouse I. The actual scenery is displayed on the display 18 of H, and the operator O can easily recognize the position information, so that the trouble of the picking work can be further reduced.

＜ピッキング作業支援システムの変更例＞
本発明に係るピッキング作業支援システムは、上記した各実施形態の態様に何ら限定されるものではなく、ヘッドマウントデバイス（カメラ、ディスプレイ等）、メインコンピュータ（記憶手段）、画像処理手段等の構成を、本発明の趣旨を逸脱しない範囲で、必要に応じて適宜変更することができる。 <Example of modification of picking work support system>
The picking work support system according to the present invention is not limited to the aspects of the above-described embodiments, and includes a head-mounted device (camera, display, etc.), main computer (storage means), image processing means, etc. , can be changed as appropriate without departing from the scope of the present invention.

たとえば、本発明に係るピッキング作業支援システムは、上記実施形態の如く、ピッキングする商品の保管場所に関する情報を作業者が装着するヘッドマウントデバイスの表示画面上に表示するものに限定されず、ピッキングする商品の保管場所に関する情報を作業者が携帯する端末（スマートフォンやタブレット等）の表示画面上に表示するものや、ピッキングする商品の保管場所に関する情報を作業者に音声で伝達するもの等に変更することも可能である。さらに、本発明に係るピッキング作業支援システムは、上記実施形態の如く、商品リスト（ピッキングリスト）が紙媒体であるものに限定されず、商品リストが電子データであるもの（携帯端末等に表示可能であるもの）等に変更することも可能である。 For example, the picking work support system according to the present invention is not limited to displaying information about the storage location of the product to be picked on the display screen of the head-mounted device worn by the worker, as in the above embodiment. Change to display information on the storage location of products on the display screen of the terminal (smartphone, tablet, etc.) carried by the worker, or to communicate information on the storage location of the products to be picked to the worker by voice. is also possible. Furthermore, the picking work support system according to the present invention is not limited to a product list (picking list) that is a paper medium as in the above embodiment, but a product list that is electronic data (can be displayed on a mobile terminal or the like). , etc.).

また、本発明に係るピッキング作業支援システムは、上記実施形態の如く、ヘッドマウントデバイスのカメラが撮影した商品やエリアマーカーの画像をヘッドマウントデバイスおよびメインコンピュータの双方に設けられた画像処理手段によって画像処理（画像解析）するものに限定されず、メインコンピュータのみに画像処理手段を設けたもの等でも良い。さらに、本発明に係るピッキング作業支援システムは、上記実施形態の如く、各商品の倉庫内における位置情報を各商品に関する固有情報と対応付けて記憶させた記憶手段をメインコンピュータ側に設けたものに限定されず、当該記憶手段をヘッドマウントデバイス自体やクラウド上に設けたもの等に変更すことも可能である。 Further, in the picking work support system according to the present invention, as in the above embodiment, images of products and area markers captured by the camera of the head-mounted device are processed by image processing means provided in both the head-mounted device and the main computer. The processing (image analysis) is not limited to the one, and the image processing means may be provided only in the main computer. Further, in the picking work support system according to the present invention, as in the above-described embodiment, the main computer is provided with storage means for storing the position information of each product in the warehouse in association with the unique information about each product. It is not limited, and it is also possible to change the storage means to the head-mounted device itself or the one provided on the cloud.

本発明に係るピッキング作業支援システムは、上記の如く優れた効果を奏するものであるので、倉庫内等における商品・部品のピッキング作業を支援するためのシステムとして好適に用いることができる。 INDUSTRIAL APPLICABILITY The picking work support system according to the present invention exhibits excellent effects as described above, and can be suitably used as a system for supporting the picking work of products/parts in a warehouse or the like.

Ｓ・・ピッキング作業支援システム
Ｈ・・ヘッドマウントデバイス
Ｎ・・ネットワーク
Ｃ・・メインコンピュータ
Ｇ・・商品
Ｉ・・倉庫
Ｏ・・作業者 S... Picking work support system H... Head-mounted device N... Network C... Main computer G... Merchandise I... Warehouse O... Worker

本発明の内、請求項１に記載された発明は、作業者が倉庫内に保管された多数の商品の中から商品リストに表示された商品をピッキングする際に、そのピッキング作業者に対して、倉庫内における商品の保管位置に関する情報を提供するためのピッキング作業支援システムであって、各商品の倉庫内における位置情報を各商品に関する固有情報と対応付けて記憶させた記憶手段と、前記商品リストからピッキングすべき商品の固有情報を取得するための取得手段と、前記取得手段によって取得された商品の固有情報と対応したその商品の倉庫内における位置情報を、前記記憶手段から呼び出して、作業者に伝える伝達手段とを有しているとともに、前記記憶手段が、商品の倉庫内の位置情報を、商品に関する複数種類の固有情報と対応付けて記憶したものであり、かつ、作業者によってピッキングされた商品がピッキングリストに表示された商品と一致しているか否かを照合するものであり、その照合の際に、前記取得手段によって、ピッキングされた商品に付されたラベルの画像を取得し、そのラベルの画像中にコードが存在するか否かを判断し、コードが存在すると判断した場合には、そのコードに基づいて、ピッキングされた商品がピッキングリストに表示された商品と一致しているか否かを判断し、コードが存在しないと判断した場合には、前記取得手段が取得したラベルの画像処理後のデータ中に二項分類による認識が存在するか否かを判断し、二項分類による認識が存在する場合には、そのラベルの画像処理後のデータに基づいて、ピッキングされた商品がピッキングリストに表示された商品と一致しているか否かを判断し、二項分類による認識が存在しないと判断した場合には、前記取得手段が取得したラベルの画像中にＯＣＲ（Optical character recognition）可能な情報が存在するか否かを判断し、ＯＣＲ可能な情報が存在すると判断した場合には、そのＯＣＲ可能な情報に基づいて、ピッキングされた商品がピッキングリストに表示された商品と一致しているか否かを判断することを特徴とするものである。
Among the present invention, the invention described in claim 1 provides a picking worker when picking a product displayed on a product list from a large number of products stored in a warehouse. 1. A picking work support system for providing information on a storage position of a product in a warehouse, the storage means storing location information of each product in the warehouse in association with unique information about each product; An acquisition means for acquiring the unique information of the product to be picked from the list, and the position information of the product in the warehouse corresponding to the unique information of the product acquired by the acquisition means are called from the storage means, and the operation is performed. The storage means stores location information of the product in the warehouse in association with a plurality of types of unique information about the product , and the picking is performed by the worker. It is checked whether or not the picked product matches the product displayed on the picking list, and at the time of the matching, the image of the label attached to the picked product is acquired by the acquisition means. , determines whether a code exists in the image of the label, and if it determines that the code exists, based on the code, the picked product matches the product displayed in the picking list. If it is determined that the code does not exist, it is determined whether or not recognition by binary classification exists in the image-processed data of the label acquired by the acquisition means. If recognition by classification exists, based on the data after image processing of the label, it is determined whether the picked product matches the product displayed on the picking list, and recognition by binary classification If it is determined that there is no OCR (Optical Character Recognition) information in the image of the label acquired by the acquisition means, and if it is determined that there is information that can be OCR is characterized by determining whether or not the picked product matches the product displayed on the picking list based on the OCR-capable information .

Claims (5)

作業者が倉庫内に保管された多数の商品の中から商品リストに表示された商品をピッキングする際に、そのピッキング作業者に対して、倉庫内における商品の保管位置に関する情報を提供するためのピッキング作業支援システムであって、
各商品の倉庫内における位置情報を各商品に関する固有情報と対応付けて記憶させた記憶手段と、
前記商品リストからピッキングすべき商品の固有情報を取得するための取得手段と、
前記取得手段によって取得された商品の固有情報と対応したその商品の倉庫内における位置情報を、前記記憶手段から呼び出して、作業者に伝える伝達手段とを有しているとともに、
前記記憶手段が、商品の倉庫内の位置情報を、商品に関する複数種類の固有情報と対応付けて記憶したものであることを特徴とするピッキング作業支援システム。 To provide information on the storage location of products in the warehouse to the picker when the worker picks the products displayed in the product list from among the many products stored in the warehouse. A picking work support system,
storage means for storing location information of each product in the warehouse in association with specific information about each product;
Acquisition means for acquiring unique information of a product to be picked from the product list;
a transmission means for calling from the storage means the position information of the product in the warehouse corresponding to the unique information of the product acquired by the acquisition means, and transmitting the information to the worker;
A picking work support system, wherein the storage means stores positional information of the product in the warehouse in association with a plurality of types of specific information relating to the product. 前記記憶手段において商品の倉庫内の位置情報と対応付けて記憶された商品に関する複数種類の固有情報が、商品を撮影した画像から生成された情報、商品の固有番号、商品を表す記号、商品の名称の内の２種類以上を含んでいることを特徴とする請求項１に記載のピッキング作業支援システム。 The plurality of types of unique information related to the product stored in the storage means in association with the position information of the product in the warehouse are information generated from the photographed image of the product, the unique number of the product, the symbol representing the product, and the product. 2. The picking work support system according to claim 1, wherein two or more of the names are included. 前記記憶手段において商品の倉庫内の位置情報と対応付けて記憶された商品に関する複数種類の固有情報が、商品を複数のアングルで撮影した画像に基づいて生成された情報を含んでいることを特徴とする請求項１、または２に記載のピッキング作業支援システム。 The plurality of types of unique information about the product stored in the storage means in association with the position information of the product in the warehouse includes information generated based on images of the product photographed from a plurality of angles. 3. The picking work support system according to claim 1 or 2. 前記取得手段が、前記商品リストの画像を撮影することによってピッキングすべき商品の固有情報を取得することを特徴とする請求項１～３のいずれかに記載のピッキング作業支援システム。 4. The picking work support system according to any one of claims 1 to 3, wherein said acquisition means acquires the unique information of the product to be picked by photographing an image of said product list. 前記伝達手段が、ピッキングすべき商品の倉庫内における位置情報を、作業者が装着するヘッドマウントデバイス上に、実際の風景と重ねて表示するものであることを特徴とする請求項１～４のいずれかに記載のピッキング作業支援システム。 5. The method according to any one of claims 1 to 4, characterized in that said transmission means displays the positional information of the goods to be picked in the warehouse on a head-mounted device worn by the worker superimposed on the actual scenery. The picking work support system according to any one of the above.
JP2021019380A 2021-02-09 2021-02-09 Picking work support system Active JP6949340B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021019380A JP6949340B1 (en) 2021-02-09 2021-02-09 Picking work support system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021019380A JP6949340B1 (en) 2021-02-09 2021-02-09 Picking work support system

Publications (2)

Publication Number Publication Date
JP6949340B1 JP6949340B1 (en) 2021-10-13
JP2022122201A true JP2022122201A (en) 2022-08-22

Family

ID=78001371

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021019380A Active JP6949340B1 (en) 2021-02-09 2021-02-09 Picking work support system

Country Status (1)

Country Link
JP (1) JP6949340B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001130715A (en) * 1999-11-01 2001-05-15 Toohan:Kk Automatic slip issuing system
JP2016185845A (en) * 2015-03-27 2016-10-27 日本電気株式会社 Inspection processing apparatus, inspection processing method and program
WO2018030189A1 (en) * 2016-08-10 2018-02-15 コニカミノルタ株式会社 Terminal device
JP6591119B1 (en) * 2018-04-27 2019-10-16 三菱電機株式会社 Article management system and article management method
JP2019185684A (en) * 2018-04-17 2019-10-24 株式会社マーケットヴィジョン Display state determination system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001130715A (en) * 1999-11-01 2001-05-15 Toohan:Kk Automatic slip issuing system
JP2016185845A (en) * 2015-03-27 2016-10-27 日本電気株式会社 Inspection processing apparatus, inspection processing method and program
WO2018030189A1 (en) * 2016-08-10 2018-02-15 コニカミノルタ株式会社 Terminal device
JP2019185684A (en) * 2018-04-17 2019-10-24 株式会社マーケットヴィジョン Display state determination system
JP6591119B1 (en) * 2018-04-27 2019-10-16 三菱電機株式会社 Article management system and article management method

Also Published As

Publication number Publication date
JP6949340B1 (en) 2021-10-13

Similar Documents

Publication Publication Date Title
US9971154B1 (en) Pointer tracking for eye-level scanners and displays
EP3229169B1 (en) Code recognition device
US10198711B2 (en) Methods and systems for monitoring or tracking products in a retail shopping facility
JP5879725B2 (en) Sheet metal work support system
US20120070086A1 (en) Information reading apparatus and storage medium
JP6687199B2 (en) Product shelf position registration program and information processing device
JP6679891B2 (en) Inspection processing device, inspection system, inspection processing method and program
US20180068158A1 (en) Information processing device, information processing system, position reporting method, and program recording medium
US8126198B2 (en) Method for auditing and maintaining an ordered inventory
JP6218151B2 (en) Shipping work support method, shipping work support device, and shipping work support program
JP2018092464A (en) Article location management system and tag information reading terminal device
JP2019163172A (en) System, information processor, information processing method, program and storage medium
JP2022122201A (en) Picking work support system
WO2017179543A1 (en) Information processing device, information processing method, and program recording medium
US10762467B2 (en) Placement information registration device, placement information registration method, and placement information registration program
US11568564B2 (en) Mapping multiple views to an identity
JP2016128351A (en) Picking work support system, picking work support method, and picking work support program
KR102488693B1 (en) Manless parcel management system
JP2009129269A (en) Information reader and information reading method
JP2020194594A (en) Code recognition device
KR20220053255A (en) Augmented reality-based onboard material warehouse management system
JP6981495B2 (en) Inspection processing equipment
JP7304992B2 (en) code recognizer
JP7176638B2 (en) Verification position output system
CN116547702A (en) Identification device, identification method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210310

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20210310

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210802

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210818

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210910

R150 Certificate of patent or registration of utility model

Ref document number: 6949340

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150