JP2008280102A - Work support system, work management system, and work management method - Google Patents

Work support system, work management system, and work management method Download PDF

Info

Publication number
JP2008280102A
JP2008280102A JP2007123573A JP2007123573A JP2008280102A JP 2008280102 A JP2008280102 A JP 2008280102A JP 2007123573 A JP2007123573 A JP 2007123573A JP 2007123573 A JP2007123573 A JP 2007123573A JP 2008280102 A JP2008280102 A JP 2008280102A
Authority
JP
Japan
Prior art keywords
information
tag
moving image
conveyor
article
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007123573A
Other languages
Japanese (ja)
Other versions
JP5096787B2 (en
Inventor
Makoto Tanaka
田中  誠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2007123573A priority Critical patent/JP5096787B2/en
Publication of JP2008280102A publication Critical patent/JP2008280102A/en
Application granted granted Critical
Publication of JP5096787B2 publication Critical patent/JP5096787B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a work management system capable of easily extracting an article carried by a conveyer. <P>SOLUTION: The work management system comprises a tag scanning device 20 arranged with a plurality of tag readers by considering a predetermined position on an upstream side of the conveyer 60 as a detection target area, reading IC tag information attached to an article by scanning the detection target area, and sending the positional information and the time information of the article to a management server; and a moving image device 40 having a camera 42 shooting the conveyer and a monitor 41 indicating the moving image information of the camera 42, and sending the moving image information to the management server 10. The management server 10 specifies the article on the conveyer 60 of designated articles according to the positional information and the time information of the article and the moving image information. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、コンベアで搬送される物品を容易に抽出できる作業支援システム、作業管理システム、および作業管理方法に関する。   The present invention relates to a work support system, a work management system, and a work management method that can easily extract articles conveyed by a conveyor.

多種多様の生産が行われている生産工程で、不良品や特定の製品(以下、対象物という。)を作業者が抽出するために、作業指示書に従って、対象物の抽出作業が実施されている。しかしながら、コンベアで搬送される対象物を認識することは難しく、抽出漏れや、抽出誤りが発生していた。   In a production process in which a wide variety of production is performed, in order for an operator to extract defective products or specific products (hereinafter referred to as objects), the object extraction work is performed according to the work instructions. Yes. However, it is difficult to recognize the object conveyed by the conveyor, and an extraction omission or an extraction error has occurred.

そのため、生産ライン上で製品不良が発生したときに、製品に取り付けられたICタグの不良情報を読取り、その製品が載せられたパレットを自動的に生産ラインから払い出すことが開示されている(例えば、特許文献1参照)。   Therefore, it is disclosed that when a product defect occurs on the production line, the defect information of the IC tag attached to the product is read, and the pallet on which the product is placed is automatically paid out from the production line ( For example, see Patent Document 1).

生産ラインではないが、手荷物の管理における利便性を向上するために、コンベア上に流れる手荷物について、ICタグリーダで読み込まれた手荷物の識別番号と物品形状を案内表示器に表示する方法が開示されている(例えば、特許文献2参照)。
特開2003−208207号公報 特開2003−146438号公報
Although not a production line, in order to improve convenience in baggage management, a method of displaying the identification number of a baggage read by an IC tag reader and the shape of an item on a guidance display for baggage flowing on a conveyor is disclosed. (For example, refer to Patent Document 2).
JP 2003-208207 A JP 2003-146438 A

特許文献1では、コンベアで搬送される物品はパレット上に置かれ、パレットは一列に搬送されている。このため、ICタグリーダによりICタグの不良情報を読み込むことができる。しかしながら、コンベア上に非整列に置かれた複数の物品が搬送された場合には、抽出すべき物品を特定することができず、生産ラインから払い出すことができない問題がある。   In Patent Document 1, articles conveyed by a conveyor are placed on a pallet, and the pallets are conveyed in a row. For this reason, the defect information of the IC tag can be read by the IC tag reader. However, when a plurality of articles placed non-aligned on the conveyor are conveyed, there is a problem that the articles to be extracted cannot be specified and cannot be dispensed from the production line.

また、特許文献2では、同様に、コンベアで搬送される物品は、ほぼ整列された状態で載せられているため、コンベア上の手荷物の位置が判定できる。しかしながら、例えば、コンベア上に同一形状の複数の物品が並列に置かれると、物品を特定することができない問題がある。   Similarly, in Patent Document 2, since the articles conveyed by the conveyor are placed in an almost aligned state, the position of the baggage on the conveyor can be determined. However, for example, when a plurality of articles having the same shape are placed in parallel on the conveyor, there is a problem that the articles cannot be specified.

本発明は、前記の課題を解決するための発明であって、コンベアで搬送される物品を容易に抽出できる作業支援システム、作業管理システム、および作業管理方法を提供することを目的とする。   The present invention is an invention for solving the above-described problems, and an object thereof is to provide a work support system, a work management system, and a work management method that can easily extract articles conveyed by a conveyor.

前記目的を達成するため、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として配置され、コンベアで搬送される物品に添付された無線ICタグを検出する、個々に位置管理された複数のICタグ検出器(例えば、タグリーダ26)と、コンベア上における無線ICタグの位置を監視する処理装置(例えば、管理サーバ10)とを備え、ICタグ検出器が無線ICタグを検出すると、当該検出にかかる無線ICタグの検出位置と検出時刻とタグ情報とが特定され、これら特定された情報に基づいて作業を支援する作業支援システムにおいて、コンベアの所定の位置を撮影する動画像撮影装置(例えば、カメラ42)と、動画像撮影装置が撮影した動画像に画像処理を行い、所定の物品に視覚的なマーキング処理を行う画像処理装置(例えば、制御部44)と、動画像撮影装置が撮影し、画像処理装置がマーキング処理した動画像を表示する表示装置(例えば、モニタ41)とをさらに備え、処理装置は、ICタグ検出器が無線ICタグを検出することにより特定される、検出位置と検出時刻に加えて、コンベアの搬送速度に基づいて、検出した無線ICタグのコンベアにおける搬送方向の位置を算出し、算出した搬送方向の位置と、検出位置から得られるコンベアの幅方向の位置とから無線ICタグの位置を監視し、検出した無線ICタグのタグ情報が、所定のタグ情報であるか否かを判定し、所定のタグ情報であるときは、画像処理装置に、当該所定のタグ情報を有する無線ICタグのコンベアの幅方向の位置および搬送方向の位置を通知し、画像処理装置に当該通知された位置に対応する物品にマーキングをさせることを特徴とする。   In order to achieve the above-mentioned object, a predetermined position on the upstream side of the conveyor that conveys the article is arranged as a detection target area, and the position of the wireless IC tag attached to the article conveyed by the conveyor is detected and individually managed. A plurality of IC tag detectors (for example, tag reader 26) and a processing device (for example, management server 10) that monitors the position of the wireless IC tag on the conveyor, and when the IC tag detector detects the wireless IC tag, A moving image photographing device for photographing a predetermined position of a conveyor in a work support system that identifies a detection position, a detection time, and tag information of the wireless IC tag related to the detection, and supports the work based on the specified information. (For example, the camera 42) and image processing that performs image processing on a moving image captured by the moving image capturing device and performs visual marking processing on a predetermined article (For example, the control unit 44) and a display device (for example, a monitor 41) that displays a moving image that is captured by the moving image capturing device and processed by the image processing device, and the processing device detects the IC tag. In addition to the detection position and detection time specified by the device detecting the wireless IC tag, the position of the detected wireless IC tag in the conveyor direction is calculated based on the conveyor conveyance speed, and the calculated conveyance The position of the wireless IC tag is monitored from the position in the direction and the position in the width direction of the conveyor obtained from the detection position, and it is determined whether or not the tag information of the detected wireless IC tag is predetermined tag information. When it is the predetermined tag information, the image processing apparatus is notified of the position in the width direction and the conveyance direction of the conveyor of the wireless IC tag having the predetermined tag information, and the image processing apparatus Characterized in that for the marked article corresponding to known positions.

また、前記目的を達成するため、コンベアで搬送される物品の抽出作業を管理する管理サーバ(例えば、管理サーバ10)を有する作業管理システムは、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより物品に添付されているICタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置(例えば、タグスキャン装置20,30)と、コンベアを撮影する撮影部および撮影部の動画映像情報を表示する表示部を有し、管理サーバに動画映像情報を送付する動画映像装置(例えば、動画映像装置40,50)とを備え、管理サーバは、物品の位置情報および時間情報と、動画映像情報とを基に、指定された物品のコンベア上の物品を特定することを特徴とする。   In order to achieve the above object, a work management system having a management server (for example, the management server 10) that manages the extraction work of articles conveyed by a conveyor has a predetermined position on the upstream side of the conveyor that conveys articles. A tag scanning device (for example, a plurality of tag readers arranged as detection target areas, reads IC tag information attached to an article by scanning the detection target area, and sends position information and time information of the article to a management server (for example, , Tag scanning devices 20, 30), an imaging unit that captures the conveyor, and a display unit that displays the moving image information of the imaging unit, and a moving image device that sends the moving image information to the management server (for example, a moving image device) 40, 50), and the management server is configured to copy the designated article based on the position information and time information of the article and the video image information. And identifies the articles on the bare.

本発明によれば、コンベアで搬送される物品を容易に抽出することができる。   According to the present invention, an article conveyed by a conveyor can be easily extracted.

以下、本発明の実施形態について図面を参照して説明する。
図1は、作業管理システムを示す説明図である。図1において本発明の概要を説明する。作業管理システムは、管理サーバ10と、探索エリア用のタグスキャン装置20と、チェックエリア用のタグスキャン装置30と、探索エリア用の動画映像装置40と、チェックエリア用の動画映像装置50とを有している。管理サーバ10、タグスキャン装置20,30、および動画映像装置40,50は、ネットワーク65を介して接続されている。
Embodiments of the present invention will be described below with reference to the drawings.
FIG. 1 is an explanatory diagram showing a work management system. The outline of the present invention will be described with reference to FIG. The work management system includes a management server 10, a tag scanning device 20 for a search area, a tag scanning device 30 for a check area, a moving image video device 40 for a search area, and a moving image video device 50 for a check area. Have. The management server 10, the tag scanning devices 20 and 30, and the moving image devices 40 and 50 are connected via a network 65.

タグスキャン装置20は、コンベア60を搬送される製品70に付されたICタグ71の情報を、コンベア60の下部に設置された複数のタグリーダ26(図3参照)を用いて探索エリアをスキャンして読取る。動画映像装置40は、カメラ42を用いて、コンベア60で搬送される製品70を撮影する。管理サーバ10は、タグスキャン装置20からのスキャン情報(位置情報、タグ情報、時間情報)と、動画映像装置40からの動画映像情報とを基に、コンベア60の搬送速度を考慮して抽出する製品を特定し、動画映像装置40へ製品(特定物)のマーキング情報(図16参照)を送信する。動画映像装置40は、マーキング情報を受信すると、モニタ41に、作業指示として抽出する特定物を強調して表示する。   The tag scanning device 20 scans the search area for the information of the IC tag 71 attached to the product 70 conveyed on the conveyor 60 by using a plurality of tag readers 26 (see FIG. 3) installed at the lower part of the conveyor 60. And read. The moving image device 40 uses the camera 42 to photograph the product 70 conveyed by the conveyor 60. The management server 10 extracts based on the scanning information (position information, tag information, time information) from the tag scanning device 20 and the moving image information from the moving image device 40 in consideration of the conveyance speed of the conveyor 60. The product is specified, and the marking information (see FIG. 16) of the product (specific product) is transmitted to the video image device 40. When receiving the marking information, the moving image device 40 displays on the monitor 41 a specific object to be extracted as a work instruction with emphasis.

作業者は、モニタ41に表示された特定物を確認し抽出する。タグスキャン装置30および動画映像装置50は、チェック用の装置であり、作業者によって特定物の抽出が完了したか否かが、モニタ51により、確認することができる。   The worker confirms and extracts the specific object displayed on the monitor 41. The tag scanning device 30 and the moving image video device 50 are devices for checking, and it can be confirmed by the monitor 51 whether or not extraction of a specific object has been completed by an operator.

タグスキャン装置30は、コンベア60を搬送される製品70に付されたICタグ71の情報を、コンベア60の下部に設置された複数のタグリーダ36(図3参照)を用いてチェックエリアをスキャンして読取る。動画映像装置50は、カメラ52を用いて、コンベア60で搬送される製品70を撮影する。管理サーバ10は、タグスキャン装置30からのスキャン情報(位置情報、タグ情報、時間情報)と、動画映像情報とを基に、コンベア60の搬送速度を考慮して抽出する製品を特定し、動画映像装置50のモニタ51に、作業指示として特定物を強調して表示する。作業者が特定物の抽出ができている場合は、特定物は表示されず、作業者により抽出が完了していることが確認できる。   The tag scanning device 30 scans the check area for the information of the IC tag 71 attached to the product 70 conveyed on the conveyor 60 by using a plurality of tag readers 36 (see FIG. 3) installed at the lower part of the conveyor 60. And read. The moving image device 50 uses the camera 52 to photograph the product 70 conveyed by the conveyor 60. The management server 10 specifies a product to be extracted in consideration of the conveyance speed of the conveyor 60 based on the scan information (position information, tag information, time information) from the tag scanning device 30 and the moving image video information. A specific object is highlighted and displayed as a work instruction on the monitor 51 of the video apparatus 50. When the worker has extracted the specific object, the specific object is not displayed and it can be confirmed that the extraction is completed by the worker.

なお、タグリーダ26,36は、コンベア60の搬送面の下部に設置しているが、製品70の搬送に障害がなければ、コンベア60の搬送面と所定の間隔を設けて上面に設置してもよい。この場合、カメラ42,52の撮影エリアと重ならないようにするのがよい。   The tag readers 26 and 36 are installed at the lower part of the conveyor surface of the conveyor 60. However, if there is no obstacle to the conveyance of the product 70, the tag readers 26 and 36 may be installed on the upper surface with a predetermined distance from the conveyor surface of the conveyor 60. Good. In this case, it is preferable not to overlap with the shooting areas of the cameras 42 and 52.

図2は、作業指示画面を示す説明図である。図2(a)は、モニタ41の表示画面例を示し、図2(b)には、コンベア60上の製品70の搬送状態を示す。モニタ41の表示画面例では、カメラ42で撮影された実映像の上に特定物を強調色で強調されている。特定物の位置は、コンベア60上の不良品の位置に対応している。作業者は、モニタ41上に表示される特定物を確認することにより容易に特定物を抽出することができる。   FIG. 2 is an explanatory diagram showing a work instruction screen. 2A shows an example of a display screen of the monitor 41, and FIG. 2B shows a conveyance state of the product 70 on the conveyor 60. FIG. In the display screen example of the monitor 41, a specific object is emphasized with an emphasis color on an actual image captured by the camera 42. The position of the specific object corresponds to the position of the defective product on the conveyor 60. The operator can easily extract the specific object by confirming the specific object displayed on the monitor 41.

以下、作業管理システムについて、図面を参照して詳細に説明する。
図3は、作業管理システムの構成を示すブロック図である。管理サーバ10は、通信部13、制御部14、記憶部15、操作部16、およびモニタ17を有している。タグスキャン装置20は、通信部23、制御部24、記憶部25、および複数のタグリーダ26を有している。同様に、タグスキャン装置30は、通信部33、制御部34、記憶部35、および複数のタグリーダ36を有している。動画映像装置40は、通信部43、制御部44、記憶部45、カメラ42、およびモニタ41を有している。同様に、動画映像装置50は、通信部53、制御部54、記憶部55、カメラ52、およびモニタ51を有している。通信部13,23,33,43,53は、ネットワーク65を介して、データのやり取りを行うためのインタフェースである。制御部14,24,34,44,54は、記憶部15,25,35,45,55に格納されたプログラムを実行することで、各構成要素(例えば、通信部13,23,33,43,53)を統括的に制御し、様々な演算処理を行う。記憶部15,25,35,45,55は、プログラムやデータを永続的に記憶するために用いられるものであり、ハードディスクなどで構成される。モニタ17,41,51は、管理者、作業者などに対して、メッセージなどを表示するために用いられるものであり、CRT(Cathode Ray Tube)や液晶ディスプレイなどで構成される。操作部16は、データや命令などを入力するために用いられるものであり、キーボードやマウスなどで構成される。タグリーダ26,36は、ICタグ71(図1参照)を読取るためのリーダである。なお、ICタグ71(図1参照)は、RFID(Radio frequency identification)などの非接触の無線用ICタグである。ICタグ71に記憶されているICタグ情報については、図6にて説明する。
Hereinafter, the work management system will be described in detail with reference to the drawings.
FIG. 3 is a block diagram showing the configuration of the work management system. The management server 10 includes a communication unit 13, a control unit 14, a storage unit 15, an operation unit 16, and a monitor 17. The tag scanning device 20 includes a communication unit 23, a control unit 24, a storage unit 25, and a plurality of tag readers 26. Similarly, the tag scanning device 30 includes a communication unit 33, a control unit 34, a storage unit 35, and a plurality of tag readers 36. The moving image device 40 includes a communication unit 43, a control unit 44, a storage unit 45, a camera 42, and a monitor 41. Similarly, the moving image device 50 includes a communication unit 53, a control unit 54, a storage unit 55, a camera 52, and a monitor 51. The communication units 13, 23, 33, 43 and 53 are interfaces for exchanging data via the network 65. The control units 14, 24, 34, 44, 54 execute the programs stored in the storage units 15, 25, 35, 45, 55, thereby causing each component (for example, the communication units 13, 23, 33, 43). , 53) is comprehensively controlled to perform various arithmetic processes. The storage units 15, 25, 35, 45, and 55 are used for permanently storing programs and data, and are configured with a hard disk or the like. The monitors 17, 41, 51 are used for displaying messages and the like to managers, workers, and the like, and are composed of a CRT (Cathode Ray Tube), a liquid crystal display, or the like. The operation unit 16 is used for inputting data, commands, and the like, and includes a keyboard, a mouse, and the like. The tag readers 26 and 36 are readers for reading the IC tag 71 (see FIG. 1). The IC tag 71 (see FIG. 1) is a non-contact wireless IC tag such as RFID (Radio frequency identification). The IC tag information stored in the IC tag 71 will be described with reference to FIG.

タグスキャン装置20は、管理サーバ10から、抽出製品登録情報(抽出すべきタグID)を受信すると、検索エリア(図1参照)に配置された複数のタグリーダ26により、検索エリアをスキャンし、読取ったスキャン情報を管理サーバ10に送信する。スキャン情報にはタグID、位置情報、時間情報が含まれる。抽出製品登録情報、スキャン情報については、図10〜図12にて説明する。   Upon receiving the extracted product registration information (tag ID to be extracted) from the management server 10, the tag scanning device 20 scans and reads the search area with a plurality of tag readers 26 arranged in the search area (see FIG. 1). The scanned information is transmitted to the management server 10. The scan information includes a tag ID, position information, and time information. The extracted product registration information and the scan information will be described with reference to FIGS.

同様に、タグスキャン装置30は、管理サーバ10から、抽出すべきタグIDを受信すると、検索エリア(図1参照)に配置された複数のタグリーダ36により、検索エリアをスキャンし、読取ったスキャン情報を管理サーバ10に送信する。スキャン情報にはタグID、位置情報、時間情報が含まれる。   Similarly, when the tag scanning device 30 receives a tag ID to be extracted from the management server 10, the tag scanning device 30 scans the search area with the plurality of tag readers 36 arranged in the search area (see FIG. 1), and reads the scanned information. Is transmitted to the management server 10. The scan information includes a tag ID, position information, and time information.

図4は、タグスキャン装置のタグリーダ配置構成を示す説明図である。図4に示すように(適宜図1、図3参照)、タグスキャン装置20,30のタグリーダ26,36は、コンベア60の下部に複数設置され、探索エリアまたはチェックエリアを通過するICタグ71の識別情報を読取る。図4においては、製品の流れ(X座標方向)に対し、検索エリアを10等分し、X座標と直交するY座標に対して、コンベア60の幅を10等分している。各区画(X座標.Y座標)に関連付けて、複数のタグリーダ26,36が配置されている。これにより、ICタグ71の位置情報は、例えば、(X座標.Y座標)=(4.3)として得ることができる。   FIG. 4 is an explanatory diagram showing a tag reader arrangement configuration of the tag scanning device. As shown in FIG. 4 (see FIGS. 1 and 3 as appropriate), a plurality of tag readers 26 and 36 of the tag scanning devices 20 and 30 are installed below the conveyor 60, and the IC tags 71 passing through the search area or check area are arranged. Read identification information. In FIG. 4, the search area is equally divided into 10 with respect to the product flow (X coordinate direction), and the width of the conveyor 60 is equally divided with respect to the Y coordinate orthogonal to the X coordinate. A plurality of tag readers 26 and 36 are arranged in association with each section (X coordinate. Y coordinate). Thereby, the position information of the IC tag 71 can be obtained, for example, as (X coordinate. Y coordinate) = (4.3).

図3に戻り、動画映像装置40は、管理サーバ10から撮影開始情報を受信すると、カメラ42からのコンベア60の動画映像情報を、モニタ41に映すとともに、管理サーバ10に送信する。また、抽出製品情報を受信すると、動画映像情報の抽出製品にマーキング処理を施し、モニタ41に映す。   Returning to FIG. 3, when receiving the shooting start information from the management server 10, the moving image device 40 displays the moving image information of the conveyor 60 from the camera 42 on the monitor 41 and transmits it to the management server 10. When the extracted product information is received, the extracted product of the moving image information is marked and displayed on the monitor 41.

同様に、動画映像装置50は、管理サーバ10から撮影開始情報を受信すると、カメラ52からのコンベア60の動画映像情報を、モニタ51に映すとともに、管理サーバ10に送信する。また、抽出製品情報を受信すると、動画映像情報の抽出製品にマーキング処理を施し、モニタ51に映す。   Similarly, when receiving the shooting start information from the management server 10, the moving image device 50 displays the moving image information of the conveyor 60 from the camera 52 on the monitor 51 and transmits it to the management server 10. When the extracted product information is received, the extracted product of the moving image information is marked and displayed on the monitor 51.

管理サーバ10は、操作部16から作業指示されると、抽出製品登録情報を、タグスキャン装置20に送信するとともに、撮影開始情報を動画映像装置40に送信する。そして、タグスキャン装置20からスキャン情報を受信するとともに、動画映像装置40から動画映像情報を受信する。管理サーバ10は、スキャン情報と動画映像情報を基に、抽出製品を特定すると、動画映像装置40に抽出製品情報を送信する。管理サーバ10の機能は図5にてさらに詳しく説明する。   When a work instruction is given from the operation unit 16, the management server 10 transmits the extracted product registration information to the tag scanning device 20 and transmits the shooting start information to the moving image video device 40. Then, the scan information is received from the tag scanning device 20 and the moving image information is received from the moving image device 40. When the management server 10 identifies the extracted product based on the scan information and the moving image information, the management server 10 transmits the extracted product information to the moving image device 40. The function of the management server 10 will be described in more detail with reference to FIG.

図5は、管理サーバの機能を示す構成図である。管理サーバ10の制御部14(図3参照)は、スキャン情報処理部87と、スキャン情報解析部88と、スキャン情報蓄積部89と、動画映像処理部81と、動画映像解析部82と、動画映像蓄積部83と、判定部86と、抽出製品監視処理部85と、編集部84と、および抽出製品情報格納部90を備える。記憶部15(図3参照)には、設備管理DB91と、品質管理DB92と、抽出製品登録情報DB93とを備える。   FIG. 5 is a configuration diagram illustrating functions of the management server. The control unit 14 (see FIG. 3) of the management server 10 includes a scan information processing unit 87, a scan information analysis unit 88, a scan information storage unit 89, a moving image video processing unit 81, a moving image analysis unit 82, and a moving image A video storage unit 83, a determination unit 86, an extracted product monitoring processing unit 85, an editing unit 84, and an extracted product information storage unit 90 are provided. The storage unit 15 (see FIG. 3) includes an equipment management DB 91, a quality management DB 92, and an extracted product registration information DB 93.

スキャン情報処理部87は、通信部13を介して、タグスキャン装置20(図3参照)からスキャン情報を受信すると、スキャン情報解析部88とスキャン情報蓄積部89に送信する。スキャン情報解析部88は、スキャン情報から抽出製品の位置情報を確定する。   Upon receiving scan information from the tag scanning device 20 (see FIG. 3) via the communication unit 13, the scan information processing unit 87 transmits the scan information to the scan information analysis unit 88 and the scan information storage unit 89. The scan information analysis unit 88 determines the position information of the extracted product from the scan information.

一方、動画映像処理部81は、通信部13を介して、動画映像装置40(図3参照)から動画像情報を受信すると、動画映像解析部82と動画映像蓄積部83に送信する。動画映像解析部82は、動画像情報から、対象物を輪郭処理などにより抽出し、対象物の位置情報を確定する。判定部86は、抽出製品情報格納部90から読み出した抽出製品登録情報と、スキャン情報解析部88から取得した抽出製品の位置情報と、動画映像解析部82から取得した製品の位置情報とから、抽出製品か否かを判定する。抽出製品であると判定されると、抽出製品監視処理部85は、コンベア速度(図7参照)などを考慮して抽出製品の所定時間後の位置情報を算出し、編集部84へ送付する。また、抽出製品監視処理部85は、処理結果に不具合などあれば(例えば、推定位置に該当する製品が存在しないならば)、不具合情報を動画映像蓄積部83およびスキャン情報蓄積部89に送信するとともに、再度、動画映像解析部82およびスキャン情報解析部88に問合せる。編集部84は、所定時間後の位置情報に基づいてマーキング情報を作成し、通信部13を介して、動画映像装置40に、マーキング情報を送信する。なお、さらに詳細な説明は、図16にて行う。なお、抽出製品情報格納部90は、操作部16(図3参照)からの抽出条件に基づいて、判定部86に入力される抽出製品登録情報の一時的な記憶格納部である。   On the other hand, when the moving image information processing unit 81 receives the moving image information from the moving image device 40 (see FIG. 3) via the communication unit 13, the moving image processing unit 81 transmits the moving image information to the moving image analysis unit 82 and the moving image storage unit 83. The moving image analysis unit 82 extracts the object from the moving image information by contour processing or the like, and determines the position information of the object. The determination unit 86 includes the extracted product registration information read from the extracted product information storage unit 90, the extracted product position information acquired from the scan information analysis unit 88, and the product position information acquired from the video image analysis unit 82. Determine whether it is an extracted product. When it is determined that the product is an extracted product, the extracted product monitoring processing unit 85 calculates the positional information of the extracted product after a predetermined time in consideration of the conveyor speed (see FIG. 7) and sends it to the editing unit 84. Further, the extracted product monitoring processing unit 85 transmits the defect information to the moving image storage unit 83 and the scan information storage unit 89 if there is a defect in the processing result (for example, if there is no product corresponding to the estimated position). At the same time, the moving image analysis unit 82 and the scan information analysis unit 88 are inquired again. The editing unit 84 creates marking information based on the position information after a predetermined time, and transmits the marking information to the video image device 40 via the communication unit 13. Further detailed description will be given with reference to FIG. The extracted product information storage unit 90 is a temporary storage unit for the extracted product registration information input to the determination unit 86 based on the extraction conditions from the operation unit 16 (see FIG. 3).

図6は、ICタグに記憶されるICタグ情報を示す説明図である。ICタグ71には、タグID、ロット番号(ロットNo.)、製品コード、製造工場、ライン番号(ラインNo.)、製造日、保障期限、保管期限が記憶されている。図6によれば、例えば、タグIDがaaaの場合、ロットNo.が20070203−3AAA、製品コードがAAAAであり、NK工場の3番ラインで製造されていることがわかる。また、タグIDのaaaとbbbとは同じ情報が記録されていることから、同一製品、同一ロット、同一製造ラインで製造されたこともわかる。   FIG. 6 is an explanatory diagram showing IC tag information stored in the IC tag. The IC tag 71 stores a tag ID, a lot number (lot No.), a product code, a manufacturing factory, a line number (line No.), a manufacturing date, a warranty expiration date, and a storage expiration date. According to FIG. 6, for example, when the tag ID is aaa, the lot number. Is 7070203-3AAA and the product code is AAAA, which is manufactured on the third line of the NK factory. Further, since the same information is recorded in the tag IDs “aa” and “bbb”, it can be understood that they are manufactured in the same product, the same lot, and the same manufacturing line.

図7は、設備管理DBに記憶される設備使用情報テーブルを示す説明図である。設備管理DB91には、搬出ライン番号(搬出ラインNo.)、開始予定時間、終了予定時間、開始実績時間、終了実績時間、ロット番号(ロットNo.)、コンベア速度、担当者が記憶されている。図7によれば、例えば、搬出ラインの15番は、9時50から開始され、ロットNo.が20070203−3AAAの製品が、コンベア速度0.5m/sで搬送されていることがわかる。   FIG. 7 is an explanatory diagram showing an equipment usage information table stored in the equipment management DB. The facility management DB 91 stores an unloading line number (unloading line No.), an estimated start time, an estimated end time, an actual start time, an actual end time, a lot number (lot No.), a conveyor speed, and a person in charge. . According to FIG. 7, for example, No. 15 on the carry-out line starts at 9:50, and lot No. It can be seen that product No. 2070203-3AAA is being conveyed at a conveyor speed of 0.5 m / s.

図8は、品質管理DBに記憶される品質管理情報テーブルを示す説明図である。品質管理DB92は、ロット番号(ロットNo.)、製品コード、製造工場、ライン番号(ラインNo.)、搬送ライン番号(搬送ラインNo.)、製造日、保障期限、保管期限、タグID、検査予定数量、検査場数量、検査実績数量、品質情報、担当者が記憶されている。特に、検査結果に重要となる品質情報は、良品の場合フラグ値は0であり、不良品の場合フラグ値は1である。図8によれば、例えば、タグIDがaaaの場合は不良品とされていることがわかる。   FIG. 8 is an explanatory diagram showing a quality management information table stored in the quality management DB. The quality management DB 92 includes a lot number (lot No.), product code, manufacturing factory, line number (line No.), transport line number (transport line No.), manufacturing date, warranty period, storage period, tag ID, and inspection. The planned quantity, inspection site quantity, actual inspection quantity, quality information, and person in charge are stored. In particular, the quality information that is important for the inspection result has a flag value of 0 for non-defective products and a flag value of 1 for defective products. According to FIG. 8, for example, when the tag ID is aaa, it is understood that the product is defective.

図9は、抽出製品登録情報DBに記憶される抽出管理情報テーブルを示す説明図である。抽出製品登録情報DB93は、品質情報が不良品の製品で、抽出状況を管理するデータベースであり、ロット番号(ロットNo.)、製品コード、製造工場、ライン番号(ラインNo.)、搬送ライン番号(搬送ラインNo.)、製造日、保障期限、保管期限、タグID、品質情報、抽出情報、担当者が記憶されている。特に、抽出結果に重要となる抽出情報は、未抽出の場合フラグ値は0であり、抽出完了(抽出完)の場合フラグ値は1である。   FIG. 9 is an explanatory diagram showing an extraction management information table stored in the extracted product registration information DB. The extracted product registration information DB 93 is a database that manages the extraction status of products whose quality information is inferior, and includes a lot number (lot No.), a product code, a manufacturing factory, a line number (line No.), and a transport line number. (Conveyance line No.), manufacturing date, warranty deadline, storage deadline, tag ID, quality information, extraction information, and person in charge are stored. In particular, the extraction information that is important for the extraction result has a flag value of 0 when not extracted, and a flag value of 1 when extraction is complete (extraction is complete).

図10は、抽出製品のタグIDを示す説明図である。図10には(適宜図3、図5参照)、管理サーバ10からタグスキャン装置20またはタグスキャン装置30に送信される抽出製品登録情報の一例として、タグIDを示している。他の抽出製品登録情報には、図9に示すように、ロット番号(ロットNo.)、製品コード、製造工場、ライン番号(ラインNo.)、製造日、保障期限、保管期限があり、図6のICタグ情報に含まれるものであればよい。抽出製品のタグID情報は、抽出製品情報格納部90(図5参照)に格納されており、判定部86において判定する情報として利用される。   FIG. 10 is an explanatory diagram showing the tag ID of the extracted product. FIG. 10 (see FIGS. 3 and 5 as appropriate) shows a tag ID as an example of extracted product registration information transmitted from the management server 10 to the tag scanning device 20 or the tag scanning device 30. As shown in FIG. 9, other extracted product registration information includes a lot number (lot No.), a product code, a manufacturing factory, a line number (line No.), a manufacturing date, a warranty period, and a storage period. 6 may be included in the IC tag information. The tag ID information of the extracted product is stored in the extracted product information storage unit 90 (see FIG. 5) and is used as information determined by the determination unit 86.

図11は、タグリーダのスキャン情報を示す説明図である。タグスキャン装置20の制御部24(図3参照)は、タグリーダ26からのスキャン情報を記憶部25に格納する。スキャン情報には、X座標、Y座標、タグID、スキャン時の時間(時刻)が記憶されている。図11によれば、例えば、探索エリア内にタグIDがaaaとbbbの製品があることがわかる。タグスキャン装置30においてもスキャン情報は同様である。   FIG. 11 is an explanatory diagram showing scan information of the tag reader. The control unit 24 (see FIG. 3) of the tag scanning device 20 stores the scan information from the tag reader 26 in the storage unit 25. The scan information stores an X coordinate, a Y coordinate, a tag ID, and a time (time) at the time of scanning. According to FIG. 11, for example, it can be seen that there are products with tag IDs aaa and bbb in the search area. The scan information is the same in the tag scanning device 30.

図12は、抽出製品に該当するタグリーダのスキャン情報を示す説明図である。タグスキャン装置20の制御部24(図3参照)は、図11に示したスキャン情報から抽出製品に該当するスキャン情報を、管理サーバ10へ送信する。送信するスキャン情報には、X座標、Y座標、タグID、スキャン時の時間(時刻)が含まれる。図12によれば、図10に示す管理サーバ10から送信されたタグIDがaaaであるので、タグIDがaaaのスキャン情報であることがわかる。タグスキャン装置30においても送信するスキャン情報は同様である。   FIG. 12 is an explanatory diagram showing scan information of the tag reader corresponding to the extracted product. The control unit 24 (see FIG. 3) of the tag scanning device 20 transmits scan information corresponding to the extracted product from the scan information illustrated in FIG. The scan information to be transmitted includes an X coordinate, a Y coordinate, a tag ID, and a scan time (time). According to FIG. 12, since the tag ID transmitted from the management server 10 shown in FIG. 10 is aaa, it is understood that the tag ID is scan information of aaa. The scan information transmitted in the tag scanning device 30 is the same.

図13は、動画映像情報を示す説明図である。動画映像装置40,50から管理サーバ10に送信される動画映像情報は、X座標、Y座標、色相、明度、彩度、撮影の時間(時刻)である。図13によれば、色には、色相(色合いの違い)、明度(明るさの違い)、彩度(鮮やかさの違い)の3つの属性があり、全ての色はこの組み合わせで表現でき、しかも256の分解能で表現されている。   FIG. 13 is an explanatory diagram showing moving image information. The moving image information transmitted from the moving image devices 40 and 50 to the management server 10 includes the X coordinate, the Y coordinate, the hue, the brightness, the saturation, and the shooting time (time). According to FIG. 13, a color has three attributes of hue (difference in hue), lightness (difference in brightness), and saturation (difference in vividness), and all colors can be expressed in this combination. Moreover, it is expressed with a resolution of 256.

図14は、抽出製品情報を示す説明図である。管理サーバ10から動画映像装置40,50へ送信される抽出製品情報は、所定時間後の位置を示すマーキング情報である。抽出製品情報には、X座標、Y座標、色相、明度、彩度が含まれる。マーキング情報については、図16にて詳細を説明する。   FIG. 14 is an explanatory diagram showing extracted product information. The extracted product information transmitted from the management server 10 to the moving image devices 40 and 50 is marking information indicating a position after a predetermined time. The extracted product information includes X coordinate, Y coordinate, hue, brightness, and saturation. Details of the marking information will be described with reference to FIG.

次に、処理について、適宜図1〜図5を参照して説明する。
図15は、作業管理システムの処理の全体を示すフローチャートである。図15において、処理の全体概要を説明する。管理サーバ10は、管理サーバの操作部16を介して抽出開始情報が登録されると(ステップS1)、管理サーバ10は、作業管理システムを起動する。管理サーバ10は、品質管理DB92から、品質情報のフラグ値が1(不良品)を抽出し、抽出製品登録情報DB93へ抽出すべき抽出登録情報を登録する。管理サーバ10は、抽出製品登録情報DB93のうちの所定の抽出製品情報を抽出製品情報格納部90に格納し、抽出製品登録情報を、タグスキャン装置20に送信する(ステップS2)。ここでは、抽出製品登録情報として、タグID(図10参照)として説明する。
Next, processing will be described with reference to FIGS.
FIG. 15 is a flowchart showing the entire processing of the work management system. In FIG. 15, the overall outline of the process will be described. When the extraction start information is registered via the operation unit 16 of the management server (step S1), the management server 10 activates the work management system. The management server 10 extracts the quality information flag value 1 (defective product) from the quality management DB 92 and registers the extracted registration information to be extracted in the extracted product registration information DB 93. The management server 10 stores predetermined extracted product information in the extracted product registration information DB 93 in the extracted product information storage unit 90, and transmits the extracted product registration information to the tag scanning device 20 (step S2). Here, the extracted product registration information will be described as a tag ID (see FIG. 10).

タグスキャン装置20は、抽出製品登録情報を受信すると(ステップS3)、検索エリアを所定時間毎にスキャンする(ステップS4)。例えば、1/60秒間隔でスキャンする。タグスキャン装置20は、スキャン情報(図11参照)を記憶部25に記憶し、制御部24は、抽出製品登録情報であるタグIDに一致するか否かを判定する(ステップS5)。タグスキャン装置20は、タグIDに一致した場合(ステップS5,Yes)、該当するスキャン情報(図12参照)を管理サーバ10に送信する(ステップS6)。タグIDに一致しない場合(ステップS5,No)、ステップS4へ戻る。   When receiving the extracted product registration information (step S3), the tag scanning device 20 scans the search area at predetermined time intervals (step S4). For example, scanning is performed at 1/60 second intervals. The tag scanning device 20 stores the scan information (see FIG. 11) in the storage unit 25, and the control unit 24 determines whether or not it matches the tag ID that is the extracted product registration information (step S5). If the tag scanning device 20 matches the tag ID (step S5, Yes), the corresponding scanning information (see FIG. 12) is transmitted to the management server 10 (step S6). If it does not match the tag ID (step S5, No), the process returns to step S4.

一方、ステップS1において、管理サーバ10は、動画映像装置40に撮影開始信号を送信すると、動画映像装置40は、撮影を開始する(ステップS11)。動画映像装置40は、カメラ42からの実写の動画像情報をモニタ41に送信し映す(ステップS12、ステップS14)。また、動画映像装置40は、実写の動画像情報(図13参照)を管理サーバ10に送信する。   On the other hand, when the management server 10 transmits a shooting start signal to the moving image device 40 in step S1, the moving image device 40 starts shooting (step S11). The moving image device 40 transmits the moving image information of the actual photograph from the camera 42 to the monitor 41 (step S12, step S14). In addition, the moving image device 40 transmits live-action moving image information (see FIG. 13) to the management server 10.

管理サーバ10は、動画映像装置40から実写の動画像情報を管理サーバ10に受信すると、動画映像データを基に輪郭処理などにより製品を特定する(ステップS13)。一方、管理サーバ10は、タグスキャン装置20からスキャン情報を受信すると(ステップS7)、抽出製品の時刻毎の位置情報を特定する。そして、スキャン情報と、実写の動画像情報を基に、実写の動画像上の抽出製品を特定する(ステップS8)。管理サーバ10は、抽出製品情報(図14参照)を、動画映像装置40に送信する(ステップS9)。   When the management server 10 receives the moving image information of the live-action image from the video / video device 40, the management server 10 specifies a product by contour processing or the like based on the video / video data (step S13). On the other hand, when receiving the scan information from the tag scanning device 20 (Step S7), the management server 10 specifies the position information for each time of the extracted product. Then, based on the scan information and the moving image information of the live-action image, an extracted product on the live-action moving image is specified (step S8). The management server 10 transmits the extracted product information (see FIG. 14) to the video image device 40 (step S9).

動画映像装置40は、抽出製品情報を受信すると(ステップS15)、実写の動画像情報に、抽出製品情報を基に特定した抽出製品にマーキング処理をし(ステップS16)、図2(a)に示すようにモニタ41に映す(ステップS17)。   Upon receipt of the extracted product information (step S15), the moving image device 40 performs marking processing on the extracted product identified based on the extracted product information (step S16). As shown, the image is displayed on the monitor 41 (step S17).

なお、タグスキャン装置30と、管理サーバ10と、動画映像装置50との関係は、タグスキャン装置20と、管理サーバ10と、動画映像装置40との関係と同様であるので、説明を省略する。   Note that the relationship between the tag scanning device 30, the management server 10, and the moving image device 50 is the same as the relationship between the tag scanning device 20, the management server 10, and the moving image device 40, and thus the description thereof is omitted. .

作業指示の処理について、適宜図5を参照して詳細に説明する。
図16は、管理サーバの処理を示すフローチャートである。図15と同一処理については、同一符号を付している。
The work instruction processing will be described in detail with reference to FIG.
FIG. 16 is a flowchart showing processing of the management server. The same processes as those in FIG. 15 are denoted by the same reference numerals.

ステップS6において、タグスキャン装置20は、スキャン情報として、抽出製品の位置情報、その位置情報を取得した時間を管理サーバ10へ送信すると、管理サーバ10の通信部13は、スキャン情報を受信する(ステップS20)。スキャン情報処理部87は、通信部13を介して、動画映像装置40からスキャン情報を受信すると、スキャン情報解析部88とスキャン情報蓄積部89に送信する(ステップS21)。すると、スキャン情報解析部88は、スキャン情報から抽出製品の位置情報を確定する(ステップS22)。動画映像蓄積部83は、スキャン情報を蓄積する(ステップS23)。   In step S6, when the tag scanning device 20 transmits the position information of the extracted product and the time when the position information was acquired as scan information to the management server 10, the communication unit 13 of the management server 10 receives the scan information ( Step S20). When the scan information processing unit 87 receives the scan information from the moving image device 40 via the communication unit 13, the scan information processing unit 87 transmits the scan information to the scan information analysis unit 88 and the scan information storage unit 89 (step S21). Then, the scan information analysis unit 88 determines the position information of the extracted product from the scan information (step S22). The moving image storage unit 83 stores scan information (step S23).

ステップS12において、動画映像装置40は、カメラ42で撮影した実写の動画像情報をモニタ41に送信し、モニタ41は、その実写の動画像を映す(ステップS14)。また、動画映像装置40は、実写の動画像情報を管理サーバ10に送信すると、管理サーバ10の通信部13は、実写の動画像情報を受信する(ステップS30)。動画映像処理部81は、通信部13を介して、動画映像装置40から実写の動画像情報を受信すると、動画映像解析部82と動画映像蓄積部83に送信する(ステップS31)。すると、動画映像解析部82は、実写の動画像情報から、対象物を輪郭処理などにより抽出し、対象物の位置情報を確定する(ステップS32)。動画映像蓄積部83は、実写の動画像情報を蓄積する(ステップS33)。ステップS22およびステップS32でのそれぞれの位置情報が確定した時点で、抽出製品情報格納部90は、抽出製品登録情報を判定部86に送信する(ステップS23)。   In step S12, the moving image video apparatus 40 transmits the moving image information of the real image captured by the camera 42 to the monitor 41, and the monitor 41 displays the moving image of the actual image (step S14). In addition, when the moving image video apparatus 40 transmits the moving image information of the live action to the management server 10, the communication unit 13 of the management server 10 receives the moving image information of the live action (Step S30). When the moving image processing unit 81 receives the moving image information of the real image from the moving image device 40 via the communication unit 13, the moving image processing unit 81 transmits the moving image information to the moving image analysis unit 82 and the moving image storage unit 83 (step S31). Then, the moving image analysis unit 82 extracts the object from the moving image information of the live-action image by outline processing or the like, and determines the position information of the object (step S32). The moving image storage unit 83 stores the moving image information of the live action (Step S33). When the respective position information in step S22 and step S32 is determined, the extracted product information storage unit 90 transmits the extracted product registration information to the determination unit 86 (step S23).

判定部86は、抽出製品情報格納部90からの抽出製品登録情報と、スキャン情報解析部88からの抽出製品の位置情報と、動画映像解析部82からの対象物の位置情報とから、抽出製品か否かを判定する(ステップS24)。抽出製品と判定されると(ステップS24,Yes)、抽出製品監視処理部85は、抽出製品のα秒(所定時間)後の現在位置を推定し(ステップS25)、編集部84へ送付する。編集部84は、α秒後の位置情報に基づいてマーキング情報を作成し、通信部13を介して、動画映像装置40に、マーキング情報を送信する(ステップS26)。なお、ステップS24において、抽出製品と判定されないと(ステップS24,No)、一連の処理を終了する。   The determination unit 86 extracts the extracted product from the extracted product registration information from the extracted product information storage unit 90, the position information of the extracted product from the scan information analysis unit 88, and the position information of the object from the moving image analysis unit 82. It is determined whether or not (step S24). If it is determined that the product is an extracted product (step S24, Yes), the extracted product monitoring processing unit 85 estimates the current position after α seconds (predetermined time) of the extracted product (step S25) and sends it to the editing unit 84. The editing unit 84 creates marking information based on the position information after α seconds, and transmits the marking information to the video image device 40 via the communication unit 13 (step S26). If it is not determined in step S24 that the product is an extracted product (step S24, No), the series of processing ends.

動画映像装置40は、受信したα秒後の位置情報であるマーキング情報を基に、マーキング処理し(ステップS16)、実写の動画像にマーキングした動画像をモニタ41に映す(ステップS17)。   The moving image device 40 performs marking processing based on the received marking information which is position information after α seconds (step S16), and displays the moving image marked on the moving image on the monitor 41 (step S17).

図17は、作業管理システムに抽出装置を設置した例を示す説明図である。図17は、図1に示す作業管理システムにおいて、タグスキャン装置20と、タグスキャン装置30との間のコンベア60上の製品を抽出するための抽出装置100を設置した場合である。管理サーバ10は、抽出装置100の抽出範囲内に到達する所定時間後の抽出製品の位置情報を抽出装置100へ送信すると、抽出装置100は、該当する製品を抽出することができる。   FIG. 17 is an explanatory diagram illustrating an example in which an extraction device is installed in the work management system. FIG. 17 shows a case where an extraction device 100 for extracting products on the conveyor 60 between the tag scanning device 20 and the tag scanning device 30 is installed in the work management system shown in FIG. When the management server 10 transmits the position information of the extracted product after a predetermined time reaching the extraction range of the extraction device 100 to the extraction device 100, the extraction device 100 can extract the corresponding product.

本実施形態によれば、作業管理システムは、コンベアで搬送される物品の抽出作業を管理する管理サーバ10、コンベアの搬送面の下部に複数のタグリーダを有し、タグリーダをスキャンすることにより物品に添付されているICタグ情報を読取り、管理サーバに物品の位置情報および時間情報を送付するタグスキャン装置20,30と、コンベアを撮影するカメラ42,52と、カメラ42,52の動画映像情報を表示するモニタ41,51を有し、管理サーバ10に動画映像情報を送付する動画映像装置40,50とを備え、管理サーバ10は、物品の位置情報と時間情報と、動画映像情報とを基に、指定された物品のコンベア上の物品を特定するので、コンベアで搬送される物品を容易に抽出するための作業指示をすることができる。   According to the present embodiment, the work management system has a management server 10 that manages the extraction work of articles conveyed by the conveyor, a plurality of tag readers below the conveyance surface of the conveyor, and scans the tag readers to the articles. The tag scanning devices 20 and 30 that read the attached IC tag information and send the position information and time information of the article to the management server, the cameras 42 and 52 that photograph the conveyor, and the video information of the cameras 42 and 52 The video server includes video monitors 40 and 50 that have monitors 41 and 51 to display and send video video information to the management server 10. The management server 10 is based on the position information of the article, time information, and video video information. In addition, since the article on the conveyor of the designated article is specified, an operation instruction for easily extracting the article conveyed by the conveyor can be given.

管理サーバ10は、コンベアの搬送速度を考慮し、指定された物品の所定時間後の物品の位置情報であるマーキング情報を、動画映像装置40,50に送信する。動画映像装置40,50は、管理サーバ10からマーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、マーキング情報を付加して前記モニタ41,51に表示するので、作業者は、容易に抽出するための物品を確認することができる。なお、マーキング情報を付加するとは、マーキング情報を基にマーキング処理をしてもよいし、マーキング情報そのものを表示してもよい。   The management server 10 transmits the marking information, which is the position information of the article after a predetermined time of the designated article, to the moving image devices 40 and 50 in consideration of the conveyance speed of the conveyor. When receiving the marking information from the management server 10, the moving image devices 40 and 50 add the marking information to the moving image information of the actual image captured by the imaging unit and display the marking information on the monitors 41 and 51. Can identify articles for easy extraction. In addition, adding marking information may mark processing based on marking information, or may display marking information itself.

また、本実施形態では、タグスキャン装置20と、タグスキャン装置30との間に抽出装置100を設けているので、マーキング情報を基に指定された物品の抽出を行うことができる。   In the present embodiment, since the extraction device 100 is provided between the tag scanning device 20 and the tag scanning device 30, it is possible to extract a specified article based on the marking information.

作業管理システムを示す説明図である。It is explanatory drawing which shows a work management system. 作業指示画面を示す説明図である。It is explanatory drawing which shows a work instruction | indication screen. 作業管理システムの構成を示すブロック図である。It is a block diagram which shows the structure of a work management system. タグスキャン装置のタグリーダ配置構成を示す説明図である。It is explanatory drawing which shows the tag reader arrangement structure of a tag scanning apparatus. 管理サーバの機能を示す構成図である。It is a block diagram which shows the function of a management server. ICタグに記憶されるICタグ情報を示す説明図である。It is explanatory drawing which shows the IC tag information memorize | stored in an IC tag. 設備管理DBに記憶される設備使用情報テーブルを示す説明図である。It is explanatory drawing which shows the equipment usage information table memorize | stored in equipment management DB. 品質管理DBに記憶される品質管理情報テーブルを示す説明図である。It is explanatory drawing which shows the quality management information table memorize | stored in quality management DB. 抽出製品登録情報DBに記憶される抽出管理情報テーブルを示す説明図である。It is explanatory drawing which shows the extraction management information table memorize | stored in extraction product registration information DB. 抽出製品のタグIDを示す説明図である。It is explanatory drawing which shows tag ID of an extracted product. タグリーダのスキャン情報を示す説明図である。It is explanatory drawing which shows the scan information of a tag reader. 抽出製品に該当するタグリーダのスキャン情報を示す説明図である。It is explanatory drawing which shows the scan information of the tag reader applicable to an extraction product. 動画映像情報を示す説明図である。It is explanatory drawing which shows moving image image information. 抽出製品情報を示す説明図である。It is explanatory drawing which shows extraction product information. 作業管理システムの処理の全体を示すフローチャートである。It is a flowchart which shows the whole process of a work management system. 管理サーバの処理を示すフローチャートである。It is a flowchart which shows the process of a management server. 作業管理システムに抽出装置を設置した例を示す説明図である。It is explanatory drawing which shows the example which installed the extraction apparatus in the work management system.

符号の説明Explanation of symbols

10 管理サーバ
20 タグスキャン装置(探索エリア用)
26 タグリーダ
30 タグスキャン装置(チェックエリア用)
40 動画映像装置(探索エリア用)
41,51 モニタ
42,52 カメラ
50 動画映像装置(チェックエリア用)
60 コンベア
65 ネットワーク
70 製品
71 ICタグ
91 設備管理DB
92 品質管理DB
93 抽出製品登録情報DB
10 management server 20 tag scanning device (for search area)
26 Tag reader 30 Tag scanning device (for check area)
40 video equipment (for search area)
41, 51 Monitor 42, 52 Camera 50 Video device (for check area)
60 conveyor 65 network 70 product 71 IC tag 91 equipment management DB
92 Quality Management DB
93 Extracted product registration information DB

Claims (12)

物品を搬送するコンベアの上流側の所定の位置を検出対象領域として配置され、前記コンベアで搬送される物品に添付された無線ICタグを検出する、個々に位置管理された複数のICタグ検出器と、前記コンベア上における無線ICタグの位置を監視する処理装置とを備え、前記ICタグ検出器が前記無線ICタグを検出すると、当該検出にかかる無線ICタグの検出位置と検出時刻とタグ情報とが特定され、これら特定された情報に基づいて作業を支援する作業支援システムにおいて、
前記コンベアの所定の位置を撮影する動画像撮影装置と、
前記動画像撮影装置が撮影した動画像に画像処理を行い、所定の物品に視覚的なマーキング処理を行う画像処理装置と、
前記動画像撮影装置が撮影し、前記画像処理装置がマーキング処理した動画像を表示する表示装置とをさらに備え、
前記処理装置は、
前記ICタグ検出器が無線ICタグを検出することにより特定される、前記検出位置と前記検出時刻に加えて、前記コンベアの搬送速度に基づいて、検出した無線ICタグの前記コンベアにおける搬送方向の位置を算出し、
前記算出した搬送方向の位置と、前記検出位置から得られる前記コンベアの幅方向の位置とから前記無線ICタグの位置を監視し、
前記検出した無線ICタグのタグ情報が、所定のタグ情報であるか否かを判定し、
所定のタグ情報であるときは、前記画像処理装置に、当該所定のタグ情報を有する無線ICタグの前記コンベアの幅方向の位置および搬送方向の位置を通知し、前記画像処理装置に当該通知された位置に対応する物品にマーキングをさせる
ことを特徴とする作業支援システム。
A plurality of individually controlled IC tag detectors that detect a wireless IC tag attached to an article conveyed by the conveyor, with a predetermined position upstream of the conveyor that conveys the article as a detection target region. And a processing device that monitors the position of the wireless IC tag on the conveyor, and when the IC tag detector detects the wireless IC tag, the detection position, detection time, and tag information of the wireless IC tag related to the detection In a work support system that supports work based on the specified information,
A moving image photographing device for photographing a predetermined position of the conveyor;
An image processing device that performs image processing on a moving image photographed by the moving image photographing device and performs visual marking processing on a predetermined article;
A display device for displaying the moving image captured by the moving image capturing device and marked by the image processing device;
The processor is
In addition to the detection position and the detection time, the IC tag detector is detected by detecting the wireless IC tag, and based on the transport speed of the conveyor, the detected wireless IC tag in the transport direction of the conveyor Calculate the position,
Monitoring the position of the wireless IC tag from the calculated position in the conveyance direction and the position in the width direction of the conveyor obtained from the detection position;
It is determined whether the tag information of the detected wireless IC tag is predetermined tag information,
When it is predetermined tag information, the image processing apparatus is notified of the position in the width direction and the conveyance direction of the conveyor of the wireless IC tag having the predetermined tag information, and the image processing apparatus is notified of the notification. A work support system characterized by marking an article corresponding to a specified position.
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムであって、
物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより前記物品に添付されているICタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付するタグスキャン装置と、
前記コンベアを撮影する撮影部および前記撮影部の動画映像情報を表示する表示部を有し、前記管理サーバに動画映像情報を送付する動画映像装置とを備え、
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に、指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理システム。
A work management system having a management server that manages the extraction work of articles conveyed by a conveyor,
A plurality of tag readers are arranged with a predetermined position on the upstream side of the conveyor for conveying the article as a detection target area, and the IC tag information attached to the article is read by scanning the detection target area. A tag scanning device for sending position information and time information of the article;
An imaging unit that captures the conveyor and a display unit that displays moving image information of the imaging unit; and a moving image device that transmits the moving image information to the management server,
The work management system, wherein the management server specifies an article on the conveyor of a designated article based on the position information and time information of the article and the moving image information.
前記タグスキャン装置は、前記コンベアの搬送方向に複数のタグリーダを設け、かつ、前記コンベアの搬送方向と略直交方向に複数のタグリーダを設けた
ことを特徴とする請求項2に記載の作業管理システム。
The work management system according to claim 2, wherein the tag scanning device is provided with a plurality of tag readers in the conveying direction of the conveyor and a plurality of tag readers in a direction substantially orthogonal to the conveying direction of the conveyor. .
前記管理サーバは、前記コンベアの搬送速度を考慮し、指定された物品の所定時間後の該物品の位置情報であるマーキング情報を、前記動画映像装置に送信する
ことを特徴とする請求項2に記載の作業管理システム。
The said management server considers the conveyance speed of the said conveyor, and transmits the marking information which is the positional information of the said goods after the predetermined time of the designated goods to the said moving image apparatus. The work management system described.
前記動画映像装置は、前記管理サーバから前記マーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、前記マーキング情報を付加して前記表示部に表示する
ことを特徴とする請求項4に記載の作業管理システム。
The video image device, when receiving the marking information from the management server, adds the marking information to the moving image information of the real image captured by the imaging unit and displays the marking information on the display unit. Item 5. The work management system according to Item 4.
前記マーキング情報を基に指定された物品の抽出を行う抽出装置をさらに備える
ことを特徴とする請求項4に記載の作業管理システム。
The work management system according to claim 4, further comprising an extraction device that extracts an article specified based on the marking information.
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムであって、
物品を搬送するコンベアの所定の位置を検出対象領域として複数のタグリーダを配置し、前記検出対象領域をスキャンすることにより前記物品に添付されているICタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付する複数のタグスキャン装置と、
前記コンベアを撮影する撮影部および前記撮影部の動画映像を表示する表示部を有し、前記管理サーバに動画映像情報を送付する複数の動画映像装置とを備え、
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理システム。
A work management system having a management server that manages the extraction work of articles conveyed by a conveyor,
A plurality of tag readers are arranged with a predetermined position of a conveyor for conveying an article as a detection target area, and the IC tag information attached to the article is read by scanning the detection target area. A plurality of tag scanning devices for sending location information and time information;
A plurality of moving image devices having an image capturing unit that images the conveyor and a display unit that displays the moving image of the image capturing unit, and transmitting moving image information to the management server;
The work management system characterized in that the management server specifies an article on the conveyor of an article designated based on the position information and time information of the article and the moving image information.
コンベアで搬送される物品の抽出作業を管理する管理サーバを有する作業管理システムの作業管理方法であって、
前記作業管理システムは、物品を搬送するコンベアの上流側の所定の位置を検出対象領域として複数のタグリーダを配置するタグスキャン装置と、前記コンベアを撮影する撮影部および前記撮影部の動画映像情報を表示する表示部を有する動画映像装置とを備え、
前記タグスキャン装置は、前記検出対象領域をスキャンすることにより前記物品に添付されているICタグ情報を読取り、前記管理サーバに前記物品の位置情報および時間情報を送付し、
前記動画映像装置は、前記管理サーバに前記撮影部で撮影した動画映像情報を送付し
前記管理サーバは、前記物品の位置情報および時間情報と、前記動画映像情報とを基に、指定された物品の前記コンベア上の物品を特定する
ことを特徴とする作業管理方法。
A work management method of a work management system having a management server for managing an extraction work of articles conveyed by a conveyor,
The work management system includes a tag scanning device in which a plurality of tag readers are arranged with a predetermined position upstream of a conveyor that conveys articles as a detection target area, a photographing unit that photographs the conveyor, and moving image information of the photographing unit. A moving image device having a display unit for displaying,
The tag scanning device reads the IC tag information attached to the article by scanning the detection target area, and sends the position information and time information of the article to the management server,
The moving image apparatus sends the moving image information captured by the image capturing unit to the management server, and the management server specifies a specified article based on the position information and time information of the article and the moving image information. The work management method characterized by specifying the article | item on the said conveyor.
前記タグスキャン装置は、前記コンベアの搬送方向に複数のタグリーダを設け、かつ、前記コンベアの搬送方向と略直交方向に複数のタグリーダを備え、
前記タグスキャン装置は、前記検出対象領域をスキャンする
ことを特徴とする請求項8に記載の作業管理方法。
The tag scanning device includes a plurality of tag readers in the transport direction of the conveyor, and includes a plurality of tag readers in a direction substantially orthogonal to the transport direction of the conveyor,
The work management method according to claim 8, wherein the tag scanning device scans the detection target area.
前記管理サーバは、前記コンベアの搬送速度を考慮し、指定された物品の所定時間後の該物品の位置情報であるマーキング情報を、前記動画映像装置に送信する
ことを特徴とする請求項8に記載の作業管理方法。
The said management server considers the conveyance speed of the said conveyor, and transmits the marking information which is the positional information on the said goods after the predetermined time of the designated goods to the said moving image apparatus. The work management method described.
前記動画映像装置は、前記管理サーバから前記マーキング情報を受信すると、前記撮影部で撮影された実写の動画像情報に、前記マーキング情報を付加して前記表示部に表示する
ことを特徴とする請求項10に記載の作業管理方法。
The video image device, when receiving the marking information from the management server, adds the marking information to the moving image information of the real image captured by the imaging unit and displays the marking information on the display unit. Item 15. The work management method according to Item 10.
前記作業管理システムは、さらに抽出装置を備え、
前記抽出装置は、前記マーキング情報を基に指定された物品の抽出を行う
ことを特徴とする請求項10に記載の作業管理方法。
The work management system further includes an extraction device,
The work management method according to claim 10, wherein the extraction device extracts an article designated based on the marking information.
JP2007123573A 2007-05-08 2007-05-08 Work support system, work management system, and work management method Expired - Fee Related JP5096787B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007123573A JP5096787B2 (en) 2007-05-08 2007-05-08 Work support system, work management system, and work management method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007123573A JP5096787B2 (en) 2007-05-08 2007-05-08 Work support system, work management system, and work management method

Publications (2)

Publication Number Publication Date
JP2008280102A true JP2008280102A (en) 2008-11-20
JP5096787B2 JP5096787B2 (en) 2012-12-12

Family

ID=40141253

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007123573A Expired - Fee Related JP5096787B2 (en) 2007-05-08 2007-05-08 Work support system, work management system, and work management method

Country Status (1)

Country Link
JP (1) JP5096787B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010132375A (en) * 2008-12-02 2010-06-17 Murata Machinery Ltd Identification data input system
KR101492338B1 (en) * 2013-10-10 2015-02-11 재단법인대구경북과학기술원 Method and apparatus for smart managing of product using rf tag and vison sensor
JP2016138885A (en) * 2015-01-27 2016-08-04 ヤンマー株式会社 Quality screening device
WO2019003685A1 (en) * 2017-06-30 2019-01-03 パナソニックIpマネジメント株式会社 Baggage determination device, baggage sorting system, and baggage determination method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08153172A (en) * 1994-11-28 1996-06-11 Harumi Takeda Automatic discriminating device
JPH09314071A (en) * 1996-05-24 1997-12-09 Mutual Corp Visual inspection supporting system
JP2007015055A (en) * 2005-07-07 2007-01-25 Toshiba Mach Co Ltd Handling device, working device and program
JP2007523811A (en) * 2004-01-23 2007-08-23 ユナイテッド パーセル サービス オブ アメリカ インコーポレイテッド System and method for tracking and processing goods

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08153172A (en) * 1994-11-28 1996-06-11 Harumi Takeda Automatic discriminating device
JPH09314071A (en) * 1996-05-24 1997-12-09 Mutual Corp Visual inspection supporting system
JP2007523811A (en) * 2004-01-23 2007-08-23 ユナイテッド パーセル サービス オブ アメリカ インコーポレイテッド System and method for tracking and processing goods
JP2007015055A (en) * 2005-07-07 2007-01-25 Toshiba Mach Co Ltd Handling device, working device and program

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010132375A (en) * 2008-12-02 2010-06-17 Murata Machinery Ltd Identification data input system
KR101492338B1 (en) * 2013-10-10 2015-02-11 재단법인대구경북과학기술원 Method and apparatus for smart managing of product using rf tag and vison sensor
JP2016138885A (en) * 2015-01-27 2016-08-04 ヤンマー株式会社 Quality screening device
WO2019003685A1 (en) * 2017-06-30 2019-01-03 パナソニックIpマネジメント株式会社 Baggage determination device, baggage sorting system, and baggage determination method
CN110785363A (en) * 2017-06-30 2020-02-11 松下知识产权经营株式会社 Cargo determination device, cargo sorting system, and cargo determination method
JPWO2019003685A1 (en) * 2017-06-30 2020-04-23 パナソニックIpマネジメント株式会社 Package determination device, package sorting system, and package determination method
CN110785363B (en) * 2017-06-30 2022-02-11 松下知识产权经营株式会社 Cargo determination device, cargo sorting system, and cargo determination method
US11369999B2 (en) 2017-06-30 2022-06-28 Panasonic Intellectual Property Management Co., Ltd. Parcel determination device, parcel sorting system, and parcel determination method
JP7174898B2 (en) 2017-06-30 2022-11-18 パナソニックIpマネジメント株式会社 Package determination device, package sorting system, and package determination method

Also Published As

Publication number Publication date
JP5096787B2 (en) 2012-12-12

Similar Documents

Publication Publication Date Title
US10198711B2 (en) Methods and systems for monitoring or tracking products in a retail shopping facility
WO2016117600A1 (en) Product shelf allocation management device and product shelf allocation management method
EP3434626B1 (en) Projection instruction device, parcel sorting system, and projection instruction method
JP5069936B2 (en) Material storage position management system and method
EP3434621B1 (en) Instruction projecting device, parcel sorting system and instruction projecting method
JP6679442B2 (en) Package tracking system, package tracking method and package tracking program
JP2019101693A (en) System for grasping in-physical-distribution-warehouse operation
EP3434623B1 (en) Projection indicator, cargo assortment system, and projection indicating method
JP5096787B2 (en) Work support system, work management system, and work management method
JP7471878B2 (en) Image Processing Device
KR20170055406A (en) System and method for tracking products
US11120286B2 (en) Projection indication device, parcel sorting system, and projection indication method
JP2007523810A (en) Web-based inventory management of goods
EP3647233B1 (en) Parcel determination device, parcel sorting system, and parcel determination method
JP6728995B2 (en) Automated warehouse system and automated warehouse management method
JP2018019373A (en) Monitoring camera and package reading method
EP3689792B1 (en) Package recognition device, package sorting system and package recognition method
EP3434625B1 (en) Projection instruction device, parcel sorting system, and projection instruction method
EP3689789B1 (en) Baggage recognition device, baggage sorting system, and baggage recognition method
JP2017079326A (en) Identification device, traceability system, and identification method
WO2021067218A4 (en) X-ray detection of meat
EP3689790A1 (en) Baggage sorting system
US11417104B2 (en) Systems and methods for automatically determining location of an object inside a retail store
US10852244B2 (en) Image processing apparatus, image processing method, and recording medium
EP3434624B1 (en) Projection instruction device, parcel sorting system, and projection instruction method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090626

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111122

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120911

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120921

R150 Certificate of patent or registration of utility model

Ref document number: 5096787

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150928

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees