JP4197282B2 - Automatic object shape recognition system and non-contact identification tag writing system - Google Patents
Automatic object shape recognition system and non-contact identification tag writing system Download PDFInfo
- Publication number
- JP4197282B2 JP4197282B2 JP2003295043A JP2003295043A JP4197282B2 JP 4197282 B2 JP4197282 B2 JP 4197282B2 JP 2003295043 A JP2003295043 A JP 2003295043A JP 2003295043 A JP2003295043 A JP 2003295043A JP 4197282 B2 JP4197282 B2 JP 4197282B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- identification tag
- contact identification
- shape
- contact
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は、物体形状自動認識システム及び非接触識別タグへの書き込みシステムに関するものである。 The present invention relates to an automatic object shape recognition system and a writing system for a contactless identification tag.
商品、荷物等の運搬手続きを自動化することは、取り扱い手続きに費やされる人件費と時間を削減する上で重要である。
この問題に対し、株式会社アイオイ・システムはバーコードによる商品の自動認識と、フォークリフトの位置を検出する位置検出装置とを用いた入出庫支援システムを提案している(下記非特許文献1参照)。以下にこの技術の概略について説明する。
図7はこの従来の入出庫支援システムを説明する図である。
まず、商品101にコンピュータ(図示省略)から発行されたバーコード102を貼付しておく。バーコード102には商品101の識別コードが印刷してある。
また、入庫作業者104は無線端末103を携帯し、この無線端末103は、コンピュータと無線通信を行う手段(図示省略)と、バーコードスキャナー(図示省略)と、情報を表示する表示器(図示省略)とを有する。
位置検出装置105はフォークリフト106の位置を常時検知し、コンピュータ及び無線端末103に通報する。
入庫作業者104が無線端末103のバーコードスキャナーにより商品に貼付してあるバーコード102をスキャンすると、無線端末103は識別コードを自動認識し、無線通信によって、識別コードに対応する商品の入庫位置の情報を、無線通信を介してコンピュータに問い合わせる。
コンピュータは問い合わせを受けると、商品101の入庫位置を検索し、無線端末103へ送信する。
無線端末103は商品101の入庫位置と、フォークリフト106の現在地を表示する。入庫作業者104は無線端末103に表示された位置にフォークリフト106を移動させ、商品101を入庫する。入庫作業者104は商品101の入庫を完了した後、入庫が完了したことを無線端末103によりコンピュータに通報する。通報を受けたコンピュータは入庫完了時のフォークリフト106の位置と商品101の入庫すべき位置とを対照し、正しければ無線端末103に「入庫確認」を通報する。
本システムにより、入庫作業者104は商品101の入庫先と、フォークリフト106の現在の位置を確認できるので、作業効率を高めることができる。また、入庫作業の度にフォークリフト106の位置と商品101の入庫すべき位置とが等しいことを確認するので、商品101を誤った場所へ入庫することを防止することができる。管理者はコンピュータに問い合わせることで、商品101の入庫状況を容易に把握することができる。
Automating the transportation procedures for goods, luggage, etc. is important in reducing labor costs and time spent on handling procedures.
In response to this problem, Ioi System Co., Ltd. has proposed a loading / unloading support system that uses automatic recognition of products using barcodes and a position detection device that detects the position of a forklift (see Non-Patent Document 1 below). . The outline of this technique will be described below.
FIG. 7 is a diagram for explaining this conventional warehouse support system.
First, a barcode 102 issued from a computer (not shown) is attached to the
The warehousing worker 104 carries a wireless terminal 103. The wireless terminal 103 includes means for wirelessly communicating with a computer (not shown), a barcode scanner (not shown), and a display for displaying information (not shown). (Omitted).
The position detection device 105 constantly detects the position of the forklift 106 and notifies the computer and the wireless terminal 103.
When the warehousing worker 104 scans the barcode 102 affixed to the product with the barcode scanner of the wireless terminal 103, the wireless terminal 103 automatically recognizes the identification code, and the warehousing position of the product corresponding to the identification code by wireless communication. The information is inquired of the computer via wireless communication.
When the computer receives the inquiry, it retrieves the storage location of the
The wireless terminal 103 displays the storage position of the
With this system, the warehousing worker 104 can confirm the warehousing destination of the
しかしながら、上記従来技術では、商品の大きさや形状に対する情報に対応しておらず、入庫する際には、あらかじめ、指定された場所が空いているかどうかを人手により確かめる必要があった。また、特定の棚に存在する商品の種類や数量はデータ検索によって検出することはできても、前記棚の空き状況は検出できず、限られた空間を有効活用できないといった問題があった。
本発明は、上記の問題を解決するために提案されたもので、その目的は識別対象である物体の形状及び大きさを自動的に認識し、該物体の占有空間をも自動的に認識可能な物体形状自動認識システム及び非接触識別タグへの書き込みシステムを提供することにある。
However, the above prior art does not correspond to information on the size and shape of the product, and it is necessary to manually check whether or not the designated place is empty before warehousing. In addition, even though the type and quantity of products existing on a specific shelf can be detected by data search, the availability of the shelf cannot be detected, and the limited space cannot be used effectively.
The present invention has been proposed to solve the above problems, and its purpose is to automatically recognize the shape and size of an object to be identified, and to automatically recognize the space occupied by the object. An object shape automatic recognition system and a contactless identification tag writing system are provided.
上記の課題を解決するために、本発明は、識別対象である物体を第1の方向から撮影して第1の画像情報を出力する第1の撮影機と、前記物体を第2の方向から撮影して第2の画像情報を出力する第2の撮影機と、前記第1及び第2の画像情報における前記物体と背景とのコントラストの差を利用し前記物体の輪郭を抽出して前記物体の形状情報を生成し、前記第1及び第2の画像情報中で前記物体が占める面積を利用して前記物体の大きさ情報を生成し、前記物体の識別情報と前記形状及び大きさ情報とをデータベース化して記憶するデータ処理手段とを備えた物体形状自動認識システムにおいて、前記物体には、表面に蛍光塗料が塗布された非接触識別タグが貼付されており、前記データ処理手段は、さらに、前記第1又は第2の画像情報において前記蛍光塗料により発光点として撮影される前記非接触識別タグの前記物体の輪郭に対する相対位置を検出して前記物体における前記非接触識別タグの貼付位置情報を生成し、前記貼付位置情報をデータベース化して記憶するという構成になっている。
また、識別対象である物体の識別情報および前記物体の情報を格納する記憶手段と質問信号を受信し前記記憶手段に格納されている情報を含む応答信号を送信する送受信手段とを有する非接触識別タグと、前記非接触識別タグに前記質問信号を送信し、前記非接触識別タグから返信される前記応答信号を受信し読み出す手段と、前記物体の情報を前記非接触識別タグに送信し、前記記憶手段に書き込む手段とを有する無線端末と、前記物体を第1の方向から撮影して第1の画像情報を出力する第1の撮影機と、前記物体を第2の方向から撮影して第2の画像情報を出力する第2の撮影機と、前記第1及び第2の画像情報における背景と前記物体とのコントラストの差を利用し前記物体の輪郭を抽出して前記物体の形状情報を生成し、前記第1及び第2の画像情報中で前記物体が占める面積を利用して前記物体の大きさ情報を生成し、前記形状及び大きさ情報を前記物体の情報として前記無線端末に出力するとともに、前記識別情報と前記形状及び大きさ情報とをデータベース化して記憶するデータ処理手段とを備えた物体形状自動認識システムにおいて、前記非接触識別タグは、表面に蛍光塗料が塗布され、かつ前記物体に貼付されており、前記データ処理手段は、さらに、前記第1又は第2の画像情報において前記蛍光塗料により発光点として撮影される前記非接触識別タグの前記物体の輪郭に対する相対位置を検出して前記物体における前記非接触識別タグの貼付位置情報を生成し、前記貼付位置情報を前記物体の情報として前記無線端末に出力するとともに、前記貼付位置情報をデータベース化して記憶するという構成になっている。
また、識別対象である物体の識別情報および前記物体の情報を格納する記憶手段と質問信号を受信し前記記憶手段に格納されている情報を含む応答信号を送信する送受信手段とを有する非接触識別タグに前記質問信号を送信し、前記非接触識別タグから返信される前記応答信号を受信し読み出す手段と、前記物体の情報を前記非接触識別タグに送信し、前記記憶手段に書き込む手段とを有する無線端末と、前記物体を第1の方向から撮影して第1の画像情報を出力する第1の撮影機と、前記物体を第2の方向から撮影して第2の画像情報を出力する第2の撮影機と、前記第1及び第2の画像情報における背景と前記物体とのコントラストの差を利用し前記物体の輪郭を抽出して前記物体の形状情報を生成し、前記第1及び第2の画像情報中で前記物体が占める面積を利用して前記物体の大きさ情報を生成し、前記形状及び大きさ情報を前記物体の情報として前記無線端末に出力するとともに、前記識別情報と前記形状及び大きさ情報とをデータベース化して記憶するデータ処理手段とを備えた非接触識別タグへの書き込みシステムにおいて、前記非接触識別タグは、表面に蛍光塗料が塗布され、かつ前記物体に貼付されており、前記データ処理手段は、さらに、前記第1又は第2の画像情報において前記蛍光塗料により発光点として撮影される前記非接触識別タグの前記物体の輪郭に対する相対位置を検出して前記物体における前記非接触識別タグの貼付位置情報を生成し、前記貼付位置情報を前記物体の情報として前記無線端末に出力するとともに、前記貼付位置情報をデータベース化して記憶するという構成になっている。
また、前記データ処理手段によりデータベース化して記憶する前記識別情報は、前記無線端末により前記非接触識別タグから読み出されたものであるという構成になっている。
また、前記非接触識別タグは、前記無線端末から受信した信号によって内部回路の駆動電力を獲得するようになっているという構成になっている。
また、所定の入力手段により入力された前記識別情報及び前記物体に関する固有情報を、前記データ処理手段により生成した前記形状及び大きさ情報と、前記非接触識別タグの貼付位置情報と共に、前記書き込む手段により前記非接触識別タグの前記記憶手段に書き込むという構成になっている。
In order to solve the above-described problem, the present invention provides a first photographing device for photographing an object to be identified from a first direction and outputting first image information, and the object from a second direction. A second photographing device for photographing and outputting second image information; and extracting the contour of the object by using a contrast difference between the object and the background in the first and second image information. The shape information of the object is generated using the area occupied by the object in the first and second image information, and the identification information of the object, the shape and size information, In the object shape automatic recognition system comprising a data processing means for storing the data in a database, a non-contact identification tag having a fluorescent paint applied to the surface is affixed to the object, and the data processing means further includes: , The first or second image information Detecting the relative position of the non-contact identification tag photographed as a light emitting point by the fluorescent paint with respect to the contour of the object to generate affixing position information of the non-contact identification tag in the object, and storing the pasting position information in a database It is configured to memorize and memorize.
Further, contactless identification having identification information of an object to be identified and storage means for storing the information of the object, and transmission / reception means for receiving a query signal and transmitting a response signal including the information stored in the storage means A tag, means for transmitting the interrogation signal to the contactless identification tag, receiving and reading the response signal returned from the contactless identification tag, and transmitting information on the object to the contactless identification tag, A wireless terminal having means for writing to the storage means, a first photographing device for photographing the object from a first direction and outputting first image information, and photographing the object from a second direction. A second photographing device that outputs two pieces of image information, and using the difference in contrast between the background and the object in the first and second image information, the contour of the object is extracted to obtain shape information of the object. Generating the first And generating the size information of the object using the area occupied by the object in the second image information, and outputting the shape and size information to the wireless terminal as the object information, and the identification information And a data processing means for storing the shape and size information in a database and storing them in the object shape automatic recognition system, wherein the non-contact identification tag is coated with a fluorescent paint on its surface and attached to the object. And the data processing means further detects a relative position of the non-contact identification tag taken as a light emitting point by the fluorescent paint in the first or second image information with respect to the contour of the object, in the object. Affixing position information of the non-contact identification tag is generated, and the affixing position information is output to the wireless terminal as information on the object, and the affixing position information It has a configuration that database to store.
Further, contactless identification having identification information of an object to be identified and storage means for storing the information of the object, and transmission / reception means for receiving a query signal and transmitting a response signal including the information stored in the storage means Means for transmitting the interrogation signal to a tag and receiving and reading out the response signal returned from the non-contact identification tag; and means for transmitting information of the object to the non-contact identification tag and writing to the storage means A wireless terminal having a first photographing device that photographs the object from a first direction and outputs first image information, and photographs the object from a second direction and outputs second image information. Using the second photographing machine and the contrast difference between the background and the object in the first and second image information, the contour of the object is extracted to generate the shape information of the object, In the second image information The size information of the object is generated using the area occupied by the recording object, the shape and size information is output to the wireless terminal as the object information, and the identification information, the shape and size information, A non-contact identification tag writing system comprising data processing means for storing the data in a database, wherein the non-contact identification tag is coated with a fluorescent paint on its surface and attached to the object, and the data processing The means further detects a relative position of the non-contact identification tag taken as a light emitting point by the fluorescent paint in the first or second image information with respect to a contour of the object, and the non-contact identification tag in the object The pasting position information is generated, and the pasting position information is output to the wireless terminal as the object information. Gasification to has a configuration of storing.
Further, the identification information stored as a database by the data processing means is configured to be read from the non-contact identification tag by the wireless terminal.
The contactless identification tag is configured to acquire driving power of the internal circuit by a signal received from the wireless terminal.
Further, the means for writing the identification information inputted by the predetermined input means and the specific information regarding the object together with the shape and size information generated by the data processing means and the pasting position information of the non-contact identification tag Is configured to write to the storage means of the non-contact identification tag.
本発明によれば、識別対象である物体の形状及び大きさを自動的に認識し、該物体の占有空間をも自動的に認識可能で、荷物運搬システムの効率を高めることができる物体形状自動認識システム及び非接触識別タグへの書き込みシステムを提供することができる。 According to the present invention, it is possible to automatically recognize the shape and size of an object to be identified, automatically recognize the occupied space of the object, and improve the efficiency of the luggage transport system. A recognition system and a system for writing to a contactless identification tag can be provided.
以下、図面を用いて本発明の実施の形態について詳細に説明する。なお、以下で説明する図面で、同一機能を有するものは同一符号を付け、その繰り返しの説明は省略する。
実施の形態1
図1は、本発明の実施の形態1を説明する図である。
図1において、1は非接触識別タグであるRFID(Radio Frequency
Identification:無線周波識別)タグ、2は無線端末であるRFIDタグリーダー/ライター、11は制御部、12は制御部11内にある記憶部、13は無線処理部、14は蓄電部、21は制御部、22は無線処理部である。
本実施の形態は、RFIDタグ1が貼付された識別対象(認識対象)である物体(ここでは図示省略。後述の図3(a)、(b)参照)の形状及び大きさ情報を認識できる物体形状自動認識システム及び非接触識別タグへの書き込みシステムを示す。
本物体形状自動認識システムは、RFIDタグ1とRFIDタグリーダー/ライター2で構成されている。
RFIDタグ1は、無線処理部13と蓄電部14と記億部12を含む制御部11からなる。記億部12は、物体の識別情報、物体の形状及び大きさの情報、物体に関する任意の固有情報を格納できる。ここで、物体の識別情報というのは、単に物体を識別するだけの情報で、例えば数字である。
RFIDタグリーダー/ライター2は、無線処理部22と制御部21で構成されている。このRFIDタグリーダー/ライター2は、RFIDタグ1に対して質問信号を送信する。RFIDタグ1は、RFIDタグリーダー/ライター2からの質問信号を受信することによって発電し、自らの制御部11の駆動に必要な電力を蓄電部14に蓄える。その後、記憶部12に格納されている物体の識別情報と物体の形状及び大きさ情報と物体に関する任意の固有情報を含む応答信号を発信する。RFIDタグリーダー/ライター2は、この応答信号を受信することで、物体の識別情報と物体の形状及び大きさの情報と物体に関する任意の固有情報を読み出すことができる。また、RFIDタグ1ヘ書き換え信号を送信することで、RFIDタグ1の記億部12に格納されている情報を更新することができる。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In the drawings described below, components having the same function are denoted by the same reference numerals, and repeated description thereof is omitted.
Embodiment 1
FIG. 1 is a diagram for explaining Embodiment 1 of the present invention.
In FIG. 1, reference numeral 1 denotes an RFID (Radio Frequency) which is a contactless identification tag.
Identification: Radio frequency identification (RFID) tag, 2 is an RFID tag reader / writer that is a wireless terminal, 11 is a control unit, 12 is a storage unit in the
In this embodiment, the shape and size information of an object (not shown here; see FIGS. 3A and 3B described later) that is an identification target (recognition target) to which the RFID tag 1 is attached can be recognized. An object shape automatic recognition system and a non-contact identification tag writing system are shown.
This automatic object shape recognition system includes an RFID tag 1 and an RFID tag reader / writer 2.
The RFID tag 1 includes a
The RFID tag reader / writer 2 includes a
このように本実施の形態1では、識別対象である物体3の識別情報と、物体3の形状及び大きさ情報を少なくとも格納する記憶部(記憶手段)12と、質問信号を受信し、記憶部12に格納されている情報を含む応答信号を送信する無線処理部(送受信手段)13とを有するRFIDタグ1と、RFIDタグ1に質問信号を送信し、RFIDタグ1から返信される応答信号を受信し読み出す手段と、物体3の情報をRFIDタグ1に送信し、記憶部12に書き込む手段とを有するRFIDタグリーダー/ライター2とを備えている。上記読み出す手段と上記書き込む手段は、制御部22及び無線処理部1である。
As described above, in the first embodiment, the storage unit (storage unit) 12 that stores at least the identification information of the
実施の形態2
本実施の形態2も、上記実施の形態1と同様の物体形状自動認識システム及び非接触識別タグへの書き込みシステムを示す。
実施の形態1とは、RFIDタグ1ヘ格納する情報として、RFIDタグ1の物体に対する位置情報を加えた点が異なる。その他の構成は実施の形態1と同様で、RFIDタグ1とRFIDタグリーダー/ライター2の構成も、図1に示されるのと同様である。
図2は、本実施の形態2を説明する図であり、上記従来技術における自動認識システムと、本実施の形態2による自動認識システムとの違いを示している。(a)は実際の物体の配置、(b)は従来技術によるRFIDタグの認識イメージ、(c)は本発明によるRFIDタグの認識イメージを示す。
上記従来技術による自動認識システムでは、RFIDタグとリーダーが交信することによって、(1)RFIDタグA、B、C、D、Eの存在と、リーダーの近接位置から、(2)RFIDタグA、B、C、D、Eの位置を認識できる。しかしながら、物体3が占有している空間は認識できない。それに対して、本実施の形態2における自動認識システムでは上記従来技術の(1)、(2)の情報に加えて、RFIDタグA、B、C、D、Eの位置を基準とする物体3の空間的広がり情報を取得できる。
Embodiment 2
The second embodiment also shows an object shape automatic recognition system and a non-contact identification tag writing system similar to the first embodiment.
The first embodiment is different from the first embodiment in that position information on an object of the RFID tag 1 is added as information stored in the RFID tag 1. Other configurations are the same as those of the first embodiment, and the configurations of the RFID tag 1 and the RFID tag reader / writer 2 are the same as those shown in FIG.
FIG. 2 is a diagram for explaining the second embodiment, and shows the difference between the automatic recognition system in the prior art and the automatic recognition system according to the second embodiment. (A) shows an actual object arrangement, (b) shows an RFID tag recognition image according to the prior art, and (c) shows an RFID tag recognition image according to the present invention.
In the automatic recognition system according to the above prior art, the RFID tag and the reader communicate with each other, (1) from the presence of the RFID tags A, B, C, D, E and the proximity position of the reader, (2) the RFID tag A, The positions of B, C, D, and E can be recognized. However, the space occupied by the
実施の形態3
図3(a)は、本発明の実施の形態3を説明する図であり、物体形状自動認識システム及び非接触識別タグへの書き込みシステムを示す。
図3(a)において、41、42は撮影機、5は画像解析及びデータベース作成装置、51は制御部、52は記憶部、53はデータ処理部、(b)において、43はゲート、44は運搬装置、(d)、(e)において、61は物体画像、62は背景である。
本システムの対象となる物体3は、撮影機41及び撮影機42の撮影領域内に全体が収まる大きさであることを前提としている。また、物体3には、物体3の識別情報と物体3に関する任意の固有情報を有する図1に示した実施の形態1のRFIDタグ1が取り付けられている。本システムは、物体3の上面から画像を撮影する撮影機41と、物体3の側面から画像を撮影する撮影機42と、物体3に取り付けられたRFIDタグ1に対して読み出しと書き込みを行うRFIDタグリーダー/ライター2と、画像解析及びデータベース作成装置5からなる。
画像解析及びデータベース作成装置5は、撮影機41と撮影機42から入力された画像情報を解析し、その結果を出力するデータ処理部53とデータベースを格納する記憶部52とそれらを制御する制御部51からなる。
FIG. 3A is a diagram for explaining
In FIG. 3A, 41 and 42 are photographing machines, 5 is an image analysis and database creation device, 51 is a control unit, 52 is a storage unit, 53 is a data processing unit, in FIG. 3B, 43 is a gate, 44 is In the transporting devices (d) and (e), 61 is an object image, and 62 is a background.
It is assumed that the
The image analysis and database creation device 5 analyzes the image information input from the photographing machine 41 and the photographing machine 42, outputs the result, a
図3(b)に本システムの一部を格納したゲート43と物体3を運搬する運搬装置44の外観を示す。図3(c)はゲート43の一部切断図で、ゲート43内部における撮影機41と撮影機42とRFIDタグリーダー/ライター2の配置を示す。
物体3がゲート43内を通過することによって、物体3の形状及び大きさの自動認識と、自動認識によって生成した形状及び大きさ情報のRFIDタグ1ヘの書き込みが行われる。
物体3を運搬装置44に乗せて、図3(b)に示したゲート43の内部に進入させる。物体3を運搬する速度は、撮影機41及び撮影機42のシャッタースピードよりも十分遅いものとする。RFIDタグリーダー/ライター2は、物体3に設置されたRFIDタグ1に質問信号を送信し、RFIDタグ1からの応答信号を受信することによって、あらかじめ書き込まれた物体3の識別情報と物体3に関する任意の固有情報を読み出し、それらの情報を画像解析及びデータベース作成装置5へ出力する。画像解析及びデータベース作成装置5は、RFIDタグリーダー/ライター2から入力された物体3の識別情報と、物体3に関する任意の固有情報を記憶部52に格納する。
撮影機41は物体3の上面から、撮影機42は物体3の側面からそれぞれ画像を撮影する。各々の撮影機41、32は、物体3が撮影領域に進入し、物体3の終端が自らの撮影領域に現れた時点の画像情報を画像解析及びデータベース作成装置5に出力する。ここで得られる画像の例を図3(d)、(e)に示す。物体3は撮影機41及び撮影機42の撮影領域よりも小さいので、画像には物体3の全体が収まっている。画像解析及びデータベース作成装置5は、撮影機41と撮影機42から画像情報を取得し、データ処理部53で画像解析を行い、背景62と物体画像61とのコントラストから物体画像61の輪郭を抽出し、画像中で物体画像61が占める割合と、予め抽出した画像内物体の表示サイズと実サイズの対応関係から輪郭の長さを推定し、これらの情報を数値化して記憶部52とRFIDタグリーダー/ライター2へ出力する。また、記憶部52には、これらの数値情報を上記で既に格納されている物体3の識別情報と物体3に関する任意の固有情報と共にデータベースとして格納する。RFIDタグリーダー/ライター2は、画像解析及びデータベース作成装置5から入力された物体3の形状及び大きさ情報をRFIDタグ1ヘ書き込む。
以上の手順を踏まえた後、本システムの使用者(管理者)は、必要に応じてRFIDタグリーダー/ライター2をRFIDタグ1と交信させることによって、物体3の識別情報と物体3に関する任意の固有情報に加えて、物体3の形状及び大きさ情報を得ることができる。
FIG. 3B shows the external appearance of the
As the
The
The photographing machine 41 takes an image from the upper surface of the
After taking the above procedure into consideration, the user (administrator) of this system makes the RFID tag reader / writer 2 communicate with the RFID tag 1 as necessary, thereby identifying the identification information of the
上記のように本実施の形態3では、識別対象である物体3の識別情報と、物体3の形状及び大きさ情報を少なくとも格納する記憶部12(図1参照)と、質問信号を受信し、記憶部12に格納されている情報を含む応答信号を送信する無線処理部13とを有するRFIDタグ1と、RFIDタグ1に質問信号を送信し、RFIDタグ1から返信される応答信号を受信し読み出す手段と、物体3の情報をRFIDタグ1に送信し、記憶部12に書き込む手段とを有するRFIDタグリーダー/ライター2と、物体3を第1の方向から撮影して第1の画像情報を出力する第1の撮影機41と、物体3を第2の方向から撮影して第2の画像情報を出力する第2の撮影機42と、第1及び第2の画像情報における背景と物体3とのコントラストの差を利用して物体3の輪郭を抽出して物体3の形状情報を生成し、第1及び第2の画像情報中で物体3が占める面積を利用して物体3の大きさ情報を生成し、形状及び大きさ情報をRFIDタグリーダー/ライター2に出力し、少なくとも識別情報と形状及び大きさ情報をデータベース化して記憶するデータ処理部(データ処理手段)53とを備えている。
As described above, in the third embodiment, the storage unit 12 (see FIG. 1) that stores at least the identification information of the
上記のように本実施の形態3によれば、RFIDタグ1が設置された物体3の形状及び大きさを数値化し、同時に該数値情報をRFIDタグ1に書き込む操作を自動的に行うことによって、RFIDタグ1を利用する荷物運搬システムの効率を向上することができる。また、RFIDタグリーダー/ライター2によって、RFIDタグ1から物体3の形状及び大きさ情報を読み込むことによって、物体3が占める空間を自動的に認識することができ、該荷物運搬システムをより高度化することができる。
As described above, according to the third embodiment, the shape and size of the
実施の形態4
図4は、本発明の実施の形態4を説明する図であり、物体形状自動認識システム及び非接触識別タグへの書き込みシステムを示す。図4において、7は入力装置である。
本実施の形態4の構成は、上記実施の形態3とほぼ同様である。上記実施の形態3においては、RFIDタグリーダー/ライター2が、物体3に設置されたRFIDタグ1に質問信号を送信し、RFIDタグ1からの応答信号を受信することによって、あらかじめ書き込まれた物体3の識別情報と物体3に関する任意の固有情報を読み出し、それらの情報を画像解析及びデータベース作成装置5へ出力した。これに対して、本実施の形態4においては、本システムの使用者は物体3の識別情報と物体3に関する任意の固有情報を、例えばパーソナルコンピュータ等の所定の入力装置7によって画像解析及びデータベース作成装置5に入力するようになっている。画像解析及びデータベース作成装置5は、入力装置7により入力された物体3の識別情報と物体3に関する任意の固有情報を記億部42に格納する。すなわち、本実施の形態4は、上記実施の形態3とは、識別対象である物体3の識別情報と固有情報を、使用者が任意に与えることができる点が異なる。その他の構成は実施の形態3と同様である。すなわち、図3(b)に示したゲート43や、物体3を運搬する運搬装置44の外観、図3(c)に示したゲート43内部における撮影機41と撮影機42とRFIDタグリーダー/ライター2の配置、図3(d)、(e)に示した画像の例等は同じである。
Embodiment 4
FIG. 4 is a diagram for explaining Embodiment 4 of the present invention, and shows an automatic object shape recognition system and a system for writing to a non-contact identification tag. In FIG. 4, 7 is an input device.
The configuration of the fourth embodiment is substantially the same as that of the third embodiment. In the third embodiment, the RFID tag reader / writer 2 transmits an interrogation signal to the RFID tag 1 installed on the
実施の形態5
図5は、本発明の実施の形態5を説明する図であり、物体形状自動認識システム及び非接触識別タグへの書き込みシステムを示す。図5(b)において、15は蛍光塗料、図5(c)において、81はRFIDタグ画像である。
本実施の形態5の構成は、上記実施の形態3とほぼ同様である。本実施の形態5においては、物体3の上面に設置されたRFIDタグ1の表面には、図5(b)に示すように表面に蛍光塗料15が塗布してある。蛍光塗料15による蛍光の色は、本システムにおいて既知であるものとする。その他の構成は実施の形態3と同様である。すなわち、図3(b)に示したゲート43や、物体3を運搬する運搬装置44の外観、図3(c)に示したゲート43内部における撮影機41と撮影機42とRFIDタグリーダー/ライター2の配置等は同じである。
図5(c)に示す撮影機41により撮影された物体3の上面の画像には、RFIDタグ1に塗布した蛍光塗料15による蛍光、すなわち、RFIDタグ画像81が撮像されている。上記実施の形態3と同様に、画像解析及びデータベース作成装置5は、撮影機41と撮影機42から画像情報を取得し、データ処理部53で画像解析を行い、背景62と物体画像61とのコントラストから物体画像61の輪郭を抽出し、画像中で物体画像61が占める割合と、予め抽出した画像内物体の表示サイズと実サイズの対応関係から輪郭の長さを推定し、蛍光が観測された位置をRFIDタグ1の位置と定義し、物体3に対するRFIDタグ1の位置を認識し、これらの情報を数値化して記憶部52とRFIDタグリーダー/ライター2へ出力する。また、記憶部52には、これらの数値情報を上記で既に格納されている物体3の識別情報と物体3に関する任意の固有情報と共にデータベースとして格納する。RFIDタグリーダー/ライター2は、画像解析及びデータベース作成装置5から入力された物体3の形状及び大きさ情報と、物体3に対するRFIDタグ1の位置情報とをRFIDタグ1ヘ書き込む。
以上の手順を踏まえた後、本システムの使用者は、必要に応じてRFIDタグリーダー/ライター2をRFIDタグ1と交信させることによって、物体3の識別情報と物体3に関する任意の固有情報に加えて、物体3の形状及び大きさ情報と、物体3におけるRFIDタグ1の位置情報とを得ることができる。
このように本実施の形態5では、RFIDタグ1の表面に蛍光塗料15が塗布され、データ処理部53は、第1又は第2の画像情報において、蛍光塗料15により発光点として撮影されるRFIDタグ1の、物体3の輪郭に対する相対位置を検出して物体3におけるRFIDタグ1の貼付位置情報を生成し、この貼付位置情報をデータベース化して記憶するという構成になっている。本実施の形態5によれば、RFIDタグ1の表面に蛍光塗料15を塗布し、RFIDタグリーダー/ライター2によって、RFIDタグ1から物体3の形状及び大きさ情報とRFIDタグ1の貼付位置情報を読み込むことにより、RFIDタグ1の貼付位置を基準とした物体3が占める空間を自動的に認識することができ、該荷物運搬システムをより高度化することができる。
Embodiment 5
FIG. 5 is a diagram for explaining a fifth embodiment of the present invention and shows an automatic object shape recognition system and a system for writing to a non-contact identification tag. In FIG. 5B, 15 is a fluorescent paint, and in FIG. 5C, 81 is an RFID tag image.
The configuration of the fifth embodiment is almost the same as that of the third embodiment. In the fifth embodiment, a fluorescent paint 15 is applied to the surface of the RFID tag 1 placed on the upper surface of the
In the image of the upper surface of the
After considering the above procedure, the user of this system communicates the RFID tag reader / writer 2 with the RFID tag 1 as necessary in addition to the identification information of the
As described above, in the fifth embodiment, the fluorescent paint 15 is applied to the surface of the RFID tag 1, and the
実施の形態6
図6は、本発明の実施の形態6を説明する図であり、物体形状自動認識システム及び非接触識別タグへの書き込みシステムを示す。
本実施の形態6の構成は、上記実施の形態4における物体3の識別情報と固有情報の入力装置7を有する特徴と、上記実施の形態5におけるRFIDタグ1の表面に蛍光塗料15を塗布した特徴を組み合せた例である。上記実施の形態3の図3(b)に示したゲート43や、物体3を運搬する運搬装置44の外観、図3(c)に示したゲート43内部における撮影機41と撮影機42とRFIDタグリーダー/ライター2の配置、上記実施の形態5の図5(b)に示したRFIDタグ1の表面に蛍光塗料15を塗布した様子、図5(c)、(d)に示した画像の例等は同じである。
本実施の形態6においては、上記実施の形態4と同様に、本システムの使用者は物体3の識別情報と物体3に関する任意の固有情報を、例えばパーソナルコンピュータ等の所定の入力装置7によって画像解析及びデータベース作成装置5に入力する。画像解析及びデータベース作成装置5は、入力装置7により入力された物体3の識別情報と物体3に関する任意の固有情報を記億部42に格納する。本実施の形態6は、識別対象である物体3の識別情報と固有情報を、使用者が任意に与えることができる。
また、本実施の形態6においては、物体3の上面に設置されたRFIDタグ1の表面には、図5(b)に示したように表面に蛍光塗料15が塗布してある。蛍光塗料15による蛍光の色は、本システムにおいて既知であるものとする。図5(c)に示した撮影機41により撮影された物体3の上面の画像には、RFIDタグ1に塗布した蛍光塗料15による蛍光が撮像されている。画像解析及びデータベース作成装置5は、撮影機41と撮影機42から画像情報を取得し、データ処理部53で画像解析を行い、背景62と物体画像61とのコントラストから物体画像61の輪郭を抽出し、画像中で物体画像61が占める割合と、予め抽出した画像内物体の表示サイズと実サイズの対応関係から輪郭の長さを推定し、蛍光が観測された位置をRFIDタグ1の位置と定義し、物体3に対するRFIDタグ1の位置を認識し、これらの情報を数値化して記憶部52とRFIDタグリーダー/ライター2へ出力する。また、記憶部52には、これらの数値情報を入力装置7により入力され、既に格納されている物体3の識別情報と物体3に関する任意の固有情報と共にデータベースとして格納する。RFIDタグリーダー/ライター2は、画像解析及びデータベース作成装置5から入力された物体3の識別情報と、固有情報と、形状及び大きさ情報と、物体3におけるRFIDタグ1の位置情報とをRFIDタグ1ヘ書き込む。
以上の手順を踏まえた後、本システムの使用者は、必要に応じてRFIDタグリーダー/ライター2をRFIDタグ1と交信させることによって、物体3の識別情報と物体3に関する任意の固有情報に加えて、物体3の形状及び大きさ情報と、物体3におけるRFIDタグ1の位置情報とを得ることができる。上記実施の形態5とは、認識対象である物体3の識別情報と固有情報を、入力装置7により使用者が任意に与えることができる点が異なる。
なお、以上説明した実施の形態は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。したがって、上記実施の形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。
Embodiment 6
FIG. 6 is a diagram for explaining the sixth embodiment of the present invention, and shows an automatic object shape recognition system and a writing system for a non-contact identification tag.
The configuration of the sixth embodiment is characterized in that the identification information and unique information input device 7 of the
In the sixth embodiment, as in the fourth embodiment, the user of this system images the identification information of the
Further, in the sixth embodiment, the fluorescent paint 15 is applied to the surface of the RFID tag 1 installed on the upper surface of the
After considering the above procedure, the user of this system communicates the RFID tag reader / writer 2 with the RFID tag 1 as necessary in addition to the identification information of the
The embodiment described above is described in order to facilitate understanding of the present invention, and is not described in order to limit the present invention. Therefore, each element disclosed in the above embodiment includes all design changes and equivalents belonging to the technical scope of the present invention.
1…RFIDタグ、2…RFIDタグリーダー/ライター、3…物体、5…画像解析及びデータベース作成装置、7…入力装置、11…制御部、12…記憶部、13…無線処理部、14…蓄電部、21…制御部、22…無線処理部、41、42…撮影機、43…ゲート、44…運搬装置、51…制御部、52…記憶部、53…データ処理部、61…物体画像、62…背景、81…RFIDタグ画像、A、B、C、D、E…RFIDタグ、
101…商品、102…バーコード、103…無線端末、104…入庫作業者、105…位置検出装置、106…フォークリフト。
DESCRIPTION OF SYMBOLS 1 ... RFID tag, 2 ... RFID tag reader / writer, 3 ... Object, 5 ... Image analysis and database creation apparatus, 7 ... Input device, 11 ... Control part, 12 ... Memory | storage part, 13 ... Wireless processing part, 14 ... Power storage , 21 ... control unit, 22 ... wireless processing unit, 41 and 42 ... photographing machine, 43 ... gate, 44 ... transport device, 51 ... control unit, 52 ... storage unit, 53 ... data processing unit, 61 ... object image, 62 ... Background, 81 ... RFID tag image, A, B, C, D, E ... RFID tag,
DESCRIPTION OF
Claims (6)
前記物体を第2の方向から撮影して第2の画像情報を出力する第2の撮影機と、
前記第1及び第2の画像情報における前記物体と背景とのコントラストの差を利用し前記物体の輪郭を抽出して前記物体の形状情報を生成し、前記第1及び第2の画像情報中で前記物体が占める面積を利用して前記物体の大きさ情報を生成し、前記物体の識別情報と前記形状及び大きさ情報とをデータベース化して記憶するデータ処理手段と
を備えた物体形状自動認識システムにおいて、
前記物体には、表面に蛍光塗料が塗布された非接触識別タグが貼付されており、
前記データ処理手段は、さらに、前記第1又は第2の画像情報において前記蛍光塗料により発光点として撮影される前記非接触識別タグの前記物体の輪郭に対する相対位置を検出して前記物体における前記非接触識別タグの貼付位置情報を生成し、前記貼付位置情報をデータベース化して記憶する
ことを特徴とする物体形状自動認識システム。 A first photographing device for photographing an object to be identified from a first direction and outputting first image information;
A second photographing device for photographing the object from a second direction and outputting second image information;
Using the difference in contrast between the object and the background in the first and second image information, the contour of the object is extracted to generate shape information of the object, and in the first and second image information utilizing the area in which the object occupies generates size information of the object, the body shape automatic ones with identification information before Symbol object and the said shape and size information and data processing means for database and stored In the recognition system ,
The object has a non-contact identification tag applied with a fluorescent paint on the surface,
The data processing means further detects a relative position of the non-contact identification tag taken as a light emitting point by the fluorescent paint in the first or second image information with respect to a contour of the object, and the non-contact in the object. Affixing position information of the contact identification tag is generated, and the affixing position information is stored in a database
An object shape automatic recognition system.
前記非接触識別タグに前記質問信号を送信し、前記非接触識別タグから返信される前記応答信号を受信し読み出す手段と、前記物体の情報を前記非接触識別タグに送信し、前記記憶手段に書き込む手段とを有する無線端末と、
前記物体を第1の方向から撮影して第1の画像情報を出力する第1の撮影機と、
前記物体を第2の方向から撮影して第2の画像情報を出力する第2の撮影機と、
前記第1及び第2の画像情報における背景と前記物体とのコントラストの差を利用し前記物体の輪郭を抽出して前記物体の形状情報を生成し、前記第1及び第2の画像情報中で前記物体が占める面積を利用して前記物体の大きさ情報を生成し、前記形状及び大きさ情報を前記物体の情報として前記無線端末に出力するとともに、前記識別情報と前記形状及び大きさ情報とをデータベース化して記憶するデータ処理手段と
を備えた物体形状自動認識システムにおいて、
前記非接触識別タグは、表面に蛍光塗料が塗布され、かつ前記物体に貼付されており、
前記データ処理手段は、さらに、前記第1又は第2の画像情報において前記蛍光塗料により発光点として撮影される前記非接触識別タグの前記物体の輪郭に対する相対位置を検出して前記物体における前記非接触識別タグの貼付位置情報を生成し、前記貼付位置情報を前記物体の情報として前記無線端末に出力するとともに、前記貼付位置情報をデータベース化して記憶する
ことを特徴とする物体形状自動認識システム。 Non having transmitting and receiving means for transmitting a response signal containing information stored before Symbol storage means receives the storage means and question signal to store the information of the identification information and the object of the object is an identification target A contact identification tag;
Means for transmitting the interrogation signal to the non-contact identification tag, receiving and reading out the response signal returned from the non-contact identification tag, and transmitting information on the object to the non-contact identification tag; A wireless terminal having means for writing;
A first photographing device for photographing the object from a first direction and outputting first image information;
A second photographing device for photographing the object from a second direction and outputting second image information;
Using the difference in contrast between the background and the object in the first and second image information, the contour of the object is extracted to generate shape information of the object, and the first and second image information utilizing the area in which the object occupies generates size information of the object, the shape and to output to the radio terminal as the information for the size information the object, the before and SL identification shape and size information in the body shape automatic Identification systems those comprising a data processing means for storing in a database the door,
The non-contact identification tag is coated with a fluorescent paint on the surface, and affixed to the object,
The data processing means further detects a relative position of the non-contact identification tag taken as a light emitting point by the fluorescent paint in the first or second image information with respect to a contour of the object, and the non-contact in the object. Affixing position information of the contact identification tag is generated, and the affixing position information is output to the wireless terminal as the object information, and the affixing position information is stored in a database.
An object shape automatic recognition system.
前記物体を第1の方向から撮影して第1の画像情報を出力する第1の撮影機と、
前記物体を第2の方向から撮影して第2の画像情報を出力する第2の撮影機と、
前記第1及び第2の画像情報における背景と前記物体とのコントラストの差を利用し前記物体の輪郭を抽出して前記物体の形状情報を生成し、前記第1及び第2の画像情報中で前記物体が占める面積を利用して前記物体の大きさ情報を生成し、前記形状及び大きさ情報を前記物体の情報として前記無線端末に出力するとともに、前記識別情報と前記形状及び大きさ情報とをデータベース化して記憶するデータ処理手段と
を備えた非接触識別タグへの書き込みシステムにおいて、
前記非接触識別タグは、表面に蛍光塗料が塗布され、かつ前記物体に貼付されており、
前記データ処理手段は、さらに、前記第1又は第2の画像情報において前記蛍光塗料により発光点として撮影される前記非接触識別タグの前記物体の輪郭に対する相対位置を検出して前記物体における前記非接触識別タグの貼付位置情報を生成し、前記貼付位置情報を前記物体の情報として前記無線端末に出力するとともに、前記貼付位置情報をデータベース化して記憶する
ことを特徴とする非接触識別タグへの書き込みシステム。 Non having transmitting and receiving means for transmitting a response signal containing information stored before Symbol storage means receives the storage means and question signal to store the information of the identification information and the object of the object is an identification target Means for transmitting the interrogation signal to the contact identification tag, receiving and reading the response signal returned from the non-contact identification tag, and means for transmitting the information of the object to the non-contact identification tag and writing to the storage means A wireless terminal having
A first photographing device for photographing the object from a first direction and outputting first image information;
A second photographing device for photographing the object from a second direction and outputting second image information;
Using the difference in contrast between the background and the object in the first and second image information, the contour of the object is extracted to generate shape information of the object, and the first and second image information utilizing the area in which the object occupies generates size information of the object, the shape and to output to the radio terminal as the information for the size information the object, the before and SL identification shape and size information in writing system to the contactless identification tag comprising a data processing means for storing in a database the door,
The non-contact identification tag is coated with a fluorescent paint on the surface, and affixed to the object,
The data processing means further detects a relative position of the non-contact identification tag taken as a light emitting point by the fluorescent paint in the first or second image information with respect to a contour of the object, and the non-contact in the object. Affixing position information of the contact identification tag is generated, and the affixing position information is output to the wireless terminal as the object information, and the affixing position information is stored in a database.
A system for writing on a non-contact identification tag.
ことを特徴とする請求項3記載の非接触識別タグへの書き込みシステム。 4. The system for writing into a non-contact identification tag according to claim 3 , wherein the identification information stored as a database by the data processing means is read from the non-contact identification tag by the wireless terminal. .
ことを特徴とする請求項3記載の非接触識別タグへの書き込みシステム。 The system for writing to a non-contact identification tag according to claim 3, wherein the non-contact identification tag acquires drive power of an internal circuit by a signal received from the wireless terminal.
ことを特徴とする請求項3記載の非接触識別タグへの書き込みシステム。 The identification information inputted by a predetermined input means and the unique information about the object are written by the writing means together with the shape and size information generated by the data processing means and the pasting position information of the non-contact identification tag. 4. The non-contact identification tag writing system according to claim 3 , wherein the non-contact identification tag is written in the storage means.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003295043A JP4197282B2 (en) | 2003-08-19 | 2003-08-19 | Automatic object shape recognition system and non-contact identification tag writing system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003295043A JP4197282B2 (en) | 2003-08-19 | 2003-08-19 | Automatic object shape recognition system and non-contact identification tag writing system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005063290A JP2005063290A (en) | 2005-03-10 |
JP4197282B2 true JP4197282B2 (en) | 2008-12-17 |
Family
ID=34371403
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003295043A Expired - Fee Related JP4197282B2 (en) | 2003-08-19 | 2003-08-19 | Automatic object shape recognition system and non-contact identification tag writing system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4197282B2 (en) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006292505A (en) * | 2005-04-08 | 2006-10-26 | Nippon Telegr & Teleph Corp <Ntt> | Disposition measuring instrument and disposition measuring method |
JP5002907B2 (en) * | 2005-04-15 | 2012-08-15 | オムロン株式会社 | Information processing apparatus and method |
JP4728822B2 (en) * | 2006-02-02 | 2011-07-20 | 日立Geニュークリア・エナジー株式会社 | Image inspection method, image inspection program, and image inspection apparatus |
JP2007302391A (en) * | 2006-05-10 | 2007-11-22 | Toshiba Tec Corp | Device and method for recognizing rfid tag |
JP5431720B2 (en) * | 2008-12-26 | 2014-03-05 | 東洋炭素株式会社 | Warehouse operation method and warehouse operation apparatus |
-
2003
- 2003-08-19 JP JP2003295043A patent/JP4197282B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005063290A (en) | 2005-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11531962B2 (en) | Inventory management system | |
CN100356398C (en) | Object tagged with RFID tag and device and method for processing it | |
US9679180B2 (en) | Portable data capture device | |
US20090102613A1 (en) | Device for Electronic Identification of Items | |
US20220292323A1 (en) | Correlated asset identifier association | |
KR101679381B1 (en) | Method for providing inventory management service | |
US10380542B2 (en) | Method and device for process tracking of operations or services relating to at least one object | |
JP5003104B2 (en) | Access device and program | |
JPWO2005115890A1 (en) | Product management system | |
CN106529882B (en) | Intelligent warehousing system based on narrowband Internet of things | |
JP2019101693A (en) | System for grasping in-physical-distribution-warehouse operation | |
EP2854072B1 (en) | Device and method for bulk encoding tags | |
JP4197282B2 (en) | Automatic object shape recognition system and non-contact identification tag writing system | |
EP2637125B1 (en) | Portable terminal and computer readable storage medium | |
JP2004352436A (en) | Object confirmation system | |
KR20190119464A (en) | Method and apparatus for Logistics by using reusable RFID tag | |
KR20170058086A (en) | RFID Label Encoder for Writing User Code on RFID Tag Attached to RFID Label, Label Printing System and User Code Writing Method | |
JP4579026B2 (en) | Compound marker information acquisition device | |
JP4837290B2 (en) | Article explorer | |
JP2005170579A (en) | Information control system | |
CN114222667A (en) | Printer and program | |
JP2010241570A (en) | System and method for sorting loads | |
CN218729071U (en) | Integrated automatic association and coding device | |
CN101751546A (en) | Information processing device, communication control method and program | |
JP6772314B2 (en) | A system having an article management sheet, an article management sheet, and an information processing device. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080624 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080821 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080924 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080925 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111010 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111010 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121010 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121010 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131010 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |