JP6648780B2 - Contents management device, contents management method, program - Google Patents

Contents management device, contents management method, program Download PDF

Info

Publication number
JP6648780B2
JP6648780B2 JP2018085799A JP2018085799A JP6648780B2 JP 6648780 B2 JP6648780 B2 JP 6648780B2 JP 2018085799 A JP2018085799 A JP 2018085799A JP 2018085799 A JP2018085799 A JP 2018085799A JP 6648780 B2 JP6648780 B2 JP 6648780B2
Authority
JP
Japan
Prior art keywords
stored
storage box
user
storage
face image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018085799A
Other languages
Japanese (ja)
Other versions
JP2019192036A (en
Inventor
実 秋山
実 秋山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2018085799A priority Critical patent/JP6648780B2/en
Publication of JP2019192036A publication Critical patent/JP2019192036A/en
Application granted granted Critical
Publication of JP6648780B2 publication Critical patent/JP6648780B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Supports Or Holders For Household Use (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Analysis (AREA)

Description

本発明は、格納物管理装置、格納物管理方法、プログラムに関する。   The present invention relates to a stored item management device, a stored item management method, and a program.

マンション、スポーツ施設、その他公共施設などにおいて荷物などを個別に保管する格納ボックスを備えた格納物管理装置が設置されている。このような格納物管理装置のうち宅配ロッカーを管理する物品管理システムの技術が特許文献1に開示されている。当該特許文献1にはカメラによって撮影した人物の顔画像に基づいて、当該人物の宅配物があると判断した場合、表示部に宅配物が有ることを案内表示する技術が開示されている。   In a condominium, a sports facility, and other public facilities, a storage management device including a storage box for individually storing luggage and the like is installed. Patent Literature 1 discloses a technology of an article management system that manages a home delivery locker among such stored article management devices. Japanese Patent Application Laid-Open No. 2003-139,086 discloses a technique for guiding the display of a home delivery item on a display unit when it is determined based on a face image of the person captured by a camera that the home delivery item exists.

特開2003−276849号公報JP-A-2003-276849

上述のような技術においては格納物を個別に保管する格納ボックスに格納物があることを、その通知が必要な場合に特定の人物に通知する技術が求められている。   In the above-described technology, there is a demand for a technology for notifying a specific person that a stored item is stored in a storage box for individually storing the stored item when necessary.

そこでこの発明は、上述の課題を解決する格納物管理装置、格納物管理方法、プログラムを提供することを目的としている。   Therefore, an object of the present invention is to provide a stored object management device, a stored object management method, and a program that solve the above-described problems.

本発明の第1の態様によれば、格納物管理装置は、撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定部と、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定部と、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する通知判定部と、通知すると判定された場合に通知情報を出力する通知部と、を備え、前記通知判定部は、前記格納ボックスに設けられ前記格納物に付された属性情報のうちの宛名を読み取る読み取り部から取得した前記宛名と当該宛名が予め記録された宛名であるかを示す条件とに基づいて、前記取得した宛名が前記記録された宛名である場合に、前記格納物が前記格納ボックスに格納されていることを前記宛名に対応する通知先に通知すると判定することを特徴とする。
また格納物管理装置は、撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定部と、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定部と、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する通知判定部と、通知すると判定された場合に通知情報を出力する通知部と、を備え、前記通知判定部は、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定することを特徴とする。
According to the first aspect of the present invention, based on a face image acquired from a photographing device, a stored object management device uses a storage box in which a person recognized from the face image individually stores a plurality of stored items. A user determination unit that determines whether the user is a user who performs the storage, a storage presence / absence determination unit that determines whether a storage object for the user determined based on the face image is stored in the storage box, and a determination based on the face image. A notification determination unit configured to determine whether or not to notify the user that the storage item is stored in the storage box based on a predetermined condition when the storage item for the user is stored in the storage box; when, and a notification unit for outputting notification information when it is determined that the notification, the notification determining unit, among the attribute information attached to the storage product is provided in the storage box Based on the address acquired from the reading unit that reads the address and a condition indicating whether the address is a pre-recorded address, if the acquired address is the recorded address, the stored item is It is characterized in that it is determined to notify the notification destination corresponding to the address that the content is stored in the storage box .
Further, the stored item management device includes a user determination unit that determines, based on the face image acquired from the imaging device, whether the person recognized from the face image is a user who uses a storage box that individually stores a plurality of stored items. A storage presence / absence determination unit that determines whether a storage object for the user determined based on the face image is stored in the storage box, and a storage object for the user determined based on the face image is stored in the storage box. A notification determination unit that determines whether or not to notify the user that the storage object is stored in the storage box based on a predetermined condition when the storage is stored; and a notification when the notification is determined to be performed. A notification unit that outputs information, wherein the notification determination unit is provided in the storage box and obtains the weight obtained from a weight sensor that detects the weight of the storage object. Based on the condition indicating whether the weight is equal to or greater than a pre-recorded weight threshold, when the acquired weight is equal to or greater than the weight threshold, when notifying that the stored object is stored in the storage box. It is characterized by determining.

本発明の第2の態様によれば、格納物管理方法は、撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定し、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定し、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物に付された属性情報のうちの宛名を読み取る読み取り部から取得した前記宛名と当該宛名が予め記録された宛名であるかを示す条件とに基づいて、前記取得した宛名が前記記録された宛名である場合に、前記格納物が前記格納ボックスに格納されていることを前記宛名に対応する通知先に通知すると判定し、通知すると判定された場合に通知情報を出力することを特徴とする。
また格納物管理方法は、撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定し、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定し、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定し、通知すると判定された場合に通知情報を出力することを特徴とする。
According to a second aspect of the present invention, a stored item management method uses a storage box in which a person recognized from a face image based on a face image obtained from an imaging device stores a plurality of stored items individually. The storage box for the user determined based on the face image is stored in the storage box, and the storage box for the user determined based on the face image is stored in the storage box. when performing the process of determining whether or not to notify based on said stored product to the user is stored in the storage box when stored in a predetermined condition, provided in the storage box Based on the address obtained from the reading unit that reads the address of the attribute information attached to the storage and the condition indicating whether the address is a pre-recorded address, When obtained the address is said recorded address, it is determined that the storage object is to notify that it is stored in the storage box in the notification destination corresponding to the address, the notification information when it is determined to notify Is output.
Further, the stored item management method determines, based on the face image obtained from the imaging device, whether a person recognized from the face image is a user who uses a storage box that individually stores a plurality of stored items,
It is determined whether the storage for the user determined based on the face image is stored in the storage box, and when the storage for the user determined based on the face image is stored in the storage box, When performing a process of determining whether to notify the user based on a predetermined condition that the stored item is stored in the storage box, the weight of the stored item provided in the storage box is detected. Based on the weight acquired from the weight sensor and the condition indicating whether the weight is greater than or equal to a previously recorded weight threshold, if the acquired weight is greater than or equal to the weight threshold, the storage object is the storage box. And that the notification information is output when it is determined that the notification is stored.

本発明の第3の態様によれば、プログラムは、格納物管理装置のコンピュータを、撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定手段、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定手段、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定する通知判定手段、通知すると判定された場合に通知情報を出力する通知手段、として機能させることを特徴とする。
またプログラムは、格納物管理装置のコンピュータを、撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定手段、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定手段、前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定する通知判定手段、通知すると判定された場合に通知情報を出力する通知手段、として機能させることを特徴とする。
According to the third aspect of the present invention, the program causes the computer of the stored object management device to store a plurality of stored items individually by a person who has recognized from the face image based on the face image acquired from the photographing device. user user determining means for determining whether, storing presence determining means for determining whether stored product for the user which is determined on the basis of the face image is stored in the storage box to utilize the storage box, based on the face image And determining whether or not to notify the user that the stored item is stored in the storage box based on a predetermined condition when the stored item for the user determined in the above is stored in the storage box. When performing the processing, the weight obtained from the weight sensor provided in the storage box and detecting the weight of the storage object and the weight in which the weight is recorded in advance. Based on said condition indicating whether or larger than the threshold, if the obtained weight is above the weight threshold, the notification determining unit which the storage material is determined to notify that it is stored in the storage box and informs It is made to function as notification means for outputting notification information when it is determined.
Further, the program determines, based on the face image obtained from the imaging device, a computer of the storage management device whether the person recognized from the face image is a user who uses a storage box for individually storing a plurality of storages. User determination means, storage presence / absence determination means for determining whether or not a storage object for the user determined based on the face image is stored in the storage box, and a storage object for the user determined based on the face image is When performing a process of determining whether or not to notify the user that the stored item is stored in the storage box based on a predetermined condition when stored in the storage box, The weight obtained from the weight sensor provided for detecting the weight of the storage object and the condition indicating whether the weight is equal to or greater than a weight threshold value recorded in advance. Notification determining means for determining that the stored object is stored in the storage box when the acquired weight is equal to or greater than the weight threshold, based on the information, and notification information when determined to be notified. As a notifying means for outputting a message.

本発明によれば、格納ボックスに格納物があることを、その通知が必要な場合に特定の人物に通知することができる。   According to the present invention, it is possible to notify a specific person that a storage object is present in a storage box when the notification is necessary.

本発明の一実施形態による管理システムの概要を示す図である。It is a figure showing the outline of the management system by one embodiment of the present invention. 本発明の一実施形態による格納ボックスの例を示す図である。FIG. 4 is a diagram illustrating an example of a storage box according to an embodiment of the present invention. 本発明の一実施形態による格納物管理装置のハードウェア構成を示す図である。FIG. 2 is a diagram illustrating a hardware configuration of a stored object management device according to an embodiment of the present invention. 本発明の一実施形態による格納物管理装置の機能ブロック図である。FIG. 2 is a functional block diagram of the stored object management device according to the embodiment of the present invention. 本発明の第一実施形態によるユーザ管理テーブルを示す図である。FIG. 4 is a diagram illustrating a user management table according to the first embodiment of the present invention. 本発明の第一実施形態による配達員管理テーブルを示す図である。It is a figure showing a deliveryman management table by a first embodiment of the present invention. 本発明の第一実施形態による格納物管理装置の処理フローを示す図である。It is a figure showing the processing flow of the stored matter management device by a first embodiment of the present invention. 本発明の第一実施形態による荷物管理テーブルを示す図である。FIG. 4 is a diagram illustrating a package management table according to the first embodiment of the present invention. 本発明の第二実施形態による格納物管理装置の処理フローを示す図である。It is a figure showing the processing flow of the stored matter management device by a second embodiment of the present invention. 本発明の第二実施形態による荷物管理テーブルを示す図である。It is a figure showing the baggage management table by a second embodiment of the present invention. 本発明の一実施形態による格納物管理装置の最小構成を示す図である。It is a figure showing the minimum composition of the storage management device by one embodiment of the present invention.

以下、本発明の一実施形態による管理システムを図面を参照して説明する。
図1は管理システムの概要を示す図である。
この図で示すように管理システム100は、格納物管理装置1、ロッカー2、カメラ3、を備えている。ロッカー2とカメラ3は格納物管理装置1と通信接続されている。管理システム100においてカメラ3は複数台がロッカー2の近傍やロッカー2に通じる通路に設置されてそれらカメラ3が格納物管理装置1に接続されてよい。
Hereinafter, a management system according to an embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram showing an outline of the management system.
As shown in FIG. 1, the management system 100 includes a stored object management device 1, a locker 2, and a camera 3. The locker 2 and the camera 3 are communicatively connected to the stored item management device 1. In the management system 100, a plurality of cameras 3 may be installed near the locker 2 or in a passage leading to the locker 2, and the cameras 3 may be connected to the stored object management device 1.

管理システム100は例えばマンション、スポーツ施設、駅などの公共施設に設置される。格納物管理装置1はロッカー2に1つまたは複数設けられた格納ボックス内に格納された格納物を管理する。   The management system 100 is installed in public facilities such as condominiums, sports facilities, and stations. The stored item management device 1 manages stored items stored in one or more storage boxes provided in the locker 2.

図2は格納ボックスの例を示す図である。
格納ボックス21は1つまたは複数のセンサが内部に設けられている。例えば格納ボックス21には図2に示すように、重量センサ22、カメラ23、タグリーダ24が備わる。格納ボックス21には重量センサ22、カメラ23、タグリーダ24の何れか一つまたは複数が設けられるようにしてもよい。格納ボックス21は他のセンサを設けてもよい。
FIG. 2 is a diagram illustrating an example of a storage box.
The storage box 21 has one or more sensors provided therein. For example, as shown in FIG. 2, the storage box 21 includes a weight sensor 22, a camera 23, and a tag reader 24. Any one or more of the weight sensor 22, the camera 23, and the tag reader 24 may be provided in the storage box 21. The storage box 21 may be provided with another sensor.

重量センサ22は格納物の重量を検出する。
カメラ23は格納ボックス21内の格納物に付された宛名情報などの属性情報を読み取る。
タグリーダ24は格納ボックス21内の格納物に付されたRFIDタグなどの情報記憶装置に記録された情報を読み取る。
The weight sensor 22 detects the weight of the stored object.
The camera 23 reads attribute information, such as address information, attached to a stored item in the storage box 21.
The tag reader 24 reads information recorded in an information storage device such as an RFID tag attached to an object stored in the storage box 21.

図3は格納物管理装置のハードウェア構成を示す図である。
格納物管理装置1はコンピュータ装置であり、図2で示すようにCPU(Central Processing Unit)101、ROM(Read Only Memory)102、RAM(Random Access Memory)103、HDD(Hard Disk Drive)104、インタフェース105、通信モジュール106の各ハードウェアを備える。
FIG. 3 is a diagram illustrating a hardware configuration of the stored item management device.
The storage management device 1 is a computer device, and includes a CPU (Central Processing Unit) 101, a ROM (Read Only Memory) 102, a RAM (Random Access Memory) 103, a HDD (Hard Disk Drive) 104, an interface, as shown in FIG. 105 and the communication module 106.

図4は格納物管理装置の機能ブロック図である。
格納物管理装置1のCPU101が管理プログラムを実行することにより格納物管理装置1には、制御部11、登録部12、ユーザ判定部13、格納有無判定部14、通知判定部15、通知部16の各機能部を備える。なお格納物管理装置1はデータベース10と通信接続されてよい。データベース10や格納物管理装置1はロッカー2の近傍に設置されていてもよいし、格納物管理装置1とは離れた遠隔地に設置されていてもよい。
FIG. 4 is a functional block diagram of the stored object management device.
When the CPU 101 of the stored object management device 1 executes the management program, the stored object management device 1 is provided with a control unit 11, a registration unit 12, a user determination unit 13, a storage presence / absence determination unit 14, a notification determination unit 15, and a notification unit 16. Each functional unit is provided. Note that the stored item management device 1 may be connected to the database 10 by communication. The database 10 and the storage management device 1 may be installed near the locker 2, or may be installed in a remote place remote from the storage management device 1.

まずユーザがロッカー2を利用するための登録処理について説明する。ユーザはロッカー2を利用するために自身の顔画像、メールアドレス等の通知先情報、利用する格納ボックスのボックスID、その他のユーザの属性情報、などの登録情報を登録する。ユーザはこれらの登録情報を事前に管理システムの運営業者に送信し、運営業者の担当者が格納物管理装置1のデータベース10に記録してよい。またはユーザは端末装置を用いて運営業者のインターネット等に接続された登録システムのサーバにアクセスしてこれら登録情報を送信し、登録システムがデータベース10に登録情報を記録するようにしてもよい。またはロッカー2等に設置されているカメラを備えた登録装置を用いてユーザが自身の顔画像やその他の情報を登録して、登録装置がデータベース10に登録情報を記録するようにしてもよい。   First, a registration process for a user to use the locker 2 will be described. In order to use the locker 2, the user registers his / her face image, notification destination information such as a mail address, box ID of a storage box to be used, and other user attribute information. The user may transmit the registration information to an operator of the management system in advance, and a person in charge of the operator may record the information in the database 10 of the stored object management device 1. Alternatively, the user may access the server of the registration system connected to the Internet or the like of the operator using a terminal device and transmit the registration information, and the registration system may record the registration information in the database 10. Alternatively, a user may register his / her own face image and other information using a registration device provided with a camera installed in the locker 2 or the like, and the registration device may record the registration information in the database 10.

ユーザが登録する属性情報には、格納ボックスに格納物が格納されている場合に通知情報を通知させるための条件となる情報を含む。一例としては属性情報には格納物の重量、格納物の宛名、などの情報であってよい。これによりデータベース10にはユーザ登録情報を保持するユーザ管理テーブルが記録される。ロッカー2がマンションなどに設置されて宅配物を格納するものである場合には、ユーザの属性情報に部屋番号が含まれてもよい。またロッカー2がマンションなどに設置されて宅配物を格納するものである場合には、ユーザの属性情報として家族のメールアドレス等の通知先情報が含まれる。ユーザが通知情報を送信するか否かの通信要否フラグについての情報を登録できるようにしてもよい。   The attribute information registered by the user includes information serving as a condition for notifying the notification information when a storage object is stored in the storage box. As an example, the attribute information may be information such as the weight of the stored item, the address of the stored item, and the like. Thereby, the user management table holding the user registration information is recorded in the database 10. When the locker 2 is installed in a condominium or the like and stores home deliveries, the attribute information of the user may include the room number. In the case where the locker 2 is installed in an apartment or the like and stores home delivery, notification destination information such as a mail address of a family is included as user attribute information. The user may be allowed to register information on a communication necessity flag indicating whether or not to transmit notification information.

図5はユーザ管理テーブルを示す図である。
この図が示すようにユーザ管理テーブルは、顔画像、通知先情報、ボックスID、重量、宛名、部屋番号、通知要否フラグ、家族の通知先情報等が対応付けて記録される。
FIG. 5 is a diagram showing a user management table.
As shown in this figure, the user management table records a face image, notification destination information, box ID, weight, address, room number, notification necessity flag, family notification destination information, and the like.

またロッカー2がマンションなどに設置されて宅配物を格納するものである場合には、宅配業者の配達員が事前に、自信の氏名、所属する宅配業者の名称、顔画像、連絡先、受領書送付先アドレスなどをデータベース10に登録してもよい。当該登録は上記同様に管理システムを運営する運営業者の担当者が行ってもよいし、管理システムを構成する上記登録システムが行うようにしてもよい。これによりデータベース10には配達員登録情報を保持する配達員管理テーブルが記録される。   In the case where the locker 2 is installed in an apartment or the like to store home delivery items, the delivery person of the home delivery company must provide the self-confidence name, the name of the home delivery company, the face image, the contact information, and the receipt in advance. A destination address or the like may be registered in the database 10. The registration may be performed by the person in charge of the management company that operates the management system as described above, or may be performed by the registration system that configures the management system. As a result, a deliveryman management table holding deliveryman registration information is recorded in the database 10.

図6は配達員管理テーブルを示す図である。
配達員ID、氏名、宅配業者の名称、顔画像、連絡先、受領書送付先アドレス等が対応付けて記録される。
FIG. 6 shows a deliveryman management table.
A delivery member ID, a name, a name of a courier company, a face image, a contact address, an address to which a receipt is sent, and the like are recorded in association with each other.

<第一実施形態>
次に管理システムがマンションに設置されている場合の格納物管理装置の処理フローを説明する。
図7は第一実施形態による格納物管理装置の処理フローを示す図である。
まず配達員が荷物を配達した際の格納物管理装置の処理フローについて説明する。配達員はマンションなどに荷物を配達する。配達先が不在である場合に配達員はロッカー2に荷物を格納する。この時配達員はロッカー2に設けられた複数の格納ボックス21のうち、適切な格納ボックス21を選択し、その格納ボックス21に荷物を格納する。格納ボックス21には光センサなどが設けられて光の反射によって荷物が格納されたかどうかを判定してよい。荷物が格納された場合、重量センサ22は荷物の重量を検出する。これにより重量センサ22は格納ボックス21のボックスIDと荷物の重量とを含む格納検知信号を格納物管理装置1へ送信する。
<First embodiment>
Next, a processing flow of the stored object management device when the management system is installed in an apartment will be described.
FIG. 7 is a diagram illustrating a processing flow of the stored object management device according to the first embodiment.
First, the processing flow of the stored matter management device when the delivery member delivers the package will be described. The delivery person delivers the package to an apartment or the like. When the delivery destination is absent, the delivery person stores the package in the locker 2. At this time, the delivery person selects an appropriate storage box 21 from the plurality of storage boxes 21 provided in the locker 2 and stores the package in the storage box 21. An optical sensor or the like may be provided in the storage box 21 to determine whether the luggage is stored by reflection of light. When the package is stored, the weight sensor 22 detects the weight of the package. Accordingly, the weight sensor 22 transmits a storage detection signal including the box ID of the storage box 21 and the weight of the package to the stored object management device 1.

またはカメラ23がボックスIDと撮影画像とを含む格納検知信号を格納物管理装置1へ送信してもよい。撮影画像には配達先の氏名が含まれてよい。または荷物にRFIDタグが添付されていればタグリーダ24がボックスIDとRFIDタグから読み取った読取情報とを含む格納検知信号を格納物管理装置1へ送信してもよい。RFIDタグから読み取ったタグ情報には配達先の氏名等が記録されていてもよい。配達員が格納ボックス21の扉を閉めると、その扉は施錠される。ロッカー2にはタッチパネル等の入力装置が備えられ、配達員がその入力装置を用いて配達先の部屋番号を入力してもよい。この場合、格納通知信号には部屋番号が格納される。格納物管理装置1は格納通知信号を受信する。格納物管理装置1の登録部12は格納通知信号に含まれる各種情報を紐づけてデータベース10の荷物管理テーブルに記録する(ステップS101)。   Alternatively, the camera 23 may transmit a storage detection signal including the box ID and the captured image to the stored object management device 1. The captured image may include the name of the delivery destination. Alternatively, if an RFID tag is attached to the package, the tag reader 24 may transmit a storage detection signal including the box ID and the read information read from the RFID tag to the stored object management device 1. The tag information read from the RFID tag may record a delivery destination name or the like. When the delivery person closes the door of the storage box 21, the door is locked. The locker 2 is provided with an input device such as a touch panel, and a delivery person may use the input device to input a room number of a delivery destination. In this case, a room number is stored in the storage notification signal. The stored object management device 1 receives the storage notification signal. The registration unit 12 of the storage management device 1 records various information included in the storage notification signal in the luggage management table of the database 10 in association with each other (step S101).

図8は荷物管理テーブルを示す図である。
この図が示すように荷物管理テーブルにはボックスID、重量、撮影画像、読取情報、部屋番号、などの情報が対応付けて記録される。
FIG. 8 is a diagram showing a package management table.
As shown in this figure, information such as a box ID, a weight, a photographed image, read information, a room number, and the like are recorded in the luggage management table in association with each other.

配達先の人物を以下ユーザと呼ぶこととする。ロッカー2のユーザがマンションに帰宅するとカメラ3がユーザの顔を撮影する。カメラ3は例えばマンションの出入口近傍に設置されている。カメラ3はロッカー2の近傍に設置されていてもよい。カメラ3は顔画像を生成して格納物管理装置1へ送信する。   The person at the delivery destination is hereinafter referred to as a user. When the user of the locker 2 returns home, the camera 3 captures the face of the user. The camera 3 is installed, for example, near the entrance of an apartment. The camera 3 may be installed near the locker 2. The camera 3 generates a face image and transmits it to the stored object management device 1.

格納物管理装置1のユーザ判定部13は顔画像を取得する(ステップS102)。ユーザ判定部13は顔画像を格納有無判定部14に出力する。格納有無判定部14は取得した顔画像とユーザ管理テーブルに記録されている顔画像とを比較して、取得した顔画像を示すユーザに一致するユーザのユーザIDと部屋番号を取得する(ステップS103)。具体的には格納有無判定部14は顔画像の比較において各顔画像の特徴情報を抽出し、特徴情報の一致度が所定の閾値以上の最も高い値となる顔画像のユーザをユーザ管理テーブルにおいて特定し、その部屋番号を取得する。   The user determining unit 13 of the stored object management device 1 acquires a face image (Step S102). The user determination unit 13 outputs the face image to the storage presence / absence determination unit 14. The storage presence / absence determining unit 14 compares the acquired face image with the face image recorded in the user management table, and acquires the user ID and the room number of the user who matches the user indicating the acquired face image (step S103). ). Specifically, the storage presence / absence determining unit 14 extracts the feature information of each face image in the comparison of the face images, and identifies the user of the face image whose degree of coincidence of the feature information is the highest value equal to or greater than the predetermined threshold in the user management table. Identify and get the room number.

格納有無判定部14は部屋番号に紐づく情報が荷物管理テーブルに含まれるかを判定することにより、ユーザIDのユーザに関する荷物が格納されているかを判定する(ステップS104)。格納有無判定部14は部屋番号に紐づく情報が荷物管理テーブルに含まれる場合には、荷物がロッカー2の格納ボックスに格納されていると判定する。格納有無判定部14は部屋番号に紐づく情報が荷物管理テーブルに含まれない場合には、荷物がロッカー2の格納ボックスに格納されていないと判定する。格納有無判定部14は荷物の格納有無と部屋番号とボックスIDとユーザIDとを含む荷物の格納判定結果を通知判定部15へ出力する。   The storage presence / absence determining unit 14 determines whether information associated with the room ID is included in the luggage management table to determine whether luggage relating to the user with the user ID is stored (step S104). When the information associated with the room number is included in the luggage management table, the storage presence / absence determination unit 14 determines that the luggage is stored in the storage box of the locker 2. If the information associated with the room number is not included in the luggage management table, the storage presence / absence determination unit 14 determines that the luggage is not stored in the storage box of the locker 2. The storage presence / absence determining unit 14 outputs the storage determination result of the package including the storage availability of the package, the room number, the box ID, and the user ID to the notification determination unit 15.

通知判定部15は格納判定結果に含まれる格納有無の情報が格納有を示すかを判定する。格納有を示す場合、通知判定部15は格納判定結果に含まれるユーザIDに対応するユーザに通知情報を出力するかを判定する(ステップS105)。具体的には通知判定部15は格納判定結果からユーザIDとボックスIDとを取得する。通知判定部15はユーザIDに紐づいてユーザ管理テーブルに記録されている重量g1と、ボックスIDに紐づいて荷物管理テーブルに記録されている重量g2とを比較する。ユーザ管理テーブルに記録されている重量g1はユーザに荷物が格納されていることを通知する通知情報を出力するかどうかの条件を示す値であり、通知判定部15はこの重量g1よりも重い荷物が格納ボックス21に格納されている場合には通知情報を出力すると判定する。例えば通知判定部15は重量g1≦重量g2である場合に通知情報を出力すると判定する。通知判定部15は通知情報を出力すると判定した場合、ユーザIDとボックスIDとを含む通知要求を通知部16へ出力する。重量g1はユーザが素手で運ぶことができる最大重量などの値であってよい。   The notification determination unit 15 determines whether the storage presence / absence information included in the storage determination result indicates that storage is present. When the storage is indicated, the notification determination unit 15 determines whether to output the notification information to the user corresponding to the user ID included in the storage determination result (Step S105). Specifically, the notification determination unit 15 acquires the user ID and the box ID from the storage determination result. The notification determination unit 15 compares the weight g1 recorded in the user management table associated with the user ID with the weight g2 recorded in the package management table associated with the box ID. The weight g1 recorded in the user management table is a value indicating a condition as to whether or not to output notification information for notifying the user that the package is stored, and the notification determination unit 15 determines that the package is heavier than the weight g1. Is stored in the storage box 21, it is determined that the notification information is output. For example, the notification determination unit 15 determines to output notification information when weight g1 ≦ weight g2. When the notification determination unit 15 determines that the notification information is to be output, it outputs a notification request including the user ID and the box ID to the notification unit 16. The weight g1 may be a value such as the maximum weight that the user can carry with his bare hands.

通知部16は通知要求からユーザIDとボックスIDを取得する。通知部16はユーザIDに紐づいてユーザ管理テーブルに記録されている通知先情報を読み取る。通知部16は通知先情報の示すアドレス宛に通知情報を送信する(ステップS106)。この通知情報にはボックスIDが含まれる。通知先情報の示すアドレスは一例としてはユーザの携帯端末のアドレスである。携帯端末は通知情報を受信する。ユーザは携帯端末で通知情報の内容を確認する。これによりユーザは自身に宛てて配達された荷物の格納されている格納ボックス21のボックスIDを認識することができる。ユーザはボックスIDで特定される格納ボックス21を開錠して荷物を取り出す。   The notification unit 16 acquires the user ID and the box ID from the notification request. The notification unit 16 reads notification destination information recorded in the user management table in association with the user ID. The notification unit 16 transmits the notification information to the address indicated by the notification destination information (Step S106). This notification information includes the box ID. The address indicated by the notification destination information is, for example, the address of the mobile terminal of the user. The mobile terminal receives the notification information. The user checks the contents of the notification information on the mobile terminal. Thereby, the user can recognize the box ID of the storage box 21 in which the package delivered to the user is stored. The user unlocks the storage box 21 specified by the box ID and takes out the package.

上述の処理によれば荷物の重量がユーザの登録した重量以上の場合に通知情報が宛先のユーザに通知される。これにより重量が重い場合にはユーザは需要な荷物が配達されたと認識でき、また重量の重い荷物を運ぶ準備をして荷物をロッカー2から取り出すことができる。これにより、格納ボックスに格納物があることを、その通知が必要な重量の重い荷物の場合に宛先である特定のユーザに通知することができる。   According to the above-described processing, when the weight of the package is equal to or greater than the weight registered by the user, the notification information is notified to the destination user. Thus, when the weight is heavy, the user can recognize that the required luggage has been delivered, and can take out the luggage from the locker 2 in preparation for carrying the heavy luggage. Thus, it is possible to notify a specific user who is a destination of a heavy package that needs to be notified that there is a stored item in the storage box.

上述の処理によればカメラ3でユーザの顔が撮影された場合には必ず格納物管理装置1において荷物の有無が判定されているが、例えば玄関入口にカメラ3と荷物確認ボタンが敷設され、ユーザが荷物確認ボタンを押下した場合にのみ上記の処理が行われるようにしてもよい。   According to the above-described processing, when the user's face is photographed by the camera 3, the presence / absence of luggage is always determined by the stored object management device 1. For example, the camera 3 and luggage confirmation button are laid at the entrance, The above process may be performed only when the user presses the baggage confirmation button.

上述の処理においてはユーザの携帯端末のアドレス宛に通知情報を送信しているが、玄関入口やロッカー2近傍に敷設された表示装置に通知情報を出力してもよい。この場合表示装置は通知情報に含まれるボックスIDやユーザの氏名、部屋番号などを表示するようにしてもよい。   In the above-described processing, the notification information is transmitted to the address of the user's portable terminal. However, the notification information may be output to a display device laid near the entrance or the locker 2. In this case, the display device may display the box ID, the user's name, the room number, and the like included in the notification information.

上述の処理では重量に基づいて通知情報を出力するかを判定しているが、格納物管理装置1は荷物に付されている情報を読み取った画像情報や、RFIDタグから読み取られたタグ情報に含まれる宛名などの属性情報に基づいて、通知情報を出力するかを判定してもよい。この場合の処理について以下に説明する。   In the above-described processing, it is determined whether to output the notification information based on the weight. However, the stored item management device 1 uses the image information obtained by reading the information attached to the package or the tag information read from the RFID tag. Whether to output the notification information may be determined based on the attribute information such as the address included. The processing in this case will be described below.

ステップS101〜ステップS104の処理は上述と同様である。そして通知判定部15は格納判定結果に含まれる格納有無の情報が格納有を示すかを判定する。格納有を示す場合、通知判定部15は格納判定結果に含まれるユーザIDに対応するユーザに通知情報を出力するかを判定する(ステップS105)。具体的には通知判定部15は格納判定結果からユーザIDと部屋番号とを取得する。通知判定部15はボックスIDに紐づいて荷物管理テーブル(図7)に記録されている撮影画像や読取情報を取得する。通知判定部15は撮影画像や読取情報に基づいて宛名を検出する。撮影画像から宛名を検出する場合、通知判定部15はOCR(Optical Character Recognition)処理を行う。宛名には氏名、住所、部屋番号などが含まれてよい。通知判定部15はユーザIDに紐づいてユーザ管理テーブルに紐づく宛名と、撮影画像や読取情報から読み取った宛名とが一致する場合には、通知情報を通知すると判定する。通知判定部15は通知情報を出力すると判定した場合、ユーザIDとボックスIDとを含む通知要求を通知部16へ出力する。通知部16は通知要求からユーザIDとボックスIDを取得する。通知部16はユーザIDに紐づいてユーザ管理テーブルに記録されている通知先情報を読み取る。通知部16は通知先情報の示すアドレス宛に通知情報を送信する(ステップS106)。   The processing in steps S101 to S104 is the same as described above. Then, the notification determination unit 15 determines whether the storage presence / absence information included in the storage determination result indicates that storage is present. When the storage is indicated, the notification determination unit 15 determines whether to output the notification information to the user corresponding to the user ID included in the storage determination result (Step S105). Specifically, the notification determination unit 15 acquires the user ID and the room number from the storage determination result. The notification determination unit 15 acquires a captured image and read information recorded in the package management table (FIG. 7) in association with the box ID. The notification determination unit 15 detects an address based on a captured image and read information. When detecting an address from a captured image, the notification determination unit 15 performs an OCR (Optical Character Recognition) process. The address may include a name, address, room number, and the like. The notification determination unit 15 determines to notify the notification information when the address associated with the user ID in the user management table matches the address read from the captured image or the read information. When the notification determination unit 15 determines that the notification information is to be output, it outputs a notification request including the user ID and the box ID to the notification unit 16. The notification unit 16 acquires the user ID and the box ID from the notification request. The notification unit 16 reads notification destination information recorded in the user management table in association with the user ID. The notification unit 16 transmits the notification information to the address indicated by the notification destination information (Step S106).

通知判定部15はユーザIDに紐づいてユーザ管理テーブルに紐づく宛名と、撮影画像や読取情報から読み取った宛名とが一致する場合であって、さらに宛名に紐づいてユーザ管理テーブルに記録されている通知要否フラグが「要」を示す場合、通知情報を出力すると判定してもよい。通知判定部15はユーザIDに紐づいてユーザ管理テーブルに紐づく宛名と、撮影画像や読取情報から読み取った宛名とが一致する場合であって、さらに宛名に紐づいてユーザ管理テーブルに記録されている通知要否フラグが「否」を示す場合であっても、ユーザ管理テーブルに家族の通知先の情報が記録されている場合には、その家族の通知先に通知情報を送信すると判定してもよい。   The notification determination unit 15 determines that the address associated with the user ID in the user management table matches the address read from the captured image or the read information, and is further recorded in the user management table in association with the address. If the notification necessity flag indicates “necessary”, it may be determined to output the notification information. The notification determination unit 15 determines that the address associated with the user ID in the user management table matches the address read from the captured image or the read information, and is further recorded in the user management table in association with the address. Even if the notification necessity flag indicates “No”, it is determined that the notification information is transmitted to the notification destination of the family if the information of the notification destination of the family is recorded in the user management table. You may.

上述の各処理において通知判定部15は通知情報を通知すると判定した場合、制御部11はロッカー2の格納ボックス21を開錠するよう制御する開錠信号をロッカー2に送信してもよい。開錠信号にはボックスIDが含まれる。ロッカー2は開錠信号を受信した場合にはボックスIDに基づいて特定した格納ボックス21の扉を開に制御してもよい。ユーザは格納ボックス21から荷物を取り出すと、格納ボックス21の扉を閉じる。   When the notification determination unit 15 determines that the notification information is to be notified in each of the above-described processes, the control unit 11 may transmit an unlocking signal for controlling the unlocking of the storage box 21 of the locker 2 to the locker 2. The unlock signal includes the box ID. When the locker 2 receives the unlock signal, the locker 2 may control to open the door of the storage box 21 specified based on the box ID. When the user takes out the package from the storage box 21, the user closes the door of the storage box 21.

上述の処理において通知部16は重量を示す通知情報を送信するようにしてもよい。この場合ユーザは通知情報に含まれる重量を確認して、重量に対応できるよう準備してロッカー2に向かうようにしてもよい。例えば重量が大きい場合いは台車を準備した後にロッカーに向かったり、一度部屋に戻って荷物を置いてからロッカーに向かったりすることができる。   In the above-described processing, the notification unit 16 may transmit notification information indicating the weight. In this case, the user may check the weight included in the notification information, prepare for the weight, and head for the locker 2. For example, when the weight is large, the user can prepare the cart and go to the locker, or return to the room once and place his luggage and then go to the locker.

上述の例において配達員は荷物をロッカー2に格納する際に、自信の配達員IDをロッカー2に設けられたタッチパネル等の入力装置から入力してもよい。この場合、入力装置は格納物管理装置1へ配達員IDを含む格納通知信号を送信してもよい。格納物管理装置1の制御部11は格納通知信号から配達員IDを取得する。制御部11は配達員IDに紐づいて配達員管理テーブルに記録されている配達員の送付先アドレスを取得する。制御部11は配達員の送付先アドレス宛に、格納通知信号に含まれる情報を含む受取証明情報を送信する。これにより配達員にロッカー2によって荷物の受取が行われたことを示す情報を送信することができる。   In the above-described example, the deliveryman may input his / her own deliveryman ID from an input device such as a touch panel provided on the locker 2 when storing the package in the locker 2. In this case, the input device may transmit a storage notification signal including the deliveryman ID to the storage management device 1. The control unit 11 of the stored object management device 1 acquires the deliveryman ID from the storage notification signal. The control unit 11 acquires the delivery address of the delivery person recorded in the deliveryman management table in association with the deliveryman ID. The control unit 11 transmits the receipt certification information including the information included in the storage notification signal to the delivery destination address of the delivery member. Thereby, information indicating that the package has been received by the locker 2 can be transmitted to the delivery member.

また配達員が格納ボックスに荷物を入れる際、格納物管理装置1は配達員の顔画像を取得して記憶したり、配達員の顔画像による認証が成功した場合にのみ荷物を格納ボックス21に格納できるように制御したりするようにしてもよい。例えば、ロッカー2の入力装置にカメラが取り付けられており、タッチパネルなどの操作によりロッカー2への荷物の預け入れが指示されるとカメラを制御して配達員の顔を撮影する。ロッカー2の入力装置は配達員の顔画像を格納物管理装置1へ送信する。制御部11は配達員の顔画像と、予め配達員管理テーブルに記録されている顔画像のうち指定された配達員IDに紐づいて登録されている顔画像の特徴情報とが一致する場合に、ロッカー2に認証成功情報を送信する。ロッカー2は認証成功情報を受信した場合にのみ、格納ボックス21の扉が開くように制御してもよい。格納物管理装置1の制御部11は顔画像と、格納通知信号に含まれる情報とを紐づけて荷物管理テーブルに記録してもよい。   Also, when the deliveryman puts the baggage in the storage box, the stored item management device 1 acquires and stores the face image of the deliveryman, or stores the baggage in the storage box 21 only when the authentication based on the face image of the deliveryman is successful. You may make it control so that it can be stored. For example, a camera is attached to the input device of the locker 2, and when a deposit of luggage into the locker 2 is instructed by operating a touch panel or the like, the camera is controlled to photograph the face of the delivery member. The input device of the locker 2 transmits the face image of the delivery member to the stored item management device 1. When the face image of the delivery person matches the characteristic information of the face image registered in association with the designated delivery person ID among the face images recorded in the delivery person management table in advance, Then, the authentication success information is transmitted to the locker 2. The locker 2 may perform control so that the door of the storage box 21 is opened only when the authentication success information is received. The control unit 11 of the stored object management device 1 may record the face image and the information included in the storage notification signal in association with each other in the package management table.

配達員は格納ボックスに荷物を入れる際、親展の郵送物である場合にはロッカー2の入力装置から宛先の個人を特定してもよい。この場合、ロッカー2の入力装置は配達員から指定されて部屋番号に紐づく氏名を格納物管理装置1から取得し、その一覧画面をモニタに表示する。配達員は一覧画面に出力された一人または複数人のユーザ(居住者)の中から、荷物の宛先に記載されているユーザを選択する。そして入力装置が、カメラ等から得た顔画像等の情報に選択されたユーザ名を含む格納検知信号を格納物管理装置1へ送信してもよい。この場合、格納物管理装置1の登録部12は荷物管理テーブルにさらに指定されたユーザの名前やIDを紐づけて登録してもよい。そして通知判定部15は荷物管理テーブルにユーザの名前やIDが紐づいて登録されている場合に、そのユーザに対する通知情報の送信が必要と判定してもよい。   When putting the luggage in the storage box, the delivery person may specify the destination individual from the input device of the locker 2 if the mail is confidential mail. In this case, the input device of the locker 2 acquires the name specified by the delivery person and associated with the room number from the stored object management device 1, and displays the list screen on the monitor. The delivery person selects the user described in the destination of the package from one or more users (residents) output on the list screen. Then, the input device may transmit a storage detection signal including the selected user name to the information such as the face image obtained from the camera or the like to the stored object management device 1. In this case, the registration unit 12 of the stored matter management device 1 may register the specified user's name and ID in the package management table in association with each other. Then, when the name and ID of the user are linked and registered in the package management table, the notification determination unit 15 may determine that the notification information needs to be transmitted to the user.

<第二実施形態>
上述の例では管理システムがマンション等に利用される場合の例について説明したが、管理システムはスポーツジム、ゴルフ場などのスポーツ施設、駅構内などの公共施設に設置されてもよい。
<Second embodiment>
In the above example, an example in which the management system is used for an apartment or the like has been described. However, the management system may be installed in a sports facility such as a sports gym or a golf course, or in a public facility such as a station yard.

図9は第二実施形態による格納物管理装置の処理フローを示す図である。
図10は第二実施形態による荷物管理テーブルを示す図である。
以下、管理システムがゴルフ場のユーザが利用するロッカーに適用される場合の例について説明する。
ユーザはゴルフをプレイする場合に自身の荷物をロッカー2に預け入れる。この場合ユーザはロッカー2に設けられた複数の格納ボックス21のうち、適切な格納ボックス21を選択し、その格納ボックス21に荷物を格納する。格納ボックス21は施錠される。格納ボックス21には光センサなどが設けられて光の反射によって荷物が格納されたかどうかを判定してよい。ユーザはロッカー2に設けられたユーザ入力装置に氏名、ボックスID、パスワード、通知要否を入力する。また入力装置に設けられたカメラがユーザを撮影しその顔画像を生成する。入力装置は氏名、ボックスID、パスワード、顔画像、通知先情報(メールアドレス等)、通知要否等を含む格納検知信号を格納物管理装置1へ送信する。格納物管理装置1の登録部12は格納検知信号に含まれる各情報を紐づけて荷物管理テーブルに記録する(ステップS201)。
FIG. 9 is a diagram illustrating a processing flow of the stored object management device according to the second embodiment.
FIG. 10 is a diagram showing a package management table according to the second embodiment.
Hereinafter, an example in which the management system is applied to a locker used by a golf course user will be described.
The user deposits his luggage in the locker 2 when playing golf. In this case, the user selects an appropriate storage box 21 from the plurality of storage boxes 21 provided in the locker 2 and stores the luggage in the storage box 21. The storage box 21 is locked. An optical sensor or the like may be provided in the storage box 21 to determine whether the luggage is stored by reflection of light. The user inputs a name, a box ID, a password, and the necessity of notification to a user input device provided in the locker 2. Further, a camera provided in the input device captures a user and generates a face image thereof. The input device transmits a storage detection signal including a name, a box ID, a password, a face image, notification destination information (e.g., an email address), notification necessity, and the like to the stored object management device 1. The registration unit 12 of the stored object management device 1 records each piece of information included in the storage detection signal in the package management table in association with each other (step S201).

そしてユーザがゴルフのプレイを終了しロッカーの設置されている施設に戻った際、カメラ3がユーザを撮影する。カメラ3はユーザの顔画像を格納物管理装置1へ送信する。格納物管理装置1のユーザ判定部13は顔画像を取得する(ステップS202)。ユーザ判定部13は取得した顔画像と荷物管理テーブルに記録されている顔画像とを比較して、取得した顔画像を示すユーザに一致するユーザの会員IDを特定する(ステップS203)。具体的にはユーザ判定部13は顔画像の比較において各顔画像の特徴情報を抽出し、特徴情報の一致度が所定の閾値以上の最も高い値となる顔画像のユーザの会員IDを荷物管理テーブルにおいて特定し、その会員IDを取得する。ユーザ判定部は会員IDを格納有無判定部14へ出力する。   Then, when the user finishes playing golf and returns to the facility where the locker is installed, the camera 3 captures an image of the user. The camera 3 transmits the face image of the user to the stored object management device 1. The user determining unit 13 of the stored object management device 1 acquires a face image (Step S202). The user determination unit 13 compares the acquired face image with the face image recorded in the luggage management table, and specifies the member ID of the user who matches the user indicating the acquired face image (step S203). Specifically, the user determination unit 13 extracts the feature information of each face image in the comparison of the face images, and manages the member ID of the user of the face image whose degree of coincidence of the feature information is the highest value equal to or greater than a predetermined threshold. The member ID is specified in the table and the member ID is acquired. The user determination unit outputs the member ID to the storage presence / absence determination unit 14.

格納有無判定部14は会員IDに紐づく情報が荷物管理テーブルに含まれる場合には、会員IDのユーザに関する荷物が格納されていると判定する(ステップS204)。格納有無判定部14は通知判定部15に格納判定結果を出力する。通知判定部15は格納判定結果に含まれる格納有無の情報が格納有を示すかを判定する。格納有を示す場合、通知判定部15は格納判定結果に含まれる会員IDに対応するユーザに通知情報を出力するかを判定する(ステップS205)。具体的には通知判定部15は格納判定結果から会員IDを取得する。通知判定部15は会員IDに紐づいて荷物管理テーブルに記録されている通知要否の情報が「要」を示す場合には通知情報を送信すると判定する。   When the information associated with the member ID is included in the package management table, the storage presence / absence determination unit 14 determines that the package related to the user with the member ID is stored (step S204). The storage presence / absence determination unit 14 outputs a storage determination result to the notification determination unit 15. The notification determination unit 15 determines whether the storage presence / absence information included in the storage determination result indicates that storage is present. When the storage is indicated, the notification determination unit 15 determines whether to output the notification information to the user corresponding to the member ID included in the storage determination result (Step S205). Specifically, the notification determination unit 15 acquires the member ID from the storage determination result. The notification determination unit 15 determines to transmit the notification information when the notification necessity information recorded in the luggage management table in association with the member ID indicates “necessary”.

通知部16は会員IDに紐づいて荷物管理テーブルに記録されている通知先情報を読み取る。通知部16は通知先情報の示すアドレス宛に通知情報を送信する(ステップS206)。この通知情報にはボックスIDが含まれる。通知先情報には、格納ボックス21内のカメラ23から格納物管理装置1が取得した荷物を撮影した画像が含まれてもよい。通知先情報の示すアドレスは一例としてはユーザの携帯端末のアドレスである。携帯端末は通知情報を受信する。ユーザは携帯端末で通知情報の内容を確認する。これによりユーザは自身に宛てて配達された荷物の格納されている格納ボックス21のボックスIDを認識することができる。ユーザはボックスIDで特定される格納ボックス21を開錠して荷物を取り出す。   The notification unit 16 reads the notification destination information recorded in the package management table in association with the member ID. The notification unit 16 transmits the notification information to the address indicated by the notification destination information (Step S206). This notification information includes the box ID. The notification destination information may include an image of the package obtained by the stored matter management device 1 from the camera 23 in the storage box 21. The address indicated by the notification destination information is, for example, the address of the mobile terminal of the user. The mobile terminal receives the notification information. The user checks the contents of the notification information on the mobile terminal. As a result, the user can recognize the box ID of the storage box 21 storing the package delivered to the user. The user unlocks the storage box 21 specified by the box ID and takes out the package.

上記の管理システムがゴルフ場のロッカー2として利用される仕組みを駅構内に設置されているロッカー2に適用してもよい。なお通知情報にはロッカー2の格納ボックス21の位置までの経路を示す地図情報が含まれてもよい。   The mechanism in which the above management system is used as the locker 2 of the golf course may be applied to the locker 2 installed in the station yard. The notification information may include map information indicating a route to the position of the storage box 21 of the locker 2.

上述の処理によれば通知要否が「要」を示す場合には通知情報が宛先のユーザに荷物がロッカー2に格納されていることを自動的に通知することができる。なお通知判定部15による通知情報を出力するか否かの判定は、他の情報によって判定してもよい。   According to the above-described processing, when the notification necessity indicates “necessary”, the notification information can automatically notify the destination user that the luggage is stored in the locker 2. Note that the determination of whether to output the notification information by the notification determination unit 15 may be made based on other information.

なお荷物管理テーブルに預かり期限時刻が記録されており、預かり期限時刻より所定時間前の時刻になった荷物に関して、自動的にユーザに荷物が格納されていることを通知する通知情報を送信するようにしてもよい。この場合、格納有無判定部14は荷物管理テーブルに記録されている預かり期限時刻より所定時間前の時刻になっても当該荷物管理テーブルに記録されている情報を特定する。通知判定部15は、預かり期限時刻より所定時間前の時刻になっても当該荷物管理テーブルに記録されている情報について通知情報を通知すると判定する。通知部16は格納されていることを示す通知情報をユーザのアドレスへ送信する。これにより荷物を取り忘れたユーザに対して自動的に荷物がロッカーに格納されていることを通知することができる。   The luggage management table records the time limit for keeping the luggage, and for the luggage whose time is a predetermined time before the time limit for the luggage, the notification information for automatically notifying the user that the luggage is stored is transmitted. It may be. In this case, the storage presence / absence determining unit 14 specifies the information recorded in the baggage management table even when the time is a predetermined time before the custody expiration time recorded in the baggage management table. The notification determination unit 15 determines to notify the notification information about the information recorded in the luggage management table even at a time that is a predetermined time before the storage expiration time. The notification unit 16 transmits notification information indicating that the information is stored to the user address. As a result, it is possible to automatically notify the user who has forgotten to take the luggage that the luggage is stored in the locker.

図11は格納物管理装置の最小構成を示す図である。
格納物管理装置1は少なくともユーザ判定部13、格納有無判定部14、通知判定部15、通知部16を備える。
ユーザ判定部13は、撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定する。
格納有無判定部14は、顔画像に基づいて判定したユーザに対する格納物が格納ボックスに格納されているかを判定する。
通知判定部15は、顔画像に基づいて判定したユーザに対する格納物が格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを通知するか否かを判定する。
通知部16は、通知すると判定された場合に通知情報を出力する。
FIG. 11 is a diagram showing a minimum configuration of the stored object management device.
The stored object management device 1 includes at least a user determination unit 13, a storage presence / absence determination unit 14, a notification determination unit 15, and a notification unit 16.
The user determination unit 13 determines, based on the face image acquired from the photographing device, whether the person recognized from the face image is a user who uses a storage box for individually storing a plurality of stored items.
The storage presence / absence determination unit 14 determines whether or not a storage for the user determined based on the face image is stored in the storage box.
The notification determination unit 15 determines whether to notify the user that the storage object is stored in the storage box when the storage object for the user determined based on the face image is stored in the storage box. judge.
The notification unit 16 outputs the notification information when it is determined that the notification is to be made.

上述の各装置は内部に、コンピュータシステムを有している。そして、上述した各処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、CD−ROM、DVD−ROM、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしても良い。   Each of the above-described devices has a computer system therein. The processes of the above-described processes are stored in a computer-readable recording medium in the form of a program, and the above-described processes are performed by reading and executing the program by the computer. Here, the computer-readable recording medium refers to a magnetic disk, a magneto-optical disk, a CD-ROM, a DVD-ROM, a semiconductor memory, or the like. Alternatively, the computer program may be distributed to a computer via a communication line, and the computer that has received the distribution may execute the program.

また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。   Further, the program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, and what is called a difference file (difference program) may be sufficient.

1・・・格納物管理装置
2・・・ロッカー
3・・・カメラ
11・・・制御部
12・・・登録部
13・・・ユーザ判定部
14・・・格納有無判定部
15・・・通知判定部
16・・・通知部
21・・・格納ボックス
22・・・重量センサ
23・・・カメラ
24・・・タグリーダ
DESCRIPTION OF SYMBOLS 1 ... Storage management device 2 ... Locker 3 ... Camera 11 ... Control part 12 ... Registration part 13 ... User determination part 14 ... Storage presence / absence determination part 15 ... Notification Judgment unit 16 Notification unit 21 Storage box 22 Weight sensor 23 Camera 24 Tag reader

Claims (8)

撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定部と、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定部と、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する通知判定部と、
通知すると判定された場合に通知情報を出力する通知部と、
を備え
前記通知判定部は、前記格納ボックスに設けられ前記格納物に付された属性情報のうちの宛名を読み取る読み取り部から取得した前記宛名と当該宛名が予め記録された宛名であるかを示す条件とに基づいて、前記取得した宛名が前記記録された宛名である場合に、前記格納物が前記格納ボックスに格納されていることを前記宛名に対応する通知先に通知すると判定する
格納物管理装置。
A user determination unit that determines whether a person recognized from the face image based on the face image obtained from the imaging device is a user who uses a storage box that individually stores a plurality of stored objects,
A storage presence / absence determination unit that determines whether a storage object for the user determined based on the face image is stored in the storage box,
When a stored item for the user determined based on the face image is stored in the storage box, whether to notify the user based on a predetermined condition that the stored item is stored in the storage box. A notification determination unit for determining whether or not
A notification unit that outputs notification information when it is determined to notify;
Equipped with a,
The notification determination unit is provided in the storage box, the address obtained from the reading unit that reads the address of the attribute information attached to the storage, and a condition indicating whether the address is a pre-recorded address A storage object management device that determines that a notification destination corresponding to the address is notified that the stored item is stored in the storage box when the acquired address is the recorded address based on
撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定部と、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定部と、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する通知判定部と、
通知すると判定された場合に通知情報を出力する通知部と、
を備え
前記通知判定部は、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定する
格納物管理装置。
A user determination unit that determines whether a person recognized from the face image based on the face image obtained from the imaging device is a user who uses a storage box that individually stores a plurality of stored objects,
A storage presence / absence determination unit that determines whether a storage object for the user determined based on the face image is stored in the storage box,
When a stored item for the user determined based on the face image is stored in the storage box, whether to notify the user based on a predetermined condition that the stored item is stored in the storage box. A notification determination unit for determining whether or not
A notification unit that outputs notification information when it is determined to notify;
Equipped with a,
The notification determination unit, based on said condition indicating whether the weight and the weight obtained from the weight sensor for detecting the weight of the storage material is provided in the storage box prerecorded weight threshold or more, the obtained A stored object management device that determines to notify that the stored object is stored in the storage box when the weight obtained is equal to or greater than the weight threshold .
前記顔画像と当該格納ボックスの識別情報とを対応付けて記録する顔画像記録部と、を備え、
前記通知部は前記格納ボックスの識別情報を前記通知情報に含んで出力する
請求項1または請求項2に記載の格納物管理装置。
A face image recording unit that records the face image and the identification information of the storage box in association with each other,
The notification unit stores product management device according to claim 1 or claim 2 outputs include identification information of the storage box in the notification information.
前記通知部は前記格納ボックスの識別情報に基づく当該格納ボックスの位置を示す地図情報を前記通知情報に含んで出力する
請求項1から請求項の何れか一項に記載の格納物管理装置。
The storage object management device according to any one of claims 1 to 3 , wherein the notification unit outputs map information indicating a position of the storage box based on identification information of the storage box in the notification information.
撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定し、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定し、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物に付された属性情報のうちの宛名を読み取る読み取り部から取得した前記宛名と当該宛名が予め記録された宛名であるかを示す条件とに基づいて、前記取得した宛名が前記記録された宛名である場合に、前記格納物が前記格納ボックスに格納されていることを前記宛名に対応する通知先に通知すると判定し、
通知すると判定された場合に通知情報を出力する
格納物管理方法。
Based on the face image obtained from the imaging device, it is determined whether the person recognized from the face image is a user who uses a storage box that individually stores a plurality of stored items,
It is determined whether the storage for the user determined based on the face image is stored in the storage box,
When a stored item for the user determined based on the face image is stored in the storage box, whether to notify the user based on a predetermined condition that the stored item is stored in the storage box. when performing the process of determining whether the address and the address is a pre-recorded address acquired from the reading unit for reading the address of the attribute information attached to the storage product is provided in the storage box Based on the condition indicating whether the acquired address is the recorded address, it is determined to notify the notification destination corresponding to the address that the stored item is stored in the storage box. ,
A stored item management method that outputs notification information when it is determined to notify.
撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定し、  Based on the face image obtained from the imaging device, determine whether the person recognized from the face image is a user who uses a storage box that individually stores a plurality of stored items,
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定し、  It is determined whether the storage for the user determined based on the face image is stored in the storage box,
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定し、  When a stored item for the user determined based on the face image is stored in the storage box, whether to notify the user based on a predetermined condition that the stored item is stored in the storage box. When performing the process of determining whether or not, the weight obtained from the weight sensor provided in the storage box and detects the weight of the storage object and the condition indicating whether the weight is equal to or more than a previously recorded weight threshold Based on the obtained weight is equal to or greater than the weight threshold, it is determined to notify that the stored items are stored in the storage box,
通知すると判定された場合に通知情報を出力する  Output notification information when it is determined to notify
格納物管理方法。  How to manage the contents.
格納物管理装置のコンピュータを、
撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定手段、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定手段、
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定する通知判定手段、
通知すると判定された場合に通知情報を出力する通知手段、
として機能させるプログラム。
The computer of the storage management device,
User determining means for determining whether a person recognized from the face image based on the face image obtained from the imaging device is a user who uses a storage box for individually storing a plurality of stored objects,
Storage presence / absence determination means for determining whether a storage object for the user determined based on the face image is stored in the storage box,
When a stored item for the user determined based on the face image is stored in the storage box, whether to notify the user based on a predetermined condition that the stored item is stored in the storage box. When performing the process of determining whether or not, the weight obtained from the weight sensor provided in the storage box and detects the weight of the storage object and the condition indicating whether the weight is equal to or more than a previously recorded weight threshold based on the notification determination means for the obtained weight if not less than the weight threshold, it determines that the storage object is to notify that it is stored in the storage box,
A notification unit that outputs notification information when it is determined to notify;
A program to function as
格納物管理装置のコンピュータを、  The computer of the storage management device
撮影装置から取得した顔画像に基づいて、当該顔画像から認識した人物が、複数の格納物を個別に保管する格納ボックスを利用するユーザかを判定するユーザ判定手段、  User determining means for determining, based on the face image obtained from the photographing device, whether a person recognized from the face image is a user who uses a storage box for individually storing a plurality of stored objects,
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されているかを判定する格納有無判定手段、  Storage presence / absence determination means for determining whether a storage object for the user determined based on the face image is stored in the storage box,
前記顔画像に基づいて判定した前記ユーザに対する格納物が前記格納ボックスに格納されている場合に当該ユーザに前記格納物が前記格納ボックスに格納されていることを所定の条件に基づいて通知するか否かを判定する処理を行う際に、前記格納ボックスに設けられ前記格納物の重量を検出する重量センサから取得した前記重量と当該重量が予め記録された重量閾値以上かを示す前記条件とに基づいて、前記取得した重量が前記重量閾値以上である場合に、前記格納物が前記格納ボックスに格納されていることを通知すると判定する通知判定手段、  When a stored item for the user determined based on the face image is stored in the storage box, whether to notify the user based on a predetermined condition that the stored item is stored in the storage box. When performing the process of determining whether or not, the weight obtained from the weight sensor provided in the storage box and detects the weight of the storage object and the condition indicating whether the weight is equal to or more than a previously recorded weight threshold Based on the obtained weight is greater than or equal to the weight threshold, notification determination means that determines to notify that the stored items are stored in the storage box,
通知すると判定された場合に通知情報を出力する通知手段、  A notification unit that outputs notification information when it is determined to notify;
として機能させるプログラム。  A program to function as
JP2018085799A 2018-04-26 2018-04-26 Contents management device, contents management method, program Active JP6648780B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018085799A JP6648780B2 (en) 2018-04-26 2018-04-26 Contents management device, contents management method, program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018085799A JP6648780B2 (en) 2018-04-26 2018-04-26 Contents management device, contents management method, program

Publications (2)

Publication Number Publication Date
JP2019192036A JP2019192036A (en) 2019-10-31
JP6648780B2 true JP6648780B2 (en) 2020-02-14

Family

ID=68390190

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018085799A Active JP6648780B2 (en) 2018-04-26 2018-04-26 Contents management device, contents management method, program

Country Status (1)

Country Link
JP (1) JP6648780B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102269503B1 (en) * 2019-11-14 2021-06-25 주식회사 노바 Parcel station
JP7492249B2 (en) 2020-06-30 2024-05-29 日本宅配システム株式會社 Goods Receiving System

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002051155A (en) * 2000-08-03 2002-02-15 Aiphone Co Ltd Interphone system in multiple dwelling houses
JP3906801B2 (en) * 2002-12-27 2007-04-18 松下電工株式会社 Apartment house home automation system
JP2006107187A (en) * 2004-10-06 2006-04-20 Mitsubishi Electric Building Techno Service Co Ltd Information delivery system using face picture identification
JP2006287611A (en) * 2005-03-31 2006-10-19 Nohmi Bosai Ltd Collective entrance unit
JP2008049044A (en) * 2006-08-28 2008-03-06 Miwa Lock Co Ltd Home-delivery locker system
JP2015190170A (en) * 2014-03-28 2015-11-02 美和ロック株式会社 Communication controlling system and locker system for home-delivered goods
JP2016095782A (en) * 2014-11-17 2016-05-26 日本宅配システム株式會社 Home delivery box management system

Also Published As

Publication number Publication date
JP2019192036A (en) 2019-10-31

Similar Documents

Publication Publication Date Title
US11182733B2 (en) Systems and methods for confirming an identity of an individual, for example, at a locker bank
US11829899B2 (en) Package room systems and methods
US9552504B2 (en) Register for counting and tracking items in a bag
JP6648780B2 (en) Contents management device, contents management method, program
TWI795822B (en) Authentication system, authentication method, and program product
JP7434074B2 (en) Server, system, server control method, and program
JP2024050659A (en) Locker system and locker management method
JP2016126414A (en) Face collation system, and service providing method of amusement facility
JPWO2020031438A1 (en) Information processing equipment, information processing methods, and information processing systems
JP7385179B2 (en) Delivery box system and server
US20180170673A1 (en) Systems and methods for multi-unit dwelling storage
JP4899854B2 (en) Shooting management system for stored items
JP2023048993A (en) Terminal device, information processing device, information processing method, and program
JP2023069996A (en) Remote management system of indoor golf course
JP2013245077A (en) Article collection and delivery system and article collection and delivery device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180426

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190419

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190806

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191106

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20191106

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20191115

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20191119

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191217

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191230

R150 Certificate of patent or registration of utility model

Ref document number: 6648780

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150