JP5940331B2 - Ticket gate system, automatic ticket gate device and portable terminal device - Google Patents
Ticket gate system, automatic ticket gate device and portable terminal device Download PDFInfo
- Publication number
- JP5940331B2 JP5940331B2 JP2012058752A JP2012058752A JP5940331B2 JP 5940331 B2 JP5940331 B2 JP 5940331B2 JP 2012058752 A JP2012058752 A JP 2012058752A JP 2012058752 A JP2012058752 A JP 2012058752A JP 5940331 B2 JP5940331 B2 JP 5940331B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- ticket gate
- terminal device
- boundary line
- face image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Devices For Checking Fares Or Tickets At Control Points (AREA)
Description
本発明の実施形態は、改札システムおよびこの改札システムに用いられる自動改札装置および携帯端末装置に関する。 Embodiments described herein relate generally to a ticket gate system, an automatic ticket gate device and a mobile terminal device used in the ticket gate system.
最近、たとえば、鉄道機関や空港機関において、利用者が所持する非接触型ICカードや非接触型ICカード機能を内蔵した携帯可能電話機を自動改札装置の読取部に翳すことで改札処理を行なう改札システムが開発され、実際に稼動している。 Recently, for example, in a railway organization or an airport organization, a ticket gate process is performed by placing a non-contact type IC card possessed by a user or a portable telephone with a built-in non-contact type IC card function over a reading unit of an automatic ticket gate device. A ticket gate system has been developed and is actually in operation.
しかしながら、従来の改札システムは、磁気式の乗車券を投入したり、ICカードや携帯可能電話機を自動改札装置の読取部に翳すという利用者の手操作を必要としている。 However, the conventional ticket gate system requires a user's manual operation such as inserting a magnetic ticket or placing an IC card or a portable telephone on the reading unit of the automatic ticket gate.
また、ICカードや携帯可能電話機を所持していない不正な利用者が通過できないようにするために、自動改札装置ごとに開閉ドアを設けているが、利用者にとっては狭い通路となり、非常に不便でもある。 In addition, in order to prevent unauthorized users who do not have an IC card or a portable telephone from passing through, an open / close door is provided for each automatic ticket gate device, but this is a very inconvenient for users. But there is.
さらに、使用されているICカードや携帯可能電話機は、日本国内以外では普及しておらず、たとえば、海外からの旅行客は旅行のためだけにICカードや携帯可能電話機の購入を行なう必要があるという問題がある。 Furthermore, IC cards and portable telephones that are used are not widely used outside Japan. For example, foreign tourists need to purchase IC cards and portable telephones only for travel. There is a problem.
本発明が解決しようとする課題は、利用者が手を使うことなく手ぶらで自動改札装置を利用でき、利便性が著しく向上する改札システム、自動改札装置および携帯端末装置を提供することである。 The problem to be solved by the present invention is to provide a ticket gate system, an automatic ticket gate device, and a mobile terminal device which can use the automatic ticket gate device without using a hand, and the convenience is remarkably improved.
実施形態に係る改札システムは、利用者固有の識別情報と当該利用者の顔画像とを対応させて記憶している記憶手段と、利用者が所持し、無線通信機能を有する携帯端末装置が改札エリアに進入した際、当該携帯端末装置にあらかじめ記憶された当該利用者固有の識別情報を無線通信により取得する第1の手段と、前記改札エリア付近の画像を撮像する第2の手段と、この第2の手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する第3の手段と、前記第1の手段により取得された識別情報と対応する識別情報を持つ顔画像を前記記憶手段から取得する第4の手段と、前記第3の手段により取得された顔画像が前記第4の手段により取得された顔画像と一致するか否かを判定する第5の手段と、この第5の手段により両顔画像が一致すると判定された場合、当該利用者は前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第6の手段と、この第6の手段により利用者が境界ラインを入場側へ移動したと判定された場合、当該利用者に対する入場処理を行なう第7の手段と、前記第6の手段により利用者が境界ラインを出場側へ移動したと判定された場合、当該利用者に対する出場処理を行なう第8の手段とを具備している。 The ticket gate system according to the embodiment includes a storage unit that stores identification information unique to a user and a face image of the user in association with each other, and a portable terminal device possessed by the user and having a wireless communication function includes a ticket gate. When entering the area, the first means for acquiring the user-specific identification information stored in advance in the mobile terminal device by wireless communication, the second means for capturing an image near the ticket gate area, Third means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area, based on an image captured by the second means; A fourth means for acquiring a face image having identification information corresponding to the identification information acquired by the first means from the storage means; and a face image acquired by the third means by the fourth means. The A fifth means for determining whether or not the face image matches, and when the fifth means determines that the both face images match, the user sets the boundary line to either the entry side or the entry side. A sixth means for determining whether the user has moved in the direction of the user, and a seventh means for performing an entrance process for the user when the sixth means determines that the user has moved the boundary line to the entrance side. And an eighth means for performing an entry process for the user when it is determined by the sixth means that the user has moved the boundary line to the entry side.
以下、実施形態に係る改札システムについて図面を参照して説明する。
なお、以下の説明では、鉄道機関において改札処理を行なう改札システムに適用した場合について説明するが、これに限定されるものではなく、たとえば、空港の搭乗ゲートや到着ゲート等において改札処理を行なう改札システムにも同様に適用可能である。
Hereinafter, a ticket gate system according to an embodiment will be described with reference to the drawings.
In the following explanation, a case where the present invention is applied to a ticket gate system that performs a ticket gate process in a railway organization will be described. However, the present invention is not limited to this. For example, a ticket gate that performs a ticket gate process at a boarding gate or an arrival gate of an airport. The same applies to the system.
図1は、本実施形態に係る改札システムの構成を概略的に示すものである。この改札システムは、たとえば、鉄道機関において利用者が所持する携帯端末装置を用いて改札処理を行なうもので、利用者Mが所持し、携帯電話機能および中距離無線通信機能(たとえば、無線LAN通信機能)を有する携帯端末装置(たとえば、スマートフォン、携帯電話機等)11、中距離無線通信機能(たとえば、無線LAN通信機能)を有し、利用者が乗車券(たとえば、入場券、無線式ICカードからなる定期券、普通乗車券、料金券、特急券、無線式ICカードからなるSFカード等)を購入したり、購入した定期券の情報あるいは購入したSFカードの情報を携帯端末装置11に対しダウンロードしたり、携帯端末装置11に対しSFカード情報内の金額をチャージしたりする自動券売機12、中距離無線通信機能(たとえば、無線LAN通信機能)を有し、携帯端末装置11と中距離無線通信を行なうことにより改札処理を行なう自動改札装置13、および、乗車券の販売管理(乗車券のオンライン販売や予約販売、自動改札装置への乗車券情報の配信処理等)や各種情報処理等を行なうホスト装置(センタサーバ)14から構成されている。
FIG. 1 schematically shows the configuration of a ticket gate system according to this embodiment. This ticket gate system performs ticket gate processing using, for example, a mobile terminal device possessed by a user in a railway organization, and is possessed by a user M and has a mobile phone function and a medium-distance wireless communication function (for example, wireless LAN communication). A mobile terminal device (for example, a smartphone, a mobile phone, etc.) 11 having a function), a mid-range wireless communication function (for example, a wireless LAN communication function), and a user having a boarding ticket (for example, an admission ticket, a wireless IC card) Commuter pass, ordinary ticket, toll ticket, limited express ticket, SF card made up of wireless IC card, etc.), information on purchased commuter pass or purchased SF card information to
携帯端末装置11は、無線による公衆回線10を介してホスト装置13と通信を行なうことにより、本改札システムを利用するためのアプリケーション(以降、これを改札アプリケーションと称す)などをダウンロードしたり、乗車券の予約購入が可能となっている。
The
自動券売機12は、通信回線15を介してホスト装置14と通信を行なうことにより、販売した乗車券の乗車券情報をホスト装置14へ送信したり、携帯端末装置11との間で中距離無線通信による通信を行なうことにより、販売した乗車券の乗車券情報(定期券情報やSFカード情報等)を携帯端末装置11へ送信したりする。
The automatic
自動改札装置13は、携帯端末装置11との間で中距離無線通信による通信を行なったり、通信回線16を介してホスト装置14と通信を行なったりすることにより、入場可否の判定を行なったり、出場可否の判定を行なったりする。
自動改札装置13は、改札エリア付近の画像を撮像する撮像手段としてのカメラ17、中距離無線通信用のアンテナ部18、および、各種処理を行なう制御部19を有して構成されていて、これらは以下のように配置されている。
The automatic
The
すなわち、鉄道機関における駅の改札口において、壁51,52間に所定の広さの改札エリア53が形成されていて、この改札エリア53には、利用者入出場の意思確認用の境界ラインとして構内外境界ライン54が設けられているものとする。ここに、構内外境界ライン54の内側(図面に対し上側)は駅構内とし、構内外境界ライン54の外側(図面に対し下側)は駅構外とする。
なお、構内外境界ライン54は、たとえば、床面に目視可能な色の塗料などで表示されているものとする。
That is, a
It is assumed that the inside /
カメラ17は、改札エリア53を通行する利用者の少なくとも顔を含む改札エリア53付近の画像を撮像するように、たとえば、改札エリア53の天井や壁面などに設置されている。
アンテナ部18は、たとえば、構内外境界ライン54上の天井あるいは壁面などに設置されていて、改札エリア53内の構内外境界ライン54全体をカバーする所定範囲(例えば、半径10m前後)を中距離無線通信エリア55としている。
制御部19は、改札エリア53の近傍に設置されていて、カメラ17およびアンテナ部18にそれぞれ接続されている。
The
The
The
ホスト装置14は、携帯端末装置11との間で公衆回線を介して通信を行なうことにより、乗車券のオンライン販売や予約販売をしたり、通信回線16を介して自動改札装置13(制御部19)と通信を行なうことにより改札処理を行なったり、自動券売機12から受取った乗車券情報や予約販売した乗車券の乗車券情報を自動改札装置13へ送信したりする。
The
ホスト装置14は、メモリ(データベース)14a,14bを備えている。メモリ14aは、現在中距離無線通信に参加している利用者MのID番号(利用者固有の識別情報)が格納される。メモリ14bは、登録された全ての利用者の利用者情報(全駅共通)が保持(登録)されている。この登録利用者情報としては、たとえば、
・ID番号
・住所、氏名、電話番号等
・顔認識用データ
・乗車券情報(定期券情報(定期区間)、SFカード情報(残額等)、入出場状態等)
・クレジットカード番号(クレジット決済利用時)
などが考えられる。
The
・ ID number
・ Address, name, phone number, etc.
・ Face recognition data
・ Ticket information (commuter pass information (periodic section), SF card information (remaining amount, etc.), entry / exit status, etc.)
・ Credit card number (when using credit card)
Etc. are considered.
図2は、携帯端末装置11の構成を概略的に示すものである。この携帯端末装置11は、たとえば、スマートフォンと称される多機能携帯電話機で、カメラ20、操作部21、表示部22、送話部23、受話部24、送受信用のアンテナ部25、中距離無線通信用の通信部26、携帯電話通信用の通信部27、各種情報を記憶するメモリ28、これら全体の制御を司る主制御部29、および、各部に動作電圧を供給する電池電源部30により構成されている。
FIG. 2 schematically shows the configuration of the mobile
操作部21は、携帯電話機として用いる際の種々の設定を行なったり、電話番号の入力を行なったり、携帯端末装置として用いる場合の各種設定を行なったり、モード設定の変更を指示したりするものである。表示部22は、種々の操作案内などを表示する。
The
送話部23は、マイク等により構成され、携帯電話機として用いる際に利用者により発せられた言葉を音声データに変換して出力する。
受話部24は、スピーカ等により構成され、他の機器から供給された受信した音声データを再生してスピーカから出力する。
The
The
中距離無線通信用の通信部26は、アンテナ部25に接続されていて、本改札システムを利用する際、自動券売機12や自動改札装置13との間で中距離無線通信(無線LAN通信)を行なう。
携帯電話通信用の通信部27は、アンテナ部25に接続されていて、携帯電話機として利用する際、公衆回線10を介してホスト装置14と通信を行なう。
The
The
なお、通信部26,27は、携帯電話機として用いられる際と、本改札システムを利用する際とは、メモリ28に格納されている別々のアプリケーションにより制御されるようになっている。
The
メモリ28は、当該携帯端末装置11を所持する利用者固有の識別情報(ID番号)が格納されるユーザIDエリア28a、本改札システムを利用するための改札アプリケーション(中距離無線通信機能を実現するための処理プログラム等)が格納される追加プログラムエリア28b、および、登録された利用者情報が格納される利用者情報エリア28cを有している。
The
なお、追加プログラムエリア28bに格納される改札アプリケーションは、公衆回線10を介してホスト装置14と通信を行なうことによりダウンロードされるようになっている。
The ticket gate application stored in the
図3は、自動券売機12の構成を概略的に示すものである。この自動券売機12は、たとえば、乗車券の購入操作を行なったり各種操作案内を表示したりする操作表示部31、指定された乗車券を発行する券売部32、ホスト装置14との間で通信回線15を介して通信を行なうインタフェイス33、送受信用のアンテナ部34、中距離無線通信用の通信部35、ICカード発行部36、および、これら全体の制御を司る主制御部37により構成されている。
FIG. 3 schematically shows the configuration of the automatic
通信部35は、アンテナ部34に接続されていて、携帯端末装置11を用いて改札処理を行なう際、携帯端末装置11との間で中距離無線通信(無線LAN通信)を行なう。
ICカード発行部36は、指定された無線式ICカードからなる定期券やSFカードを発行する。
The
The IC
図4は、自動改札装置13の制御部19の構成を概略的に示すものである。この制御部19は、たとえば、利用者や駅員などに対して各種案内を行なう表示部41、利用者の通行を制御する開閉動作可能なドア(図示しない)を駆動するドア機構部42、ホスト装置14との間で通信回線16を介して通信を行なうインタフェイス43、中距離無線通信用の通信部44、および、これら全体の制御を司る主制御部45により構成されている。
FIG. 4 schematically shows the configuration of the
通信部44は、前記アンテナ部18に接続されていて、携帯端末装置11を用いて改札処理を行なう際、携帯端末装置11との間で中距離無線通信(無線LAN通信)を行なう。主制御部45には、前記カメラ17が接続されている。
The
主制御部45は、現在中距離無線通信に参加している利用者Mの利用者情報が格納(記憶)されるメモリ45aを有している。
The
次に、上記のような構成において本実施形態に係る改札システムの動作について説明する。 Next, the operation of the ticket gate system according to this embodiment in the above configuration will be described.
利用者Mは、本改札システムを利用するに当たり、たとえば、携帯端末装置11を、公衆回線10を介してホスト装置14と接続することにより、本改札システムを利用するための改札アプリケーション(中距離無線通信機能を実現するための処理プログラム、乗車券情報処理プログラム等)をメモリ28の追加プログラムエリア28bにダウンロードするものとする。
When the user M uses the ticket gate system, for example, the portable
まず、第1の実施形態に係るホスト装置14に登録された顔画像を持つ場合について説明する。
First, a case where a face image registered in the
最初に、事前に行なう利用者登録について図5に示すフローチャートを参照して説明する。 First, user registration performed in advance will be described with reference to a flowchart shown in FIG.
利用者Mは、所持する携帯端末装置11を操作することにより、改札アプリケーションを起動し、メニューにて利用者登録を選択し起動する(ステップS1)。
The user M activates the ticket gate application by operating the portable
次に、利用者Mは、利用者情報の入力を行なう(ステップS2)。このとき入力する利用者情報としては、たとえば、
・住所、氏名、年齢、電話番号等
・クレジットカード番号(クレジット決済利用時)
などが考えられる。
Next, the user M inputs user information (step S2). As user information to be input at this time, for example,
・ Address, name, age, phone number, etc.
・ Credit card number (when using credit card)
Etc. are considered.
次に、利用者Mは、カメラ17を起動することにより自身の顔画像を撮像する(ステップS3)。顔画像の撮像が終了すると、携帯端末装置11は、利用者登録依頼に上記入力した利用者情報(以降、入力利用者情報という)と撮像した顔画像を添付して、公衆回線10を介してホスト装置14へ送信する(ステップS4)。
Next, the user M captures his / her face image by activating the camera 17 (step S3). When the face image capturing is completed, the mobile
ホスト装置14は、携帯端末装置11からの利用者登録依頼を受信すると(ステップS6)、それに添付された入力利用者情報と顔画像を取得し、公衆回線10を介してクレジット会社のクレジット決済サーバと通信を行なうことにより、当該利用者のクレジット決済利用可能か否かのクレジット照会チェック(クレジット決済利用時)を行なうとともに、二重に登録されていないかの二重登録チェックを行なう(ステップS7)。
When the
次に、ホスト装置14は、携帯端末装置11から取得した顔画像から顔認識用データ(たとえば、一定レベル以上の本人特定が可能な顔特徴量データ)を生成するとともに、当該利用者固有のID番号を生成し、これら生成した顔認識用データ、ID番号および携帯端末装置11から取得した入力利用者情報を登録利用者情報としてメモリ14bに格納(登録)する(ステップS8)。
次に、ホスト装置14は、登録終了メッセージに生成したID番号を添付して、公衆回線10を介して携帯端末装置11へ送信する(ステップS9)。
Next, the
Next, the
携帯端末装置11は、ホスト装置14からの登録終了メッセージを受信すると、それに添付されたID番号をメモリ28のユーザIDエリア28aに格納(登録)する(ステップS5)。
When receiving the registration end message from the
次に、SFカードの残額チャージおよび定期区間購入について図6に示すフローチャートを参照して説明する。 Next, the remaining charge of the SF card and the regular section purchase will be described with reference to the flowchart shown in FIG.
まず、クレジット利用の場合について説明する。
クレジット利用の場合、利用者Mは、所持する携帯端末装置11の操作部21を操作することで、チャージ額および定期区間を選択し(ステップS11)、公衆回線10を介してクレジット会社のクレジット決済サーバと通信を行なうことにより、クレジット決済を行なう(ステップS12)。
First, the case of credit use will be described.
In the case of credit use, the user M operates the
次に、携帯端末装置11は、クレジット決済が終了すると、チャージ/定期区間購入依頼に、メモリ28のユーザIDエリア28aに格納されているID番号、チャージした金額(チャージ額)および購入した定期区間を添付して、公衆回線10を介してホスト装置14へ送信する(ステップS13)。
Next, when the credit terminal is completed, the mobile
ホスト装置14は、携帯端末装置11からのチャージ/定期区間購入依頼を受信すると(ステップS14)、それに添付されたID番号と一致するID番号を有する登録利用者情報をメモリ14bから検索し、検索した登録利用者情報内の残額を、上記チャージ/定期区間購入依頼に添付されたチャージ額分加算するとともに、定期区間を保存する(ステップS15)。
When the
次に、ホスト装置14は、登録終了メッセージを公衆回線10を介して携帯端末装置11へ送信する(ステップS16)。
Next, the
次に、自動券売機利用の場合について説明する。
自動券売機利用の場合、利用者Mは、自動券売機12の操作表示部31を操作することで、チャージ額および定期区間を選択する(ステップS17)。
次に、自動券売機12は、携帯端末装置11と中距離無線通信を行なうことにより、メモリ28のユーザIDエリア28aに格納されているID番号を取得する(ステップS18)。
Next, the case of using an automatic ticket vending machine will be described.
In the case of using an automatic ticket vending machine, the user M selects a charge amount and a regular section by operating the
Next, the automatic
次に、利用者Mは、自動券売機12へ必要額の現金を投入することにより、自動券売機12は、チャージ/定期区間購入依頼に、メモリ28のユーザIDエリア28aに格納されているID番号、チャージした金額(チャージ額)および購入した定期区間を添付して、公衆回線15を介してホスト装置14へ送信する(ステップS19)。
Next, the user M inserts a necessary amount of cash into the automatic
ホスト装置14は、自動券売機12からのチャージ/定期区間購入依頼を受信すると(ステップS20)、それに添付されたID番号と一致するID番号を有する登録利用者情報をメモリ14bから検索し、検索した登録利用者情報内の残額を、上記チャージ/定期区間購入依頼に添付されたチャージ額分加算するとともに、定期区間を保存する(ステップS21)。
次に、ホスト装置14は、登録終了メッセージを公衆回線15を介して自動券売機12へ送信する(ステップS22)。
When the
Next, the
次に、入出場処理について図7に示すフローチャートを参照して説明する。 Next, the entrance / exit process will be described with reference to the flowchart shown in FIG.
自動改札装置13の制御部19は、アンテナ部18から中距離無線通信を展開している(ステップS31)。
携帯端末装置11を所持した利用者Mが中距離無線通信エリア55に進入すると(ステップS32)、携帯端末装置11は、制御部19との中距離無線通信に参加し(ステップS33)、メモリ28のユーザIDエリア28aに格納されているID番号を制御部19へ送信する(ステップS34)。
The
When the user M possessing the mobile
制御部19は、携帯端末装置11から送信されるID番号を受信すると、そのID番号を公衆回線16を介してホスト装置14へ送信する(ステップS36)。
ホスト装置14は、制御部19からのID番号を受信すると(ステップS37)、そのID番号をメモリ14aに格納する(ステップS38)。
When receiving the ID number transmitted from the mobile
When receiving the ID number from the control unit 19 (step S37), the
次に、制御部19は、カメラ17を起動することにより、改札エリア53内の構内外境界ライン54付近の画像を撮像し、この撮像した画像から利用者Mの顔画像を抽出し、抽出した顔画像から顔認識用データ(たとえば、一定レベル以上の本人特定が可能な顔特徴量データ)を生成する(ステップS39)。
Next, the
次に、制御部19は、生成した顔認識用データから構内外境界ライン54を越えて移動した利用者Mの顔認識用データを取得し、それを公衆回線16を介してホスト装置14へ送信する(ステップS40)。このとき、カメラ17で撮像された構内外境界ライン54付近の画像もホスト装置14へ送信する。
Next, the
ホスト装置14は、制御部19からの顔認識用データを受信すると(ステップS41)、メモリ14aに格納されたID番号と一致するID番号を有する登録利用者情報をメモリ14bから検索し、検索した登録利用者情報内の顔認識用データと制御部19からの顔認識用データとを照合し(ステップS42)、両顔認識用データが一致するか否かを判定する(ステップS43)。
Upon receiving the face recognition data from the control unit 19 (step S41), the
ステップS43における判定の結果、両顔認識用データが一致しなかった場合、後で詳細を説明する不正利用者検出処理を行なう(ステップS44)。 If the result of determination in step S43 is that the data for both face recognition does not match, unauthorized user detection processing will be described later in detail (step S44).
ステップS43における判定の結果、両顔認識用データが一致した場合、制御部19からの顔認識用データおよび構内外境界ライン54付近の画像により、当該利用者Mは構内外境界ライン54を入場側(図1に示す矢印a方向)へ移動したか、つまり構内外境界ライン54を駅構外側から駅構内側へ移動したか、あるいは、構内外境界ライン54を出場側(図1に示す矢印b方向)へ移動したか、つまり構内外境界ライン54を駅構内側から駅構外側へ移動したか、を判定する(ステップS45)。
As a result of the determination in step S43, if the two face recognition data match, the user M uses the face recognition data from the
ステップS45における判定の結果、利用者Mが構内外境界ライン54を入場側(図1に示す矢印a方向)へ移動した場合、メモリ14aに格納されたID番号と一致するID番号を有する登録利用者情報をメモリ14bから検索し、検索した登録利用者情報内の乗車券情報に基づき当該利用者Mに対する入場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存するとともに、入場処理が終了したメッセージを携帯端末装置11へ送信する(ステップS46)。
As a result of the determination in step S45, when the user M moves the premise /
ステップS45における判定の結果、利用者Mが構内外境界ライン54を出場側(図1に示す矢印b方向)へ移動した場合、メモリ14aに格納されたID番号と一致するID番号を有する登録利用者情報をメモリ14bから検索し、検索した登録利用者情報内の乗車券情報に基づき当該利用者Mに対する出場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存するとともに、出場処理が終了したメッセージを携帯端末装置11へ送信する(ステップS47)。
As a result of the determination in step S45, when the user M moves the premise /
なお、ステップS46,47における入場、出場処理において、構内外境界ライン54の近傍を利用者Mがうろうろした場合、入場、出場処理が連続して実施されてしまうため、一定時間内の入場/出場は仮状態とし、変化が一定時間ない場合に最後の仮状態を最終処理として採用するものとする。
In addition, in the admission / exit process in steps S46 and 47, when the user M roams in the vicinity of the on-premise /
携帯端末装置11は、制御部19からの入場/出場処理終了のメッセージを受信すると、その旨の案内を表示部22にて行なう(ステップS35)。
When the portable
次に、ステップS44の不正利用者検出処理について図8に示すフローチャートを参照して説明する。 Next, the unauthorized user detection process in step S44 will be described with reference to the flowchart shown in FIG.
まず、構内外境界ライン54を越えて移動した利用者Mの顔認識用データがメモリ14b内の登録利用者情報内に存在するか否かを判定し(ステップS51)、存在しない場合、当該利用者Mの顔画像を駅係員に対し報知するとともに、ホスト装置14内にも記録し、常習者を割り出せるようする(ステップS52)。
First, it is determined whether or not the face recognition data of the user M that has moved beyond the premise /
ステップS51における判定の結果、構内外境界ライン54を越えて移動した利用者Mの顔認識用データがメモリ14b内の登録利用者情報内に存在する場合、構内外境界ライン54を越えたか(入場または出場したか)の問合せを制御部19に送信する(ステップS53)。
As a result of the determination in step S51, if the face recognition data of the user M that has moved beyond the premise /
制御部19は、ホスト装置14からの問合わせを受信すると(ステップS54)、構内外境界ライン54を越えたか(入場または出場したか)の問合せを携帯端末装置11に送信する(ステップS55)。
When receiving an inquiry from the host device 14 (step S54), the
携帯端末装置11は、制御部19からの問合わせを受信すると(ステップS57)、その問合わせが表示部22に表示されることで、利用者Mは操作部21の操作により当該問合わせに対して意志表示する(ステップS58)。意志表示としては、たとえば、「選択1:自分ではない(駅に行っていない等)」あるいは「選択2:構内外境界ラインを通ったが、電車の利用ではない」が考えられる。
When the mobile
携帯端末装置11は、利用者Mの意志表示結果を制御部19に返信する(ステップS59)。
制御部19は、携帯端末装置11からの意志表示結果を受信すると、その意志表示結果を公衆回線16を介してホスト装置14へ送信する(ステップS56)。
The portable
When receiving the will display result from the mobile
ホスト装置14は、制御部19からの意志表示結果を受信すると、その意志表示結果は「選択1」か「選択2」か、を判定し(ステップS60)、「選択1」である場合、メモリ14bに登録されている当該利用者Mの登録利用者情報内の顔認識用データを補正し(ステップS61)、「選択2」である場合はそのまま当該処理を終了する。
Upon receiving the will display result from the
次に、顔認識不能時の自己申告処理について図9に示すフローチャートを参照して説明する。 Next, self-reporting processing when face recognition is impossible will be described with reference to the flowchart shown in FIG.
自己申告処理とは、たとえば、利用者Mがマスクをしているなどで、制御部19およびホスト装置14で顔認識ができない場合、利用者Mが自ら携帯端末装置11を操作して、利用者認識を実施する。その理由は、顔認識が正しくできない状態で、かつ、当該自己申告処理もしないで利用を続けると、図7のステップS44における不正利用者検出処理により不正利用者の画像として登録されることになる。自分が入場または出場したにもかかわらず、図7の入出場処理で、入場/出場の処理結果が表示されない場合は、当該自己申告をするように利用者Mに案内するものである。
The self-reporting process is, for example, when the user M is masking and face recognition cannot be performed by the
利用者Mは、携帯端末装置11の表示部22に入場/出場の処理結果が表示されず、自己申告するように案内された場合、操作部21の操作により自己申告モードを設定することにより、携帯端末装置11は、自分が中距離無線通信エリア55にいることを確認し(ステップS71)、制御部19との中距離無線通信に参加する(ステップS72)。
When the user M is guided to self-report without displaying the entry / participation process result on the
次に、利用者Mは、携帯端末装置11の操作部21を操作し、自分は構内外境界ライン54を入場側あるいは出場側に移動したことを入力することにより(ステップS73)、携帯端末装置11は、その入力結果(自己申告内容)を制御部19へ送信する(ステップS74)。
Next, the user M operates the
制御部19は、携帯端末装置11から送信される入力結果(自己申告内容)を受信すると、その入力結果(自己申告内容)を公衆回線16を介してホスト装置14へ送信する(ステップS75)。
Upon receiving the input result (self-reported content) transmitted from the mobile
ホスト装置14は、制御部19からの入力結果(自己申告内容)を受信すると(ステップS76)、当該入力結果は「入場側に移動した」か「出場側に移動した」か、を判定する(ステップS77)。
When the
ステップS77における判定の結果、入力結果が「入場側に移動した」の場合、ホスト装置14は、メモリ14aに格納されたID番号と一致するID番号を有する登録利用者情報をメモリ14bから検索し、検索した登録利用者情報内の乗車券情報に基づき当該利用者Mに対する入場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存する(ステップS78)。
If the result of determination in step S77 is that the input result is “moved to the entrance side”, the
ステップS77における判定の結果、入力結果が「出場側に移動した」の場合、ホスト装置14は、メモリ14aに格納されたID番号と一致するID番号を有する登録利用者情報をメモリ14bから検索し、検索した登録利用者情報内の乗車券情報に基づき当該利用者Mに対する出場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存する(ステップS79)。
As a result of the determination in step S77, if the input result is “moved to the entry side”, the
次に、第2の実施形態に係る携帯端末装置11に登録された顔画像を持つ場合について説明する。
Next, a case where a face image registered in the mobile
最初に、事前に行なう利用者登録について図10に示すフローチャートを参照して説明する。 First, user registration performed in advance will be described with reference to a flowchart shown in FIG.
利用者Mは、所持する携帯端末装置11を操作することにより、改札アプリケーションを起動し、メニューにて利用者登録を選択し起動する(ステップS81)。
The user M activates the ticket gate application by operating the portable
次に、利用者Mは、利用者情報の入力を行なう(ステップS82)。このとき入力する利用者情報としては、たとえば、
・住所、氏名、電話番号等
・クレジットカード番号(クレジット決済利用時)
などが考えられる。
Next, the user M inputs user information (step S82). As user information to be input at this time, for example,
・ Address, name, phone number, etc.
・ Credit card number (when using credit card)
Etc. are considered.
次に、利用者Mは、カメラ17を起動することにより自身の顔画像を撮像する(ステップS83)。顔画像の撮像が終了すると、携帯端末装置11は、公衆回線10を介してクレジット会社のクレジット決済サーバと通信を行なうことにより、当該利用者のクレジット決済利用可能か否かのクレジット照会チェック(クレジット決済利用時)を行なう(ステップS84)。
Next, the user M captures his / her face image by activating the camera 17 (step S83). When the face image capturing is completed, the mobile
次に、携帯端末装置11は、撮像した顔画像から顔認識用データ(たとえば、一定レベル以上の本人特定が可能な顔特徴量データ)を生成するとともに、当該利用者固有のID番号を生成し、これら生成した顔認識用データ、ID番号および入力された利用者情報(以降、入力利用者情報という)を登録利用者情報としてメモリ28の利用者情報エリア28cに格納(登録)する(ステップS85)。
Next, the mobile
次に、SFカードの残額チャージおよび定期区間購入について図12に示すフローチャートを参照して説明する。 Next, the remaining charge of the SF card and the regular section purchase will be described with reference to the flowchart shown in FIG.
まず、クレジット利用の場合について説明する。
クレジット利用の場合、利用者Mは、所持する携帯端末装置11の操作部21を操作することで、チャージ額および定期区間を選択し(ステップS91)、公衆回線10を介してクレジット会社のクレジット決済サーバと通信を行なうことにより、クレジット決済を行なう(ステップS92)。
First, the case of credit use will be described.
In the case of credit use, the user M operates the
次に、携帯端末装置11は、クレジット決済が終了すると、メモリ28の利用者情報エリア28cに格納されている登録利用者情報内の残額を、チャージした金額(チャージ額)分加算するとともに、購入した定期区間を保存する(ステップS93)。
Next, when the credit terminal is completed, the mobile
次に、自動券売機利用の場合について説明する。
自動券売機利用の場合、利用者Mは、自動券売機12の操作表示部31を操作することで、チャージ額および定期区間を選択する(ステップS94)。
次に、自動券売機12は、携帯端末装置11と中距離無線通信を行なうことにより、メモリ28の利用者情報エリア28cに格納されているID番号を取得する(ステップS95)。
Next, the case of using an automatic ticket vending machine will be described.
In the case of using the automatic ticket vending machine, the user M selects the charge amount and the regular section by operating the
Next, the automatic
次に、利用者Mは、自動券売機12へ必要額の現金を投入することにより、自動券売機12は、チャージ/定期区間購入依頼に、チャージした金額(チャージ額)および購入した定期区間を添付して、中距離無線通信により携帯端末装置11へ送信する(ステップS96)。
Next, the user M inserts the necessary amount of cash into the automatic
携帯端末装置11は、自動券売機12からのチャージ/定期区間購入依頼を受信すると(ステップS97)、メモリ28の利用者情報エリア28cに格納された登録利用者情報内の残額を、上記チャージ/定期区間購入依頼に添付されたチャージ額分加算するとともに、定期区間を保存する(ステップS98)。
次に、携帯端末装置11は、登録終了メッセージを自動券売機12へ送信する(ステップS21)。
When the portable
Next, the portable
次に、入出場処理について図12に示すフローチャートを参照して説明する。 Next, entrance / exit processing will be described with reference to the flowchart shown in FIG.
自動改札装置13の制御部19は、アンテナ部18から中距離無線通信を展開している(ステップS101)。
携帯端末装置11を所持した利用者Mが中距離無線通信エリア55に進入すると(ステップS102)、携帯端末装置11は、制御部19との中距離無線通信に参加し(ステップS103)、メモリ28の利用者情報エリア28cに格納された登録利用者情報を制御部19へ送信する(ステップS104)。
The
When the user M possessing the mobile
制御部19は、携帯端末装置11から送信される登録利用者情報を受信すると、受信した登録利用者情報をメモリ45aに格納する(ステップS106)。
次に、制御部19は、カメラ17を起動することにより、改札エリア53内の構内外境界ライン54付近の画像を撮像し、この撮像した画像から利用者Mの顔画像を抽出し、抽出した顔画像から顔認識用データ(たとえば、一定レベル以上の本人特定が可能な顔特徴量データ)を生成する(ステップS107)。
When receiving the registered user information transmitted from the mobile
Next, the
次に、制御部19は、生成した顔認識用データを用いて構内外境界ライン54を越えて移動した利用者M(顔画像)が存在するか否かを判定し(ステップS108)、構内外境界ライン54を越えて移動した利用者Mが存在しない場合はステップS106に戻り、上記同様な動作を繰り返す。
Next, the
ステップS108における判定の結果、構内外境界ライン54を越えて移動した利用者Mが存在する場合、制御部19は、構内外境界ライン54を越えて移動した利用者Mは現在中距離無線通信に参加している利用者か否かを判定する(ステップS109)。
If the result of determination in step S108 is that there is a user M that has moved beyond the on-premise / outside
すなわち、上記生成した顔認識用データとメモリ45aに格納された携帯端末装置11からの登録利用者情報内の顔認識用データとを照合することにより、両顔認識用データが一致するか否かを判定する。両顔認識用データが一致すれば現在中距離無線通信に参加している利用者(本人)であると判定し、両顔認識用データが一致しなければ現在中距離無線通信に参加している利用者でない(本人でない)と判定する。
That is, whether or not both face recognition data match by comparing the generated face recognition data with the face recognition data in the registered user information from the mobile
ステップS109における判定の結果、現在中距離無線通信に参加している利用者でない場合、制御部19は、当該利用者Mの顔画像を駅係員に対し報知するとともに、制御部19内にも記録し、常習者を割り出せるようする(ステップS110)。
If the result of determination in step S109 is that the user is not currently participating in medium-range wireless communication, the
ステップS109における判定の結果、現在中距離無線通信に参加している利用者である場合、制御部19は、撮像した構内外境界ライン54付近の画像および生成した顔認識用データにより、当該利用者Mは構内外境界ライン54を入場側(図1に示す矢印a方向)へ移動したか、つまり構内外境界ライン54を駅構外側から駅構内側へ移動したか、あるいは、構内外境界ライン54を出場側(図1に示す矢印b方向)へ移動したか、つまり構内外境界ライン54を駅構内側から駅構外側へ移動したか、を判定する(ステップS111)。
If the result of determination in step S109 is that the user is currently participating in mid-range wireless communication, the
ステップS111における判定の結果、利用者Mが構内外境界ライン54を入場側(図1に示す矢印a方向)へ移動した場合、制御部19は、メモリ45aに格納された登録利用者情報内の乗車券情報に基づき当該利用者Mに対する入場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存するとともに、入場処理が終了したメッセージを携帯端末装置11へ送信する(ステップS112)。
As a result of the determination in step S111, when the user M moves the inside /
ステップS111における判定の結果、利用者Mが構内外境界ライン54を出場側(図1に示す矢印b方向)へ移動した場合、制御部19は、メモリ45aに格納された登録利用者情報内の乗車券情報に基づき当該利用者Mに対する出場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存するとともに、出場処理が終了したメッセージを携帯端末装置11へ送信する(ステップS113)。
As a result of the determination in step S111, when the user M moves the inside /
なお、ステップS112,113における入場、出場処理において、構内外境界ライン54の近傍を利用者Mがうろうろした場合、入場、出場処理が連続して実施されてしまうため、一定時間内の入場/出場は仮状態とし、変化が一定時間ない場合に最後の仮状態を最終処理として採用するものとする。
In addition, in the admission / exit processing in steps S112 and 113, when the user M roams in the vicinity of the on-premise /
携帯端末装置11は、制御部19からの入場/出場処理終了のメッセージを受信すると、その旨の案内を表示部22にて行なう(ステップS105)。
When the portable
次に、顔認識不能時の自己申告処理について図13に示すフローチャートを参照して説明する。 Next, self-reporting processing when face recognition is impossible will be described with reference to the flowchart shown in FIG.
自己申告処理とは、たとえば、利用者Mがマスクをしているなどで、制御部19で顔認識ができない場合に、利用者Mが自ら携帯端末装置11を操作して、入出場処理を実施する。その理由は、自分が入場または出場したにもかかわらず、図12の入出場処理で、入場/出場の処理結果が表示されない場合は、当該自己申告をするように利用者Mに案内するものである。
The self-reporting process is, for example, when the user M is masked and the face cannot be recognized by the
利用者Mは、携帯端末装置11の表示部22に入場/出場の処理結果が表示されず、自己申告するように案内された場合、操作部21の操作により自己申告モードを設定することにより、携帯端末装置11は、自分が中距離無線通信エリア55にいることを確認し(ステップS121)、制御部19との中距離無線通信に参加する(ステップS122)。
When the user M is guided to self-report without displaying the entry / participation process result on the
次に、利用者Mは、携帯端末装置11の操作部21を操作し、自分は構内外境界ライン54を入場側あるいは出場側に移動したことを入力することにより(ステップS123)、携帯端末装置11は、その入力結果(自己申告内容)を制御部19へ送信する(ステップS124)。
Next, the user M operates the
制御部19は、携帯端末装置11から送信される入力結果(自己申告内容)を受信すると(ステップS125)、当該入力結果は「入場側に移動した」か「出場側に移動した」か、を判定する(ステップS126)。
When the
ステップS126における判定の結果、入力結果が「入場側に移動した」の場合、制御部19は、メモリ45aに格納された登録利用者情報内の乗車券情報に基づき当該利用者Mに対する入場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存する(ステップS127)。
As a result of the determination in step S126, when the input result is “moved to the entrance side”, the
ステップS126における判定の結果、入力結果が「出場側に移動した」の場合、制御部19は、メモリ45aに格納された登録利用者情報内の乗車券情報に基づき当該利用者Mに対する出場処理を行ない、その処理結果を当該登録利用者情報内の乗車券情報に保存する(ステップS128)。
As a result of the determination in step S126, when the input result is “moved to the participation side”, the
以上述べた少なくとも1つの実施形態の改札システムによれば、スマートフォンなどの携帯端末装置を乗車券媒体として利用し、自動改札装置利用時に撮像された顔画像とあらかじめ登録された本人の顔画像との一致と、改札エリアに設定された利用者入出場の意思確認用の境界ラインの位置関係から、利用者入出場の意思確認を行なうことにより、利用者が手を使うことなく手ぶらで自動改札装置を利用でき、利便性が著しく向上する。特に、たとえば、手が不自由であったり、視力が弱いなどの交通弱者が、自動改札装置の利用がし易くなるという作用効果が期待できる。 According to the ticket gate system of at least one embodiment described above, a mobile terminal device such as a smartphone is used as a ticket ticket medium, and a face image captured when using the automatic ticket gate device and a face image of the person registered in advance are used. By checking the intention of user entry / exit based on the relationship between the match and the boundary line for confirming the intention of user entry / exit set in the ticket gate area, the user can check the user's entry / exit intention by hand. Can be used, and convenience is remarkably improved. In particular, for example, it can be expected that a traffic weak person such as a handicapped or weak eyesight can easily use the automatic ticket gate device.
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行なうことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
以下に本件出願当初の特許請求の範囲に記載された発明を付記する。
[C1]
利用者固有の識別情報と当該利用者の顔画像とを対応させて記憶している記憶手段と、
利用者が所持し、無線通信機能を有する携帯端末装置が改札エリアに進入した際、当該携帯端末装置にあらかじめ記憶された当該利用者固有の識別情報を無線通信により取得する第1の手段と、
前記改札エリア付近の画像を撮像する第2の手段と、
この第2の手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する第3の手段と、
前記第1の手段により取得された識別情報と対応する識別情報を持つ顔画像を前記記憶手段から取得する第4の手段と、
前記第3の手段により取得された顔画像が前記第4の手段により取得された顔画像と一致するか否かを判定する第5の手段と、
この第5の手段により両顔画像が一致すると判定された場合、当該利用者は前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第6の手段と、
この第6の手段により利用者が境界ラインを入場側へ移動したと判定された場合、当該利用者に対する入場処理を行なう第7の手段と、
前記第6の手段により利用者が境界ラインを出場側へ移動したと判定された場合、当該利用者に対する出場処理を行なう第8の手段と、
を具備する改札システム。
[C2]
前記第5の手段により両顔画像が不一致と判定された場合、当該利用者は不正利用者の可能性があるとして係員に報知する第9の手段をさらに具備するC1記載の改札システム。
[C3]
利用者が所持し、無線通信機能を有する携帯端末装置と、この携帯端末装置と無線通信を行なうことにより改札処理を行なう自動改札装置と、この自動改札装置と通信可能に接続されたホスト装置とから構成される改札システムであって、
前記ホスト装置は、
利用者固有の識別情報と当該利用者の顔画像および乗車券情報とを対応させて記憶している第1の記憶手段を具備し、
前記携帯端末装置は、
あらかじめ少なくとも利用者固有の識別情報を記憶する第2の記憶手段と、
前記自動改札装置の改札エリアに進入した際、前記第2の記憶手段に記憶された識別情報を無線通信により前記自動改札装置へ送信する第1の送信手段とを具備し、
前記自動改札装置は、
前記改札エリア付近の画像を撮像する撮像手段と、
この撮像手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する第1の取得手段と、
前記携帯端末装置から送信された識別情報を受信し、この受信した識別情報と前記第1の取得手段により取得された顔画像を前記ホスト装置へ送信する第2の送信手段とを具備し、
前記ホスト装置は、さらに、
前記自動改札装置から送信された識別情報と顔画像を受信し、この受信した識別情報と対応する識別情報を持つ顔画像を前記第1の記憶手段から取得する第2の取得手段と、
前記第2の取得手段により取得された顔画像と前記受信した顔画像とが一致するか否かを判定する第1の判定手段と、
この第1の判定手段により両顔画像が一致すると判定された場合、当該利用者は前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第2の判定手段と、
この第2の判定手段により利用者が境界ラインを入場側へ移動したと判定された場合、前記受信した識別情報と対応する識別情報を持つ乗車券情報を前記第1の記憶手段から取得し、この取得した乗車券情報に基づき当該利用者に対する入場処理を行なう入場処理手段と、
前記第2の判定手段により利用者が境界ラインを出場側へ移動したと判定された場合、前記受信した識別情報と対応する識別情報を持つ乗車券情報を前記第1の記憶手段から取得し、この取得した乗車券情報に基づき当該利用者に対する出場処理を行なう出場処理手段とを具備する改札システム。
[C4]
前記自動改札装置は、
前記第1の判定手段により両顔画像が不一致と判定された場合、当該利用者は不正利用者の可能性があるとして係員に報知する報知手段をさらに具備するC3記載の改札システム。
[C5]
C3記載の改札システムに使用される自動改札装置であって、
前記携帯端末装置から送信された識別情報を無線通信により受信する受信手段と、
前記改札エリア付近の画像を撮像する撮像手段と、
この撮像手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する取得手段と、
前記受信手段により受信された識別情報と前記第1の取得手段により取得された顔画像を前記ホスト装置へ送信する送信手段と、
を具備する自動改札装置。
[C6]
C3記載の改札システムに使用される携帯端末装置であって、
前記自動改札装置と無線通信を行なう無線通信手段と、
あらかじめ少なくとも利用者固有の識別情報を記憶する記憶手段と、
前記自動改札装置の改札エリアに進入した際、前記記憶手段に記憶された識別情報を前記無線通信手段により前記自動改札装置へ送信する送信手段と、
を具備する携帯端末装置。
[C7]
利用者が所持し、無線通信機能を有する携帯端末装置が改札エリアに進入した際、当該携帯端末装置にあらかじめ記憶された当該利用者の顔画像を無線通信により取得する第1の手段と、
前記改札エリア付近の画像を撮像する第2の手段と、
この第2の手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する第3の手段と、
前記第1の手段により取得された顔画像が前記第3の手段により取得された顔画像と一致するか否かを判定する第4の手段と、
この第4の手段により両顔画像が一致すると判定された場合、当該利用者は前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第5の手段と、
この第5の手段により利用者が境界ラインを入場側へ移動したと判定された場合、当該利用者に対する入場処理を行なう第6の手段と、
前記第5の手段により利用者が境界ラインを出場側へ移動したと判定された場合、当該利用者に対する出場処理を行なう第7の手段と、
を具備する改札システム。
[C8]
前記第4の手段により両顔画像が不一致と判定された場合、当該利用者は不正利用者の可能性があるとして係員に報知する第8の手段をさらに具備するC7記載の改札システム。
[C9]
利用者が所持し、無線通信機能を有する携帯端末装置と、この携帯端末装置と無線通信を行なうことにより改札処理を行なう自動改札装置とから構成される改札システムであって、
前記携帯端末装置は、
あらかじめ少なくとも当該利用者の顔画像および乗車券情報を記憶する記憶手段と、
前記自動改札装置の改札エリアに進入した際、前記記憶手段に記憶された顔画像および乗車券情報を無線通信により前記自動改札装置へ送信する送信手段とを具備し、
前記自動改札装置は、
前記改札エリア付近の画像を撮像する撮像手段と、
この撮像手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する取得手段と、
前記携帯端末装置から送信された顔画像および乗車券情報を受信し、この受信した顔画像と前記取得手段により取得された顔画像とが一致するか否かを判定する第1の判定手段と、
この第1の判定手段により両顔画像が一致すると判定された場合、当該利用者は前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第2の判定手段と、
この第2の判定手段により利用者が境界ラインを入場側へ移動したと判定された場合、前記受信した乗車券情報に基づき当該利用者に対する入場処理を行なう入場処理手段と、
前記第2の判定手段により利用者が境界ラインを出場側へ移動したと判定された場合、前記受信した乗車券情報に基づき当該利用者に対する出場処理を行なう出場処理手段とを具備する改札システム。
[C10]
前記自動改札装置は、
前記第1の判定手段により両顔画像が不一致と判定された場合、当該利用者は不正利用者の可能性があるとして係員に報知する報知手段をさらに具備するC9記載の改札システム。
[C11]
C9記載の改札システムに使用される自動改札装置であって、
前記携帯端末装置から送信された顔画像および乗車券情報を無線通信により受信する受信手段と、
前記改札エリア付近の画像を撮像する撮像手段と、
この撮像手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する取得手段と、
前記受信手段により受信された顔画像と前記取得手段により取得された顔画像とが一致するか否かを判定する第1の判定手段と、
この第1の判定手段により両顔画像が一致すると判定された場合、当該利用者は前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第2の判定手段と、
この第2の判定手段により利用者が境界ラインを入場側へ移動したと判定された場合、前記受信手段により受信された乗車券情報に基づき当該利用者に対する入場処理を行なう入場処理手段と、
前記第2の判定手段により利用者が境界ラインを出場側へ移動したと判定された場合、前記受信手段により受信された乗車券情報に基づき当該利用者に対する出場処理を行なう出場処理手段と、
を具備する自動改札装置。
[C12]
C9記載の改札システムに使用される携帯端末装置であって、
前記自動改札装置と無線通信を行なう無線通信手段と、
あらかじめ少なくとも当該利用者の顔画像および乗車券情報を記憶する記憶手段と、
前記自動改札装置の改札エリアに進入した際、前記記憶手段に記憶された顔画像および乗車券情報を前記無線通信手段により前記自動改札装置へ送信する送信手段と、
を具備する携帯端末装置。
Although several embodiments of the present invention have been described, these embodiments are presented by way of example and are not intended to limit the scope of the invention. These embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and their modifications are included in the scope and gist of the invention, and are also included in the invention described in the claims and the equivalents thereof.
The invention described in the scope of the claims at the beginning of the present application is added below.
[C1]
Storage means for storing user-specific identification information and the user's face image in association with each other;
A first means for acquiring, by wireless communication, identification information unique to the user stored in advance in the mobile terminal device when the mobile terminal device possessed by the user and having a wireless communication function enters the ticket gate area;
A second means for capturing an image near the ticket gate area;
Third means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area from an image captured by the second means;
Fourth means for acquiring a face image having identification information corresponding to the identification information acquired by the first means from the storage means;
Fifth means for determining whether or not the face image acquired by the third means matches the face image acquired by the fourth means;
A sixth means for determining whether the user has moved the boundary line in the direction of entry or exit when the fifth means determines that both face images match;
If it is determined by the sixth means that the user has moved the boundary line to the entrance side, a seventh means for performing an entrance process for the user;
If it is determined by the sixth means that the user has moved the boundary line to the entry side, an eighth means for performing an entry process for the user;
A ticket gate system comprising:
[C2]
The ticket gate system according to C1, further comprising ninth means for notifying a staff member that there is a possibility of an unauthorized user when both face images are determined to be inconsistent by the fifth means.
[C3]
A portable terminal device possessed by a user and having a wireless communication function, an automatic ticket gate device for performing ticket gate processing by performing wireless communication with the portable terminal device, and a host device communicably connected to the automatic ticket gate device, A ticket gate system comprising:
The host device is
Comprising first storage means for storing identification information unique to a user and the face image and ticket information of the user in association with each other;
The portable terminal device
A second storage means for storing at least user-specific identification information in advance;
A first transmission means for transmitting the identification information stored in the second storage means to the automatic ticket gate device by wireless communication when entering the ticket gate area of the automatic ticket gate device;
The automatic ticket gate is
Imaging means for capturing an image near the ticket gate area;
First acquisition means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area, based on an image captured by the imaging means;
Receiving the identification information transmitted from the portable terminal device, comprising the second transmission means for transmitting the received identification information and the face image acquired by the first acquisition means to the host device,
The host device further includes:
Second acquisition means for receiving identification information and a face image transmitted from the automatic ticket gate and acquiring a face image having identification information corresponding to the received identification information from the first storage means;
First determination means for determining whether or not the face image acquired by the second acquisition means matches the received face image;
If it is determined by the first determination means that both face images match, the second determination means for determining whether the user has moved the boundary line in the direction of entry or exit;
When it is determined by the second determination means that the user has moved the boundary line to the entrance side, boarding ticket information having identification information corresponding to the received identification information is acquired from the first storage means, An admission processing means for performing admission processing for the user based on the acquired ticket information;
If it is determined by the second determination means that the user has moved the boundary line to the entry side, boarding ticket information having identification information corresponding to the received identification information is acquired from the first storage means, A ticket gate system comprising participation processing means for performing participation processing for the user based on the acquired ticket information.
[C4]
The automatic ticket gate is
The ticket gate system according to C3, further comprising notification means for notifying a staff member that there is a possibility that the user is an unauthorized user when both face images are determined to be inconsistent by the first determination means.
[C5]
An automatic ticket gate device used in the ticket gate system described in C3,
Receiving means for receiving the identification information transmitted from the portable terminal device by wireless communication;
Imaging means for capturing an image near the ticket gate area;
An acquisition means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area, based on an image captured by the imaging means;
Transmitting means for transmitting the identification information received by the receiving means and the face image acquired by the first acquiring means to the host device;
An automatic ticket gate device comprising:
[C6]
A portable terminal device used in the ticket gate system described in C3,
Wireless communication means for performing wireless communication with the automatic ticket gate,
Storage means for storing at least user-specific identification information in advance;
Transmitting means for transmitting the identification information stored in the storage means to the automatic ticket gate device by the wireless communication means when entering the ticket gate area of the automatic ticket gate device;
A portable terminal device comprising:
[C7]
A first means for acquiring, by wireless communication, a face image of the user stored in advance in the mobile terminal device when the mobile terminal device possessed by the user and having a wireless communication function enters the ticket gate area;
A second means for capturing an image near the ticket gate area;
Third means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area from an image captured by the second means;
Fourth means for determining whether or not the face image acquired by the first means matches the face image acquired by the third means;
If it is determined by the fourth means that both face images match, the fifth means determines whether the user has moved the boundary line to the entrance side or the exit side;
If it is determined by the fifth means that the user has moved the boundary line to the entrance side, a sixth means for performing an entrance process for the user;
If it is determined by the fifth means that the user has moved the boundary line to the participation side, a seventh means for performing participation processing for the user;
A ticket gate system comprising:
[C8]
The ticket gate system according to C7, further comprising eighth means for notifying a staff member that there is a possibility that the user is an unauthorized user when both face images are determined to be inconsistent by the fourth means.
[C9]
A ticket gate system comprising a portable terminal device possessed by a user and having a wireless communication function, and an automatic ticket gate device that performs ticket gate processing by performing wireless communication with the portable terminal device,
The portable terminal device
Storage means for storing at least the user's face image and ticket information in advance;
When entering the ticket gate area of the automatic ticket gate, comprising a transmission means for transmitting the face image and the ticket information stored in the storage means to the automatic ticket gate device by wireless communication,
The automatic ticket gate is
Imaging means for capturing an image near the ticket gate area;
An acquisition means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area, based on an image captured by the imaging means;
First determination means for receiving the face image and ticket information transmitted from the portable terminal device, and determining whether the received face image and the face image acquired by the acquisition means match;
If it is determined by the first determination means that both face images match, the second determination means for determining whether the user has moved the boundary line in the direction of entry or exit;
If it is determined by the second determination means that the user has moved the boundary line to the entrance side, an entry processing means for performing an entry process for the user based on the received ticket information;
A ticket gate system comprising entry processing means for performing entry processing for the user based on the received ticket information when the second determination means determines that the user has moved to the entry side on the boundary line.
[C10]
The automatic ticket gate is
The ticket gate system according to C9, further comprising notification means for notifying a staff member that there is a possibility that the user is an unauthorized user when both face images are determined to be inconsistent by the first determination means.
[C11]
An automatic ticket gate device used in the ticket gate system described in C9,
Receiving means for receiving the face image and the ticket information transmitted from the portable terminal device by wireless communication;
Imaging means for capturing an image near the ticket gate area;
An acquisition means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area, based on an image captured by the imaging means;
First determination means for determining whether or not the face image received by the reception means matches the face image acquired by the acquisition means;
If it is determined by the first determination means that both face images match, the second determination means for determining whether the user has moved the boundary line in the direction of entry or exit;
When it is determined by the second determining means that the user has moved the boundary line to the entrance side, an admission processing means for performing admission processing for the user based on the ticket information received by the receiving means;
An entry processing means for performing an entry process for the user based on the ticket information received by the receiving means when the second determining means determines that the user has moved to the entry side on the boundary line;
An automatic ticket gate device comprising:
[C12]
A portable terminal device used in the ticket gate system according to C9,
Wireless communication means for performing wireless communication with the automatic ticket gate,
Storage means for storing at least the user's face image and ticket information in advance;
Transmitting means for transmitting the face image and the ticket information stored in the storage means to the automatic ticket gate device by the wireless communication means when entering the ticket gate area of the automatic ticket gate device;
A portable terminal device comprising:
11…携帯端末装置(スマートフォン、携帯電話機等)、12…自動券売機、13…自動改札装置、14…ホスト装置(センタサーバ)、17…カメラ(撮像手段)、18…アンテナ部、19…制御部、53…改札エリア、54…構内外境界ライン、55…中距離無線通信エリア。
DESCRIPTION OF
Claims (6)
前記改札エリアの画像を撮像する第2の手段と、
前記第2の手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する第3の手段と、
前記第1の手段により取得された顔画像が前記第3の手段により取得された顔画像と一致するか否かを判定する第4の手段と、
前記第4の手段により両顔画像が一致すると判定された場合、前記第2の手段により撮像された前記画像に基づいて前記利用者が前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第5の手段と、
前記第5の手段により前記利用者が前記境界ラインを入場側へ移動したと判定された場合、前記利用者に対する入場処理を行なう第6の手段と、
前記第5の手段により前記利用者が前記境界ラインを出場側へ移動したと判定された場合、前記利用者に対する出場処理を行なう第7の手段と、
を具備する改札システム。 A first means for acquiring, by wireless communication, the user's face image stored in advance in the mobile terminal device when the mobile terminal device possessed by the user and having a wireless communication function enters the ticket gate area;
A second means for capturing an image of the ticket gate area;
Third means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area from an image captured by the second means;
Fourth means for determining whether or not the face image acquired by the first means matches the face image acquired by the third means;
If it is determined by the fourth means that both face images match, the user moves the boundary line in either the entrance side or the exit side based on the image captured by the second means A fifth means for determining whether or not
A sixth means for performing an entrance process for the user when the fifth means determines that the user has moved the boundary line to the entrance side;
If the fifth means determines that the user has moved the boundary line to the entry side, a seventh means for performing an entry process for the user;
A ticket gate system comprising:
前記携帯端末装置は、
あらかじめ少なくとも前記利用者の顔画像および乗車券情報を記憶する記憶手段と、
前記自動改札装置の改札エリアに進入した際、前記記憶手段に記憶された顔画像および乗車券情報を無線通信により前記自動改札装置へ送信する送信手段とを具備し、
前記自動改札装置は、
前記改札エリアの画像を撮像する撮像手段と、
前記撮像手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する取得手段と、
前記携帯端末装置から送信された顔画像および乗車券情報を受信し、前記受信した顔画像と前記取得手段により取得された顔画像とが一致するか否かを判定する第1の判定手段と、
前記第1の判定手段により両顔画像が一致すると判定された場合、前記撮像手段により撮像された前記画像に基づいて前記利用者が前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第2の判定手段と、
前記第2の判定手段により利用者が前記境界ラインを入場側へ移動したと判定された場合、前記受信した乗車券情報に基づき前記利用者に対する入場処理を行なう入場処理手段と、
前記第2の判定手段により利用者が前記境界ラインを出場側へ移動したと判定された場合、前記受信した乗車券情報に基づき前記利用者に対する出場処理を行なう出場処理手段とを具備する改札システム。 A ticket gate system comprising a mobile terminal device possessed by a user and having a wireless communication function, and an automatic ticket gate device that performs ticket gate processing by performing wireless communication with the mobile terminal device,
The portable terminal device
Storage means for storing in advance at least the user's face image and ticket information;
When entering the ticket gate area of the automatic ticket gate, comprising a transmission means for transmitting the face image and the ticket information stored in the storage means to the automatic ticket gate device by wireless communication,
The automatic ticket gate is
Imaging means for capturing an image of the ticket gate area;
An acquisition means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area, based on an image captured by the imaging means;
First determination means for receiving the face image and ticket information transmitted from the portable terminal device, and determining whether the received face image and the face image acquired by the acquisition means match;
When it is determined by the first determination means that both face images match, the user has moved the boundary line in either the entrance side or the exit side based on the image picked up by the image pickup means Second determination means for determining whether or not
When the second determination means determines that the user has moved the boundary line to the entrance side, an entrance processing means for performing an entrance process for the user based on the received ticket information;
A ticket gate system comprising: an entry processing means for performing an entry process for the user based on the received ticket information when the second determination means determines that the user has moved the boundary line to the entry side. .
前記第1の判定手段により両顔画像が不一致と判定された場合、前記利用者は不正利用者の可能性があるとして係員に報知する報知手段をさらに具備する請求項3記載の改札システム。 The automatic ticket gate is
The ticket gate system according to claim 3, further comprising notification means for notifying an attendant that the user may be an unauthorized user when the first determination means determines that both face images do not match.
前記携帯端末装置から送信された顔画像および乗車券情報を無線通信により受信する受信手段と、
前記改札エリアの画像を撮像する撮像手段と、
前記撮像手段により撮像された画像により、前記改札エリアにあらかじめ設定された利用者入出場の意思確認用の境界ラインを越えてきた利用者の顔画像を取得する取得手段と、
前記受信手段により受信された顔画像と前記取得手段により取得された顔画像とが一致するか否かを判定する第1の判定手段と、
前記第1の判定手段により両顔画像が一致すると判定された場合、前記撮像手段により撮像された前記画像に基づいて前記利用者が前記境界ラインを入場側あるいは出場側のいずれの方向へ移動したかを判定する第2の判定手段と、
前記第2の判定手段により前記利用者が境界ラインを入場側へ移動したと判定された場合、前記受信手段により受信された乗車券情報に基づき前記利用者に対する入場処理を行なう入場処理手段と、
前記第2の判定手段により前記利用者が境界ラインを出場側へ移動したと判定された場合、前記受信手段により受信された乗車券情報に基づき前記利用者に対する出場処理を行なう出場処理手段と、
を具備する自動改札装置。 An automatic ticket gate device used in the ticket gate system according to claim 3,
Receiving means for receiving the face image and the ticket information transmitted from the portable terminal device by wireless communication;
Imaging means for capturing an image of the ticket gate area;
An acquisition means for acquiring a face image of a user who has crossed a boundary line for intention confirmation of user entry / exit preset in the ticket gate area, based on an image captured by the imaging means;
First determination means for determining whether or not the face image received by the reception means matches the face image acquired by the acquisition means;
When it is determined by the first determination means that both face images match, the user has moved the boundary line in either the entrance side or the exit side based on the image picked up by the image pickup means Second determination means for determining whether or not
An entrance processing means for performing an entrance process for the user based on the ticket information received by the receiving means when the second judging means determines that the user has moved the boundary line to the entrance side;
An entry processing means for performing an entry process for the user based on the ticket information received by the receiving means when it is determined by the second determining means that the user has moved the boundary line to the entry side;
An automatic ticket gate device comprising:
前記自動改札装置と無線通信を行なう無線通信手段と、
あらかじめ少なくとも前記利用者の顔画像および乗車券情報を記憶する記憶手段と、
前記自動改札装置の前記改札エリアに進入した際、前記記憶手段に記憶された顔画像および乗車券情報を前記無線通信手段により前記自動改札装置へ送信する送信手段と、
を具備する携帯端末装置。 A mobile terminal device used in the ticket gate system according to claim 3,
Wireless communication means for performing wireless communication with the automatic ticket gate,
Storage means for storing in advance at least the user's face image and ticket information;
Transmitting means for transmitting the face image and the ticket information stored in the storage means to the automatic ticket gate device by the wireless communication means when entering the ticket gate area of the automatic ticket gate device;
A portable terminal device comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012058752A JP5940331B2 (en) | 2012-03-15 | 2012-03-15 | Ticket gate system, automatic ticket gate device and portable terminal device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012058752A JP5940331B2 (en) | 2012-03-15 | 2012-03-15 | Ticket gate system, automatic ticket gate device and portable terminal device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013191172A JP2013191172A (en) | 2013-09-26 |
JP5940331B2 true JP5940331B2 (en) | 2016-06-29 |
Family
ID=49391293
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012058752A Active JP5940331B2 (en) | 2012-03-15 | 2012-03-15 | Ticket gate system, automatic ticket gate device and portable terminal device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5940331B2 (en) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108230465B (en) * | 2018-01-26 | 2020-05-15 | 深圳一卡通新技术有限公司 | Mobile terminal-based gate quick passing control method |
JP6783842B2 (en) * | 2018-11-13 | 2020-11-11 | 株式会社東芝 | Ticket gate monitoring system and server equipment |
CN110675532A (en) * | 2019-09-17 | 2020-01-10 | 中国银联股份有限公司 | Gate control method, device, equipment, medium, gate and gate system |
JP7338387B2 (en) * | 2019-10-07 | 2023-09-05 | オムロン株式会社 | Automatic machines, matching methods and matching programs |
CN112766249B (en) * | 2019-11-04 | 2024-06-14 | 深圳怡化电脑股份有限公司 | Bill boundary positioning method and device and terminal equipment |
JP7404117B2 (en) * | 2020-03-17 | 2023-12-25 | 株式会社東芝 | Ticket gate machines, ticket gate systems and ticket gate methods |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002230600A (en) * | 2001-02-02 | 2002-08-16 | Hitachi Ltd | Ticket selling ticket gate system, and terminal device |
JP2003331323A (en) * | 2002-05-17 | 2003-11-21 | Nippon Signal Co Ltd:The | Automatic gate system |
JP4747611B2 (en) * | 2005-03-01 | 2011-08-17 | パナソニック電工株式会社 | Entrance / exit management device |
JP2008059219A (en) * | 2006-08-30 | 2008-03-13 | Hitachi Ltd | Image data retrieving apparatus, image data retrieval method and image data retrieval program |
JP5323366B2 (en) * | 2008-03-07 | 2013-10-23 | 公益財団法人鉄道総合技術研究所 | In-car ticket gate support method and in-car ticket gate support system |
-
2012
- 2012-03-15 JP JP2012058752A patent/JP5940331B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2013191172A (en) | 2013-09-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5940331B2 (en) | Ticket gate system, automatic ticket gate device and portable terminal device | |
US6644455B2 (en) | Rental system, machine and method for providing rental items | |
JP5690113B2 (en) | Autonomous mobile service provision system | |
KR101258689B1 (en) | Service providing system for visitors using cars | |
JP2021177425A (en) | program | |
US8073771B2 (en) | Method and system for payer-centric payment using mobile terminal | |
JP2005165406A (en) | Service providing system and method | |
JPWO2019026196A1 (en) | Biometric payment system, payment system and cash register system | |
JP2013191173A (en) | Ticket examination system, automatic ticket examination apparatus and ticket medium | |
JP2012118592A (en) | Ticket gate system and automatic ticket gate device | |
CN105976439A (en) | Parking lot charging method and parking lot charging device | |
CN107845178A (en) | A kind of intelligent library | |
KR20090088714A (en) | System for settlement and identifying location information of man and cars and control coming and going using t-money and zigbee, and method thereof | |
JP2014059829A (en) | Station service device, ticket medium, and customer service system | |
US20210040772A1 (en) | Digital door lock, door lock control server, and door lock system | |
US11360448B2 (en) | Power supply apparatus and system, and method for using the same | |
JP2005203928A (en) | Information delivery system and method | |
KR102205671B1 (en) | System, server and method for providing intelligent golf service | |
KR100999525B1 (en) | Parking-control Method and System by employing mobile | |
KR102006802B1 (en) | Vehicle access control system of apartment house | |
KR101389608B1 (en) | Remote meter reading method by using mobile device | |
JP2002279455A (en) | Automatic ticket examination machine | |
JP2009278480A (en) | Multiple dwelling house intercom system | |
JP2021056675A (en) | Accommodation facility payment system | |
KR20050069970A (en) | Wireless ticketing system to use bluetooth and rfid |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131205 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131212 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131219 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131226 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20140109 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141017 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150902 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150908 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160126 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160322 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160419 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160518 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5940331 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |