JP2012194768A - 画像処理ユニット - Google Patents

画像処理ユニット Download PDF

Info

Publication number
JP2012194768A
JP2012194768A JP2011058108A JP2011058108A JP2012194768A JP 2012194768 A JP2012194768 A JP 2012194768A JP 2011058108 A JP2011058108 A JP 2011058108A JP 2011058108 A JP2011058108 A JP 2011058108A JP 2012194768 A JP2012194768 A JP 2012194768A
Authority
JP
Japan
Prior art keywords
unit
user
image
image processing
processing unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011058108A
Other languages
English (en)
Other versions
JP5348160B2 (ja
Inventor
Tetsuya Tsukamoto
哲也 塚本
Masamichi Kogure
正道 小暮
Tomohiko Higami
智彦 樋上
Keisuke Tanaka
慧輔 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP2011058108A priority Critical patent/JP5348160B2/ja
Publication of JP2012194768A publication Critical patent/JP2012194768A/ja
Application granted granted Critical
Publication of JP5348160B2 publication Critical patent/JP5348160B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Devices For Checking Fares Or Tickets At Control Points (AREA)

Abstract

【課題】通路における利用者の通行方向を双方向にしたゲート装置のコストダウンが図れる画像処理ユニットを提供する。
【解決手段】画像処理ユニット11は、利用者が通路に進入する一方の進入口周辺を撮像エリアとする撮像部10A、および他方の進入口周辺を撮像エリアとする撮像部10Bが撮像しているフレーム画像が画像入力部13に入力される。画像処理部15が、選択されている一方の撮像部10A(または10B)が撮像したフレーム画像を処理する。また、選択されていない他方の撮像部10B(または10A)が撮像したフレーム画像を画像記憶部14に記憶する。選択されていない他方の撮像部10Bが撮像している進入口から利用者の進入を検知したとき、画像記憶部14に記憶しているフレーム画像を利用する。
【選択図】図4

Description

この発明は、利用者の通行方向を双方向としたゲート装置の通路に進入した利用者の撮像画像を処理する画像処理ユニットに関する。
従来、鉄道の駅の改札口では、駅構内に入場する利用者や、駅構内から出場する利用者に対する改札処理を自動改札機で行っている。自動改札機は、利用者が所持しているキップ、定期券、プリペイド券等の乗車券を受け付け、この乗車券に記録されている乗車券情報を読み取り、読み取った乗車券情報に基づいて、その利用者に対する改札通路の通行可否を判定する。自動改札機は、利用者に対して改札通路の通行を許可すると判定すると、改札通路の出口側に設けた扉を開し、反対に、利用者に対して改札通路の通行を許可しないと判定すると、改札通路の出口側に設けた扉を閉する。
また、一般的な鉄道会社では、利用者を年齢で幼児(6歳未満)、小児(6歳以上12歳未満)、または大人(12歳以上)に分類し、鉄道の利用にかかる乗車券の価値(乗車料金)を定めている。通常、幼児は、鉄道の利用に際して乗車券を必要としない。小児、および大人は、鉄道の利用に際して乗車券を必要とするが、小児用の乗車券の価値は、通常、大人用の乗車券の半分である。乗車券に記録されている乗車券情報には、小児用であるか、大人用であるかを示す情報が含まれている。
また、特許文献1は、改札通路を通行している利用者を撮像したフレーム画像から利用者の年齢を推定し、この利用者が幼児、小児、または大人のいずれであるかを判定する自動改札機を提案している。
特開2009−205495号公報
しかしながら、2台の改札ユニットを対向して配置し、これらの改札ユニットの間に形成される改札通路における利用者の通行方向を双方向にした自動改札機では、通行方向毎に撮像装置を設けるだけでなく、撮像装置毎に撮像されたフレーム画像を処理する画像処理ユニットを設けなければならなかった。このため、通路における利用者の通行方向を双方向にし、利用者を撮像したフレーム画像を処理して推定した利用者の属性(年齢等)を用いて改札通路における通行可否を判定する自動改札機が高価であり、コストダウンが要望されている。
この発明の目的は、通路における利用者の通行方向を双方向にし、利用者を撮像したフレーム画像を処理して改札通路における通行可否を判定するゲート装置のコストダウンが図れる画像処理ユニットを提供することにある。
この発明の画像処理ユニットは、上記課題を解決し、その目的を達するために、以下のように構成している。
この発明の画像処理ユニットは、利用者の通行方向を双方向としたゲート装置の通路に進入した利用者の画像を処理する。この画像処理では、例えば、撮像されている利用者の属性を推定する。ゲート装置は、画像処理ユニットの処理結果を用いて、通路における当該利用者の通行可否等を判定する。
画像処理ユニットは、第1の撮像部、および第2の撮像部が撮像しているフレーム画像が画像入力部に入力される。第1の撮像部の撮像エリアは、利用者が通路に進入する一方の進入口周辺であり、第2の撮像部の撮像エリアは、他方の進入口周辺である。
選択部が、第1の撮像部、または第2の撮像部の一方を選択する。画像処理部は、選択部が選択した一方の撮像部が撮像したフレーム画像を処理する。画像処理部は、例えば撮像されている利用者の属性を推定する。画像処理部の処理結果は、ゲート装置に通知される。また、画像記憶部は、選択部が選択していない他方の撮像部が撮像したフレーム画像を記憶する。
また、選択部は、ゲート装置からの指示にしたがって、選択する撮像部を切り換える。ゲート装置は、例えば、通路への利用者の進入を検知したときに、この利用者が進入した側の進入口周辺を撮像エリアとする撮像部の選択を指示する。また、ゲート装置は、進入口周辺に配置している媒体受付部で媒体(乗車券やIDカード等)を受け付けたとき、この媒体を受け付けた媒体受付部を配置している側の進入口周辺を撮像エリアとする撮像部の選択を指示する。
画像処理部は、選択部がゲート装置からの指示にしたがって撮像部の選択を切り換えたとき、画像記憶部に記憶しているフレーム画像を処理する。このように、選択部が撮像部の選択を切り換えたときには、画像処理部が過去に撮像されたフレーム画像も合わせて処理するので、撮像されている利用者の属性等の推定精度の低下が抑えられる。
なお、属性の推定精度を確保するには、利用者の顔をほぼ正面から撮像したフレーム画像を用いることである。したがって、利用者の顔が撮像されているフレーム画像が多いほど、属性の推定に適したフレーム画像が存在する可能性が高くなり、属性の推定精度の低下が抑えられる。
また、画像記憶部は、例えばフレーム画像を所定数(3〜10フレーム程度)記憶する構成とし、記憶しているフレーム数が所定数に達しているときには、記憶している時間的に最も古いフレーム画像を、新たに記憶するフレーム画像に書き換える構成とすればよい。このようにすれば、画像記憶部の記憶容量を抑えることができ、コストアップが抑えられる。
また、この画像処理ユニットは、上述したように、1つの画像処理部で、通路を双方向に通行する利用者の撮像画像を処理することができる。したがって、この画像処理ユニットを利用することで、ゲート装置のコストダウンが図れる。
さらに、ゲート装置から選択する撮像部が指示されていないときは、画像処理部がフレーム画像を処理する毎に、第1の撮像部、または第2の撮像部の選択を切り換えてもよい。このようにすれば、利用者が、通路に進入するよりも以前に、その利用者の存在を検知することができ、利用者の属性等の推定精度の低下が一層抑えられる。
この発明によれば、通路における利用者の通行方向を双方向にし、利用者を撮像したフレーム画像を処理して推定した利用者の属性等も用いて改札通路における通行可否を判定するゲート装置のコストダウンが図れる。
自動改札機の主要部の構成を示すブロック図である。 自動改札機の外観を示す概略図である。 自動改札機の通路側の平面図である。 画像処理ユニットの主要部の構成を示すブロック図である。 改札ユニットの動作を示すフローチャートである。 画像処理ユニットの動作を示すフローチャートである。 アイドルモードの動作を示すフローチャートである。 アイドルモードの動作を示す模式図である。 進入検知モードの動作を示すフローチャートである。 進入検知モードの動作を示す模式図である。 属性推定モードの動作を示すフローチャートである。 属性推定モードの動作を示す模式図である。 属性推定モードの動作を示す模式図である。
以下、この発明の実施形態である画像処理ユニットについて説明する。
図1は、この発明の実施形態である画像処理ユニットを備える自動改札機の主要部の構成を示すブロック図である。また、図2は、この発明の実施形態である自動改札機の外観を示す概略図である。図3は、この自動改札機(一方の改札ユニット)の通路側の平面図である。
この自動改札機1は、2台の改札ユニット1A、1Bを対向して配置し、これらの自動改札ユニット1A、1Bの間に形成された改札通路における利用者の通行方向を双方向にしている。自動改札機1が、この発明で言うゲート装置に相当する。図2において、改札ユニット1Aは、改札通路をA方向に通行する利用者に対して改札処理を行う。また、図2において、改札ユニット1Bは、改札通路をB方向に通行する利用者に対して改札処理を行う。A方向は、駅に入場する方向であり、B方向は、駅から出場する方向である。すなわち、改札ユニット1Aは、駅に入場する利用者に対して改札処理を行い、改札ユニット1Bは、駅から出場する利用者に対して改札処理を行う。
各改札ユニット1A、1Bは、乗車券処理部3(3A、3B)と、利用者検知部4(4A、4B)と、表示部5(5A、5B)と、扉開閉部6(6A、6B)と、報知部7(7A、7B)と、を備えている。また、改札ユニット1Aは、制御部2、および通信部8を備えている(改札ユニット1Bは、制御部2、および通信部8を備えていない。)。また、この自動改札機1は、撮像部10(10A、10B)と、この発明の実施形態である画像処理ユニット11と、を備えている。
なお、以下の説明において、乗車券処理部3(3A、3B)、利用者検知部4(4A、4B)、表示部5(5A、5B)、扉開閉部6(6A、6B)、および報知部7(7A、7B)については、A、Bの符合を省略することがある。
制御部2は、改札ユニット1A、1Bの各部の動作を制御する。
乗車券処理部3は、改札通路を通行する利用者が所持している乗車券を受け付け、受け付けた乗車券に記録されている乗車券情報の読み取りや、書き込みを行う。この乗車券処理部3は、非接触ICカードとの間で無線通信を行う無線通信部等を有している。改札通路の入口側には、非接触ICカードとの無線通信を行うためのアンテナ3aが設けられている。非接触ICカードは、無線通信機能を有し、乗車券情報を内蔵メモリに記録している乗車券である。乗車券処理部3は、非接触ICカードとの無線通信により、その非接触ICカードに記録されている乗車券情報の読み取りや、当該非接触ICカードに対する乗車券情報の書き込みを行う。乗車券が、この発明で言う媒体に相当する。
なお、乗車券には、乗車券情報を磁気データで記録している磁気券もある。図2では、この磁気券を処理する構成を備えていない改札ユニット1A、1Bを例示しているが、乗車券処理部3が磁気券を処理する機能を有する構成であってもよい。この磁気券を処理する機能は、公知のように、入口側に設けた投入口と、出口側に設けた放出口との間で、磁気券を搬送する搬送路を形成し、この搬送路を搬送されている磁気券に記録されている磁気データの読み取りや、磁気データの書き込みを行う構成である。
利用者検知部4は、適当な間隔で改札通路に沿って設けた複数のセンサにより、改札通路における利用者の位置を検知する。すなわち、利用者検知部4A、4Bは、利用者が改札通路に進入してから、退出するまでの間、改札通路における利用者の位置を追跡することができる。具体的には、センサは、透過型の光センサであり、発光素子4aと受光素子4bとが通路を挟んで対向するように配置している。改札ユニット1は、通路に沿って、発光素子4aと受光素子4bとを交互に配置している。
表示部5は、改札通路の中央付近に設けた表示器5aに、改札通路を通行している利用者に対する案内メッセージ等を表示する。また、扉開閉部6は、改札通路の出口側に設けた扉6aを開閉することにより、改札通路における利用者の通行を制限する。
なお、改札ユニット1A、1Bは、改札通路の入口側にも扉6aを有している。
報知部7は、改札通路に進入した利用者が適正な乗車券を所持していなければ、警告音等による報知を行う。
通信部8は、駅務室に設置されている駅サーバ(不図示)等の上位装置との間における通信を行う。また、画像処理ユニット11との通信も行う。
撮像部10Aは、改札ユニット1Aに取り付けている。撮像部10Bは、改札ユニット1Bに取り付けている。撮像部10Bの撮像エリアは、一定時間(例えば100〜200ms)間隔で撮像したフレーム画像を画像処理ユニット11に入力するビデオカメラである。撮像部10Aは、視野を、改札ユニット1Aが改札処理する利用者(駅構内に入場する利用者)にとっての改札通路の入口側にして取り付けている。撮像部10Bは、視野を、改札ユニット1Bが改札処理する利用者(駅構内から出場する利用者)にとっての改札通路の入口側にして取り付けている。
図4は、画像処理ユニットの主要部の構成を示すブロック図である。画像処理ユニット11は、制御部12と、画像入力部13と、画像記憶部14と、画像処理部15と、通信部16と、を備えている。画像入力部13には、撮像部10A、10Bが接続されており、撮像部10A、10Bが撮像したフレーム画像が入力される。画像記憶部14は、画像入力部13に入力されたフレーム画像を数フレーム(3〜10フレーム程度)記憶する。画像処理部15は、画像記憶部14に記憶されているフレーム画像を処理し、撮像されている利用者の有無の検知、および撮像されている利用者の顔画像から年齢や性別等の属性を推定する属性推定処理を行う。通信部16は、改札ユニット1との間における通信を制御する。
この自動改札機1は、利用者を、幼児(6歳未満)、小児(6歳以上12歳未満)、大人(12歳以上)のいずれかの属性に区分し、区分した属性に応じて改札通路の通行可否を判定する。具体的には、幼児については、乗車券を所持していなくても改札通路の通行を許可する。また、小児と大人については、適正な乗車券を所持していれば改札通路の通行を許可するが、乗車券を所持していなかったり、所持している乗車券が適正でなかったりした場合に、改札通路の通行を許可しない。乗車券には、小児用の乗車券と、大人用の乗車券とがある。
また、この自動改札機1は、ほぼ同じタイミングで改札通路の両側から利用者が進入した場合、先に乗車券を受け付けた利用者に対して改札処理を行う。すなわち、先に乗車券を受け付けた側の改札ユニット1A(または1B)による改札処理を有効にし、他方の改札ユニット1B(または1A)による改札処理を一時的に停止する。
以下、この自動改札機1の動作について説明する。
図5は、改札ユニットにおける改札処理の動作を示すフローチャートである。ここでは、改札ユニット1Aを例にして説明するが、改札ユニット1Bも同様である。
改札ユニット1Aは、改札通路への利用者の進入を検知するか(s1)、乗車券処理部3Aで乗車券を受け付けるか(s2)、を待っている。また、改札ユニット1Aは、s1で改札通路への利用者の進入を検知した後は、この利用者が無札検知位置に達するか(s3)、この利用者が通路を引き返して退出するか(s4)、を待つ。無札検知位置は、改札通路の入口に設けたアンテナ3aよりも、少し通路内に入った位置である。
改札ユニット1Aは、s1で改札通路への利用者の進入を検知すると、改札通路における、この利用者の追跡処理を開始するとともに(s5)、画像処理ユニット11に対して進入検知を通知する(s6)。この追跡処理は、利用者検知部4が利用者の位置を検知している発光素子4a、および受光素子4bのセンサ状態が変化する毎に、利用者検知部4で改札通路における利用者の位置を検知する処理である。また、この追跡処理は、この利用者が改札通路から退出すると終了する。
また、改札ユニット1Aは、s2で乗車券を受け付けると、対向する側の改札ユニット1Bに対して改札停止指示を通知するとともに(s7)、画像処理ユニット11に対して属性推定要求を通知する(s8)。改札ユニット1Bは、対向する側の改札ユニット1Aから改札停止指示の通知があると、乗車券処理部3Bでの乗車券の受け付けを停止する。すなわち、改札ユニット1Bは、改札処理の実行を一時的に停止する。また、画像処理ユニット11は、属性通知の要求を受信すると、今回改札通路に進入した利用者の属性(年齢、性別等)を推定し、推定した属性を改札ユニット1Aに通知する。画像処理ユニット11の動作については、後述する。
改札ユニット1Aは、s3で利用者が無札検知位置に達したと判定すると、この利用者に乗車券情報が対応づけられているかどうかを判定する(s9)。改札ユニット1Aは、s2で受け付けた乗車券から読み取った乗車券情報を利用者に対応づけている。言い換えれば、s2で乗車券を受け付けていない利用者には、乗車券情報が対応づけられていない。
改札ユニット1Aは、乗車券情報が利用者に対応づけられていると、この乗車券情報と、この利用者に対応づけられている属性と、を用いて、改札通路における通行可否を判定する(s10)。改札ユニット1Aは、上述したように、s8で画像処理ユニット11に対して属性推定要求を行っており、この要求に対する画像処理ユニット11からの応答に含まれていた利用者の属性(年齢、性別等)を、この利用者に対応づけている。改札ユニット1Aは、この利用者に対して、通行可と判定すると、扉開閉部6により、改札通路の出口側に位置する扉6aを開し(s11)、この利用者が改札通路から退出するのを待つ(s16)。
また、改札ユニット1Aは、乗車券を受け付けていない利用者であれば、対応づけられている属性(年齢)が6歳未満(乗車券を必要としない幼児)であるかどうかを判定する(s12)。改札ユニット1Aは、s12で6歳未満の幼児であると判定すると、上述したs11以降の処理を実行する。
改札ユニット1Aは、s12で利用者が6歳未満の幼児でないと判定すると、表示部5が表示器5aに通行不可を示す警告メッセージを表示するととともに、報知部7が警告音による報知を行う(s13)。改札ユニット1Aは、s12で利用者が6歳未満の幼児でないと判定した利用者に対応づけられている年齢が60歳以上(高齢者)であるかどうかを判定する(s14)。改札ユニット1Aは、s14で高齢者であると判定すると、上述したs11以降の処理を実行する。すなわち、通行不可とした利用者が高齢者であれば、扉6aを閉めずに開する。これにより、高齢者が閉された扉6aに衝突するのを防止している。
また、改札ユニット1Aは、s14で高齢者でないと判定すると、扉開閉部6により、改札通路の出口側に位置する扉6aを閉し(s15)、上述したs16でこの利用者が改札通路から退出するのを待つ。
なお、s15では、この利用者よりも先に改札通路に進入し、通行可と判定されている利用者、または高齢者が改札通路から退出するのを待って、扉6aを閉する。
改札ユニット1Aは、利用者が改札通路から退出すると、改札通路に他の利用者がいるかどうかを判定する(s17)。s17では、改札通路から退出した利用者(改札処理の対象であった利用者)につづいて、改札通路に進入した利用者の有無を判定している。この利用者についても、この図5に示す改札処理を行っている。改札ユニット1Aは、s17で改札通路に他の利用者がいないと判定すると、画像処理ユニット11に対して、アイドル状態を通知し(s18)、本処理を終了する。また、改札ユニット1Bは、上述したs7で通知された改札停止指示により一時的に停止していた改札処理を再開する。
次に、画像処理ユニット11の動作について説明する。図6は、画像処理ユニットの動作を示すフローチャートである。画像処理ユニット11は、改札ユニット1からアイドル状態の通知があるとアイドルモードに移行する(s21、s22)。また、画像処理ユニット11は、改札ユニット1から進入検知の通知があれば進入検知モードに移行する(s23、s24)。また、画像処理ユニット11は、改札ユニット1から属性推定要求の通知があれば属性推定モードに移行する(s25、s26)。画像処理ユニット11は、s21〜s26の処理を繰り返し実行している。
画像処理ユニット11におけるアイドルモードの動作について説明する。図7は、このアイドルモードの動作を示すフローチャートである。また、図8は、このアイドル状態の動作を示す模式図である。画像処理ユニット11は、撮像部10A、10Bが撮像したフレーム画像が画像入力部13に入力されている。画像処理ユニット11は、アイドルモードであるとき、選択している撮像部10A、10Bを切り換える(s31)。画像処理ユニット11は、今回選択した撮像部10A(または10B)から画像入力部13に入力された撮像画像を画像処理部15に取り込み(s32)、利用者が撮像されているかどうかを判定する画像処理を行う(s33)。画像処理ユニット11は、s33で利用者が撮像されていないと判定すると、s31に戻り、上記処理を繰り返す。
例えば、図8に示すように、時刻T1において、改札ユニット1A側の撮像部10Aが撮像したフレーム画像を画像処理部15で処理し、このフレーム画像に利用者が撮像されていなければ、時刻T2において、改札ユニット1B側の撮像部10Bが撮像したフレーム画像を画像処理部15で処理する。すなわち、画像処理ユニット11は、s31〜s33にかかる処理を実行することにより、撮像部10A、10Bが撮像したフレーム画像を交互に画像処理部15で処理し、撮像されている利用者の有無を検知する。時刻T1〜時刻T4が、s31〜s33にかかる処理が繰り返された例を示している。
なお、s33では、改札通路に進入する以前に利用者を検知しており、この利用者が改札通路に進入するとは限らない。
画像処理ユニット11は、s33で利用者が撮像されていると判定すると、その利用者の属性を推定する(s34)。また、画像処理ユニット11は、これ以降、選択していない側の撮像部10A(または10B)が撮像したフレーム画像を画像記憶部14に記憶し(s35)、s32に戻る。すなわち、撮像されている利用者を検知した撮像部10A(または10B)が撮像したフレーム画像を画像処理部15で繰り返し処理するとともに、反対側の撮像部10B(または10A)が撮像したフレーム画像を画像記憶部14に記憶する。
例えば、図8に示す時刻T5で撮像部10Aが撮像したフレーム画像に利用者が撮像されていることを検知すると、次の時刻T6でも、撮像部10Aが撮像したフレーム画像を画像処理部15で処理する。また、時刻T6で撮像部10Bが撮像したフレーム画像については、画像記憶部14に記憶する。
画像記憶部14は、フレーム画像を所定数(3〜10フレーム程度)記憶する構成であり、すでに所定数のフレームを記憶している場合、記憶している時間的に最も古い画像を、新たに入力されたフレーム画像(最新のフレーム画像)に書き換える。
なお、画像処理部15で処理している側の撮像部10A(または10B)が撮像したフレーム画像については、この画像処理部15に取り込まれると消去される。
また、画像処理ユニット11は、この後、フレーム画像に利用者が撮像されていない状態になると、s31に戻る。
例えば、撮像部10Aが、図8に示す時刻T7で撮像したフレーム画像に利用者が撮像されていないと判定すると、図8に示す時刻T2以降の処理を実行する。また、この場合、画像処理部15は、時刻T5〜時刻T7までの間、撮像部10Aが撮像したフレーム画像を連続的に処理しており、時刻T6、T7で、撮像部10Bが撮像したフレーム画像については、画像記憶部14に記憶している。
このように、アイドル状態では、利用者が改札通路に進入する前に、その利用者を検知し、事前に属性の推定処理を行うことから、この利用者が撮像されている、より多くのフレーム画像を用いて、この利用者の属性を推定することができる。したがって、属性の推定精度の低下が抑えられる。
次に、画像処理ユニット11における進入検知モードの動作について説明する。図9は、この進入検知モードの動作を示すフローチャートである。また、図10は、この進入検知モードの動作を示す模式図である。画像処理ユニット11は、利用者の進入が検知された側の撮像部10A(または10B)を選択し、選択した側の撮像部10A(または10B)が撮像したフレーム画像を画像処理部15に取り込む(s41)。また、利用者の進入が検知されていない側の撮像部10B(または10A)が撮像したフレーム画像を画像記憶部14に記憶する(s42)。
この場合も、上述のアイドルモードと同様に、画像処理部15で処理している側(選択している側)の撮像部10A(または10B)が撮像したフレーム画像については、この画像処理部15に取り込まれると消去される。
画像処理部15は、s41で取り込んだフレーム画像を処理し、利用者が撮像されていれば、その属性を推定する(s43、s44)。画像処理ユニット11は、進入検知状態である間、s41〜s44の処理を繰り返す。
例えば、画像処理ユニット11は、図10に示すように、改札通路への利用者の進入が改札ユニット1A側で検知された場合、撮像部10Aからフレーム画像が入力されるごとに、そのフレーム画像を画像処理部15に取り込み、利用者の検知、および利用者の属性の推定を繰り返す(時刻T11〜時刻T17)。また、撮像部10Bから入力されるフレーム画像は、画像記憶部14に記憶される(時刻T11〜時刻T17)。
また、上述のアイドルモードと異なり、画像処理ユニット11は、進入検知モードであるときは、図10に示す時刻T14で、撮像部10Aから入力されたフレーム画像から利用者が検知できなくても、撮像部10Aの選択を切り換えない。すなわち、次の時刻T15においても、画像処理部15で処理するフレーム画像を撮像している撮像部10Aの選択を切り換えない。これは、進入検知された利用者が一時的に撮像部10A(または10B)の撮像視野から外れただけで、改札通路から退出していないからである。改札通路から退出していれば、上述したs18で、改札ユニット1A(または1B)からアイドルモ状態の通知がある。
また、図10に示すようにある時刻(時刻T15〜時刻T17)において、選択されていない撮像部10Bのフレーム画像に利用者が撮像されることがある。このフレーム画像は、この時点では画像処理部15で処理されないが、画像記憶部14に記憶される。この記憶されたフレーム画像は、後述する属性推定モードで利用する場合がある。
このように、進入検知モードでは、改札通路に進入した利用者について、その利用者の乗車券を受け付ける前から、属性の推定処理を行っているので、この利用者が撮像されている、より多くのフレーム画像を用いて、この利用者の属性を推定することができる。したがって、属性の推定精度の低下が抑えられる。
次に、画像処理ユニット11における属性推定モードの動作について説明する。図11は、この属性推定モードの動作を示すフローチャートである。また、図12、および図13は、この属性推定モードの動作を示す模式図である。
画像処理ユニット11は、属性推定要求を送信してきた改札ユニット1A(または1B)が、選択している側の撮像部10A(または10B)であるかどうかを判定する(s51)。画像処理ユニット11は、選択している側の撮像部10A(または10B)であれば、上述のアイドルモードや、進入検知モードで事前に属性を推定している。また、画像処理ユニット11は、属性推定要求の通知があったときに、選択している側の撮像部10A(または10B)から入力されたフレーム画像を処理して、利用者の属性を推定してもよい(s53)。
また、画像処理ユニット11は、選択していない側の撮像部10A(または10B)であれば、画像記憶部14に記憶しているフレーム画像の有無を判定する(s52)。記憶している画像がなければ、今回入力されたフレーム画像を処理して、利用者の属性を推定する(s53)。この場合、以降に入力される数フレーム分のフレーム画像を処理して、利用者の属性を推定してもよい。
また、画像記憶部14に記憶しているフレーム画像があれば、この記憶しているフレーム画像と、今回入力されたフレーム画像とを用いて、利用者の属性を推定する(s54)。すなわち、画像処理部15が、利用者が撮像されている複数フレームを用いて、この利用者の属性を推定する。
画像処理ユニット11は、利用者の属性を推定した推定結果を改札ユニット1A(または1B)に通知し(s55)、上述した進入検知状態に移行する(s56)。s56で進入検知状態に移行するのは、今回属性を推定した利用者につづいて、改札通路に進入する利用者に対応するためである。
例えば、図12に示すように、時刻T21〜T23で改札ユニット1A側の撮像部10Aを選択していた場合に、時刻T24で、改札ユニット1Aから属性推定要求があると、時刻T21〜T23の間に入力されたフレーム画像を処理して、利用者の属性を事前に推定している。また、画像処理部15は、時刻T24で撮像部10Aから入力されたフレーム画像を処理して利用者の属性を推定する。画像処理ユニット11は、これらの複数のフレーム画像を処理して推定した利用者の属性を推定結果として改札ユニット1Aに送信する。また、時刻T25以降も、撮像部10Aから入力されているフレーム画像を画像処理部15で処理し、撮像部10Bから入力されているフレーム画像を画像記憶部14に記憶する。
また、図13に示すように、時刻T21〜T23で改札ユニット1A側の撮像部10Aを選択していた場合に、時刻T24で、改札ユニット1Bから属性推定要求があると、画像記憶部14に記憶している撮像部10Bが撮像したフレーム画像、および時刻T24で入力された撮像部10Bが撮像したフレーム画像(すなわち、複数のフレーム画像)毎に、画像処理部15で撮像されている利用者の属性を推定する。したがって、この場合も、利用者の属性の推定精度を低下させることがない。また、画像処理部15は、時刻T25以降に、撮像部10Bから入力されるフレーム画像を画像処理部15で処理する。また、画像記憶部は、時刻T24以降に、撮像部10Aから入力されるフレーム画像を画像記憶部14に記憶する。
なお、画像処理ユニット11は、属性推定要求を受信した後に、属性推定モードに以降し、属性推定結果を改札ユニット1A(または1B)に送信した後、進入検知モードに移行する。
このように、この画像処理ユニット11は、改札通路の両側の進入口を撮像しているフレーム画像を処理する画像処理部15を1つにしたので、十分なコストダウンが図れる。これにより、改札通路における利用者の通行方向を双方向とした自動改札機1のコストダウンが図れる。
また、改札通路に進入した利用者の属性を、複数枚のフレーム画像を用いて推定するので、利用者の属性の推定精度の低下も抑えられる。
また、上記説明では、本願発明を駅の改札口に設置される自動改札機1に適用した場合を例にしたが、本願発明は、遊園地やテーマパーク等の施設の出入口に設置されるゲート装置等にも適用できる。
1…自動改札機
1A、1B…改札ユニット
2…制御部
3(3A、3B)…乗車券処理部
4(4A、4B)…利用者検知部
5(5A、5B)…表示部
6(6A、6B)…扉開閉部
7(7A、7B)…報知部
8…通信部
10…撮像部
11…画像処理ユニット
12…制御部
13…画像入力部
14…画像記憶部
15…画像処理部
16…通信部

Claims (6)

  1. 利用者の通行方向を双方向としたゲート装置の通路に進入した利用者の撮像画像を処理する画像処理ユニットであって、
    利用者が前記通路に進入する一方の進入口周辺を撮像エリアとする第1の撮像部、および他方の進入口周辺を撮像エリアとする第2の撮像部が撮像しているフレーム画像が入力される画像入力部と、
    前記第1の撮像部、または前記第2の撮像部の一方を選択する選択部と、
    前記画像入力部に入力された、前記選択部が選択している一方の撮像部が撮像したフレーム画像を処理する画像処理部と、
    前記画像入力部に入力された、前記選択部が選択していない他方の撮像部が撮像したフレーム画像を記憶する画像記憶部と、を備え、
    前記画像処理部は、前記ゲート装置からの指示にしたがって、前記選択部が前記撮像部の選択を切り換えたとき、前記画像記憶部に記憶しているフレーム画像を処理する、画像処理ユニット。
  2. 前記画像記憶部は、前記選択部が選択していない他方の撮像部が最近撮像した所定数のフレーム画像を記憶する、請求項1に記載の画像処理ユニット。
  3. 前記ゲート装置は、前記選択部に対して、前記通路への利用者の進入を検知したとき、この利用者が前記通路に進入した側の前記進入口周辺を撮像エリアとする前記撮像部の選択を指示する、請求項1、または2に記載の画像処理ユニット。
  4. 前記ゲート装置は、前記選択部に対して、前記進入口周辺に配置している媒体受付部で媒体を受け付けたとき、この媒体を受け付けた前記媒体受付部を配置している側の進入口周辺を撮像エリアとする前記撮像部の選択を指示する、請求項1〜3のいずかに記載の画像処理ユニット。
  5. 前記選択部は、前記ゲート装置から選択する前記撮像部が指示されていないとき、前記画像処理部がフレーム画像を処理する毎に、前記第1の撮像部、または前記第2の撮像部の選択を交互に切り換える、請求項1〜4のいずれかに記載の画像処理ユニット。
  6. 前記選択部は、前記ゲート装置から選択する前記撮像部が指示されていないとき、前記画像処理部が処理したフレーム画像に利用者が撮像されていることを検知した場合、このフレーム画像を撮像した側の前記撮像部を選択する、請求項5に記載の画像処理ユニット。
JP2011058108A 2011-03-16 2011-03-16 画像処理ユニット Active JP5348160B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011058108A JP5348160B2 (ja) 2011-03-16 2011-03-16 画像処理ユニット

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011058108A JP5348160B2 (ja) 2011-03-16 2011-03-16 画像処理ユニット

Publications (2)

Publication Number Publication Date
JP2012194768A true JP2012194768A (ja) 2012-10-11
JP5348160B2 JP5348160B2 (ja) 2013-11-20

Family

ID=47086600

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011058108A Active JP5348160B2 (ja) 2011-03-16 2011-03-16 画像処理ユニット

Country Status (1)

Country Link
JP (1) JP5348160B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015114958A (ja) * 2013-12-13 2015-06-22 東芝テック株式会社 顔認識ゲートシステム及び顔認識ゲートシステムプログラム
JP2017084412A (ja) * 2017-01-26 2017-05-18 東芝テック株式会社 顔認識ゲートシステム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05238655A (ja) * 1992-02-28 1993-09-17 Hitachi Ltd エレベータホール待ち客検出装置
JP2007036510A (ja) * 2005-07-26 2007-02-08 Auto Network Gijutsu Kenkyusho:Kk 車載カメラシステム
JP2009009171A (ja) * 2007-06-26 2009-01-15 Omron Corp 通行制御装置、および自動改札機
JP2009294826A (ja) * 2008-06-04 2009-12-17 Omron Corp 通行制御装置
JP2010210265A (ja) * 2009-03-06 2010-09-24 Toshiba Corp 通過検出装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05238655A (ja) * 1992-02-28 1993-09-17 Hitachi Ltd エレベータホール待ち客検出装置
JP2007036510A (ja) * 2005-07-26 2007-02-08 Auto Network Gijutsu Kenkyusho:Kk 車載カメラシステム
JP2009009171A (ja) * 2007-06-26 2009-01-15 Omron Corp 通行制御装置、および自動改札機
JP2009294826A (ja) * 2008-06-04 2009-12-17 Omron Corp 通行制御装置
JP2010210265A (ja) * 2009-03-06 2010-09-24 Toshiba Corp 通過検出装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015114958A (ja) * 2013-12-13 2015-06-22 東芝テック株式会社 顔認識ゲートシステム及び顔認識ゲートシステムプログラム
JP2017084412A (ja) * 2017-01-26 2017-05-18 東芝テック株式会社 顔認識ゲートシステム

Also Published As

Publication number Publication date
JP5348160B2 (ja) 2013-11-20

Similar Documents

Publication Publication Date Title
US20040239776A1 (en) Automatic photographing system
US9394740B2 (en) Failsafe operation for unmanned gatelines
US12106622B2 (en) Visitor management system and visitor management method
JP5260233B2 (ja) 追跡装置、追跡方法及び追跡プログラム
JP5348160B2 (ja) 画像処理ユニット
JP5560786B2 (ja) ゲート装置
JP4591089B2 (ja) 処理未了の記録媒体検知装置
JP2009294907A (ja) 通行制御装置
CN105608921B (zh) 在电子装置中提示公共交通线路的方法和设备
JP5652273B2 (ja) ゲート装置
US20140074521A1 (en) Admission system
US20230342570A1 (en) Information processing apparatus, information processing method, and non-transitory computer-readable storage medium
JP2012194719A (ja) ゲート装置
JP2007058762A (ja) 改札機及び改札方法
JP2006107362A (ja) 人感センサ、無線装置、監視装置、監視システム、監視方法並びにコンピュータプログラム、その記録媒体
JP2005196621A (ja) 自動改札機
JP5407954B2 (ja) ゲート装置
JP5211561B2 (ja) 通行制御装置、および自動改札機
JP2008134895A (ja) 入退場管理ゲート
JP5187004B2 (ja) 通行制御装置
JP2007140790A (ja) 非接触媒体処理装置、および非接触媒体処理システム
JP2010102506A (ja) 自動改札装置
JP2007241389A (ja) 改札機及び改札方法
JP5752541B2 (ja) 自動改札装置および改札システム
JP5752543B2 (ja) 自動改札装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130716

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130723

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130805

R150 Certificate of patent or registration of utility model

Ref document number: 5348160

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150