JP2021114252A - 車内人物特定装置、車内人物特定システム及び車内人物特定方法 - Google Patents
車内人物特定装置、車内人物特定システム及び車内人物特定方法 Download PDFInfo
- Publication number
- JP2021114252A JP2021114252A JP2020007702A JP2020007702A JP2021114252A JP 2021114252 A JP2021114252 A JP 2021114252A JP 2020007702 A JP2020007702 A JP 2020007702A JP 2020007702 A JP2020007702 A JP 2020007702A JP 2021114252 A JP2021114252 A JP 2021114252A
- Authority
- JP
- Japan
- Prior art keywords
- person
- passenger
- user
- vehicle
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000003384 imaging method Methods 0.000 claims description 31
- 238000000605 extraction Methods 0.000 claims description 19
- 239000000284 extract Substances 0.000 claims description 18
- 230000001815 facial effect Effects 0.000 description 34
- 238000004891 communication Methods 0.000 description 14
- 230000000694 effects Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
Images
Landscapes
- Collating Specific Patterns (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【課題】迅速に公共交通機関の乗車人物を特定することができる車内人物特定装置、車内人物特定システム及び車内人物特定方法を提供する。【解決手段】車内人物特定装置Zは、公共交通機関の車内にて撮像された乗車人物の特徴を取得する取得部51と、公共交通機関を利用する利用人物の特徴を利用人物の乗車区間を含む区間データと関連付けて記憶する記憶部6と、乗車人物の特徴と利用人物の特徴とを照合して、乗車人物に該当する利用人物を特定する利用人物照合部7と、を備え、利用人物照合部7は、乗車人物が撮像された場所が含まれる乗車区間を有する区間データと関連付けられた利用人物の特徴と、乗車人物の特徴とを照合する。【選択図】図1
Description
本発明は、公共交通機関の乗車人物を特定する車内人物特定装置、車内人物特定システム及び車内人物特定方法に関する。
公共交通機関としての電車のように、不特定多数の人物が乗車する車内で痴漢や窃盗などの犯罪行為が疑われた場合、犯罪行為を立証したり冤罪を防止したりするためには、車内カメラで犯罪行為の目撃者を特定することは有用である。一方、公共交通機関は不特定多数の人物が利用するため、車内カメラにて撮像された人物を特定することは非常に困難である。
従来、不特定多数の人物が利用する施設において、来場者の行動分析を行う技術が知られている(例えば、特許文献1参照)。特許文献1に記載の技術は、入場口に設置されたカメラにて撮像された複数の顔画像から代表顔画像を選定し、選定された代表顔画像と施設内及び出場口に設置されたカメラにて撮像された複数の顔画像と照合し、来場者の行動を分析するものである。
電車の車内カメラにて撮像された人物を特定するために特許文献1に記載の技術を用いた場合、改札機を通過して入場する人物を撮像して代表顔画像を選定し、車内カメラにて撮像された人物の顔画像と照合することとなる。しかしながら、公共交通機関を利用する人数は膨大であり、照合時間を要してしまう。
そこで、迅速に公共交通機関の乗車人物を特定することができる車内人物特定装置、車内人物特定システム及び車内人物特定方法が望まれている。
本発明に係る車内人物特定装置の特徴構成は、公共交通機関の車内にて撮像された乗車人物の特徴を取得する取得部と、前記公共交通機関を利用する利用人物の特徴を当該利用人物の乗車区間を含む区間データと関連付けて記憶する記憶部と、前記乗車人物の特徴と前記利用人物の特徴とを照合して、前記乗車人物に該当する前記利用人物を特定する照合部と、を備え、前記照合部は、前記乗車人物が撮像された場所が含まれる前記乗車区間を有する前記区間データと関連付けられた前記利用人物の特徴と、前記乗車人物の特徴とを照合する点にある。
本発明に係る車内人物特定システムの特徴構成は、公共交通機関の車内に乗車する乗車人物を撮像する撮像部と、前記撮像部にて撮像された撮像画像に基づいて、前記乗車人物の特徴を抽出する抽出部と、前記公共交通機関を利用する利用人物の特徴を当該利用人物の乗車区間を含む区間データと関連付けて記憶する記憶部と、前記乗車人物の特徴と前記利用人物の特徴とを照合して、前記乗車人物に該当する前記利用人物を特定する照合部と、を備え、前記照合部は、前記乗車人物が撮像された場所が含まれる前記乗車区間を有する前記区間データと関連付けられた前記利用人物の特徴と、前記乗車人物の特徴とを照合する点にある。
本発明に係る車内人物特定方法の特徴は、コンピュータが実行する車内人物特定方法であって、公共交通機関の車内にて撮像された乗車人物の撮像画像を取得する取得ステップと、前記取得ステップにて取得した前記撮像画像に基づいて、前記乗車人物の特徴を抽出する抽出ステップと、前記公共交通機関を利用する利用人物の特徴を当該利用人物の乗車区間を含む区間データと関連付けて記憶する記憶ステップと、前記乗車人物の特徴と前記利用人物の特徴とを照合して、前記乗車人物に該当する前記利用人物を特定する照合ステップと、を含み、前記照合ステップは、前記乗車人物が撮像された場所が含まれる前記乗車区間を有する前記区間データと関連付けられた前記利用人物の特徴と、前記乗車人物の特徴とを照合する点にある。
上記車内人物特定装置、車内人物特定システム及び車内人物特定方法は、公共交通機関を利用する利用人物の特徴と利用区間とを関連付けて登録するため、乗車人物が撮像された場所に基づいて、利用人物を絞り込むことが可能となる。この絞り込まれた利用人物の特徴と乗車人物の特徴とを照合しているので、照合時間を短縮することができる。また、利用人物の特徴と利用区間とが関連付けて登録されているので、利用人物を容易に把握することが可能となる。その結果、撮像された乗車人物を、犯罪行為を立証したり冤罪を防止したりするための証人として特定できる。このように、迅速に公共交通機関の乗車人物を特定することができる車内人物特定装置、車内人物特定システム及び車内人物特定方法を提供できた。
他の特徴構成は、前記照合部は、前記利用人物の乗車履歴に基づいて、前記乗車人物の乗車日と同じ日に乗車した前記利用人物を抽出し、抽出された前記利用人物の特徴と前記乗車人物の特徴とを照合する点にある。
本構成のように、乗車人物の乗車日に乗車した利用人物を抽出すれば、より利用人物を絞り込むことが可能となる。この絞り込まれた利用人物の特徴と乗車人物の特徴とを照合すれば、照合時間をより短縮することができる。
他の特徴構成は、前記照合部は、前記乗車人物が撮像された撮像時刻が乗車時刻と降車時刻との間に含まれる前記利用人物を更に抽出する点にある。
本構成のように、乗車人物が撮像された撮像時刻が乗車時刻と降車時刻との間に含まれる利用人物を抽出すれば、更に利用人物を絞り込むことが可能となる。この絞り込まれた利用人物の特徴と乗車人物の特徴とを照合すれば、照合時間を更に短縮することができる。
他の特徴構成は、前記利用人物は、前記乗車区間の定期券を購入した購入者であり、前記区間データには、前記定期券の乗車可能区間が含まれている点にある。
本構成のように、利用人物が定期券を購入した購入者であれば、利用人物の名前や居所を確実に把握することが可能となる。
他の特徴構成は、前記撮像部は、前記車内のドアから乗車する人物を撮像可能に配置されている点にある。
本構成のように車内のドアから乗車する人物を撮像すれば、混雑した車内で人物の特定が困難な場合であっても、車内のドアから乗車する人物から乗車人物を特定することができる。
以下に、本発明に係る車内人物特定装置、車内人物特定システム及び車内人物特定方法の実施形態について、図面に基づいて説明する。本実施形態では、車内人物特定システムとして、電車(公共交通機関の一例)内で行われた犯罪行為(痴漢等)の目撃者を特定する一例を説明する。ただし、以下の実施形態に限定されることなく、その要旨を逸脱しない範囲内で種々の変形が可能である。
図1に示すように、車内人物特定システムXは、電車が停車可能な複数の駅構内に設置されたサーバである駅サーバYと、複数の駅サーバYと通信可能なメインサーバである本部サーバZ(車内人物特定装置の一例)と、を備えている。駅サーバY及び本部サーバZは、CPUやメモリを中核とするコンピュータで構成されている。
車内人物特定システムXは、電車の各車両内に設置された複数の車内カメラ1(撮像部の一例)で撮像された乗車人物を特定する。本実施形態における車内人物特定システムXとして、車内で行われた痴漢等の犯罪行為を行った容疑者を目撃した目撃者の顔や属性(氏名、住所、メールアドレス及び電話番号等)といった目撃者情報を特定する例を、以下で説明する。この目撃者情報は、車内での犯罪行為を疑われた人の冤罪を立証する目的で使用される。
駅サーバYは、自動改札機(以下、単に「改札機」と言う)近傍に設けられた駅務室に設置されている。駅サーバYは駅係員であれば閲覧可能であるが権限が付与された駅係員のみ操作可能に構成されている。本実施形態における改札機は、切符やICカードに代えて、顔画像等の属性を登録した定期券購入者であれば自由に通過できる、開閉式の改札ゲートを有しない所謂ウォークスルー型改札機を想定している。改札機には、駅構内に入出場するレーンの出口に改札機を通過する通過人物を撮像する改札機カメラWが設けられている(図2参照)。なお、駅サーバYから本部サーバZに通過人物の顔の特徴量を送信し、本部サーバZによる顔認証に基づいて改札ゲートが開閉する顔認証型改札機であっても良い。
改札機を通過する通過人物を撮像する改札機カメラWは、CCDやCMOS等の撮像素子を内蔵した可視光カメラである。改札機カメラWは、改札機等に所定の画角で設置されており、通過人物を撮像して撮像画像を含む動画データを取得する(図2参照)。この動画データには、撮像画像の撮像日時及び撮像した改札機カメラWの属性情報(ID等)も含まれている。動画データは、静止画像の集合体であり、特定の撮像日時における撮像画像を抽出することができる。
本部サーバZは、公共交通機関を運営する交通事業者の統括本部に設置されている。本部サーバZは、権限が付与された社員のみが閲覧,操作可能に構成されている。なお、図1の例では、4つ以上の駅サーバYが本部サーバZと通信可能に構成されており、夫々の駅サーバYは複数の改札機カメラWから撮像画像を取得可能であり、本部サーバZは電車の各車両内に設置された複数の車内カメラ1から撮像画像を取得可能である。
駅サーバYが複数の改札機カメラWから撮像画像を取得する方法としては、有線又は無線通信によりリアルタイムに取得する方法が挙げられる。また、本部サーバZが車内カメラ1から撮像画像を取得する方法としては、必要な日時に対応した撮像画像のみ無線通信で取得する方法等や、車内カメラ1に内蔵された記憶媒体から取得する方法等が挙げられる。
車内の乗車人物を撮像する車内カメラ1は、CCDやCMOS等の撮像素子を内蔵した可視光カメラである。車内カメラ1は、車内のドア上部付近等に所定の画角で設置されており、車内の乗車人物を撮像して撮像画像を含む動画データを取得する(図3参照)。また、車内カメラ1は、停車中の車内のドアから乗車する人物を撮像して撮像画像を含む動画データを取得する。この動画データには、撮像画像の撮像日時及び撮像した車内カメラ1の属性情報(ID等)も含まれている。
図4には、図3に示す走行中の電車内において、車内カメラ1aで撮像された撮像画像の一部拡大画像が示されている。図5には、図3に示す走行中の電車内において、車内カメラ1aと対向する車内カメラ1bで撮像された撮像画像の一部拡大画像が示されている。図6には、停車中の電車内において、車内カメラ1aで車内のドアが撮像された撮像画像の一部拡大画像が示されている。図4の痴漢等の犯罪行為が疑われている容疑者P1の犯罪行為に対する目撃者P2の顔画像を取得したい場合は、図5に示す撮像画像から目撃者P2の顔画像を取得することができる。また、図6に示すように、停車中の車内のドアから乗車した目撃者P2の撮像画像から、目撃者P2の顔画像を取得することができる。
図1に戻り、駅サーバYは、駅記憶部3と駅通信部41と駅照合部42と駅表示部43と出力部44とを備えている。
駅記憶部3はRAMやHDDといったハードウェアで構成されており、要注意人物記憶部31と特定人物記憶部32と通過人物記憶部33とを有している。また、図示しないが、駅記憶部3には、駅照合部42等を機能させる各種プログラムが記憶されている。
要注意人物記憶部31には、本部サーバZから駅通信部41を介して受信した要注意人物の顔画像及び/又は顔の特徴量が記憶されている。ここで、「要注意人物」とは、過去に不正乗車を行った人物や犯罪行為を行った人物等である。また、「特徴量」とは、顔の輪郭、色合い及び表面形状等の特徴情報を含むデータのことである。以下、「人物の顔画像及び/又は顔の特徴量」を総称して、人物の顔データ(人物の特徴の一例)と称する場合がある。
特定人物記憶部32には、本部サーバZから駅通信部41を介して受信した特定人物の顔データが記憶されている。ここで、「特定人物」とは、車内で痴漢等の犯罪行為を目撃した目撃者で、属性(氏名、住所、メールアドレス及び電話番号等)が特定された人物のことである。
通過人物記憶部33には、改札機を通過する(駅構内に入場又は出場する)通過人物を撮像した改札機カメラWの属性情報や撮像日時が紐づけられた、撮像画像を含む動画データ及び/又は顔データが記憶されている。通過人物記憶部33は、短期保存モードとして、全動画データを短期間(例えば2週間)分保存しており、更に長期保存モードとして、通過人物が撮像されていないデータを除いた動画データを長期間(例えば2ヶ月から2週間を減じた期間)分保存している。この通過人物記憶部33に記憶される動画データは、公知の圧縮形式で符号化圧縮されたものであっても良い。
駅通信部41は、改札機カメラWが撮像した通過人物が含まれる撮像画像(動画データ)を有線LAN又は無線LAN等で構成されるネットワークを介して受信するためのインターフェースである。また、駅通信部41は、有線LAN又は無線LAN等で構成されるネットワークを介して本部サーバZと各種情報を送受信するためのインターフェースである。一例として、駅通信部41は、通過人物記憶部33に記憶された通過人物の顔データを本部サーバZに送信し、本部サーバZにて認証された定期券購入者と一致しない通過人物(不正乗車者)の顔データを受信する。
駅照合部42は、動画データ中の撮像画像に含まれる通過人物の顔領域を検出し、検出された顔領域から顔の特徴量を抽出し、当該顔の特徴量と、要注意人物記憶部31に記憶された要注意人物の顔の特徴量又は特定人物記憶部32に記憶された特定人物の顔の特徴量と、を照合し、類似度に基づいて要注意人物や特定人物を認証する。例えば、撮像画像から抽出された顔の特徴量と、テンプレートに含まれる記憶された顔の特徴量とを比較するテンプレートマッチング等の公知の顔認証技術を用いて照合を行い、類似度が所定値(例えば80%)以上の場合に、当該要注意人物又は特定人物に対応する通過人物であると特定する。
なお、駅照合部42は、後述する本部サーバZに記憶された定期券購入者の顔の特徴量を駅サーバYに記憶し、当該定期券購入者の顔の特徴量と通過人物記憶部33に記憶された通過人物の顔の特徴量とを照合しても良い。また、駅照合部42の機能を全て本部サーバZの利用人物照合部7に受け持たせても良い。この場合、駅サーバYは、駅照合部42、要注意人物記憶部31及び特定人物記憶部32を備える必要がない。
駅表示部43は、コンピュータのディスプレイで構成されており、動画データをリアルタイムに表示し、併せて、改札機カメラWで撮像された通過人物が要注意人物や特定人物である場合に、その要注意人物や特定人物の顔画像を示すサムネイルを表示する(図9参照)。サムネイルとは、顔画像を一覧表示するために公知の圧縮方式で符号化圧縮された圧縮画像のことである。このサムネイルには、改札機カメラWの属性情報や撮像日時等が紐づけられている。
出力部44は、駅サーバYが配置された駅務室等に設けられたスピーカーやランプ等で構成されている。出力部44は、改札機カメラWで撮像された通過人物が要注意人物や特定人物である場合に、その旨を駅係員に報知する。
本部サーバZは、記憶部6と通信部51(取得部の一例)と特徴量抽出部5(抽出部の一例)と利用人物照合部7(照合部の一例)と通過人物照合部8と表示部52とを備えている。
記憶部6はRAMやHDDといったハードウェアで構成されており、購入者情報記憶部61と乗車履歴記憶部62と要注意人物記憶部63と特定人物記憶部64とを有している。また、図示しないが、記憶部6には、特徴量抽出部5、利用人物照合部7及び通過人物照合部8等を機能させる各種プログラムが記憶されている。
購入者情報記憶部61には、定期券購入者(利用人物の一例)を予め撮像した撮像画像に含まれる顔画像と、定期券購入者の属性(氏名、住所、メールアドレス及び電話番号等)と、定期券で利用可能な出発駅から到着駅までの定期区間(乗車可能区間)を含む区間データと、が関連付けて記憶されている。この区間データには、出発駅から到着駅までの利用路線における地理的範囲としての定期区間(図7の定期区間参照)と、出発駅から到着駅までの間で電車が停車する駅群と、が含まれている。なお、購入者情報記憶部61は、顔画像と紐づけて顔の特徴量を記憶しても良い。
乗車履歴記憶部62には、定期券購入者の乗車履歴が記憶されている。ここで、「乗車履歴」には、乗車区間、駅構内に入場した(入場用改札機を通過した)入場日時、駅構内から出場した(出場用改札機を通過した)出場日時、改札機カメラWで撮像された顔画像等が含まれている。乗車区間は、定期券購入者が入出場した改札機に設置された改札機カメラWの属性情報から入出場した駅が特定されるため、その入出場した2つの駅に挟まれる区間に存在する駅群を、出発駅から到着駅まで順番に並べたものである(図7の乗車区間参照)。また、入場日時や出場日時は、定期券購入者が入出場した改札機に設置された改札機カメラWの撮像日時である。この入場日及び出場日は乗車日、入場時刻は乗車時刻、出場時刻は降車時刻の一例である。定期券購入者の乗車履歴は、改札機カメラWで撮像された顔画像に含まれる顔の特徴量と、購入者情報記憶部61に記憶された定期券購入者の顔の特徴量と、を通過人物照合部8にて照合し、改札機を通過した人物が定期券購入者であると特定された人物の乗車履歴である。
要注意人物記憶部63には、要注意人物の顔データが記憶されている。「要注意人物」とは、改札機カメラWで撮像された顔画像に含まれる顔の特徴量と、購入者情報記憶部61に記憶された定期券購入者の顔画像に含まれる顔の特徴量と、を通過人物照合部8にて照合して、改札機を通過した人物が適正な定期券購入者であると特定されなかった人物である。ここで、「改札機を通過した人物が適正な定期券購入者であると特定されなかった人物」とは、改札機を通過した人物が定期券購入者でない場合に加えて、追加料金を支払わずに定期区間外で駅構内を入出場した人物も含まれる。
特定人物記憶部64には、特定人物の顔データが記憶されている。ここで、「特定人物」とは、上述したように、車内で痴漢等の犯罪行為を目撃した目撃者であり、人物の属性が特定された人物のことである。特定人物の特定にあたっては、詳細を後述する。
通信部51は、車内カメラ1が撮像した乗車人物が含まれる撮像画像(動画データ)を有線LAN又は無線LAN等で構成されるネットワークを介して受信するためのインターフェースである。また、通信部51は、有線LAN又は無線LAN等で構成されるネットワークを介して駅サーバYと各種情報を送受信するためのインターフェースである。一例として、通信部51は、通過人物記憶部33に記憶された通過人物の顔データを駅サーバYから受信し、当該通過人物の顔データと一致する定期券購入者の顔データを駅サーバYに送信する。
特徴量抽出部5は、車内カメラ1の撮像画像に含まれる特定したい乗車人物の顔領域を検出し、検出された顔領域から顔の特徴量を抽出する。また、特徴量抽出部5は、購入者情報記憶部61に記憶された顔画像を取り出し、当該顔画像から顔の特徴量を抽出する。また、特徴量抽出部5は、通信部51を介して受信した改札機カメラWで撮像された撮像画像に含まれる通過人物の顔領域を検出し、検出された顔領域から顔の特徴量を抽出する。
利用人物照合部7は、利用人物絞込部71と特定部72とを有している。
利用人物絞込部71は、特定したい乗車人物が撮像された場所(乗車人物を撮像した車内カメラ1の撮像地点)から、当該撮像場所が定期区間に含まれる区間データと関連付けられた定期券購入者を絞り込む(抽出する)。この乗車人物が撮像された場所は、特定したい乗車人物が目撃者である場合において犯罪行為が行われた場所であり、例えば、〇〇駅〜△△駅の間となる。つまり、定期区間の抽出にあたって、〇〇駅〜△△駅の間に存在する駅群の一部が定期区間内に含まれていれば、撮像場所が定期区間に含まれる定期券購入者として抽出される。図7の例では、車内カメラ1の撮像場所が駅A〜駅Cの間であれば、ID1、ID2、ID3及びID5の定期券購入者が抽出される。
また、利用人物絞込部71は、定期券購入者の乗車履歴に基づいて、特定したい乗車人物の乗車日と同じ日に乗車した定期券利用者を抽出するのが好ましい。更に、利用人物絞込部71は、定期券購入者の乗車履歴に基づいて、特定したい乗車人物が撮像された撮像時刻が、乗車時刻と降車時刻との間に含まれる定期券購入者を抽出するのが好ましい。図7の例では、車内カメラ1の撮像日と同じ日のリストが挙げられており、車内カメラ1の撮像時刻が8時10分であれば、ID1、ID2の定期券購入者が抽出される。
特定部72は、利用人物絞込部71で抽出された定期券購入者の顔の特徴量と、特定したい乗車人物の顔の特徴量とを照合し、類似度に基づいて乗車人物に該当する定期券購入者を特定する。例えば、車内カメラ1の撮像画像から抽出された顔の特徴量と、利用人物絞込部71で抽出された定期券購入者に関する顔の特徴量とを比較するテンプレートマッチング等の公知の顔認証技術を用いて照合を行い、類似度が所定値(例えば80%)以上の場合に、当該乗車人物に対応する定期券購入者を、特定人物(例えば目撃者)であると特定する。
通過人物照合部8は、改札機カメラWで撮像された撮像画像から特徴量抽出部5により抽出された顔の特徴量と、定期券購入者の顔の特徴量と、を照合し、類似度に基づいて定期券購入者を認証する。
表示部52は、コンピュータのディスプレイで構成されており、要注意人物、特定人物又は定期券購入者の顔画像や乗車履歴等を表示可能に構成されている。
図8を用いて、駅サーバY及び本部サーバZが実行する車内人物特定方法の一例について説明する。まず、本部サーバZが実行する車内人物特定方法から説明する。
定期券購入者は、所定の定期券購入場所にて定期券を購入する際、定期券購入者の属性(氏名、住所、メールアドレス及び電話番号等)と、定期券で利用可能な出発駅及び到着駅とを入力し、所定のカメラにて顔を撮像する。そして、本部サーバZの購入者情報記憶部61は、定期券購入者を予め撮像した撮像画像に含まれる顔画像と、定期券購入者の属性と、定期券で利用可能な出発駅から到着駅までの定期区間を含む区間データと、を関連付けて購入者情報として記憶(取得)する(♯11、記憶ステップ)。この定期券購入者情報の取得は随時実行され、本部サーバZに購入者情報が蓄積される。
通過人物が改札機を通過したときに改札機カメラWで撮像され、この撮像画像に含まれる通過人物の顔データが本部サーバZに送信される。そして、通過人物照合部8は、改札機を通過した通過人物の顔の特徴量と、定期券購入者の顔の特徴量と、を照合し、両特徴量の類似度が所定値(例えば80%)以上の定期購入者が存在する場合、通過人物が当該定期券購入者と一致すると判定する(♯12YES)。一方、両特徴量の類似度が所定値以上の定期購入者が存在しない場合、通過人物が定期券購入者でない不正乗車者であると判定し、要注意人物記憶部63に当該不正乗車者の顔データを記憶させる(♯12NO、♯13)。
♯12の判定の結果、通過人物が当該定期券購入者と一致すると判定された場合(♯12YES)、改札機カメラWのID(乗降駅)及び撮像日時を、定期券購入者の乗車履歴(乗降駅、入退場時刻)として、定期券購入者のIDと紐づけて乗車履歴記憶部62に記憶させる(♯14)。次いで、車内で痴漢等の犯罪行為が発生して目撃者を特定したい場合、その痴漢等の犯罪行為が発生した場所及び日時の情報に基づいて、本部サーバZは車内カメラ1の撮像画像を取得(取得ステップ)し、特徴量抽出部5が当該撮像画像から特定したい目撃者の顔画像に含まれる顔の特徴量を抽出する(♯15、抽出ステップ)。この取得ステップにあたっては、走行中の車内において目撃者の顔画像を取得できない場合、図6に示すように、車内カメラ1が停車中の車内ドアから乗車する人物を撮像した撮像画像から目撃者の顔画像を取得しても良い。この場合、犯罪行為が発生した車両の停車駅にて撮像された撮像画像から目撃者の顔画像を取得することとなる。なお、撮像画像から特定したい目撃者の顔画像の選定にあたっては、犯罪行為の容疑者の周辺(例えば半径1m以内)にいる乗車人物から人為的に選定しても良いし、特徴量抽出部5が複数の顔画像を自動的に選定しても良い。
次いで、利用人物絞込部71は、目撃者を撮像した車内カメラ1の撮像場所から、当該撮像場所が定期区間に含まれる区間データと関連付けられた定期券購入者を絞り込む(♯16)。同時に、利用人物絞込部71は、定期券購入者の乗車履歴に基づいて、目撃者の乗車日と同じ日に乗車しており、且つ、目撃者が撮像された撮像時刻が、乗車時刻と降車時刻との間に含まれる定期券購入者を抽出する(♯16)。例えば、図7に示すように、目撃者の撮像日と同じ日の乗車履歴リストにおいて、目撃者の撮像時刻が8時10分であれば、ID1、ID2の定期券購入者が抽出される。
次いで、特定部72は、利用人物絞込部71で抽出された定期券購入者に関する顔の特徴量と、特定したい目撃者の顔の特徴量と、を照合(照合ステップ)し、両特徴量の類似度が所定値(例えば80%)以上の定期購入者が存在する場合、目撃者が当該定期券購入者と一致すると判定し、特定人物記憶部64に当該定期券購入者の顔データを記憶させる(♯17YES、♯18)。これにより、捜査員等が、目撃者として抽出された定期券購入者に対して連絡を取り、犯罪行為について聞き取りを行うことができる。
続いて、駅サーバYが実行する処理について説明する。
改札機カメラWにて改札機を通過する(駅構内に入場又は出場する)通過人物を撮像し、駅サーバYの通過人物記憶部33に、改札機カメラWの属性情報や撮像日時が紐づけられた、通過人物の顔データを記憶(取得)させる(♯21)。この通過人物の撮像画像の取得は随時実行され、駅サーバYに通過人物の顔データが蓄積される。
本部サーバZの要注意人物記憶部63に不正乗車者の顔データが記憶されている場合(♯13)、駅サーバYは、駅通信部41を介して不正乗車者の顔データを受信し、要注意人物記憶部31に記憶させる(♯22)。そして、駅照合部42は、改札機カメラWで撮像された改札機を通過する通過人物の顔領域を検出し、検出された顔領域から顔の特徴量を抽出し、当該顔の特徴量と、要注意人物記憶部31に記憶された不正乗車者の顔の特徴量と、を照合し、類似度に基づいて不正乗車者を認証する(♯23)。
♯23の認証の結果、改札機を通過した人物が不正乗車者に該当する場合(♯23YES)、出力部44のスピーカーやランプ等にて発報し(♯24)、駅係員が不正乗車者として認証された通過人物に声掛け確認を行う。この発報形態として、図9に示す駅表示部43のように、アラートモニターに不正乗車者が撮像された改札機カメラWのID、要注意人物記憶部31に記憶されている要注意人物の顔画像(登録画像)、改札機カメラWで撮像された通過人物の顔画像(検出画像)及び全体画像を一覧で表示しても良い。♯23の認証の結果、改札機を通過した人物が不正乗車者に該当しない場合(♯23NO)は、発報しない。
本部サーバZにおける♯17の判定の結果、車内カメラ1で撮像された目撃者が定期券購入者と一致しない場合、特定人物記憶部32に当該目撃者の顔データを記憶させる(♯25)。駅照合部42は、改札機カメラWで撮像された通過人物の撮像画像から顔領域を検出し、検出された顔領域から顔の特徴量を抽出し、当該顔の特徴量と、特定人物記憶部32に記憶されている目撃者の顔の特徴量と、を照合し、類似度に基づいて目撃者を認証する(♯26)。この場合、目撃者が定期券購入者と一致しないことから、ウォークスルー型改札機以外の改札機に設けられた改札機カメラWで撮像された通過人物の撮像画像を用いて、駅照合部42が目撃者を認証することが好ましい。なお、本部サーバZの特定人物記憶部64に記憶された目撃者の顔データについても、駅サーバYの特定人物記憶部32に記憶させて、駅照合部42により目撃者の顔データと通過人物の顔データとを照合しても良い。
♯26の認証の結果、改札機を通過した人物が目撃者に該当する場合(♯26YES)、出力部44のスピーカーやランプ等にて発報し(♯27)、駅係員が目撃者に声掛け確認を行う。この発報形態として、図9に示す駅表示部43のように、アラートモニターに目撃者(特定人物)が撮像された改札機カメラWのID、特定人物記憶部32に記憶されている目撃者の顔画像(登録画像)、改札機カメラWで撮像された通過人物の顔画像(検出画像)及び全体画像を一覧で表示しても良い。更に、「〇年〇月〇日の○○時頃に発生した△駅〜□駅間における痴漢行為の目撃者です。お声掛け下さい」と駅表示部43にて強調文字を用いて発報しても良い。♯26の認証の結果、改札機を通過した人物が目撃者に該当しない場合(♯26NO)は、発報しない。
このように、本実施形態では、定期券を購入した定期券購入者の顔データと定期区間とを関連付けて登録するため、目撃者が撮像された場所に基づいて、利用人物絞込部71にて定期券購入者を絞り込む。そして特定部72は、この絞り込まれた定期券購入者の顔の特徴量と目撃者の顔の特徴量とを照合して目撃者を特定するので、照合時間を短縮することができる。また、定期券購入者の顔データと定期区間とが関連付けて登録されているので、定期券購入者の属性(名前や居所等)を容易に把握することが可能となる。その結果、撮像された目撃者を、犯罪行為を立証したり冤罪を防止したりするための証人として特定できる。
また、目撃者の乗車日に乗車した定期券購入者を抽出すると共に、目撃者が撮像された撮像時刻が乗車時刻と降車時刻との間に含まれる定期券購入者を抽出すれば、更に定期券購入者を絞り込むことが可能となる。この絞り込まれた定期券購入者の顔の特徴量と目撃者の顔の特徴量とを照合すれば、照合時間を更に短縮することができる。
一方、図4〜図5で示した走行中の車内において目撃者の顔画像を取得できない場合、車内カメラ1が車内のドアから乗車する人物を撮像可能に構成されているので、図6に示すように、車内カメラ1が停車時に撮像したドア付近の撮像画像から目撃者の顔画像を取得することができる。このように、車内のドアから乗車する人物を撮像すれば、混雑した車内で人物の特定が困難な場合であっても、車内のドアから乗車する人物から目撃者を特定することができる。
[別実施形態]
上述した実施形態において、目撃者が定期券購入者に該当しない場合、本部サーバZの特定人物記憶部64に目撃者を特定人物として記憶することができない。この場合、駅サーバYにて改札機を通過した通過人物と目撃者とを照合する必要があり、目撃者を特定することに手間を要する。
上述した実施形態において、目撃者が定期券購入者に該当しない場合、本部サーバZの特定人物記憶部64に目撃者を特定人物として記憶することができない。この場合、駅サーバYにて改札機を通過した通過人物と目撃者とを照合する必要があり、目撃者を特定することに手間を要する。
そこで、利用人物絞込部71は、定期券購入者の乗車履歴に基づいて、犯罪行為の容疑者(乗車人物の一例)が撮像された場所(容疑者の犯罪行為を撮像した車内カメラ1の撮像地点)から、当該撮像場所が定期区間に含まれる区間データと関連付けられた定期券購入者を絞り込んでも良い。そして、特徴量抽出部5は、始発駅から撮像地点までの車内カメラ1の撮像画像に含まれる乗車人物の顔領域を検出し、検出された顔領域から顔の特徴量を抽出する。この場合、図4に示すように走行中の車内において撮像画像を取得するのではなく、図6に示すように、始発駅から撮像地点の直前の駅までの停車駅において、犯罪行為の容疑者が撮像された車両の車内カメラ1が撮像した撮像画像に基づいて、車内ドアから乗車する人物の顔画像を取得することが好ましい。これにより、顔画像の取得が迅速に行われ、始発駅から撮像地点までに乗車した乗車人物を確実に把握することができる。そして、特定部72は、利用人物絞込部71で抽出された定期券購入者の顔の特徴量と、特徴量抽出部5で抽出された乗車人物の顔の特徴量とを照合し、類似度に基づいて乗車人物に該当する定期券購入者を特定する。これにより、犯罪行為が行われた車両に乗車していた定期券購入者を特定することが可能となり、この特定された定期券購入者を目撃者の可能性が高い特定人物として、特定人物記憶部64に記憶させることができる。
[その他の実施形態]
(1)利用人物は、定期券購入者に限定されず、例えば券売機で切符を購入するときにカメラで撮像された人物であっても良い。この場合、乗車区間を含む区間データとしては、券売機で購入した切符の乗車可能区間となる。また、利用人物は、回数券購入者であっても良く、区間データを取得可能な人物であれば特に限定されない。
(2)定期券購入者の中から目撃者を特定できた場合、特定された定期券購入者の属性(氏名、住所、メールアドレス及び電話番号等)に基づいて連絡しても良いし、特定された定期券購入者が改札機を通過した際に発報して声掛け確認しても良く、特定された定期券購入者等の特定人物に連絡を取る手段は特に限定されない。
(3)駅サーバYに、本部サーバZの機能の一部(例えば通過人物照合部8)を受け持たせても良い。
(4)人物の特徴として、顔の輪郭、色合い及び表面形状等の特徴情報を例示したが、目の虹彩や人物の容姿等の特徴情報であっても良い。
(5)公共交通機関は、電車に限定されず、バスであっても良く、乗車区間を有する公共輸送機関であれば特に限定されない。
(6)上述した車内人物特定装置、車内人物特定システム及び車内人物特定方法は、犯罪行為の目撃者を特定する実施形態を説明したが、定期券利用者の利用割合を調べる目的等で乗車人物を特定しても良い。
(1)利用人物は、定期券購入者に限定されず、例えば券売機で切符を購入するときにカメラで撮像された人物であっても良い。この場合、乗車区間を含む区間データとしては、券売機で購入した切符の乗車可能区間となる。また、利用人物は、回数券購入者であっても良く、区間データを取得可能な人物であれば特に限定されない。
(2)定期券購入者の中から目撃者を特定できた場合、特定された定期券購入者の属性(氏名、住所、メールアドレス及び電話番号等)に基づいて連絡しても良いし、特定された定期券購入者が改札機を通過した際に発報して声掛け確認しても良く、特定された定期券購入者等の特定人物に連絡を取る手段は特に限定されない。
(3)駅サーバYに、本部サーバZの機能の一部(例えば通過人物照合部8)を受け持たせても良い。
(4)人物の特徴として、顔の輪郭、色合い及び表面形状等の特徴情報を例示したが、目の虹彩や人物の容姿等の特徴情報であっても良い。
(5)公共交通機関は、電車に限定されず、バスであっても良く、乗車区間を有する公共輸送機関であれば特に限定されない。
(6)上述した車内人物特定装置、車内人物特定システム及び車内人物特定方法は、犯罪行為の目撃者を特定する実施形態を説明したが、定期券利用者の利用割合を調べる目的等で乗車人物を特定しても良い。
本発明は、公共交通機関の乗車人物を特定する車内人物特定装置、車内人物特定システム及び車内人物特定方法に利用可能である。
1 :車内カメラ(撮像部)
5 :特徴量抽出部(抽出部)
6 :記憶部
7 :利用人物照合部(照合部)
X :車内人物特定システム
Y :駅サーバ
Z :本部サーバ
5 :特徴量抽出部(抽出部)
6 :記憶部
7 :利用人物照合部(照合部)
X :車内人物特定システム
Y :駅サーバ
Z :本部サーバ
Claims (7)
- 公共交通機関の車内にて撮像された乗車人物の特徴を取得する取得部と、
前記公共交通機関を利用する利用人物の特徴を当該利用人物の乗車区間を含む区間データと関連付けて記憶する記憶部と、
前記乗車人物の特徴と前記利用人物の特徴とを照合して、前記乗車人物に該当する前記利用人物を特定する照合部と、を備え、
前記照合部は、前記乗車人物が撮像された場所が含まれる前記乗車区間を有する前記区間データと関連付けられた前記利用人物の特徴と、前記乗車人物の特徴とを照合する車内人物特定装置。 - 前記照合部は、前記利用人物の乗車履歴に基づいて、前記乗車人物の乗車日と同じ日に乗車した前記利用人物を抽出し、抽出された前記利用人物の特徴と前記乗車人物の特徴とを照合する請求項1に記載の車内人物特定装置。
- 前記照合部は、前記乗車人物が撮像された撮像時刻が乗車時刻と降車時刻との間に含まれる前記利用人物を更に抽出する請求項2に記載の車内人物特定装置。
- 前記利用人物は、前記乗車区間の定期券を購入した購入者であり、
前記区間データには、前記定期券の乗車可能区間が含まれている請求項1〜3の何れか一項に記載の車内人物特定装置。 - 公共交通機関の車内に乗車する乗車人物を撮像する撮像部と、
前記撮像部にて撮像された撮像画像に基づいて、前記乗車人物の特徴を抽出する抽出部と、
前記公共交通機関を利用する利用人物の特徴を当該利用人物の乗車区間を含む区間データと関連付けて記憶する記憶部と、
前記乗車人物の特徴と前記利用人物の特徴とを照合して、前記乗車人物に該当する前記利用人物を特定する照合部と、を備え、
前記照合部は、前記乗車人物が撮像された場所が含まれる前記乗車区間を有する前記区間データと関連付けられた前記利用人物の特徴と、前記乗車人物の特徴とを照合する車内人物特定システム。 - 前記撮像部は、前記車内のドアから乗車する人物を撮像可能に配置されている請求項5に記載の車内人物特定システム。
- コンピュータが実行する車内人物特定方法であって、
公共交通機関の車内にて撮像された乗車人物の撮像画像を取得する取得ステップと、
前記取得ステップにて取得した前記撮像画像に基づいて、前記乗車人物の特徴を抽出する抽出ステップと、
前記公共交通機関を利用する利用人物の特徴を当該利用人物の乗車区間を含む区間データと関連付けて記憶する記憶ステップと、
前記乗車人物の特徴と前記利用人物の特徴とを照合して、前記乗車人物に該当する前記利用人物を特定する照合ステップと、を含み、
前記照合ステップは、前記乗車人物が撮像された場所が含まれる前記乗車区間を有する前記区間データと関連付けられた前記利用人物の特徴と、前記乗車人物の特徴とを照合する車内人物特定方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020007702A JP2021114252A (ja) | 2020-01-21 | 2020-01-21 | 車内人物特定装置、車内人物特定システム及び車内人物特定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020007702A JP2021114252A (ja) | 2020-01-21 | 2020-01-21 | 車内人物特定装置、車内人物特定システム及び車内人物特定方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021114252A true JP2021114252A (ja) | 2021-08-05 |
Family
ID=77077075
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020007702A Pending JP2021114252A (ja) | 2020-01-21 | 2020-01-21 | 車内人物特定装置、車内人物特定システム及び車内人物特定方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2021114252A (ja) |
-
2020
- 2020-01-21 JP JP2020007702A patent/JP2021114252A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6145210B1 (ja) | 乗客管理装置、及び乗客管理方法 | |
US9142070B2 (en) | Ensuring the provenance of passengers at a transportation facility | |
JP4937743B2 (ja) | 人の移動監視方法およびシステム | |
EP3588460A1 (en) | Left object detecting system | |
US20040078335A1 (en) | Transportation security system and method that supports international travel | |
JP7114407B2 (ja) | 照合システム | |
US20090140838A1 (en) | Integration of facial recognition into cross channel authentication | |
CN111047718A (zh) | 一种城市轨道交通安检票务融合系统 | |
US20060206351A1 (en) | Registered traveler systems and methods | |
US8374910B1 (en) | Parking management method and automated parking system for vehicles | |
JP2003187352A (ja) | 特定人物検出システム | |
JP2009009231A (ja) | セキュリティ管理システムおよびセキュリティ管理方法 | |
WO2004013722A2 (en) | Automated internet based interactive travel planning and management system | |
US20150054616A1 (en) | System and method for entrance control to secured premises | |
JP7400862B2 (ja) | 情報処理装置 | |
JP5591650B2 (ja) | 駅務システム | |
JP4910717B2 (ja) | 年齢確認装置、年齢確認方法、及び年齢確認プログラム | |
JP4353820B2 (ja) | 不審者監視システム、不審者監視方法、不審者監視プログラム | |
JP2004126829A (ja) | 入場者管理システムおよびプログラム | |
JP2004234429A (ja) | 駐車場管理システム及び駐車場管理方法 | |
JP2004280477A (ja) | 施設利用管理システムおよびプログラム | |
JP2022012950A (ja) | 忘れ物検出システム及び忘れ物検出プログラム | |
JP2021114252A (ja) | 車内人物特定装置、車内人物特定システム及び車内人物特定方法 | |
JP7028145B2 (ja) | 駅務システム、入場駅特定装置、出場駅特定装置、自動改札機、利用駅特定方法、及びプログラム | |
WO2017048148A1 (en) | Monitoring a flow of objects by a sim card detector |