WO2022030558A1 - 人物を検出または追跡する装置、システム、方法及びプログラム - Google Patents

人物を検出または追跡する装置、システム、方法及びプログラム Download PDF

Info

Publication number
WO2022030558A1
WO2022030558A1 PCT/JP2021/028994 JP2021028994W WO2022030558A1 WO 2022030558 A1 WO2022030558 A1 WO 2022030558A1 JP 2021028994 W JP2021028994 W JP 2021028994W WO 2022030558 A1 WO2022030558 A1 WO 2022030558A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
tracking
person
whole body
similarity
Prior art date
Application number
PCT/JP2021/028994
Other languages
English (en)
French (fr)
Inventor
鮎美 松本
哲希 柴田
育弘 宇田
真一 根本
篤 佐藤
知也 児玉
貴司 塩崎
拓磨 宮原
友幸 角守
Original Assignee
エヌ・ティ・ティ・コミュニケーションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2020-135133 external-priority
Priority claimed from JP2020135133A external-priority patent/JP2022030846A/ja
Priority claimed from JP2020135146A external-priority patent/JP2022030852A/ja
Priority claimed from JP2020135151A external-priority patent/JP2022030853A/ja
Application filed by エヌ・ティ・ティ・コミュニケーションズ株式会社 filed Critical エヌ・ティ・ティ・コミュニケーションズ株式会社
Publication of WO2022030558A1 publication Critical patent/WO2022030558A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed circuit television systems, i.e. systems in which the signal is not broadcast

Abstract

この発明の一態様による人物追跡装置においては、画像登録機能部３５３１によって、追跡を行うべき追跡対象者の顔画像及び全身画像を登録したとき、検知／追跡結果判定機能部３４は、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれについて、登録された顔画像に類似する顔画像と、登録された全身画像に類似する全身画像と、の少なくとも一方を検知し、検知アラート出力機能部３５３２は、その検知／追跡結果判定機能部３４が検知した顔画像及び全身画像の少なくとも一方を出力する。

Description

人物を検出または追跡する装置、システム、方法及びプログラム
　この発明の一態様は、人物を検出または追跡する装置、システム、方法及びプログラムに関する。
　従来より、監視カメラによって取得した監視画像から人物の顔を抽出し、その顔の特徴量に基づいて、人物を識別する技術が各種提案されている。更に、近年、顔の特徴量と全身の特徴量とを組み合わせて人物の識別を行うことで、人物識別の精度を向上させる技術も提案されている（例えば、特許文献１参照）。
　また、近年、画像から抽出した人物の顔や全身の特徴量の類似度に基づいて人物認証を行う技術の発展に伴い、その認証技術の利用法が各種提案されている。例えば、特許文献２は、監視カメラによって取得した監視画像から抽出した人物の顔認証結果を、通信インタフェース部を介して監視装置等の外部の端末へ送信し、その画面表示部に表示する技術を提案している。
日本国特開２０１９－０２３７８５号公報 日本国特許第６６２７８９４号公報
　特許文献１に開示されている従来の人物識別技術は、建物や店舗等の入口に設置した監視カメラのように、来訪者の顔画像が確実に取得できる場合は、不審者や得意顧客といった監視対象者の来訪検知を行うために非常に有効な技術である。
　一方、監視対象者の来訪検知があった場合に、警備目的や販売促進目的により、その監視対象者がどこにいるのかリアルタイムで追跡したいという要望がある。
　しかしながら、追跡を行うべき追跡対象者の移動に伴って追跡対象者の顔の向きは様々に変化し、監視カメラが追跡対象者の顔を捕らえられない場合が多発する。このように監視カメラにより顔画像が取得できない場合には、従来の人物識別技術では人物を識別することができず、よって、追跡対象者の追跡を行うことができなかった。
　更に近年、インフルエンザやＣＯＶＩＤ－１９（新型コロナウイルス感染症）等の感染症対策が強く要請されている。従って、そのような感染症が疑われる人物の来訪検知を行うこと、更には、その人物の施設内移動を追跡する技術が望まれている。
　また、特許文献２に開示されている技術では、監視画像を取得する監視カメラの種類や性能により、顔認証の出力結果及び全身照合の出力結果は何れも区々である。そのため、監視装置の画面表示部に表示された認証結果から、監視者はその認証結果の確からしさを認識することが困難である。
　この発明は上記事情に着目してなされたもので、一側面では、監視カメラにより追跡対象者の顔画像が取得できない場合でも、追跡対象者を追跡できる技術を提供しようとするものである。
　この発明は、別の側面では、監視カメラによって取得した監視画像から感染症等に対応する規定の症状に該当する人物を検知し、追跡できる技術を提供しようとするものである。
　この発明は、更に別の側面では、認証結果の確からしさを監視者が容易に認識できる技術を提供しようとするものである。
　上記目的を達成するためにこの発明に係る人物追跡装置の第１の態様は、追跡を行うべき追跡対象者の顔画像及び全身画像を登録する登録部と、複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれについて、前記登録された顔画像に類似する顔画像と、前記登録された全身画像に類似する全身画像と、の少なくとも一方を検知する検知部と、前記検知した顔画像及び全身画像の少なくとも一方を出力する出力部と、を具備するようにしたものである。
　ここで、この発明に係る人物追跡装置の第２の態様は、第１の態様において、前記監視画像のそれぞれから人物の全身画像を抽出し、前記全身画像からその特徴量である全身特徴量及び人物の顔画像を抽出し、前記顔画像からその特徴量である顔特徴量を抽出する抽出部から、前記抽出部が抽出した前記全身画像、前記全身特徴量及び前記顔特徴量を取得し、それら取得した前記全身画像、前記全身特徴量及び前記顔特徴量を前記監視画像と共に蓄積する画像蓄積部を更に具備し、前記登録部は、監視者が操作する監視端末から前記追跡対象者の顔画像の指定を受け付け、その指定された顔画像に対応する前記画像蓄積部に蓄積された前記全身画像、前記全身特徴量及び前記顔特徴量と、前記顔特徴量を抽出した顔画像とを、追跡用全身画像、追跡用全身特徴量、追跡用顔特徴量及び追跡用顔画像として登録し、前記検知部は、前記登録部による登録の時点から前記画像蓄積部に蓄積されていく前記監視画像を照合用画像として、前記照合用画像それぞれについての、前記抽出部が抽出した前記全身特徴量と前記追跡用全身特徴量との類似度である全身画像類似度、及び、前記抽出部が抽出した前記顔特徴量と前記追跡用顔特徴量との類似度である顔画像類似度を算出する類似度算出部から、前記類似度算出部が算出した前記全身画像類似度及び前記顔画像類似度と前記追跡用顔画像及び前記追跡用全身画像とのセットを取得し、前記全身画像類似度及び前記顔画像類似度の少なくとも一方が、対応する閾値よりも大きいか否か判定し、前記閾値よりも大きい場合に、前記抽出部が前記照合用画像から抽出した全身画像である照合用全身画像及び顔画像である照合用顔画像の内の少なくとも一方の類似度に対応する画像と、前記照合用画像としての前記監視画像を取得した前記監視カメラの位置情報とを、前記登録部によって登録された前記追跡用全身画像及び前記追跡用顔画像と共に表示するための表示用結果を作成し、前記出力部は、前記検知部によって作成された前記表示用結果を前記監視端末に送信して、前記監視端末に前記表示用結果を表示させるようにすることができ、この発明に係る人物追跡システムの一態様は、この人物追跡装置の一態様と、前記複数台の監視カメラと、前記監視者が操作する前記監視端末と、前記抽出部及び前記類似度算出部を備える解析部と、を具備するようにしたものである。
　また、この発明に係る人物検出装置の一態様は、互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部が算出した前記類似度のそれぞれに基づいて、前記対象画像を複数の段階に分類するための複数の閾値を、前記類似度算出手法毎に記憶した閾値記憶部と、複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれから抽出した前記対象画像である類似度算出対象者の画像の、前記特定画像である特定人物の画像に対する少なくとも一つの類似度を前記類似度算出部から取得し、前記類似度算出部での前記少なくとも一つの類似度の算出に用いた前記類似度算出手法に対応して前記閾値記憶部に記憶されている前記複数の閾値に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の画像の中から、前記特定人物の画像に類似する画像を検出すると共に、その検出した前記類似度算出対象者の画像が複数の注意段階の何れであるのか検出する検出部と、を具備するようにしたものである。
　この発明に係る人物追跡装置の第３の態様は、この発明に係る人物検出装置の一態様と、前記人物検出装置によって前記出力画面に前記段階表示と共に提示された前記特定人物の画像に類似する複数の前記類似度算出対象者の画像の中から、追跡を行うべき追跡対象者の顔画像の指定を、監視者が操作する監視端末から受け付け、その指定された画像を追跡用画像として登録し、前記登録された前記追跡を行うべき前記追跡対象者の画像である前記追跡用画像を前記特定画像として、前記類似度算出部に、少なくとも二つ以上の前記類似度算出手法を用いて前記類似度算出対象者の画像の前記類似度を少なくとも二つ抽出させる登録部と、前記検出部が、前記類似度算出部から取得した前記少なくとも二つ以上の類似度から検出した前記追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像それぞれを、前記検出部が検出した前記注意段階を示す段階表示と共に提示する追跡出力画面を生成する追跡出力画面生成部と、を具備するようにしたものである。
　或いは、この発明に係る人物追跡装置の第４の態様は、互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部が算出した前記類似度のそれぞれに基づいて、前記対象画像を複数の段階に分類するための複数の閾値を、前記類似度算出手法毎に記憶した閾値記憶部と、監視者が操作する監視端末から指定された追跡を行うべき追跡対象者の画像を、前記特定画像として登録する登録部と、複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれから抽出した前記対象画像である類似度算出対象者の画像の、前記特定画像に対する少なくとも一つの類似度を前記類似度算出部から取得し、前記類似度算出部での前記少なくとも一つの類似度の算出に用いた前記類似度算出手法に対応して前記閾値記憶部に記憶されている前記複数の閾値に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の画像の中から、前記追跡対象者の画像に類似する画像を検出すると共に、その検出した前記類似度算出対象者の画像が複数の注意段階の何れであるのか検出する検出部と、前記検出部が、前記類似度算出部から取得した前記少なくとも二つ以上の類似度から検出した前記追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像を、前記注意段階を示す段階表示と共に提示するための追跡出力画面を生成する追跡出力画面生成部と、を具備するようにしたものである。
　また、この発明に係る人物追跡装置の第５の態様は、複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれに含まれる人物の健康状態に係わる複数種類の状態情報を、前記監視画像のそれぞれから検出する情報抽出部から、前記情報抽出部が検出した前記複数種類の状態情報を取得し、前記取得した前記複数種類の状態情報に基づいて、前記監視画像のそれぞれに含まれる前記人物が規定の症状に該当する特定人物であるか否か判別する判別部と、前記判別部の判別結果に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された人物の画像の内、前記規定の症状に該当する前記特定人物の画像を、追跡対象者画像として登録する登録部と、前記複数台の監視カメラそれぞれで定期的に取得した前記監視画像のそれぞれから、前記登録部によって登録された前記追跡対象者画像に類似する人物の画像を検知する検知部と、前記検知部が検知した前記追跡対象者画像に類似する人物の画像を提示するための追跡出力画面を生成する追跡出力画面生成部と、を具備するようにしたものである。
　この発明の各態様によれば、監視カメラにより追跡対象者の顔画像が取得できない場合でも、追跡対象者を追跡できるようになる。
　また、この発明の各態様によれば、認証結果の確からしさを監視者が容易に認識できるようになる。
　また、この発明の各態様によれば、監視カメラによって取得した監視画像から規定の症状に該当する人物を検知し、追跡できるようになる。
図１は、この発明の第１実施形態に係る人物追跡システムの全体構成の一例を示す図である。 図２は、図１に示した映像解析機能部の構成の一例を示すブロック図である。 図３は、この発明の第１実施形態に係る人物追跡装置としての図１に示したＷｅｂサーバのソフトウェア構成を示すブロック図である。 図４は、図３に示した過去検索用データ記憶部の記憶内容の一例を示す図である。 図５は、図３に示した検知履歴データ記憶部の記憶内容の一例を示す図である。 図６は、図３に示した管理データ記憶部の記憶内容の一例を示す図である。 図７は、図３に示したカメラ情報テーブル記憶部の記載内容の一例を示す図である。 図８は、図３に示した過去検索用データテーブル記憶部の記載内容の一例を示す図である。 図９は、図３に示した検知履歴テーブル記憶部の記載内容の一例を示す図である。 図１０は、図３に示した管理テーブル記憶部の記載内容の一例を示す図である。 図１１は、図３のＷｅｂサーバのハードウェア構成を示すブロック図である。 図１２は、図１に示した監視端末のＷｅｂブラウザに表示される検知アラート画面の一例を示す図である。 図１３は、図３に示した画像登録機能部による画像登録処理の処理手順を示すフローチャートである。 図１４は、図２に示した監視／追跡実行機能部による監視／追跡処理の処理手順を示すフローチャートである。 図１５は、図３に示した検知／追跡結果判定機能部による検知／追跡結果判定処理の処理手順を示すフローチャートである。 図１６は、図１に示した監視端末のＷｅｂブラウザに表示される検知アラート出力画面の一例を示す図である。 図１７は、図１に示した監視端末のＷｅｂブラウザに表示される検知アラート出力画面の別の例を示す図である。 図１８は、この発明の第２実施形態に係る人物検出装置及び人物追跡装置としての図１に示したＷｅｂサーバのソフトウェア構成を示すブロック図である。 図１９は、図１８に示したカメラ情報テーブル記憶部の記載内容の一例を示す図である。 図２０は、図１８に示した追跡テーブル記憶部の記載内容の一例を示す図である。 図２１は、第２実施形態における監視／追跡実行機能部による監視処理の処理手順を示すフローチャートである。 図２２は、第２実施形態における検知／追跡結果判定機能部による検知結果判定処理の処理手順を示すフローチャートである。 図２３は、第２実施形態における検知アラート出力機能部による検知アラート出力処理の処理手順を示すフローチャートである。 図２４は、第２実施形態における監視端末のＷｅｂブラウザに表示される検知アラート画面の一例を示す図である。 図２５は、第２実施形態における監視／追跡実行機能部による追跡処理の処理手順を示すフローチャートである。 図２６は、第２実施形態における検知／追跡結果判定機能部による追跡結果判定処理の処理手順を示すフローチャートである。 図２７は、第２実施形態における追跡アラート出力機能部による追跡アラート出力処理の処理手順の第１の部分を示すフローチャートである。 図２８は、第２実施形態における追跡アラート出力機能部による追跡アラート出力処理の処理手順の第２の部分を示すフローチャートである。 図２９は、第２実施形態における追跡アラート出力機能部による追跡アラート出力処理の処理手順の第３の部分を示すフローチャートである。 図３０は、第２実施形態における監視端末のＷｅｂブラウザに表示される追跡アラート画面の一例を示す図である。 図３１は、第２実施形態における監視端末のＷｅｂブラウザに表示される追跡アラート画面の別の例を示す図である。 図３２は、この発明の第３実施形態に係る人物追跡システムにおける映像解析機能部の構成の一例を示すブロック図である。 図３３は、第３実施形態における過去検索用データ記憶部の記憶内容の一例を示す図である。 図３４は、第３実施形態における検知履歴データ記憶部の記憶内容の一例を示す図である。 図３５は、第３実施形態におけるカメラ情報テーブル記憶部の記載内容の一例を示す図である。 図３６は、第３実施形態における検知履歴テーブル記憶部の記載内容の一例を示す図である。 図３７は、第３実施形態における管理テーブル記憶部の記載内容の一例を示す図である。 図３８は、第３実施形態における追跡テーブル記憶部の記載内容の一例を示す図である。 図３９は、第３実施形態における検知／追跡結果判定機能部による検知結果判定処理の処理手順を示すフローチャートである。 図４０は、第３実施形態における検知アラート出力機能部による検知アラート出力処理の処理手順の第１の部分を示すフローチャートである。 図４１は、第３実施形態における検知アラート出力機能部による検知アラート出力処理の処理手順の第２の部分を示すフローチャートである。 図４２は、第３実施形態における監視端末のＷｅｂブラウザに表示される検知アラート画面の一例を示す図である。 図４３は、第３実施形態における監視端末のＷｅｂブラウザに表示される検知アラート画面の別の例を示す図である。 図４４は、第３実施形態における監視端末のＷｅｂブラウザに表示される追跡アラート画面の一例を示す図である。 図４５は、第３実施形態における監視端末のＷｅｂブラウザに表示される追跡アラート画面の別の例を示す図である。 図４６は、この発明の第４実施形態に係る人物追跡システムにおける検知アラート出力機能部による検知アラート出力処理の処理手順の一部分を示すフローチャートである。
　以下、図面を参照してこの発明に係わる実施形態を説明する。
　［第１実施形態］
　（１）構成
　（１－１）全体構成
　図１は、この発明の第１実施形態に係る人物追跡システム１の全体構成の一例を示す図である。
　人物追跡システム１は、例えば、オフィスビルや百貨店等の複数フロアを有する建物、複数店舗を含む商業施設、等の広い監視範囲を有する大型施設において、特定の人物を追跡するシステムである。
　この人物追跡システム１は、複数台の監視カメラ１０と、各監視カメラ１０に対応して設けられた映像解析機能部２０及びこの発明の第１実施形態に係る人物追跡装置として機能するＷｅｂサーバ３０を備えるサーバ装置ＳＶと、監視端末４０と、を含む。各監視カメラ１０と、サーバ装置ＳＶと、監視端末４０とは、ネットワークＮＥＴを介して接続されている。
　ネットワークＮＥＴは、構内ネットワークであり、例えば、無線ＬＡＮ（Local Area Network）または有線ＬＡＮである。ネットワークＮＥＴは、インターネットのような広域ネットワークであっても良い。
　複数の監視カメラ１０は、互いの撮影範囲が重ならないように或いは一部重なるように、大型施設内に分散配置されたネットワークカメラである。監視カメラ１０は、撮影範囲内の動画像を撮影するビデオカメラであって良く、動画像を構成する各フレーム画像を撮影範囲の監視画像として取得することができる。また監視カメラ１０は、一定のタイムインターバルで静止画像を撮影することで、定期的に監視画像を取得するスチルカメラであっても良い。
　サーバ装置ＳＶ内に配置された複数の映像解析機能部２０のそれぞれは、対応する監視カメラ１０から取得した監視画像に対する様々な解析機能を有している。この映像解析機能部２０が提供する解析機能の詳細については、後述する。なお、映像解析機能部２０は、このようにサーバ装置ＳＶの内部に配置されるのではなく、専用の演算装置やクラウドなどに独立して配置し、ネットワークＮＥＴを介して対応する監視カメラ１０とサーバ装置ＳＶとの間でデータを授受することも可能である。また、映像解析機能部２０は、監視カメラ１０が演算機能を持つのであれば、そのカメラ内部に配置することも可能である。なお、本実施形態では、監視カメラ１０と映像解析機能部２０とを１対１に対応させて構成しているが、一つの映像解析機能部２０が複数台の監視カメラ１０に割り当てられていても良い。
　サーバ装置ＳＶのＷｅｂサーバ３０は、サーバコンピュータによって構成され、機能部として、ファイルサーバ３１、データベース（以下、ＤＢと略記する。）サーバ３２、Ｗｅｂアプリケーション３５、検索用人検知結果保存機能部３３、及び、検知／追跡結果判定機能部３４を含む。これら各機能部の詳細については、後述する。
　監視端末４０は、パーソナルコンピュータ等のコンピュータによって構成され、Ｗｅｂブラウザ４１のプログラムを実行することができる。Ｗｅｂブラウザ４１により、監視端末４０を操作する警備員等の監視者は、Ｗｅｂサーバ３０のＷｅｂアプリケーション３５が提供する人物追跡結果を閲覧することができる。なお、図１では、監視端末４０は、一台のみを示しているが、人物追跡システム１は、監視端末４０を複数含んでも良い。
　また、サーバ装置ＳＶが監視端末４０の機能を備えていても良い。
　（１－２）映像解析機能部２０
　図２は、図１に示した映像解析機能部２０の構成の一例を示すブロック図である。映像解析機能部２０は、画像取得モジュール２１、人検知情報抽出機能部２２及び監視／追跡実行機能部２３を備える。
　画像取得モジュール２１は、ネットワークＮＥＴを介して監視カメラ１０からＲＴＳＰ（Real Time Streaming Protocol）等の所定の通信プロトコルに従って送信されてくるフレーム画像を取得する。画像取得モジュール２１は、取得したフレーム画像をサーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信し、ファイルサーバ３１に蓄積させる。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、画像取得モジュール２１は、取得したフレーム画像をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。また、画像取得モジュール２１は、取得したフレーム画像を人検知情報抽出機能部２２に送る。
　人検知情報抽出機能部２２は、入力された画像から人物の全身画像を抽出し、この全身画像からその特徴量である全身特徴量及び人物の顔画像を抽出し、さらにこの顔画像からその特徴量である顔特徴量を抽出する抽出部として機能する。具体的には、人検知情報抽出機能部２２は、全身検出モジュール２２１、領域追跡モジュール２２２、全身特徴量抽出モジュール２２３、顔検出モジュール２２４及び顔特徴量抽出モジュール２２５を備える。
　全身検出モジュール２２１は、入力画像であるフレーム画像に写っている人物それぞれの全身を検出して、全身画像を抽出する全身画像抽出部である。全身検出モジュール２２１は、例えば、深層学習（Deep Leaning）等の機械学習により事前に学習させた人物の全身画像に基づいて、人物の全身を検出することができる。全身検出モジュール２２１は、抽出した全身画像を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信し、ファイルサーバ３１に蓄積させる。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、全身検出モジュール２２１は、抽出した全身画像をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。また、全身検出モジュール２２１は、抽出した全身画像を、全身特徴量抽出モジュール２２３及び顔検出モジュール２２４にも送る。さらに、全身検出モジュール２２１は、フレーム画像と抽出した全身画像を領域追跡モジュール２２２に送る。
　領域追跡モジュール２２２は、全身検出モジュール２２１から入力されたフレーム画像中の全身画像の領域位置を検出する。
　全身特徴量抽出モジュール２２３は、入力された全身画像から全身特徴量を抽出する全身特徴量抽出部である。全身特徴量は、全身画像に含まれる人物の体の特徴を客観的に数値化したものである。例えば、全身特徴量は、画像から推定される体型、身長、性別、年代、等の人物自体の属性情報を数値化したものとすることができる。全身特徴量抽出モジュール２２３は、深層学習（例えばDeep-person-reid等）等の事前に学習したモデルを用いて、全身特徴量を抽出することができる。また、全身特徴量抽出モジュール２２３は、これら全身特徴量を、ＨＯＧ（Histogram of Oriented Gradients）やＳＩＦＴ（Scaled Invariance Feature Transform）等の局所画像特徴量として算出することも可能である。全身特徴量抽出モジュール２２３は、抽出した全身特徴量を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信し、ファイルサーバ３１に蓄積させる。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、全身特徴量抽出モジュール２２３は、抽出した全身特徴量をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。さらに、全身特徴量抽出モジュール２２３は、抽出した全身特徴量を、監視／追跡実行機能部２３に送る。
　顔検出モジュール２２４は、入力された全身画像から人物の顔を検出して、顔画像を抽出する顔画像抽出部である。顔検出モジュール２２４は、例えば、深層学習等の機械学習により事前に学習させた人物の顔画像に基づいて、人物の顔を検出することができる。顔検出モジュール２２４は、抽出した顔画像を、顔特徴量抽出モジュール２２５に送る。
　顔特徴量抽出モジュール２２５は、入力された顔画像から顔特徴量を抽出する顔特徴量抽出部である。顔特徴量は、顔画像に含まれる人物の顔の特徴を客観的に数値化したものである。顔特徴量抽出モジュール２２５は、例えば、全身特徴量を抽出する全身特徴量抽出モジュール２２３と同様に、深層学習等で事前に学習したモデルを用いて顔特徴量を抽出することができる。また、顔検出モジュール２２４は、これら顔特徴量を、ＨＯＧやＳＩＦＴ等の局所画像特徴量として算出しても良い。顔検出モジュール２２４は、抽出した顔特徴量を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信し、ファイルサーバ３１に蓄積させる。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、顔特徴量抽出モジュール２２５は、抽出した顔特徴量をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。さらに、顔検出モジュール２２４は、抽出した顔特徴量を、監視／追跡実行機能部２３に送る。
　また、監視／追跡実行機能部２３は、二つの入力画像の全身特徴量の類似度である全身画像類似度、及び、二つの入力画像の顔特徴量の類似度である顔画像類似度を算出する類似度算出部として機能する。具体的には、監視／追跡実行機能部２３は、全身照合モジュール２３１及び顔照合モジュール２３２を備える。
　全身照合モジュール２３１は、全身特徴量抽出モジュール２２３から入力された全身特徴量と、監視端末４０から指示された追跡対象の人物の全身特徴量との類似度を算出する。追跡対象の人物の全身特徴量は、例えば、全身特徴量抽出モジュール２２３によって予め抽出されて、Ｗｅｂサーバ３０のファイルサーバ３１に登録されている。全身照合モジュール２３１は、算出した類似度を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信する。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、全身照合モジュール２３１は、算出した類似度をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。
　顔照合モジュール２３２は、顔特徴量抽出モジュール２２５から入力された顔特徴量と、監視端末４０から指示された追跡対象の人物の顔特徴量との類似度を算出する。追跡対象の人物の顔特徴量は、例えば、顔特徴量抽出モジュール２２５によって予め抽出されて、Ｗｅｂサーバ３０のファイルサーバ３１に登録されている。顔照合モジュール２３２は、算出した類似度を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信する。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、顔照合モジュール２３２は、算出した類似度をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。
　（１－３）Ｗｅｂサーバ３０
　図３は、Ｗｅｂサーバ３０のソフトウェア構成を示すブロック図である。前述したように、Ｗｅｂサーバ３０は、機能部として、ファイルサーバ３１、ＤＢサーバ３２、検索用人検知結果保存機能部３３、検知／追跡結果判定機能部３４、及び、Ｗｅｂアプリケーション３５を有する。
　ファイルサーバ３１は、各種のデータファイルを蓄積する。ファイルサーバ３１は、過去検索用データ記憶部３１１、検知履歴データ記憶部３１２及び管理データ記憶部３１３を含むことができる。
　過去検索用データ記憶部３１１は、複数の映像解析機能部２０それぞれで取得したデータである過去検索用データを記憶する。図４は、この過去検索用データ記憶部３１１に記憶される過去検索用データの一例を示す図である。過去検索用データは、各映像解析機能部２０の全身検出モジュール２２１がフレーム画像から検出した全身画像毎に、過去検索用データ記憶部３１１に記憶されることができる。過去検索用データは、映像解析機能部２０の画像取得モジュール２１が取得したフレーム画像３１１１、全身検出モジュール２２１が抽出した全身画像３１１２、全身特徴量抽出モジュール２２３が抽出した全身特徴量３１１３、及び、顔特徴量抽出モジュール２２５が抽出した顔特徴量３１１４を含むことができる。これらフレーム画像３１１１、全身画像３１１２、全身特徴量３１１３及び顔特徴量３１１４は、例えば、同一のパスに記憶したり、ファイル名の一部に同一の文字列を付したりすることで、紐付けることができる。
　検知履歴データ記憶部３１２は、不審者、迷子、得意顧客といった特定の監視対象者として検知された人物それぞれに関するデータである検知履歴データを記憶する。図５は、この検知履歴データ記憶部３１２に記憶される検知された人物の検知履歴データの一例を示す図である。検知履歴データは、検知された人物の顔画像である検知顔画像３１２１と、その検知顔画像３１２１に対応する顔特徴量３１２２と、を含むことができる。これら検知顔画像３１２１と顔特徴量３１２２は、例えば、同一のパスに記憶したり、ファイル名の一部に同一の文字列を付したりすることで、紐付けることができる。
　なお、特に図示はしていないが、監視対象者に関するデータは、ファイルサーバ３１に事前に記憶されている。この監視対象者に関するデータは、例えば、監視端末４０からネットワークＮＥＴを介してＷｅｂサーバ３０に、監視対象者の顔画像を入力することで、ファイルサーバ３１に記憶させることができる。そして、Ｗｅｂサーバ３０が、その顔画像をサーバ内通信やＷｅｂｓｏｃｋｅｔ等により一つの映像解析機能部２０の顔特徴量抽出モジュール２２５に入力することで、当該顔特徴量抽出モジュール２２５から顔特徴量を取得して、ファイルサーバ３１に記憶させることができる。また、ネットワークＮＥＴを介して、過去検索用データ記憶部３１１に記憶されている複数の人物の全身画像３１１２を監視端末４０のＷｅｂブラウザ４１にて閲覧し、監視端末４０から任意の全身画像３１１２を指定することで、その人物を監視対象者として指定することも可能である。この場合、Ｗｅｂサーバ３０は、その指定された全身画像３１１２をサーバ内通信やＷｅｂｓｏｃｋｅｔ等により一つの映像解析機能部２０の顔検出モジュール２２４に入力することで、当該顔検出モジュール２２４から顔画像を取得して、ファイルサーバ３１に監視対象者の顔画像として記憶させることができる。また、Ｗｅｂサーバ３０は、過去検索用データ記憶部３１１に記憶されている、指定された全身画像３１１２を有する過去検索用データから顔特徴量３１１４を取得して、それをファイルサーバ３１に記憶させることができる。
　また、監視対象者に関するデータをファイルサーバ３１に記憶する際、当該監視対象者についての情報を記載した監視対象者テーブルもＤＢサーバ３２に記憶される。この監視対象者テーブルには、当該監視対象者を一意に識別する識別情報である不審者ＩＤ、監視対象者の名称である不審者名称、どのような理由の監視対象者であるかを示す危険度種別、当該監視対象者についての身体的特徴や行動様式、注意点等の説明文、等を記載しておくことができる。
　検知履歴データにおける検知顔画像３１２１は、Ｗｅｂサーバ３０が、例えば、何れかの監視カメラ１０の監視画像から、監視対象者に関するデータとの比較によって監視対象者を検知した時に、検知履歴データ記憶部３１２に記憶させることができる。すなわち、Ｗｅｂサーバ３０は、当該監視画像から取得されて過去検索用データ記憶部３１１に記憶されている全身画像を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等により一つの映像解析機能部２０の顔検出モジュール２２４に入力することで、当該顔検出モジュール２２４から顔画像を取得し、それを検知顔画像３１２１として検知履歴データ記憶部３１２に記憶させることができる。この一つの映像解析機能部２０は、監視対象者が検知された監視画像を取得した監視カメラ１０に対応する映像解析機能部２０であって良い。映像解析機能部２０の顔検出モジュール２２４が、抽出した顔画像をバッファリングしている場合には、Ｗｅｂサーバ３０は、当該顔検出モジュール２２４にバッファリングしている顔画像を要求することで検知顔画像３１２１を取得しても良い。
　管理データ記憶部３１３は、追跡対象者それぞれに関するデータである管理データを記憶する。図６は、この管理データ記憶部３１３に記憶される追跡対象者毎の管理データの一例を示す図である。追跡対象者毎の管理データは、監視端末４０からの指定に応じて管理データ記憶部３１３に記憶されることができる。管理データは、指定された追跡対象者の顔画像である登録顔画像３１３１と、その登録顔画像３１３１から抽出された特徴である顔特徴量３１３２と、追跡対象者の全身画像である登録全身画像３１３３と、その登録全身画像３１３３から抽出された特徴である全身特徴量３１３４と、を含むことができる。これら登録顔画像３１３１、顔特徴量３１３２、登録全身画像３１３３及び全身特徴量３１３４は、例えば、同一のパスに記憶したり、ファイル名の一部に同一の文字列を付したりすることで、紐付けることができる。
　例えば、Ｗｅｂサーバ３０は、監視対象者が検知された際に、検知履歴データ記憶部３１２に記憶したその監視対象に対する検知履歴データにおける検知顔画像３１２１を監視端末４０のＷｅｂブラウザ４１にて監視者に閲覧させる。そして、監視端末４０から当該人物を追跡対象者とする指定が行われると、Ｗｅｂサーバ３０は、検知履歴データにおける検知顔画像３１２１をこの管理データにおける登録顔画像３１３１として記憶させる。さらに、Ｗｅｂサーバ３０は、検知履歴データにおける顔特徴量３１２２を、この管理データにおける顔特徴量３１３２として記憶させることができる。また、Ｗｅｂサーバ３０は、指定された検知履歴データにおける検知顔画像３１２１の元となった全身画像を過去検索用データ記憶部３１１に記憶された過去検索用データから取得すると共に、その全身特徴量も当該過去検索用データから取得し、それらをこの管理データにおける登録全身画像３１３３及び全身特徴量３１３４として記憶させる。
　或いは、Ｗｅｂサーバ３０は、過去検索用データ記憶部３１１に記憶されている複数の人物の全身画像３１１２を監視端末４０のＷｅｂブラウザ４１にて閲覧させ、監視端末４０から任意の全身画像の指定を受けて、その人物を指定の追跡対象者とするようにしても良い。この場合、Ｗｅｂサーバ３０は、その指定された全身画像３１１２をサーバ内通信やＷｅｂｓｏｃｋｅｔ等により一つの映像解析機能部２０の顔検出モジュール２２４に入力することで、当該顔検出モジュール２２４から顔画像を取得して、管理データ記憶部３１３に登録顔画像３１３１として記憶させることができる。またこの場合、顔特徴量３１３２、登録全身画像３１３３及び全身特徴量３１３４については、過去検索用データ記憶部３１１に記憶されているものを取得して記憶させれば良い。或いは、追跡対象者の顔画像及び全身画像についても、監視対象者の顔画像と同様に、監視端末４０からネットワークＮＥＴを介してＷｅｂサーバ３０に入力することで、管理データ記憶部３１３に登録顔画像３１３１及び登録全身画像３１３３として記憶させるようにしても構わない。この場合には、Ｗｅｂサーバ３０は、その入力された顔画像及び全身画像をサーバ内通信やＷｅｂｓｏｃｋｅｔ等により映像解析機能部２０へ送って、顔特徴量３１３２及び全身特徴量３１３４を取得すれば良い。
　ＤＢサーバ３２は、各種のデータテーブルを蓄積する。ＤＢサーバ３２は、カメラ情報テーブル記憶部３２１、過去検索用データテーブル記憶部３２２、検知履歴テーブル記憶部３２３、管理テーブル記憶部３２４、等を含むことができる。
　カメラ情報テーブル記憶部３２１は、複数の監視カメラ１０のそれぞれに対応して設けられ、その対応する監視カメラ１０に関する各種情報が記載されたカメラ情報テーブル３２１１を予め記憶している。図７は、このカメラ情報テーブル記憶部３２１に記憶される、監視カメラ１０毎のカメラ情報テーブル３２１１の記載内容の一例を示す図である。カメラ情報テーブル３２１１には、例えば、カメラＩＤ、カメラ名称、アスペクト比、カメラ位置Ｘ、カメラ位置Ｙ、カメラ角度、顔照合閾値、全身照合閾値、等々が記載されている。
　ここで、カメラＩＤは、対応する監視カメラ１０を一意に識別する識別情報である。カメラ名称は、対応する監視カメラ１０の名称である。これは、対応する監視カメラ１０の大型施設における設置位置と関連付けた名称とすることができる。アスペクト比は対応する監視カメラ１０で取得される画像のアスペクト比である。カメラ位置Ｘ及びカメラ位置Ｙは、対応する監視カメラ１０の設置位置を示す大型施設内のＸＹ座標である。カメラ角度は、対応する監視カメラ１０の設置向きを示している。顔照合閾値及び全身照合閾値は、映像解析機能部２０の全身照合モジュール２３１及び顔照合モジュール２３２が算出した類似度と比較するための閾値である。類似度がこの閾値よりも大きい場合、Ｗｅｂサーバ３０は、対応する監視カメラ１０の監視画像から抽出された人物の全身画像又は顔画像が監視対象者或いは追跡対象者の全身画像又は顔画像であると判定することができる。この顔照合閾値及び全身照合閾値は、監視カメラ１０自体の特性や設置条件に依存するため、監視カメラ１０を設置してから実際の運用が開始されるまでの間に、適切な値に調整される。なお、この顔照合閾値及び全身照合閾値は、監視対象者に対する閾値と追跡対象者に対する閾値とで異なる値として、それぞれ別個にカメラ情報テーブル３２１１に記載しても良い。
　過去検索用データテーブル記憶部３２２は、過去検索用データ記憶部３１１に記憶される過去検索用データのそれぞれに対応して、その過去検索用データに関する各種データが記載された過去検索用データテーブル３２２１を記憶する。Ｗｅｂサーバ３０は、過去検索用データ記憶部３１１に過去検索用データを記憶する際に、この過去検索用データテーブル３２２１を作成して、過去検索用データテーブル記憶部３２２に記憶させる。図８は、この過去検索用データテーブル記憶部３２２に記憶される過去検索用データテーブル３２２１の記載内容の一例を示す図である。過去検索用データテーブル３２２１には、例えば、検知ＩＤ、検知日時、検知カメラＩＤ、トラッキングＩＤ、フレームＩＤ、検知座標情報Ｘ、検知座標情報Ｙ、検知座標情報Ｗｉｄｔｈ、検知座標情報Ｈｅｉｇｈｔ、等々が記載される。
　ここで、検知ＩＤは、映像解析機能部２０の全身検出モジュール２２１が検出したフレーム画像３１１１中の全身画像３１１２毎に振られる識別情報である。検知日時は、全身検出モジュール２２１が当該全身画像３１１２を検出した日時である。検知カメラＩＤは、フレーム画像３１１１を取得した監視カメラ１０のカメラＩＤである。トラッキングＩＤは、複数フレーム画像間で、同一の人物の全身画像３１１２を紐付けるための識別情報である。フレームＩＤはフレーム画像３１１１を一意に識別するための識別情報である。検知座標情報Ｘ、検知座標情報Ｙ、検知座標情報Ｗｉｄｔｈ及び検知座標情報Ｈｅｉｇｈｔは、領域追跡モジュール２２２によって検出されたフレーム画像３１１１中の全身画像３１１２の領域位置を示す情報であり、全身画像３１１２の例えば左上隅のフレーム画像中のＸＹ座標と、そこからの画像幅及び画像高さを示す。
　なお、Ｗｅｂサーバ３０は、過去検索用データテーブル３２２１のトラッキングＩＤを、例えば、以下のようにして付与することができる。Ｗｅｂサーバ３０は、映像解析機能部２０の人検知情報抽出機能部２２から与えられる全身画像の領域位置と、過去検索用データテーブル記憶部３２２に記憶されている当該監視カメラ１０の前フレーム画像における過去検索用データテーブル３２２１それぞれの全身画像の領域位置とを比較して、重複領域等を考慮することで、全身画像の人物の同一性を判別する。同一人物が前フレーム画像に写っていなければ、Ｗｅｂサーバ３０は、新たなトラッキングＩＤを付与する。また、同一人物が前フレーム画像に写っていれば、当該人物の全身画像３１１２に対応する過去検索用データテーブル３２２１よりトラッキングＩＤを引き継ぐ。なお、Ｗｅｂサーバ３０は、全身画像の位置ではなくて、全身特徴量を比較することで、人物の同一性を判別し、新規トラッキングＩＤ付与の要否を決定するようにしても良い。
　検知履歴テーブル記憶部３２３は、検知履歴データ記憶部３１２に記憶される検知履歴データのそれぞれに対応して、その検知履歴データに関する各種データが記載された検知履歴テーブル３２３１を記憶する。Ｗｅｂサーバ３０は、検知履歴データ記憶部３１２に検知履歴データを記憶する際に、この検知履歴テーブル３２３１を作成して、検知履歴テーブル記憶部３２３に記憶させる。図９は、この検知履歴テーブル記憶部３２３に記憶される検知履歴テーブル３２３１の記載内容の一例を示す図である。検知履歴テーブル３２３１には、例えば、検知ＩＤ、検知日時、検知カメラＩＤ、不審者ＩＤ、顔認証スコア、顔左右角度、顔上下角度、トラッキングＩＤ、等々が記載される。
　ここで、検知ＩＤ、検知日時、検知カメラＩＤ及びトラッキングＩＤは、過去検索用データテーブル３２２１について説明した通りである。不審者ＩＤは、図示しない監視対象者テーブルに記載されている、検知された監視対象者の不審者ＩＤである。顔認証スコアは、映像解析機能部２０の全身照合モジュール２３１及び顔照合モジュール２３２が算出した、その監視対象者の画像との類似度である。顔左右角度及び顔上下角度は、対応する検知履歴データの検知顔画像３１２１における顔の向きを示す。
　管理テーブル記憶部３２４は、管理データ記憶部３１３に記憶される管理データのそれぞれに対応して、その管理データに関する各種データが記載された管理テーブル３２４１を記憶する。Ｗｅｂサーバ３０は、管理データ記憶部３１３に管理データを記憶する際に、この管理テーブル３２４１を作成して、管理テーブル記憶部３２４に記憶させる。図１０は、この管理テーブル記憶部３２４に記憶される管理テーブル３２４１の記載内容の一例を示す図である。管理テーブル３２４１には、例えば、不審者ＩＤ、不審者名称、危険度種別、説明文、クエリ顔画像パス、顔特徴量ファイルパス、監視ステータス、ピン留めフラグ、長期間滞在フラグ、等々が記載される。
　ここで、不審者ＩＤ、不審者名称、危険度種別及び説明文は、図示しない監視対象者テーブルに記載されている、追跡対象者として指定された監視対象者についての情報が転記される。クエリ顔画像パス及び顔特徴量ファイルパスは、管理データ記憶部３１３における、管理データの登録顔画像３１３１及び顔特徴量３１３２の保存パスを示す。監視ステータスは、危険度種別以外の、追跡対象者に対して監視端末４０から任意に設定される属性情報である。ピン留めフラグは、追跡対象者として指定された際に、そのことを示すためにセットされるフラグである。長期間滞在フラグは、追跡対象者として指定されていないが、規定の時間以上、当該施設に滞在している場合にセットされるフラグである。すなわち、Ｗｅｂサーバ３０は、監視対象以外ではないが長期間滞在している人物が存在するとき、その人物の顔画像及び顔特徴量も管理データ記憶部３１３に記憶させ、管理テーブル記憶部３２４に管理テーブルを記憶させることができる。これにより、新たな不審者や新規顧客の候補を発見できるようになる。
　検索用人検知結果保存機能部３３及び検知／追跡結果判定機能部３４は、Ｗｅｂサーバのバックエンド機能として提供される。検索用人検知結果保存機能部３３は、映像解析機能部２０の人検知情報抽出機能部２２の各機能部の出力を受けて、過去検索用データテーブル記憶部３２２に記憶する検索用データテーブルを作成する。検知／追跡結果判定機能部３４は、映像解析機能部２０の監視／追跡実行機能部２３の各機能部の出力を受けて、事前に記憶してある監視対象者の顔画像と同一の人物が何れかの監視カメラ１０の監視画像内に現れたことを検知し、検知履歴テーブル記憶部３２３に記憶する検知履歴テーブルを作成すると共に、人検知情報抽出機能部２２の各機能部で抽出した、その人物の検知顔画像３１２１及び顔特徴量３１２２を検知履歴データ記憶部３１２へ記憶させる。検知／追跡結果判定機能部３４は、また、映像解析機能部２０の監視／追跡実行機能部２３の各機能部の出力を受けて、複数の監視カメラ１０の撮影範囲を跨いで追跡対象者を追跡し、その追跡結果を示す表示用結果を生成する。
　Ｗｅｂアプリケーション３５は、監視端末４０のＷｅｂブラウザ４１からの要求に応じて各種処理を行い、その処理結果を示す閲覧用のデータを作成するアプリケーションプログラムである。Ｗｅｂアプリケーション３５は、Ｗｅｂサーバ３０に、ログイン機能部３５１、監視機能部３５２、追跡機能部３５３及び過去検索機能部３５４としての機能を提供する。
　ログイン機能部３５１は、Ｗｅｂブラウザ４１からのログインを受け付けて、認証を行い、正規ユーザに対して当該Ｗｅｂアプリケーション３５が提供する機能の利用を許可する。
　監視機能部３５２は、検知／追跡結果判定機能部３４が監視対象者の顔画像と同一の人物を検知した際にアラートを発生して、Ｗｅｂブラウザ４１に提示する。
　追跡機能部３５３は、検知／追跡結果判定機能部３４が検知した監視対象者の顔画像と同一の人物の顔画像及び全身画像で、複数の監視カメラ１０を跨いでリアルタイムに該当人物を追跡した追跡結果を、Ｗｅｂブラウザ４１に提示する。そのために、追跡機能部３５３は、画像登録機能部３５３１と検知アラート出力機能部３５３２とを含む。画像登録機能部３５３１は、Ｗｅｂブラウザ４１上での監視者から指定操作による、追跡を行うべき追跡対象者の顔画像の指定を受けて、管理データ記憶部３１３に登録顔画像３１３１及び顔特徴量３１３２を記憶させると共に、管理テーブル３２４１を作成して管理テーブル記憶部３２４に記憶させる。検知アラート出力機能部３５３２は、検知／追跡結果判定機能部３４が生成した表示用結果をＷｅｂブラウザ４１に提示する。
　過去検索機能部３５４は、Ｗｅｂブラウザ４１からの時間及び場所の指定を受けて、その指定された時間・場所に来訪した人物を一覧表示し、その中から検索する人物の指定を受け付ける。そして、過去検索機能部３５４は、検知／追跡結果判定機能部３４がその指定された人物の顔画像及び全身画像から、過去検索用データ記憶部３１１に記憶された類似人物を検索した結果をＷｅｂブラウザ４１に提示する。
　図１１は、Ｗｅｂサーバ３０のハードウェア構成を示すブロック図である。Ｗｅｂサーバ３０は、例えば、ＣＰＵ（Central Processing Unit）などのハードウェアプロセッサ３０１Ａ、プログラムメモリ３０１Ｂ、記憶装置３０２及び通信インタフェース装置３０３を備える。プログラムメモリ３０１Ｂ、記憶装置３０２及び通信インタフェース装置３０３は、バス３０４を介してハードウェアプロセッサ３０１Ａに接続されている。
　通信インタフェース装置３０３は、例えば一つ以上の有線または無線の通信インタフェースユニットを含んでおり、ネットワークＮＥＴで使用される通信プロトコルに従い、映像解析機能部２０及び監視端末４０との間で各種情報の送受信を可能にする。
　プログラムメモリ３０１Ｂは、記憶媒体として、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）などの随時書込み及び読出しが可能な不揮発性メモリと、ＲＯＭ（Read Only Memory）等の不揮発性メモリとを組み合わせて使用したもので、ＣＰＵなどのハードウェアプロセッサ３０１Ａが実行することで、この発明の第１実施形態に係る各種制御処理を実行するために必要なプログラムを記憶している。すなわち、ハードウェアプロセッサ３０１Ａは、プログラムメモリ３０１Ｂに記憶されたプログラムを読み出して実行することで、図３に示すような検索用人検知結果保存機能部３３及び検知／追跡結果判定機能部３４として機能することができる。なお、これらの処理機能部は、それぞれ別個のハードウェアプロセッサで実現されても良い。すなわち、Ｗｅｂサーバ３０は、複数のハードウェアプロセッサを備えていても良い。また、これらの処理機能部の少なくとも一部は、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（field-programmable gate array）、ＧＰＵ（Graphics Processing Unit）などの集積回路を含む、他の多様なハードウェア回路の形式で実現されても良い。また、プログラムメモリ３０１Ｂに記憶されるプログラムは、図３に示すようなＷｅｂアプリケーションのブログラムを含むことができる。
　記憶装置３０２は、記憶媒体として、例えば、ＨＤＤまたはＳＳＤなどの随時書込み及び読出しが可能な不揮発性メモリと、ＲＡＭ（Random Access Memory）などの揮発性メモリとを組み合わせて使用したもので、人物追跡処理を行う過程で取得及び作成された各種データを記憶するために用いられる。また、記憶装置３０２には、図３に示すようなファイルサーバ３１及びＤＢサーバ３２を構成することができる。
　（２）動作
　次に、以上のように構成された人物追跡システム１の動作を説明する。
　（２－１）監視動作
　監視端末４０でＷｅｂブラウザ４１が起動されてＷｅｂサーバ３０に対するアクセス操作がなされると、Ｗｅｂサーバ３０は、Ｗｅｂアプリケーション３５が提供するログイン機能部３５１により、認証動作を実施する。そして、正規ユーザであることが確認されたならば、Ｗｅｂサーバ３０は、Ｗｅｂアプリケーション３５が提供する監視機能部３５２により、Ｗｅｂブラウザ４１での閲覧用の監視画面を生成して、Ｗｅｂブラウザ４１へ送信する。監視画面は、以下のようにして生成されることができる。
　複数台の監視カメラ１０はそれぞれ、監視画像を定期的に取得し、取得した監視画像を対応する映像解析機能部２０に入力する。映像解析機能部２０の画像取得モジュール２１は、対応する監視カメラ１０からの監視画像であるフレーム画像を取得し、人検知情報抽出機能部２２は、そのフレーム画像に写っている人物の全身画像、その全身画像の領域位置、全身特徴量及び顔特徴量を抽出する。そして、映像解析機能部２０は、それらフレーム画像、全身画像、全身画像の領域位置、全身特徴量及び顔特徴量をサーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信する。
　Ｗｅｂサーバ３０は、複数の映像解析機能部２０のそれぞれから送信されてきたフレーム画像、全身画像、全身特徴量及び顔特徴量を、過去検索用データとして、ファイルサーバ３１の過去検索用データ記憶部３１１に蓄積する。またこのとき、Ｗｅｂサーバ３０の検索用人検知結果保存機能部３３は、複数の映像解析機能部２０のそれぞれから送信されてきた全身画像の領域位置を含む過去検索用データテーブルを作成して、ＤＢサーバ３２の過去検索用データテーブル記憶部３２２に記憶させる。こうして、各監視カメラ１０での監視画像の取得毎に、過去検索用データ記憶部３１１に過去検索用データが蓄積されていくと共に、過去検索用データテーブル記憶部３２２にそれら過去検索用データに紐付いた過去検索用データテーブルが蓄積されていく。
　監視機能部３５２は、こうして過去検索用データ記憶部３１１に蓄積されていく各監視カメラ１０からのフレーム画像を、一つの画面に並べることで、監視画面を生成することができる。監視端末４０のＷｅｂブラウザ４１に表示されたこの監視画面を閲覧することで、警備員等の監視者は、施設内の各部のリアルタイムな状況を把握することが可能となる。
　一方、各映像解析機能部２０の監視／追跡実行機能部２３は、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりファイルサーバ３１にアクセスし、そこに事前に記憶されている複数の監視対象者それぞれの顔特徴量と、人検知情報抽出機能部２２が抽出した顔特徴量と、の類似度を算出する。そして、監視／追跡実行機能部２３は、算出した各監視対象者の顔特徴量との類似度をサーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信する。
　Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４は、複数の映像解析機能部２０のそれぞれから送信されてきた類似度を、カメラ情報テーブル記憶部３２１の対応する監視カメラ１０のカメラ情報テーブル３２１１に記憶された顔照合閾値及び全身照合閾値と比較する。そして、類似度が閾値よりも大きい場合には、検知／追跡結果判定機能部３４は、人検知情報抽出機能部２２が抽出した顔特徴量を有する人物が監視対象であるとして、検知アラート画面を生成する。さらに、検知／追跡結果判定機能部３４は、検知履歴データ記憶部３１２に検知履歴データとして、検知顔画像３１２１と顔特徴量３１２２を記憶させると共に、検知履歴テーブル３２３１を生成して、それを検知履歴テーブル記憶部３２３に記憶させる。
　監視機能部３５２は、こうして検知／追跡結果判定機能部３４が生成した検知アラート画面を、ネットワークＮＥＴを介してＷｅｂブラウザ４１に送信して、表示させる。Ｗｅｂブラウザ４１では、監視画面の一部に設けられたアラート画面表示領域に、或いは、監視画面とは別のウィンドウを開いて、この検知アラート画面を表示する。
　図１２は、Ｗｅｂブラウザ４１に表示される検知アラート画面４２の一例を示す図である。検知アラート画面４２は、検知された人物毎の検知人物カード４２１を含む。この検知人物カード４２１は、その表示内容として、監視対象者顔画像４２１１、検知顔画像４２１２、注意喚起メッセージ４２１３、検知ＩＤ４２１４、類似度４２１５、検知情報４２１６、及び、追跡開始ボタン４２１７を含むことができる。なお、図１２においては「監視対象顔画像」及び「検知顔画像」として文字で示しているが、実際には、それらは文字ではなく画像であることに注意されたい。
　ここで、監視対象者顔画像４２１１は、ファイルサーバ３１に事前に記憶されていた監視対象者の顔画像であり、検知顔画像４２１２は、その監視対象者であると検知された人物の、検知履歴データ記憶部３１２に記憶された検知顔画像３１２１である。注意喚起メッセージ４２１３は、監視者の注意を促すためのメッセージであり、点滅表示灯の識別表示を行うようにしても良い。検知ＩＤ４２１４は、過去検索用データテーブル３２２１または検知履歴テーブル３２３１から転記される識別情報である。類似度４２１５は、監視対象者の顔画像と検知された人物の顔画像との類似度である。検知情報４２１６は、過去検索用データテーブル３２２１または検知履歴テーブル３２３１における検知カメラＩＤに基づく検出カメラ場所情報と、同じく検知日時に基づく検出日時情報と、を含む。追跡開始ボタン４２１７は、当該人物を追跡する場合に押下されるボタンである。
　なお、この検知人物カード４２１は、監視対象人物として新たに人物が検知される毎に、検知アラート画面４２の最上位に表示されるように、古い検知人物カード４２１が下方にシフトされていく。同一人物については新たな検知人物カード４２１は追加されない。一つの検知人物カード４２１を選択することで、検知履歴データ記憶部３１２及び検知履歴テーブル記憶部３２３に記憶されている当該人物の履歴が一覧表示される。
　（２－２）追跡動作
　監視者が検知アラート画面４２の追跡開始ボタン４２１７の押下操作を行うと、Ｗｅｂサーバ３０は、Ｗｅｂアプリケーション３５が提供する追跡機能部３５３により、映像解析機能部２０及び検知／追跡結果判定機能部３４を利用して、当該人物を追跡した追跡結果を、Ｗｅｂブラウザ４１に提示させていく。この追跡動作は、追跡機能部３５３の画像登録機能部３５３１による画像登録処理と、映像解析機能部２０の監視／追跡実行機能部２３による監視／追跡処理と、検知／追跡結果判定機能部３４による検知／追跡結果判定処理と、追跡機能部３５３の検知アラート出力機能部３５３２による検知アラート出力処理と、を含む。
　図１３は、追跡機能部３５３の画像登録機能部３５３１による画像登録処理の処理手順を示すフローチャートである。画像登録機能部３５３１は、定期的に、例えば監視カメラ１０の監視画像の取得間隔に同期して、このフローチャートに示す処理を実施する。
　画像登録機能部３５３１は、まず、監視端末４０において、監視者によってＷｅｂブラウザ４１に表示される検知アラート画面４２における追跡開始ボタン４２１７の押下操作が行われたか否か判断する（ステップＳ１１）。追跡開始ボタン４２１７の押下操作が行われていないと判断した場合には、画像登録機能部３５３１は、この画像登録処理を終了する。
　これに対して、追跡開始ボタン４２１７の押下操作が行われたと判断した場合には、画像登録機能部３５３１は、その人物の顔画像を追跡用顔画像として取得する（ステップＳ１２）。すなわち、画像登録機能部３５３１は、検知アラート画面４２の検知ＩＤを有する検知履歴テーブル記憶部３２３のトラッキングＩＤに基づいて、検知履歴データ記憶部３１２から検知顔画像３１２１を追跡用顔画像として取得する。例えば、画像登録機能部３５３１は、当該トラッキングＩＤを有する検知履歴テーブル３２３１の内、検知日時が特定時期のもの、例えば最新のものに記載された検知ＩＤで特定される検知顔画像３１２１を取得することができる。特定時期としては、最新に限らず、最古、指定期間の間での最新又は最古、季節（春夏秋冬など）であって良い。或いは、画像登録機能部３５３１は、当該トラッキングＩＤを有する検知履歴テーブル３２３１のそれぞれに記載された検知ＩＤで特定される検知顔画像３１２１を一覧形式で含む選択画面を生成し、それをＷｅｂブラウザ４１に表示させて、監視者に追跡用顔画像とする検知顔画像３１２１を選択させるようにしても良い。そして、画像登録機能部３５３１は、取得した追跡用顔画像を、管理データ記憶部３１３に登録顔画像３１３１として記憶させる。また、画像登録機能部３５３１は、ＤＢサーバ３２に事前に記憶されている図示しない監視対象者テーブルに記載された該当の監視対象者に関する情報に基づいて管理テーブル３２４１を作成し、それを管理テーブル記憶部３２４に記憶させる。管理テーブル３２４１は、管理データ記憶部３１３における登録顔画像３１３１の記憶パスを示すクエリ顔特徴パスを含む。
　そして、画像登録機能部３５３１は、追跡用顔画像として検知履歴データ記憶部３１２から取得された検知顔画像３１２１に対応する全身画像を追跡用全身画像として取得する（ステップＳ１３）。すなわち、画像登録機能部３５３１は、その追跡用顔画像として取得された検知顔画像３１２１について検知履歴テーブル３２３１に記載された検知ＩＤに基づいて、過去検索用データ記憶部３１１から全身画像３１１２を追跡用全身画像として取得する。画像登録機能部３５３１は、この取得した追跡用全身画像を、管理データ記憶部３１３に登録全身画像３１３３として記憶させる。また、画像登録機能部３５３１は、管理テーブル記憶部３２４に記憶されている管理テーブル３２４１に、管理データ記憶部３１３における登録全身画像３１３３の記憶パスを示すクエリ全身特徴パスを追記する。
　さらに、画像登録機能部３５３１は、追跡用顔画像特徴量と追跡用全身画像特徴量を取得する（ステップＳ１４）。すなわち、画像登録機能部３５３１は、上記検知ＩＤに基づいて、検知履歴データ記憶部３１２から顔特徴量３１２２を追跡用顔特徴量として取得し、また、過去検索用データ記憶部３１１から全身特徴量３１１３を追跡用全身特徴量として取得する。画像登録機能部３５３１は、これら取得した追跡用顔特徴量及び追跡用全身特徴量を、管理データ記憶部３１３に顔特徴量３１３２及び全身特徴量３１３４として記憶させる。また、画像登録機能部３５３１は、管理テーブル記憶部３２４に記憶されている管理テーブル３２４１に、それら特徴量記憶パスを示す顔特徴量ファイルパス及び全身特徴量ファイルパスを追記する。
　そして、画像登録機能部３５３１は、管理データ記憶部３１３に記憶された登録顔画像３１３１及び登録全身画像３１３３を追跡用画像として、また、顔特徴量３１３２及び全身特徴量３１３４を追跡用特徴量として、サーバ内通信やＷｅｂｓｏｃｋｅｔ等により、複数の映像解析機能部２０のそれぞれへ送信する（ステップＳ１５）。その後、画像登録機能部３５３１は、この画像登録処理を終了する。
　図１４は、映像解析機能部２０の監視／追跡実行機能部２３による監視／追跡処理の処理手順を示すフローチャートである。監視／追跡実行機能部２３は、定期的に、このフローチャートに示す処理を実施する。このフローチャートに示す処理を実施する時間間隔は、例えば、数秒おきというように、任意の時間間隔とすることができる。或いは、監視／追跡実行機能部２３は、監視カメラ１０の監視画像の取得間隔の整数倍の時間間隔で、このフローチャートに示す処理を実施するようにしても良い。
　監視／追跡実行機能部２３は、まず、Ｗｅｂサーバ３０の画像登録機能部３５３１から追跡用画像と特徴量を受信したか否か判断する（ステップＳ２１）。追跡用画像と特徴量を受信していないと判断した場合には、監視／追跡実行機能部２３は、この監視／追跡処理を終了する。
　これに対して、追跡用画像と特徴量を受信したと判断した場合には、監視／追跡実行機能部２３は、人検知情報抽出機能部２２から、時刻ｔの全身画像とその特徴量とを、照合用全身画像と照合用全身特徴量として取得する（ステップＳ２２）。対応する監視カメラ１０の監視画像に複数の人物の全身画像が含まれる場合には、監視／追跡実行機能部２３は、それぞれの人物について、照合用全身画像と照合用全身特徴量を取得する。
　そして、監視／追跡実行機能部２３は、全身照合モジュール２３１により、人検知情報抽出機能部２２からの照合用全身特徴量のそれぞれについて、画像登録機能部３５３１からの追跡用全身特徴量との類似度である全身画像類似度を算出する（ステップＳ２３）。
　また、監視／追跡実行機能部２３は、人検知情報抽出機能部２２から、時刻ｔの顔画像とその特徴量とを、照合用顔画像と照合用顔特徴量として取得する（ステップＳ２４）。対応する監視カメラ１０の監視画像に複数の人物の顔画像が含まれる場合には、監視／追跡実行機能部２３は、それぞれの人物について、照合用顔画像と照合用顔特徴量を取得する。なお、人物の向きによって、全身画像は抽出できても顔画像が抽出できない場合も有る。よって、上記ステップＳ２２で取得される照合用全身画像の数とこのステップＳ２４で取得する照合用顔画像の数とは一致するとは限らない。また、一人も顔画像が抽出できず、照合用顔画像（及び照合用顔特徴量）が取得されない場合もあり得る。
　そして、監視／追跡実行機能部２３は、顔照合モジュール２３２により、人検知情報抽出機能部２２からの照合用顔特徴量のそれぞれについて、画像登録機能部３５３１からの追跡用顔特徴量との類似度である顔画像類似度を算出する（ステップＳ２５）。
　その後、監視／追跡実行機能部２３は、それら全身画像及び顔画像についての類似度と照合用画像とのセットを、サーバ内通信やＷｅｂｓｏｃｋｅｔ等により、Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４へ送信する（ステップＳ２６）。なお、類似度と照合用画像のセットは、全身画像類似度と照合用全身画像とのセットと顔画像類似度と照合用顔画像とのセットとの両方を含む場合も有れば、顔画像類似度と照合用顔画像とのセットの無い全身画像類似度と照合用全身画像とのセットのみを含む場合もあり得る。
　そして、監視／追跡実行機能部２３は、監視端末４０において、監視者によってＷｅｂブラウザ４１に表示される検知アラート出力画面における追跡停止ボタンの押下操作が行われたか否か判断する（ステップＳ２７）。追跡停止ボタンを有する検知アラート出力画面の詳細については、後述する。追跡停止ボタンの押下操作が行われたと判断した場合には、監視／追跡実行機能部２３は、この監視／追跡処理を終了する。
　また、追跡停止ボタンの押下操作が行われていないと判断した場合には、監視／追跡実行機能部２３は、時刻ｔを「＋１」して、すなわち、次の処理タイミングとなるのを待った後（ステップＳ２８）、上記ステップＳ２２から上記の処理を繰り返す。
　図１５は、Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４による検知／追跡結果判定処理の処理手順を示すフローチャートである。検知／追跡結果判定機能部３４は、定期的に、例えば映像解析機能部２０の監視／追跡実行機能部２３の処理間隔に同期して、このフローチャートに示す処理を実施する。
　検知／追跡結果判定機能部３４は、まず、監視／追跡実行機能部２３から類似度と照合用画像のセットを受信したか否か判断する（ステップＳ３１）。類似度と照合用画像のセットを受信していないと判断した場合には、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。
　これに対して、類似度と照合用画像のセットを受信したと判断した場合には、検知／追跡結果判定機能部３４は、顔照合閾値と全身照合閾値を取得する（ステップＳ３２）。すなわち、検知／追跡結果判定機能部３４は、カメラ情報テーブル記憶部３２１に記憶されている、それら類似度と照合用画像のセットの送信元である映像解析機能部２０に対応する監視カメラ１０についてのカメラ情報テーブル３２１１から、顔照合閾値と全身照合閾値を取得する。
　そして、検知／追跡結果判定機能部３４は、受信した全身画像類似度のそれぞれについて、取得した全身照合閾値と比較し、全身照合閾値よりも大きいか全身画像類似度が有るか否か判断する（ステップＳ３３）。全身照合閾値よりも大きい全身画像類似度が有ると判断した場合には、検知／追跡結果判定機能部３４は、その大きいと判断された全身画像類似度を、上記ステップＳ３１で受信した対応する照合用全身画像と共に、記憶装置３０２の所定の記憶領域に保存しておく（ステップＳ３４）。すなわち、全身照合閾値よりも大きい全身画像類似度を持つ人物は追跡対象者であるとして、その照合用全身画像と全身画像類似度を保存する。
　その後、或いは上記ステップＳ３３において全身照合閾値よりも大きい全身画像類似度が無いと判断した場合、検知／追跡結果判定機能部３４は、受信した顔画像類似度のそれぞれについて、取得した顔照合閾値と比較し、顔照合閾値よりも大きい顔画像類似度が有るか否か判断する（ステップＳ３５）。顔照合閾値よりも大きい顔画像類似度が有ると判断した場合には、検知／追跡結果判定機能部３４は、その大きいと判断された顔画像類似度を、対応する照合用顔画像と共に、記憶装置３０２に保存しておく（ステップＳ３６）。すなわち、顔照合閾値よりも大きい顔画像類似度を持つ人物は追跡対象者であるとして、その照合用顔画像と顔画像類似度を保存する。
　その後、或いは上記ステップＳ３５において顔照合閾値よりも大きい顔画像類似度が無いと判断した場合には、検知／追跡結果判定機能部３４は、さらに、照合用画像と類似度を保存済みであるか否か判断する（ステップＳ３７）。照合用画像と類似度を保存済みではないと判断した場合、すなわち追跡対象者が存在しない場合には、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。
　これに対して、照合用画像と類似度を保存済みであると判断した場合には、検知／追跡結果判定機能部３４は記憶装置３０２の所定の記憶領域に保存されている情報に基づいて、表示用結果を作成する（ステップＳ３８）。そして、検知／追跡結果判定機能部３４は、その作成した表示用結果を、検知アラート出力機能部３５３２へ送信する（ステップＳ３９）。その後、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。
　追跡機能部３５３の検知アラート出力機能部３５３２は、図示しないアラート出力処理により、検知／追跡結果判定機能部３４から送られてきた表示用結果に基づいて、検知アラート出力画面を生成する。そして、検知アラート出力機能部３５３２は、それをネットワークＮＥＴを介して監視端末４０に送信し、Ｗｅｂブラウザ４１に表示させる。Ｗｅｂブラウザ４１では、監視画面の一部に設けられたアラート画面表示領域に、或いは、監視画面とは別のウィンドウを開いて、この検知アラート出力画面を表示する。
　図１６は、Ｗｅｂブラウザ４１に表示される検知アラート出力画面４３の一例を示す図である。検知アラート出力画面４３は、追跡するべき追跡対象者毎に表示される。検知アラート出力画面４３は、追跡対象者情報領域４３１と、経過時間情報領域４３２と、追跡情報カード４３３と、を含む。なお、図１６においては「顔画像」、「全身画像」、「画像＃１」、「画像＃２」、「画像＃３」、「画像＃４」及び「フレーム画像」として文字で示しているが、実際には、それらは文字ではなく画像であることに注意されたい。
　追跡対象者情報領域４３１は、追跡対象に関する情報を表示する領域である。この追跡対象者情報領域４３１は、注意喚起メッセージ４３１１、検知ＩＤ４３１２、登録画像４３１３、検知情報４３１４、過去検知画像４３１５、不審者ＩＤ４３１６、危険度種別４３１７、説明文４３１８、及び、追跡停止ボタン４３１９を含む。
　ここで、注意喚起メッセージ４３１１は、監視者の注意を促すためのメッセージであり、例えば、追跡対象者として指定された監視対象者の危険度種別を表示することができる。この危険度種別は、管理テーブル３２４１から転記されることができる。検知ＩＤ４３１２は、管理テーブル３２４１から転記される識別情報である。登録画像４３１３は、追跡対象者の管理データ記憶部３１３に記憶された登録顔画像３１３１及び登録全身画像３１３３である。検知情報４３１４は、検知履歴テーブル３２３１における検知カメラＩＤに基づく検出カメラ場所情報及び検知日時に基づく検出日時情報を含む。この検知情報４３１４の表示は、新しい監視カメラ１０の監視画像から追跡対象者が検知される毎に、その検出カメラ場所情報と検出日時情報とが追加されていく。過去検知画像４３１５は、過去検索用データ記憶部３１１または検知履歴データ記憶部３１２に記憶されている、当該人物の顔画像または全身画像である。当該人物が過去に検知されたことがない場合には、この過去検知画像４３１５は、ブランクとされる。不審者ＩＤ４３１６、危険度種別４３１７及び説明文４３１８は、管理テーブル３２４１から転記されることができる。追跡停止ボタン４３１９は、当該人物の追跡を終了する場合に押下されるボタンである。
　また、経過時間情報領域４３２は、検知アラート画面４２の追跡開始ボタン４２１７が押下されてからの経過時間を表示する領域である。
　また、追跡情報カード４３３は、検知／追跡結果判定機能部３４の表示用結果を提示するものであり、検知／追跡結果判定機能部３４が表示用結果を出力する毎に、検知アラート出力画面４３の最上位に追加表示されていく。古い追跡情報カード４３３は順次下方にシフトされていく。この追跡情報カード４３３は、その表示内容として、検出日時情報４３３１、検出カメラ場所情報４３３２、検出画像４３３３、画像類似度情報４３３４、及び、検出背景画像４３３５を含む。
　ここで、検出日時情報４３３１は、当該追跡対象者が何れかの監視カメラ１０の監視画像から検知された日時情報である。検出カメラ場所情報４３３２は、その検知した監視カメラＩＤに基づくカメラ場所情報である。検出画像４３３３は、検知されて保存された追跡対象者の照合用顔画像及び／または照合用全身画像である。画像類似度情報４３３４は、検知されて保存された顔画像類似度及び／または全身画像類似度である。検出背景画像４３３５は、照合用顔画像及び／または照合用全身画像を抽出した元の監視画像であるフレーム画像である。このフレーム画像は、過去検索用データ記憶部３１１に記憶されているフレーム画像３１１１が用いられる。
　図１７は、Ｗｅｂブラウザ４１に表示される検知アラート出力画面４３の別の例を示す図である。図１６の検知アラート出力画面４３は、追跡対象者の顔と全身が検知された場合の例を示しているが、図１７は、そこから当該追跡対象者が移動して、別の監視カメラ１０の監視画像により、全身画像から当該追跡対象者が検知された場合を示している。ここでは、顔画像からは追跡対象者が検知されていないので、検出画像４３３３には全身画像のみが表示され、また、画像類似度情報４３３４についても全身画像類似度のみが表示されている。このように、監視カメラ１０により追跡対象者の顔画像が取得できない場合でも、追跡対象者を追跡することができる。
　（２－３）過去検索動作
　追跡機能部３５３による追跡動作は、リアルタイムで追跡対象者を追跡する機能である。一方で、過去に特定の人物が当該施設に来訪していないか調査したい場合が存在する。
　そこで、過去検索機能部３５４は、Ｗｅｂブラウザ４１からの時間及び場所の指定を受けて、過去検索用データテーブル記憶部３２２に記憶されている過去検索用データテーブル３２２１に基づいて、過去検索用データ記憶部３１１からその指定された時間・場所に来訪した人物の全身画像３１１２を抽出する。そして、その抽出した全身画像３１１２を一覧表示した選択画面を作成し、Ｗｅｂブラウザ４１に表示させる。
　Ｗｅｂブラウザ４１から検索する人物の選択指定を受けて、過去検索機能部３５４は、その選択指定された全身画像３１１２を追跡用全身画像とし、また、リアルタイムの監視カメラ１０からの監視画像に代えて指定された時間・場所についての過去検索用データ記憶部３１１に記憶されたフレーム画像３１１１を対象として、追跡機能部３５３と同様の動作を行う。
　これにより、過去検索機能部３５４は、過去検索用データ記憶部３１１に記憶されている過去の来訪者の中から、選択指定された人物に類似する人物を検索し、その結果を検知アラート出力画面４３としてＷｅｂブラウザ４１に表示させることができる。
　（３）効果
　以上詳述したように第１実施形態に係る人物追跡装置では、登録部としての画像登録機能部３５３１によって、追跡を行うべき追跡対象者の顔画像及び全身画像を登録する。そして、検知部としての検知／追跡結果判定機能部３４により、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれについて、登録された顔画像に類似する顔画像と、登録された全身画像に類似する全身画像と、の少なくとも一方を検知し、出力部としての検知アラート出力機能部３５３２によって、その検知した顔画像及び全身画像の少なくとも一方を出力する。よって、監視カメラ１０により追跡対象者の顔画像が取得できない場合でも、全身画像を利用して追跡対象者を追跡できるようになる。
　なお、画像登録機能部３５３１は、監視者が操作する監視端末４０から追跡対象者の顔画像の指定を受け付け、指定された顔画像とその顔画像に対応する全身画像とを、追跡用顔画像及び追跡用全身画像として登録し、検知／追跡結果判定機能部３４は、監視画像のそれぞれについて、登録された追跡用顔画像に類似する顔画像と、登録された追跡用全身画像に類似する全身画像と、の少なくとも一方を検知する。このように、監視端末４０から追跡用顔画像及び追跡用全身画像を容易に登録することができる。登録する画像は、監視画像から抽出したものを指定しても良いし、写真や画像ファイル等を監視端末で読み込むようにしても良い。
　また、人物追跡装置は、更に、監視画像のそれぞれから人物の全身画像を抽出し、全身画像からその特徴量である全身特徴量及び人物の顔画像を抽出し、顔画像からその特徴量である顔特徴量を抽出する抽出部としての人検知情報抽出機能部２２が抽出した、全身画像、全身特徴量及び顔特徴量を、人検知情報抽出機能部２２から取得して、それら取得した全身画像、全身特徴量及び顔特徴量を監視画像と共に蓄積する画像蓄積部であるファイルサーバ３１を備えることができる。また、画像登録機能部３５３１は、監視者が操作する監視端末４０から追跡対象者の顔画像の指定を受け付け、その指定された顔画像に対応するファイルサーバ３１に蓄積された全身画像、全身特徴量及び顔特徴量と、顔特徴量を抽出した顔画像とを、追跡用全身画像、追跡用全身特徴量、追跡用顔特徴量及び追跡用顔画像として登録する。そして、検知／追跡結果判定機能部３４は、画像登録機能部３５３１による登録の時点からファイルサーバ３１に蓄積されていく監視画像を照合用画像として、照合用画像それぞれについての、人検知情報抽出機能部２２が抽出した全身特徴量と追跡用全身特徴量との類似度である全身画像類似度、及び、人検知情報抽出機能部２２が抽出した顔特徴量と追跡用顔特徴量との類似度である顔画像類似度を算出する類似度算出部としての監視／追跡実行機能部２３から、当該監視／追跡実行機能部２３が算出した全身画像類似度及び顔画像類似度と追跡用顔画像及び追跡用全身画像とのセットを取得し、全身画像類似度及び顔画像類似度の少なくとも一方が、対応する閾値よりも大きいか否か判定し、閾値よりも大きい場合に、人検知情報抽出機能部２２が照合用画像から抽出した全身画像である照合用全身画像及び顔画像である照合用顔画像の内の少なくとも一方の類似度に対応する画像と、照合用画像としての監視画像を取得した監視カメラ１０の位置情報とを、画像登録機能部３５３１によって登録された追跡用全身画像及び追跡用顔画像と共に表示するための表示用結果を作成する。検知アラート出力機能部３５３２は、検知／追跡結果判定機能部３４によって作成された表示用結果を監視端末４０に送信して、監視端末４０に表示用結果を表示させる。よって、特徴量の類似度に基づいて、照合用画像から容易に追跡用画像に類似する顔または全身を持つ人物を検知して追跡することができる。
　なお、検知／追跡結果判定機能部３４は、表示用結果に、さらに、全身画像類似度及び顔画像類似度の少なくとも一方の表示を含めるようにしても良い。これにより、検知された人物がどの程度類似した人物であるのかを容易に把握できるようになる。
　また、検知／追跡結果判定機能部３４は、表示用結果に、さらに、照合用画像の表示を含めても良い。これにより、検知された人物の画像を閲覧して、どの程度類似した人物であるのかを容易に把握できるようになる。
　なお、画像登録機能部３５３１は、登録の時点以前にファイルサーバ３１に蓄積されていた追跡対象者についての全身画像、全身特徴量及び顔特徴量の中から、特定時期に蓄積された、例えば最新の、全身画像、全身特徴量及び顔特徴量を、追跡用全身画像、追跡用全身特徴量及び追跡用顔特徴量として登録することができる。これにより、最新の画像に基づいて人物を追跡することができる。
　或いは、画像登録機能部３５３１は、登録の時点以前にファイルサーバ３１に蓄積されていた追跡対象者についての全身画像、全身特徴量及び顔特徴量の中から、登録する追跡用全身画像、追跡用全身特徴量及び追跡用顔特徴量の選択を、監視端末４０から受け付けるようにしても良い。これにより、最も当該人物を把握しやすい画像を指定でき、ご見地の可能性を少なくすることができる。
　また、第１実施形態に係る人物追跡システムは、第１実施形態に係る人物追跡装置と、複数台の監視カメラ１０と、監視者が操作する監視端末４０と、人検知情報抽出機能部２２及び監視／追跡実行機能部２３を備える解析部としての映像解析機能部２０と、を備えることができる。
　なお、人検知情報抽出機能部２２は、監視画像から全身画像を抽出する全身画像抽出部としての全身検出モジュール２２１と、全身検出モジュール２２１によって抽出された全身画像から全身特徴量を抽出する全身特徴量抽出部としての全身特徴量抽出モジュール２２３と、全身検出モジュール２２１によって抽出された全身画像から顔画像を抽出する顔画像抽出部としての顔検出モジュール２２４と、顔検出モジュール２２４によって抽出された顔画像から顔特徴量を抽出する顔特徴量抽出部としての顔特徴量抽出モジュール２２５と、を含むことがでる。このように専用のモジュールを有することで、全身画像、全身特徴量、顔画像及び顔特徴量を容易に抽出することができる。
　また、監視／追跡実行機能部２３は、照合用画像それぞれについての全身特徴量抽出モジュール２２３によって抽出された全身特徴量と画像登録機能部３５３１によって登録された全身特徴量との類似度である全身画像類似度を算出する全身類似度算出部としての全身照合モジュール２３１と、照合用画像のそれぞれについての顔特徴量抽出モジュール２２５によって抽出された顔特徴量と画像登録機能部３５３１によって登録された顔特徴量との類似度である顔画像類似度を算出する顔類似度算出部としての顔照合モジュール２３２と、を含むことができる。このように専用のモジュールを有することで、全身画像類似度と顔画像類似度を容易に算出することができる。
　また、第１実施形態に係る人物追跡方法は、複数台の監視カメラ１０が取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、コンピュータであるＷｅｂサーバ３０が、複数台の監視カメラ１０それぞれで定期的に取得した監視画像を記憶装置であるファイルサーバ３１に蓄積させ、監視画像のそれぞれから人物の全身画像を抽出し、全身画像からその特徴量である全身特徴量及び人物の顔画像を抽出し、顔画像からその特徴量である顔特徴量を抽出する抽出装置である映像解析機能部２０の人検知情報抽出機能部２２から、当該人検知情報抽出機能部２２が抽出した全身画像、全身特徴量及び顔特徴量を取得し、それら取得した前記全身画像、前記全身特徴量及び前記顔特徴量をファイルサーバ３１に蓄積させ、監視者が操作する監視端末４０からの追跡を行うべき追跡対象者の顔画像の指定を受け付け、その指定された顔画像に対応するファイルサーバ３１に蓄積された全身画像、全身特徴量及び顔特徴量と、顔特徴量を抽出した顔画像とを、追跡用全身画像、追跡用全身特徴量、追跡用顔特徴量及び追跡用顔画像として登録し、登録の時点からファイルサーバ３１に蓄積されていく監視画像を照合用画像として、照合用画像それぞれについての、人検知情報抽出機能部２２が抽出した全身特徴量と追跡用全身特徴量との類似度である全身画像類似度、及び、人検知情報抽出機能部２２が抽出した顔特徴量と追跡用顔特徴量との類似度である顔画像類似度を算出する類似度算出装置である映像解析機能部２０の監視／追跡実行機能部２３から、当該監視／追跡実行機能部２３が算出した全身画像類似度及び顔画像類似度と追跡用顔画像及び追跡用全身画像とのセットを取得し、照合用画像それぞれについての全身画像類似度及び顔画像類似度の少なくとも一方が、対応する閾値よりも大きいか否か判定し、全身画像類似度及び顔画像類似度の少なくとも一方が対応する閾値よりも大きい場合に、照合用画像から抽出した全身画像である照合用全身画像及び顔画像である照合用顔画像の内の少なくとも一方の類似度に対応する画像と、照合用画像としての監視画像を取得した監視カメラ１０の位置情報とを、登録された追跡用全身画像及び追跡用顔画像と共に表示するための表示用結果を作成し、作成した表示用結果を監視端末４０に送信して、監視端末４０に表示用結果を表示させるようにしている。よって、監視カメラ１０により追跡対象者の顔画像が取得できない場合でも、全身画像を利用して追跡対象者を追跡できるようになる。
　［第２実施形態］
　第２実施形態では、第１実施形態と同様の構成については同一の符号を付し、その説明を省略する。第２実施形態では、主として、第１実施形態と異なる部分について説明する。
　（１）構成
　（１－１）全体構成
　この発明の第２実施形態に係る人物追跡システム１は、図１を用いて説明した第１の実施形態に係るシステム１と同様であっても良く、その説明を省略する。なお、第２実施形態では、Ｗｅｂサーバ３０は、この発明の第２実施形態に係る人物検出装置及び人物追跡装置として機能する。
　（１－２）映像解析機能部２０
　映像解析機能部２０についても、図２を用いて説明した第１実施形態における映像解析機能部２０と同様であって良く、その説明を省略する。
　（１－３）Ｗｅｂサーバ３０
　図１８は、第２実施形態におけるＷｅｂサーバ３０のソフトウェア構成を示すブロック図である。第２実施形態では、Ｗｅｂサーバ３０は、図３を参照して説明した第１実施形態におけるＷｅｂサーバ３０と以下の点が異なっている。なお、ハードウェア構成は、図１１を参照して第１実施形態で説明した通りである。
　ＤＢサーバ３２は、第１実施形態と同様に、カメラ情報テーブル記憶部３２１、過去検索用データテーブル記憶部３２２、検知履歴テーブル記憶部３２３、管理テーブル記憶部３２４、等を含むと共に、更に、追跡テーブル記憶部３２５を含むことができる。
　図１９は、カメラ情報テーブル記憶部３２１に記憶される、監視カメラ１０毎のカメラ情報テーブル３２１１の記載内容の一例を示す図である。第２実施形態におけるカメラ情報テーブル３２１１には、第１実施形態における顔照合閾値及び全身照合閾値に代えて、顔照合閾値１～３及び全身照合閾値１～３が記載されている。
　顔照合閾値１～３及び全身照合閾値１～３は、映像解析機能部２０の全身照合モジュール２３１及び顔照合モジュール２３２が算出した類似度と比較するための閾値である。顔照合閾値１は、対応する監視カメラ１０の監視画像から抽出された人物の顔画像が監視対象者或いは追跡対象者の顔画像であるか否か分類するための顔画像類似度に対応する第１の閾値である。顔照合モジュール２３２が算出した顔画像類似度がこの第１の閾値である顔照合閾値１よりも大きい場合、Ｗｅｂサーバ３０は、対応する監視カメラ１０の監視画像から抽出された人物の顔画像が監視対象者或いは追跡対象者の顔画像であると判定することができる。顔照合閾値２及び３は、顔照合閾値１よりも大きい顔画像類似度に対応し、抽出された人物の顔画像が監視対象者或いは追跡対象者の顔画像である場合に、その顔画像を複数の段階に分類するための第２の閾値である。すなわち、これら閾値の大きさは、［顔照合閾値１＜顔照合閾値２＜顔照合閾値３」の関係を有する。同様に、全身照合閾値１は、対応する監視カメラ１０の監視画像から抽出された人物の全身画像が監視対象者或いは追跡対象者の全身画像であるか否か分類するための全身画像類似度に対応する第１の閾値である。全身照合モジュール２３１が算出した全身画像類似度がこの全身照合閾値１よりも大きい場合、Ｗｅｂサーバ３０は、対応する監視カメラ１０の監視画像から抽出された人物の全身画像が監視対象者或いは追跡対象者の全身画像であると判定することができる。全身照合閾値２及び３は、全身照合閾値１よりも大きい全身画像類似度に対応し、抽出された人物の全身画像が監視対象者或いは追跡対象者の全身画像である場合に、その全身画像を複数の段階に分類するための第２の閾値である。すなわち、これら閾値の大きさは、［全身照合閾値１＜全身照合閾値２＜全身照合閾値３」の関係を有する。
　各閾値の値は、概して、類似度を算出する映像解析機能部２０の監視／追跡実行機能部２３における顔照合モジュール２３２が用いる照合モデルと全身照合モジュール２３１が用いる照合モデルとによって決まる。各閾値は、監視カメラ１０自体の種類、性能、設置条件等に依存するため、監視カメラ１０を設置してから実際の運用が開始されるまでの間に、適切な値に調整されて、カメラ情報テーブル３２１１に記載される。なお、この顔照合閾値１～３及び全身照合閾値１～３は、監視対象者に対する閾値と追跡対象者に対する閾値とで異なる値として、それぞれ別個にカメラ情報テーブル３２１１に記載しても良い。また、それぞれの閾値は３段階に限定するものではないことは勿論である。すなわち、第２の閾値は、少なくとも一つあれば良い。
　また、検知履歴テーブル記憶部３２３が記憶する検知履歴テーブル３２３１に記載される顔認証スコアは、映像解析機能部２０の顔照合モジュール２３２が算出した、その監視対象者の顔画像との類似度である。この類似度は、顔照合モジュール２３２が算出した類似度の実数値が記憶されるが、後述するようにＷｅｂブラウザ４１での検知アラート画面の表示のために、３段階の顔画像類似度ラベルＩＤに書き換えられることができる。
　追跡テーブル記憶部３２５は、映像解析機能部２０の全身照合モジュール２３１又は顔照合モジュール２３２が算出した全身画像類似度又は顔画像類似度からＷｅｂサーバ３０によって追跡対象者の全身画像又は顔画像であると判定された、何れかの監視カメラ１０の監視画像から抽出された人物の類似度が記載された追跡テーブルを記憶する。図２０は、この追跡テーブル記憶部３２５に記憶される追跡テーブル３２５１の記載内容の一例を示す図である。追跡テーブル３２５１は、追跡対象者の不審者ＩＤ毎に、検知ＩＤ、全身画像類似度及び顔画像類似度でなるレコードを含み、各レコードはＷｅｂサーバ３０が追跡対象者の全身画像又は顔画像であると判定する毎に追加されていく。全身画像類似度及び顔画像類似度は、映像解析機能部２０の全身照合モジュール２３１及び顔照合モジュール２３２が算出した類似度の実数値が記憶されるが、後述するようにＷｅｂブラウザ４１での追跡アラート画面の表示のために、３段階の全身画像類似度ラベルＩＤ及び顔画像類似度ラベルＩＤに書き換えられることができる。
　また、Ｗｅｂサーバのバックエンド機能として提供される検知／追跡結果判定機能部３４は、第２実施形態では、映像解析機能部２０の監視／追跡実行機能部２３の各機能部の出力を受けて、監視者から指定された追跡対象者の全身画像及び／又は顔画像と同一の人物が何れかの監視カメラ１０の監視画像内に現れたことを検知する。そして、その検知に応じて、検知／追跡結果判定機能部３４は、追跡テーブル記憶部３２５に記憶している当該追跡対象者の追跡テーブルにレコードを追加していく。
　また、監視機能部３５２は、検知／追跡結果判定機能部３４が監視対象者の顔画像と同一の人物を検知した際に、アラートを発生して、Ｗｅｂブラウザ４１に提示する。そのために、第２実施形態においては、監視機能部３５２は、Ｗｅｂブラウザ４１に提示するための検知アラート画面を生成する検知アラート出力機能部３５２１を含む。検知アラート画面は、監視対象者に類似すると検知された人物の画像を、類似度に基づく注意段階を示す段階表示と共に提示するための出力画面である。
　また、追跡機能部３５３は、検知／追跡結果判定機能部３４が検知した監視対象者の顔画像と同一の人物の顔画像及び全身画像で、複数の監視カメラ１０を跨いでリアルタイムに該当人物を追跡した追跡結果を、Ｗｅｂブラウザ４１に提示する。そのために、第２実施形態における追跡機能部３５３は、画像登録機能部３５３１を含むと共に、第１実施形態における検知アラート出力機能部３５３２に代えて、追跡アラート出力機能部３５３３を含む。画像登録機能部３５３１は、Ｗｅｂブラウザ４１上での監視者から指定操作による、追跡を行うべき追跡対象者の顔画像の指定を受けて、管理データ記憶部３１３に登録顔画像３１３１及び顔特徴量３１３２を記憶させると共に、管理テーブル３２４１を作成して管理テーブル記憶部３２４に記憶させる。追跡アラート出力機能部３５３３は、検知／追跡結果判定機能部３４が追跡対象者の全身画像及び／又は顔画像と同一の人物を検知した際に、追跡対象者に類似すると検知された人物の画像を、類似度に基づく注意段階を示す段階表示と共に提示するための出力画面である追跡アラート画面をＷｅｂブラウザ４１に提示する。
　（２）動作
　（２－１）監視動作
　第２実施形態に係る人物追跡システム１では、第１実施形態で説明したような各部のリアルタイムな状況監視と並行して、監視対象者の来訪検知動作が行われる。この監視対象者来訪検知動作は、各映像解析機能部２０の監視／追跡実行機能部２３による監視処理と、検知／追跡結果判定機能部３４による検知結果判定処理と、監視機能部３５２の検知アラート出力機能部３５２１による検知アラート出力処理と、を含む。
　図２１は、監視／追跡実行機能部２３による監視処理の処理手順を示すフローチャートである。監視／追跡実行機能部２３は、例えば、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０の監視機能部３５２から監視対象者の更新が報告される毎に、このフローチャートに示す処理を実施する。
　監視／追跡実行機能部２３は、まず、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０のファイルサーバ３１にアクセスして、ファイルサーバ３１に事前に記憶されている複数の監視対象者それぞれの顔特徴量である監視用顔特徴量を取得する（ステップＳ１０１）。
　その後、監視／追跡実行機能部２３は、人検知情報抽出機能部２２から、時刻ｔの顔画像とその特徴量とを、照合用顔画像と照合用顔特徴量として取得する（ステップＳ１０２）。対応する監視カメラ１０の監視画像に複数の人物の全身画像が含まれる場合には、監視／追跡実行機能部２３は、それぞれの人物について、照合用顔画像と照合用顔特徴量を取得する。
　そして、監視／追跡実行機能部２３は、顔照合モジュール２３２により、人検知情報抽出機能部２２からの照合用顔特徴量のそれぞれについて、監視用顔特徴量との類似度である顔画像類似度を算出する（ステップＳ１０３）。
　その後、監視／追跡実行機能部２３は、算出した各監視対象者の顔画像類似度と照合用顔画像とのセットを、サーバ内通信やＷｅｂｓｏｃｋｅｔ等により、Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４へ送信する（ステップＳ１０４）。
　そして、監視／追跡実行機能部２３は、時刻ｔに時間間隔ｔ１加えてから、すなわち、次の処理時刻に更新した後（ステップＳ１０５）、上記ステップＳ１０２から上記の処理を繰り返す。ここで、時間間隔ｔ１は、例えば、数秒というように、任意の時間間隔とすることができる。或いは、時間間隔ｔ１は、監視カメラ１０の監視画像の取得間隔の整数倍の時間間隔としても良い。
　図２２は、Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４による検知結果判定処理の処理手順を示すフローチャートである。検知／追跡結果判定機能部３４は、定期的に、例えば映像解析機能部２０の監視／追跡実行機能部２３における時間間隔ｔ１おきに、このフローチャートに示す処理を実施することができる。
　検知／追跡結果判定機能部３４は、まず、監視／追跡実行機能部２３から類似度と照合用顔画像のセットを受信したか否か判断する（ステップＳ２０１）。類似度と照合用画像のセットを受信していないと判断した場合には、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。
　これに対して、類似度と照合用顔画像のセットを受信したと判断した場合には、検知／追跡結果判定機能部３４は、顔照合閾値１を取得する（ステップＳ２０２）。すなわち、検知／追跡結果判定機能部３４は、カメラ情報テーブル記憶部３２１に記憶されている、それら類似度と照合用顔画像のセットの送信元である映像解析機能部２０に対応する監視カメラ１０についてのカメラ情報テーブル３２１１から、顔照合閾値１を取得する。
　そして、検知／追跡結果判定機能部３４は、受信した顔画像類似度のそれぞれについて、取得した顔照合閾値１と比較し、顔照合閾値１よりも大きい顔画像類似度が有るか否か判断する（ステップＳ２０３）。顔照合閾値１よりも大きい顔画像類似度が無いと判断した場合には、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。
　これに対して、顔照合閾値１よりも大きい顔画像類似度が有ると判断した場合には、検知／追跡結果判定機能部３４は、その顔特徴量を有する人物は監視対象者であると判別する。よってこの場合には、検知／追跡結果判定機能部３４は、検知履歴データ記憶部３１２に検知履歴データとして検知顔画像３１２１と顔特徴量３１２２を記憶させると共に、検知履歴テーブル３２３１を生成して、それを検知履歴テーブル記憶部３２３に記憶させる（ステップＳ２０４）。この生成した検知履歴テーブル３２３１の顔認証スコアには、顔照合閾値１よりも大きい値の顔画像類似度が記載されることとなる。そしてその後、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。
　図２３は、監視機能部３５２の検知アラート出力機能部３５２１による検知アラート出力処理の処理手順を示すフローチャートである。検知アラート出力機能部３５２１は、定期的に、例えば映像解析機能部２０の監視／追跡実行機能部２３における時間間隔ｔ１おきに、このフローチャートに示す処理を実施する。
　検知アラート出力機能部３５２１は、まず、カメラ情報テーブル記憶部３２１に記憶されている、各監視カメラ１０についてのカメラ情報テーブル３２１１から、顔照合閾値１～３を取得する（ステップＳ３０１）。
　また、検知アラート出力機能部３５２１は、検知履歴テーブル記憶部３２３から新規の検知履歴テーブル３２３１の情報を取得する（ステップＳ３０２）。すなわち、検知アラート出力機能部３５２１は、検知履歴テーブル３２３１における顔画像スコアとして、顔画像類似度ラベルＩＤではなくて顔類似度の実数が記録されているものを抽出して取得する。
　そして、検知アラート出力機能部３５２１は、取得した新規の検知履歴テーブル３２３１に顔認証スコアとして記載されている顔画像類似度の値が顔照合閾値３よりも大きいか否か判断する（ステップＳ３０３）。顔画像類似度の値が顔照合閾値３よりも大きいと判断した場合、検知アラート出力機能部３５２１は、検知履歴テーブル記憶部３２３の当該検知履歴テーブル３２３１における顔画像類似度の値を、実数から顔画像類似度ラベルＩＤ、ここではＩＤ＝３に書き換える（ステップＳ３０４）。
　これに対して、顔画像類似度の値が顔照合閾値３よりも大きくないと判断した場合、検知アラート出力機能部３５２１は、更に、顔画像類似度の値が顔照合閾値２よりも大きいか否か判断する（ステップＳ３０５）。顔画像類似度の値が顔照合閾値２よりも大きいと判断した場合、検知アラート出力機能部３５２１は、検知履歴テーブル記憶部３２３の当該検知履歴テーブル３２３１における顔画像類似度の値を、実数から顔画像類似度ラベルＩＤ、ここではＩＤ＝２に書き換える（ステップＳ３０６）。
　また、顔画像類似度の値が顔照合閾値２よりも大きくないと判断した場合には、検知アラート出力機能部３５２１は、検知履歴テーブル記憶部３２３の当該検知履歴テーブル３２３１における顔画像類似度の値を、実数から顔画像類似度ラベルＩＤ、ここではＩＤ＝１に書き換える（ステップＳ３０７）。これは、そもそも検知履歴テーブル３２３１は、顔画像類似度の値が顔照合閾値１よりも大きくないと作成されないので、顔画像類似度の値が顔照合閾値２よりも大きくなければ、顔画像類似度の値は顔照合閾値１よりも大きいことは決まっているからである。
　以上のようにして、検知履歴テーブル３２３１における顔画像類似度の値を顔画像類似度ラベルＩＤに書き換えたならば、検知アラート出力機能部３５２１は、画面画像である新規の検知人物カードを作成する（ステップＳ３０８）。この検知人物カードは、検知履歴データ記憶部３１２に検知履歴データとして記憶した検知顔画像３１２１と、それに対応する検知履歴テーブル３２３１における顔画像類似度ラベルＩＤに基づく注意段階を示す注意段階表示と、を含む画面画像である。この検知人物カードについては、詳細を後述する。
　検知アラート出力機能部３５２１は、この作成した新規の検知人物カードにより、Ｗｅｂブラウザ４１にて表示するための検知アラート画面を更新する（ステップＳ３０９）。そして、検知アラート出力機能部３５２１は、この更新した検知アラート画面を、ネットワークＮＥＴを介してＷｅｂブラウザ４１に送信して、そこに表示させる（ステップＳ３１０）。Ｗｅｂブラウザ４１では、監視画面の一部に設けられたアラート画面表示領域に、或いは、監視画面とは別のウィンドウを開いて、この検知アラート画面を表示する。そして、検知アラート出力機能部３５２１は、この検知アラート出力処理を終了する。
　図２４は、Ｗｅｂブラウザ４１に表示される第２実施形態における検知アラート画面４２の一例を示す図である。検知アラート画面４２は、検知された人物毎の検知人物カード４２１を含む。この検知人物カード４２１は、その表示内容として、第１実施形態と同様、監視対象者顔画像４２１１、検知顔画像４２１２、注意喚起メッセージ４２１３、検知情報４２１６、及び、追跡開始ボタン４２１７を含むことができる。そして、第２実施形態における検知アラート画面４２では、第１実施形態における検知ＩＤ４２１４及び類似度４２１５に代えて、不審者ＩＤ４２１８及び注意段階表示４２１９を含むことができる。
　不審者ＩＤ４２１８は、検知履歴テーブル３２３１から転記される識別情報である。
　注意段階表示４２１９は、監視対象者の顔画像と検知された人物の顔画像との類似度を示す。すなわち、類似度は、数値ではなくて、検知履歴テーブル３２３１における顔画像類似度ラベルＩＤに基づく複数段階、ここでは３段階の注意段階表示４２１９として示されている。この注意段階表示４２１９では、図２４においてハッチングにより表している識別表示された四角形の数が、顔画像類似度ラベルＩＤに対応する。例えば、不審者ＩＤ４２１８が「00098842」である人物の検知人物カード４２１では、検知履歴テーブル３２３１における顔画像類似度ラベルＩＤが「３」であったので、注意段階表示４２１９では、３個の四角形が識別表示され、不審者ＩＤ４２１８が「00059820」である人物の検知人物カード４２１では、検知履歴テーブル３２３１における顔画像類似度ラベルＩＤが「２」であったので、２個の四角形が識別表示されている。
　（２－２）追跡動作
　監視者が検知アラート画面４２の追跡開始ボタン４２１７の押下操作を行うと、Ｗｅｂサーバ３０は、Ｗｅｂアプリケーション３５が提供する追跡機能部３５３により、映像解析機能部２０及び検知／追跡結果判定機能部３４を利用して、当該人物を追跡した追跡結果を、Ｗｅｂブラウザ４１に提示させていく。この追跡動作は、追跡機能部３５３の画像登録機能部３５３１による画像登録処理と、映像解析機能部２０の監視／追跡実行機能部２３による追跡処理と、検知／追跡結果判定機能部３４による追跡結果判定処理と、追跡機能部３５３の追跡アラート出力機能部３５３３による追跡アラート出力処理と、を含む。
　追跡機能部３５３の画像登録機能部３５３１による画像登録処理の処理手順は、以下の点を除いて、図１３を参照して説明した第１実施形態と同様である。すなわち、第１実施形態では、ステップＳ１２において、画像登録機能部３５３１は、検知アラート画面４２の検知ＩＤを有する検知履歴テーブル記憶部３２３のトラッキングＩＤに基づいて、検知履歴データ記憶部３１２から検知顔画像３１２１を追跡用顔画像として取得する。これに対して、第２実施形態では、画像登録機能部３５３１は、検知アラート画面４２の不審者ＩＤを有する検知履歴テーブル記憶部３２３のトラッキングＩＤに基づいて、検知履歴データ記憶部３１２から検知顔画像３１２１を追跡用顔画像として取得する。
　図２５は、映像解析機能部２０の監視／追跡実行機能部２３による追跡処理の処理手順を示すフローチャートである。第２実施形態においては、監視／追跡実行機能部２３は、例えば、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０の追跡機能部３５３画像登録機能部３５３１から追跡用画像と特徴量を受信する毎に、このフローチャートに示す処理を実施する。
　監視／追跡実行機能部２３は、まず、Ｗｅｂサーバ３０の画像登録機能部３５３１から受信した追跡用画像と特徴量を取得する（ステップＳ１１１）。
　その後、監視／追跡実行機能部２３は、人検知情報抽出機能部２２から、時刻Ｔの全身画像とその特徴量とを、照合用全身画像と照合用全身特徴量として取得する（ステップＳ１１２）。対応する監視カメラ１０の監視画像に複数の人物の全身画像が含まれる場合には、監視／追跡実行機能部２３は、それぞれの人物について、照合用全身画像と照合用全身特徴量を取得する。
　そして、監視／追跡実行機能部２３は、第１実施形態におけるステップＳ２３と同様、全身照合モジュール２３１により、人検知情報抽出機能部２２からの照合用全身特徴量のそれぞれについて、画像登録機能部３５３１からの追跡用全身特徴量との類似度である全身画像類似度を算出する（ステップＳ１１３）。
　また、監視／追跡実行機能部２３は、人検知情報抽出機能部２２から、時刻Ｔの顔画像とその特徴量とを、照合用顔画像と照合用顔特徴量として取得する（ステップＳ１１４）。対応する監視カメラ１０の監視画像に複数の人物の顔画像が含まれる場合には、監視／追跡実行機能部２３は、それぞれの人物について、照合用顔画像と照合用顔特徴量を取得する。なお、人物の向きによって、全身画像は抽出できても顔画像が抽出できない場合も有る。よって、上記ステップＳ１１２で取得される照合用全身画像の数とこのステップＳ１１４で取得する照合用顔画像の数とは一致するとは限らない。また、一人も顔画像が抽出できず、照合用顔画像（及び照合用顔特徴量）が取得されない場合もあり得る。
　そして、監視／追跡実行機能部２３は、第１実施形態におけるステップＳ２５と同様、顔照合モジュール２３２により、人検知情報抽出機能部２２からの照合用顔特徴量のそれぞれについて、画像登録機能部３５３１からの追跡用顔特徴量との類似度である顔画像類似度を算出する（ステップＳ１１５）。
　その後、監視／追跡実行機能部２３は、第１実施形態におけるステップＳ２６と同様、それら全身画像及び顔画像についての類似度と照合用画像とのセットを、サーバ内通信やＷｅｂｓｏｃｋｅｔ等により、Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４へ送信する（ステップＳ１１６）。なお、類似度と照合用画像のセットは、全身画像類似度と照合用全身画像とのセットと顔画像類似度と照合用顔画像とのセットとの両方を含む場合も有れば、顔画像類似度と照合用顔画像とのセットの無い全身画像類似度と照合用全身画像とのセットのみを含む場合もあり得る。
　そして、監視／追跡実行機能部２３は、監視端末４０において、監視者によってＷｅｂブラウザ４１に表示される追跡アラート画面における追跡停止ボタンの押下操作が行われたか否か判断する（ステップＳ１１７）。追跡停止ボタンを有する追跡アラート画面の詳細については、後述する。追跡停止ボタンの押下操作が行われたと判断した場合には、監視／追跡実行機能部２３は、この監視／追跡処理を終了する。
　また、追跡停止ボタンの押下操作が行われていないと判断した場合には、監視／追跡実行機能部２３は、時刻Ｔに時間間隔ｔ１加えてから、すなわち、次の処理時刻に更新した後（ステップＳ１１８）、上記ステップＳ１１２から上記の処理を繰り返す。ここで、時間間隔ｔ１は、上述した通りである。なお、この時間間隔ｔ１とは異なる時間間隔を用いても良いことは勿論である。
　図２６は、Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４による追跡結果判定処理の処理手順を示すフローチャートである。検知／追跡結果判定機能部３４は、定期的に、例えば映像解析機能部２０の監視／追跡実行機能部２３の追跡処理の処理間隔に同期して、このフローチャートに示す処理を実施する。
　検知／追跡結果判定機能部３４は、まず、第１実施形態におけるステップＳ３１と同様、監視／追跡実行機能部２３から類似度と照合用画像のセットを受信したか否か判断する（ステップＳ２２１）。類似度と照合用画像のセットを受信していないと判断した場合には、検知／追跡結果判定機能部３４は、この追跡結果判定処理を終了する。
　これに対して、類似度と照合用画像のセットを受信したと判断した場合には、検知／追跡結果判定機能部３４は、顔照合閾値１と全身照合閾値１を取得する（ステップＳ２２２）。すなわち、検知／追跡結果判定機能部３４は、カメラ情報テーブル記憶部３２１に記憶されている、それら類似度と照合用画像のセットの送信元である映像解析機能部２０に対応する監視カメラ１０についてのカメラ情報テーブル３２１１から、顔照合閾値１と全身照合閾値１を取得する。
　そして、検知／追跡結果判定機能部３４は、受信した全身画像類似度のそれぞれについて、取得した全身照合閾値１と比較し、全身照合閾値１よりも大きいか全身画像類似度が有るか否か判断する（ステップＳ２２３）。全身照合閾値１よりも大きい全身画像類似度が有ると判断した場合には、検知／追跡結果判定機能部３４は、その全身特徴量を有する人物は追跡対象者であると判別する。よってこの場合には、検知／追跡結果判定機能部３４は、その大きいと判断された全身画像類似度を、上記ステップＳ２２１で受信した対応する照合用全身画像と共に、記憶装置３０２の所定の記憶領域に保存しておくと共に、全身画像類似度を追跡テーブル３２５１に登録する（ステップＳ２２４）。この全身画像類似度の登録に際して、追跡テーブル記憶部３２５に、該当不審者ＩＤの追跡テーブル３２５１が未だ記憶されていない場合には、追跡テーブル３２５１を生成し、その生成した追跡テーブル２５１を追跡テーブル記憶部３２５に記憶させる。また、追跡テーブル記憶部３２５に、該当不審者ＩＤの追跡テーブル３２５１が既に記憶されている場合には、新たな追跡テーブル３２５１を生成するのではなく、レコードを追加する。追跡テーブル３２５１に登録される全身画像類似度は、全身照合閾値１よりも大きい値の全身画像類似度である。
　その後、或いは上記ステップＳ２２３において全身照合閾値１よりも大きい全身画像類似度が無いと判断した場合、検知／追跡結果判定機能部３４は、受信した顔画像類似度のそれぞれについて、取得した顔照合閾値１と比較し、顔照合閾値１よりも大きい顔画像類似度が有るか否か判断する（ステップＳ２２５）。顔照合閾値１よりも大きい顔画像類似度が有ると判断した場合には、検知／追跡結果判定機能部３４は、その顔特徴量を有する人物は追跡対象者であると判別する。よってこの場合には、検知／追跡結果判定機能部３４は、その大きいと判断された顔画像類似度を、上記ステップＳ２２１で受信した対応する照合用顔画像と共に、記憶装置３０２の所定の記憶領域に保存しておくと共に、顔画像類似度を追跡テーブル３２５１に登録する（ステップＳ２２６）。この顔画像類似度の登録に際して、追跡テーブル記憶部３２５に、該当不審者ＩＤの追跡テーブル３２５１が未だ記憶されていない場合には、追跡テーブル３２５１を生成し、その生成した追跡テーブル２５１を追跡テーブル記憶部３２５に記憶させる。また、追跡テーブル記憶部３２５に、該当不審者ＩＤの追跡テーブル３２５１が既に記憶されている場合には、新たな追跡テーブル３２５１を生成するのではなく、レコードを追加する。追跡テーブル３２５１に登録される顔画像類似度は、顔照合閾値１よりも大きい値の全身画像類似度である。
　その後、或いは上記ステップＳ２２５において顔照合閾値１よりも大きい顔画像類似度が無いと判断した場合には、検知／追跡結果判定機能部３４は、この追跡結果判定処理を終了する。
　図２７乃至図２９は、追跡機能部３５３の追跡アラート出力機能部３５３３による追跡アラート出力処理の処理手順を示すフローチャートである。追跡アラート出力機能部３５３３は、定期的に、例えば映像解析機能部２０の監視／追跡実行機能部２３における時間間隔ｔ１おきに、このフローチャートに示す処理を実施する。
　追跡アラート出力機能部３５３３は、まず、監視端末４０において、監視者によってＷｅｂブラウザ４１に表示される追跡アラート画面における絞り込み指定操作が行われたか否か判断する（ステップＳ５０１）。絞り込み指定操作が行われたと判断した場合、追跡アラート出力機能部３５３３は、後述するステップＳ５１９へと進む。
　これに対して、絞り込み指定操作が行われていないと判断した場合、追跡アラート出力機能部３５３３は、カメラ情報テーブル記憶部３２１に記憶されている、各監視カメラ１０についてのカメラ情報テーブル３２１１から、顔照合閾値１～３及び全身照合閾値１～３を取得する（ステップＳ５０２）。
　その後、追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５に記憶されている追跡テーブル３２５１から新規の追跡結果を取得する（ステップＳ５０３）。すなわち、追跡アラート出力機能部３５３３は、追跡テーブル３２５１における全身画像類似度及び顔画像類似度として、画像類似度ＩＤではなくて類似度の実数が記録されているものを抽出して取得する。
　そして、追跡アラート出力機能部３５３３は、追跡テーブル３２５１における顔画像類似度の値が顔照合閾値３よりも大きいか否か判断する（ステップＳ５０４）。顔画像類似度の値が顔照合閾値３よりも大きいと判断した場合、追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５の当該追跡テーブル３２５１における顔画像類似度の値を、実数から顔画像類似度ラベルＩＤ、ここではＩＤ＝３に書き換える（ステップＳ５０５）。
　これに対して、顔画像類似度の値が顔照合閾値３よりも大きくないと判断した場合、追跡アラート出力機能部３５３３は、更に、顔画像類似度の値が顔照合閾値２よりも大きいか否か判断する（ステップＳ５０６）。顔画像類似度の値が顔照合閾値２よりも大きいと判断した場合、追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５の当該追跡テーブル３２５１における顔画像類似度の値を、実数から顔画像類似度ラベルＩＤ、ここではＩＤ＝２に書き換える（ステップＳ５０７）。
　また、顔画像類似度の値が顔照合閾値２よりも大きくないと判断した場合、追跡アラート出力機能部３５３３は、更に、顔画像類似度の値が顔照合閾値１よりも大きいか否か判断する（ステップＳ５０８）。顔画像類似度の値が顔照合閾値１よりも大きいと判断した場合、追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５の当該追跡テーブル３２５１における顔画像類似度の値を、実数から顔画像類似度ラベルＩＤ、ここではＩＤ＝１に書き換える（ステップＳ５０９）。
　監視機能部３５２での検知動作に係わる処理では、顔画像類似度しか利用していないため、顔画像類似度の値が顔照合閾値２よりも大きくなければ、顔画像類似度の値は顔照合閾値１よりも大きいことは決まってしまう。これに対して、追跡機能部３５３の追跡動作に係わる処理では、顔画像類似度と全身類似度との両方を利用しており、追跡テーブル３２５１には顔画像類似度と全身類似度の何れか片方しか登録されない場合が存在する。すなわち、顔画像類似度の値が顔照合閾値２よりも大きくないときには、顔照合閾値１よりも大きい値の顔画像類似度の値が登録されている場合と、顔照合閾値１以下の顔画像類似度の値が登録されている（又は顔画像類似度の値が登録されていない）場合と、が存在する。そのため、顔画像類似度の値が顔照合閾値２よりも大きくないというだけで、顔画像類似度の値は顔照合閾値１よりも大きいと決めることができない。
　以上のようにして、追跡テーブル３２５１における顔画像類似度の値を顔画像類似度ラベルＩＤに書き換えたならば、或いは、上記ステップＳ５０８において顔画像類似度の値が顔照合閾値１よりも大きくないと判断した場合、追跡アラート出力機能部３５３３は、全身画像類似度の判定動作に移る。
　すなわち、追跡アラート出力機能部３５３３は、追跡テーブル３２５１における全身画像類似度の値が全身照合閾値３よりも大きいか否か判断する（ステップＳ５１０）。全身画像類似度の値が全身照合閾値３よりも大きいと判断した場合、追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５の当該追跡テーブル３２５１における全身画像類似度の値を、実数から全身画像類似度ラベルＩＤ、ここではＩＤ＝３に書き換える（ステップＳ５１１）。
　これに対して、全身画像類似度の値が全身照合閾値３よりも大きくないと判断した場合、追跡アラート出力機能部３５３３は、更に、全身画像類似度の値が全身照合閾値２よりも大きいか否か判断する（ステップＳ５１２）。全身画像類似度の値が全身照合閾値２よりも大きいと判断した場合、追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５の当該追跡テーブル３２５１における全身画像類似度の値を、実数から全身画像類似度ラベルＩＤ、ここではＩＤ＝２に書き換える（ステップＳ５１３）。
　また、全身画像類似度の値が全身照合閾値２よりも大きくないと判断した場合、追跡アラート出力機能部３５３３は、更に、全身画像類似度の値が全身照合閾値１よりも大きいか否か判断する（ステップＳ５１４）。全身画像類似度の値が全身照合閾値１よりも大きいと判断した場合、追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５の当該追跡テーブル３２５１における全身画像類似度の値を、実数から全身画像類似度ラベルＩＤ、ここではＩＤ＝１に書き換える（ステップＳ５１５）。
　以上のようにして、追跡テーブル３２５１における全身画像類似度の値を全身画像類似度ラベルＩＤに書き換えたならば、或いは、上記ステップＳ５１４において全身画像類似度の値が全身照合閾値１よりも大きくないと判断した場合、追跡アラート出力機能部３５３３は、画面画像である新規の追跡情報カードを作成する（ステップＳ３０８）。この追跡情報カードは、上記ステップＳ２２４及びステップＳ２２６で記憶装置３０２の所定の記憶領域に保存された照合用全身画像及び照合用顔画像と、それに対応する追跡テーブル３２５１における全身画像類似度ラベルＩＤ及び顔画像類似度ラベルＩＤに基づく注意段階を示す注意段階表示と、を含む画面画像である。この追跡情報カードについては、詳細を後述する。
　追跡アラート出力機能部３５３３は、この作成した新規の追跡情報カードにより、Ｗｅｂブラウザ４１にて表示するための追跡アラート画面を更新する（ステップＳ５１７）。そして、追跡アラート出力機能部３５３３は、この更新した追跡アラート画面を、ネットワークＮＥＴを介してＷｅｂブラウザ４１に送信して、そこに表示させる（ステップＳ５１８）。Ｗｅｂブラウザ４１では、監視画面の一部に設けられたアラート画面表示領域に、或いは、監視画面とは別のウィンドウを開いて、この追跡アラート画面を表示する。そして、追跡アラート出力機能部３５３３は、この追跡アラート出力処理を終了する。
　一方、上記ステップＳ５０１において絞り込み指定操作が行われたと判断した場合、追跡アラート出力機能部３５３３は、その指定された絞り込みレベルを取得する（ステップＳ５１９）。この絞り込みレベルは、追跡アラート画面に表示する追跡情報カードを絞り込むための指標である。
　追跡アラート出力機能部３５３３は、追跡テーブル記憶部３２５に記憶されている追跡テーブル３２５１より、指定された絞り込みレベルに応じた不審者ＩＤを抽出する（ステップＳ５２０）。
　そして、追跡アラート出力機能部３５３３は、それら抽出した不審者ＩＤの検知ＩＤに基づいて、過去検索用データ記憶部３１１に過去検索用データとして記憶された全身画像３１１２と、映像解析機能部２０の人検知情報抽出機能部２２によってその全身画像３１１２から抽出した顔画像とを含む、追跡アラート画面に表示可能な個数分の追跡情報カードを作成する（ステップＳ５２１）。
　その後、追跡アラート出力機能部３５３３は、上記ステップＳ５１６と同様に、新規追跡情報カード作成し（ステップＳ５２２）、上記ステップＳ５１７と同様に、作成した追跡情報カードにより追跡アラート画面を更新する（ステップＳ５２３）。そして、追跡アラート出力機能部３５３３は、上記ステップＳ５１８の処理に進み、更新した追跡アラート画面をＷｅｂブラウザ４１に送信して、そこに表示させることとなる。
　図３０は、Ｗｅｂブラウザ４１に表示される追跡アラート画面４４の一例を示す図である。追跡アラート画面４４は、追跡対象者情報領域４４１と、追跡情報カード４４２と、絞り込み指示領域４４３と、を含む。
　追跡対象者情報領域４４１は、追跡対象者に関する情報を表示する領域であり、追跡対象者を追加する毎に、追跡アラート画面４４の最上位に追加表示されていく。古い追跡対象者情報領域４４１は順次下方にシフトされていく。ここで、最上位つまり最新の追跡対象者情報領域４４１とその他の追跡対象者情報領域４４１とでは、表示内容が異なっている。すなわち、最上位の追跡対象者情報領域４４１は、注意喚起メッセージ４４１１、不審者ＩＤ４４１２、登録画像４４１３、追跡情報４４１４、及び、追跡停止ボタン４４１５を含む。これに対して、最上位以外の追跡対象者情報領域４４１は、登録画像４４１３と追跡情報４４１４のみを含む。
　ここで、注意喚起メッセージ４４１１は、監視者の注意を促すためのメッセージであり、例えば、追跡対象者として指定された監視対象者の危険度種別を表示することができる。この危険度種別は、管理テーブル３２４１から転記されることができる。不審者ＩＤ４４１２は、管理テーブル３２４１から転記される識別情報である。登録画像４４１３は、追跡対象者の管理データ記憶部３１３に記憶された登録顔画像３１３１及び登録全身画像３１３３である。追跡情報４４１４は、当該追跡対象者に関する情報であり、最上位の追跡対象者情報領域４４１の追跡情報４４１４とその他の追跡対象者情報領域４４１の追跡情報４４１４とでは、内容が異なっている。すなわち、最上位の追跡対象者情報領域４４１の追跡情報４４１４は、管理テーブル３２４１から転記される不審者ＩＤ、危険度種別及び説明文を含む。最上位以外の追跡対象者情報領域４４１の追跡情報４４１４は、説明文に代えて、追跡状況を含んでいる。追跡停止ボタン４４１５は、当該人物の追跡を終了する場合に押下されるボタンである。
　また、追跡情報カード４４２は、追跡アラート出力機能部３５３３が新規カードを作成する毎に、追跡アラート画面４４の最上位に追加表示されていく。古い追跡情報カード４４２は順次下方にシフトされていく。この追跡情報カード４４２は、その表示内容として、検出日時情報４４２１、検出カメラ場所情報４４２２、検出顔画像４４２３、顔注意段階表示４４２４、検出全身画像４４２５、全身注意段階表示４４２６、及び、検出背景画像４４２７を含む。
　ここで、検出日時情報４４２１は、当該追跡対象者が何れかの監視カメラ１０の監視画像から検知された日時情報である。検出カメラ場所情報４４２２は、その検知した監視カメラＩＤに基づくカメラ場所情報である。検出顔画像４４２３は、検知されて保存された追跡対象者の照合用顔画像である。顔注意段階表示４４２４は、追跡対象者の顔画像と検知された人物の顔画像との類似度の段階を示すものである。すなわち、類似度が、実数ではなくて、追跡テーブル３２５１における顔画像類似度ラベルＩＤに基づく複数段階、ここでは３段階の注意段階表示として示されている。この顔注意段階表示４４２４では、図３０においてハッチングにより表している識別表示された四角形の数が、顔画像類似度ラベルＩＤに対応する。例えば、一番上の追跡情報カード４４２では、追跡テーブル３２５１における顔画像類似度ラベルＩＤが「２」であったので、顔注意段階表示４４２４では、２個の四角形が識別表示され、上から二番目の追跡情報カード４４２では、追跡テーブル３２５１における顔画像類似度ラベルＩＤが「３」であったので、顔注意段階表示４４２４では、３個の四角形が識別表示されている。
　同様に、検出全身画像４４２５は、検知されて保存された追跡対象者の照合用全身画像である。全身注意段階表示４４２６は、追跡対象者の全身画像と検知された人物の全身画像との類似度の段階を示すものである。すなわち、類似度が、実数ではなくて、追跡テーブル３２５１における全身画像類似度ラベルＩＤに基づく複数段階、ここでは３段階の注意段階表示として示されている。この全身注意段階表示４４２６も顔注意段階表示４４２４と同様、図３０においてハッチングにより表している識別表示された四角形の数が、全身画像類似度ラベルＩＤに対応する。例えば、一番上の追跡情報カード４４２では、追跡テーブル３２５１における全身画像類似度ラベルＩＤが「３」であったので、全身注意段階表示４４２６では、３個の四角形が識別表示され、上から二番目の追跡情報カード４４２では、追跡テーブル３２５１における全身画像類似度ラベルＩＤが「２」であったので、全身注意段階表示４４２６では、２個の四角形が識別表示されている。
　検出背景画像４４２７は、照合用顔画像及び／または照合用全身画像を抽出した元の監視画像であるフレーム画像である。このフレーム画像は、過去検索用データ記憶部３１１に記憶されているフレーム画像３１１１が用いられる。
　なお、追跡情報カード４４２は、必ずしも、検出顔画像４４２３及び顔注意段階表示４４２４と、検出全身画像４４２５及び全身注意段階表示４４２６と、の両方を含むとは限らず、どちらか一方のみの場合も有り得る。
　絞り込み指示領域４４３は、追跡アラート画面４４に表示する追跡情報カード４４２を絞り込むための指示を受け付けるための領域である。この絞り込み指示領域４４３は、顔画像類似度選択ボタン４４３１、顔画像類似度選択リセットボタン４４３２、全身画像類似度選択ボタン４４３３、及び、全身画像類似度選択リセットボタン４４３４を含む。
　ここで、顔画像類似度選択ボタン４４３１は、顔注意段階表示４４２４の段数に対応する３個のボタンを含む。監視者によるこの顔画像類似度選択ボタン４４３１の押下操作に応じた指定段数以上の顔注意段階表示４４２４を含む追跡情報カード４４２のみが追跡アラート画面４４に表示されるようになる。図３０の例では、顔画像類似度選択ボタン４４３１での段数が指定されていないので、追跡アラート画面４４には、１段以上の顔注意段階表示４４２４を含む追跡情報カード４４２が表示されている。顔画像類似度選択リセットボタン４４３２は、顔画像類似度選択ボタン４４３１での段数指定をリセットする際に押下操作されるボタンである。
　同様に、全身画像類似度選択ボタン４４３３は、全身注意段階表示４４２６の段数に対応する３個のボタンを含む。監視者によるこの全身画像類似度選択ボタン４４３３の押下操作に応じた指定段数以上の全身注意段階表示４４２６を含む追跡情報カード４４２のみが追跡アラート画面４４に表示されるようになる。図３０の例では、全身画像類似度選択ボタン４４３３での段数が指定されていないので、追跡アラート画面４４には、１段以上の全身注意段階表示４４２６を含む追跡情報カード４４２が表示されている。全身画像類似度選択リセットボタン４４３４は、全身画像類似度選択ボタン４４３３での段数指定をリセットする際に押下操作されるボタンである。
　図３１は、Ｗｅｂブラウザ４１に表示される追跡アラート画面４４の別の例を示す図である。この例は、顔画像類似度選択ボタン４４３１で３段が指定され、全身画像類似度選択ボタン４４３３で１段が指定された場合を示している。ここで、押下操作されたボタンは、図３０ではハッチングにより示すように、識別表示される。顔画像類似度選択ボタン４４３１による指定と全身画像類似度選択ボタン４４３３による指定はアンド条件となり、追跡アラート画面４４には、両方で指定された段数に合致する追跡情報カード４４２のみが表示されるようになる。
　（２－３）過去検索動作
　第１実施形態で説明したように、過去検索機能部３５４は、Ｗｅｂブラウザ４１からの時間及び場所の指定を受けて、過去検索用データ記憶部３１１からその指定された時間・場所に来訪した人物の全身画像３１１２を抽出し、その抽出した全身画像３１１２を一覧表示した選択画面を作成し、Ｗｅｂブラウザ４１に表示させる。
　Ｗｅｂブラウザ４１から検索する人物の選択指定を受けて、過去検索機能部３５４は、その選択指定された全身画像３１１２を追跡用全身画像とし、また、リアルタイムの監視カメラ１０からの監視画像に代えて指定された時間・場所についての過去検索用データ記憶部３１１に記憶されたフレーム画像３１１１を対象として、追跡機能部３５３と同様の動作を行う。
　これにより、過去検索機能部３５４は、過去検索用データ記憶部３１１に記憶されている過去の来訪者の中から、選択指定された人物に類似する人物を検索し、その結果を追跡アラート画面４４としてＷｅｂブラウザ４１に表示させることができる。
　（３）効果
　以上詳述したように第２実施形態に係る人物検出装置としてのＷｅｂサーバ３０では、互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部である映像解析機能部２０の監視／追跡実行機能部２３が算出した類似度のそれぞれに基づいて、対象画像を複数の段階に分類するための複数の閾値を、類似度算出手法毎に、閾値記憶部としてのカメラ情報テーブル記憶部３２１に記憶しておき、検出部としての検知／追跡結果判定機能部３４により、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した対象画像である類似度算出対象者の画像の、特定画像である特定人物の画像に対する少なくとも一つの類似度を監視／追跡実行機能部２３から取得し、その監視／追跡実行機能部２３での少なくとも一つの類似度の算出に用いた類似度算出手法に対応してカメラ情報テーブル記憶部３２１に記憶されている複数の閾値に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の中から、特定人物の画像に類似する画像を検出すると共に、その検出した類似度算出対象者の画像が複数の注意段階の何れであるのか検出する。このように、類似度算出手法の判断基準が異なることによって互いに比較することが難しい類似度を、類似度算出手法に依らない複数段階に分類することで、何れの類似度算出手法を用いたとしても、類似度の度合いを同じ評価基準に落とし込むことができる。　
　より具体的には、カメラ情報テーブル記憶部３２１に、例えば少なくとも一つの照合モデルのそれぞれについて、類似度が複数の注意段階の何れであるか判定するための複数の閾値を記憶しておき、検知／追跡結果判定機能部３４により、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した類似度算出対象者の画像と特定人物の画像との類似度を例えば少なくとも一つの照合モデルを用いて算出する監視／追跡実行機能部２３から、類似度を取得し、カメラ情報テーブル記憶部３２１に記憶されている複数の閾値に基づいて、取得した類似度が注意段階の何れであるか検出する。　
　このような検出された注意段階により、認証結果の確からしさを監視者が容易に認識できるようになる。また、監視カメラ１０毎の閾値をカメラ情報テーブル記憶部３２１に記憶しているので、監視カメラ１０間における取得類似度のバラツキを減らすことができる。
　また、Ｗｅｂサーバ３０は、検知／追跡結果判定機能部３４が検出した特定人物の画像に類似する画像を、その検知／追跡結果判定機能部３４が検出した注意段階を示す段階表示と共に提示するための出力画面である検知アラート画面４２を生成する出力画面生成部としての検知アラート出力機能部３５２１をさらに備えることができる。　
　より具体的には、検知アラート出力機能部３５２１は、検知／追跡結果判定機能部３４の判別結果に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の内、特定人物の画像に類似する類似度算出対象者の画像を、注意段階と共に提示するための検知アラート画面４２を生成する。　
　このように、認証結果である類似度を注意段階表示４２１９として提示するので、熟練監視者でなくても、画像の類似度を直感的に且つある程度正確に認識しやすくなる。よって、認証結果の確からしさを監視者が容易に認識できるようになる。
　なお、検知／追跡結果判定機能部３４は、監視／追跡実行機能部２３から、複数台の監視カメラ１０の監視画像のそれぞれから抽出した類似度算出対象者の顔画像と特定人物の顔画像との類似度を取得し、検知アラート出力機能部３５２１は、特定人物の顔画像に類似する類似度算出対象者の顔画像を注意段階表示４２１９と共に提示する検知アラート画面４２を生成するようにして良い。　
　これにより、顔画像の認証結果の確からしさを監視者が容易に認識できるようになる。なお、顔画像ではなく、特定人物の全身画像と類似度算出対象者の顔画像を用いるようにしても良い。
　ここで、複数の閾値は、対象画像である類似度算出対象者の画像が特定人物の画像であるか否か分類するための第１の閾値と、類似度算出対象者の画像が特定人物の画像である場合に、類似度算出対象者の画像を複数の段階に分類するための少なくとも一つの第２の閾値と、を含むことができる。　
　より具体的には、カメラ情報テーブル記憶部３２１は、第１の閾値としての、類似度算出対象者の画像が特定人物の画像であると推定される類似度に対応する顔照合閾値１と、第２の閾値としての、それぞれ顔照合閾値１よりも大きい類似度に対応する顔照合閾値２及び顔照合閾値３と、を記憶する。検知／追跡結果判定機能部３４は、顔照合閾値１よりも大きい類似度を持つ類似度算出対象者の画像を検出し、検知アラート出力機能部３５２１は、検知／追跡結果判定機能部３４が顔照合閾値１に基づいて検出した類似度算出対象者の画像を、検知／追跡結果判定機能部３４が顔照合閾値２及び顔照合閾値３に基づいて判別した注意段階を示す注意段階表示４２１９と共に提示する検知アラート画面４２を生成することができる。　
　これにより、顔照合閾値１によって検知アラート画面４２に提示するべき類似度算出対象者の画像を容易に検出でき、検出した画像各々について、顔照合閾値２及び顔照合閾値３に基づいてどのような注意段階表示４２１９とするべきか決定することができるようになる。
　また、第２実施形態に係る人物追跡装置としてのＷｅｂサーバ３０は、上記人物検出装置としてのＷｅｂサーバ３０の構成に加えて、検知アラート画面４２に段階表示と共に提示された特定人物の画像に類似する複数の類似度算出対象者の画像の中から、追跡を行うべき追跡対象者の画像の指定を、監視者が操作する監視端末４０から受け付け、その指定された画像を追跡用画像として登録し、この登録された追跡を行うべき追跡対象者の画像である追跡用画像を特定画像として監視／追跡実行機能部２３に、少なくとも二つ以上の類似度算出手法を用いて類似度算出対象者の画像の類似度を少なくとも二つ抽出させる登録部としての画像登録機能部３５３１と、検知／追跡結果判定機能部３４が、監視／追跡実行機能部２３から取得した少なくとも二つ以上の類似度から検出した追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像それぞれを、検知／追跡結果判定機能部３４が検出した注意段階を示す段階表示と共に提示するための追跡出力画面としての追跡アラート画面４４を生成する追跡出力画面生成部としての追跡アラート出力機能部３５３３と、を備えることができる。　
　より具体的には、画像登録機能部３５３１は、検知アラート画面４２に段階表示と共に提示された特定人物の画像に類似する複数の類似度算出対象者の画像の中から、追跡を行うべき追跡対象者の顔画像の指定を、監視者が操作する監視端末４０から受け付け、その指定された顔画像と当該顔画像に対応する前記追跡対象者の全身画像とを追跡用顔画像及び追跡用全身画像として登録する。また、カメラ情報テーブル記憶部３２１には、第１の閾値として、類似度算出対象者の顔画像が画像登録機能部３５３１によって登録された追跡用顔画像であると推定される類似度に対応する顔照合閾値１と、類似度算出対象者の全身画像が画像登録機能部３５３１によって登録された追跡用全身画像であると推定される類似度に対応する全身照合閾値１と、を記憶すると共に、少なくとも一つの第２の閾値して、それぞれ顔照合閾値１よりも大きい顔画像の類似度に対応する顔照合閾値２及び顔照合閾値３と、それぞれ全身照合閾値１よりも大きい全身画像の類似度に対応する全身照合閾値２及び全身照合閾値３と、を記憶している。そして、検知／追跡結果判定機能部３４は、監視／追跡実行機能部２３から、例えば第１の照合モデルを用いて算出された、複数台の監視カメラ１０の監視画像のそれぞれから抽出した類似度算出対象者の顔画像と画像登録機能部３５３１によって登録された追跡用顔画像との類似度と、例えば第２の照合モデルを用いて算出された、類似度算出対象者の全身画像と画像登録機能部３５３１によって登録された追跡用全身画像との類似度と、を取得し、取得した顔画像の類似度の中から、顔照合閾値１よりも大きい類似度を持つ類似度算出対象者の顔画像と、取得した全身画像の類似度の中から、全身照合閾値１よりも大きい類似度を持つ類似度算出対象者の全身画像と、の少なくとも一方を検出し、追跡アラート出力機能部３５３３は、検知／追跡結果判定機能部３４が顔照合閾値１及び全身照合閾値１の少なくとも一方に基づいて検出した類似度算出対象者の顔画像及び全身画像の少なくとも一方を、対応する顔照合閾値２及び顔照合閾値３と全身照合閾値２及び全身照合閾値３との少なくとも一方に基づいて判別した注意段階を示す段階表示と共に提示する追跡アラート画面４４を生成するようにしている。　
　これにより、互いに異なる判断基準を有する二つ以上の類似度算出手法、例えば顔画像のための第１の照合モデルと全身画像のための第２の照合モデルとが、互いに範囲又はスケールが異なる類似度値を出力する場合であっても、追跡アラート画面４４では同様の段階表示により類似度が表示されることで、監視者は、類似度の同一性を容易に認識できるようになる。
　また、人物追跡装置としてのＷｅｂサーバ３０は、監視画像のそれぞれから人物の全身画像を抽出し、全身画像からその特徴量である全身特徴量及び人物の顔画像を抽出し、顔画像からその特徴量である顔特徴量を抽出する抽出部である映像解析機能部２０の人検知情報抽出機能部２２が抽出した、全身画像、全身特徴量及び顔特徴量を、監視画像と共に蓄積する画像蓄積部としてのファイルサーバ３１を更に備えて良く、画像登録機能部３５３１は、監視端末４０から指定された追跡対象者の顔画像に対応するファイルサーバ３１に蓄積された全身画像、全身特徴量及び顔特徴量と、その顔特徴量を抽出した顔画像とを、追跡用全身画像、用全身特徴量、用顔特徴量及び追跡用顔画像として登録し、検知／追跡結果判定機能部３４は、画像登録機能部３５３１による登録の時点からファイルサーバ３１に蓄積されていく監視画像を照合用画像として、照合用画像それぞれについての、人検知情報抽出機能部２２が抽出した全身特徴量と追跡用全身特徴量との類似度である全身画像類似度、及び、人検知情報抽出機能部２２が抽出した顔特徴量と追跡用顔特徴量との類似度である顔画像類似度を算出する監視／追跡実行機能部２３から、算出した全身画像類似度及び顔画像類似度と追跡用顔画像及び追跡用全身画像とのセットを受け、顔画像類似度及び全身画像類似度の少なくとも一方が、対応する顔照合閾値１及び全身照合閾値１の少なくとも一方よりも大きいか否か判定し、顔照合閾値１及び全身照合閾値１の少なくとも一方よりも大きい類似度を持つ類似度算出対象者の顔画像及び全身画像の少なくとも一方を検出し、検知アラート出力機能部３５２１は、検知／追跡結果判定機能部３４が検出した類似度算出対象者の顔画像及び全身画像の少なくとも一方と、対応する顔照合閾値２及び顔照合閾値３と全身照合閾値２及び全身照合閾値３との少なくとも一方に基づいて判別した注意段階を示す段階表示と、照合用画像としての監視画像を取得した監視カメラ１０の位置情報とを、画像登録機能部３５３１によって登録された追跡用全身画像及び追跡用顔画像と共に提示する追跡出力画面である追跡アラート画面４４を生成するようにしている。　
　これにより、監視カメラ１０により追跡対象者の顔画像が取得できない場合でも、全身画像を利用して追跡対象者を追跡できるようになる。
　なお、検知アラート出力機能部３５２１は、監視端末４０からの段数指定を受けて、検知／追跡結果判定機能部３４が検出した類似度算出対象者の顔画像及び全身画像の少なくとも一方の内、指定された段階に対応する顔照合閾値２及び顔照合閾値３と全身照合閾値２及び全身照合閾値３との少なくとも一方以上の類似度を有するものを、段階表示と共に提示する絞り込み出力画面としての追跡アラート画面４４を生成することができる。追跡中に誤検知が増えた場合、表示件数が多くなり、確度の低い結果も表示してしまうこことなり、追跡対象者の特定が困難になる。　
　第２実施形態に係る人物追跡装置としてのＷｅｂサーバ３０は、注意段階を示す段階表示の表示段階の基準を設定可能にすることで、確度の高い追跡結果のみの閲覧を促すことができる。
　或いは、第２実施形態に係る人物追跡装置としてのＷｅｂサーバ３０では、閾値記憶部としてのカメラ情報テーブル記憶部３２１に、互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部である映像解析機能部２０の監視／追跡実行機能部２３が算出した類似度のそれぞれに基づいて、対象画像を複数の段階に分類するための複数の閾値を、類似度算出手法毎に記憶しておき、登録部としての画像登録機能部３５３１によって、監視者が操作する監視端末４０から指定された追跡を行うべき追跡対象者の画像を、特定画像として登録する。そして、検知部としての検知／追跡結果判定機能部３４は、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した対象画像である類似度算出対象者の画像の、特定画像に対する少なくとも一つの類似度を監視／追跡実行機能部２３から取得し、その監視／追跡実行機能部２３での少なくとも一つの類似度の算出に用いた類似度算出手法に対応してカメラ情報テーブル記憶部３２１に記憶されている複数の閾値に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の中から、追跡対象者の画像に類似する画像を検出すると共に、その検出した類似度算出対象者の画像が複数の注意段階の何れであるのか検出し、追跡出力画面生成部としての追跡アラート出力機能部３５３３は、検知／追跡結果判定機能部３４が、監視／追跡実行機能部２３から取得した少なくとも二つ以上の類似度から検出した追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像それぞれを、監視／追跡実行機能部２３が検出した注意段階を示す段階表示と共に提示するための追跡出力画面としての追跡アラート画面４４を生成する。　
　より具体的には、カメラ情報テーブル記憶部３２１に、例えば二つ以上の照合モデルのそれぞれについて、類似度が複数の注意段階の何れであるか判定するための複数の閾値を記憶しておき、画像登録機能部３５３１によって、監視者が操作する監視端末４０から指定された追跡を行うべき追跡対象者の画像を登録する。そして、検知／追跡結果判定機能部３４は、画像登録機能部３５３１によって登録された追跡対象者の画像と複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した類似度算出対象者の画像との類似度を二つ以上の照合モデルそれぞれを用いて算出する監視／追跡実行機能部２３から、二つ以上の類似度を取得し、カメラ情報テーブル記憶部３２１に記憶されている複数の閾値に基づいて、取得した二つ以上の類似度それぞれが注意段階の何れであるか判別し、追跡アラート出力機能部３５３３は、検知／追跡結果判定機能部３４の判別結果に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の内、追跡対象者の画像に類似する類似度算出対象者の画像を、注意段階それぞれを示す段階表示と共に提示するための追跡アラート画面４４を生成する。　
　これにより、互いに異なる判断基準を有する二つ以上の類似度算出手法、例えば二つ以上の照合モデルが、互いに範囲又はスケールが異なる類似度値を出力する場合であっても、追跡アラート画面４４では同様の段階表示により類似度が表示されることで、監視者は、類似度の同一性を容易に認識できるようになる。
　ここで、追跡アラート出力機能部３５３３は、監視端末４０からの段数指定を受けて、検知／追跡結果判定機能部３４が検出した類似度算出対象者の画像の内、指定された段階に対応する閾値以上の類似度を有するものを、段階表示と共に提示する絞り込み出力画面としての追跡アラート画面４４を生成することができる。　
　このように、注意段階を示す段階表示の表示段階の基準を設定可能にすることで、確度の高い追跡結果のみの閲覧を促すことができる。
　また、カメラ情報テーブル記憶部３２１は、類似度算出対象者の画像が追跡対象者の画像であると推定される類似度に対応する第１の閾値である顔照合閾値１又は全身照合閾値１と、それぞれ顔照合閾値１又は全身照合閾値１よりも大きい類似度に対応する少なくとも一つの第２の閾値である顔照合閾値２及び顔照合閾値３、又は、全身照合閾値２及び全身照合閾値３と、を記憶し、検知／追跡結果判定機能部３４は、顔照合閾値１又は全身照合閾値１よりも大きい顔類似度又は全身類似度を持つ前記類似度算出対象者の画像を検出し、追跡アラート出力機能部３５３３は、検知／追跡結果判定機能部３４が顔照合閾値１又は全身照合閾値１に基づいて検出した前記類似度算出対象者の画像を、検知／追跡結果判定機能部３４が顔照合閾値２，３又は全身照合閾値２，３に基づいて判別した注意段階を示す段階表示と共に提示する追跡アラート画面４４を生成することができる。　
　これにより、顔照合閾値１又は全身照合閾値１によって追跡アラート画面４４に提示するべき類似度算出対象者の画像を容易に検出でき、検出した画像各々について、顔照合閾値２及び顔照合閾値３、又は、全身照合閾値２及び全身照合閾値３に基づいて、どのような注意段階表示４２１９とするべきか決定することができるようになる。
　また、第２実施形態に係る人物追跡システムは、第２実施形態に係る人物追跡装置と、複数台の監視カメラ１０と、監視者が操作する監視端末４０と、人検知情報抽出機能部２２を備える解析部としての映像解析機能部２０と、を備えることができる。
　また、第２実施形態に係る人物検出方法は、複数台の監視カメラ１０が取得した監視画像から特定人物を検出する人物検出方法であって、コンピュータであるＷｅｂサーバ３０が、互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部である映像解析機能部２０の監視／追跡実行機能部２３が算出した類似度のそれぞれに基づいて、対象画像を複数の段階に分類するための複数の閾値を、類似度算出手法毎に、メモリである記憶装置３０２に設けたＤＢサーバ３２のカメラ情報テーブル記憶部３２１に記憶させておき、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した対象画像である類似度算出対象者の画像の、特定画像である特定人物の画像に対する少なくとも一つの類似度を監視／追跡実行機能部２３から取得し、監視／追跡実行機能部２３での少なくとも一つの類似度の算出に用いた類似度算出手法に対応してカメラ情報テーブル記憶部３２１に記憶されている複数の閾値に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の中から、特定人物の画像に類似する画像を検出すると共に、その検出した類似度算出対象者の画像が複数の注意段階の何れであるのか検出するようにしている。　
　より具体的には、例えば少なくとも一つの照合モデルのそれぞれについて、類似度が複数の注意段階の何れであるか判定するための複数の閾値をカメラ情報テーブル記憶部３２１に記憶させておき、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した類似度算出対象者の画像と特定人物の画像との類似度を少なくとも一つの照合モデルを用いて算出する監視／追跡実行機能部２３から、類似度を取得し、カメラ情報テーブル記憶部３２１に記憶されている複数の閾値に基づいて、取得した類似度が注意段階の何れであるか検出するようにしている。　
　このような検出された注意段階により、認証結果の確からしさを監視者が容易に認識できるようになる。また、監視カメラ１０毎の閾値をカメラ情報テーブル記憶部３２１に記憶しているので、監視カメラ１０間における取得類似度のバラツキを減らすことができる。
　また、第２実施形態に係る人物追跡方法は、複数台の監視カメラ１０が取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、コンピュータであるＷｅｂサーバ３０が、上記第２実施形態に係る人物検出方法によって検出した特定人物の画像に類似する画像を、検出した注意段階を示す段階表示と共に提示するための出力画面である検知アラート画面４２を生成し、検知アラート画面４２に段階表示と共に提示された特定人物の画像に類似する複数の類似度算出対象者の画像の中から、追跡を行うべき追跡対象者の画像の指定を、監視者が操作する監視端末４０から受け付け、その指定された画像を追跡用画像としてメモリである記憶装置３０２に設けたファイルサーバ３１の管理データ記憶部３１３に登録する。そして、この管理データ記憶部３１３に登録された追跡を行うべき追跡対象者の画像である追跡用画像を特定画像として、監視／追跡実行機能部２３に、少なくとも二つ以上の類似度算出手法を用いて類似度算出対象者の画像の類似度を少なくとも二つ抽出させ、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の、特定画像である追跡対象者の画像に対する少なくとも二つの類似度を監視／追跡実行機能部２３から取得して、この監視／追跡実行機能部２３での類似度のそれぞれの算出に用いた類似度算出手法に対応して管理データ記憶部３１３に記憶されている複数の閾値に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の中から、追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像を検出すると共に、その検出した類似度算出対象者の画像が複数の注意段階の何れであるのか検出し、監視／追跡実行機能部２３から取得した少なくとも二つ以上の類似度から検出した追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像それぞれを、検出した注意段階を示す段階表示と共に提示するための追跡出力画面としての追跡アラート画面４４を生成するようにしている。　
　より具体的には、検知アラート画面４２に注意段階と共に提示された複数台の監視カメラ１０の監視画像のそれぞれから抽出された複数の類似度算出対象者の画像の中から、追跡を行うべき追跡対象者の顔画像の指定を、監視者が操作する監視端末４０から受け付け、その指定された顔画像と当該顔画像に対応する追跡対象者の全身画像とを追跡用顔画像及び追跡用全身画像として管理データ記憶部３１３に登録する。そして、監視／追跡実行機能部２３から、例えば第１の照合モデルを用いて算出された、複数台の監視カメラ１０の監視画像のそれぞれから抽出した類似度算出対象者の顔画像と登録された追跡用顔画像との類似度と、例えば第２の照合モデルを用いて算出された、類似度算出対象者の全身画像と登録された追跡用全身画像との類似度と、を取得する。また、カメラ情報テーブル記憶部３２１に第１の閾値として、類似度算出対象者の顔画像が登録された追跡用顔画像であると推定される類似度に対応する顔照合閾値１及び類似度算出対象者の全身画像が登録された追跡用全身画像であると推定される類似度に対応する全身照合閾値１と、少なくとも一つの第２の閾値として、それぞれ顔照合閾値１よりも大きい顔画像の類似度に対応する顔照合閾値２及び顔照合閾値３とそれぞれ全身照合閾値１よりも大きい全身画像の類似度に対応する全身照合閾値２及び全身照合閾値３と、を記憶させておく。そして、取得した前記類似度の中から、顔照合閾値１よりも大きい類似度を持つ類似度算出対象者の顔画像と全身照合閾値１よりも大きい類似度を持つ類似度算出対象者の全身画像との少なくとも一方を検出し、顔照合閾値１及び全身照合閾値１の少なくとも一方に基づいて検出した類似度算出対象者の顔画像及び全身画像の少なくとも一方を、対応する顔照合閾値２及び顔照合閾値３と全身照合閾値２及び全身照合閾値３との少なくとも一方に基づいて判別した注意段階を示す段階表示と共に提示する追跡出力画面としての追跡アラート画面４４を生成する。　
　これにより、互いに異なる判断基準を有する二つ以上の類似度算出手法、例えば顔画像のための第１の照合モデルと全身画像のための第２の照合モデルとが、互いに範囲又はスケールが異なる類似度値を出力する場合であっても、追跡アラート画面４４では同様の段階表示により類似度が表示されることで、監視者は、類似度の同一性を容易に認識できるようになる。
　或いは、第２実施形態に係る人物追跡方法は、複数台の監視カメラ１０が取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、コンピュータであるＷｅｂサーバ３０が、互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部である映像解析機能部２０の監視／追跡実行機能部２３が算出した類似度のそれぞれに基づいて、対象画像を複数の段階に分類するための複数の閾値を、類似度算出手法毎にメモリである記憶装置３０２に設けたＤＢサーバ３２のカメラ情報テーブル記憶部３２１に記憶させておき、監視者が操作する監視端末４０から指定された追跡を行うべき追跡対象者の画像を、特定画像としてメモリである記憶装置３０２に設けたファイルサーバ３１の管理データ記憶部３１３に登録し、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した対象画像である類似度算出対象者の画像の、特定画像に対する少なくとも一つの類似度を監視／追跡実行機能部２３から取得し、この監視／追跡実行機能部２３での少なくとも一つの類似度の算出に用いた類似度算出手法に対応してカメラ情報テーブル記憶部３２１に記憶されている複数の閾値に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の中から、追跡対象者の画像に類似する画像を検出すると共に、その検出した類似度算出対象者の画像が複数の注意段階の何れであるのか検出し、監視／追跡実行機能部２３から取得した少なくとも二つ以上の類似度から検出した追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像それぞれを、検出した注意段階を示す段階表示と共に提示するための追跡出力画面としての追跡アラート画面４４を生成するようにしている。　
　より具体的には、例えば二つ以上の照合モデルのそれぞれについて、類似度が複数の注意段階の何れであるか判定するための複数の閾値をカメラ情報テーブル記憶部３２１に記憶させておき、監視者が操作する監視端末４０から指定された追跡を行うべき追跡対象の画像を管理データ記憶部３１３に登録し、登録された追跡対象者の画像と複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから抽出した類似度算出対象者の画像との類似度を二つ以上の照合モデルそれぞれを用いて算出する監視／追跡実行機能部２３から、二つ以上の類似度を取得し、記憶されている複数の閾値に基づいて、取得した類似度が注意段階の何れであるか判別し、判別の結果に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された類似度算出対象者の画像の内、追跡対象者の画像に類似する類似度算出対象者の画像を、注意段階それぞれを示す段階表示と共に提示するための追跡アラート画面４４を生成するようにしている。　
　これにより、互いに異なる判断基準を有する二つ以上の類似度算出手法、例えば二つ以上の照合モデルが、互いに範囲又はスケールが異なる類似度値を出力する場合であっても、追跡アラート画面４４では同様の段階表示により類似度が表示されることで、監視者は、類似度の同一性を容易に認識できるようになる。
　［第３実施形態］
　第３実施形態では、第１及び第２実施形態と同様の構成については同一の符号を付し、その説明を省略する。第３実施形態では、主として、第２実施形態と異なる部分について説明する。
　（１）構成
　（１－１）全体構成
　この発明の第３実施形態に係る人物追跡システム１は、図１を用いて説明した第１の実施形態に係るシステム１と同様であっても良く、その説明を省略する。
　（１－２）映像解析機能部２０
　図３２は、第３実施形態における映像解析機能部２０の構成の一例を示すブロック図である。第３実施形態においても、映像解析機能部２０は、画像取得モジュール２１、人検知情報抽出機能部２２及び監視／追跡実行機能部２３を備える。
　そして、第３実施形態においては、人検知情報抽出機能部２２が、全身検出モジュール２２１、領域追跡モジュール２２２、全身特徴量抽出モジュール２２３、顔検出モジュール２２４及び顔特徴量抽出モジュール２２５に加えて、体温検出モジュール２２６、脈拍検出モジュール２２７及び咳検出モジュール２２８を備える。
　また、顔検出モジュール２２４は、抽出した顔画像を、顔特徴量抽出モジュール２２５に加えて、体温検出モジュール２２６、脈拍検出モジュール２２７及び咳検出モジュール２２８に送る。
　体温検出モジュール２２６は、全身検出モジュール２２１から入力された全身画像または顔検出モジュール２２４から入力された顔画像から、人物の体表面温度を検出する。画像から体表面温度を検出する手法は、従来より種々提案されてきており、本実施形態では、使用する体表面温度検出手法を特に限定しない。体温検出モジュール２２６は、検出した体温を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバに送信する。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、体温検出モジュール２２６は、検出した体温をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。
　脈拍検出モジュール２２７は、顔検出モジュール２２４から入力された顔画像から、人物の脈拍数を検出する。画像から脈拍数を検出する技術としては、例えば、以下の参考文献１乃至３等に提案されている。　
　［参考文献１］　小原一誠、外４名、“映像からの脈波情報抽出”［Online］、［２０２０年６月１９日検索］、インターネット＜URL: https://www.sairct.idac.tohoku.ac.jp/wp-content/uploads/2016/07/160728_c2_yoshizawa_DLpre2.pdf＞　
　［参考文献２］　阿部正英、外２名、“非接触センサを用いた脈拍数と呼吸数の計測”［Online］、［２０２０年６月１９日検索］、インターネット＜URL: http://www.mk.ecei.tohoku.ac.jp/papers/data/F05760013.pdf＞　
　［参考文献３］　“顔の画像からリアルタイムに脈拍を計測する技術を開発”［Online］、［２０２０年６月１９日検索］、インターネット＜URL: https://pr.fujitsu.com/jp/news/2013/03/18.html＞　
本実施形態では、使用する脈拍数検出手法を特に限定しない。脈拍検出モジュール２２７は、検出した脈拍数を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバに送信する。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、脈拍検出モジュール２２７は、検出した脈拍数をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。
　咳検出モジュール２２８は、顔検出モジュール２２４から入力された顔画像から、人物の咳の症状を検出する。咳検出モジュール２２８は、例えば、顔画像のブレ具合や、連続する複数の顔画像における顔の変化、等から咳をしているか否か及びその咳の程度を検出する。咳検出モジュール２２８は、例えば、深層学習等の機械学習により事前に学習させた人物の顔画像に基づいて、咳の症状を検出することができる。咳検出モジュール２２８は、検出した咳の症状の度合いを示す咳症状を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバに送信する。なお、映像解析機能部２０がサーバ装置ＳＶから独立して配置されている場合には、咳検出モジュール２２８は、検出した咳の症状をネットワークＮＥＴを介してＷｅｂサーバ３０に送信する。
　（１－３）Ｗｅｂサーバ３０
　第３実施形態におけるＷｅｂサーバ３０のソフトウェア構成は、図１８を参照して説明した第２実施形態におけるＷｅｂサーバ３０と同様である。また、ハードウェア構成についても、図１１を参照して第１実施形態で説明した通りである。第３実施形態では、Ｗｅｂサーバ３０のファイルサーバ３１及びＤＢサーバ３２における記憶内容が第２実施形態と異なる場合がある。
　図３３は、ファイルサーバ３１の過去検索用データ記憶部３１１に記憶される過去検索用データの一例を示す図である。第３実施形態では、過去検索用データは、フレーム画像３１１１、全身画像３１１２、全身特徴量３１１３及び顔特徴量３１１４に加えて、体温３１１５、脈拍数３１１６及び咳症状３１１７を含むことができる。これら体温３１１５、脈拍数３１１６及び咳症状３１１７は、映像解析機能部２０の全身検出モジュール２２１が検出した状態情報である。これらフレーム画像３１１１、全身画像３１１２、全身特徴量３１１３、顔特徴量３１１４、体温３１１５、脈拍数３１１６及び咳症状３１１７は、例えば、同一のパスに記憶したり、ファイル名の一部に同一の文字列を付したりすることで、紐付けることができる。
　検知履歴データ記憶部３１２は、第３実施形態では、インフルエンザ等の規定の症状に該当する追跡候補者として検知された特定人物それぞれに関するデータである検知履歴データを記憶する。図３４は、この検知履歴データ記憶部３１２に記憶される検知された特定人物の検知履歴データの一例を示す図である。検知履歴データは、検知された特定人物の顔画像である検知顔画像３１２１及びその検知顔画像３１２１に対応する顔特徴量３１２２に加えて、第３実施形態では、検知全身画像３１２３と全身特徴量３１２４とを含むことができる。検知全身画像３１２３は、検知された特定人物の全身画像であり、全身特徴量３１２４は、その検知全身画像３１２３に対応する全身特徴量である。これら検知顔画像３１２１、顔特徴量３１２２、検知全身画像３１２３及び全身特徴量３１２４は、例えば、同一のパスに記憶したり、ファイル名の一部に同一の文字列を付したりすることで、紐付けることができる。
　検知履歴データにおける情報は、Ｗｅｂサーバ３０が、例えば、何れかの監視カメラ１０の監視画像から、規定の体温、脈拍数または咳症状に該当する追跡候補者を検知した時に、検知履歴データ記憶部３１２に記憶させることができる。すなわち、Ｗｅｂサーバ３０は、当該監視画像から取得されて過去検索用データ記憶部３１１に記憶されている全身画像３１１２、全身特徴量３１１３及び顔特徴量３１１４を、検知全身画像３１２３、全身特徴量３１２４及び顔特徴量３１２２として検知履歴データ記憶部３１２に記憶させることができる。また、Ｗｅｂサーバ３０は、当該監視画像から取得されて過去検索用データ記憶部３１１に記憶されている全身画像３１１２を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等により一つの映像解析機能部２０の顔検出モジュール２２４に入力することで、当該顔検出モジュール２２４から顔画像を取得し、それを検知顔画像３１２１として検知履歴データ記憶部３１２に記憶させることができる。この一つの映像解析機能部２０は、追跡候補者が検知された監視画像を取得した監視カメラ１０に対応する映像解析機能部２０であって良い。
　例えば、Ｗｅｂサーバ３０は、追跡候補者が検知された際に、第２実施形態と同様に、検知履歴データ記憶部３１２に記憶したその監視対象に対する検知履歴データにおける検知顔画像３１２１を、監視端末４０のＷｅｂブラウザ４１にて監視者に閲覧させる。さらに、第３実施形態では、Ｗｅｂサーバ３０は、監視者に、検知顔画像３１２１の検知の元となった状態情報を、監視端末４０のＷｅｂブラウザ４１にて閲覧させる。ここで閲覧させる状態情報は、過去検索用データ記憶部３１１に記憶されている体温３１１５、脈拍数３１１６及び咳症状３１１７を、種類や性能等に依存する監視カメラ１０毎の補正値によって補正したものである。
　或いは、Ｗｅｂサーバ３０は、過去検索用データ記憶部３１１に記憶されている複数の人物の全身画像３１１２に加えて、第３実施形態では、体温３１１５、脈拍数３１１６及び咳症状３１１７を監視端末４０のＷｅｂブラウザ４１にて閲覧させ、監視端末４０から任意の全身画像の指定を受けて、その人物を指定の追跡対象者とするようにしても良い。この場合、体温３１１５、脈拍数３１１６及び咳症状３１１７を対応する監視カメラ１０用の補正値により補正した結果をＷｅｂブラウザ４１にて閲覧させるようにしても良い。追跡対象者が指定されたならば、Ｗｅｂサーバ３０は、その指定された全身画像３１１２をサーバ内通信やＷｅｂｓｏｃｋｅｔ等により一つの映像解析機能部２０の顔検出モジュール２２４に入力することで、当該顔検出モジュール２２４から顔画像を取得して、管理データ記憶部３１３に登録顔画像３１３１として記憶させることができる。
　図３５は、ＤＢサーバ３２のカメラ情報テーブル記憶部３２１に記憶される、監視カメラ１０毎のカメラ情報テーブル３２１１の記載内容の一例を示す図である。カメラ情報テーブル３２１１には、例えば、第２実施形態と同様にカメラＩＤ、カメラ名称、アスペクト比、カメラ位置Ｘ、カメラ位置Ｙ、カメラ角度、顔照合閾値１～３、全身照合閾値１～３、等々が記載されている。そして、第３実施形態では、カメラ情報テーブル３２１１には、更に、体温補正係数、脈拍補正係数及び咳症状補正係数が記載されている。
　ここで、体温補正係数、脈拍補正係数及び咳症状補正係数は、映像解析機能部２０の体温検出モジュール２２６、脈拍検出モジュール２２７及び咳検出モジュール２２８が検出した体温、脈拍数及び咳症状を補正するための係数である。これら補正係数は、対応する監視カメラ１０自体の種類、性能、設置条件等に依存するため、監視カメラ１０を設置してから実際の運用が開始されるまでの間に、適切な値に調整されて、カメラ情報テーブル３２１１に記載される。
　また、顔照合閾値１～３及び全身照合閾値１～３は、映像解析機能部２０の全身照合モジュール２３１及び顔照合モジュール２３２が算出した類似度と比較するための閾値である。顔照合閾値１～３は、第２実施形態が、監視対象者或いは追跡対象者の顔画像を対象としていたのに対し、第３実施形態では、対応する監視カメラ１０の監視画像から抽出された人物の顔画像が追跡対象者の顔画像であるか否か分類するための顔画像類似度に対応する第１乃至第３の閾値である。同様に、全身照合閾値１貸せ３についても、第３実施形態では、対応する監視カメラ１０の監視画像から抽出された人物の全身画像が追跡対象者の全身画像であるか否か分類するための全身画像類似度に対応する第１乃至第３の閾値である。なお、第３実施形態においても、この顔照合閾値及び全身照合閾値は、それぞれ３段階に限定するものではないことは勿論である。
　また、第２実施形態では、Ｗｅｂサーバ３０は、過去検索用データテーブル３２２１のトラッキングＩＤを、映像解析機能部２０の人検知情報抽出機能部２２から与えられる全身画像の領域位置と、過去検索用データテーブル記憶部３２２に記憶されている当該監視カメラ１０の前フレーム画像における過去検索用データテーブル３２２１それぞれの全身画像の領域位置とを比較して、全身画像の人物の同一性を判別することで、過去検索用データテーブル３２２１のトラッキングＩＤを付与しても良いことを説明した。第３実施形態では、過去検索用データテーブル記憶部３２２に代えて、過去検索用データ記憶部３１１に記憶されている当該監視カメラ１０の前フレーム画像における過去検索用データテーブル３２２１それぞれの全身画像の領域位置を用いることができる。
　図３６は、ＤＢサーバ３２の検知履歴テーブル記憶部３２３に記憶される検知履歴テーブル３２３１の記載内容の一例を示す図である。検知履歴テーブル３２３１には、例えば、検知ＩＤ、検知日時、検知カメラＩＤ、顔左右角度、顔上下角度、トラッキングＩＤ、等々に加えて、第３実施形態では、要注意者ＩＤ、補正後体温、補正後脈拍数及び補正後咳症状が記載される。ここで、検知ＩＤ、要注意者ＩＤは、検知履歴データ記憶部３１２に検知履歴データを記憶する際に付与される、当該追跡候補者を一意に識別する識別情報である。補正後体温、補正後脈拍数及び補正後咳症状は、カメラ情報テーブル記憶部３２１に記憶されたカメラ情報テーブル３２１１に記載された補正係数による補正結果である。
　図３７は、ＤＢサーバ３２の管理テーブル記憶部３２４に記憶される管理テーブル３２４１の記載内容の一例を示す図である。管理テーブル３２４１には、例えば、クエリ顔画像パス、顔特徴量ファイルパス、監視ステータス、ピン留めフラグ、長期間滞在フラグ、等々に加えて、第３実施形態では、要注意者ＩＤ、補正後体温、補正後脈拍数及び補正後咳症状が記載される。ここで、要注意者ＩＤ、補正後体温、補正後脈拍数及び補正後咳症状は、検知履歴テーブル３２３１から転記される。
　図３８は、ＤＢサーバ３２の追跡テーブル記憶部３２５に記憶される追跡テーブル３２５１の記載内容の一例を示す図である。追跡テーブル３２５１は、第２実施形態では、追跡対象者の不審者ＩＤ毎のレコードを含んでいたが、第３実施形態では、追跡対象者の要注意者ＩＤ毎のレコードを含む。レコード自体の内容は、第２実施形態と同様、検知ＩＤ、全身画像類似度及び顔画像類似度でなる。
　Ｗｅｂサーバのバックエンド機能として提供される検知／追跡結果判定機能部３４は、第３実施形態では、映像解析機能部２０の人検知情報抽出機能部２２の各機能部の出力を受けて、規定の症状に該当する追跡候補者が監視カメラ１０の監視画像内に現れたことを検知し、検知履歴テーブル記憶部３２３に記憶する検知履歴テーブルを作成すると共に、人検知情報抽出機能部２２の各機能部で抽出した、その人物の検知顔画像３１２１、顔特徴量３１２２、検知全身画像３１２３及び全身特徴量３１２４を検知履歴データ記憶部３１２へ記憶させる。
　Ｗｅｂアプリケーション３５の監視機能部３５２は、第３実施形態では、検知／追跡結果判定機能部３４が追跡候補者を検知した際に、アラートを発生して、Ｗｅｂブラウザ４１に提示する。そのために、監視機能部３５２は、Ｗｅｂブラウザ４１に提示するための検知アラート画面を生成する検知アラート出力機能部３５２１を含む。検知アラート画面は、規定の症状に該当する特定人物である追跡候補者と検知された人物の画像を、その状態情報と共に提示するための出力画面である。
　追跡機能部３５３は、検知／追跡結果判定機能部３４が検知した追跡候補者の顔画像と同一の人物の顔画像及び全身画像で、複数の監視カメラ１０を跨いでリアルタイムに該当人物を追跡した追跡結果を、Ｗｅｂブラウザ４１に提示する。
　（２）動作
　（２－１）監視動作
　第３実施形態においては、各映像解析機能部２０は、フレーム画像、全身画像、全身画像の領域位置、全身特徴量及び顔特徴量に加えて、体温、脈拍数及び咳症状を、サーバ内通信やＷｅｂｓｏｃｋｅｔ等によりＷｅｂサーバ３０に送信する。Ｗｅｂサーバ３０は、複数の映像解析機能部２０のそれぞれから送信されてきたフレーム画像、全身画像、全身特徴量、顔特徴量、体温、脈拍数及び咳症状を、過去検索用データとして、ファイルサーバ３１の過去検索用データ記憶部３１１に蓄積する。
　人物追跡システムでは、この各部のリアルタイムな状況監視と並行して、追跡候補者の来訪検知動作が行われる。この追跡候補者来訪検知動作は、検知／追跡結果判定機能部３４による検知結果判定処理と、監視機能部３５２の検知アラート出力機能部３５２１による検知アラート出力処理と、を含む。
　図３９は、Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４による検知結果判定処理の処理手順を示すフローチャートである。検知／追跡結果判定機能部３４は、過去検索用データテーブル記憶部３２２に、何れかの監視カメラ１０の監視画像に基づく過去検索用データが記憶される毎に、このフローチャートに示す処理を実施することができる。或いは、検知／追跡結果判定機能部３４は、過去検索用データテーブル記憶部３２２に、各監視カメラ１０の監視画像に基づく過去検索用データが所定回数分記憶される毎に、このフローチャートに示す処理を実施するようにしても良い。後者の場合、その複数回分の過去検索用データの内の何れか一つ、例えば最新のものを処理対象として使用することができる。
　検知／追跡結果判定機能部３４は、まず、過去検索用データ記憶部３１１に記憶されている過去検索用データから状態情報である体温３１１５、脈拍数３１１６及び咳症状３１１７を取得する（ステップＳ１００１）。また、検知／追跡結果判定機能部３４は、カメラ情報テーブル記憶部３２１に記憶避けている、その過去検索用データの取得元である監視カメラ１０のカメラ情報テーブル３２１１より状態情報の補正値である体温補正値、脈拍数補正値及び咳症状補正値を取得する（ステップＳ１００２）。そして、上記取得した体温３１１５、脈拍数３１１６及び咳症状３１１７を、この体温補正値、脈拍数補正値及び咳症状補正値により補正する（ステップＳ１００３）。
　その後、検知／追跡結果判定機能部３４は、補正後の体温が予め記憶している規定体温以上であるか否か判断する（ステップＳ１００４）。補正後体温が規定体温以上であると判断した場合には、検知／追跡結果判定機能部３４は、検知履歴データ記憶部３１２に検知履歴データとして検知顔画像３１２１、顔特徴量３１２２、検知全身画像３１２３及び全身特徴量３１２４を記憶させると共に、検知履歴テーブル３２３１を生成して、それを検知履歴テーブル記憶部３２３に記憶させる（ステップＳ１００５）。この生成した検知履歴テーブル３２３１には、上記ステップＳ１００３で補正した補正後の状態情報である補正後体温、補正後脈拍数及び補正後咳症状が登録されることとなる。そしてその後、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。なお、比較対象である規定体温と後述する規定脈拍数及び規定咳症状は、インフルエンザ等の規定の症状に応じた値が予め記憶装置３０２に記憶されているものとする。
　これに対して、ステップＳ１００４において補正後体温が規定体温以上ではないと判断した場合には、検知／追跡結果判定機能部３４は、補正後の脈拍数が、予め記憶している規定脈拍数以上であるか否か判断する（ステップＳ１００６）。補正後脈拍数が規定脈拍数以上であると判断した場合には、検知／追跡結果判定機能部３４は、上記ステップＳ１００５の処理に進む。
　また、補正後脈拍数が規定脈拍数以上ではないと判断した場合には、検知／追跡結果判定機能部３４は、補正後の咳症状が、予め記憶している規定咳症状以上か否か判断する（ステップＳ１００７）。補正後咳症状が規定咳症状以上であると判断した場合には、検知／追跡結果判定機能部３４は、上記ステップＳ１００５の処理に進む。補正後咳症状が規定咳症状以上ではないと判断した場合には、検知／追跡結果判定機能部３４は、この検知／追跡結果判定処理を終了する。
　以上のようにして、補正後の体温、脈拍数及び咳症状の何れかが既定の体温、脈拍数または咳症状以上である場合には、追跡候補者が検知されたとして、検知履歴データ記憶部３１２に検知履歴データが記憶され、検知履歴テーブル３２３１へ補正後の体温、脈拍数及び咳症状が登録されることになる。
　図４０及び図４１は、監視機能部３５２の検知アラート出力機能部３５２１による検知アラート出力処理の処理手順を示すフローチャートである。検知アラート出力機能部３５２１は、定期的に、例えば映像解析機能部２０の監視／追跡実行機能部２３による検知結果判定処理と同様の処理タイミングで、このフローチャートに示す処理を実施する。
　検知アラート出力機能部３５２１は、まず、監視端末４０において、監視者によってＷｅｂブラウザ４１に表示される検知アラート画面における絞り込み指定操作が行われたか否か判断する（ステップＳ２００１）。絞り込み指定操作が行われたと判断した場合、検知アラート出力機能部３５２１は、後述するステップＳ２００６へと進む。
　これに対して、絞り込み指定操作が行われていないと判断した場合、検知アラート出力機能部３５２１は、検知履歴テーブル記憶部３２３から新規の検知履歴テーブル３２３１の情報を取得する（ステップＳ２００２）。すなわち、検知アラート出力機能部３５２１は、検知履歴テーブル３２３１における検知日時として、前回の処理日時以降の日時が記録されているものを抽出して取得する。
　そして、検知アラート出力機能部３５２１は、取得した新規の検知履歴テーブル３２３１の情報に基づいて、画面画像である新規の検知人物カードを作成する（ステップＳ２００３）。この検知人物カードは、検知履歴データ記憶部３１２に検知履歴データとして記憶した検知顔画像３１２１及び検知全身画像３１２３と、それに対応する検知履歴テーブル３２３１における補正後の状態情報と、を含む画面画像である。この検知人物カードについては、詳細を後述する。
　検知アラート出力機能部３５２１は、この作成した新規の検知人物カードにより、Ｗｅｂブラウザ４１にて表示するための検知アラート画面を更新する（ステップＳ２００４）。そして、検知アラート出力機能部３５２１は、この更新した検知アラート画面を、ネットワークＮＥＴを介してＷｅｂブラウザ４１に送信して、そこに表示させる（ステップＳ２００５）。Ｗｅｂブラウザ４１では、監視画面の一部に設けられたアラート画面表示領域に、或いは、監視画面とは別のウィンドウを開いて、この検知アラート画面を表示する。そして、検知アラート出力機能部３５２１は、この検知アラート出力処理を終了する。
　一方、上記ステップＳ２００１において絞り込み指定操作が行われたと判断した場合、検知アラート出力機能部３５２１は、その指定された絞り込みレベルを取得する（ステップＳ２００６）。この絞り込みレベルは、検知アラート画面に表示する検知人物カードを絞り込むための指標である。
　また、検知アラート出力機能部３５２１は、検知履歴テーブル記憶部３２３から処理対象の検知履歴テーブル３２３１の情報を取得する（ステップＳ２００７）。すなわち、検知アラート出力機能部３５２１は、検知履歴テーブル３２３１における検知日時に基づいて、新しいものから順に一つの検知履歴テーブルの情報を取得する。
　その後、検知アラート出力機能部３５２１は、取得した補正後の体温が、上記絞り込みレベルとして指定された指定体温よりも高いか否か、つまり補正後体温が指定体温以上であるか否か判断する（ステップＳ２００８）。補正後体温が指定体温以上であると判断した場合には、検知アラート出力機能部３５２１は、取得した検知履歴テーブル３２３１の情報に基づいて、画面画像である検知人物カードを作成する（ステップＳ２００９）。
　そして、検知アラート出力機能部３５２１は、所定数の検知人物カードを作成したか否か判断する（ステップＳ２０１０）。この所定数は、検知アラート画面の表示可能個数に依存することができる。或いは、任意の個数としても良い。未だ所定数の検知人物カードを作成していないと判断した場合には、検知アラート出力機能部３５２１は、上記ステップＳ２００７の処理に戻る。
　また、上記ステップＳ２００８において補正後体温が指定体温以上ではないと判断した場合には、検知アラート出力機能部３５２１は、取得した補正後の脈拍数が、上記絞り込みレベルとして指定された指定脈拍数以上であるか否か判断する（ステップＳ２０１１）。補正後脈拍数が指定脈拍数以上であると判断した場合には、検知アラート出力機能部３５２１は、上記ステップＳ２００９の処理に進んで、検知人物カードを作成することとなる。
　また、上記ステップＳ２０１３において補正後脈拍数が指定脈拍数以上ではないと判断した場合には、検知アラート出力機能部３５２１は、取得した補正後の咳症状が、上記絞り込みレベルとして指定された指定咳症状以上であるか否か判断する（ステップＳ２０１２）。補正後咳症状が指定咳症状以上であると判断した場合には、検知アラート出力機能部３５２１は、上記ステップＳ２００９の処理に進んで、検知人物カードを作成することとなる。補正後咳症状が指定咳症状以上ではないと判断した場合には、検知アラート出力機能部３５２１は、上記ステップＳ２０１０の処理に進む。
　そして、上記ステップＳ２０１０において所定数の検知人物カードを作成したと判断した場合には、検知アラート出力機能部３５２１は、作成した検知人物カードを検知日時順に並べ替えて、検知アラート画面を更新する（ステップＳ２０１３）。そして、検知アラート出力機能部３５２１は、上記ステップＳ２００５の処理に進んで、この更新した検知アラート画面を、ネットワークＮＥＴを介してＷｅｂブラウザ４１に送信して、そこに表示させることとなる。
　なお、所定数の検知人物カードを作成する前に、上記ステップＳ２００７で取得するべき処理対象の検知履歴テーブル３２３１の情報が無くなってしまった場合には、ステップＳ２０１３に進んで良い。
　図４２は、Ｗｅｂブラウザ４１に表示される検知アラート画面４２の一例を示す図である。検知アラート画面４２は、検知された人物毎の検知人物カード４２２と、絞り込み指示領域４２３と、を含む。なお、図２４においては「検知顔画像」及び「検知全身画像」として文字で示しているが、実際には、それらは文字ではなく画像であることに注意されたい。
　検知人物カード４２２は、その表示内容として、注意喚起ラベル４２２１、要注意者ＩＤ４２２２、追跡候補者画像４２２３、検知体温４２２４、検知脈拍数４２２５、検知咳症状４２２６、及び、追跡開始ボタン４２２７を含むことができる。
　ここで、注意喚起ラベル４２２１は、監視者の注意を促すためのメッセージであり、点滅表示灯の識別表示を行うようにしても良い。要注意者ＩＤ４２２２は、検知履歴テーブル３２３１から転記される識別情報である。追跡候補者画像４２２３は、その追跡候補者であると検知された人物の、検知履歴データ記憶部３１２に記憶された検知顔画像３１２１及び検知全身画像３１２３である。検知体温４２２４、検知脈拍数４２２５及び検知咳症状４２２６は、検知履歴テーブル３２３１から転記される補正後体温、補正後脈拍数及び補正後咳症状である。追跡開始ボタン４２２７は、当該人物を追跡する場合に押下されるボタンである。
　なお、この検知人物カード４２２は、追跡候補者として新たに特定人物が検知される毎に、検知アラート画面４２の最上位に表示されるように、古い検知人物カード４２２が下方にシフトされていく。同一人物については新たな検知人物カード４２２は追加されない。
　また、絞り込み指示領域４２３は、検知アラート画面４２に表示する検知人物カード４２２を絞り込むための指示を受け付けるための領域である。この絞り込み指示領域４２３は、体温提示閾値設定スライダ４２３１、脈拍数提示閾値設定スライダ４２３２及び咳症状閾値設定ボタン４２３３を含む。
　ここで、体温提示閾値設定スライダ４２３１は、上記ステップＳ２００８で用いる指定体温を示す提示閾値を設定するためにスライド操作されるスライダである。監視者によるこのスライダのスライド操作で指示される体温以上の補正後体温を含む検知人物カード４２１が検知アラート画面４２に表示されるようになる。図４２では、体温提示閾値設定スライダ４２３１は、３７．５℃である規定体温が設定されている状態を示している。
　同様に、脈拍数提示閾値設定スライダ４２３２は、上記ステップＳ２０１１で用いる指定脈拍数を示す提示閾値を設定するためにスライド操作されるスライダである。監視者によるこのスライダのスライド操作で指示される脈拍数以上の補正後脈拍数を含む検知人物カード４２１が検知アラート画面４２に表示されるようになる。図４２では、脈拍数提示閾値設定スライダ４２３２は、１１０である規定脈拍数が設定されている状態を示している。
　また、咳症状閾値設定ボタン４２３３は、本実施形態では咳症状の度合いを３段階で示すものとしているので、咳症状の段数に対応する３個のボタンを含む。監視者によるこの３個のボタンの押下操作に応じた指定段数以上の補正後咳症状を含む検知人物カード４２１が検知アラート画面４２に表示されるようになる。図４２の例では、咳症状閾値設定ボタン４２３３での段数として１段である規定咳症状が設定されている状態を示している。また、この咳症状閾値設定ボタン４２３３は、この指定段数をリセットする際に押下操作されるボタンであるリセットボタンも含む。
　図４２の例では、検知アラート画面４２は、３つの検知人物カード４２２を含む。最上部に提示された検知人物カード４２２は、体温提示閾値設定スライダ４２３１で指定される３７．５℃以上の体温である３７．６℃の体温、または、咳症状閾値設定ボタン４２３３で指定される１段以上の咳症状度合いである２段の咳症状が検知された追跡候補者を提示する検知人物カード４２２である。２段目に提示された検知人物カード４２２は、体温提示閾値設定スライダ４２３１で指定される３７．５℃以上の体温である３８．８℃の体温、脈拍数提示閾値設定スライダ４２３２で指定される１１０以上の脈拍である１１５の脈拍数、または、咳症状閾値設定ボタン４２３３で指定される１段以上の咳症状度合いである３段の咳症状が検知された追跡候補者を提示する検知人物カード４２２である。そして、３段目に提示された検知人物カード４２２は、脈拍数提示閾値設定スライダ４２３２で指定される１１０以上の脈拍である１１５の脈拍数、または、咳症状閾値設定ボタン４２３３で指定される１段以上の咳症状度合いである２段の咳症状が検知された追跡候補者を提示する検知人物カード４２２である。
　図４３は、体温提示閾値設定スライダ４２３１により３７．８℃、咳症状閾値設定ボタン４２３３で２段を指定した場合の検知アラート画面４２の例である。この例では、この体温と咳症状の提示閾値による絞り込みの結果、図４２の例において最上位に提示されていた追跡候補者の検知人物カード４２２が提示されなくなる。図４３の例では、図４２の例において２段目と３段目に提示されていた検知人物カード４２２が上方にシフトされ、新たに、体温提示閾値設定スライダ４２３１で指定される３７．８℃以上の体温である７．９℃の体温、または、咳症状閾値設定ボタン４２３３で指定される２段以上の咳症状度合いである２段の咳症状が検知された追跡候補者を提示する検知人物カード４２２が３段目に提示されている。
　（２－２）追跡動作
　追跡機能部３５３の画像登録機能部３５３１による画像登録処理の処理手順は、以下の点を除いて、第１実施形態と同様である。すなわち、第３実施形態においては、追跡開始ボタン４２２７の押下操作が行われたと判断した場合には、ステップＳ１２において、画像登録機能部３５３１は、検知アラート画面４２の要注意者ＩＤを有する検知履歴テーブル記憶部３２３のトラッキングＩＤに基づいて、検知履歴データ記憶部３１２から検知顔画像３１２１を追跡用顔画像として取得する。
　そして、ステップＳ１３において、画像登録機能部３５３１は、追跡用顔画像として取得された検知顔画像３１２１について検知履歴テーブル３２３１に記載された検知ＩＤで特定される検知全身画像３１２３を追跡用全身画像として取得する。或いは、画像登録機能部３５３１は、その検知ＩＤに基づいて、過去検索用データ記憶部３１１から全身画像３１１２を追跡用全身画像として取得する。
　さらに、ステップＳ１４において、画像登録機能部３５３１は、上記検知ＩＤに基づいて、検知履歴データ記憶部３１２から顔特徴量３１２２及び全身特徴量３１２４を追跡用顔特徴量及び追跡用全身特徴量として取得する。
　また、映像解析機能部２０の監視／追跡実行機能部２３による追跡処理の処理手順は、以下の点を除いて、図２５を参照して説明した第２実施形態と同様である。すなわち、第３実施形態では、ステップＳ１１８における時間間隔ｔ１は、例えば、数秒というように、任意の時間間隔とする。或いは、時間間隔ｔ１は、監視カメラ１０の監視画像の取得間隔の整数倍の時間間隔としても良い。
　Ｗｅｂサーバ３０の検知／追跡結果判定機能部３４による追跡結果判定処理、及び追跡機能部３５３の追跡アラート出力機能部３５３３による追跡アラート出力処理については、不審者ＩＤを要注意者ＩＤとすることを除いては、第２実施形態と同様である。また、全身画像類似度と全身照合閾値１～３それぞれとの比較、及び顔画像類似度と顔照合閾値１～３それぞれとの比較においては、大きいか否かではなく以上であるか否かの判断としても構わない。何れとするのかは、それぞれの閾値をどう選択するのかに依存する。
　図４４は、Ｗｅｂブラウザ４１に表示される追跡アラート画面４４の一例を示す図である。第３実施形態においては、追跡アラート画面４４は、以下の点が第２実施形態における追跡アラート画面４４と異なっている。すなわち、第３実施形態では、追跡アラート画面４４の最上位の追跡対象者情報領域４３１は、第２実施形態の注意喚起メッセージ４４１１及び不審者ＩＤ４４１２に代えて、注意喚起ラベル４４１６及び要注意者ＩＤ４４１７を含み、また、追跡情報４４１４の表示内容が異なっている。
　ここで、注意喚起ラベル４４１６は、監視者の注意を促すためのメッセージであり、点滅表示灯の識別表示を行うようにしても良い。要注意者ＩＤ４４１７は、管理テーブル３２４１から転記される識別情報である。追跡情報４４１４は、当該追跡対象者に関する情報であり、最上位の追跡対象者情報領域４３１の追跡情報４４１４とその他の追跡対象者情報領域４３１の追跡情報４４１４とでは、内容が異なっている。すなわち、最上位の追跡対象者情報領域４３１の追跡情報４４１４は、管理テーブル３２４１から転記される状態情報である補正後体温、補正後脈拍数及び補正後咳症状を含む。最上位以外の追跡対象者情報領域４３１の追跡情報４４１４は、これら状態情報に代えて、追跡状況を含んでいる。
　図４５は、Ｗｅｂブラウザ４１に表示される追跡アラート画面４４の別の例を示す図である。この例は、顔画像類似度選択ボタン４４３１で３段が指定され、全身画像類似度選択ボタン４４３３で１段が指定された場合を示している。ここで、押下操作されたボタンは、図４４ではハッチングにより示すように、識別表示される。顔画像類似度選択ボタン４４３１による指定と全身画像類似度選択ボタン４４３３による指定はアンド条件となり、追跡アラート画面４４には、両方で指定された段数に合致する追跡情報カード４４２のみが表示されるようになる。
　（２－３）過去検索動作
　追跡機能部３５３による追跡動作は、第２実施形態と同様である。
　（３）効果
　以上詳述したように第３実施形態に係る人物追跡装置としてのＷｅｂサーバ３０は、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれに含まれる人物の健康状態に係わる複数種類の状態情報を、監視画像のそれぞれから検出する情報抽出部としての人検知情報抽出機能部２２から、当該人検知情報抽出機能部２２が検出した複数種類の状態情報を取得し、それら取得した複数種類の状態情報に基づいて、監視画像のそれぞれに含まれる人物が規定の症状に該当する特定人物であるか否か判別する判別部としての検知／追跡結果判定機能部３４と、検知／追跡結果判定機能部３４の判別結果に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された人物の画像の内、インフルエンザ等の規定の症状に該当する特定人物の画像を、追跡対象者画像として登録する登録部としての画像登録機能部３５３１と、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから、画像登録機能部３５３１によって登録された追跡対象者画像に類似する人物の画像を検知する検知部としての検知／追跡結果判定機能部３４と、検知／追跡結果判定機能部３４が検知した追跡対象者画像に類似する人物の画像を提示するための追跡出力画面としての追跡アラート画面４４を生成する追跡出力画面生成部としての追跡アラート出力機能部３５３３と、を具備するようにしている。これにより、監視カメラ１０によって取得した監視画像から規定の症状に該当する人物を検知し、追跡できるようになる。
　なお、Ｗｅｂサーバ３０は、検知／追跡結果判定機能部３４の判別結果に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された人物の画像の内、規定の症状に該当する特定人物の画像を、状態情報と共に提示するための検知出力画面としての検知アラート画面４２を生成する検知出力画面生成部としての検知アラート出力機能部３５２１を更に具備するようにし、画像登録機能部３５３１は、この検知アラート出力機能部３５２１が生成した検知アラート画面４２を表示する監視端末４０から、検知アラート画面４２に提示された人物の画像の中から追跡を行うべき追跡対象者の画像の指定を取得し、その取得した指定された画像を追跡対象者画像として登録するようにしている。よって、検知アラート画面４２に複数の追跡候補者をその状態情報と共に提示することで、追跡しなければならない追跡対象者を監視者が容易に認識できるようになる。
　また、検知／追跡結果判定機能部３４は、取得した複数種類の状態情報の内の何れか一種類でも既定値以上であるとき、複数台の監視カメラ１０それぞれの監視画像から抽出された人物の画像が規定の症状に該当する特定人物の画像であると判別するようにしている。よって、少しでも規定の症状に該当する可能性がある人物を確実にピックアップすることができる。
　また、検知アラート出力機能部３５２１は、複数種類の状態情報それぞれの種類に対して指定された提示閾値を取得し、取得した提示閾値に基づいて、検知／追跡結果判定機能部３４が規定の症状に該当すると判別した特定人物の画像の中から、検知アラート画面４２に提示するべき画像を絞り込むようにしている。よって、監視者が提示閾値を指定することで、検知アラート画面４２に提示される規定の症状に該当する可能性がある人物を絞り込むことができ、追跡しなければならない追跡対象者を監視者が容易に認識できるようになる。
　この場合、検知アラート出力機能部３５２１は、取得したそれぞれの種類に対する提示閾値の中の何れか一つの提示閾値以上の状態情報を検出した特定人物の画像を、検知アラート画面４２に提示するべき画像として選択するようにしている。よって、少しでも規定の症状に該当する可能性がある人物を、絞り込み対象外としてしまうおそれがない。
　また、Ｗｅｂサーバ３０は、複数台の監視カメラ１０それぞれについて、状態情報を補正するための補正係数を記憶したカメラ情報記憶部としてのカメラ情報テーブル記憶部３２１を更に備え、検知／追跡結果判定機能部３４は、人検知情報抽出機能部２２から取得した状態情報を、このカメラ情報テーブル記憶部３２１に記憶された補正係数により補正し、補正後の状態情報に基づいて、人物の画像が規定の症状に該当する特定人物の画像であるか否か判別するようにしている。よって、監視カメラ１０の種類等の違いに依存する状態情報間のバラツキを減らすことができる。
　なお、状態情報は、監視画像からそれぞれ抽出される、体温、脈拍数及び咳症状の内の少なくとも一つを含むことができる。
　また、第３実施形態に係る人物追跡システムは、第３実施形態に係る人物追跡装置としてのＷｅｂサーバ３０と、複数台の監視カメラ１０と、監視者が操作する監視端末４０と、人検知情報抽出機能部２２を備える解析部としての映像解析機能部２０と、を備えることができる。
　また、第３実施形態に係る人物追跡方法は、複数台の監視カメラ１０が取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、コンピュータであるＷｅｂサーバ３０が、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれに含まれる人物の健康状態に係わる複数種類の状態情報を、監視画像のそれぞれから検出する情報抽出部としての人検知情報抽出機能部２２から、当該人検知情報抽出機能部２２が検出した複数種類の状態情報を取得し、それら取得した複数種類の状態情報に基づいて、監視画像のそれぞれに含まれる人物が規定の症状に該当する特定人物であるか否か判別し、その判別の結果に基づいて、複数台の監視カメラ１０それぞれの監視画像から抽出された人物の画像の内、規定の症状に該当する特定人物の画像を、追跡対象者画像としてメモリであるファイルサーバ３１に登録し、複数台の監視カメラ１０それぞれで定期的に取得した監視画像のそれぞれから、登録された追跡対象者画像に類似する人物の画像を検知し、それら検知した追跡対象者画像に類似する人物の画像を提示するための追跡アラート画面４４を生成するようにしている。これにより、監視カメラ１０によって取得した監視画像から規定の症状に該当する人物を検知し、追跡できるようになる。
　［第４実施形態］
　第３実施形態では、検知アラート画面４２に提示される検知人物カード４２２は、提示閾値の何れか以上の体温、脈拍数または咳症状に該当する人物のものとしたが、全ての提示閾値以上であることを条件としても良い。この場合、検知アラート出力機能部３５２１の処理手順を、図４１に示すフローチャートに示す手順に代えて、図４６に示すフローチャートに示す手順のようにすれば良い。すなわち、ステップＳ２００８において補正後体温が指定体温以上でないと判断した場合、ステップＳ２０１１において補正後脈拍数が指定脈拍数以上でないと判断した場合、或いは、ステップＳ２０１２において補正後咳症状が指定咳症状以上でないと判断した場合には、検知アラート出力機能部３５２１は、検知人物カードを作成せずに、ステップＳ２０１０の判断処理へと進む。そして、ステップＳ２００８において補正後体温が指定体温以上であると判断し、ステップＳ２０１１において補正後脈拍数が指定脈拍数以上であると判断し、且つ、ステップＳ２０１２において補正後咳症状が指定咳症状以上であると判断した場合にのみ、検知アラート出力機能部３５２１は、ステップＳ２００９に進んで、検知人物カードを作成するようにする。
　このように、第４実施形態においては、検知アラート出力機能部３５２１は、取得したそれぞれの種類に対する提示閾値の全てについて、提示閾値以上の状態情報を検出した特定人物の画像を、検知アラート画面４２に提示するべき画像として選択する。よって、規定の症状に該当する可能性が高い人物を容易に絞り込むことができる。
　［他の実施形態］
　前記実施形態では、全身画像特徴量及び顔画像特徴量として、人物自体の属性情報を数値化したものとしたが、これに限定するものではない。全身特徴量は、例えば、服装、持ち物（バッグの種類や色、ベビーカー、等）、装飾品（サングラス、マスク、等）、等の人に付随する付随情報を数値化したものを含んでも良い。さらに、全身特徴量は、発熱情報、脈拍、等の画像から得られる又は他のセンサから得られる人の内部情報を数値化したものを含んでも良い。また、顔特徴量は、装飾品（メガネ、帽子、等）等の顔に付随する付随情報を数値化したものを含んでも良い。
　また、全身画像特徴量及び顔画像特徴量は人物自体の属性情報を数値化したもののみとし、それら付随情報を数値化したものや人の内部情報を数値化したものを別の特徴量として、全身画像特徴量及び顔画像特徴量と同様の検知基準の一つとして、その別の特徴量を使用するようにしても良い。
　また、前記実施形態では、ファイルサーバ３１の過去検索用データ記憶部３１１に、過去検索用データとしてフレーム画像３１１１、全身画像３１１２、全身特徴量３１１３及び顔特徴量３１１４を記憶していくものとしたが、顔特徴量３１１４を抽出する元となった顔画像も記憶するようにしても良い。
　また、映像解析機能部２０は、監視画像であるフレーム画像から先ず人物の全身画像を抽出し、その抽出した全身画像から顔画像を抽出するものとしたが、これとは逆に、先ずフレーム画像から人物の顔画像を抽出し、その抽出した顔画像を含む全身画像をフレーム画像から抽出するものであっても良い。
　前記一実施形態では、監視カメラ１０で取得した監視画像から人物の全身画像を抽出し、その抽出した全身画像から人物の顔画像を抽出するものとして説明したが、これに限定するものではない。監視画像に人物の顔が写っている場合には、全身画像を抽出することなく顔画像を抽出するようにしても良い。
　また、図２４、図４２及び図４３に示した検知アラート画面４２、並びに、図３０、図３１、図４４及び図４５に示した追跡アラート画面４４についても、このレイアウト並びに表示内容に限定するものではない。例えば、注意段階表示４２１９、検知咳症状４２２６、顔注意段階表示４４２４及び全身注意段階表示４４２６を、複数の四角形を識別表示する個数で表しているが、例えばイエロー、オレンジ、レッドのように一つの四角形の色を変更する識別表示によって注意段階を表すようにしても良い。或いは、四角形の個数や色ではなく、Ａ～Ｃや１～３のように、注意段階を文字で表しても構わない。
　また、図１３乃至図１５、図２１乃至図２３、図２５乃至図２９、図３９乃至図４１、及び図４６のフローチャートに示した処理ステップの順序は一例であり、この順に限定するものではない。例えば、図１４において、ステップＳ２２及びＳ２３の処理とステップＳ２４及びＳ２５の処理とは、順番が逆でも良いし、並行して行っても良い。また、図１５において、ステップＳ３３及びＳ３４の処理とステップＳ３５及びＳ３６の処理とについても、その順番は逆でも良いし、並行して行っても良い。このように、各処理ステップは、先行の又は後続する処理ステップと齟齬が生じない限り、処理順序を変更して構わない。
　要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除しても良い。さらに、異なる実施形態に亘る構成要素を適宜組み合わせても良い。
　１…人物追跡システム
　１０…監視カメラ
　２０…映像解析機能部
　２１…画像取得モジュール
　２２…人検知情報抽出機能部
　２３…監視／追跡実行機能部
　３０…Ｗｅｂサーバ
　３１…ファイルサーバ
　３２…データベース（ＤＢ）サーバ
　３３…検索用人検知結果保存機能部
　３４…検知／追跡結果判定機能部
　３５…Ｗｅｂアプリケーション
　４０…監視端末
　４１…Ｗｅｂブラウザ
　４２…検知アラート画面
　４３…検知アラート出力画面
　４４…追跡アラート画面
　２２１…全身検出モジュール
　２２２…領域追跡モジュール
　２２３…全身特徴量抽出モジュール
　２２４…顔検出モジュール
　２２５…顔特徴量抽出モジュール
　２２６…体温検出モジュール
　２２７…脈拍検出モジュール
　２２８…咳検出モジュール
　２３１…全身照合モジュール
　２３２…顔照合モジュール
　２５１…追跡テーブル
　３０１Ａ…ハードウェアプロセッサ
　３０１Ｂ…プログラムメモリ
　３０２…記憶装置
　３０３…通信インタフェース装置
　３０４…バス
　３１１…過去検索用データ記憶部
　３１２…検知履歴データ記憶部
　３１３…管理データ記憶部
　３２１…カメラ情報テーブル記憶部
　３２２…過去検索用データテーブル記憶部
　３２３…検知履歴テーブル記憶部
　３２４…管理テーブル記憶部
　３２５…追跡テーブル記憶部
　３５１…ログイン機能部
　３５２…監視機能部
　３５３…追跡機能部
　３５４…過去検索機能部
　４２１，４２２…検知人物カード
　４２３，４４３…絞り込み指示領域
　４３１…追跡対象者情報領域
　４３２…経過時間情報領域
　４３３，４４２…追跡情報カード
　３１１１…フレーム画像
　３１１２…全身画像
　３１１３，３１２４，３１３４…全身特徴量
　３１１４，３１２２，３１３２…顔特徴量
　３１１５…体温
　３１１６…脈拍数
　３１１７…咳症状
　３１２１，４２１２…検知顔画像
　３１２３…検知全身画像
　３１３１…登録顔画像
　３１３３…登録全身画像
　３２１１…カメラ情報テーブル
　３２２１…過去検索用データテーブル
　３２３１…検知履歴テーブル
　３２４１…管理テーブル
　３２５１…追跡テーブル
　３５２１…検知アラート出力機能部
　３５３１…画像登録機能部
　３５３２…検知アラート出力機能部
　３５３３…追跡アラート出力機能部
　４２１１…監視対象者顔画像
　４２１３，４３１１…注意喚起メッセージ
　４２１４，４３１２…検知ＩＤ
　４２１５…類似度
　４２１６，４３１４…検知情報
　４２１７…追跡開始ボタン
　４２１８，４４１２…不審者ＩＤ
　４２１９…注意段階表示
　４２２１，４４１６…注意喚起ラベル
　４２２２，４４１７…要注意者ＩＤ
　４２２３…追跡候補者画像
　４２２４…検知体温
　４２２５…検知脈拍数
　４２２６…検知咳症状
　４２２７…追跡開始ボタン
　４２３１…体温提示閾値設定スライダ
　４２３２…脈拍数提示閾値設定スライダ
　４２３３…咳症状閾値設定ボタン
　４３１３，４４１３…登録画像
　４３１５…過去検知画像
　４３１６…不審者ＩＤ
　４３１７…危険度種別
　４３１８…説明文
　４３１９，４４１５…追跡停止ボタン
　４３３１，４４２１…検出日時情報
　４３３２，４４２２…検出カメラ場所情報
　４３３３…検出画像
　４３３４…画像類似度情報
　４３３５，４４２７…検出背景画像
　４４１１…注意喚起メッセージ
　４４１４…追跡情報
　４４２３…検出顔画像
　４４２４…顔注意段階表示
　４４２５…検出全身画像
　４４２６…全身注意段階表示
　４４３１…顔画像類似度選択ボタン
　４４３２…顔画像類似度選択リセットボタン
　４４３３…全身画像類似度選択ボタン
　４４３４…全身画像類似度選択リセットボタン
　ＮＥＴ…ネットワーク
　ＳＶ…サーバ装置

 

Claims (33)

  1. 　追跡を行うべき追跡対象者の顔画像及び全身画像を登録する登録部と、
    　複数台の監視カメラで取得する監視画像のそれぞれについて、前記登録された顔画像に類似する顔画像と、前記登録された顔画像を抽出した前記全身画像に類似する全身画像と、の少なくとも一方を検知する検知部と、
    　前記検知した顔画像及び全身画像の少なくとも一方を出力する出力部と、
    　を具備する、人物追跡装置。
  2. 　前記登録部は、
    　　監視者が操作する監視端末から前記追跡対象者の顔画像の指定を受け付け、
    　　前記指定された顔画像とその顔画像に対応する全身画像とを、追跡用顔画像及び追跡用全身画像として登録し、
    　前記検知部は、前記監視画像のそれぞれについて、前記登録された追跡用顔画像に類似する顔画像と、前記登録された追跡用全身画像に類似する全身画像と、の少なくとも一方を検知する、請求項１に記載の人物追跡装置。
  3. 　前記監視画像のそれぞれから人物の全身画像を抽出し、前記全身画像からその特徴量である全身特徴量及び人物の顔画像を抽出し、前記顔画像からその特徴量である顔特徴量を抽出する抽出部から、前記抽出部が抽出した前記全身画像、前記全身特徴量及び前記顔特徴量を取得し、それら取得した前記全身画像、前記全身特徴量及び前記顔特徴量を前記監視画像と共に蓄積する画像蓄積部を更に具備し、
    　前記登録部は、
    　　監視者が操作する監視端末から前記追跡対象者の顔画像の指定を受け付け、
    　　その指定された顔画像に対応する前記画像蓄積部に蓄積された前記全身画像、前記全身特徴量及び前記顔特徴量と、前記顔特徴量を抽出した顔画像とを、追跡用全身画像、追跡用全身特徴量、追跡用顔特徴量及び追跡用顔画像として登録し、
    　前記検知部は、
    　　前記登録部による登録の時点から前記画像蓄積部に蓄積されていく前記監視画像を照合用画像として、前記照合用画像それぞれについての、前記抽出部が抽出した前記全身特徴量と前記追跡用全身特徴量との類似度である全身画像類似度、及び、前記抽出部が抽出した前記顔特徴量と前記追跡用顔特徴量との類似度である顔画像類似度を算出する類似度算出部から、前記類似度算出部が算出した前記全身画像類似度及び前記顔画像類似度と前記追跡用顔画像及び前記追跡用全身画像とのセットを取得し、
    　　前記全身画像類似度及び前記顔画像類似度の少なくとも一方が、対応する閾値よりも大きいか否か判定し、
    　　前記閾値よりも大きい場合に、前記抽出部が前記照合用画像から抽出した全身画像である照合用全身画像及び顔画像である照合用顔画像の内の少なくとも一方の類似度に対応する画像と、前記照合用画像としての前記監視画像を取得した前記監視カメラの位置情報とを、前記登録部によって登録された前記追跡用全身画像及び前記追跡用顔画像と共に表示するための表示用結果を作成し、
    　前記出力部は、前記検知部によって作成された前記表示用結果を前記監視端末に送信して、前記監視端末に前記表示用結果を表示させる、請求項１に記載の人物追跡装置。
  4. 　前記検知部は、前記表示用結果に、さらに、前記全身画像類似度及び前記顔画像類似度の少なくとも一方の表示を含める、請求項３に記載の人物追跡装置。
  5. 　前記検知部は、前記表示用結果に、さらに、前記照合用画像の表示を含める、請求項３に記載の人物追跡装置。
  6. 　前記登録部は、前記登録の時点以前に前記画像蓄積部に蓄積されていた前記追跡対象者についての前記全身画像、前記全身特徴量及び前記顔特徴量の中から、特定時期に蓄積された前記全身画像、前記全身特徴量及び前記顔特徴量を、前記追跡用全身画像、前記追跡用全身特徴量及び前記追跡用顔特徴量として登録する、請求項３に記載の人物追跡装置。
  7. 　前記登録部は、前記登録の時点以前に前記画像蓄積部に蓄積されていた前記追跡対象者についての前記全身画像、前記全身特徴量及び前記顔特徴量の中から、登録する前記追跡用全身画像、前記追跡用全身特徴量及び前記追跡用顔特徴量の選択を、前記監視端末から受け付ける、請求項３に記載の人物追跡装置。
  8. 　請求項３乃至７の何れかに記載の人物追跡装置と、
    　前記複数台の監視カメラと、
    　前記監視者が操作する前記監視端末と、
    　前記抽出部及び前記類似度算出部を備える解析部と、
    　を具備する人物追跡システム。
  9. 　前記抽出部は、
    　　前記監視画像から前記全身画像を抽出する全身画像抽出部と、
    　　前記全身画像抽出部によって抽出された前記全身画像から前記全身特徴量を抽出する全身特徴量抽出部と、
    　　前記全身画像抽出部によって抽出された前記全身画像から前記顔画像を抽出する顔画像抽出部と、
    　　前記顔画像抽出部によって抽出された前記顔画像から前記顔特徴量を抽出する顔特徴量抽出部と、
    を含む、請求項８に記載の人物追跡システム。
  10. 　前記類似度算出部は、
    　　前記照合用画像それぞれについての前記全身特徴量抽出部によって抽出された前記全身特徴量と前記登録部によって登録された前記全身特徴量との類似度である全身画像類似度を算出する全身類似度算出部と、
    　　前記照合用画像のそれぞれについての前記顔特徴量抽出部によって抽出された前記顔特徴量と前記登録部によって登録された前記顔特徴量との類似度である顔画像類似度を算出する顔類似度算出部と、
    を含む、請求項９に記載の人物追跡システム。
  11. 　複数台の監視カメラが取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、
    　コンピュータが、
    　　前記複数台の監視カメラそれぞれで定期的に取得した前記監視画像を記憶装置に蓄積させ、
    　　前記監視画像のそれぞれから人物の全身画像を抽出し、前記全身画像からその特徴量である全身特徴量及び人物の顔画像を抽出し、前記顔画像からその特徴量である顔特徴量を抽出する抽出装置から、前記抽出装置が抽出した前記全身画像、前記全身特徴量及び前記顔特徴量を取得し、それら取得した前記全身画像、前記全身特徴量及び前記顔特徴量を前記記憶装置に蓄積させ、
    　　監視者が操作する監視端末からの追跡を行うべき追跡対象者の顔画像の指定を受け付け、
    　　その指定された顔画像に対応する前記記憶装置に蓄積された前記全身画像、前記全身特徴量及び前記顔特徴量と、前記顔特徴量を抽出した顔画像とを、追跡用全身画像、追跡用全身特徴量、追跡用顔特徴量及び追跡用顔画像として登録し、
    　　前記登録の時点から前記記憶装置に蓄積されていく前記監視画像を照合用画像として、前記照合用画像それぞれについての、前記抽出装置が抽出した前記全身特徴量と前記追跡用全身特徴量との類似度である全身画像類似度、及び、前記抽出装置が抽出した前記顔特徴量と前記追跡用顔特徴量との類似度である顔画像類似度を算出する類似度算出装置から、前記類似度算出装置が算出した前記全身画像類似度及び前記顔画像類似度と前記追跡用顔画像及び前記追跡用全身画像とのセットを取得し、
    　　前記照合用画像それぞれについての前記全身画像類似度及び前記顔画像類似度の少なくとも一方が、対応する閾値よりも大きいか否か判定し、
    　　前記全身画像類似度及び前記顔画像類似度の少なくとも一方が前記対応する閾値よりも大きい場合に、前記照合用画像から抽出した全身画像である照合用全身画像及び顔画像である照合用顔画像の内の少なくとも一方の類似度に対応する画像と、前記照合用画像としての前記監視画像を取得した前記監視カメラの位置情報とを、前記登録された前記追跡用全身画像及び前記追跡用顔画像と共に表示するための表示用結果を作成し、
    　　前記作成した前記表示用結果を前記監視端末に送信して、前記監視端末に前記表示用結果を表示させる、
    　人物追跡方法。
  12. 　互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部が算出した前記類似度のそれぞれに基づいて、前記対象画像を少なくとも一つの照合モデルのそれぞれについて、複数の段階に分類するための複数の閾値を、前記類似度算出手法毎に記憶した閾値記憶部と、　複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれから抽出した前記対象画像である類似度算出対象者の画像の、前記特定画像である特定人物の画像に対する少なくとも一つの類似度を前記類似度算出部から取得し、前記類似度算出部での前記少なくとも一つの類似度の算出に用いた前記類似度算出手法に対応して前記閾値記憶部に記憶されている前記複数の閾値に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の画像の中から、前記特定人物の画像に類似する画像を検出すると共に、その検出した前記類似度算出対象者の画像が複数の注意段階の何れであるか検出する検出部と、
    　を具備する、人物検出装置。
  13. 　前記検出部が検出した前記特定人物の画像に類似する前記画像を、前記検出部が検出した前記注意段階を示す段階表示と共に提示するための出力画面を生成する出力画面生成部をさらに具備する、請求項１２に記載の人物検出装置。
  14. 　前記複数の閾値は、前記対象画像である前記類似度算出対象者の画像が前記特定人物の画像であるか否か分類するための第１の閾値と、前記類似度算出対象者の画像が前記特定人物の画像である場合に、前記類似度算出対象者の画像を前記複数の段階に分類するための少なくとも一つの第２の閾値と、を含む、請求項１２又は１３に記載の人物検出装置。
  15. 　請求項１３に記載の人物検出装置と、
    　前記人物検出装置によって前記出力画面に前記段階表示と共に提示された前記特定人物の画像に類似する複数の前記類似度算出対象者の画像の中から、追跡を行うべき追跡対象者の画像の指定を、監視者が操作する監視端末から受け付け、その指定された画像を追跡用画像として登録し、前記登録された前記追跡を行うべき前記追跡対象者の画像である前記追跡用画像を前記特定画像として、前記類似度算出部に、少なくとも二つ以上の前記類似度算出手法を用いて前記類似度算出対象者の画像の前記類似度を少なくとも二つ抽出させる登録部と、
    　前記検出部が、前記類似度算出部から取得した前記少なくとも二つ以上の類似度から検出した前記追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像それぞれを、前記検出部が検出した前記注意段階を示す段階表示と共に提示するための追跡出力画面を生成する追跡出力画面生成部と、
    　を具備する、人物追跡装置。
  16. 　互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部が算出した前記類似度のそれぞれに基づいて、前記対象画像を複数の段階に分類するための複数の閾値を、前記類似度算出手法毎に記憶した閾値記憶部と、
    　監視者が操作する監視端末から指定された追跡を行うべき追跡対象者の画像を、前記特定画像として登録する登録部と、
    　複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれから抽出した前記対象画像である類似度算出対象者の画像の、前記特定画像に対する少なくとも一つの類似度を前記類似度算出部から取得し、前記類似度算出部での前記少なくとも一つの類似度の算出に用いた前記類似度算出手法に対応して前記閾値記憶部に記憶されている前記複数の閾値に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の画像の中から、前記追跡対象者の画像に類似する画像を検出すると共に、その検出した前記類似度算出対象者の画像が複数の注意段階の何れであるのか検出する検出部と、
    　前記検出部が、前記類似度算出部から取得した前記少なくとも二つ以上の類似度から検出した前記追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像を、前記注意段階を示す段階表示と共に提示するための追跡出力画面を生成する追跡出力画面生成部と、
    　を具備する、人物追跡装置。
  17. 　前記追跡出力画面生成部は、前記監視端末からの段数指定を受けて、前記検出部が検出した前記類似度算出対象者の前記画像の内、前記指定された段階に対応する閾値以上の類似度を有する画像を、前記段階表示と共に提示する絞り込み出力画面を生成する、請求項１５又は１６に記載の人物追跡装置。
  18. 　請求項１５乃至１７の何れかに記載の人物追跡装置と、
    　前記複数台の監視カメラと、
    　前記監視者が操作する前記監視端末と、
    　前記類似度算出部を備える解析部と、
    　を具備する人物追跡システム。
  19. 　複数台の監視カメラが取得した監視画像から特定人物を検出する人物検出方法であって、
    　コンピュータが、
    　　互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部が算出した前記類似度のそれぞれに基づいて、前記対象画像を複数の段階に分類するための複数の閾値を、前記類似度算出手法毎にメモリに記憶させておき、
    　　複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれから抽出した前記対象画像である類似度算出対象者の画像の、前記特定画像である特定人物の画像に対する少なくとも一つの類似度を前記類似度算出部から取得し、
    　　前記類似度算出部での前記少なくとも一つの類似度の算出に用いた前記類似度算出手法に対応して前記メモリに記憶されている前記複数の閾値に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の画像の中から、前記特定人物の画像に類似する画像を検出すると共に、その検出した前記類似度算出対象者の画像が複数の注意段階の何れであるのか検出する、
    　人物検出方法。
  20. 　複数台の監視カメラが取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、
    　コンピュータが、
    　　請求項１９に記載の人物検出方法によって検出した前記特定人物の画像に類似する前記画像を、前記検出した前記注意段階を示す段階表示と共に提示するための出力画面を生成し、前記出力画面に前記段階表示と共に提示された前記特定人物の画像に類似する複数の類似度算出対象者の画像の中から、追跡を行うべき追跡対象者の画像の指定を、監視者が操作する監視端末から受け付け、
    　　その指定された画像を追跡用画像として前記メモリに登録し、
    　　前記メモリに登録された前記追跡を行うべき前記追跡対象者の画像である前記追跡用画像を前記特定画像として、前記類似度算出部に、少なくとも二つ以上の前記類似度算出手法を用いて前記類似度算出対象者の画像の前記類似度を少なくとも二つ抽出させ、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の、前記特定画像である前記追跡対象者の画像に対する前記少なくとも二つの類似度を前記類似度算出部から取得し、
    　　前記類似度算出部での前記類似度のそれぞれの算出に用いた前記類似度算出手法に対応して前記メモリに記憶されている前記複数の閾値に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の画像の中から、前記追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像を検出すると共に、その検出した前記類似度算出対象者の画像が前記複数の注意段階の何れであるのか検出し、前記類似度算出部から取得した前記少なくとも二つ以上の類似度から検出した前記追跡対象者の画像に類似する前記二つ以上の類似度算出対象者の画像それぞれを、前記検出した前記注意段階を示す段階表示と共に提示する追跡出力画面を生成する、
    　人物追跡方法。
  21. 　複数台の監視カメラが取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、
    　コンピュータが、
    　　互いに異なる判断基準を有する二つ以上の類似度算出手法のそれぞれを用いて特定画像に対する対象画像の類似度を二つ以上算出する類似度算出部が算出した前記類似度のそれぞれに基づいて、前記対象画像を複数の段階に分類するための複数の閾値を、前記類似度算出手法毎にメモリに記憶させておき、
    　　監視者が操作する監視端末から指定された追跡を行うべき追跡対象者の画像を、前記特定画像として前記メモリに登録し、
    　　複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれから抽出した前記対象画像である類似度算出対象者の画像の、前記特定画像に対する少なくとも一つの類似度を前記類似度算出部から取得し、
    　　前記類似度算出部での前記類似度の算出に用いた前記類似度算出手法に対応して前記メモリに記憶されている前記複数の閾値に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記類似度算出対象者の画像の中から、前記追跡対象者の画像に類似する画像を検出すると共に、その検出した前記類似度算出対象者の画像が複数の注意段階の何れであるのか検出し、前記類似度算出部から取得した前記少なくとも二つ以上の類似度から検出した前記追跡対象者の画像に類似する二つ以上の類似度算出対象者の画像を、前記検出した前記注意段階を示す段階表示と共に提示するための追跡出力画面を生成する、
    　人物追跡方法。
  22. 　請求項１２乃至１４の何れかに記載の人物検出装置が具備する前記各部による処理を、前記人物検出装置が備えるプロセッサに実行させる人物検出プログラム。
  23. 　複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれに含まれる人物の健康状態に係わる複数種類の状態情報を、前記監視画像のそれぞれから検出する情報抽出部から、前記情報抽出部が検出した前記複数種類の状態情報を取得し、前記取得した前記複数種類の状態情報に基づいて、前記監視画像のそれぞれに含まれる前記人物が規定の症状に該当する特定人物であるか否か判別する判別部と、
    　前記判別部の判別結果に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された人物の画像の内、前記規定の症状に該当する前記特定人物の画像を、追跡対象者画像として登録する登録部と、
    　前記複数台の監視カメラそれぞれで定期的に取得した前記監視画像のそれぞれから、前記登録部によって登録された前記追跡対象者画像に類似する人物の画像を検知する検知部と、
    　前記検知部が検知した前記追跡対象者画像に類似する人物の画像を提示するための追跡出力画面を生成する追跡出力画面生成部と、
    　を具備する、人物追跡装置。
  24. 　前記判別部の判別結果に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された人物の画像の内、前記規定の症状に該当する前記特定人物の画像を、前記状態情報と共に提示するための検知出力画面を生成する検知出力画面生成部を更に具備し、　前記登録部は、前記検知出力画面生成部が生成した前記検知出力画面を表示する監視端末から、前記検知出力画面に提示された人物の画像の中から追跡を行うべき追跡対象者の画像の指定を取得し、前記取得した前記指定された画像を追跡対象者画像として登録する、請求項２３に記載の人物追跡装置。
  25. 　前記判別部は、前記取得した前記複数種類の状態情報の内の何れか一種類でも既定値以上であるとき、前記複数台の監視カメラそれぞれの前記監視画像から抽出された前記人物の画像が前記規定の症状に該当する前記特定人物の画像であると判別する、請求項２４に記載の人物追跡装置。
  26. 　前記検知出力画面生成部は、前記複数種類の状態情報それぞれの種類に対して指定された提示閾値を取得し、前記取得した前記提示閾値に基づいて、前記判別部が前記規定の症状に該当すると判別した前記特定人物の画像の中から、前記検知出力画面に提示するべき画像を絞り込む、請求項２４又は２５に記載の人物追跡装置。
  27. 　前記検知出力画面生成部は、前記取得した前記それぞれの種類に対する前記提示閾値の中の何れか一つの前記提示閾値以上の状態情報を検出した前記特定人物の画像を、前記検知出力画面に提示するべき画像として選択する、請求項２６に記載の人物追跡装置。
  28. 　前記検知出力画面生成部は、前記取得した前記それぞれの種類に対する前記提示閾値の全てについて、前記提示閾値以上の状態情報を検出した前記特定人物の画像を、前記検知出力画面に提示するべき画像として選択する、請求項２６に記載の人物追跡装置。
  29. 　前記複数台の監視カメラそれぞれについて、前記状態情報を補正するための補正係数を記憶したカメラ情報記憶部を更に備え、
    　前記判別部は、前記情報抽出部から取得した前記状態情報を、前記カメラ情報記憶部に記憶された前記補正係数により補正し、補正後の状態情報に基づいて、前記人物の画像が前記規定の症状に該当する前記特定人物の画像であるか否か判別する、請求項２３乃至２８の何れかに記載の人物追跡装置。
  30. 　前記状態情報は、前記監視画像からそれぞれ抽出される、体温、脈拍数及び咳症状の内の少なくとも一つを含む、請求項２３乃至２９の何れかに記載の人物追跡装置。
  31. 　請求項２３乃至３０の何れかに記載の人物追跡装置と、
    　前記複数台の監視カメラと、
    　監視者が操作する監視端末と、
    　前記情報抽出部を備える解析部と、
    　を具備する人物追跡システム。
  32. 　複数台の監視カメラが取得した監視画像から追跡を行うべき追跡対象者を追跡する人物追跡方法であって、
    　コンピュータが、
    　　複数台の監視カメラそれぞれで定期的に取得した監視画像のそれぞれに含まれる人物の健康状態に係わる複数種類の状態情報を、前記監視画像のそれぞれから検出する情報抽出部から、前記情報抽出部が検出した前記複数種類の状態情報を取得し、前記取得した前記複数種類の状態情報に基づいて、前記監視画像のそれぞれに含まれる前記人物が規定の症状に該当する特定人物であるか否か判別し、
    　　前記判別の結果に基づいて、前記複数台の監視カメラそれぞれの前記監視画像から抽出された人物の画像の内、前記規定の症状に該当する前記特定人物の画像を、追跡対象者画像としてメモリに登録し、
    　　前記複数台の監視カメラそれぞれで定期的に取得した前記監視画像のそれぞれから、前記登録された前記追跡対象者画像に類似する人物の画像を検知し、
    　　前記検知した前記追跡対象者画像に類似する人物の画像を提示するための追跡出力画面を生成する、
    　人物追跡方法。
  33. 　請求項１乃至７、１５乃至１７、２３乃至３０の何れかに記載の人物追跡装置が具備する前記各部による処理を、前記人物追跡装置が備えるプロセッサに実行させる人物追跡プログラム。

     
PCT/JP2021/028994 2020-08-07 2021-08-04 人物を検出または追跡する装置、システム、方法及びプログラム WO2022030558A1 (ja)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2020-135133 2020-08-07
JP2020135133A JP2022030846A (ja) 2020-08-07 2020-08-07 人物追跡装置、人物追跡システム、人物追跡方法及び人物追跡プログラム
JP2020135146A JP2022030852A (ja) 2020-08-07 2020-08-07 人物検出装置、人物追跡装置、人物追跡システム、人物検出方法、人物追跡方法、人物検出プログラム及び人物追跡プログラム
JP2020135151A JP2022030853A (ja) 2020-08-07 2020-08-07 人物追跡装置、人物追跡システム、人物追跡方法及び人物追跡プログラム
JP2020-135146 2020-08-07
JP2020-135151 2020-08-07

Publications (1)

Publication Number Publication Date
WO2022030558A1 true WO2022030558A1 (ja) 2022-02-10

Family

ID=80117497

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/028994 WO2022030558A1 (ja) 2020-08-07 2021-08-04 人物を検出または追跡する装置、システム、方法及びプログラム

Country Status (1)

Country Link
WO (1) WO2022030558A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014050518A1 (ja) * 2012-09-28 2014-04-03 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2015130155A (ja) * 2013-12-02 2015-07-16 Ｌｙｋａｏｎ株式会社 防犯システム
JP2018037075A (ja) * 2016-08-29 2018-03-08 パナソニックＩｐマネジメント株式会社 不審者通報システム及び不審者通報方法
WO2020017190A1 (ja) * 2018-07-18 2020-01-23 株式会社日立製作所 映像解析装置、人物検索システムおよび人物検索方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014050518A1 (ja) * 2012-09-28 2014-04-03 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2015130155A (ja) * 2013-12-02 2015-07-16 Ｌｙｋａｏｎ株式会社 防犯システム
JP2018037075A (ja) * 2016-08-29 2018-03-08 パナソニックＩｐマネジメント株式会社 不審者通報システム及び不審者通報方法
WO2020017190A1 (ja) * 2018-07-18 2020-01-23 株式会社日立製作所 映像解析装置、人物検索システムおよび人物検索方法

Similar Documents

Publication Publication Date Title
US10395262B2 (en) Systems and methods for sensor data analysis through machine learning
US9922271B2 (en) Object detection and classification
JP6013241B2 (ja) 人物認識装置、及び方法
US9530144B2 (en) Content output device, content output method, content output program, and recording medium having content output program recorded thereon
JP5740210B2 (ja) 顔画像検索システム、及び顔画像検索方法
JP5793353B2 (ja) 顔画像検索システム、及び顔画像検索方法
JP2019532532A (ja) プライバシーの保護を伴う人物の識別しおよび／または痛み、疲労、気分、および意図の識別および定量化のためのシステムおよび方法
US20180247361A1 (en) Information processing apparatus, information processing method, wearable terminal, and program
WO2014050518A1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP6172551B1 (ja) 画像検索装置、画像検索システム及び画像検索方法
US11295139B2 (en) Human presence detection in edge devices
JP6611772B2 (ja) 制御方法、情報処理装置及び制御プログラム
JPWO2018180588A1 (ja) 顔画像照合システムおよび顔画像検索システム
CN109074498A (zh) 用于pos区域的访问者跟踪方法和系统
JP2015090579A (ja) 行動分析システム
WO2022030558A1 (ja) 人物を検出または追跡する装置、システム、方法及びプログラム
JP2022030853A (ja) 人物追跡装置、人物追跡システム、人物追跡方法及び人物追跡プログラム
JP2022030852A (ja) 人物検出装置、人物追跡装置、人物追跡システム、人物検出方法、人物追跡方法、人物検出プログラム及び人物追跡プログラム
JP5003536B2 (ja) サービス支援システム
CN110717358B (zh) 访客人数统计方法、装置、电子设备及存储介质
WO2020240834A1 (ja) 不正推定システム、不正推定方法、及びプログラム
JP2022030846A (ja) 人物追跡装置、人物追跡システム、人物追跡方法及び人物追跡プログラム
JP2015162241A (ja) 情報提供効果を測定する測定システム及び情報提供効果測定方法
EP4040380A1 (en) Information processing device, information processing program, and information processing method
JP6923011B2 (ja) 移動時間記憶システム、移動時間記憶方法および移動時間記憶プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21852584

Country of ref document: EP

Kind code of ref document: A1