JP2020064531A5 - - Google Patents

Description

上記課題を解決するために、本発明の情報処理装置は以下の構成を備える。すなわち、所定領域に入場または退場するためのゲートを含む画像から人物を検出する検出手段と、前記検出手段により検出される人物を追尾する追尾手段と、前記追尾手段により追尾される人物が、前記所定領域の外から内へ向かう方向である第１方向にゲートを通過した第１時刻を取得する第１取得手段と、前記追尾手段により前記所定領域の外にいる状態から追尾される人物を含む複数の画像から、所定の条件を満たす画像を当該人物の登録画像として抽出する抽出手段と、前記登録画像と、当該登録画像に対応する人物が前記第１方向にゲートを通過した前記第１時刻と、を前記追尾手段による当該人物の追尾により関連付ける関連付け手段と、前記追尾手段により前記所定領域の内にいる状態から追尾される人物が撮像された複数の画像のうち少なくとも１つの画像と、前記登録画像と、に基づいて、当該人物と前記登録画像に対応する人物とが同一人物かを照合する照合手段と、前記照合手段により照合された人物が、前記所定領域の内から外へ向かう方向である第２方向にゲートを通過した第２時刻を取得する第２取得手段と、前記第１時刻と、前記第２時刻と、に基づいて、前記照合手段により照合された人物が前記所定領域に滞留した時間である滞留時間を導出する導出手段と、を有することを特徴とする。

Claims (13)

1. 所定領域に入場または退場するためのゲートを含む画像から人物を検出する検出手段と、
   前記検出手段により検出される人物を追尾する追尾手段と、
   前記追尾手段により追尾される人物が、前記所定領域の外から内へ向かう方向である第１方向にゲートを通過した第１時刻を取得する第１取得手段と、
   前記追尾手段により前記所定領域の外にいる状態から追尾される人物を含む複数の画像から、所定の条件を満たす画像を当該人物の登録画像として抽出する抽出手段と、
   前記登録画像と、当該登録画像に対応する人物が前記第１方向にゲートを通過した前記第１時刻と、を前記追尾手段による当該人物の追尾により関連付ける関連付け手段と、
   前記追尾手段により前記所定領域の内にいる状態から追尾される人物が撮像された複数の画像のうち少なくとも１つの画像と、前記登録画像と、に基づいて、当該人物と前記登録画像に対応する人物とが同一人物かを照合する照合手段と、
   前記照合手段により照合された人物が、前記所定領域の内から外へ向かう方向である第２方向にゲートを通過した第２時刻を取得する第２取得手段と、
   前記第１時刻と、前記第２時刻と、に基づいて、前記照合手段により照合された人物が前記所定領域に滞留した時間である滞留時間を導出する導出手段と、を有することを特徴とする情報処理装置。
2. 前記所定の条件を満たす画像は、前記追尾手段により追尾される人物を含む画像のうち、当該人物の顔の映り度合を示す情報である顔尤度が第１閾値以上の画像であることを特徴とする請求項１に記載の情報処理装置。
3. 前記所定の条件を満たす画像は、前記追尾手段により追尾される人物を含む画像のうち、当該人物の顔の映り度合を示す情報である顔尤度が第１閾値以上かつ顔尤度が最も高い画像であることを特徴とする請求項１または２に記載の情報処理装置。
4. 前記照合手段は、前記追尾手段により前記所定領域の内にいる状態から追尾される人物が撮像された複数の画像のうち少なくとも１つの画像から抽出された当該人物の特徴量と、前記登録画像に対応する人物の特徴量と、に基づいて、前記抽出された人物と前記登録画像に対応する人物とが同一人物かを照合することを特徴とする請求項１乃至３のいずれか一項に記載の情報処理装置。
5. 前記照合手段は、前記追尾手段により前記所定領域の内にいる状態から追尾される人物が撮像された複数の画像のうち少なくとも１つの画像から抽出された当該人物の特徴量と、前記登録画像に対応する人物の特徴量とを比較して算出された人物の一致度を示す認証スコアが第２閾値より大きい場合に、当該人物と前記登録画像に対応する人物とが同一人物であると照合することを特徴とする請求項４に記載の情報処理装置。
6. 前記抽出手段は、さらに、前記追尾手段により前記所定領域の内にいる状態から追尾される人物を含む複数の画像から、所定の条件を満たす画像を抽出し、
   前記照合手段は、前記抽出手段により抽出された当該画像から抽出された当該人物の特徴量と、前記登録画像に対応する人物の特徴量と、に基づいて、当該人物と前記登録画像に対応する人物とが同一人物かを照合することを特徴とする請求項４または５に記載の情報処理装置。
7. 前記照合手段は、前記追尾手段により前記所定領域の内にいる状態から追尾される人物が所定の位置を通過した場合に、認証スコアとの比較に用いる閾値を前記第２閾値より小さい第３閾値に変更し、前記追尾手段により前記所定領域の内にいる状態から追尾される人物が撮像された複数の画像のうち少なくとも１つの画像から抽出された当該人物の特徴量と、前記登録画像に対応する人物の特徴量とを比較して算出された人物の一致度を示す認証スコアが前記第３閾値より大きい場合に、当該人物と前記登録画像に対応する人物とが同一人物であると照合することを特徴とする請求項５に記載の情報処理装置。
8. 前記照合手段により照合された人物を含む画像に前記滞留時間を重畳して表示させる制御手段を更に有することを特徴とする請求項１乃至７のいずれか一項に記載の情報処理装置。
9. 前記追尾手段により追尾される人物が前記第１方向にゲートを通過したことを判定する第１判定手段と、
   前記追尾手段により追尾される人物が前記第２方向にゲートを通過したことを判定する第２判定手段と、を更に有し、
   前記第１取得手段は、前記第１判定手段によって前記追尾手段により追尾される人物が前記第１方向にゲートを通過したことが判定された場合に、当該人物を撮像した画像の撮像時刻を前記第１時刻として取得し、
   前記第２取得手段は、前記第２判定手段によって前記追尾手段により追尾される人物が前記第２方向にゲートを通過したことが判定された場合に、当該人物を撮像した画像の撮像時刻を前記第２時刻として取得することを特徴とする請求項１乃至８のいずれか一項に記載の情報処理装置。
10. 前記関連付け手段は、前記第２判定手段の判定結果に基づいて、前記追尾手段により追尾される人物が前記第２方向にゲートを通過したことを示す退場フラグ、を前記追尾手段により追尾される人物に対して関連付けし、
    前記導出手段は、前記退場フラグが関連付けられた人物のうち、前記照合手段によって照合された人物がいる場合は前記滞留時間を導出し、前記退場フラグが関連付けられた人物のうち、前記照合手段によって照合された人物がいない場合は前記滞留時間を導出しないことを特徴とする請求項９に記載の情報処理装置。
11. 所定領域に入場または退場するためのゲートを含む画像を撮像する撮像手段と、
    前記撮像手段により撮像された画像から人物を検出する検出手段と、
    前記検出手段により検出される人物を追尾する追尾手段と、
    前記追尾手段により追尾される人物が、前記所定領域の外から内へ向かう方向である第１方向にゲートを通過した第１時刻を取得する第１取得手段と、
    前記追尾手段により前記所定領域の外にいる状態から追尾される人物を含む複数の画像から、所定の条件を満たす画像を当該人物の登録画像として抽出する抽出手段と、
    前記登録画像と、当該登録画像に対応する人物が前記第１方向にゲートを通過した前記第１時刻と、を前記追尾手段による当該人物の追尾により関連付ける関連付け手段と、
    前記追尾手段により前記所定領域の内にいる状態から追尾される人物が撮像された複数の画像のうち少なくとも１つの画像と、前記登録画像と、に基づいて、当該人物と前記登録画像に対応する人物とが同一人物かを照合する照合手段と、
    前記照合手段により照合された人物が、前記所定領域の内から外へ向かう方向である第２方向にゲートを通過した第２時刻を取得する第２取得手段と、
    前記第１時刻と、前記第２時刻と、に基づいて、前記照合手段により照合された人物が前記所定領域に滞留した時間である滞留時間を導出する導出手段と、を有することを特徴とするシステム。
12. 所定領域に入場または退場するためのゲートを含む画像から人物を検出する検出工程と、
    前記検出工程により検出される人物を追尾する追尾工程と、
    前記追尾工程により追尾される人物が、前記所定領域の外から内へ向かう方向である第１方向にゲートを通過した第１時刻を取得する第１取得工程と、
    前記追尾工程により前記所定領域の外にいる状態から追尾される人物を含む複数の画像から、所定の条件を満たす画像を当該人物の登録画像として抽出する抽出工程と、
    前記登録画像と、当該登録画像に対応する人物が前記第１方向にゲートを通過した前記第１時刻と、を前記追尾工程による当該人物の追尾により関連付ける第１関連付け工程と、
    前記所定領域の内にいる状態から追尾される人物が撮像された複数の画像のうち少なくとも１つの画像と、前記登録画像と、に基づいて、当該人物と前記登録画像に対応する人物とが同一人物かを照合する照合工程と、
    前記照合手段により照合された人物が、前記所定領域の内から外へ向かう方向である第２方向にゲートを通過した第２時刻を取得する第２の取得工程と、
    前記照合工程により照合された人物と、当該人物が前記第２方向にゲートを通過した前記第２時刻と、を前記追尾工程による追尾により関連付ける第２関連付け工程と、
    前記第１時刻と、前記第２時刻と、に基づいて、前記照合工程により照合された人物が前記所定領域に滞留した時間である滞留時間を導出する導出工程とを有することを特徴とする情報処理方法。
13. コンピュータを、請求項１乃至１０のいずれか一項に記載された情報処理装置の各手段として機能させるためのプログラム。