JP2021535667A - 事象を管理するための注目期間及び少なくとも１つの注目領域を決定する方法、装置及びプログラム - Google Patents

Abstract

本方法は、一連の画像内の対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、対象人物の２以上の出現の１組の座標は第１の経路を規定する、ステップと、一連の画像内の関係人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、当該関係人物は対象人物に関係し、関係人物の２以上の出現の１組の座標は第２の経路を規定する、ステップと、第１の経路と第２の経路の間の１以上の最小距離を決定して、少なくとも１つの注目領域を決定するステップと、対象人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと、関係人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップとを含む。【選択図】図６

Description

本発明は、事象を管理するための注目期間及び少なくとも１つの潜在的な注目領域を決定する方法に関する。特に、本発明は、監視システムを利用して、不審人物の同時出現を含む不審な行動の注目期間及び少なくとも１つの潜在的な注目領域を決定することに関する。

近年、公共の場における犯罪組織グループの活動が増加している。ショッピングモール、駅、学校等の公共の場は、一般に開放されており、セキュリティレベルが低いため、ソフトターゲットと考えられている。攻撃又は犯罪行為を企てている犯人は、計画段階の初期において、潜在的なソフトターゲットを複数回に亘って詳細に監視し、これらのソフトターゲットの適合性と、攻撃又は犯罪の成功率を評価する傾向がある。また、犯人は、不審物／違法な物を「デッドドロップ」する等の他の付随的な行動を行い、彼らのネットワークの他の仲間と情報を交換するために、公共の場を選ぶこともよくある。犯人の同時出現の検出を目的とした既存の解決手段が存在する。しかしながら、多くの場合、犯人は、彼らの足跡や互いの関係を隠すため、同時に出現することは滅多にない。公共の場における群衆の賑わいにより、これらの内密な行動が容易に検出されないことが多く、このような公共の場に犯人が現れても、彼らの行動が不審であると分からず、不自然に見えないため、そのような内密な行動を検出するのは困難である。

犯人とその仲間のネットワークを発見し、内密な行動を検出することは、組織犯罪と戦い、攻撃の発生を防ぐために重要である。公共の場で犯罪が発生する傾向が強くなっているため、政府及び警察は、犯罪の防止及び事後の調査に役立てるために、公共の場所を監視する映像監視システムを配備している。人工知能（ＡＩ）を利用した防犯は、未だ研究段階及び実験段階にあるが、警察は、スマート映像監視システムを活用して、攻撃後の捜査又は犯罪捜査を加速化することを検討している。

監視システムが提供したタイムスタンプと撮影（場所）画像に基づいて、不審者と、その明らかな仲間を検出する解決手段があり、これは、捜査において、警察が注目すべき人物、場所及び期間について重要な手掛かりを提供する。しかしながら、これらのデータは、意義のある方法で処理や分類、表示がされない。録画された映像における潜在的な疑わしい仲間、地域及び期間の絞り込みや拡大に有用な既存の解決手段は存在しない。本発明の目的は、上述した１以上の既存の課題を実質的に解決することであり、監視システムを利用して、疑わしい仲間の同時出現等の不審な行動について、注目期間及び少なくとも１つの潜在的な注目領域を決定する。

本開示の第１の態様によれば、事象を管理するための注目期間及び少なくとも１つの注目領域を決定する方法が提供され、この方法は、
一連の画像内の対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、当該１組の座標は対象人物の２以上の出現の第１の経路を規定する、ステップと、
一連の画像内の関係人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、当該関係人物は対象人物に関係し、当該関係人物の２以上の出現の１組の座標は第２の経路を規定する、ステップと、
第１の経路と第２の経路の間の１以上の最小距離を決定して、少なくとも１つの注目領域を決定するステップと、
対象人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと、
第１の経路と第２の経路の間の１以上の最小距離のうちの少なくとも１つが既定の距離以下であると判断された場合に、関係人物の最初の出現のタイムスタンプ及び最後の出現のタイムスタンプを決定して、注目期間を決定するステップとを含む。

一実施形態では、この方法は、
撮影装置から、事象に関連する複数の画像入力を受信するステップと、
事象に関連する複数の画像入力のそれぞれから１以上の特徴情報を識別するステップと、
識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性があるか否か判断するステップとを含み、特徴情報は、顔情報及び体の動き情報を含む。

一実施形態では、この方法は、識別された１以上の特徴情報の１つが、対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを検索するステップを含み、検索された受信した画像入力の少なくとも１つは、対象人物の特徴情報に対応する可能性のある特徴情報に関連する。

一実施形態では、この方法は、識別された１以上の特徴情報の１つが、対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを、検索期間内に検索するステップを含み、検索された受信した画像入力のうちの少なくとも１つは、対象人物の特徴情報に対応しない可能性のある特徴情報に関連し、検索期間は、対象人物の最初の出現前の既定期間から開始し、最後の出現後の既定期間で終了する。

一実施形態では、この方法は、
第１の経路における対象人物の別の出現又は第２の経路における関係人物の別の出現に対応する別の座標の組を決定するステップと、
第１の経路及び第２の経路の一方から他方の経路の位置への１組以上の座標を決定して、１以上の最小距離を決定するステップとを含む。

一実施形態では、この方法は、第１の経路と第２の経路の間の決定された１以上の最小距離が既定の距離以下であるか否か判断して、１以上の最小点を決定するステップを含む。

一実施形態では、この方法は、１以上の最小点を結んで、注目領域を決定するステップを含む。

一実施形態では、この方法は、
第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが、既定の距離以下であるか否か判断するステップと、
第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが既定の距離以下であるとの判断に応じて、対象人物の最初の出現の決定されたタイムスタンプ、対象人物の最後の出現の決定されたタイムスタンプ、関係人物の最初の出現の決定されたタイムスタンプ、及び関係人物の最後の出現の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定するステップとを含み、最初のタイムスタンプから最後のタイムスタンプまでの期間が、注目期間に相当する。

本開示の第２の態様によれば、事象を管理するための注目期間及び少なくとも１つの注目領域を決定する装置が提供され、当該装置は、プロセッサと通信するメモリを備えており、当該メモリは、その内部にコンピュータプログラムを格納し、当該コンピュータプログラムは、プロセッサによって実行された場合に、当該装置に対して少なくとも、
一連の画像内の対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、対象人物の２以上の出現の１組の座標は第１の経路を規定する、ステップと、
一連の画像内の関係人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、当該関係人物は対象人物に関係し、関係人物の２以上の出現の１組の座標は第２の経路を規定する、ステップと、
第１の経路と第２の経路の間の１以上の最小距離を決定して、少なくとも１つの注目領域を決定するステップと、
対象人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップとを実行させる。

また、第１の経路と第２の経路の間の１以上の最小距離のうちの少なくとも１つが、既定の距離以下であると判断された場合に、関係人物の最初の出現のタイムスタンプ及び最後の出現のタイムスタンプを決定して、注目期間を決定するステップを実行させる。

一実施形態では、本装置は、
撮影装置から、事象に関連する複数の画像入力を受信し、事象に関連する複数の画像入力のそれぞれから１以上の特徴情報を識別し、
識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性があるか否か判断し、特徴情報は、顔情報及び体の動き情報を含む。

一実施形態では、本装置は、識別された１以上の特徴情報の１つが、対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを検索し、検索された受信した画像入力の少なくとも１つが、対象人物の特徴情報に対応する可能性のある特徴情報に関連する。

一実施形態では、本装置は、識別された１以上の特徴情報の１つが対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索し、検索された１以上の別の画像入力は、対象人物の特徴情報に対応する可能性のある情報特徴に関連し、
複数組の座標及び複数のタイムスタンプを検索し、それぞれが、検索された１以上の別の画像入力内の対象人物の出現に関連し、複数組の座標及び複数のタイムスタンプは、対象人物の最初の出現の複数組の座標及び複数のタイムスタンプと、対象人物の最後の出現の複数組の座標及び複数のタイムスタンプとを含む。

一実施形態では、本装置は、
識別された１以上の特徴情報の１つが対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを、検索期間内に検索し、検索された受信した画像入力のうちの少なくとも１つは、対象人物の特徴情報に対応しない可能性のある特徴情報に関連し、検索期間は、対象人物の最初の出現前の既定期間から開始し、最後の出現後の既定期間で終了する。

一実施形態では、本装置は、識別された１以上の特徴情報の１つが対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索し、検索された１以上の別の画像入力は、対象人物の特徴情報に対応しない可能性のある特徴情報に関連し、
複数組の座標及び複数のタイムスタンプを検索し、それぞれが、検索された１以上の別の画像入力内の関係人物の出現に関連し、複数組の座標及び複数のタイムスタンプは、関係人物の最初の出現の複数組の座標及び複数のタイムスタンプと、関係人物の最後の出現の複数組の座標及び複数のタイムスタンプとを含む。

一実施形態では、本装置は、
第１の経路における対象人物の別の出現又は第２の経路における関係人物の別の出現に対応する別の座標の組を決定し、
第１の経路及び第２の経路の一方から他方の経路の位置への１組以上の座標を決定して、１以上の最小距離を決定する。

一実施形態では、本装置は、第１の経路と第２の経路の間の決定された１以上の最小距離が、既定の距離以下であるか否か判断して、１以上の最小点を決定する。

一実施形態では、本装置は、１以上の最小点を結んで注目領域を決定する。

一実施形態では、本装置は、
第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが、既定の距離以下であるか否か判断し、
第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが、既定の距離以下であるとの判断に応じて、対象人物の最初の出現の決定されたタイムスタンプ、対象人物の最後の出現の決定されたタイムスタンプ、関係人物の最初の出現の決定されたタイムスタンプ、及び関係人物の最後の出現の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定し、
最初のタイムスタンプから最後のタイムスタンプまでの期間が、注目期間に相当する。

本開示のさらに別の態様によれば、事象を管理するための注目期間及び少なくとも１つの注目領域を決定するシステムが提供され、このシステムは、本開示の第２の態様の装置と、少なくとも１つの撮影装置とを含む。

本発明の実施形態は、単に例示を目的とする以下の説明及び以下の図面により、当業者によく理解され、明らかになるであろう。
図１は、一実施形態に係る事象を管理するための注目期間及び少なくとも１つの注目領域を決定するシステムを示すブロック図である。 図２Ａは、一実施形態に係る事象を管理するための注目期間及び少なくとも１つの注目領域を決定する方法を示すフロー図である。 図２Ｂは、一実施形態に係る事象を管理するための注目期間及び少なくとも１つの注目領域を決定する方法を示すフロー図である。 図３は、一実施形態に係る対象人物の出現に関する関係人物の同時出現の一例を示す。 図４Ａは、一実施形態に係る対象人物の第１の経路及び関係人物の第２の経路の一例を示す。 図４Ｂは、一実施形態に係る対象人物の第１の経路及び関係人物の第２の経路の一例を示す。 図５Ａは、一実施形態に係る対象人物の第１の経路及び関係人物の第２の経路の一例を示す。 図５Ｂは、一実施形態に係る対象人物の第１の経路及び関係人物の第２の経路の一例を示す。 図６は、一実施形態において注目領域を決定する方法の一例を示す。 図７Ａは、２つの線の間の最短距離を決定する方法の一例を示す。 図７Ｂは、２つの線の間の最短距離を決定する方法の一例を示す。 図８は、図１に示す装置１０４を実装するのに適したコンピュータシステム８００の概略図である。

様々な実施形態は、事象を管理するために（攻撃又は犯罪行為の事後の調査の管理等）、不審人物の同時出現を含む不審な行動についての注目期間及び少なくとも１つの潜在的な注目領域を決定する装置及び方法を提供する。同時出現とは、対象人物（攻撃や犯罪行為等の事象に関係する犯人、又は当該事象に関係することが疑われる人物）と、１人以上の関係人物（対象人物の仲間のネットワーク等）が、監視カメラの同じ視界に同時に現れること意味し、又は、対象人物の出現から開始又は終了する特定の期間における１人以上の関係人物の出現を意味する。

以下の開示は、上述した課題の少なくとも１つを解決する手段を提供する。解決手段の一つは、装置を用いて、特徴情報を分析し、一連の画像から得られた識別された特徴情報の出現の複数組の座標及び複数のタイムスタンプを検索することにより、事象を管理するための注目期間及び少なくとも１つの潜在的な注目領域を決定し、一連の画像には、事象に関連する２以上の画像（監視カメラ映像の映像フレーム等）が含まれる。対象人物及び関係人物のそれぞれの最初の出現及び最後の出現の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定することにより、注目期間を決定できる。さらに、或る期間の一連の画像内の対象人物の位置又は１以上の関係人物の位置に対応する複数組の座標を決定することにより、対象人物及び関係人物の移動経路は、複数の画像入力のそれぞれの座標の組を結ぶことによって形成できる。そして、潜在的な注目領域は、対象人物の経路とその関係人物の経路との間の１以上の最小距離を決定する経路分析を用いて決定できる。

対象人物及びその関係人物の存在の決定に基づいて、そのような同時出現の注目期間及び少なくとも１つの潜在的な注目領域を決定することにより、攻撃後の調査又は犯罪調査で注目すべき特定の期間及び場所又は領域を特定する意義のある方法で、監視カメラから収集されたデータ又は情報を統合及び提示することができる一方、これは、従来の監視方法では見過ごされていた可能性がある。

従来、監視カメラを用いて映像を録画し、検出された対象（人間を含む）及び動きの事象発生スコアの算出に基づき、不審な行動を検出する等により、不審な行動を監視する装置及び方法が存在する。関連する事象は、スコアが高い場合にフラグが立てられ、スコア（確率）は、（例えば、動的ベイジアンネットワークを用いた）機械学習によってモデル化することができる。しかしながら、そのような方法は、バッグ、ナイフ及び／又は他の不審物を検出するといった様々な特定の物体を検出する技術を必要とする。

軌跡の類似性の評価等の同様の概念は、位置データ（全地球測位システム、ＧＰＳ等）を用いて、２つの軌跡の間の類似性スコアを算出し、注目人物の動きを監視して動きの傾向を把握するが、潜在的な不審な対象を識別しない。言うまでもなく、攻撃後の調査又は犯罪調査のために、疑わしい同時出現の潜在的な注目領域を識別しない。

さらに、従来、動き検出を利用して注目領域を監視する多くの装置及び方法も存在し、過去の映像フレームに基づくピクセルの変化を監視することにより、既定の領域における動きが検出される。この方法は、多くの映像監視アプリケーションで使用され、注目領域における変化が検出されたときに、画像を自動的に撮影する。しかしながら、この方法では、監視すべき特定の注目領域を特定する必要があり、上述した犯罪後の調査の課題を解決することができない。

同時出現の検出方法が存在しており、この方法では、同一の映像フレーム内で取得された複数の人物の同時出現は、隣に現れた人物の同時出現を含み、異なる方向及び／又は異なる座標に現れた人物の同時出現が検出され、注目すべき対象人物と関係人物との関係を発見する。そのような同時出現グループを検出する方法の別の方法は、同一のフレーム内の人物の速度及び／又は距離に基づいて類似性スコアを算出して社会集団を発見し、人物の速度及び距離は、人物の追跡技術によって推定される。しかしながら、これらの方法では、同一のフレーム内の疑わしい同時出現の潜在的な注目領域のみを識別する。現時点では、同時出現を直接的及び間接的に識別可能な方法は存在しない。換言すると、現時点では、同一のフレーム内で発生した同時出現と、同一のフレーム内で発生していない同時出現を識別可能な方法は存在しない。

本開示の一実施形態は、監視システムで受信された入力から得られた画像に経路分析を施して、対象人物及び関係人物の同時出現の注目期間及び少なくとも１つの潜在的な注目領域を決定することにより、これらの課題の少なくとも１つを解決し、
画像入力と、それに対応する対象人物の識別された特徴情報の可能性のある出現の座標及びタイムスタンプを検索し、画像入力は、監視カメラ映像の映像フレームを含み、
既定の検索期間内に出現する１人以上の関係人物を決定し、検索期間は、対象人物の最初の出現前の既定期間から開始し、最後の出現後の既定期間で終了し、
画像入力と、それに対応する関係人物のそれぞれの出現の座標及びタイムスタンプを検索し、
画像入力の座標を結ぶことにより、出現について対象人物及び関係人物のそれぞれの経路を形成し、
最小距離（近接）閾値を満たす、対象人物と関係人物の間の最小距離を発見し、
対象人物及び関係人物の出現の検索されたタイムスタンプの最初及び最後のタイムスタンプを決定して、同時出現の注目期間を決定し、
各最小距離を形成する部分に最も近い各経路の１以上の最小点を決定し、
１以上の最小点を結んで、同時出現の潜在的な注目領域を決定する。

本発明の実施形態について、図面を参照して、例示として説明する。図中の同様の参照番号及び文字は、同様の構成要素又は均等なものを表す。

以下の説明の一部は、コンピュータメモリ内のデータに対する処理に関するアルゴリズム及び機能的表現又は記号的表現について明示的又は非明示的に表現されている。これらのアルゴリズムの記述及び機能的表現又は記号的表現は、情報処理技術の当業者が、その仕事内容を他の当業者に最も効果的に伝えるために使用する手段である。ここでは、アルゴリズムは一般に、所望の結果を導出する矛盾のない一連のステップであると考えられる。これらのステップは、保存、転送、結合、比較、及びその他の処理が行われ得る電気信号、磁気信号、又は光信号等、物理量の物理的な処理を必要とするステップである。

特に明記しない限り、また以下から明らかなように、本明細書全体を通して、「スキャン」、「算出」、「決定」、「置換」、「生成」、「初期化」、「出力」、「受信」、「検索」、「識別」、「予測」等の用語を用いた説明は、コンピュータシステム又は同様の電子装置の動作及び処理を表し、これらのシステム及び装置は、コンピュータシステム内の物理量として表されるデータを処理及び変換して、コンピュータシステム又は他の情報記憶装置、通信装置、又は表示装置内の物理量として表される他の同様にデータに変換することは理解されるであろう。

また、本明細書は、本方法の処理を実行する装置を開示する。そのような装置は、必要な目的のために特別に作ることができ、又はコンピュータに格納されたコンピュータプログラムによって選択的に起動又は再構成されるコンピュータ又は他の装置を含む。本明細書に示すアルゴリズム及び表示は、特定のコンピュータ又は他の装置に本質的に関連しない。本明細書の教示に従うプログラムと共に、様々な機械を使用することができる。代替的に、必要な方法のステップを実行する専用の装置を作ることが適切なこともある。コンピュータの構造は、以下の説明によって明らかになるであろう。

さらに、本明細書に記載の方法の個々のステップはコンピュータコードによって実装可能であるということが当業者に明らかであるという点において、本明細書は、コンピュータプログラムも非明示的に開示する。コンピュータプログラムは、特定のプログラミング言語及びその実装に限定されるものではない。様々なプログラミング言語及びそのプログラムを用いて、本明細書に含まれる本開示の教示を実現できることは理解されるであろう。さらに、コンピュータプログラムは、特定の制御フローに限定されるものではない。コンピュータプログラムには、他の多くの変形例があり、本発明の精神又は範囲から逸脱することなく、異なる制御フローを使用することができる。

さらに、コンピュータプログラムの１以上のステップは、逐次的ではなく、並行して実行できる。そのようなコンピュータプログラムは、任意のコンピュータ可読媒体に格納できる。コンピュータ可読媒体は、磁気ディスク、光ディスク若しくはメモリチップ等の記憶装置、又はコンピュータとの通信に適した他の記憶装置を含む。また、コンピュータ可読媒体は、インターネットシステム等の有線媒体、又はＧＳＭ携帯電話システム等の無線媒体を含む。コンピュータプログラムは、そのようなコンピュータにロードされて実行されると、好適な方法のステップを実行する装置を効果的に実現する。

「背景技術」の節に含まれる説明及び従来の方法に関する上記説明は、利用によって公知となっている装置の説明に関するものであることに留意されたい。従って、本発明者又は特許出願人が、そのような装置がいずれかの態様で本技術分野の一般的な知識の一部を形成することを表明していると解釈すべきではない。

図１は、一実施形態に係る事象を管理するための注目期間及び少なくとも１つの注目領域を決定するシステムを示すブロック図である。一例では、事象に関連する画像入力の管理は、少なくとも１つの撮影装置１０２及び装置１０４によって実行される。このシステムは、攻撃後の調査又は犯罪調査のために、捜査官によって利用され得る。

システム１００は、装置１０４と通信する撮影装置１０２を備える。一実施形態では、装置１０４は通常、少なくとも１つのプロセッサ１０８と、コンピュータプログラムコードを有する少なくとも１つのメモリ１０６とを備える物理的な装置として説明される。少なくとも１つのメモリ１０６及びコンピュータプログラムコードは、少なくとも１つのプロセッサ１０８を用いて、物理的な装置に対し、図２Ａ及び図２Ｂに記載の処理を実行させるように構成される。プロセッサ１０８は、撮影装置１０２の録画の映像フレームから得られた複数の画像入力を受信するように構成され、又は、録画の映像フレームから得られた複数の画像入力をデータベース１１０から検索するように構成される。

撮影装置１０２は、関連する事象から特徴情報、時刻情報、及び映像フレーム座標のいずれが得られたかを示す様々な情報を提供するケーブルテレビ（ＣＣＴＶ）等の装置とすることができる。一実施形態では、撮影装置１０２から得られた特徴情報は、既知の対象人物の顔情報を含み、対象人物は、捜査員によって特定される攻撃又は犯罪行為等の事象に密接に関連し、装置１０４のメモリ１０６又は装置１０４がアクセス可能なデータベース１１０に格納される。その他の特徴情報には、しゃがんだり、かがんだり等の体の動きが含まれる。データベース１１０は、装置１０４の一部でもよいと理解すべきである。

装置１０４は、撮影装置１０２及びデータベース１１０と通信するように構成できる。一例では、装置１０４は、画像入力を、撮影装置１０２から受信し、又はデータベース１１０から検索し、装置１０４のプロセッサ１０８による処理の後、出力を生成し、この出力は、事象を管理するために（攻撃又は犯罪行為の事後的な調査を管理する等）、他の不審者及び／又は不審な行動等の同時出現に関する注目期間及び少なくとも１つの潜在的な注目領域を規定するために用いられる。

一実施形態では、撮影装置１０２から複数の画像入力を受信した後、又はデータベース１１０から複数の画像入力を検索した後、メモリ１０６及び当該メモリに格納されたコンピュータプログラムコードは、プロセッサ１０８と共に、装置１０４に対し、特徴検出技術を利用して、複数の画像入力のそれぞれから１以上の特徴情報を識別する。そして、装置１０４は、識別された１以上の特徴情報のそれぞれが、データベース１１０に格納された対象人物の特徴情報に対応する可能性があるか否か判断するように構成される。次いで、装置１０４はさらに、少なくとも１つの識別された特徴情報が、対象人物の特徴情報に対応する可能性があると判断された場合、対象人物の特徴情報に対応する可能性のある特徴情報に関連する、１以上の画像入力と、これに対応する位置座標及びタイムスタンプを検索するように構成される。装置１０４はさらに、既定の検索期間内に現れる１以上の関係人物を決定するように構成され、この検索期間は、対象人物の最初の出現前の既定期間から開始し、最後の出現後の既定期間で終了し、また、各関係人物の出現について、画像入力と、対応する座標及びタイムスタンプを検索するように構成される。装置１０４はさらに、画像入力の座標の各座標を結ぶことにより、出現に関する対象人物及び各関係人物の経路を形成し、既定の最小距離（近接）閾値を満たす対象人物の経路と関係人物の各経路との間の最小距離を見つけ、いずれが、各最小距離を形成する部分に最も近い各経路の１以上の最小点であるか決定するように構成される。そして、装置１０４は、１以上の最小点を結んで、同時出現の潜在的な注目領域を決定するように構成される。さらに、既定の最小距離（近接）閾値を満たす、対象人物の経路と関係人物の経路のそれぞれとの間の少なくとも１つの最小距離があるとの判断に応じて、決定された対象人物及び各関係人物の最初の出現及び最後の出現のタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定して、各同時出現の注目期間を決定し、この注目期間は、最初のタイムスタンプから最後のタイムスタンプまでの期間である。

図２Ａ及び図２Ｂは、一実施形態に係る事象を管理するための注目期間及び少なくとも１つの注目領域を決定する方法を示すフロー図である。１以上の特徴情報が、複数の画像入力のそれぞれから識別され、これらの画像入力は、撮影装置１０２から受信され、対象人物が画像入力に現れるか否か判断するために処理され、そして、対象人物が画像入力に現れたと判断された場合、（撮影装置の同じ視界内であるが、時間の異なる別個の映像フレームに）対象人物と同時に現れる１以上の関係人物を識別するために処理される。対象人物と同時に出現する関係人物の検出等の従来の技術を利用することは、手動で行うと時間と手間がかかり、又は、同一の映像フレーム内に出現する関係人物のみを識別するため、発見が不可能である。

図２Ａを参照すると、ステップ２０２では、事象に関連する複数の画像入力が、撮影装置１０２から受信される。一実施形態では、ワールドカップの試合のような事象を入力することができ、事象に関連する画像入力（監視カメラ映像の映像フレーム等）が、撮影装置１０２から受信される。追加で、又は代替的に、事象が発生した後、又は事象の発生中に、複数の画像入力が、データベース１１０から検索される。

ステップ２０４では、複数の画像入力のそれぞれから１以上の特徴情報が識別される。一実施形態では、顔情報等の１以上の特徴情報は、対象人物の横顔に基づいて識別される。

ステップ２０６では、識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性があるか否か判断される。一実施形態では、対象人物の特徴情報は、データベース１１０から検索することができる。対象人物の特徴情報の少なくとも一部が必要とされる。例えば、対象人物の顔の窪みや横顔等の顕著な顔の特徴である。識別された１以上の顔情報の少なくとも一部が、対象人物の顔情報の少なくとも一部と一致する場合、識別された顔情報は、対象人物の顔情報に対応する可能性があると判断することができる。換言すると、識別された顔情報が、対象人物の顔情報と同一である必要はない。

ステップ２０８では、識別された１以上の特徴情報のうちの１つが、対象人物の特徴情報に対応する可能性があるとの判断に応じて、対象人物の特徴情報に対応する可能性のある特徴情報に関連する受信した画像入力の少なくとも１つが検索される。一実施形態では、ステップ２０８は、識別された１以上の特徴情報の少なくとも１つが、対象人物の特徴情報に対応する可能性があると判断された場合に実行される。一方、識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性がないと判断された場合、処理がステップ２０２に戻る。例えば、ステップ２０６において、事象の監視カメラ映像の映像フレーム等の複数の画像入力から識別された特徴情報の少なくとも１つにおいて、対象人物の出現が得られた可能性があると判断された場合、ステップ２０８では、対象人物の出現を含む可能性がある、そのような受信した画像入力の少なくとも１つが検索され、対象人物の出現に関連する情報、例えば、監視カメラの視界内の対象人物の位置の複数組の座標及び出現時刻等が、後続のステップで検索される。受信した画像入力及び対象人物の特徴情報のうちの少なくとも一方が、データベース１１０から検索される。

ステップ２１０では、対象人物の特徴情報に対応する可能性のある特徴情報に関連する１以上の別の画像入力が検索される。一実施形態では、対象人物が複数の画像入力に現れる可能性がある場合、１以上の別の画像入力が、データベース１１０から検索される。例えば、対象人物が、最初の出現として０９:０６:１０（ｈｈ：ｍｍ：ｓｓ）に監視カメラの視界に入り、最後の出現として０９：０６：１２に視界を離れた場合、映像フレームレートが１秒当たりに１フレームであると仮定すると、対象人物の出現を捉えた０９：０６：１０〜０９：０６：１２までの３つの映像フレームが存在する。従って、ステップ２１０の処理が実行され、対象人物の特徴情報に対応する可能性のある特徴情報に関連する、これらの３つの映像フレームが検索される。ステップ２１０では、対象人物の出現を含む可能性のある受信した画像入力の全てが検索され、対象人物の出現に関連する情報、例えば、監視カメラの視界内の対象人物の位置の複数組の座標及び出現時刻等が、後続のステップで検索される。

ステップ２１２では、複数組の座標と、複数のタイムスタンプが検索され、それぞれが、検索された１以上の別の画像入力のそれぞれにおける対象人物の出現に関連しており、複数組の座標と、複数のタイムスタンプは、対象人物の最初の出現及び最後の出現の複数組の座標及び複数のタイムスタンプを含む。ステップ２０２で受信した各画像入力において、複数組の座標のそれぞれと、複数のタイムスタンプのそれぞれが検索される。座標の各組は、少なくとも２次元又は３次元における或る時点の対象の位置を表す。一実施形態では、複数組の座標は、画像入力内の対象人物のグリッド位置情報から取得することができる。取得された対象人物の複数組の座標を結ぶことにより、第１の経路を規定することができる。

ステップ２１４では、対象人物の特徴情報に対応しない可能性のある特徴情報に関連する受信した画像入力のうちの少なくとも１つが、検索期間内に検索され、この検索期間は、対象人物の最初の出現前の既定期間から開始し、最後の出現後の既定期間で終了する。一実施形態では、受信した画像入力及び対象人物の特徴情報のうちの少なくとも１つが、データベース１１０から検索される。ステップ２１４では、対象人物の最初の出現前の既定期間と、対象人物の最後の出現後の既定期間において、対象人物以外の人物を検索することにより、対象人物に潜在的に関連する可能性のある人物を識別するため有利である。これらの対象人物は、足跡を隠し、又は仲間との関係を秘密にしようとするため、対象人物と同じ画像入力に出現しない場合がある。識別された１以上の特徴情報の全ての部分が、対象人物の特徴情報の少なくとも一部と一致しない場合、ステップ２０４で識別された受信した画像入力の少なくとも１つの特徴情報が、対象人物の特徴情報に対応しない可能性があると判断される。検索期間を決定するために用いられる既定期間は、ユーザが設定することができ、また、データベース１１０から取得することができる。例えば、既定期間は、ステップ２０２で入力された事象の種類に対応する。

ステップ２１６では、対象人物の特徴情報に対応しない可能性のある特徴情報に関連する１以上の別の画像入力が検索される。換言すると、ステップ２０４において複数の画像入力のそれぞれから識別された１以上の特徴情報に基づいて、関係人物が検索期間内に、監視カメラ映像の映像フレーム等の複数の画像入力に現れたと判断された場合、データベース１１０から１以上の別の画像入力を検索することができる。

ステップ２１４で決定された検索期間、例えば、対象人物の最初の出現の５分前（０９：０６：１０）から対象人物の最後の出現の５分後（０９：０６：１２）等において、例えば、関連人物が、最初の出現として０９:０８:２０（ｈｈ：ｍｍ：ｓｓ）に監視カメラの視界に入り、最後の出現として０９：０８：２２に視界を離れた場合、１秒当たり１フレームの映像フレームレートを想定すると、０９：０１：１０から０９：１１：１２の検索期間内に、関連人物の出現を捉えた０９:０８:２０から０９:０８:２２の３つの映像フレームが存在する。関係人物の出現は、対象人物の出現と重ならないことを理解すべきである。換言すれば、関連人物の出現に対応する映像フレームは、対象人物の出現に対応する映像フレームとは異なる。従って、ステップ２１６を実行して、関係人物の特徴情報に対応する特徴情報に関連する、これらの３つの映像フレームを検索することができる。ステップ２１６では、対象人物以外の出現を含む受信した画像入力の全てを検索し、これらの関係人物の出現に関連する情報、例えば、監視カメラの視界における関係人物の位置の複数組の座標及び出現時刻等が、後続のステップで検索される。

ステップ２１８では、複数組の座標及び複数のタイムスタンプが検索され、それぞれが、検索された１以上の別の画像入力のそれぞれにおける関係人物の出現に関連し、複数組の座標及び複数のタイムスタンプには、関係人物の最初の出現の複数組の座標及び複数のタイムスタンプと、関係人物の最後の出現の複数組の座標及び複数のタイムスタンプが含まれる。複数組の座標のそれぞれと、複数のタイムスタンプのそれぞれは、ステップ２０２で受信した各画像入力において取得される。座標の各組は、或る時点における少なくとも２次元又は３次元の対象の位置を表すことができる。一実施形態では、複数組の座標は、画像入力内の関係人物のグリッド位置情報から取得される。取得された関係人物の複数組の座標を結ぶことにより、第２の経路を規定することができる。

ステップ２２０では、第１の経路における対象人物又は第２の経路における関係人物の別の出現に対応する別の座標の組が決定される。一実施形態では、第１の経路における対象人物又は第２の経路上の関係人物の別の出現に対応する別の座標の組は、ステップ２２２における第１の経路又は第２の経路の一方から他方の経路への位置の１組以上の座標の決定を考慮して決定することができ、メモリ１０６に格納されたコンピュータプログラム内の１組の既定のルールに従って、第１の経路と第２の経路の間の最小距離を形成することができる。例えば、対象人物が、最初の出現として０９：０６：１０（ｈｈ：ｍｍ：ｓｓ）に監視カメラの視界に入り、最後の出現として０９：０６：１２に視界を離れた場合において、１秒当たり１フレームの映像フレームレートであると仮定すると、対象人物の出現を捉えた０９：０６：１０から０９:０６:１２までの３つの映像フレームが存在する。従って、３組の座標、すなわち、３つの各映像フレームから座標を取得できる。対象人物の最初及び最後の出現の座標以外の取得された１組の座標を用いて、第１の経路は、さらに短い経路、例えば、最初の出現の１組の座標から第２の映像フレームに対応する１組の座標までの短い経路等と、第２の映像フレームに対応する１組の座標から対象人物の最後の出現の１組の座標までの別の短い経路とに分割することができる。第２の経路における同様の短い経路は、同じような方法で決定できる。次いで、第１の経路における対象人物の別の出現に対応する別の座標の組は、第１の短い経路と第２の短い経路との間の最短距離を形成する、第１の経路の短い経路から第２の経路の最も近い短い経路における最も近い点であると判断される。

ステップ２２２では、第１の経路及び第２の経路の一方から他方の経路の位置への１組以上の座標が決定されたことに応じて、第１の経路と第２の経路の間の１以上の最小距離が決定される。上述したように、一実施形態では、第１の経路と第２の経路の間の１以上の最小距離は、メモリ１０６に格納されたコンピュータプログラム内の１組の既定のルールに基づいて、プロセッサ１０８が決定することができる。第１の経路及び第２の経路の一方の１組以上の座標の決定に応じて、第１の経路と第２の経路の間の１以上の最小距離を決定することについては、図７Ａ及び図７Ｂの説明においてさらに詳細に説明する。第１の経路の短い経路と第２の経路の短い経路との間の最小距離の決定は、第１の経路及び第２の経路から分割された全ての短い経路について繰り返し行われる。

ステップ２２４では、第１の経路と第２の経路の間の決定された１以上の最小距離が、既定の距離以下であるか否か判断され、１以上の最小点が決定される。一実施形態では、既定の距離は、ユーザが設定することができ、また、データベース１１０から取得することができる。１以上の最小点は、既定の（近接）距離内の双方の経路の間の最小距離に最も近い第１の短い経路及び第２の短い経路の一方における点（１組の座標）として決定することができる。

ステップ２２６では、１以上の最小点が結ばれ、注目領域が決定される。ステップ２２４で識別された最小点のサブセットは、ステップ２２６で結ぶことができることを理解すべきである。

ステップ２３０では、第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが、既定の距離以下であるか否か判断される。

ステップ２３２では、第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが、既定の距離以下であると判断された場合、対象人物の最初の出現の決定されたタイムスタンプ、対象人物の最後の出現の決定されたタイムスタンプ、関係人物の最初の出現の決定されたタイムスタンプ、及び関係人物の最後の出現の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプが決定され、最初のタイムスタンプから最後のタイムスタンプまでの期間が、注目期間に相当する。

例えば、第１の経路と第２の経路の間の少なくとも１つの最小距離が既定の距離以下であると決定されると、対象人物が、最初の出現として０９:０６:１０（ｈｈ：ｍｍ：ｓｓ）に監視カメラの視界に入り、その後、最後の出現として０９:０６:１２に視界を離れた場合において、関連人物が、最初の出現として０９:０８:２０（ｈｈ：ｍｍ：ｓｓ）に監視カメラの視界に入り、最後の出現として０９:０８:２２に視界を離れたとき、最初のタイムスタンプは０９:０６:１０であると判断され、最後のタイムスタンプは０９:０８:２２であると判断される。従って、注目期間は、０９：０６：１０から０９：０８：２２までの期間として決定することができる。

図２Ａ及び図２Ｂは、同時出現について注目期間及び少なくとも１つの潜在的な注目領域を決定する方法に関するステップ２０２〜ステップ２３０を示すが、様々な実施形態では、ステップ２１２、２１８、２２２及び２３０の実行は、同時出現に関する注目期間及び少なくとも１つの潜在的な注目領域を決定するのに十分であると理解すべきである。また、ステップ２０２〜ステップ２３０は、逐次的でなく、並行して実行することができると理解すべきである。

図３は、一実施形態に係る対象人物の出現に関する関係人物の同時出現の一例を示す。３０４は、特定の時間フレームにおける対象人物３０２の或る出現を示しており、４つの連続する映像フレームのうち３つの映像フレームが、対象人物の画像情報を有する。一例では、対象人物の或る出現は、指定された時間フレームにおいて同一の対象人物が現れ、消え、再び現れる、連続する多数の映像フレームを含むと解釈でき、或る出現３０４において、３０６は対象人物の最初の出現に対応し、３０８は対象人物の最後の出現に対応する。

次いで、図３に示すように、ステップ２１４において、対象人物に関係する関係人物を識別するために用いられる同時出現の検索期間３２６は、対象人物３０２の最初の出現３０６（０９：０６：１０の時点）の前の既定期間３２２（例えば５分）に開始し、対象人物３０２の最後の出現３０８（例えば、０９：０６：１３の時点）後の既定期間３２４（例えば５分）で終了する期間として規定される。図３では、対象人物の最初の出現３０６の前に検出された関係人物３１６が存在し、対応する最初の出現３１８（例えば、０９：０４：１５の時点）及び最後の出現３２０（例えば、０９：０４:１７の時点）がある。さらに、対象人物の最後の出現３０８の後に検出された別の関係人物３１０が存在し、対応する最初の出現３１２（例えば、０９：０８：２０の時点）及び最後の出現３１４（例えば、０９：０８：２２の時点）がある。同時出現の検索期間３２６（例えば、０９：０１：１０〜０９：１１：１３）内に現れるいずれの関係人物も、ステップ２１４及びステップ２１６において関係人物として検出されることを理解すべきである。

図４Ａ及び図４Ｂはそれぞれ、一実施形態に係る対象人物の第１の経路及び関係人物の第２の経路の一例を示す。図４Ａは、対象人物の経路と関係人物の経路が交差しない例を示す。フレーム４００では、対象人物４０２の或る出現の時間フレームにおいて同じ視界をカバーする複数の映像フレームが重ねられ、ステップ２１２のような第１の経路４０４を規定する対象人物の複数組の座標（図の足跡）を示す。さらに、フレーム４００には、関係人物４０６の出現の時間フレームにおいて同じ視界をカバーする複数の映像フレームも重ねられ、ステップ２１８のような第２の経路４０８を規定する関係人物の複数組の座標（図の足跡）を示す。

ステップ２２０のように、第１の経路と第２の経路の間の１以上の最小距離を決定するために、第１の経路４０４における対象人物の別の出現に対応する別の座標の組が決定され、又は、第２の経路４０８における関係人物の別の出現に対応する別の座標の組が決定される。次いで、ステップ２２２における
第１の経路及び第２の経路の一方から他方の経路の位置への１組以上の座標の決定に応じて、第１の経路と第２の経路の間の１以上の最小距離、例えば、４１２、４１４、４１６及び４１８（図の双方向の矢印で示す）等が決定される。さらに、ステップ２２４において、第１の経路と第２の経路の間の決定された１以上の最小距離が既定の距離（４１２、４１４、４１６等）以下であると判断された場合、双方の経路の間に形成された最小距離に最も近い第１の経路及び第２の経路の一方における複数の点（複数組の座標）は、１以上の最小点（図中の丸で囲まれた足跡）として識別される。４１０は、識別された１以上の最小点の関係を示しており、ステップ２２６のように、対象人物及び関係人物の同時出現の可能性が最も高い注目領域が決定される。

さらに、ステップ２３０において、第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが、既定の距離（４１２、４１４、及び４１６等）以下であると判断された場合、対象人物の最初の出現の決定されたタイムスタンプ、対象人物の最後の出現の決定されたタイムスタンプ、関係人物の最初の出現の決定されたタイムスタンプ、及び関係人物の最後の出現の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプが決定され、最初のタイムスタンプから最後のタイムスタンプまでの期間が、注目期間に相当する。

図４Ｂは、対象人物の経路と関係人物の経路が交差する例を示す。フレーム４２０では、対象人物４２２の或る出現の時間フレームにおいて同じ視界をカバーする複数の映像フレームが重ねられ、ステップ２１２のように、第１の経路４２４を規定する対象人物の複数組の座標（図の足跡）を示す。さらに、フレーム４２０では、関係人物４２６の或る出現の時間フレームにおいて同じ視界をカバーする複数の映像フレームも重ねられ、ステップ２１８のように、第２の経路４２８を規定する関係人物の複数組の座標（図の足跡）を示す。

ステップ２２０のように、第１の経路と第２の経路の間の１以上の最小点を決定するために、第１の経路４２４における対象人物の別の出現に対応する別の座標の組が決定され、又は、第２の経路４２８における関係人物の別の出現に対応する別の座標の組が決定される。次いで、ステップ２２２における第１の経路及び第２の経路の一方から他方の経路の位置への１組以上の座標の決定に応じて、第１の経路と第２の経路の間の４３２、４３４、４３６及び４３８等の１以上の最小距離（図中の双方向矢印と交点４３２）が決定される。さらに、ステップ２２４において、第１の経路と第２の経路の間の決定された１以上の最小距離が、既定の距離（４３２、４３４、４３６等）以下であると判断された場合、双方の経路の間に形成された最小距離に最も近い第１の経路又は第２の経路の一方における複数の点（複数組の座標）が、１以上の最小点（図中の丸で囲まれた足跡及び丸で囲まれた「Ｘ」）として識別される。４３０は、識別された１以上の最小点の関係を示しており、ステップ２２６のように、対象人物及び関係人物の同時出現の可能性が最も高い注目領域が決定される。

さらに、ステップ２３０において、第１の経路と第２の経路の間の決定された１以上の最小距離のうちの少なくとも１つが、既定の距離（４３２、４３４、及び４３６等）以下であると判断された場合、対象人物の最初の出現の決定されたタイムスタンプ、対象人物の最後の出現の決定されたタイムスタンプ、関係人物の最初の出現の決定されたタイムスタンプ、及び関係人物の最後の出現の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプが決定され、最初のタイムスタンプから最後のタイムスタンプまでの期間が、注目期間に相当する。

図５Ａ及び図５Ｂはそれぞれ、一実施形態に係る対象人物の第１の経路及び関係人物の第２の経路の一例を示す。フレーム５００では、対象人物の或る出現の時間フレームにおいて同じ視界をカバーする３つの映像フレームがあり、ここでは、５０２は対象人物の最初の出現を示し、５０４は対象人物の別の出現を示し、５０６は対象人物の最後の出現を示しており、各出現５０２，５０４，５０６における対象人物の座標を結ぶことにより、第１の経路５０８が形成される。さらに、フレーム５２０には、関係人物の或る出現の時間フレームにおいて同じ視界をカバーする３つの映像フレームがあり、５２２は関係人物の最初の出現を示し、５２４は関係人物の別の出現を示し、５２６は関係人物の最後の出現を示しており、各出現５２２，５２４，５２６における関係人物の座標を結ぶことにより、第２の経路５２８が形成される。この例では、第１の経路５０８と第２の経路５２８が交差する。

図６は、一実施形態に係る注目領域の決定方法の一例を示す。６０２は、対象人物の出現の４つの映像フレームのそれぞれについて、各時刻（Ｔ_１，Ｔ_２，Ｔ_３，Ｔ_４）と、１組の座標（Ｘ‐Ｙ座標［Ｘ_１，Ｙ_１］、［Ｘ_２、Ｙ_２］、［Ｘ_３，Ｙ_３］及び［Ｘ_４，Ｙ_４］）の情報を示す。６０４は、関係人物の出現の４つの映像フレームのそれぞれについて、各時刻（Ｔ_１'，Ｔ_２'，Ｔ_３'，Ｔ_４'）と、１組の座標（Ｘ‐Ｙ座標［Ｘ_１'，Ｙ_１'］、［Ｘ_２'，Ｙ_２'］、［Ｘ_３'，Ｙ_３'］及び［Ｘ_４'，Ｙ_４'］）の情報を示す。

６０６は、Ｘ‐Ｙ図面上の対象人物及び関係人物の複数組の座標を示し、６０８は対象人物の経路を示し、これは、２つの近傍の点（複数組の座標）の間の接続線によって描かれた第１の経路であり、６１０は関係人物の経路を示し、これは、２つの近傍の点（複数組の座標）の間の接続線によって描画かれた第２の経路である。６１２は、第１の経路と第２の経路の間の２つの最小距離６１４及び６１６の例を示しており、双方の経路の間の最小距離は、２つの接続線の間の最短距離を見つけることによって決定される。１以上の最小距離を決定して、少なくとも１つの注目領域を決定するための１つの方法は、全ての接続線の組について最短距離を算出し、１以上の最小距離のような既定の最小距離閾値以下の算出された最短距離を選択することであると理解すべきである。一例では、６１４は、［Ｘ_２，Ｙ_２］、［Ｘ_３，Ｙ_３］の接続線と［Ｘ_２，Ｙ_２'］、［Ｘ_３'，Ｙ_３'］の接続線との間の最短距離であり、６１６は、［Ｘ_３，Ｙ_３］、［Ｘ_４，Ｙ_４］の接続線と［Ｘ_３'、Ｙ_３'］、［Ｘ_４'，Ｙ_４'］の接続線との間の最短距離である。明確にするために、２つの接続線の間の最短距離を決定する方法について、図７Ａ及び図７Ｂにさらに示す。

次いで、図６に示す例では、最小距離６１４及び６１６が既定の距離以下であると判定される。その結果、最小点が、第１の経路における点［Ｘ_３，Ｙ_３］、［Ｘ_４，Ｙ_４］及び第２の経路における［Ｘ_２'，Ｙ_２'］、［Ｘ_３'，Ｙ_３'］であると分かり、［Ｘ_３，Ｙ_３］及び［Ｘ_２'，Ｙ_２'］が、第１の経路と第２の経路のそれぞれにおいて、双方の経路の間に形成された最小距離６１４に最も近い点であり、［Ｘ_４，Ｙ_４］とは［Ｘ_３'，Ｙ_３'］が、第１の経路と第２の経路のそれぞれにおいて、双方の経路の間に形成された最小距離６１６に最も近い点である。

第１の経路における［Ｘ_３，Ｙ_３］、［Ｘ_４，Ｙ_４］及び第２の経路における［Ｘ_２'，Ｙ_２'］、［Ｘ_３'，Ｙ_３'］が、最小点として識別された場合、最小点［Ｘ_３，Ｙ_３］、［Ｘ_４，Ｙ_４］、［Ｘ_２'，Ｙ_２'］及び［Ｘ_３'，Ｙ_３'］を結ぶことにより、６２０で示す注目領域６２２が決定される。

最小距離６１４及び６１６が、既定の距離以下であると決定されるため、対象人物の最初の出現の決定されたタイムスタンプＴ_１、対象人物の最後の出現の決定されたタイムスタンプＴ_４、関係人物の最初の出現の決定されたタイムスタンプＴ_１'、及び関係人物の最後の出現の決定されたタイムスタンプＴ_４'の中から、最初のタイムスタンプ及び最後のタイムスタンプが決定され、この最初のタイムスタンプから最後のタイムスタンプまでの期間が、注目期間に相当する。

図７Ａ及び図７Ｂはそれぞれ、２つの線の間の最短距離を決定する方法の例を示す。図７Ａは、２本の線が交差する場合の最短距離を決定する方法の例を示す。７００では、線７０２と７０４の双方が交差するため、これら線の最短距離は０である。図７Ｂは、２本の線が交差しない場合の最短距離を決定する方法の様々な例を示す。７６０及び７６２は、７６０の太線７７４及び７６２の７８０がそれぞれ、７６０の細い線７７６及び７６２の７８２の左側の点である他の線の最も近い点と結ばれた場合に、最短距離が形成されることを示す。別の例では、７６４及び７６６は、７６４の太線７８６と７６６の太線７９２がそれぞれ、７６４の細い線７８８及び７６６の細い線７９４上の点である他の線の最も近い点に結ばれた場合に、最短距離が形成されることを示す。最後の例では、７６８及び７７０は、７６８の太線７９８と７７０の太線８０４がそれぞれ、７６８の細い線８００及び７７０の細い線８０６の右側の点である他の線の最も近い点に結ばれた場合に、最短距離が形成されることを示す。

図８は、例示的なコンピュータ／コンピュータ装置８００を示しており、以下、コンピュータシステム８００とも称し、このような１以上のコンピュータ装置８００を用いて、図１に示す装置１０４を実現することができる。装置８００は、単に例示であり、限定するものではない。

図８に示すように、例示的なコンピュータ装置８００は、ソフトウェアルーチンを実行するプロセッサ８０４を備える。明確にするために、単一のプロセッサが示されているが、コンピュータ装置８００は、マルチプロセッサシステムを備えることもできる。プロセッサ８０４は、コンピュータ装置８００の他の構成部品と通信する通信インフラストラクチャ８０６に接続される。通信インフラストラクチャ８０６には、例えば、通信バス、クロスバー、又はネットワークが含まれる。

コンピュータ装置８００はさらに、ＲＡＭ等の主記憶装置８０８と、補助記憶装置８１０を備える。補助記憶装置８１０は、ハードディスクドライブ、ソリッドステートドライブ若しくはハイブリッドドライブ等のストレージドライブ８１２、及び／又は、磁気テープドライブ、光ディスクドライブ、ソリッドステートストレージドライブ（ＵＳＢフラッシュドライブ、フラッシュメモリ装置、ソリッドステートドライブ又はメモリカード等）等のリムーバブルストレージドライブ８１４を備える。リムーバブルストレージドライブ８１４は、周知の方法で、リムーバブル記憶媒体８４４から読み取り、及び／又はリムーバブル記憶媒体８４４に書き込む。リムーバブル記憶媒体８４４は、磁気テープ、光ディスク、不揮発性メモリ記憶媒体等を含み、これらは、リムーバブルストレージドライブ８１４によって読み取られ、書き込まれる。関連技術の当業者にとって明らかであるように、リムーバブル記憶媒体８４４には、コンピュータが実行可能なプログラムコード命令及び／又はデータが記憶されたコンピュータ可読の記憶媒体が含まれる。

他の実施形態では、補助記憶装置８１０は、コンピュータプログラム又は他の命令のコンピュータ装置８００へのロードを可能にする他の同様の手段を追加し、又は代わりに備えることができる。そのような手段には、例えば、リムーバブルストレージユニット８２２及びインタフェース８４０が含まれる。リムーバブルストレージユニット８２２及びインタフェース８４０の例には、プログラムカートリッジ及びカートリッジインタフェース（ビデオゲームコンソール装置が備えるもの等）、リムーバブルメモリチップ（ＥＰＲＯＭ又はＰＲＯＭ等）及び関連するソケット、リムーバブルソリッドステートストレージドライブ（ＵＳＢフラッシュドライブ、フラッシュメモリ装置、ソリッドステートドライブ又はメモリカード等）、並びに、リムーバブルストレージユニット８２２からコンピュータシステム８００へのソフトウェア及びデータの転送を可能にする他のリムーバブルストレージユニット８２２及びインタフェース８４０が含まれる。

また、コンピュータ装置８００は、少なくとも１つの通信インタフェース８２４を備える。通信インタフェース８２４により、コンピュータ装置８００と外部デバイスとの間で、通信経路８２６を介したソフトウェア及びデータの転送が可能になる。本発明の様々な実施形態では、通信インタフェース８２４により、コンピュータ装置８００と、パブリックデータ通信ネットワークやプライベートデータ通信ネットワーク等のデータ通信ネットワークとの間のデータの転送が可能になる。通信インタフェース８２４を用いて、異なるコンピュータ装置８００との間でデータを交換することができ、そのようなコンピュータ装置８００は、相互接続のコンピュータネットワークの一部を形成する。通信インタフェース８２４の例には、モデム、ネットワークインタフェース（イーサネットカード等）、通信ポート（シリアルポート、パラレルポート、プリンタポート、ＧＰＩＢ、ＩＥＥＥ１３９４、ＲＪ２５、ＵＳＢ等）、関連する回路を備えたアンテナ等が含まれる。通信インタフェース８２４は、有線又は無線でもよい。通信インタフェース８２４を介して転送されるソフトウェア及びデータは、通信インタフェース８２４が受信可能な電子信号、電磁気信号、光信号又は他の信号等の信号の形式である。これらの信号は、通信経路８２６を介して通信インタフェースに提供される。

図８に示すように、コンピュータ装置８００はさらに、関連するディスプレイ８３０に画像をレンダリングする処理を実行するディスプレイインタフェース８０２と、関連する１以上のスピーカ８３４を介してオーディオコンテンツを再生する処理を実行するオーディオインタフェース８３２とを備える。

本明細書で使用するように、「コンピュータプログラム製品」という用語は、部分的に、リムーバブル記憶媒体８４４、リムーバブルストレージユニット８２２、ストレージドライブ８１２に設置されたハードディスク、又は、通信経路８２６（無線リンク又はケーブル）を介してソフトウェアを通信インタフェース８２４に搬送する搬送波を意味する。コンピュータ可読の記憶媒体は、保存された命令及び／又はデータの実行及び／又は処理のためにコンピュータ装置８００に提供する非一時的な不揮発性の有形記憶媒体を意味する。このような記憶媒体の例には、磁気テープ、ＣＤ−ＲＯＭ、ＤＶＤ、Ｂｌｕ−ｒａｙ（登録商標）ディスク、ハードディスクドライブ、ＲＯＭ若しくは集積回路、ソリッドステートストレージドライブ（ＵＳＢフラッシュドライブ、フラッシュメモリデバイス、ソリッドステートドライブ又はメモリカード等）、ハイブリッドドライブ、光磁気ディスク、又は、ＳＤカード等のコンピュータ可読カード等が含まれ、このような装置が、コンピュータ装置８００の内部装置又は外部装置であるかを問わない。ソフトウェア、アプリケーションプログラム、命令及び／又はデータのコンピュータ装置８００への提供にも関与する一時的又は無形のコンピュータ可読伝送媒体には、無線通信チャネル又は赤外線通信チャネルと、別のコンピュータ又はネットワーク装置へのネットワーク接続、電子メール送信やＷｅｂサイト等に記録された情報を含むインターネット又はイントラネットが含まれる。

コンピュータプログラム（コンピュータプログラムコードとも呼ばれる）は、主記憶装置８０８及び／又は補助記憶装置８１０に格納される。コンピュータプログラムは、通信インタフェース８２４を介して受信することもできる。そのようなコンピュータプログラムは、実行されると、コンピュータ装置８００が、本明細書で説明した実施形態の１以上の機能を実行することができる。様々な実施形態では、コンピュータプログラムは、実行されると、プロセッサ８０４が、上述した実施形態の機能を実行することができる。従って、そのようなコンピュータプログラムは、コンピュータシステム８００の制御部に相当する。

ソフトウェアは、リムーバブルストレージドライブ８１４、ストレージドライブ８１２、又はインタフェース８４０を用いて、コンピュータプログラム製品に格納され、コンピュータ装置８００にロードすることができる。代替的に、コンピュータプログラム製品は、通信経路８２６を介して、コンピュータシステム８００にダウンロードすることができる。ソフトウェアは、プロセッサ８０４によって実行されると、コンピュータ装置８００に対し、本明細書に記載した実施形態の機能を実行させる。

図８の実施形態は、単に例示であることを理解すべきである。従って、いくつかの実施形態では、コンピュータ装置８００の１以上の機能を省略してもよい。また、いくつかの実施形態では、コンピュータ装置８００の１以上の機能を組み合わせることができる。さらに、いくつかの実施形態では、コンピュータ装置８００の１以上の機能は、１以上の構成部品に分けることができる。

例えば、図２Ａ及び図２Ｂの方法は、ソフトウェアとして実装され、コンピュータ装置８００の補助記憶装置８１０又はリムーバブルストレージユニット８１８，８２２に非一時的に保存することができる。

当業者であれば、広範に説明した本発明の精神又は範囲から逸脱することなく、特定の実施形態に示すように、本発明に対して多数の変形及び／又は修正が可能であることが明らかであろう。例えば、上述した説明は、主に視覚的なインタフェースに警告を表示するが、他の実施形態では、音声警告等の別の種類の警告を用いて、本方法を実行できることが明らかであろう。いくつかの変更、例えば、アクセスポイントの追加、ログインルーチンの変更等を考慮し、組み込むことができる。従って、本実施形態は、全ての点で例示的であり、限定するものでないと理解すべきである。

（付記１）
事象を管理するための注目期間及び少なくとも１つの注目領域を決定する方法であって、
一連の画像内の対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記対象人物の２以上の出現の１組の座標は第１の経路を規定する、ステップと、
前記一連の画像内の関係人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記関係人物は前記対象人物に関係し、前記関係人物の２以上の出現の１組の座標は第２の経路を規定する、ステップと、
前記第１の経路と前記第２の経路との間の１以上の最小距離を決定して、少なくとも１つの注目領域を決定するステップと、
前記対象人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと、
前記第１の経路と前記第２の経路との間の１以上の最小距離のうちの少なくとも１つが決定された場合に、前記関係人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと
を含む、方法。
（付記２）
前記一連の画像内の前記対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップは、
撮影装置から、前記事象に関連する複数の画像入力を受信するステップと、
前記事象に関連する複数の画像入力のそれぞれから１以上の特徴情報を識別するステップと、
識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性があるか否か判断するステップとを含み、
前記特徴情報は、顔情報及び体の動き情報を含む、付記１に記載の方法。
（付記３）
前記識別された１以上の特徴情報の１つが、前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを検索するステップをさらに含み、
検索された受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、付記２に記載の方法。
（付記４）
前記受信した画像入力の少なくとも１つを検索するステップはさらに、
前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、ステップと、
複数組の座標と、複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力のそれぞれの前記対象人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記対象人物の最初の出現の複数組の座標及び複数のタイムスタンプと、前記対象人物の最後の出現の複数組の座標及び複数のタイムスタンプとを含む、ステップと
を含む、付記３に記載の方法。
（付記５）
前記画像入力内の前記関係人物の前記最初の出現の１組の座標と、前記最後の出現の１組の座標を決定するステップは、
前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、前記受信した画像入力の少なくとも１つを、検索期間内に検索するステップを含み、
検索された前記受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連し、
前記検索期間は、前記対象人物の最初の出現前の既定期間から開始し、最後の出現の後の既定期間で終了する期間である、付記４に記載の方法。
（付記６）
前記受信した画像入力の少なくとも１つを検索するステップはさらに、
前記識別された１以上の特徴情報の１つが対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連する、ステップと、
複数組の座標及び複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力内の前記関係人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記関係人物の最初の出現及び最後の出現の複数組の座標及び複数のタイムスタンプを含む、ステップと
を含む、付記５に記載の方法。
（付記７）
前記第１の経路と前記第２の経路との間の１以上の最小距離を決定するステップは、
前記第１の経路における前記対象人物又は前記第２の経路における前記関係人物の別の出現に対応する別の座標の組を決定するステップと、
前記第１の経路及び前記第２の経路の一方から他方の経路の位置への１組以上の座標を決定して、前記１以上の最小距離を決定するステップとを含む、付記６に記載の方法。
（付記８）
前記第１の経路と前記第２の経路との間の１以上の最小距離を決定するステップはさらに、
前記第１の経路と前記第２の経路との間の決定された１以上の最小距離が、既定の距離以下であるか否か判断して、１以上の最小点を決定するステップを含む、付記７に記載の方法。
（付記９）
前記注目領域を決定するステップは、前記１以上の最小点を結んで、前記注目領域を決定するステップを含む、付記８に記載の方法。
（付記１０）
前記注目期間を決定するステップは、
前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるか否か判断するステップと、
前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるとの判断に応じて、前記対象人物の最初の出現の決定されたタイムスタンプ、前記対象人物の最後の出現の決定されたタイムスタンプ、前記関係人物の最初の出現の決定されたタイムスタンプ、及び前記関係人物の最後の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定するステップとを含み、
前記最初のタイムスタンプから前記最後のタイムスタンプまでの期間は、前記注目期間に相当する、付記８に記載の方法。
（付記１１）
事象を管理するための注目期間及び少なくとも１つの注目領域を決定する装置であって、
プロセッサと通信するメモリを備え、前記メモリは、その内部にコンピュータプログラムを格納し、前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対して少なくとも、
一連の画像内の対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記対象人物の２以上の出現の１組の座標は第１の経路を規定する、ステップと、
前記一連の画像内の関係人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記関係人物は前記対象人物に関係し、前記関係人物の２以上の出現の１組の座標は第２の経路を規定する、ステップと、
前記第１の経路と前記第２の経路との間の１以上の最小距離を決定して、少なくとも１つの注目領域を決定するステップと、
前記対象人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと、
前記第１の経路と前記第２の経路との間の１以上の最小距離のうちの少なくとも１つが決定された場合に、前記関係人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップとを実行させる、
装置。
（付記１２）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
撮影装置から、前記事象に関連する複数の画像入力を受信するステップと、
前記事象に関連する複数の画像入力のそれぞれから１以上の特徴情報を識別するステップと、
識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性があるか否か判断するステップとを実行させ、
前記特徴情報は、顔情報及び体の動き情報を含む、付記１１に記載の装置。
（付記１３）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記識別された１以上の特徴情報の１つが、前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを検索するステップを実行させ、
検索された受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、付記１２に記載の装置。
（付記１４）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、ステップと、
複数組の座標と、複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力のそれぞれの前記対象人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記対象人物の最初の出現の複数組の座標及び複数のタイムスタンプと、前記対象人物の最後の出現の複数組の座標及び複数のタイムスタンプとを含む、ステップとを実行させる、付記１３に記載の装置。
（付記１５）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、前記受信した画像入力の少なくとも１つを、検索期間内に検索するステップを実行させ、
検索された前記受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連し、
前記検索期間は、前記対象人物の最初の出現前の既定期間から開始し、最後の出現の後の既定期間で終了する期間である、付記１４に記載の装置。
（付記１６）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記識別された１以上の特徴情報の１つが対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連する、ステップと、
複数組の座標及び複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力内の前記関係人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記関係人物の最初の出現及び最後の出現の複数組の座標及び複数のタイムスタンプを含む、ステップとを実行させる、付記１５に記載の装置。
（付記１７）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記第１の経路における前記対象人物又は前記第２の経路における前記関係人物の別の出現に対応する別の座標の組を決定するステップと、
前記第１の経路及び前記第２の経路の一方から他方の経路の位置への１組以上の座標を決定するステップとを実行させる、付記１６に記載の装置。
（付記１８）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記第１の経路と前記第２の経路との間の決定された１以上の最小距離が、既定の距離以下であるか否か判断して、１以上の最小点を決定するステップを実行させる、付記１７に記載の装置。
（付記１９）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記１以上の最小点を結んで、前記注目領域を決定するステップを実行させる、付記１８に記載の装置。
（付記２０）
前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるか否か判断するステップと、
前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるとの判断に応じて、前記対象人物の最初の出現の決定されたタイムスタンプ、前記対象人物の最後の出現の決定されたタイムスタンプ、前記関係人物の最初の出現の決定されたタイムスタンプ、及び前記関係人物の最後の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定するステップとを実行させ、
前記最初のタイムスタンプから前記最後のタイムスタンプまでの期間は、前記注目期間に相当する、付記１８に記載の装置。
（付記２１）
事象を管理するための注目期間及び少なくとも１つの注目領域を決定するシステムであって、
付記１１〜２０のいずれか１項に記載の装置と、少なくとも１つの撮影装置とを含む、システム。

本出願は、２０１８年９月６日に出願されたシンガポール特許出願第１０２０１８０７６７５Ｔに基づく優先権の利益を主張し、当該特許出願の開示は、参照により、その全体が本明細書に組み込まれる。

１０２ 撮影装置
１０４ 装置
１０６ メモリ
１０８ プロセッサ
１１０ データベース
８２０ ディスプレイインタフェース
８０４ プロセッサ
８０６ 通信インフラストラクチャ
８０８ 主記憶装置
８１０ 補助記憶装置
８１２ ストレージドライブ
８１４ リムーバブルストレージドライブ
８１８ リムーバブル記憶媒体
８２０ インタフェース
８２２ リムーバブルストレージユニット
８２４ 通信インタフェース
８３０ ディスプレイ
８３２ オーディオインタフェース
８３４ スピーカ

Claims (21)

1. 事象を管理するための注目期間及び少なくとも１つの注目領域を決定する方法であって、
   一連の画像内の対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記対象人物の２以上の出現の１組の座標は第１の経路を規定する、ステップと、
   前記一連の画像内の関係人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記関係人物は前記対象人物に関係し、前記関係人物の２以上の出現の１組の座標は第２の経路を規定する、ステップと、
   前記第１の経路と前記第２の経路との間の１以上の最小距離を決定して、少なくとも１つの注目領域を決定するステップと、
   前記対象人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと、
   前記第１の経路と前記第２の経路との間の１以上の最小距離のうちの少なくとも１つが決定された場合に、前記関係人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと
   を含む、方法。
2. 前記一連の画像内の前記対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップは、
   撮影装置から、前記事象に関連する複数の画像入力を受信するステップと、
   前記事象に関連する複数の画像入力のそれぞれから１以上の特徴情報を識別するステップと、
   識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性があるか否か判断するステップとを含み、
   前記特徴情報は、顔情報及び体の動き情報を含む、請求項１に記載の方法。
3. 前記識別された１以上の特徴情報の１つが、前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを検索するステップをさらに含み、
   検索された受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、請求項２に記載の方法。
4. 前記受信した画像入力の少なくとも１つを検索するステップはさらに、
   前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、ステップと、
   複数組の座標と、複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力のそれぞれの前記対象人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記対象人物の最初の出現の複数組の座標及び複数のタイムスタンプと、前記対象人物の最後の出現の複数組の座標及び複数のタイムスタンプとを含む、ステップと
   を含む、請求項３に記載の方法。
5. 前記画像入力内の前記関係人物の前記最初の出現の１組の座標と、前記最後の出現の１組の座標を決定するステップは、
   前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、前記受信した画像入力の少なくとも１つを、検索期間内に検索するステップを含み、
   検索された前記受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連し、
   前記検索期間は、前記対象人物の最初の出現前の既定期間から開始し、最後の出現の後の既定期間で終了する期間である、請求項４に記載の方法。
6. 前記受信した画像入力の少なくとも１つを検索するステップはさらに、
   前記識別された１以上の特徴情報の１つが対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連する、ステップと、
   複数組の座標及び複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力内の前記関係人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記関係人物の最初の出現及び最後の出現の複数組の座標及び複数のタイムスタンプを含む、ステップと
   を含む、請求項５に記載の方法。
7. 前記第１の経路と前記第２の経路との間の１以上の最小距離を決定するステップは、
   前記第１の経路における前記対象人物又は前記第２の経路における前記関係人物の別の出現に対応する別の座標の組を決定するステップと、
   前記第１の経路及び前記第２の経路の一方から他方の経路の位置への１組以上の座標を決定して、前記１以上の最小距離を決定するステップとを含む、請求項６に記載の方法。
8. 前記第１の経路と前記第２の経路との間の１以上の最小距離を決定するステップはさらに、
   前記第１の経路と前記第２の経路との間の決定された１以上の最小距離が、既定の距離以下であるか否か判断して、１以上の最小点を決定するステップを含む、請求項７に記載の方法。
9. 前記注目領域を決定するステップは、前記１以上の最小点を結んで、前記注目領域を決定するステップを含む、請求項８に記載の方法。
10. 前記注目期間を決定するステップは、
    前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるか否か判断するステップと、
    前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるとの判断に応じて、前記対象人物の最初の出現の決定されたタイムスタンプ、前記対象人物の最後の出現の決定されたタイムスタンプ、前記関係人物の最初の出現の決定されたタイムスタンプ、及び前記関係人物の最後の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定するステップとを含み、
    前記最初のタイムスタンプから前記最後のタイムスタンプまでの期間は、前記注目期間に相当する、請求項８に記載の方法。
11. 事象を管理するための注目期間及び少なくとも１つの注目領域を決定する装置であって、
    プロセッサと通信するメモリを備え、前記メモリは、その内部にコンピュータプログラムを格納し、前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対して少なくとも、
    一連の画像内の対象人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記対象人物の２以上の出現の１組の座標は第１の経路を規定する、ステップと、
    前記一連の画像内の関係人物の２以上の出現のそれぞれについて１組の座標を決定するステップであって、前記関係人物は前記対象人物に関係し、前記関係人物の２以上の出現の１組の座標は第２の経路を規定する、ステップと、
    前記第１の経路と前記第２の経路との間の１以上の最小距離を決定して、少なくとも１つの注目領域を決定するステップと、
    前記対象人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップと、
    前記第１の経路と前記第２の経路との間の１以上の最小距離のうちの少なくとも１つが決定された場合に、前記関係人物の最初の出現のタイムスタンプと最後の出現のタイムスタンプを決定するステップとを実行させる、
    装置。
12. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    撮影装置から、前記事象に関連する複数の画像入力を受信するステップと、
    前記事象に関連する複数の画像入力のそれぞれから１以上の特徴情報を識別するステップと、
    識別された１以上の特徴情報のそれぞれが、対象人物の特徴情報に対応する可能性があるか否か判断するステップとを実行させ、
    前記特徴情報は、顔情報及び体の動き情報を含む、請求項１１に記載の装置。
13. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記識別された１以上の特徴情報の１つが、前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、受信した画像入力の少なくとも１つを検索するステップを実行させ、
    検索された受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、請求項１２に記載の装置。
14. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応する可能性のある特徴情報に関連する、ステップと、
    複数組の座標と、複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力のそれぞれの前記対象人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記対象人物の最初の出現の複数組の座標及び複数のタイムスタンプと、前記対象人物の最後の出現の複数組の座標及び複数のタイムスタンプとを含む、ステップとを実行させる、請求項１３に記載の装置。
15. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記識別された１以上の特徴情報の１つが前記対象人物の特徴情報に対応する可能性があるとの判断に応じて、前記受信した画像入力の少なくとも１つを、検索期間内に検索するステップを実行させ、
    検索された前記受信した画像入力の少なくとも１つは、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連し、
    前記検索期間は、前記対象人物の最初の出現前の既定期間から開始し、最後の出現の後の既定期間で終了する期間である、請求項１４に記載の装置。
16. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記識別された１以上の特徴情報の１つが対象人物の特徴情報に対応する可能性があるとの判断に応じて、１以上の別の画像入力を検索するステップであって、検索された１以上の別の画像入力は、前記対象人物の特徴情報に対応しない可能性のある特徴情報に関連する、ステップと、
    複数組の座標及び複数のタイムスタンプを検索するステップであって、それぞれが、前記検索された１以上の別の画像入力内の前記関係人物の出現に関連し、前記複数組の座標及び前記複数のタイムスタンプは、前記関係人物の最初の出現及び最後の出現の複数組の座標及び複数のタイムスタンプを含む、ステップとを実行させる、請求項１５に記載の装置。
17. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記第１の経路における前記対象人物又は前記第２の経路における前記関係人物の別の出現に対応する別の座標の組を決定するステップと、
    前記第１の経路及び前記第２の経路の一方から他方の経路の位置への１組以上の座標を決定するステップとを実行させる、請求項１６に記載の装置。
18. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記第１の経路と前記第２の経路との間の決定された１以上の最小距離が、既定の距離以下であるか否か判断して、１以上の最小点を決定するステップを実行させる、請求項１７に記載の装置。
19. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記１以上の最小点を結んで、前記注目領域を決定するステップを実行させる、請求項１８に記載の装置。
20. 前記メモリ及び前記コンピュータプログラムは、前記プロセッサによって実行されることにより、前記装置に対してさらに、
    前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるか否か判断するステップと、
    前記第１の経路と前記第２の経路との間の決定された１以上の最小距離のうちの少なくとも１つが、前記既定の距離以下であるとの判断に応じて、前記対象人物の最初の出現の決定されたタイムスタンプ、前記対象人物の最後の出現の決定されたタイムスタンプ、前記関係人物の最初の出現の決定されたタイムスタンプ、及び前記関係人物の最後の決定されたタイムスタンプの中から、最初のタイムスタンプ及び最後のタイムスタンプを決定するステップとを実行させ、
    前記最初のタイムスタンプから前記最後のタイムスタンプまでの期間は、前記注目期間に相当する、請求項１８に記載の装置。
21. 事象を管理するための注目期間及び少なくとも１つの注目領域を決定するシステムであって、
    請求項１１〜２０のいずれか１項に記載の装置と、少なくとも１つの撮影装置とを含む、システム。

Images