JP2016218766A - 情報処理装置及び情報処理プログラム - Google Patents

Abstract

【課題】対象者を撮影した動画像から、その対象者の動作を評価する場合にあって、評価対象とすべき動画像を、その対象者の合図によって指定するようにした情報処理装置を提供する。【解決手段】情報処理装置の受付手段は、対象者を撮影した動画像を受け付け、検知手段は、前記対象者による合図を検知し、対応付け手段は、前記対象者による合図を該対象者の評価に用いる動画像の指定として用いられるように、前記動画像に前記検知手段によって検知された合図を対応付ける。【選択図】図１

Description

本発明は、情報処理装置及び情報処理プログラムに関する。

特許文献１には、製造現場の作業分析を簡易に行え、作業改善のための効果的な定量的評価が行える作業分析装置を提供することを課題とし、予め決められた領域に人が存在している時間に関する情報である存在時間情報を、２以上の各領域毎に取得する存在時間情報取得部と、存在時間情報取得部が取得した２以上の各領域に対する存在時間情報を用いて、作業に関する情報である作業情報を取得する解析部と、解析部が取得した作業情報を出力する出力部とを具備し、解析部は、存在時間情報取得部が取得した２以上の各領域に対する存在時間情報を用いて、２以上の各領域に対応する作業工程の時間別の作業状況を示す時間帯別作業効率情報を取得する時間帯別作業効率情報取得手段を具備し、作業情報は、時間帯別作業効率情報である作業分析装置により、製造現場の作業分析を簡易に行え、作業改善のための効果的な定量的評価が行えることが開示されている。

特許文献２には、作業中の作業者に標準作業手順に従う作業の実行を支援するための標準作業実行支援装置を提供することを課題とし、標準作業手順に従う作業の動画を構成する画像フレームにおける作業者の手の位置を示す位置情報と、前記手が前記位置情報によって示される位置にあるタイミングを示す時間情報とを予め対応付けて記憶する標準作業情報記憶部と、動画撮影部によって撮影された他の作業者による作業の動画を構成する画像フレームにおける前記他の作業者の手の位置を示す位置情報を生成する画像解析部と、前記標準作業情報記憶部に記憶されている時間情報に対応する位置情報によって示される位置と、前記動画撮影部によって撮影された前記動画における前記時間情報によって示されるタイミングで前記画像解析部が生成した位置情報によって示される位置との差異、及び前記標準作業情報記憶部に記憶されている位置情報に対応する時間情報によって示されるタイミングと、前記動画撮影部によって撮影された前記動画に基づいて、前記位置情報によって示される位置に合致する位置を示す位置情報を前記画像解析部が生成したタイミングとの差異を算出する差異算出部と、前記差異算出部の算出結果が所定の値よりも大きい場合に、前記動画撮影部によって撮影された前記動画に、前記標準作業情報記憶部に記憶されている位置情報又は時間情報に対応する画像を重畳して表示手段に表示させる重畳部とを備えたことを特徴とする標準作業実行支援装置が開示されている。

特許文献３には、入力装置の操作が行われていない時の作業状況もモニタリングする、及び、操作が行われている時でも実質的に作業が停滞している状況を検出し記録することを課題とし、入力装置と処理部と記録装置を備えた端末における作業者の作業のモニタリングを行う作業モニタリング方法であって、前記処理部において、前記作業者の前記入力装置への入力操作の特徴を解析することにより、前記作業者の作業停滞状況を検出する、
ことを特徴とする作業モニタリング方法が開示されている。

特開２０１２−００３６４９号公報 特開２０１１−１６４６９４号公報 特開２０１０−１４０１６４号公報

作業分析等として、その作業を行っている対象者を撮影した動画像から、その対象者の動作を評価することが行われている。従来の技術では、注意・留意すべき動作、禁止されている動作を監視、記録することに主眼が置かれているため、不都合の抑制や不都合が発生したときの確認に活用されている。
しかしながら、これらの作業分析等では、監視の対象者（労働者等）の働きぶりや工夫などを適切に評価してモチベーションを高めることに活用されていない。また、モチベーションを高めるためには、常時監視、常時記録が必要となる場合が多い。このため、評価者が常時監視することは困難であり、また、解析装置による解析を行う場合であっても処理する画像が膨大となる。
そこで、本発明は、対象者を撮影した動画像から、その対象者の動作を評価する場合にあって、評価対象とすべき動画像を、その対象者の合図によって指定するようにした情報処理装置及び情報処理プログラムを提供することを目的としている。

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項１の発明は、対象者を撮影した動画像を受け付ける受付手段と、前記対象者による合図を検知する検知手段と、前記対象者による合図を該対象者の評価に用いる動画像の指定として用いられるように、前記動画像に前記検知手段によって検知された合図を対応付ける対応付け手段を具備することを特徴とする情報処理装置である。

請求項２の発明は、前記対応付け手段は、前記合図に応じた開始と終了の間の動画像を抽出すること、又は、該開始と該終了の日時を該動画像に対応付けることを特徴とする請求項１に記載の情報処理装置である。

請求項３の発明は、前記合図に応じた開始と終了の間の動画像を再生するように制御すること、又は、該動画像を解析の対象とするように制御することのいずれか又は組み合わせを行う制御手段をさらに具備することを特徴とする請求項１又は２に記載の情報処理装置である。

請求項４の発明は、前記検知手段は、前記対象者が操作する端末装置からの指示を合図として検知すること、該対象者が発生する予め定められた音声を合図として検知すること、又は、該対象者の予め定められた動作を検知することのいずれか又は組み合わせを検知することを特徴とする請求項１から３のいずれか一項に記載の情報処理装置である。

請求項５の発明は、前記検知手段は、前記合図として、開始又は終了のいずれか一方を検知した場合は、該合図が開始であるときは該開始から予め定められた期間後を終了として扱い、又は該合図が終了であるときは該終了から予め定められた期間前を開始として扱うことを特徴とする請求項１から４のいずれか一項に記載の情報処理装置である。

請求項６の発明は、前記検知手段は、前記対象者による第２の合図を検知し、前記第２の合図を検知した場合は、該第２の合図後の動画像を、評価者に提示し得るように通知する通知手段をさらに具備することを特徴とする請求項１から５のいずれか一項に記載の情報処理装置である。

請求項７の発明は、コンピュータを、対象者を撮影した動画像を受け付ける受付手段と、前記対象者による合図を検知する検知手段と、前記対象者による合図を該対象者の評価に用いる動画像の指定として用いられるように、前記動画像に前記検知手段によって検知された合図を対応付ける対応付け手段として機能させるための情報処理プログラムである。

請求項１の情報処理装置によれば、対象者を撮影した動画像から、その対象者の動作を評価する場合にあって、評価対象とすべき動画像を、その対象者の合図によって指定することができる。

請求項２の情報処理装置によれば、合図に応じた開始と終了の間の動画像を抽出すること、又は、開始と終了の日時を動画像に対応付けることができる。

請求項３の情報処理装置によれば、合図に応じた開始と終了の間の動画像を再生するように制御すること、又は、動画像を解析の対象とするように制御することができる。

請求項４の情報処理装置によれば、対象者の合図として、端末装置からの指示、音声、又は、動作を用いることができる。

請求項５の情報処理装置によれば、開始又は終了のいずれか一方を合図として用いることができる。

請求項６の情報処理装置によれば、第２の合図によって、その第２の合図後の動画像を、評価者に提示し得るように通知することができる。

請求項７の情報処理プログラムによれば、対象者を撮影した動画像から、その対象者の動作を評価する場合にあって、評価対象とすべき動画像を、その対象者の合図によって指定することができる。

第１の実施の形態（撮影側）の構成例についての概念的なモジュール構成図である。 第１の実施の形態（解析側）の構成例についての概念的なモジュール構成図である。 本実施の形態を利用したシステム構成例を示す説明図である。 第１の実施の形態による処理例を示すフローチャートである。 合図定義テーブルのデータ構造例を示す説明図である。 対応付けテーブルのデータ構造例を示す説明図である。 第１の実施の形態による処理例を示すフローチャートである。 第１の実施の形態による処理例を示すフローチャートである。 第１の実施の形態による処理例を示すフローチャートである。 第２の実施の形態（撮影側）の構成例についての概念的なモジュール構成図である。 第２の実施の形態（解析側）の構成例についての概念的なモジュール構成図である。 第２の実施の形態による処理例を示すフローチャートである。 合図定義テーブルのデータ構造例を示す説明図である。 第２の実施の形態による処理例を示すフローチャートである。 本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。

以下、図面に基づき本発明を実現するにあたっての好適な各種の実施の形態の例を説明する。
図１は、第１の実施の形態（撮影側）の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（コンピュータ・プログラム）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム（コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム）、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するという意味である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（データの授受、指示、データ間の参照関係等）の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態に応じて、又はそれまでの状況・状態に応じて定まることの意を含めて用いる。「予め定められた値」が複数ある場合は、それぞれ異なった値であってもよいし、２以上の値（もちろんのことながら、全ての値も含む）が同じであってもよい。また、「Ａである場合、Ｂをする」という意味を有する記載は、「Ａであるか否かを判断し、Ａであると判断した場合はＢをする」の意味で用いる。ただし、Ａであるか否かの判断が不要である場合を除く。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」（社会システム）にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスク、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、外部記憶媒体、通信回線を介した記憶装置、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）内のレジスタ等を含んでいてもよい。

第１の実施の形態である情報処理装置１００（撮影側）は、被評価者である対象者を撮影するものであって、図１の例に示すように、影像受取モジュール１４０、検知モジュール１５０、対応付モジュール１６０、記憶モジュール１７０、送信モジュール１８０を有している。
撮影の対象者として、その対象者の動作が評価対象となる者であって、工場、工事現場等における労働者、バス、電車、タクシー等の運転者、会合等における参加者、受付等の案内業、販売員、事務職等を含む。
また、対象者による合図は、対象者がこれから評価者に評価してもらいたい動作（音声を含めてもよい）を行う直前に発せられる。なお、後述するように、評価者に評価してもらいたい動作を行った後に、対象者による合図が発せられてもよい。

撮像装置１１０は、情報処理装置１００の影像受取モジュール１４０、検知モジュール１５０と接続されている。撮像装置１１０は、対象者を撮影する。例えば、動画を撮影するための２Ｄカメラ、３Ｄカメラ、サーモカメラ、全方位カメラ等である。また、撮像装置１１０は、固定されたものであってもよいし、角度、位置等を変更することができるものであってもよい。なお、撮像装置１１０は、評価用の動画像を撮影することの他に、対象者からの合図を撮影するものであってもよい。
受信装置１２０は、情報処理装置１００の検知モジュール１５０と接続されている。受信装置１２０は、対象者が操作する端末装置からの指示を受信する。例えば、ブルーツース等の機能を備えた近距離無線通信装置等がある。対象者が操作する端末装置との間の通信は、無線、有線、又はこれらの組み合わせであってもよい。対象者が操作する端末装置として、通信機能を備えたＰＣ、携帯端末（携帯電話、スマートフォン等を含む）、ウェアラブル通信装置等がある。
音声受付装置１３０は、情報処理装置１００の検知モジュール１５０と接続されている。音声受付装置１３０は、対象者が発生する音声を取得するマイクロフォンである。この音声が予め定められた音声である場合、対象者からの合図となる。
なお、受信装置１２０、音声受付装置１３０は、必ずしも情報処理装置１００に接続されている必要はない。つまり、いずれも接続されていない場合（対象者による合図は動作によって行われる場合）、受信装置１２０、音声受付装置１３０のいずれか一方が接続されている場合（主に、対象者による合図が端末装置からの指示、対象者による合図が音声によって行われる場合のいずれか一方、又は、そのいずれか一方と対象者の動作によって行われる合図の場合）、両方が接続されている場合（主に、対象者による合図が端末装置からの指示、対象者による合図が音声によって行われる場合の組み合わせ、さらに、対象者の動作を組み合わせた合図の場合）がある。

影像受取モジュール１４０は、撮像装置１１０、対応付モジュール１６０と接続されている。影像受取モジュール１４０は、撮像装置１１０から、対象者を撮影した動画像を受け付ける。ここで受け付ける動画像は、常に撮影した動画像である。ただし、その動画像内で、対象者が常に撮影されているか否かは問わず、席を外す等によって撮影されていない期間が含まれていてもよい。

検知モジュール１５０は、撮像装置１１０、受信装置１２０、音声受付装置１３０、対応付モジュール１６０と接続されている。検知モジュール１５０は、対象者による合図を検知する。ここでの合図は、開始の合図と終了の合図がある。なお、検知対象の合図として、後述するように、開始の合図だけであってもよいし、終了の合図だけであってもよい。開始の合図（Ｂ）だけである場合は、開始の合図（Ａ）と終了の合図の両方がある場合の開始の合図（Ａ）とは異なる合図であってもよい。同様に、終了の合図（Ｂ）だけである場合は、開始の合図と終了の合図（Ａ）の両方がある場合の終了の合図（Ａ）とは異なる合図であってもよい。
また、検知モジュール１５０は、対象者が操作する端末装置からの指示を合図として検知すること、対象者が発生する予め定められた音声を合図として検知すること、又は、対象者の予め定められた動作を検知することのいずれか又は組み合わせを検知するようにしてもよい。検知モジュール１５０は、予め定められた合図が、撮像装置１１０によって撮影された動画像内にあるか否かを検知する。ここでの検知は、動画像解析の公知の技術を用いればよい。また、予め定められた合図を示す情報が、受信装置１２０によって受信された情報内にあるか否かを検知する。また、予め定められた合図が、音声受付装置１３０によって受け付けられた音声情報内にあるか否かを検知する。ここでの検知は、音声認識の公知の技術を用いればよい。
また、検知モジュール１５０は、合図として、開始又は終了のいずれか一方（前述の開始の合図（Ｂ）、終了の合図（Ｂ）のいずれか一方）を検知した場合は、その合図が開始であるときはその開始から予め定められた期間後を終了として扱い、又はその合図が終了であるときはその終了から予め定められた期間前を開始として扱うようにしてもよい。

対応付モジュール１６０は、影像受取モジュール１４０、検知モジュール１５０、記憶モジュール１７０、送信モジュール１８０と接続されている。対応付モジュール１６０は、対象者による合図を、その対象者の評価に用いる動画像の指定として用いられるように、動画像に検知モジュール１５０によって検知された合図を対応付ける。
また、対応付モジュール１６０は、合図に応じた開始と終了の間の動画像を抽出すること、又は、その開始とその終了の日時（年、月、日、時、分、秒、秒以下、又はこれらの組み合わせであってもよい）を動画像に対応付けるようにしてもよい。また、日時には、絶対的な日時（暦年で示される日時）の他に、撮影開始時からの相対的日時を含む。具体的には、抽出した画像を記憶装置に記憶するようにしてもよいし、対象者の評価を行う者（評価者）宛に送信するようにしてもよい。
記憶モジュール１７０は、対応付モジュール１６０、送信モジュール１８０と接続されている。記憶モジュール１７０は、対応付モジュール１６０によって、開始の日時と終了の日時が対応付けられた動画像（開始と終了の間の動画像を含む）を記憶する。
送信モジュール１８０は、対応付モジュール１６０、記憶モジュール１７０と接続されている。送信モジュール１８０は、記憶モジュール１７０に記憶された動画像又は対応付モジュール１６０によって開始の日時と終了の日時が対応付けられた動画像を、情報処理装置２００に送信する。

第１の実施の形態である情報処理装置２００（解析側）は、評価者のために、対象者を撮影した動画像を再生するものであって、図２の例に示すように、受信モジュール２１０、解析モジュール２２０、出力制御モジュール２３０、提示モジュール２４０を有している。
受信モジュール２１０は、解析モジュール２２０、出力制御モジュール２３０と接続されている。受信モジュール２１０は、情報処理装置１００と接続されており、情報処理装置１００の送信モジュール１８０から、対象者を撮影した動画像を受信する。
解析モジュール２２０は、受信モジュール２１０、出力制御モジュール２３０と接続されている。解析モジュール２２０は、受信モジュール２１０が受信した動画像を解析する。ここでの解析処理は、動画像解析の公知の技術を用いればよい。例えば、予め定められた動作（例えば、標準工程における動作等）が、対象者によって行われたか否かを判断する。
出力制御モジュール２３０は、受信モジュール２１０、解析モジュール２２０、提示モジュール２４０と接続されている。出力制御モジュール２３０は、合図に応じた開始と終了の間の動画像を再生するように制御すること、又は、その動画像を解析の対象とするように制御することのいずれか又は組み合わせを行う。
提示モジュール２４０は、出力制御モジュール２３０と接続されている。提示モジュール２４０は、出力制御モジュール２３０による制御によって、評価者が評価できるように、動画像を液晶ディスプレイ等の出力装置に提示する。

図３は、本実施の形態を利用したシステム構成例を示す説明図である。
情報処理装置１００Ａ、撮像装置１１０Ｂ、情報処理装置１００Ｃ、情報処理装置２００は、通信回線３９０を介してそれぞれ接続されている。特に、情報処理装置１００Ａは情報処理装置２００と接続されており、撮像装置１１０Ｂは情報処理装置１００Ｃと接続されており、情報処理装置１００Ｃは情報処理装置２００と接続されている。通信回線３９０は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのインターネット、イントラネット等であってもよい。情報処理装置２００は、評価者によって操作される。
会議室３１０には、情報処理装置１００Ａ、撮像装置１１０Ａ、受信装置１２０Ａ、音声受付装置１３０Ａが設置されている。撮像装置１１０Ａは、情報処理装置１００Ａと接続されている。受信装置１２０Ａは、情報処理装置１００Ａと接続されている。音声受付装置１３０Ａは、情報処理装置１００Ａと接続されている。これは、会議室３１０内の会議の参加者を評価するためのものである。この場合、合図は、対象者による動作、音声、端末装置からの指示のいずれか、又はこれらの組み合わせである。
作業室３２０には、撮像装置１１０Ｂが設置されている。これは、作業室３２０内の作業者を評価するためのものである。この場合、合図は、対象者による動作によって行われる。情報処理装置１００Ｃによって、動画像と合図の対応付けが行われる。なお、情報処理装置１００Ｃによる機能は、クラウドサービスとして実現してもよい。
図３の例では、２つの形態（会議室３１０内に情報処理装置１００Ａが設置されている場合、作業室３２０内には情報処理装置１００は設置されずに、通信回線３９０に接続されている情報処理装置１００Ｃを用いる場合）を示しているが、作業室３２０内に受信装置１２０、音声受付装置１３０が設置されていてもよいし、情報処理装置１００Ｃは、複数の箇所に設置されている複数の撮像装置１１０と接続されているようにしてもよい。

図４は、第１の実施の形態（情報処理装置１００）による処理例を示すフローチャートである。
ステップＳ４０２では、撮像装置１１０が、対象者を撮影する。
ステップＳ４０４では、影像受取モジュール１４０が、撮影画像を受け取る。
ステップＳ４０６では、対応付モジュール１６０が、撮影画像を記憶モジュール１７０に記憶させる。

ステップＳ４０８では、検知モジュール１５０が、監視対象者からの合図を検知したか否かを判断し、検知した場合はステップＳ４１０へ進み、それ以外の場合はステップＳ４１２へ進む。ここでの検知処理として、予め定められた合図と一致するか否かを判断すればよい。例えば、予め定められた合図として、合図定義テーブル５００を用いてもよい。図５は、合図定義テーブル５００のデータ構造例を示す説明図である。合図定義テーブル５００は、ユーザＩＤ欄５１０、スタート合図欄５２０、エンド合図欄５３０を有している。ユーザＩＤ欄５１０は、本実施の形態において、ユーザ（対象者）を一意に識別するための情報（ユーザＩＤ：ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）を記憶している。スタート合図欄５２０は、そのユーザにおけるスタート合図を記憶している。エンド合図欄５３０は、そのユーザにおけるエンド合図を記憶している。例えば、合図が動作（指を１本立てる、手のひらを左右に振る等）である場合は、その動作を撮影した動画像であってもよいし、その動作を認識するための特徴であってもよい。また、合図が端末装置からの指示（スタート指示、エンド指示）である場合は、その指示を示す情報である。合図が音声（「スタート」、「エンド」等の音声）である場合は、その音声を録音した情報であってもよいし、その音声を認識するための特徴であってもよい。また、スタートの合図とエンドの合図は、必ずしも異なる必要はない。２回の合図がエンドの合図としてもよい。また、ユーザＩＤ欄５１０を用意して、ユーザ毎に異なる合図に対応できるようにしているが、全てのユーザに同じ合図を定義するようにしてもよい。また、ユーザＩＤ欄５１０を用いて、合図に応じて、ユーザを特定するようにしてもよい。つまり、撮影対象であるユーザを撮影前に予め登録する処理をすることなく、ユーザを特定することを行ってもよい。

ステップＳ４１０では、対応付モジュール１６０が、合図と撮影画像の対応付けデータを生成する。例えば、対応付けテーブル６００を生成する。図６は、対応付けテーブル６００のデータ構造例を示す説明図である。
対応付けテーブル６００は、撮像装置欄６１０、合図欄６２０、日時欄６３０を有している。
撮像装置欄６１０は、本実施の形態において、撮像装置を一意に識別するための情報を記憶している。合図欄６２０は、対象者によって行われた合図情報（スタート合図、エンド合図を示す情報）を記憶している。また、ユーザＩＤとともに合図情報を記憶するようにしてもよい。日時欄６３０は、その合図が行われた日時を記憶している。この対応付けテーブル６００を用いることによって、スタートの合図があったときから、エンドの合図があるまでの動画像を再生することができる。
ステップＳ４１２では、撮影終了であるか否かを判断し、撮影終了である場合はステップＳ４１４へ進み、それ以外の場合はステップＳ４０２へ戻る。
ステップＳ４１４では、送信モジュール１８０が、撮影画像と対応付けデータを情報処理装置２００に送信する。

図７は、第１の実施の形態（情報処理装置２００）による処理例を示すフローチャートである。
ステップＳ７０２では、受信モジュール２１０が、撮影画像と対応付けデータを受信する。
ステップＳ７０４では、解析モジュール２２０が、画像解析を行うか否かを判断し、行う場合はステップＳ７０６へ進み、それ以外の場合はステップＳ７０８へ進む。
ステップＳ７０６では、解析モジュール２２０が、撮影画像を解析する。
ステップＳ７０８では、出力制御モジュール２３０が、スタート合図、エンド合図に応じた撮影画像の提示を判断する。つまり、スタート合図からエンド合図までの撮影画像を再生するように制御する。なお、ユーザ毎に合図が異なる場合は、評価者が指定したユーザの撮影画像を再生するように制御してもよい。
ステップＳ７１０では、提示モジュール２４０が、撮影画像を提示する。

図８は、第１の実施の形態（情報処理装置１００）による処理例を示すフローチャートである。スタートの合図だけを検知した場合の処理例を示すものである。
ステップＳ８０２では、撮像装置１１０が、対象者を撮影する。
ステップＳ８０４では、影像受取モジュール１４０が、撮影画像を受け取る。
ステップＳ８０６では、対応付モジュール１６０が、撮影画像を記憶モジュール１７０に記憶させる。
ステップＳ８０８では、検知モジュール１５０が、監視対象者からのスタート合図を検知したか否かを判断し、検知した場合はステップＳ８１０へ進み、それ以外の場合はステップＳ８１２へ進む。なお、スタート合図を検知するのに、合図定義テーブル５００を用いるが、合図定義テーブル５００内のエンド合図欄５３０は不要である。

ステップＳ８１０では、対応付モジュール１６０が、スタート合図と撮影画像の対応付けデータを生成する。
ステップＳ８１２では、スタート日時から算出したエンド日時と撮影画像の対応付けデータを生成する。ここで、エンド日時の算出は、スタート日時から予め定められた期間を加算すればよい。
ステップＳ８１４では、撮影終了であるか否かを判断し、撮影終了である場合はステップＳ８１６へ進み、それ以外の場合はステップＳ８０２へ戻る。
ステップＳ８１６では、送信モジュール１８０が、撮影画像と対応付けデータを情報処理装置２００に送信する。

図９は、第１の実施の形態（情報処理装置１００）による処理例を示すフローチャートである。エンドの合図だけを検知した場合の処理例を示すものである。
ステップＳ９０２では、撮像装置１１０が、対象者を撮影する。
ステップＳ９０４では、影像受取モジュール１４０が、撮影画像を受け取る。
ステップＳ９０６では、対応付モジュール１６０が、撮影画像を記憶モジュール１７０に記憶させる。
ステップＳ９０８では、検知モジュール１５０が、監視対象者からのエンド合図を検知したか否かを判断し、検知した場合はステップＳ９１０へ進み、それ以外の場合はステップＳ９１２へ進む。なお、エンド合図を検知するのに、合図定義テーブル５００を用いるが、合図定義テーブル５００内のスタート合図欄５２０は不要である。

ステップＳ９１０では、対応付モジュール１６０が、エンド合図と撮影画像の対応付けデータを生成する。
ステップＳ９１２では、エンド日時から算出したスタート日時と撮影画像の対応付けデータを生成する。ここで、スタート日時の算出は、エンド日時から予め定められた期間を減算すればよい。
ステップＳ９１４では、撮影終了であるか否かを判断し、撮影終了である場合はステップＳ９１６へ進み、それ以外の場合はステップＳ９０２へ戻る。
ステップＳ９１６では、送信モジュール１８０が、撮影画像と対応付けデータを情報処理装置２００に送信する。

図１０は、第２の実施の形態（撮影側）の構成例についての概念的なモジュール構成図である。
情報処理装置１０００は、影像受取モジュール１４０、検知モジュール１５０、検知Ｂモジュール１０５０、対応付モジュール１６０、記憶モジュール１７０、送信モジュール１８０を有している。なお、第１の実施の形態と同種の部位には同一符号を付し重複した説明を省略する（以下、同様）。
情報処理装置１０００は、第２の合図に対応するものである。ここで第２の合図とは、評価者に対してリアルタイム（ここでのリアルタイムには、ある程度の遅れは許容される）で評価を依頼するための合図である。例えば、対象者は自分の動作に自信がなく、即座に評価者からのアドバイスを得られるようにするものであり、第２の合図を検知した場合は、その後の撮影画像を評価者に対してリアルタイムに提示する。

撮像装置１１０は、情報処理装置１００の影像受取モジュール１４０、検知モジュール１５０、検知Ｂモジュール１０５０と接続されている。
受信装置１２０は、情報処理装置１００の検知モジュール１５０、検知Ｂモジュール１０５０と接続されている。
音声受付装置１３０は、情報処理装置１００の検知モジュール１５０、検知Ｂモジュール１０５０と接続されている。
影像受取モジュール１４０は、撮像装置１１０、対応付モジュール１６０と接続されている。
検知モジュール１５０は、撮像装置１１０、受信装置１２０、音声受付装置１３０、対応付モジュール１６０と接続されている。
検知Ｂモジュール１０５０は、撮像装置１１０、受信装置１２０、音声受付装置１３０、対応付モジュール１６０と接続されている。検知Ｂモジュール１０５０は、対象者による第２の合図を検知する。
対応付モジュール１６０は、影像受取モジュール１４０、検知モジュール１５０、検知Ｂモジュール１０５０、記憶モジュール１７０、送信モジュール１８０と接続されている。対応付モジュール１６０は、検知Ｂモジュール１０５０によって第２の合図を検知した場合は、その第２の合図を動画像に対応付ける。
記憶モジュール１７０は、対応付モジュール１６０、送信モジュール１８０と接続されている。
送信モジュール１８０は、対応付モジュール１６０、記憶モジュール１７０と接続されている。送信モジュール１８０は、検知Ｂモジュール１０５０によって第２の合図を検知した場合は、その第２の合図があったことを示す情報、その後の動画像を即座に情報処理装置１１００に送信する。

図１１は、第２の実施の形態（解析側）の構成例についての概念的なモジュール構成図である。
情報処理装置１１００は、受信モジュール２１０、解析モジュール２２０、出力制御モジュール２３０、通知モジュール１１３０、提示モジュール２４０を有している。
受信モジュール２１０は、解析モジュール２２０、出力制御モジュール２３０と接続されている。
解析モジュール２２０は、受信モジュール２１０、出力制御モジュール２３０と接続されている。
出力制御モジュール２３０は、受信モジュール２１０、解析モジュール２２０、通知モジュール１１３０、提示モジュール２４０と接続されている。
通知モジュール１１３０は、出力制御モジュール２３０と接続されている。通知モジュール１１３０は、第２の合図を検知した場合（受信モジュール２１０が受信した情報に第２の合図が含まれていることを検知することを含む）は、その第２の合図後の動画像を、評価者に提示し得るように通知する。例えば、評価者が用いているＰＣ、携帯端末、ウェアラブル通信装置等に対して、対象者から第２の合図があったことを通知し、又はその第２の合図があった動画像を提示する。通知は、液晶ディスプレイ等への表示、音声、振動等又はこれらの組み合わせであってもよい。また、対象者と評価者を対応させて記憶しているテーブルを用いて、対象者に合わせた評価者を選択することができるようにしてもよい。
提示モジュール２４０は、出力制御モジュール２３０と接続されている。

図１２は、第２の実施の形態（情報処理装置１０００）による処理例を示すフローチャートである。
ステップＳ１２０２では、撮像装置１１０が、対象者を撮影する。
ステップＳ１２０４では、影像受取モジュール１４０が、撮影画像を受け取る。
ステップＳ１２０６では、対応付モジュール１６０が、撮影画像を記憶モジュール１７０に記憶させる。

ステップＳ１２０８では、検知モジュール１５０又は検知Ｂモジュール１０５０が、監視対象者からの合図を検知したか否かを判断し、検知した場合はステップＳ１２１０へ進み、それ以外の場合はステップＳ１２１２へ進む。ここでの検知処理として、予め定められた合図と一致するか否かを判断すればよい。例えば、予め定められた合図として、合図定義テーブル１３００を用いてもよい。図１３は、合図定義テーブル１３００のデータ構造例を示す説明図である。合図定義テーブル１３００は、ユーザＩＤ欄１３１０、スタート合図欄１３２０、エンド合図欄１３３０、即スタート合図欄１３４０、即エンド合図欄１３５０を有している。ユーザＩＤ欄１３１０は、ユーザＩＤを記憶している。スタート合図欄１３２０は、そのユーザにおけるスタート合図を記憶している。エンド合図欄１３３０は、そのユーザにおけるエンド合図を記憶している。即スタート合図欄１３４０は、そのユーザにおける即スタート合図（第２の合図）を記憶している。即エンド合図欄１３５０は、そのユーザにおける即エンド合図（第２の合図に対応した終了の合図）を記憶している。

ステップＳ１２１０では、対応付モジュール１６０が、合図と撮影画像の対応付けデータを生成する。
ステップＳ１２１２では、対応付モジュール１６０が、検知した合図は即スタート合図であるか否かを判断し、即スタート合図である場合はステップＳ１２１４へ進み、それ以外の場合はステップＳ１２１６へ進む。
ステップＳ１２１４では、対応付モジュール１６０が、即スタート合図に対応する即エンド合図を検知するまで撮影画像を送信モジュール１８０が送信するように制御する。
ステップＳ１２１６では、対応付モジュール１６０が、検知した合図は即スタート合図に対応した即エンド合図であるか否かを判断し、即スタート合図に対応した即エンド合図である場合はステップＳ１２１８へ進み、それ以外の場合はステップＳ１２２０へ進む。
ステップＳ１２１８では、対応付モジュール１６０が、送信モジュール１８０による撮影画像の送信を終了する。
ステップＳ１２２０では、撮影終了であるか否かを判断し、撮影終了である場合はステップＳ１２２２へ進み、それ以外の場合はステップＳ１２０２へ戻る。
ステップＳ１２２２では、送信モジュール１８０が、撮影画像と対応付けデータを情報処理装置１１００に送信する。

図１４は、第２の実施の形態（情報処理装置１１００）による処理例を示すフローチャートである。
ステップＳ１４０２では、受信モジュール２１０が、撮影画像と対応付けデータを受信する。
ステップＳ１４０４では、出力制御モジュール２３０が、即スタート合図による撮影画像であるか否かを判断し、即スタート合図による撮影画像である場合は、ステップＳ１４０６へ進み、それ以外の場合はステップＳ１４１０へ進む。
ステップＳ１４０６では、通知モジュール１１３０が、評価者宛に即対応要の要請があることを通知する。
ステップＳ１４０８では、即スタート合図に対応する即エンド合図があるまで、評価者宛に撮影画像の提示を制御する。

ステップＳ１４１０では、解析モジュール２２０が、画像解析を行うか否かを判断し、行う場合はステップＳ１４１２へ進み、それ以外の場合はステップＳ１４１４へ進む。
ステップＳ１４１２では、解析モジュール２２０が、撮影画像を解析する。
ステップＳ１４１４では、出力制御モジュール２３０が、スタート合図、エンド合図に応じた撮影画像の提示を判断する。
ステップＳ１４１６では、提示モジュール２４０が、撮影画像を提示する。

なお、本実施の形態としてのプログラムが実行されるコンピュータのハードウェア構成は、図１５に例示するように、一般的なコンピュータであり、具体的にはパーソナルコンピュータ、サーバーとなり得るコンピュータ等である。つまり、具体例として、処理部（演算部）としてＣＰＵ１５０１を用い、記憶装置としてＲＡＭ１５０２、ＲＯＭ１５０３、ＨＤ１５０４を用いている。ＨＤ１５０４として、例えばハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）を用いてもよい。影像受取モジュール１４０、検知モジュール１５０、対応付モジュール１６０、送信モジュール１８０、受信モジュール２１０、解析モジュール２２０、出力制御モジュール２３０、提示モジュール２４０、検知Ｂモジュール１０５０、通知モジュール１１３０等のプログラムを実行するＣＰＵ１５０１と、そのプログラムやデータを記憶するＲＡＭ１５０２と、本コンピュータを起動するためのプログラム等が格納されているＲＯＭ１５０３と、補助記憶装置（フラッシュメモリ等であってもよい）であるＨＤ１５０４と、キーボード、マウス、タッチパネル、マイクロフォン等に対する利用者の操作に基づいてデータを受け付ける受付装置１５０６と、ＣＲＴ、液晶ディスプレイ、スピーカー等の出力装置１５０５と、ネットワークインタフェースカード等の通信ネットワークと接続するための通信回線インタフェース１５０７、そして、それらをつないでデータのやりとりをするためのバス１５０８により構成されている。これらのコンピュータが複数台互いにネットワークによって接続されていてもよい。

前述の実施の形態のうち、コンピュータ・プログラムによるものについては、本ハードウェア構成のシステムにソフトウェアであるコンピュータ・プログラムを読み込ませ、ソフトウェアとハードウェア資源とが協働して、前述の実施の形態が実現される。
なお、図１５に示すハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図１５に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア（例えば特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）等）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図１５に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、携帯情報通信機器（携帯電話、スマートフォン、モバイル機器、ウェアラブルコンピュータ等を含む）、情報家電、ロボット、複写機、ファックス、スキャナ、プリンタ、複合機（スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）などに組み込まれていてもよい。

なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通等のために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、ブルーレイ・ディスク（Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ）、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ（登録商標））、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）、ＳＤ（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌ）メモリーカード等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、又は無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、又は別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して記録されていてもよい。また、圧縮や暗号化等、復元可能であればどのような態様で記録されていてもよい。

１００…情報処理装置
１１０…撮像装置
１２０…受信装置
１３０…音声受付装置
１４０…影像受取モジュール
１５０…検知モジュール
１６０…対応付モジュール
１７０…記憶モジュール
１８０…送信モジュール
２００…情報処理装置
２１０…受信モジュール
２２０…解析モジュール
２３０…出力制御モジュール
２４０…提示モジュール
３１０…会議室
３２０…作業室
３９０…通信回線
１０００…情報処理装置
１０５０…検知Ｂモジュール
１１００…情報処理装置
１１３０…通知モジュール

Claims (7)

1. 対象者を撮影した動画像を受け付ける受付手段と、
   前記対象者による合図を検知する検知手段と、
   前記対象者による合図を該対象者の評価に用いる動画像の指定として用いられるように、前記動画像に前記検知手段によって検知された合図を対応付ける対応付け手段
   を具備することを特徴とする情報処理装置。
2. 前記対応付け手段は、前記合図に応じた開始と終了の間の動画像を抽出すること、又は、該開始と該終了の日時を該動画像に対応付ける
   ことを特徴とする請求項１に記載の情報処理装置。
3. 前記合図に応じた開始と終了の間の動画像を再生するように制御すること、又は、該動画像を解析の対象とするように制御することのいずれか又は組み合わせを行う制御手段
   をさらに具備することを特徴とする請求項１又は２に記載の情報処理装置。
4. 前記検知手段は、前記対象者が操作する端末装置からの指示を合図として検知すること、該対象者が発生する予め定められた音声を合図として検知すること、又は、該対象者の予め定められた動作を検知することのいずれか又は組み合わせを検知する
   ことを特徴とする請求項１から３のいずれか一項に記載の情報処理装置。
5. 前記検知手段は、前記合図として、開始又は終了のいずれか一方を検知した場合は、該合図が開始であるときは該開始から予め定められた期間後を終了として扱い、又は該合図が終了であるときは該終了から予め定められた期間前を開始として扱う
   ことを特徴とする請求項１から４のいずれか一項に記載の情報処理装置。
6. 前記検知手段は、前記対象者による第２の合図を検知し、
   前記第２の合図を検知した場合は、該第２の合図後の動画像を、評価者に提示し得るように通知する通知手段
   をさらに具備することを特徴とする請求項１から５のいずれか一項に記載の情報処理装置。
7. コンピュータを、
   対象者を撮影した動画像を受け付ける受付手段と、
   前記対象者による合図を検知する検知手段と、
   前記対象者による合図を該対象者の評価に用いる動画像の指定として用いられるように、前記動画像に前記検知手段によって検知された合図を対応付ける対応付け手段
   として機能させるための情報処理プログラム。

Images