JPWO2004029905A1 - 遠隔教育システム、受講確認方法および受講確認プログラム - Google Patents

Abstract

遠隔教育において録画映像等を用いた第３者による身代わり受講を防止して、正規の受講者が受講していることを確認できる遠隔教育システムを提供する。遠隔教育システム（１）はＷｅｂサーバ（１０）と双方向通信サーバ（２０）とコンテンツ配信サーバ（３０）と運営管理システム（４０）と講師端末（６０）と通信回線接続装置（７０）とから構成され、インターネット（２）を介して受講者端末（１０１、１０２、…）に対して遠隔教育が提供される。運営管理システム（４０）は講座スケジュールと出席簿と受講者の個人情報・顔画像・音声等が登録された講座情報データベース（５０）を備え、講座設定処理（４１）と受講登録処理（４２）と講座開設処理（４３）と受講確認処理（４４）等を行う。受講確認処理（４４）は受講者画像取得処理（４５）と顔画像照合処理（４６）とアクション要求処理（４７）とアクション検出処理（４８）とから構成され、受講者の顔画像の照合と要求したアクションに対する画像変化を検出する。

Description

本願発明は、映像及び音声を含むマルチメディアによる双方向通信を用いて遠隔で教育を行う遠隔教育システムに関し、特に正規の受講者が受講していることを確認する受講確認機能を有する遠隔教育システム、受講確認方法および受講確認プログラムに関する。

近年、通信技術の発達により、映像および音声を含むマルチメディアによる双方向通信を用いて、受講者が遠隔地から通信回線を介して教育を受けることのできる遠隔教育システムの実用化が始まっている。
このような遠隔教育システムは、今後正規の教育手段として認められる方向にあり、遠隔教育によって正規の単位取得や資格の認定を認めていくためには、受講者の受講確認を的確に行うことが要求される。特に、遠隔教育においては、１人の講師によって多数の受講者に対応する場合や、プログラム化された無人講座を受講者が自主的に受講する場合があり、人手に頼らない受講者の受講確認方法が必要になると考えられる。
従来、受講者の受講を確認する方法として、例えば再公表公報ＷＯ００−５９２２６号に記載された視聴覚認証システムがあった。これは、番組提供者が固有の視聴確認コードを固有のタイミングで視聴者に対して提示し、これに対して視聴者が視聴覚端末から入力した視聴確認コードを入力時刻とともに視聴覚認証システムに伝達し、視聴覚認証システムは伝達された視聴確認コードと入力時刻とから視聴者が実際に番組を視聴したことを判断するものである。
しかしながら、かかる従来の視聴覚認証システムは、入力された視聴確認コードと時刻情報とから視聴者が番組を視聴していたことを判断するものであり、視聴者が番組を視聴していたことは確認できるが、その視聴者が登録された正規の受講者であるということは保証されない。従って、例えば正規の受講者が第３者に身代わり受講を依頼した場合においても正規の受講者が受講していたとして記録される。また、遠隔教育システムを用いて受講者に対して試験を行う場合に、正規の受講者が第３者に身代わり受験を依頼することも簡単にできてしまう。
一方、受講者が登録された正規の受講者であることを確認する方法としては、あらかじめ登録されたパスワードを受講者に入力させるパスワード認証法、あらかじめ登録した個人情報について受講者に質問確認する個人情報質問確認法、受講者の顔等の画像を取得してあらかじめ登録された受講者の顔等の画像と画像照合する画像照合法、受講者の音声を取得してあらかじめ登録された受講者の音声と照合する音声照合法等が考えられる。
しかしながら、パスワード認証法や個人情報質問確認法では、正規の受講者があらかじめ第３者にパスワードや個人情報を教えておくことで、その第３者に身代わり受講させることができる。
また、画像照合法や音声照合法においても、受講確認要求を受けた受講者があらかじめ録画した正規の受講者の映像やあらかじめ録音した正規の受講者の音声を端末から送信することで、第３者に身代わり受講させることが可能である。
このように、従来の受講確認方法では、正規の受講者が意図的に第３者に身代わり受講させることが可能であり、正規の受講者が受講していることを確認することが困難であるという問題があった。
それゆえに、本願発明の主たる目的は、遠隔教育において録画映像等を用いた第３者による身代わり受講を防止して、正規の受講者が受講していることを確認できる遠隔教育システムを提供することである。

請求項１に記載の遠隔教育システムは、映像及び音声を含むマルチメディアの双方向通信によって遠隔で教育を行う遠隔教育システムにおいて、受講者の映像を取得する受講者映像取得手段と、受講者映像取得手段により取得された映像をあらかじめ登録された受講者の顔画像と照合する顔画像照合手段と、受講者に対してアクションを要求するアクション要求手段と、受講者映像取得手段により取得された受講者の映像の画像変化により受講者のアクションを検出するアクション検出手段とを備え、正規の受講者が受講していることを確認する機能を有するものである。
受講者映像取得手段により受講者端末から送信される受講者の映像を取得し、顔画像照合手段により取得された受講者の映像をあらかじめ登録された受講者の顔画像と照合するので、当該取得された映像が正規の受講者の映像であることを確認できる。また、アクション要求手段により受講者に対してアクションを要求し、アクション検出手段により受講者がアクションしたことを取得された受講者の映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合にはアクション要求に対応した画像変化は生じないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
尚、アクション要求手段により受講者に要求するアクションとしては、取得された映像に画像変化を生じさせるものであればどのようなものでもよく、例えば、顔を動かす、眼を閉じる、口を動かす、手を揚げる等でもよい。
請求項２に記載の遠隔教育システムは、請求項１に記載の遠隔教育システムであって、アクション要求手段は顔の位置を移動するよう要求する機能を含み、アクション検出手段は受講者の顔の位置が移動したことを検出する機能を含むものである。
アクション要求手段により受講者に対して顔の位置を動かすように要求し、アクション検出手段により受講者が顔の位置を移動したことを取得された映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合には指示通り顔の位置は変化しないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
請求項３に記載の遠隔教育システムは、請求項１または請求項２に記載の遠隔教育システムであって、アクション要求手段は受講者に質問をして音声回答を要求する機能を含み、アクション検出手段は受講者の音声を取得する機能と、取得された音声から音声回答を認識する機能と、認識された音声回答から受講者の音声回答の妥当性を判定する機能と、受講者の音声回答に伴う受講者の口の動きを検出する機能とを含むものである。
アクション要求手段により受講者に質問をして音声回答するよう要求し、アクション検出手段により受講者の音声を取得して、音声回答を認識して受講者の音声回答の妥当性を判定するとともに、その音声回答に伴う受講者の口の動きを取得された映像の画像変化により検出するので、顔画像照合手段により正規の受講者と判断された受講者が質問に対して音声回答していることが確認され、正規の受講者が受講していることを確認できる。
請求項４に記載の遠隔教育システムは、請求項３に記載の遠隔教育システムであって、アクション検出手段は受講者の音声回答をあらかじめ登録された受講者の音声と照合する機能を含むものである。
アクション検出手段により受講者の音声回答をあらかじめ登録された受講者の音声と照合するので、受講者は顔画像の照合だけでなく音声の照合も行われ、正規の受講者が受講していることをより精度良く確認できる。
請求項５に記載の遠隔教育システムは、請求項３または請求項４に記載の遠隔教育システムであって、アクション要求手段は受講者に時刻に関する質問を行って音声回答を要求する機能を含み、アクション検出手段は受講者が回答した時刻の妥当性を判定する機能を含むものである。
アクション要求手段により受講者に時刻に関する質問を行い、アクション検出手段により受講者が回答した時刻の妥当性を判定するとともに、その音声回答に伴う受講者の口の動きを取得された映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合には要求された時刻に関する音声回答をすることができないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
例えば、時刻に関する質問は、現在の時刻を音声回答するよう要求するものでもよく、受講者が音声回答した時刻の妥当性は、受講生の音声回答を音声認識して得られた時刻を現在の時刻と比較するものでもよい。
請求項６に記載の遠隔教育システムは、請求項３ないし請求項５のいずれかに記載の遠隔教育システムであって、アクション要求手段は受講者の個人情報に関する質問を行って音声回答を要求する機能を含み、アクション検出手段は受講者の回答した個人情報をあらかじめ登録された受講者の個人情報と照合する機能を含むものである。
アクション要求手段により受講者に対して受講者の個人情報に関する質問を行い、アクション検出手段により受講者が回答した個人情報をあらかじめ登録された受講者の個人情報と照合するとともに、その音声回答に伴う受講者の口の動きを取得された映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合には要求された受講者の個人情報に関する音声回答をすることができないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
尚、音声回答を要求する受講者の個人情報は、あらかじめ登録された複数の個人情報項目の中から、不規則に選択して質問することが好ましい。これにより、身代わり受講者はあらかじめ回答を予測することができず、正規の受講者が受講していることをより精度良く確認できる。
請求項７に記載の遠隔教育システムは、請求項１ないし請求項６のいずれかに記載の遠隔教育システムであって、アクション検出手段は受講者の顔画像の位置が不連続に変化しないことを判定する機能を含むものである。
これにより、身代わり受講者が端末から送信する映像をアクション要求に応じて録画映像に切換えた場合に生ずる顔画像の不連続な位置変化を検知できるので、第３者による身代わり受講をより確実に防止して、正規の受講者が受講していることをより精度良く確認できる。
請求項８に記載の遠隔教育システムは、請求項１ないし請求項７のいずれかに記載の遠隔教育システムであって、アクション検出手段はアクション要求手段により受講者に対してアクションを要求してから指定された時間内に画像変化があったことを判定する機能を有するものである。
これにより、アクションを要求してから所定時間内に所定の画像変化がないときは正規の受講者が受講していないと判断できる。また、仮に端末においてアクション要求に対応する映像等の生成が可能であったとしても、身代わり受講者にそのような映像等を準備する時間を与えないようにすることができ、正規の受講者が受講していることをより精度良く確認できる。
請求項９に記載の遠隔教育システムは、請求項１ないし請求項８のいずれかに記載の遠隔教育システムであって、アクション要求手段は予測不可能なタイミングで受講者に対してアクションを要求する機能を有するものである。
これにより、受講者はアクション要求がいつ発生するかを予測できないので、講座時間中は受講者端末から離れることができず、受講者に対して全講座時間にわたって連続して受講させるインセンティブが働く。
請求項１０に記載の遠隔教育システムは、請求項１ないし請求項９のいずれかに記載の遠隔教育システムであって、アクション要求手段は講師からの指令により受講者に対してアクションを要求する機能を有するものである。
これにより、受講者に対してアクション要求を発するタイミングを講師がコントロールできるので、受講者の学習に影響を与えることなく受講確認を行うことができる。
請求項１１に記載の受講確認方法は、遠隔教育において正規の受講者が受講していることを確認する方法であって、受講者の映像を取得するステップと、取得された映像をあらかじめ登録された受講者の顔画像と照合するステップと、受講者に対してアクションを要求するステップと、取得された映像の画像変化により受講者のアクションを検出するステップとを備えたものである。
受講者の映像を取得するステップにより受講者端末から送信される受講者の映像を取得し、あらかじめ登録された受講者の顔画像と照合するステップにより取得された受講者の映像をあらかじめ登録された受講者の顔画像と照合するので、当該取得された映像が正規の受講者の映像であることを確認できる。また、アクションを要求するステップにより受講者に対してアクションを要求し、アクションを検出するステップにより受講者がアクションしたことを取得された受講者の映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合にはアクション要求に対応した画像変化は生じないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
尚、アクションを要求するステップにより受講者に要求するアクションとしては、取得された映像に画像変化を生じさせるものであればどのようなものでもよく、例えば、顔を動かす、眼を閉じる、口を動かす、手を揚げる等でもよい。
請求項１２に記載の受講確認方法は、請求項１１に記載の受講確認方法であって、アクションを要求するステップは顔の位置を移動するよう要求するステップを含み、アクションを検出するステップは受講者の顔の位置が移動したことを検出するステップを含むものである。
アクションを要求するステップにより受講者に対して顔の位置を動かすように要求し、アクションを検出するステップにより受講者が顔の位置を移動したことを取得された映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合には指示通り顔の位置は変化しないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
請求項１３に記載の受講確認方法は、請求項１１または請求項１２に記載の受講確認方法であって、アクションを要求するステップは受講者に質問をして音声回答を要求するステップを含み、アクションを検出するステップは受講者の音声を取得するステップと、取得された音声から音声回答を認識するステップと、認識された音声回答から受講者の音声回答の妥当性を判定するステップと、受講者の音声回答に伴う受講者の口の動きを検出するステップとを含むものである。
アクションを要求するステップにより受講者に質問をして音声回答するよう要求し、アクションを検出するステップにより受講者の音声を取得して、音声回答を認識して受講者の音声回答の妥当性を判定するとともに、その音声回答に伴う受講者の口の動きを取得された映像の画像変化により検出するので、あらかじめ登録された受講者の顔画像と照合するステップにより正規の受講者と判断された受講者が質問に対して音声回答していることが確認され、正規の受講者が受講していることを確認できる。
請求項１４に記載の受講確認方法は、請求項１３に記載の受講確認方法であって、アクションを検出するステップは受講者の音声回答をあらかじめ登録された受講者の音声と照合するステップを含むものである。
アクションを検出するステップにより受講者の音声回答をあらかじめ登録された受講者の音声と照合するので、受講者は顔画像の照合だけでなく音声の照合も行われ、正規の受講者が受講していることをより精度良く確認できる。
請求項１５に記載の受講確認方法は、請求項１３または請求項１４に記載の受講確認方法であって、アクションを要求するステップは受講者に時刻に関する質問を行って音声回答を要求するステップを含み、アクションを検出するステップは受講者が回答した時刻の妥当性を判定するステップを含むものである。
アクションを要求するステップにより受講者に時刻に関する質問を行い、アクションを検出するステップにより受講者が回答した時刻の妥当性を判定するとともに、その音声回答に伴う受講者の口の動きを取得された映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合には要求された時刻の回答をすることができないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
例えば、時刻に関する質問は、現在の時刻を音声回答するよう要求するものでもよく、受講者が音声回答した時刻の妥当性は、受講生の音声回答を音声認識して得られた時刻を現在の時刻と比較するものでもよい。
請求項１６に記載の受講確認方法は、請求項１３ないし請求項１５のいずれかに記載の受講確認方法であって、アクションを要求するステップは受講者の個人情報に関する質問を行って音声回答を要求するステップを含み、アクションを検出するステップは受講者の回答した個人情報をあらかじめ登録された受講者の個人情報と照合するステップを含むものである。
アクションを要求するステップにより受講者に対して受講者の個人情報に関する質問を行い、アクションを検出するステップにより受講者が回答した個人情報をあらかじめ登録された受講者の個人情報と照合するとともに、その音声回答に伴う受講者の口の動きを取得された映像の画像変化により検出するので、正規の受講者があらかじめ録画した映像等を用いて第３者に身代わり受講させた場合には要求された受講者の個人情報に関する音声回答をすることができないことから、身代わり受講を見破ることができ、正規の受講者が受講していることを確認できる。
尚、音声回答を要求する受講者の個人情報は、あらかじめ登録された複数の個人情報項目の中から、不規則に選択して質問することが好ましい。これにより、身代わり受講者はあらかじめ回答を予測することができず、正規の受講者が受講していることをより精度良く確認できる。
請求項１７に記載の受講確認方法は、請求項１１ないし請求項１６のいずれかに記載の受講確認方法であって、アクションを検出するステップは受講者の顔画像の位置が不連続に変化しないことを判定するステップを含むものである。
これにより、身代わり受講者が端末から送信する映像をアクション要求に応じて録画映像に切換えた場合に生ずる顔画像の不連続な位置変化を検知できるので、第３者による身代わり受講をより確実に防止して、正規の受講者が受講していることをより精度良く確認できる。
請求項１８に記載の受講確認方法は、請求項１１ないし請求項１７のいずれかに記載の受講確認方法であって、アクションを検出するステップはアクションを要求するステップにより受講者に対してアクションを要求してから指定された時間内に画像変化があったことを判定するステップを有するものである。
これにより、アクションを要求してから所定時間内に所定の画像変化がないときは正規の受講者が受講していないと判断できる。また、仮に端末においてアクション要求に対応する映像等の生成が可能であったとしても、身代わり受講者にそのような映像等を準備する時間を与えないようにすることができ、正規の受講者が受講していることをより精度良く確認できる。
請求項１９に記載の受講確認方法は、請求項１１ないし請求項１８のいずれかに記載の受講確認方法であって、アクションを要求するステップは予測不可能なタイミングで受講者に対してアクションを要求するものである。
これにより、受講者はアクション要求がいつ発生するかを予測できないので、講座時間中は受講者端末から離れることができず、受講者に対して全講座時間にわたって連続して受講させるインセンティブが働く。
請求項２０に記載の受講確認方法は、請求項１１ないし請求項１９のいずれかに記載の受講確認方法であって、アクションを要求するステップは講師からの指令により受講者に対してアクションを要求するものである。
これにより、受講者に対してアクション要求を発するタイミングを講師がコントロールできるので、受講者の学習に影響を与えることなく受講確認を行うことができる。
請求項２１に記載の受講確認プログラムは、請求項１１ないし請求項２０のいずれかに記載の受講確認方法をコンピュータで実行させるためのプログラムである。
請求項１１ないし請求項２０のいずれかに記載の受講確認方法の各ステップを手段としたコンピュータで実行させるためのプログラムをコンピュータシステムに備えることにより、遠隔教育において第３者の身代わり受講を防止して正規の受講者が受講していることを確認できる。
本願発明の上述の目的，その他の目的，特徴および利点は、図面を参照して行う以下の発明の実施の形態の詳細な説明から一層明らかとなろう。

第１図は、本願発明の一実施形態にかかる遠隔教育システムのシステム構成図である。
第２図は、本願発明の一実施形態にかかる遠隔教育システムにより受講者端末に表示される画面の例を示す図である。
第３図は、本願発明の一実施形態にかかる遠隔教育システムの受講確認プログラムの処理フロー図（その１）である。
第４図は、本願発明の一実施形態にかかる遠隔教育システムの受講確認プログラムの処理フロー図（その２）である。
第５図は、本願発明の一実施形態にかかる遠隔教育システムの受講確認プログラムの処理フロー図（その３）である。

第１図に本願発明の一実施形態にかかる遠隔教育システムのシステム構成図を示す。図において、１は遠隔教育システムであり、ｗｅｂサーバ１０と、双方向通信サーバ２０と、コンテンツ配信サーバ３０と、運営管理システム４０と、講師が使用する講師端末６０と、通信回線接続装置７０とが、ネットワークで接続されており、遠隔教育サービスの提供時には通信回線２を介して受講者が使用する受講者端末１０１、１０２、…と接続される。
Ｗｅｂサーバ１０は、本システムを使用する際の窓口となるＷＷＷサーバであり、講師端末６０や受講者端末１０１、１０２、…からＷｅｂブラウザを用いて所定のページにアクセスすることにより、講座の設定や進行、受講手続等を行うことができる。
双方向通信サーバ２０は、接続する端末の端末アドレスを登録する接続先テーブルを備え、接続先テーブルに登録された端末間を接続して、映像および音声を含むマルチメディア情報による双方向通信機能を提供する。講座の開設中は、接続先テーブルには講師端末６０と当該講座に出席する受講者が使用する受講者端末１０１、１０２、…の端末アドレスが登録され、講師端末６０から送信される映像および音声と各受講者端末１０１、１０２、…から送信される映像及び音声を受信し、受信した映像および音声を合成して講師端末６０および各受講者端末１０１、１０２、…に送信する。
コンテンツ配信サーバ３０は、動画像・静止画像・音声・テキスト・効果音等のマルチメディアの教材を記憶させた教材データベース３２を備え、配信先テーブルに登録された端末に対して指定されたコンテンツを配信する機能を提供する。講座の開設中は、配信先テーブルには講師端末６０と当該講座に出席する受講者が使用する受講者端末１０１、１０２、…の端末アドレスが登録され、講師端末６０から指定された教材コンテンツが各端末に配信される。
運営管理システム４０は、遠隔教育の運営管理をするシステムであり、提供する講座に関する各種のデータを記憶させた講座情報データベース５０を備え、講座を設定する講座設定処理４１、設定された講座を開設する講座開設処理４２、開設された講座の受講を受付る受講受付処理４３、講座開設中の受講者の受講を確認する受講確認処理４４等の処理を行う。
講師端末６０は、講師の映像を取得するテレビカメラ（ａ）と、講師の音声の入出力を行うヘッドセット（ｂ）と、画像を表示するモニタ画面（ｃ）と、コマンドやメッセージの入力用のキーボード（ｄ）・マウス（ｅ）と、映像入力インターフェイス・音声入出力インターフェイス・ネットワーク接続装置等を備えたコンピュータ（ｆ）とから構成され、コンピュータには講師の映像および音声を取得して双方向通信サーバ２０に送信するとともに、双方向通信サーバ２０から送信される映像および音声をモニタ画面およびヘッドセットに出力する映像音声通信プログラムと、コンテンツ配信サーバ３０から配信される画像および音声をモニタ画面およびヘッドセットに出力するコンテンツ表示プログラムと、Ｗｅｂサーバ１０にアクセスするためのＷｅｂブラウザとがインストールされている。
通信回線２は、有線のコンピュータネットワーク、無線のコンピュータネットワーク、電話回線、衛星回線、インターネット等、どのような通信回線に対しても適応できるが、ここではインターネットを使用した場合を例にとって説明する。従って、通信回線接続装置７０は、インターネットに接続するためのインターネットルータを使用する。
一方、受講者端末１０１、１０２、…は、講師端末６０と同様に、受講者の映像を取得するテレビカメラ（ａ）と、受講者の音声の入出力を行うヘッドセット（ｂ）と、画像を表示するモニタ画面（ｃ）と、コマンドやメッセージの入力のためのキーボード（ｄ）・マウス（ｅ）と、映像入力インターフェイス・音声入出力インターフェイス・インターネット接続装置（例えばＴＡなど）を備えたコンピュータ（ｆ）とで構成され、受講者の映像および音声を取得して双方向通信サーバ２０に送信するとともに双方向通信サーバ２０から送信される映像および音声をモニタ画面およびヘッドセットに出力する映像音声通信プログラムと、コンテンツ配信サーバ３０から配信される画像および音声をモニタ画面およびヘッドセットに出力するコンテンツ表示プログラムと、Ｗｅｂサーバ１０にアクセスするためのＷｅｂブラウザとがインストールされている。
次に、本遠隔教育システム１によって遠隔教育を実施する手順について説明する。
最初に、遠隔教育を実施する事務局は、講師端末６０または専用の事務局端末（図示省略）からＷｅｂサーバ１０の事務局のページにアクセスし、年間の教育プランと対応する講師のスケジュールを基に開設する講座を決定して入力する。これにより、運営管理システム４０の講座設定処理４１によって講座情報データベース５０に講座スケジュールデータベース５１が構築され、各講座別に出席簿が生成されて出席簿データベース５２に登録される。
また、事務局は受講者を募集し、一定の受講基準を満たす各受講者に対してＷｅｂサーバ１０にアクセスするためのＩＤとパスワードを発行する。ＩＤとパスワードを発行された各受講者は、各受講者端末からＷｅｂサーバ１０の受講者のページにアクセスして、受講者の個人情報の登録と、受講確認時の顔画像の照合に使用する顔画像の登録と、受講確認時の個人情報に関する質問に対する音声回答の照合に使用する音声の登録とを行う。
個人情報の登録は、運営管理システム４０の受講登録処理４２によって、各受講者の入力した氏名・年齢・性別・生年月日・住所・電話番号・メールアドレス等が、各受講者のＩＤ・パスワードおよび各受講者端末の端末アドレスとともに講座情報データベース５０の個人情報データベース５３に登録される。また、当該受講者が受講を希望する講座について、講座スケジュールデータベース５１を参照して受講可否が判定され、受講可能な場合は出席簿データベース５２の当該講座の出席簿に当該受講者が登録される。
顔画像の登録は、運営管理システム４０の受講登録処理４２によって、双方向通信サーバ２０の接続先テーブルに当該受講者端末の端末アドレスと運営管理システムのアドレスが設定され、当該受講者がＷｅｂページに設けられた顔画像登録ボタン（図示省略）をクリックした時の映像が静止画像として記録され、講座情報データベース５０の顔画像データベース５４に登録される。
音声の登録は、同様に運営管理システム４０の受講登録処理４２によって、双方向通信サーバ２０の接続先テーブルに当該受講者端末の端末アドレスと運営管理システムのアドレスが設定され、当該受講者がＷｅｂページに設けられた個人情報項目別の音声登録ボタン（図示省略）をクリックした時の当該受講者の音声が取得され、講座情報データベース５０の音声データベース５５に個人情報項目別に登録される。
講座スケジュールデータベース５１に設定された講座の日時になると、講座開設処理４３によって、双方向通信サーバ２０とコンテンツ配信サーバ３０に講座が設定される。
当該講座の受講者は、受講者端末１０１、１０２、…から受講受付のページにアクセスして所定のＩＤとパスワードによってチェックインすることにより、双方向通信サーバ２０の接続先テーブルとコンテンツ配信サーバ３０の配信先テーブルに当該受講者端末の端末アドレスが設定される。
また、当該講座の講師は、講師端末６０からＷｅｂサーバの講師受付のページにアクセスすることにより、双方向通信サーバ２０の接続先テーブルとコンテンツ配信サーバ３０の配信先テーブルに当該講師端末６０の端末アドレスが設定される。
チェックインした受講者に対しては、運営管理システム４０の受講確認処理４４によって後述の受講確認が実施され、正規の受講者であることが確認されれば出席簿に出席時刻が記録される。
このようにして講座がスタートし、講師は講師端末６０から講義を行うことにより、講師の映像と音声が各受講者端末に配信される。また、講師は講師端末６０からＷｅｂサーバ１０経由でコンテンツ配信サーバ３０を制御することができ、教材データベース３２から必要な教材を検索して再生することにより、各受講者に当該教材が配信される。
第２図に講義中の受講者端末１０１、１０２、…のモニタ画面に表示される画面の例を示す。図において、Ａは講師端末６０から送信される講師の映像を表示する講師画面であり、Ｂは各受講者端末１０１、１０２、…から送信される各受講者の映像を各受講者の名前とともに合成して表示する受講者画面である。受講者画面Ｂに受講者の名前を表示するようにしたのは、講師が特定の受講者を指名して発言や回答を求める場合を想定したものである。
Ｃはコンテンツ配信サーバ３０から配信されるコンテンツ画面であり、コンテンツ画面Ｃには講師端末６０からの操作でポインタを表示することができ、教材を再生しながら内容の説明を行う場合に、受講者に説明箇所を明示できる。
Ｄは受講者が発言したり、講師が実施した設問に対する回答したり、講座を中座・退席したりする等の場合の入力を受付る入力画面であり、Ｅは講師端末や運営管理システムから各受講者に対するメッセージを表示するメッセージ画面である。受講確認処理４４によって受講者の受講確認を行う際の各受講者へのメッセージはこのメッセージ画面Ｅに表示される。
講師端末６０のモニタ画面にも、上記受講者端末のモニタ画面と同様の表示がなされるが、コマンド入力画面Ｄについては、コンテンツ配信サーバ３０によって配信するコンテンツの検索や再生制御のためのボタンやコンテンツ画面Ｃ内に表示するポインタの制御ボタン等が設けられる。
各受講生は、講座中に発言ボタンを押すことで講師に対して質問や発言をすることができる。受講者が発言ボタンを押すと、受講者画面Ｂの当該受講者がフリッカー表示となり、講師が講師端末からその表示をクリックすることで発言が受付けられる。このとき、当該受講者の映像が拡大合成されて講師端末および各受講者端末に配信されるとともに、当該受講者の音声が講師端末と他の受講者端末に配信される。これにより、当該受講者は映像と音声により講師と対談でき、その対談の内容は他の受講者にも伝達される。
また、講師は講座中に問題を設定して全受講者または特定の受講者に回答させることができる。講師から指定された受講者が選択ボタンを選択したり、メッセージボックスにメッセージを入力して回答ボタンをクリックすると、その内容はＷｅｂサーバ１０を介して運営管理システム４０に伝達され、集計結果が講師端末６０に表示される。また、講師はその集計結果を必要に応じて各受講者に開示することができ、講師端末６０からの指令により集計結果がコンテンツ配信サーバ３０を介して各受講者端末に配信される。
講座時間中は、運営管理システム４０の受講確認処理４４によって後述の受講確認が随時実施され、正規の受講者が受講していることが確認される。
各受講者はトイレ等により中座するときは中座ボタンをクリックする。これにより、受講者画面Ｂの当該受講者の映像は中座マークとなり、出席簿に中座時刻が記録される。また、各受講者は中座から帰還したときに着席ボタンをクリックする。これにより、受講者画面Ｂの当該受講者の中座マークが通常の表示に戻り、出席簿に帰還時刻が記録される。また、各受講者は講座の終了時または講座の早退時は終了ボタンをクリックする。これにより、出席簿の退席時刻が記録されるとともに、当該受講者の端末アドレスが接続先テーブルおよび配信先テーブルから削除されて受講を終了する。
このように、講師は各受講者の着席状況を的確に把握でき、出席簿に出席時刻・退席時刻・中座時刻・帰還時刻が自動記録されるので、当該講座の実質受講時間を把握できる。特に、本遠隔教育システム１では、受講確認処理４４によって各受講者の受講確認が随時実施されるので、各受講者は欠席扱いとなることを回避するために講座中の着席時刻管理を的確に行うようになることが期待できる。
その他、双方向通信サーバ２０には、講師端末と各受講者端末との間で共通のアプリケーションを起動し、各端末で行った操作情報をお互いに交換することでアプリケーションを全員で共有することができるアプリケーション共有機能を備える。これにより、例えば各端末の画面に文字や図形を描画する共通のホワイトボードを表示し、これに対して講師や各受講者が自由に文字や図形を書き込みながら議論を進めるようなゼミ形式の講座を実施することも可能である。
また、各端末にチャット画面を表示し、講師および各受講者間で文字による会話や議論を行う機能も備える。
このように、本遠隔教育システム１によれば、各受講者は双方向通信サーバ２０によって講師の映像と音声を受信しながらコンテンツ配信サーバ３０によってマルチメディアの教材の配信を受けることができ、必要に応じて講師が受講者に問題を設定して回答を要求したり、受講者からの質問や発言を受付けて双方向通信サーバ２０によって映像と音声による対談ができるので、各受講者は遠隔地にいても講義室で共通の教材によってレッスンを受けているのと同様の教育効果が得られる。
上記実施形態では、受講者画面Ｂには各受講者の映像が合成されて表示されるとして説明したが、講師に対して質問や発言を行うとき以外は静止画を用い、アイコン表示するようにしてもよい。これにより、通信回線の帯域に制限がある場合でも、通信回線に大きな負荷を与えることなく遠隔教育を実施できる。
また、上記実施形態では、受講者画面Ｂには各受講者の名前を表示するとして説明したが、受講者画面Ｂには受講者の映像またはアイコンのみを表示し、講師に対して別途表示に対応する出席簿を提供するようにしてもよい。
上記実施形態では、講師がライブで講義を行う有人講座の場合について説明したが、講義ビデオを用いて行う無人講座を設定することも可能である。その場合には、事務局はあらかじめ講義ビデオを作成してコンテンツ配信サーバ３０の教材データベース３２に登録しておき、講座スケジュールデータベース５１に使用する講義ビデオを設定する。運営管理システム４０の講座開設処理４３は、講座設定日時になるとコンテンツ配信サーバ３０によって配信する講義ビデオを指定して自動的に講座をスタートする。講義ビデオには、適宜問題が設定されており、これに対する受講者の回答は自動的に集計されて記録される。また、受講者に質問等がある場合は事務局にメールを送信することにより、担当講師に連絡され、後日回答される。
次に、運営管理システム４０の受講確認処理４４の詳細について述べる。
受講確認処理４４は、各受講者端末から送信される各受講者の画像を取得する受講者画像取得処理４５と、取得された各受講者の画像を顔画像データベース５４の当該受講者の顔画像と照合する顔画像照合処理４６と、顔画像の照合をクリアした各受講者に対して各受講者端末から送信される画像の変化を伴うアクションを要求するアクション要求処理４７と、要求したアクションに対して各受講者端末から送信される画像の変化を検出するアクション検出処理４８とから構成される。尚、本実施形態では、各受講者に対して受講者に顔の位置を指示通り移動させることと、現在の時刻を音声回答させることと、受講者の個人情報に関する質問に音声回答させることとの３種類のアクションを要求している。
第３図から第５図に、受講確認処理４４の処理フローを示す。
図のように、受講確認時刻になると（Ｓ１００）、受講確認要求を講師端末６０に通知し（Ｓ１０２）、講師が受講確認要求を受付けたときに受講確認を行う（Ｓ１０４）。受講確認時刻は、講座開始時と講座開講中のランダムな時刻が選ばれる。講座開講中のランダムな時刻に受講確認を行うことにより、受講者はいつ受講確認が行われるかを予測できず、受講者に対して全講座時間にわたって連続して受講させるインセンティブが働く。但し、講師が講座を行っている最中に受講確認を行うと却って受講を妨げることになるので、講師に受講確認要求を通知し、講師が講座を中断して受講確認要求の受入れボタンをクリックしたときに受講確認を行うこととした。尚、講座ビデオを用いた無人講座の場合には、例えばあらかじめ講座ビデオに中断可能ポイントを登録しておき、前記受講確認要求に対して最初の中断可能ポイントにおいて講座ビデオの再生を一時停止し、受講確認を行うようにしてもよい。
受講確認時刻でないときは、Ｓ４０６に行って講座終了まで繰返す。
次に、出席簿データベース５２から当該講座の出席簿を取得し（Ｓ１０６）、出席簿に登録されている各受講者の受講者端末の端末アドレスを双方向通信サーバ２０に通知して当該受講者の映像と音声を取得するとともに（Ｓ１０８）。当該受講者端末に対して顔画像確認を通知する（Ｓ１１０）。これは、例えば「これから受講確認を行います。受講登録時と同様の状態でカメラに顔を映して下さい」のメッセージをメッセージ画面に表示する。このとき、「準備ができたらここをクリックして下さい」とのメッセージをつけ、「ここを」がクリックされたことをＷｅｂサーバ１０で検出して次のステップに進むようにしてもよい。
そして、顔画像データベース５３から当該受講者の顔画像データを取得し（Ｓ１１２）、取得中の受講者の映像から切出した静止画像を当該受講者の顔画像データと画像照合する（Ｓ１１４）。画像照合は、当該受講者の顔画像データをテンプレートとして取得中の受講者の映像に対して直接マッチング処理を行い、最も一致度の高い点を求める。尚、取得中の受講者の映像から切出された静止画像について外形輪郭、目・鼻・口等の位置や形状等の特徴量を求める特徴抽出演算を行って画像サイズを正規化した上でマッチング処理を行ってもよく、当該受講者の顔画像データについて特徴抽出演算した結果と比較するようにしてもよい。
画像照合の結果、所定の一致度が得られた場合は次のステップに進み（Ｓ１１６）、所定の一致度が得られない場合は当該受講者端末に確認メッセージを通知し（Ｓ１１８）、応答があればＳ１１０に戻って顔画像確認要求を繰返し（Ｓ１２０）、応答がなければＳ４０６に行って出席簿の当該受講者を欠席とする。
次に、顔の移動確認を行う。最初に、前述の切出された静止画像について受講者の顔の初期位置を検出しておく（Ｓ１２２）。顔の位置は、前述の画像照合におけるマッチング処理において最も一致度の高い点として求まる。
そして、当該受講者端末に顔移動要求を通知する（Ｓ１２４）。これは、例えば「顔の位置を右に１０ｃｍ程、移動してください」のようなメッセージをメッセージ画面に表示する。尚、顔を移動させる方向や移動距離は、適宜ランダムに変更する。これにより、あらかじめ準備したビデオ映像を用いて画像確認を受けることが困難となり、第３者の身代わり受講を防止できる。
ここで、取得中の受講者の映像について、前述の画像照合の手法により受講者の顔位置の検出を連続して行い（Ｓ１２６）、前述のメッセージに対応した顔の位置変化が検出されたら次のステップに進む（Ｓ１２８）。また、所定時間内に顔の位置変化が検出されないときは（Ｓ１３０）、当該受講者端末に確認メッセージを通知して（Ｓ１３２）、応答があればＳ１２０に戻って顔移動要求を繰返し（Ｓ１３４）、応答がなければＳ４０６に行って出席簿の当該受講者を欠席とする。
次に、時刻の音声回答確認を行う。最初に、当該受講者端末に時刻の音声回答要求を通知する（Ｓ２００）。これは、例えば「講師画面に表示されている現在の時刻を音声で回答して下さい」のようなメッセージをメッセージ画面に表示する。これに対して、取得中の受講者の音声の信号レベルから受講者の音声回答を検出し、一連の音声回答が検出されたら（Ｓ２０２）、音声回答中の映像と音声を取得する（Ｓ２０４）。一連の音声回答が検出される前に所定の時間が経過したときは（Ｓ２０６）、当該受講者端末に確認メッセージを通知し（Ｓ２０８）、応答があればＳ２００から繰返す（Ｓ２１０）。応答がない場合はＳ４０６に行って出席簿の当該受講者を欠席とする。
次に、取得された音声回答中の音声について音声認識する（Ｓ２１２）。ここでの音声認識は、対象が時刻に限られるため、時刻に関する音声辞書を用いて、音節単位でマッチング処理を行う。識別する語彙数が限られているので、不特定話者に対応する音声辞書を用いた不特定話者音声認識によって認識可能と考えられるが、あらかじめ受講者に時刻に関する音声を登録させ、これを音声辞書として特定話者音声認識を行うようにしてもよい。
そして、講師画面に表示されている現在の時刻を取得し（Ｓ２１４）、音声認識された音声回答の時刻が所定範囲内にあるときは（Ｓ２１６）、取得された音声回答中の映像について口の動きを検出する（Ｓ２１８）。口の動きの検出は、取得された音声回答中の映像の音声認識された各音節に対応するフレームについて前述の特徴抽出演算によって口の形状パラメータを求め、これを音声認識された各音節から音節と口の形状パラメータの関係を登録したテーブルを引いて得られた口の形状パラメータと比較し、総合的に一致度を判定する。尚、口の動きの判定は、顔画像照合した受講者の映像が録画データであったり、時刻の音声回答が録音データであったりすることを見破ることが目的であるので、厳密な一致を判定する必要はなく、例えば音声回答が検出された期間に対応して受講者の口の形状に変化が生じていることを検出するような簡便な方法を用いてもよい。また、あらかじめ受講者に時刻に関する音声を登録させて特定話者単語音声認識を行う場合には、受講者に時刻に関する音声を登録させる際に対応する受講者の映像を同時に記録しておき、音声認識された音節毎に取得された受講者の映像を記録された受講者の映像と直接比較して判定するようにしてもよい。また、受講者に時刻に関する音声を登録させる際に受講者の映像から口の形状パラメータを求めて記録しておき、音声認識された音節毎に取得された受講者の映像について求めた口の形状パラメータを記録された口の形状パラメータと比較して判定するようにしてもよい。
ここで、受講者の口の動きが音声回答と対応していると判断されれば、次のステップに進む（Ｓ２２０）。Ｓ２１６において音声回答時刻が正しくないか、Ｓ２２０において映像が音声回答と対応していないと判断されたときは、Ｓ２０８に行って当該受講者端末に確認メッセージを通知して応答があればＳ２００から繰返す。
尚、上記実施形態では、音声回答された時刻を音声認識して現在の時刻と比較するものとして説明したが、現在の時刻に対応する音節データを音声辞書から順次取出し、これを取得された講者の音声回答中の音声と順に比較して行き、受講者の音声回答全体が所定の一致度を有する場合に音声回答時刻が正しいと判断するようにしてもよい。
次に、受講者の個人情報の音声回答確認を行う。最初に、個人情報の質問項目を選択して、当該受講者端末に当該個人情報の質問項目についての音声回答要求を通知する（Ｓ３００）。これは、例えば「あなたの生年月日を音声で回答して下さい」のようなメッセージをメッセージ画面に表示する。この個人情報に関する質問項目も、受講者が予測できないようにランダムに選択することが好ましい。これに対して、取得中の受講者の音声の信号レベルから音声回答を検出し、一連の音声回答が検出されたら（Ｓ３０２）、音声回答中の映像と音声を取得する（Ｓ３０４）。一連の音声回答が検出される前に所定の時間が経過したときは（Ｓ３０６）、当該受講者端末に確認メッセージを通知し（Ｓ３０８）、応答があればＳ３００から繰返す（Ｓ３１０）。応答がない場合はＳ４０６に行って出席簿の当該受講者を欠席とする。
次に、音声データベース５５から当該受講者の個人情報の質問項目に対応する音声データを取得し（Ｓ３１２）、その音声データをテンプレートとして取得された音声回答中の音声とマッチング処理を行う（Ｓ３１４）。その結果、所定の一致度が得られた場合は（Ｓ３１６）、取得された音声回答中の映像について口の動きを検出する（Ｓ３１８）。口の動きの検出は、取得された音声回答中の映像の各フレームについて前述の特徴抽出演算によって口の形状パラメータを求め、これを個人情報データベース５３に登録されている当該受講者の個人情報の文字データから文字と口の形状パラメータの関係を登録したテーブルを引いて得られた口の形状パラメータと比較し、総合的に一致度を判定する。尚、口の動きの判定は、前述の時刻の確認の場合と同様に、顔画像照合した受講者の映像が録画データであったり、時刻の音声回答が録音データであったりすることを見破ることが目的であるので、厳密な一致を判定する必要はなく、例えば音声回答が検出された期間に対応して受講者の口の形状に変化が生じていることを検出するような簡便な方法を用いてもよい。また、個人情報の音声登録の際に受講者の映像を同時に記録しておき、取得された音声回答中の映像を記録された受講者の映像と直接比較して判定するようにしてもよい。また、個人情報の音声登録の際に受講者の映像から口の形状パラメータを時系列的に求めて記録しておき、取得された音声回答中の映像について求めた口の形状パラメータを記録された口の形状パラメータと比較して判定するようにしてもよい。
ここで、受講者の口の動きが音声回答と対応していると判断されれば、次のステップに進む（Ｓ３２０）。Ｓ３１６において音声回答の個人情報が正しくないか、Ｓ３２０において映像が音声回答と対応していないと判断されたときは、Ｓ３０８に行って当該受講者端末に確認メッセージを通知して応答があればＳ３００から繰返す。
当該受講者について以上の受講確認処理が完了したら、当該受講者端末に受講確認完了を通知し（Ｓ４００）、双方向通信サーバ２０に通知して当該受講者の映像と音声の取得を終了する（Ｓ４０２）。
そして、すべての受講者について受講確認を完了したら（Ｓ４０４）、講座終了まで先頭（Ｓ１００）から繰返す。
上記実施形態では、受講確認時刻毎に顔画像の照合と顔の移動確認と時刻の音声回答確認と個人情報の音声回答確認のすべてを行うものとして説明したが、本願発明はこれに限定されるものではなく、顔画像の照合と顔の移動確認を組合せか、顔画像の照合と時刻の音声回答確認の組合せか、顔画像の照合と個人情報の音声回答確認の組合せのいずれかを実施するものでもよく、これらを受講確認時刻によって適宜選択して実施するようにしてもよい。
また、上記実施形態では受講者に要求するアクションとして、顔の移動や音声回答を要求する場合について説明したが、本願発明はこれに限定されるものではなく、顔を回転させたり、目を閉じさせたり、手を揚げさせたり、特定の形状の物品をカメラに写させたり、紙に指定の形状を書いたものをカメラに写させたりするなど、映像の変化として捉えられるものであればどのようなアクションを要求してもよく、本願発明の効果を奏する。
上記実施形態では、顔画像の照合を行った後に、顔の移動確認や時刻の音声回答確認や個人情報の音声回答確認等のアクションを要求し、そのときの画像変化が要求に対応したものであることを判定することによって正規の受講者が受講していることを確認するとして説明したが、取得される受講者の映像から受講者の顔の位置を連続的に検出し、顔の位置が不連続に変化していないことを確認する機能を設けるようにしてもよい。これにより、例えば身代わり受講者がアクション要求を受けたときに、そのアクション要求に対応する録画映像に切換えるような行動をとった場合でも、受講者の顔の位置が不連続に変化するので、身代わり受講であることが検出でき、正規の受講者が受講していることをより精度良く確認することができる。
上記実施形態では、講座の受講者はすべて受講者端末から受講し、講師の講座を直接受講する受講者はいないものとして説明したが、双方向通信サーバ２０から送信される映像を表示する大画面表示装置と双方向通信サーバ２０から送信される音声を出力する会場スピーカとを備えた講義会場で講義を行い、会場受講者と遠隔受講者とを混在させた講座を設定するようにしてもよい。
また、更にサテライト会場を各地に設け、そこに大画面表示装置と会場スピーカを設け、ここに集合した受講者を１つの集合受講者として取り扱うようにしてもよい。
これにより、講義会場やサテライト会場に通学可能な受講者は直接受講し、通学不可能な受講者が遠隔で受講することで、１人の講師による講座をより多数の受講者によって同時に受講することが可能となる。その場合、講義会場受講者やサテライト会場受講者に、前述の設問回答の入力機能や受講確認のための映像入力機能や音声入力機能を有する端末を設けるようにしてもよいことは言うまでもない。
上記実施形態では、遠隔教育システムはコンテンツ配信サーバを備え、講座に使用する教材はコンテンツ配信サーバによって各受講者端末に配信するものとして説明したが、本願発明はこれに限定されるものではなく、単に例えば講師端末においてスクリーン等の上に教材ソフトを再生し、それを講師の映像を取得するテレビカメラで撮像することでもよい。また、講師端末に外部映像音声入力端子を備え、それにＶＴＲやＤＶＤ等を接続し、講師が再生した教材ソフトの映像音声を講師の映像や音声と合成または切換えて双方向通信サーバに送信し、双方向通信サーバによって各受講者端末に配信するようにしてもよい。
上記実施形態では、講師端末は遠隔教育システム内のネットワークに接続されるものとして説明したが、本願発明はこれに限定されるものではなく、講師端末もインターネットを介して遠隔教育システムに接続するようにしてもよい。これにより、講師はインネットに接続可能な講師端末を有する限り何処からでも講座を開設することができ、外国在住者に講師を依頼することも可能となる等、講師のスケジュール調整が容易となる他、人件費の削減にも寄与する。
上記実施形態では、遠隔教育システムはＷｅｂサーバを備え、受講者端末はＷｅｂブラウザ機能を有するコンピュータを用いてＷｅｂサーバにアクセスすることで受講手続を行うものとして説明したが、本願発明はこれに限定されるものではなく、受講者端末として通常のテレビ電話を用い、運営管理システムから受講者端末に伝達するメッセージは、生成されたメッセージ画像を双方向通信サーバで合成して各受講者端末に送信する機能を設けることで対応でき、受講者端末から運営管理システムへのコマンドやメッセージの入力は、受講者端末のダイアルボタンを使用し、双方向通信サーバにＰＢトーン信号を検出する機能を設けることで対応できる。これにより、受講者端末は例えばＩＴＵ−Ｔ勧告のＨ．３２０に準拠したＩＳＤＮテレビ電話端末のような公衆電話回線に接続する電話型のテレビ電話端末や、例えばＩＴＵ−Ｔ勧告のＨ．３２３に準拠したＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）テレビ電話端末のようなインターネットに接続するＩＰ型のテレビ電話端末回線等を使用することができる。この場合、双方向通信サーバには、受講者端末の規格に対応した映像コーデックや音声コーデックを備える必要があるが、プロトコール変換を行うゲートウェイを別途も受けることで、各種の規格の受講者端末を混在させることもできる。

上述したように、本願発明によれば、遠隔教育において録画映像等を用いた第３者による身代わり受講を防止して、正規の受講者が受講していることを確認できる等の効果がある。

Claims (21)

1. 映像及び音声を含むマルチメディアの双方向通信によって遠隔で教育を行う遠隔教育システムにおいて、
   受講者の映像を取得する受講者映像取得手段と、前記受講者映像取得手段により取得された受講者の映像をあらかじめ登録された受講者の顔画像と照合する顔画像照合手段と、受講者に対してアクションを要求するアクション要求手段と、前記受講者映像取得手段により取得された受講者の映像の変化により受講者のアクションを検出するアクション検出手段とを備え、
   正規の受講者が受講していることを確認する機能を有することを特徴とする、遠隔教育システム。
2. 前記アクション要求手段は、顔の位置を移動するよう要求する機能を含み、
   前記アクション検出手段は、受講者の顔の位置が移動したことを検出する機能を含むことを特徴とする、請求項１に記載の遠隔教育システム。
3. 前記アクション要求手段は、受講者に質問をして音声回答を要求する機能を含み、
   前記アクション検出手段は、受講者の音声を取得する機能と、前記取得された音声から音声回答を認識する機能と、前記認識された音声回答から受講者の音声回答の妥当性を判定する機能と、受講者の音声回答に伴う受講者の口の動きを検出する機能とを含むことを特徴とする、請求項１または請求項２に記載の遠隔教育システム。
4. 前記アクション検出手段は、受講者の音声回答をあらかじめ登録された受講者の音声と照合する機能を含むことを特徴とする、請求項３に記載の遠隔教育システム。
5. 前記アクション要求手段は、受講者に時刻に関する質問を行って音声回答を要求する機能を含み、
   前記アクション検出手段は、受講者が回答した時刻の妥当性を判定する機能を含むことを特徴とする、請求項３または請求項４に記載の遠隔教育システム。
6. 前記アクション要求手段は、受講者の個人情報に関する質問を行って音声回答を要求する機能を含み、
   前記アクション検出手段は、受講者の回答した個人情報をあらかじめ登録された受講者の個人情報と照合する機能を含むことを特徴とする、請求項３ないし請求項５のいずれかに記載の遠隔教育システム。
7. 前記アクション検出手段は、受講者の顔画像の位置が不連続に変化しないことを判定する機能を含むことを特徴とする、請求項１ないし請求項６のいずれかに記載の遠隔教育システム。
8. 前記アクション検出手段は、前記アクション要求手段により受講者に対してアクションを要求してから指定された時間内に画像変化があったことを判定する機能を有することを特徴とする、請求項１ないし請求項７のいずれかに記載の遠隔教育システム。
9. 前記アクション要求手段は、予測不可能なタイミングで受講者に対してアクションを要求する機能を有することを特徴とする、請求項１ないし請求項８のいずれかに記載の遠隔教育システム。
10. 前記アクション要求手段は、講師からの指令により受講者に対してアクションを要求する機能を有することを特徴とする、請求項１ないし請求項８のいずれかに記載の遠隔教育システム。
11. 遠隔教育において正規の受講者が受講していることを確認する方法であって、
    受講者の映像を取得するステップと、前記取得された映像をあらかじめ登録された受講者の顔画像と照合するステップと、受講者に対してアクションを要求するステップと、前記取得された映像の画像変化により受講者のアクションを検出するステップとを備えたことを特徴とする、受講確認方法。
12. 前記アクションを要求するステップは、顔の位置を移動するよう要求するステップを含み、
    前記アクションを検出するステップは、受講者の顔の位置が移動したことを検出するステップを含むことを特徴とする、請求項１１に記載の受講確認方法。
13. 前記アクションを要求するステップは、受講者に質問をして音声回答を要求するステップを含み、
    前記アクションを検出するステップは、受講者の音声を取得するステップと、前記取得された音声から音声回答を認識するステップと、前記認識された音声回答から受講者の音声回答の妥当性を判定するステップと、受講者の音声回答に伴う受講者の口の動きを検出するステップとを含むことを特徴とする、請求項１１または請求項１２に記載の受講確認方法。
14. 前記アクションを検出するステップは、受講者の音声回答をあらかじめ登録された受講者の音声と照合するステップを含むことを特徴とする、請求項１３に記載の受講確認方法。
15. 前記アクションを要求するステップは、受講者に時刻に関する質問を行って音声回答を要求するステップを含み、
    前記アクションを検出するステップは、受講者が回答した時刻の妥当性を判定するステップを含むことを特徴とする、請求項１３または請求項１４に記載の受講確認方法。
16. 前記アクションを要求するステップは、受講者の個人情報に関する質問を行って音声回答を要求するステップを含み、
    前記アクションを検出するステップは、受講者の回答した個人情報をあらかじめ登録された受講者の個人情報と照合するステップを含むことを特徴とする、請求項１３ないし請求項１５のいずれかに記載の受講確認方法。
17. 前記アクションを検出するステップは、受講者の顔画像の位置が不連続に変化しないことを判定するステップを含むことを特徴とする、請求項１１ないし請求項１６のいずれかに記載の受講確認方法。
18. 前記アクションを検出するステップは、前記アクションを要求するステップにより受講者に対してアクションを要求してから指定された時間内に画像変化があったことを判定するステップを有することを特徴とする、請求項１１ないし請求項１７のいずれかに記載の受講確認方法。
19. 前記アクションを要求するステップは、予測不可能なタイミングで受講者に対してアクションを要求することを特徴とする、請求項１１ないし請求項１８のいずれかに記載の受講確認方法。
20. 前記アクションを要求するステップは、講師からの指令により受講者に対してアクションを要求することを特徴とする、請求項１１ないし請求項１８のいずれかに記載の受講確認方法。
21. 請求項１１ないし請求項２０のいずれかに記載の受講確認方法をコンピュータで実行させるための、受講確認プログラム。

Images