JP2003333567A - 講義システム - Google Patents

Abstract

(57)【要約】 【課題】 講義参加者の顔の映像や映像資料に合成する
文字の制限を受けることなくかつ画像なども合成する。 【解決手段】 端末２００では、ＷＷＷ制御手段２０７
が操作入力手段２０４により指示された、合成する文
字、画像をビットマップ（ＢＭＰ）イメージデータに変
換し、このＢＭＰイメージデータを映像コーデック制御
手段２０９に出力する。映像コーデック制御手段はこの
ＢＭＰイメージデータをＭＰＥＧ−１の１つのスライス
分のデータに変換してこれをサーバ装置１００に送信す
る。サーバ装置はこのデータをその端末の４番目のスラ
イス映像に置換して１〜３番目のスライス映像と合成す
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、先生端末と生徒端
末を用いて先生（講師）が複数の生徒に対して講義を行
うための講義システムに関し、特に講義参加者の顔の映
像や映像資料に名前などの文字や画像を合成する機能に
関する。

【０００２】

【従来の技術】この種の従来例として、ＴＶ会議システ
ムなどでは、全ての会議参加者の顔を合成して表示する
場合、画面上に表示されている他の会議参加者が分から
ないケースがあるので、文字発生器が発生する文字によ
り名前、所属名などを作成して顔などの映像の下にスー
パーインポーズなどで合成する。また、ＰＣ（パーソナ
ルコンピュータ）上のＴＶ会議アプリケーションでは、
映像に合成しないでウィンドウのタイトルバーに参加者
名などを表示するものも知られている。

【０００３】

【発明が解決しようとする課題】しかしながら、上記の
前者の場合には、文字発生器が発生する文字しか使用す
ることができないので、表示できる文字の種類が少な
く、また、合成する際の設定を合成機器側で登録する必
要が有り、さらに、合成する文字を毎回変更する場合に
柔軟性に欠けるという問題点がある。また、後者の場合
には、ＰＣ上には多種多様なフォントデータが記憶され
ているのが通常であるので文字の制限は殆どないが、文
字以外の画像などを合成することができないという問題
点がある。

【０００４】本発明は上記従来例の問題点に鑑み、講義
参加者の顔の映像や映像資料に合成する文字の制限を受
けることなくかつ画像なども合成することができる講義
システムを提供することを目的とする。

【０００５】

【課題を解決するための手段】本発明は上記目的を達成
するために、先生端末及び生徒端末を含む複数の講義端
末と講義サーバ装置がネットワークを介して接続され、
前記講義サーバ装置が前記複数の講義端末から受信した
講義参加者の映像及び音声を合成して前記複数の講義端
末に配信する講義システムであって、前記講義参加者の
映像に合成する文字データを画像データに変換する手段
と、前記画像データを前記講義参加者の映像に合成する
手段とを、有する構成とした。

【０００６】上記構成により、多種多様なフォントデー
タを画像データに変換して合成することができるので、
講義参加者の顔の映像に合成する文字の制限を受けるこ
となくかつ画像なども合成することができる。

【０００７】本発明はまた、先生端末及び生徒端末を含
む複数の講義端末と講義サーバ装置がネットワークを介
して接続され、前記講義サーバ装置が前記複数の講義端
末から受信した講義参加者の映像及び音声を合成して前
記複数の講義端末に配信する講義システムであって、前
記講義端末が自己の講義参加者の映像に合成する文字デ
ータをビットマップイメージデータに変換し、このビッ
トマップイメージデータをＭＰＥＧ−１のスライスデー
タに変換してこのスライスデータを前記講義参加者の映
像のＭＰＥＧ−１のスライスデータに合成して前記サー
バ装置に送信し、前記サーバ装置が前記講義端末から送
信された合成映像を前記複数の講義端末に配信するよう
に構成した。上記構成により、多種多様なフォントデー
タをＭＰＥＧ−１のスライスデータに変換して合成する
ことができるので、講義参加者の顔の映像に合成する文
字の制限を受けることなくかつ画像なども合成すること
ができる。

【０００８】本発明はまた、先生端末及び生徒端末を含
む複数の講義端末と講義サーバ装置がネットワークを介
して接続され、前記講義サーバ装置が前記複数の講義端
末から受信した講義参加者の映像及び音声を合成して前
記複数の講義端末に配信する講義システムであって、前
記講義端末が自己の講義参加者の映像に合成する文字デ
ータをビットマップイメージデータに変換し、このビッ
トマップイメージデータをＭＰＥＧ−１のスライスデー
タに変換してこのスライスデータを前記講義参加者の映
像のＭＰＥＧ−１のスライスデータに合成して前記サー
バ装置に送信し、前記サーバ装置が前記講義端末から送
信された合成映像を前記複数の講義端末に配信するよう
に構成した。上記構成により、多種多様なフォントデー
タをＭＰＥＧ−１のスライスデータに変換して合成する
ことができるので、講義参加者の顔の映像に合成する文
字の制限を受けることなくかつ画像なども合成すること
ができる。

【０００９】本発明はまた、映像資料に合成する文字デ
ータを画像データに変換し、前記画像データを前記映像
資料に合成するように構成した。上記構成により、映像
資料に合成する文字の制限を受けることなくかつ画像な
ども合成することができる。

【００１０】本発明はまた、ネットワーク上のＷＷＷサ
ーバに登録されているＷＥＢ資料であって前記講義端末
が他の講義参加者に見せたいＷＥＢ資料のＵＲＬアドレ
スを前記講義サーバ装置に通知し、前記講義サーバ装置
が前記通知されたＵＲＬアドレスを他の講義端末に通知
し、前記他の講義端末が前記通知されたＵＲＬアドレス
に基づいて前記ＷＷＷサーバ上のＷＥＢ資料をアクセス
して表示した場合に、前記講義端末の講義参加者の映像
に対してその講義参加者が前記ＷＥＢ資料を見せたこと
を示す画像を合成するように構成した。上記構成によ
り、どの講義参加者がＷＥＢ資料を見せたかを、講義参
加者の顔の映像に合成する文字の制限を受けることなく
かつ画像でも合成して表示することができる。

【００１１】本発明はまた、前記講義サーバ装置がネッ
トワーク上のＷＷＷサーバに登録されているＷＥＢ資料
のＵＲＬアドレスをＷＥＢ資料データベースに登録し、
前記ＷＥＢ資料データベースに登録されているＵＲＬア
ドレスであって前記講義端末が他の講義参加者に見せた
いＷＥＢ資料のＵＲＬアドレスを前記講義サーバ装置に
通知し、前記講義サーバ装置が前記通知されたＵＲＬア
ドレスを他の講義端末に通知し、前記他の講義端末が前
記通知されたＵＲＬアドレスに基づいて前記ＷＷＷサー
バ上のＷＥＢ資料をアクセスして表示した場合に、前記
講義端末の講義参加者の映像に対してその講義参加者が
前記ＷＥＢ資料を見せたことを示す画像を合成するよう
に構成した。上記構成により、どの講義参加者がＷＥＢ
資料を見せたかを、講義参加者の顔の映像に合成する文
字の制限を受けることなくかつ画像でも合成して表示す
ることができる。

【００１２】本発明はまた、前記講義サーバ装置がさら
に、自己のＷＥＢ資料及びそのＵＲＬアドレスが登録さ
れたＷＥＢ資料データベースと、前記講義端末から前記
自己のＷＥＢ資料を他の講義参加者に見せたい要求があ
った場合にそのＵＲＬアドレスを他の講義端末に通知す
る手段とを有し、前記他の講義端末が前記通知されたＵ
ＲＬアドレスに基づいて前記ＷＥＢ資料データベース上
のＷＥＢ資料をアクセスして表示した場合に、前記講義
端末の講義参加者の映像に対してその講義参加者が前記
ＷＥＢ資料を見せたことを示す画像を合成するように構
成した。上記構成により、どの講義参加者がＷＥＢ資料
を見せたかを、講義参加者の顔の映像に合成する文字の
制限を受けることなくかつ画像でも合成して表示するこ
とができる。

【００１３】

【発明の実施の形態】以下、図面を参照して本発明の実
施の形態について説明する。図１は本発明に係る講義シ
ステムの一実施形態を示す構成図である。

【００１４】図１に示すシステムでは、一例として講義
サーバ装置（単にサーバ装置ともいう）１００に対して
最大８台の講義クライアント端末（以下単に「端末」と
もいう）２００がＬＡＮ／ＷＡＮ３００を介して接続さ
れる。サーバ装置１００には大容量記憶装置としてハー
ドディスク（ＨＤ）１２０が設けられている。また、Ｌ
ＡＮ／ＷＡＮ３００は、世界中のＷＷＷサーバ４００に
接続可能であり、さらに、講義サーバ装置１００も同様
にＷＷＷサーバである。

【００１５】図２は図１に示すシステムにおいて、端末
２００がＷＷＷサーバ４００上（さらには講義サーバ装
置１００上）のＷＥＢ資料にアクセスする動作を示し、
端末２００はブラウザを有する。そして、講義サーバ装
置１００はＷＷＷサーバ４００上のＷＥＢ資料名とＵＲ
Ｌアドレスを対応して登録するためのＷＥＢ資料データ
ベースを有する。このＷＥＢ資料データベースにはさら
に、自己のＷＥＢ資料が登録される。ＷＥＢ資料はテキ
ストファイルや、ＪＰＥＧ、ＧＩＦ、ＢＭＰなどの画像
を含むファイルである。

【００１６】図２における手順（１）はＷＷＷサーバ４
００上のＷＥＢ資料を「見る」手順を示し、手順（２）
は「見せる」手順を示す。 （１）見る側の端末２００ａのクライアントがＷＷＷサ
ーバ４００上のＷＥＢ資料名を選択して「見る」ボタン
を操作して端末２００ａが講義サーバ装置１００に対し
てＷＥＢ資料名を送ると、講義サーバ装置１００はこれ
に応答してそのＵＲＬアドレスを送る。これにより、端
末２００ａはＷＷＷサーバ４００上のＷＥＢ資料にアク
セスすることができる。

【００１７】（２）見せる側の端末２００ａのクライア
ントがＷＷＷサーバ４００上のＷＥＢ資料のＵＲＬアド
レスを選択して他の見せられる側の端末２００ｂのクラ
イアントに「見せたい」ボタンを操作し、端末２００ａ
が講義サーバ装置１００に対してそのＵＲＬアドレスを
送ると、講義サーバ装置１００は見せられる側の端末２
００ｂに対してそのＵＲＬアドレスを送る。これによ
り、見せられる側の端末２００ｂがＷＷＷサーバ４００
上のＷＥＢ資料にアクセスすることができるので、端末
２００ａのクライアントが他の端末２００ｂのクライア
ントに、見せたいＷＥＢ資料を見せることができる。こ
のようにＷＷＷサーバ４００上のＷＥＢ資料を見ている
間（アクセス中）は、講義サーバ装置１００の負担はな
い。

【００１８】図３を参照してサーバ装置１００について
詳しく説明する。このサーバ装置１００はソフトウエア
及びハードウエアにより構成される通信制御手段１０
１、ユーザ認証手段１０２、予約管理手段１０３、サー
バ制御手段１０４、文字合成手段１０５、映像合成手段
１０６、音声フォーマット変換手段１０７、音声合成手
段１０８、ＷＷＷサーバ手段１１１、蓄積手段１１３、
及び負荷監視制御手段１１５と、ＨＤ１２０上に構成さ
れるユーザ管理データベース１０９、予約管理データベ
ース１１０、ＷＥＢ資料データベース１１２、映像デー
タベース１１４及び画面合成定義データベース１１６を
有する。

【００１９】通信制御手段１０１はクライアント端末２
００から受信するデータ／制御コマンド１として、映像
音声データ、ユーザ認証データ、予約登録情報、端末情
報、映像資料データ、ＷＥＢ資料データ、ＵＲＬデー
タ、拡大映像要求コマンド及びその他制御用データなど
を受け取り、クライアント端末２００に対して送信する
データ／制御コマンド２として、映像音声データ、ＨＴ
ＭＬデータ、講義情報データ、ユーザ認証結果通知及び
その他制御用データなどを送る。

【００２０】通信制御手段１０１とユーザ認証手段１０
２の間ではユーザ認証データ及びユーザ認証結果通知３
がやり取りされ、通信制御手段１０１と予約管理手段１
０３との間では予約情報データ４がやり取りされる。通
信制御手段１０１とサーバ制御手段１０４との間では制
御用データ５がやり取りされ、通信制御手段１０１から
文字合成手段１０５には文字情報データ６が送られる。
通信制御手段１０１と映像合成手段１０６との間では映
像データ及び合成映像データ７がやり取りされ、文字合
成手段１０５から映像合成手段１０６には文字映像デー
タ１０が送られる。通信制御手段１０１から音声フォー
マット変換手段１０７にはＧＳＭ音声データ８が送ら
れ、音声合成手段１０８から通信制御手段１０１には合
成ＧＳＭ音声データ９が送られる。音声フォーマット変
換手段１０７と音声合成手段１０８との間ではＰＣＭ合
成音声データ及びＧＳＭ合成音声データ１１がやり取り
される。

【００２１】ユーザ認証手段１０２とユーザ管理データ
ベース１０９との間ではユーザ認証データ１２がやり取
りされ、予約管理手段１０３と予約管理データベース１
１０との間では予約情報データ１３がやり取りされる。
サーバ制御手段１０４とＷＷＷサーバ手段１１１との間
ではＨＴＴＰリクエストデータ及びＨＴＴＰレスポンス
データ１４がやり取りされ、サーバ制御手段１０４と音
声合成手段１０８との間では音声合成制御データ１５が
やり取りされる。サーバ制御手段１０４から映像合成手
段１０６に対しては映像合成制御データ１６が送られ
る。サーバ制御手段１０４と蓄積手段１１３との間では
蓄積制御データ及び読み出し制御データ１７がやり取り
され、映像合成手段１０６と蓄積手段１１３との間では
蓄積映像データ及び読み出し映像データ１８がやり取り
される。音声合成手段１０８と蓄積手段１１３との間で
は蓄積音声データ及び読み出し音声データ１９がやり取
りされる。

【００２２】ＷＷＷサーバ手段１１１とＷＥＢ資料デー
タベース１１２との間ではＷＥＢ資料及びＷＥＢ資料デ
ータ２０がやり取りされ、蓄積手段１１３と映像データ
ベース１１４との間では映像・音声データ及び映像資料
データ２１がやり取りされる。また、蓄積手段１１３と
ＷＥＢ資料データベース１１２との間ではＷＥＢ資料及
びＷＥＢ資料データ２０がやり取りされる。映像合成手
段１０６と画面合成定義データベース１１６との間では
画面合成定義データ２４がやり取りされる。負荷監視制
御手段１１５はＬＡＮ／ＷＡＮ３００との間で負荷監視
用パケットデータ及び負荷監視用応答パケットデータ２
２をやり取りして、レート制御指示データ２３を通信制
御手段１０１に送る。

【００２３】サーバ装置１００の基本機能を説明する。
・プロキシ機能：ＷＷＷサーバ機能。ＬＡＮ／ＷＡＮ３
００からの要求が多地点講義のＨＴＴＰ要求か通常のイ
ンターネットアクセス要求かを判断し、後者の場合には
インターネット用プロキシへ配信する。 ・ユーザ認証機能：あらかじめ登録されているユーザか
否かを判断する。 ・映像合成・配信機能：各端末２００からの映像を指定
されたレイアウトで１枚に合成して全端末２００に配信
する。 ・音声合成・配信機能：各端末２００からの音声を指定
された組み合わせでミキシングして全端末２００に配信
する。 ・文字合成機能：各端末２００からの映像の下部にスラ
イスデータを合成して１枚のフレームに合成する。

【００２４】・記録機能：各端末２００からの映像・音
声をＨＤ１２０に記録する。 ・記録再生機能：ＨＤ１２０に記録された映像・音声デ
ータを再生して各端末２００に配信する。ダウンロード
であれば、ＭＰＥＧ−１形式に変換してダウンロードす
る。 ・レート制御機能：端末２００が接続されているネット
ワーク帯域幅を調査し、帯域幅に応じた映像ビットレー
ト、音声符号化方式を採用する。

【００２５】次に詳細な機能を説明する。 ＜講義予約＞ ・講義登録：開催する講義を予約登録する機能。予約時
に登録する内容は、日時／開催講義名／コメント／参加
ユーザ認証設定。 ・講義削除：既に予約登録した講義予約内容を削除する
機能。 ・講義登録内容一覧表示：既に登録した講義内容を日付
指定された日の内容一覧表として表示する機能。 ・講義参加認証：ユーザが講義に参加する際に、その講
義に登録されているか否かを判断し、登録されていない
場合には講義参加を拒否する機能。

【００２６】＜ＷＥＢ資料＞ ・ＷＥＢ資料登録：ＷＥＢ資料として使用するＵＲＬア
ドレスに関連付けた名前を「ＷＥＢ資料名」として登録
する機能。 ・ＷＥＢ資料削除：既に登録したＷＥＢ資料名を削除す
る機能。 ・ＷＥＢ資料一覧表示：サーバ装置１００に登録されて
いるＷＥＢ資料名の一覧を表示する機能。 ・ＷＥＢ資料表示：登録されたＷＥＢ資料名を選択して
ＷＥＢ資料名に関連付けられたＵＲＬアドレスのＷＥＢ
ページ情報を表示する機能。講義中であれば映像表示エ
リアを縮小して表示する。 ・ＷＥＢ資料反映：現在表示しているＷＥＢ資料の内容
を他の講義参加者に反映する機能。

【００２７】＜映像資料＞ ・映像資料登録：ＤＶ（デジタルビデオの略：以下同
じ）カメラに記録した映像をＭＰＥＧ−１に変換してサ
ーバ装置１００上に登録する。 ・映像資料削除：既に登録された映像資料を削除する。 ・映像資料プレビュー（再生／一時停止／早送り／巻き
戻し）：既に登録した映像資料を再生、再生一時停止、
早送り、巻き戻す機能。 ・映像資料一覧表示：既に登録された映像資料の一覧を
表示する機能。 ・映像資料見る（再生／一時停止／早送り／巻き戻
し）：登録された映像資料を講義中に合成して配信する
ことで一人で参照する機能。 ・映像資料見せる：登録された映像資料を講義中に合成
して全員に配信する機能。

【００２８】＜講義録＞ ・講義録録画：現在講義中の映像・音声、映像資料、Ｗ
ＥＢ資料をサーバ装置１００上に記録する機能。 ・講義録ダウンロード：サーバ装置１００上に登録され
た講義録をＨＴＭＬ形式で、端末２００の記録媒体上に
ダウンロードする機能。 ・講義録閲覧：サーバ装置１００上に登録された講義録
をレート制御を受けながら配信する機能。 ・講義録一覧表示／削除：サーバ装置１００上に登録さ
れた講義録を一覧表示し、また、削除する機能。 ・講義録再生（ＷＥＢ資料再生）：ダウンロードした講
義録をＷＥＢブラウザで参照する機能。

【００２９】＜表示＞ ・講義参加者名表示：映像表示領域の一部に参加者名を
合成する機能。 ・講義情報表示：現在開催中の講義情報（講義名／開催
日時／主催者名／参加者名）を表示する機能。 ・映像拡大／縮小

【００３０】次に図４を参照して端末２００について詳
しく説明する。この端末２００は音声入出力手段２０
１、映像入力手段２０２、ＷＷＷ表示手段２０３、操作
入力手段２０４、音声フォーマット変換手段２０５、映
像フォーマット変換手段２０６、ＷＷＷ制御手段２０
７、音声コーデック制御手段２０８、映像コーデック制
御手段２０９、端末制御手段２１０、蓄積手段２１１、
記録媒体２１２及び通信制御手段２１３を有し、通信制
御手段２１３はＬＡＮ／ＷＡＮ３００（図１、図３参
照）に接続される。

【００３１】音声入出力手段２０１から音声フォーマッ
ト変換手段２０５にはＰＣＭ音声入力信号３１が送ら
れ、音声コーデック制御手段２０８から音声入出力手段
２０１には音声出力信号３２が送られる。映像入力手段
２０２から映像フォーマット変換手段２０６にはＤＶ映
像信号３３が送られる。ＷＷＷ制御手段２０７からＷＷ
Ｗ表示手段２０３にはＨＴＭＬファイル制御情報３４が
送られ、ＷＷＷ表示手段２０３からＷＷＷ制御手段２０
７にはＣＧＩフォーム情報３５ａが送られる。操作入力
手段２０４からＷＷＷ表示手段２０３には操作イベント
データ３５ｂが送られる。

【００３２】音声フォーマット変換手段２０５から音声
コーデック制御手段２０８にはＰＣＭダウンサンプリン
グ音声データ３６が送られ、映像フォーマット変換手段
２０６から映像コーデック制御手段２０９にはＤＶ映像
データ３７が送られる。映像コーデック制御手段２０９
からＷＷＷ制御手段２０７にはＭＰＥＧ−１映像データ
３８が送られる。ＷＷＷ制御手段２０７から端末制御手
段２１０には制御用データ３９が送られ、端末制御手段
２１０と蓄積手段２１１との間では制御用データ４０が
やり取りされる。蓄積手段２１１と記録媒体２１２との
間では映像・音声データ、映像資料及びＷＥＢ資料用デ
ータ（ＨＴＭＬ）４１がやり取りされる。

【００３３】音声コーデック制御手段２０８から通信制
御手段２１３にはＧＳＭ音声データ４２が送られ、通信
制御手段２１３から音声コーデック制御手段２０８には
ＧＳＭ音声データ４３が送られる。映像コーデック制御
手段２０９から通信制御手段２１３にはＭＰＥＧ−１映
像データ４４が送られ、通信制御手段２１３から映像コ
ーデック制御手段２０９にはＭＰＥＧ−１映像データ４
５が送られる。端末制御手段２１０と通信制御手段２１
３との間では制御用データ４６がやり取りされる。

【００３４】次に端末２００の主な機能について説明す
る。 ・音声データ配信：ＤＶカメラ／マイク入力から音声を
取り込み、音声データをサーバ装置に配信する機能。
（ＤＶカメラ／マイク入力からの音声入力ＰＣＭデータ
をダウンサンプリング後にＧＳＭに変換し、ＧＳＭのフ
レーム単位でパケット化してＨＴＴＰプロトコルで配信
する。） ・音声再生： ・映像データ配信：ＤＶカメラ／ＵＳＢカメラから映像
を取り込み、映像データをサーバ装置に配信する機能。
（ＤＶカメラ／ＵＳＢカメラからＤＶ形式の映像データ
をＭＰＥＧ−１に変換し、ＭＰＥＧ−１のフレーム単位
でパケット化してＨＴＴＰプロトコルで配信する。）

【００３５】次に図５〜図１５を参照して端末２００の
表示画面を説明する。 ＜メニュー画面＞メニュー画面には図５に示すように、
「講義予約画面表示ボタン」、「映像資料登録画面表示
ボタン」、「ＷＥＢ資料登録画面表示ボタン」、「講義
録の閲覧ダウンロード画面表示ボタン」、「現在開催中
の講義に参加するボタン」、「現在開催中の講義情報の
表示エリア」、「現在講義が開催されているか否かの状
況を表示するエリア」、「現在開催中の講義情報の要求
ボタン」、「本日開催開始予定の講義情報を表示するエ
リア」などが表示される。 ＜予約画面＞図５に示すメニュー画面上の「講義予約画
面表示ボタン」が操作されると、図６に示すような講義
予約画面が表示され、この講義予約画面から講義を予約
することができる。

【００３６】＜講義画面＞図５に示すメニュー画面上の
「講義開始ボタン」が操作されると、図７に示すような
講義画面が表示される。この講義画面には「講義情報表
示エリア」、「映像資料表示エリア」、選択した映像資
料を「見る」ボタン及び「見せる」ボタン、「登録ＷＥ
Ｂ資料一覧表示エリア」、選択したＷＥＢ資料を「見
る」ボタン、「講義録録画開始／停止ボタン」、メニュ
ー画面に戻るための「メニューへ」ボタン、「講義映像
表示エリア」が設けられている。「講義映像表示エリ
ア」は図８に詳しく示すように、下側の略半分は４×２
＝８個のウィンドウに分割され、各分割ウィンドウには
８名の講義参加者のそれぞれの映像が表示される。ま
た、上側の略半分は２×１＝２個のウィンドウに分割さ
れ、その右側ウィンドウには自分が見たい、又は他の参
加者に見せられた映像資料が表示され、左側ウィンドウ
にはその映像資料の拡大映像が表示される。

【００３７】＜講義画面（映像資料表示）＞図７に示す
講義画面上の、選択した映像資料を「見る」ボタン及び
「見せる」ボタンが操作されると、図９に示すような映
像資料表示の講義画面が表示される。この講義画面に
は、「講義映像表示エリア」に映像資料が表示され、ま
た、図７に示す講義画面の表示の他に更に、「映像資料
再生／一時停止／停止／スライダー／映像資料終了」の
各ボタンが表示される。 ＜講義画面（ＷＥＢ表示）＞図７に示す講義画面上の、
選択したＷＥＢ資料を「見る」ボタンが操作されると、
図１０に示すようなＷＥＢ表示の講義画面が表示され
る。この講義画面には、図７に示す講義画面の表示の他
に更に、「ＷＥＢページ表示エリア」、縮小された「講
義映像表示エリア」、「ＵＲＬ入力欄」、「ＷＥＢペー
ジ操作ボタン」、表示中のＷＥＢページを他の端末に
「見せる」ボタン、「ＷＥＢ資料表示を終了する」ボタ
ンが表示される。

【００３８】＜映像資料登録画面（プレビュー中）＞プ
レビュー中の映像資料登録画面には図１１に示すよう
に、サーバ１００上に登録された映像資料一覧、自端末
上の映像資料一覧、外部記録機器内の映像資料一覧、選
択した映像資料の移動先／削除ボタン、「メニューへ」
ボタン、映像資料再生表示エリア、スライダーバー、映
像資料再生／一時停止／停止ボタン、映像資料名入力欄
などが表示される。

【００３９】＜ＷＥＢ資料登録画面＞ＷＥＢ資料登録画
面には図１２に示すように、登録するＷＥＢ資料名入力
欄、入力したＷＥＢ資料名登録ボタン、既に登録された
ＷＥＢ資料名表示一覧、ＷＥＢ資料一覧からの表示／削
除ボタン、「メニューへ」ボタン、ＵＲＬアドレス入力
欄、ＷＥＢページ表示エリア、ＷＥＢ操作ボタンなどが
表示される。

【００４０】＜講義録閲覧画面（ダウンロード）＞ダウ
ンロードを行うための講義録閲覧画面には図１３に示す
ように、「メニューへ」ボタン、講義録一覧表示エリ
ア、講義録一覧からのダウンロード／閲覧／削除ボタ
ン、ダウンロード先指定エリアなどが表示される。 ＜講義録閲覧画面＞講義録閲覧画面には図１４に示すよ
うに、講義情報表示エリア、映像・ＷＥＢ資料表示モー
ド切換ボタン、スライダーバー、講義録再生／一時停止
／停止ボタン、閲覧ダウンロード画面へ進むボタン、講
義録映像表示エリアなどが表示される。

【００４１】＜講義録閲覧画面（ＷＥＢ表示）＞ＷＥＢ
表示の講義録閲覧画面には図１５に示すように、図１４
に示す表示に加えて、ＵＲＬアドレス入力欄、ＷＥＢペ
ージ表示エリア（講義録映像表示エリアに代わる）、縮
小された講義録映像表示エリア、ＷＥＢページ操作ボタ
ンなどが表示される。

【００４２】＜講義録＞次に図１６を参照してサーバ装
置１００の講義録記録の開始処理を説明する。まず、端
末２００は「講義録記録開始」ボタンが操作されると講
義録記録開始コマンドをサーバ装置１００に送信する。
サーバ装置１００では、通信制御手段１０１が端末２０
０からコマンド（講義録記録開始コマンド）を受信する
と、サーバ制御手段１０４に対してコマンド解析を指示
し（ステップＳ１）、サーバ制御手段１０４が受信コマ
ンドを講義録記録開始コマンドと解析すると講義録の記
録指示を蓄積手段１１３に発行する（ステップＳ２）。
そして、蓄積手段１１３が講義中の映像・音声を講義録
としてＨＤ１２０上の映像データベース１１４へ記録を
開始する（ステップＳ３）。

【００４３】＜映像資料登録＞次に図１７を参照してサ
ーバ装置１００の映像資料登録の処理を説明する。ま
ず、端末２００は「映像資料登録」ボタンが操作される
と映像資料登録コマンドをサーバ装置１００に送信す
る。サーバ装置１００では、通信制御手段１０１が端末
２００からコマンド（映像資料登録コマンド）を受信す
ると、サーバ制御手段１０４に対してコマンド解析を指
示し（ステップＳ２１）、サーバ制御手段１０４が受信
コマンドを映像資料登録コマンドと解析すると映像資料
の書き込み指示を蓄積手段１１３に発行する（ステップ
Ｓ２２）。そして、蓄積手段１１３が映像資料登録コマ
ンドが指示する映像資料をＨＤ１２０上の映像データベ
ース１１４に記録し、また、その管理データをユーザ管
理データベース１０９に記録する（ステップＳ２３）。

【００４４】＜映像資料再生＞次に図１８を参照してサ
ーバ装置１００の映像資料再生の処理を説明する。ま
ず、端末２００は「見る」ボタンが操作されると映像資
料再生コマンドをサーバ装置１００に送信する。サーバ
装置１００では、通信制御手段１０１が端末２００から
コマンド（映像資料再生コマンド）を受信すると、サー
バ制御手段１０４に対してコマンド解析を指示し（ステ
ップＳ３１）、サーバ制御手段１０４が受信コマンドを
映像資料再生コマンドと解析するとアクセス権判断指示
をサーバ制御手段１０４に発行し（ステップＳ３２）、
サーバ制御手段１０４がそのユーザのアクセス権を判断
する（ステップＳ３３）。

【００４５】そして、「アクセス権有り」の場合には、
蓄積手段１１３が映像資料再生開始コマンドが指示する
映像資料を、ユーザ管理データベース１０９を参照しな
がら映像データベース１１４から再生し（ステップＳ３
４→Ｓ３５）、次いで再生した映像・音声をそれぞれ映
像合成手段１０６と音声合成手段１０８により合成し
（ステップＳ３６）、次いでこれを通信制御手段１０１
により端末２００に配信する（ステップＳ３７）。他
方、「アクセス権無し」の場合には、サーバ制御手段１
０４が「アクセス権無し」の送信コマンドを生成し（ス
テップＳ３４→Ｓ３８）、次いでこれを通信制御手段１
０１により端末２００に配信する（ステップＳ３９）。

【００４６】＜ＷＥＢ資料登録＞次に図１９を参照して
サーバ装置１００のＷＥＢ資料登録の処理を説明する。
まず、端末２００は「ＷＥＢ資料登録」ボタンが操作さ
れるとＷＥＢ資料登録コマンドをサーバ装置１００に送
信する。サーバ装置１００では、通信制御手段１０１が
端末２００からコマンド（ＷＥＢ資料登録コマンド）を
受信すると、サーバ制御手段１０４に対してコマンド解
析を指示し（ステップＳ７１）、サーバ制御手段１０４
が受信コマンドをＷＥＢ資料登録コマンドと解析すると
ＷＥＢ資料管理テーブルの書き込み指示を蓄積手段１１
３に発行する（ステップＳ７２）。そして、蓄積手段１
１３がＷＥＢ資料管理テーブルを作成してＨＤ１２０上
のＷＥＢ資料データベース１１２に記録する（ステップ
Ｓ７３）。

【００４７】＜ＷＥＢ資料イベント登録＞次に図２０を
参照してサーバ装置１００のＷＥＢ資料イベントの記録
処理を説明する。まず、端末２００は「ＷＥＢ資料記
録」ボタンが操作されるとＷＥＢ資料記録用制御コマン
ドをサーバ装置１００に送信する。サーバ装置１００で
は、通信制御手段１０１が端末２００からコマンド（Ｗ
ＥＢ資料記録用制御コマンド）を受信すると、サーバ制
御手段１０４に対してコマンド解析を指示し（ステップ
Ｓ４１）、サーバ制御手段１０４が受信コマンドをＷＥ
Ｂ資料記録用制御コマンドと解析すると、表示中の映像
資料のＵＲＬの記録指示を蓄積手段１１３に発行する
（ステップＳ４２）。そして、蓄積手段１１３が映像資
料のＷＥＢ資料イベントとして、講義情報（講義名／開
催日時／主催者名／参加者名）と、表示中の映像資料の
ＵＲＬアドレスと、講義開始からの経過時間をＨＤ１２
０上のＷＥＢ資料データベース１１２に記録する（ステ
ップＳ４３）。

【００４８】＜ＷＥＢ資料見せる＞次に図２１を参照し
てサーバ装置１００のＷＥＢ資料イベントの通知処理を
説明する。まず、端末２００は「見せる」ボタンが操作
されるとＷＥＢ資料ＵＲＬ通知用制御コマンドをサーバ
装置１００に送信する。サーバ装置１００では、通信制
御手段１０１が端末２００からコマンド（ＷＥＢ資料Ｕ
ＲＬ通知用制御コマンド）を受信すると、サーバ制御手
段１０４に対してコマンド解析を指示し（ステップＳ５
１）、サーバ制御手段１０４が受信コマンドをＷＥＢ資
料ＵＲＬ通知用制御コマンドと解析すると、ＵＲＬ通知
コマンドの生成指示を発行する（ステップＳ５２）。

【００４９】そして、サーバ制御手段１０４がＵＲＬ通
知コマンドを生成してその送信指示を通信制御手段１０
１に発行し（ステップＳ５３）、次いで通信制御手段１
０１がこのＵＲＬ通知コマンドを他の端末２００に送信
する（ステップＳ５４）。これにより、「見せる」ボタ
ンが操作された端末２００で表示中のＷＥＢ資料のＵＲ
Ｌアドレスが他の端末２００で表示されるので、他の端
末２００がこのＵＲＬアドレスでＷＷＷサーバ４００
（さらにはサーバ装置１００）のＷＥＢ資料にアクセス
して表示することができる。

【００５０】＜講義録再生＞次に図２２を参照してサー
バ装置１００の講義録再生処理を説明する。まず、端末
２００は「講義録再生」ボタンが操作されると講義録再
生コマンドをサーバ装置１００に送信する。サーバ装置
１００では、通信制御手段１０１が端末２００からコマ
ンド（講義録再生コマンド）を受信すると、サーバ制御
手段１０４に対してコマンド解析を指示し（ステップＳ
６１）、サーバ制御手段１０４が受信コマンドを講義録
再生コマンドと解析すると、講義録とＷＥＢ資料イベン
トの読み出し指示を蓄積手段１１３に発行する（ステッ
プＳ６２）。

【００５１】次いで蓄積手段１１３が講義録とＷＥＢ資
料イベントをＨＤ１２０から読み出し（ステップＳ６
３）、次いでサーバ制御手段１０４がＷＥＢ資料イベン
トの経過時間（参照時間）か否かを判断する（ステップ
Ｓ６４）。そして、経過時間（参照時間）の場合にはサ
ーバ制御手段１０４がＵＲＬ通知コマンドを生成してそ
の配信指示を通信制御手段１０１に発行し（ステップＳ
６５）、次いで通信制御手段１０１がこのＵＲＬ通知コ
マンドを端末２００に送信し（ステップＳ６６）、次い
でステップＳ６７に進む。ステップＳ６４において経過
時間（参照時間）でない場合には直接ステップＳ６７に
進む。ステップＳ６７では講義録の映像と音声をそれぞ
れ映像合成手段１０６と音声合成手段１０８により合成
してその配信指示を通信制御手段１０１に発行し、次い
で通信制御手段１０１がレート制御を行いながら、この
合成された映像と音声を端末２００に送信する（ステッ
プＳ６８）。

【００５２】したがって、講義参加者が講義終了後など
に講義録を再生する場合に、講義中に映像資料が表示さ
れてＷＥＢ資料として登録された時点でそのＵＲＬアド
レスを通知されるので、そのＵＲＬアドレスで再生指示
することによりＷＥＢ資料を再生表示させることができ
る。なお、ステップＳ６５、Ｓ６６においてＵＲＬ通知
コマンドを端末２００に送信する代わりに、そのＷＥＢ
資料をＵＲＬアドレスに基づいて自動的に再生表示する
ようにしてもよい。

【００５３】次に図２３を参照して図８に示した４×２
＝８個の各講義参加者映像ウィンドウに文字などを合成
する処理について説明する。ここで、ＭＰＥＧ−１の１
フレーム分のデータは、図２３（ａ）に示すように縦方
向に４つのスライスに分割されて符号化されている。そ
こで、端末２００では、ＷＷＷ制御手段２０７が操作入
力手段２０４により指示された、合成する文字や画像を
ビットマップ（ＢＭＰ）イメージデータに変換し、この
ＢＭＰイメージデータを映像コーデック制御手段２０９
に出力する。そして、映像コーデック制御手段２０９
は、このＢＭＰイメージデータをＭＰＥＧ−１の１つの
スライス分のデータに変換して、これをサーバ装置１０
０に送信する。そして、サーバ装置１００は、このデー
タをその端末の４番目のスライス映像に置換して１〜３
番目のスライス映像と合成し、その合成画像を講義参加
者映像ウィンドウとして全ての端末２００に配信する。

【００５４】図２４はサーバ装置１００の処理を示して
いる。まず、端末２００は「画像合成」ボタンが操作さ
れると画像合成コマンドと合成用画像（ＭＰＥＧ−１ス
ライスデータ）をサーバ装置１００に送信する。サーバ
装置１００では、通信制御手段１０１が端末２００から
コマンド（画像合成コマンド）を受信すると、サーバ制
御手段１０４に対してコマンド解析を指示し（ステップ
Ｓ８１）、サーバ制御手段１０４が受信コマンドを画像
合成コマンドと解析すると合成画像の受信指示を通信制
御手段１０１に発行する（ステップＳ８２）。そして、
通信制御手段１０１が合成画像を受信すると画像合成を
文字合成手段１０５に指示し（ステップＳ８３）、次い
で文字合成手段１０５が合成画像を処理し（ステップＳ
８４）、次いで映像合成手段１０６が合成画像を講義中
の映像と合成し（ステップＳ８５）、次いで通信制御手
段１０１が合成画像を全端末２００に送信する（ステッ
プＳ８６）。

【００５５】このような合成方法によれば、端末２００
には多種多様なフォントデータが記憶されているのが通
常であるので文字の制限は殆どなく、また、フォントデ
ータを画像データ（ＭＰＥＧ１データ）に変換するの
で、文字以外の画像などもＭＰＥＧデータに変換するこ
とにより合成することができる。また、サーバ装置１０
０は単に端末２００から合成用画像を受け取って合成す
るのみであるので、文字や画像の変更なども柔軟に対応
することができる。

【００５６】なお、上記の画像合成をサーバ装置１００
側で行う代わりに端末２００側で行って合成画像をサー
バ装置１００側に送信し、サーバ装置１００側では画像
合成を行わずに配信のみを行うようにしてもよい。さら
に、このシステムでは、講義参加者が他の講義参加者に
映像資料を「見せる」ことができるが、誰が見せたか
（名前）やコメントを図８に示す講義参加者映像ウィン
ドウや映像資料ウィンドウに合成することができる。

【００５７】ここで、図１では、８台の端末２００と１
台のサーバ装置１００のみしか示されていないが、図２
５に示すようにＮ台の端末２００の任意の８台とＭ台の
サーバ装置１００の任意の１台を用いて１つの講義を開
催することができる。

【００５８】

【発明の効果】以上説明したように請求項１、２、３記
載の発明によれば、多種多様なフォントデータを画像デ
ータに変換して合成することができるので、講義参加者
の顔の映像に、合成する文字の制限を受けることなくか
つ画像なども合成することができる。請求項４記載の発
明によれば、映像資料に合成する文字の制限を受けるこ
となくかつ画像なども合成することができる。請求項
５、６、７記載の発明によれば、どの講義参加者がＷＥ
Ｂ資料を見せたかを、講義参加者の顔の映像に合成する
文字の制限を受けることなくかつ画像でも合成して表示
することができる。

【図面の簡単な説明】

【図１】本発明に係る講義システムの一実施形態を示す
構成図

【図２】図１のシステムにおいてＷＥＢ資料をアクセス
する場合の手順を示す説明図

【図３】図１のサーバ装置を詳しく示すブロック図

【図４】図１のクライアント端末を詳しく示すブロック
図

【図５】図１の端末のメニュー画面を示す説明図

【図６】図１の端末の講義予約画面を示す説明図

【図７】図１の端末の講義画面を示す説明図

【図８】図７の講義映像表示エリアを詳しく示す説明図

【図９】図１の端末の講義画面（映像資料表示）を示す
説明図

【図１０】図１の端末の講義画面（ＷＥＢ表示）を示す
説明図

【図１１】図１の端末の映像資料登録画面（プレビュー
中）を示す説明図

【図１２】図１の端末のＷＥＢ資料登録画面を示す説明
図

【図１３】図１の端末の講義録閲覧画面（ダウンロー
ド）を示す説明図

【図１４】図１の端末の講義録閲覧画面を示す説明図

【図１５】図１の端末の講義録閲覧画面（ＷＥＢ表示）
を示す説明図

【図１６】図１のサーバ装置の講義録記録の処理を示す
フローチャート

【図１７】図１のサーバ装置の映像資料登録の処理を示
すフローチャート

【図１８】図１のサーバ装置の映像資料再生の処理を示
すフローチャート

【図１９】図１のサーバ装置のＷＥＢ資料登録の処理を
示すフローチャート

【図２０】図１のサーバ装置のＷＥＢ資料イベント記録
の処理を示すフローチャート

【図２１】図１のサーバ装置のＷＥＢ資料イベント通知
の処理を示すフローチャート

【図２２】図１のサーバ装置の講義録再生の処理を示す
フローチャート

【図２３】本発明の講義システムにおける文字合成処理
を示す説明図

【図２４】図１のサーバ装置の合成処理を示すフローチ
ャート

【図２５】図１の講義システムの応用例を示す構成図

【符号の説明】

１００ サーバ装置（講義サーバ装置） １１２ ＷＥＢ資料データベース １１４ 映像資料データベース １２０ ハードディスク（ＨＤ） ２００ クライアント端末（講義クライアント端末、講
義端末又は単に端末） ３００ ＬＡＮ／ＷＡＮ ４００ ＷＷＷサーバ

───────────────────────────────────────────────────── フロントページの続き (72)発明者 蓬田 康雄 神奈川県横浜市港北区綱島東四丁目３番１ 号 松下通信株式会社内 Ｆターム(参考） 5C064 AA02 AB04 AC12

Claims (7)

【特許請求の範囲】
1. 【請求項１】 先生端末及び生徒端末を含む複数の講義
   端末と講義サーバ装置がネットワークを介して接続さ
   れ、前記講義サーバ装置が前記複数の講義端末から受信
   した講義参加者の映像及び音声を合成して前記複数の講
   義端末に配信する講義システムであって、 前記講義参加者の映像に合成する文字データを画像デー
   タに変換する手段と、 前記画像データを前記講義参加者の映像に合成する手段
   とを、 有する講義システム。
2. 【請求項２】 先生端末及び生徒端末を含む複数の講義
   端末と講義サーバ装置がネットワークを介して接続さ
   れ、前記講義サーバ装置が前記複数の講義端末から受信
   した講義参加者の映像及び音声を合成して前記複数の講
   義端末に配信する講義システムであって、 前記講義端末が自己の講義参加者の映像に合成する文字
   データをビットマップイメージデータに変換し、このビ
   ットマップイメージデータをＭＰＥＧ−１のスライスデ
   ータに変換してこのスライスデータを前記サーバ装置に
   送信し、 前記サーバ装置が前記スライスデータを前記講義参加者
   の映像のＭＰＥＧ−１のスライスデータに合成して前記
   複数の講義端末に配信するようにした講義システム。
3. 【請求項３】 先生端末及び生徒端末を含む複数の講義
   端末と講義サーバ装置がネットワークを介して接続さ
   れ、前記講義サーバ装置が前記複数の講義端末から受信
   した講義参加者の映像及び音声を合成して前記複数の講
   義端末に配信する講義システムであって、 前記講義端末が自己の講義参加者の映像に合成する文字
   データをビットマップイメージデータに変換し、このビ
   ットマップイメージデータをＭＰＥＧ−１のスライスデ
   ータに変換してこのスライスデータを前記講義参加者の
   映像のＭＰＥＧ−１のスライスデータに合成して前記サ
   ーバ装置に送信し、 前記サーバ装置が前記講義端末から送信された合成映像
   を前記複数の講義端末に配信するようにした講義システ
   ム。
4. 【請求項４】 映像資料に合成する文字データを画像デ
   ータに変換し、前記画像データを前記映像資料に合成す
   ることを特徴とする請求項１ないし３のいずれか１つに
   記載の講義システム。
5. 【請求項５】 ネットワーク上のＷＷＷサーバに登録さ
   れているＷＥＢ資料であって前記講義端末が他の講義参
   加者に見せたいＷＥＢ資料のＵＲＬアドレスを前記講義
   サーバ装置に通知し、前記講義サーバ装置が前記通知さ
   れたＵＲＬアドレスを他の講義端末に通知し、前記他の
   講義端末が前記通知されたＵＲＬアドレスに基づいて前
   記ＷＷＷサーバ上のＷＥＢ資料をアクセスして表示した
   場合に、前記講義端末の講義参加者の映像に対してその
   講義参加者が前記ＷＥＢ資料を見せたことを示す画像を
   合成することを特徴とする請求項１ないし３のいずれか
   １つに記載の講義システム。
6. 【請求項６】 前記講義サーバ装置がネットワーク上の
   ＷＷＷサーバに登録されているＷＥＢ資料のＵＲＬアド
   レスをＷＥＢ資料データベースに登録し、前記ＷＥＢ資
   料データベースに登録されているＵＲＬアドレスであっ
   て前記講義端末が他の講義参加者に見せたいＷＥＢ資料
   のＵＲＬアドレスを前記講義サーバ装置に通知し、前記
   講義サーバ装置が前記通知されたＵＲＬアドレスを他の
   講義端末に通知し、前記他の講義端末が前記通知された
   ＵＲＬアドレスに基づいて前記ＷＷＷサーバ上のＷＥＢ
   資料をアクセスして表示した場合に、前記講義端末の講
   義参加者の映像に対してその講義参加者が前記ＷＥＢ資
   料を見せたことを示す画像を合成することを特徴とする
   請求項１ないし３及び５のいずれか１つに記載の講義シ
   ステム。
7. 【請求項７】 前記講義サーバ装置がさらに、自己のＷ
   ＥＢ資料及びそのＵＲＬアドレスが登録されたＷＥＢ資
   料データベースと、前記講義端末から前記自己のＷＥＢ
   資料を他の講義参加者に見せたい要求があった場合にそ
   のＵＲＬアドレスを他の講義端末に通知する手段とを有
   し、前記他の講義端末が前記通知されたＵＲＬアドレス
   に基づいて前記ＷＥＢ資料データベース上のＷＥＢ資料
   をアクセスして表示した場合に、前記講義端末の講義参
   加者の映像に対してその講義参加者が前記ＷＥＢ資料を
   見せたことを示す画像を合成することを特徴とする請求
   項１ないし３及び５、６のいずれか１つに記載の講義シ
   ステム。