JPS62226781A - 電子会議システムにおける静止画情報伝送方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔発明の技術分野〕 本発明は、遠隔地点間で会議を行う電子会議システムに
係り、特に静止画情報の伝送に関する。

〔発明の技術的背景〕

従来から遠隔地間で会議を行なうシステムとして電子会
議システムが知られている。

このような電子会議システムとしては、たとえば第２２
図に示すようなものが考えられている。同図に示される
ようにこの電子会議システムは、マイク１、スピーカ２
、会議場の映像を映すテレビカメラ３、原稿を撮像する
テレビカメラ４、テレビモニタ５、ファクシミリ装置６
、プリンタとしてのハードコピー装置１２、マイク１と
スピーカ２の音声信号を符号化、復号化する音声ユニッ
ト７、画像信号の符号化、復号化を行う画像ユニット８
、画像ユニットヲ制御する制御ユニット９、制御ユニッ
ト９の指示を入力する操作ユニット１０、音声信号およ
び画像信号の送信および受信を行う伝送ユニッ）１１よ
シ構成される。

〔背景技術の問題点〕

しかしながら、このような電子会議システムにおいては
、音声情報及び画像情報のうちの動画情報に比べ、画像
情報のうちの静止画情報の使用頻度はきわめて低い。こ
のため、例えば動画情報、音声情報、静止画情報それぞ
れにタイムスロットヲ設けて多重化した場合、静止画情
報のタイムスロットは大半が空状態となシ、伝送効率の
低下になる。また静止画情報のタイムスロットヲ設けず
、動画情報、音声情報だけでタイムスロットヲ全て埋め
てしまう方法は伝送効率は良いが、静止画情報を伝送す
る際少くとも音声、動画どちらかを抑圧する形になる。

このため、静止画伝送中は会話が行なえない、会話者の
様子が動画として伝わらないなどの弊害が生じてくる。

〔発明の目的〕

本発明は、このような点に対処してなされたもので、静
止画情報が発生したときにも少なくとも音声情報を伝送
でき、かつ伝送効率の低下を抑えることのできる電子会
議システムにおける静止画情報伝送方式を提供すること
を目的とする。

〔発明の概要〕

前記目的を達成する九めに本発明は、可聴音データの入
力系に入力情報全符号化する圧縮率の異なる符号化手段
を設け、可聴音データの出力系に前記符号化手段に対応
する複数の復号化手段を設けるとともに、可聴音データ
の伝送中に静止画データの伝送要求が生じた場合、可聴
音データの復号化手段を圧縮率の高いものとし可聴音デ
ータと静止画データとを伝送するようににしたものであ
る。

〔発明の実施例〕

以下、図面に基づいて本発明の実施例を詳細に説明する
。

第１図は本発明の電子会議システムの一実施例の会議ユ
ニットシステムを示すブロック図である。

制御装置９００には描画系、静止画系、動画系、音声系
の入力装置が接続され、ソフトコピー系、ハードコピー
系、音声系の出力装置が接続されている。これらの入力
装置からの信号、出力装置への信号は幾つかの制御情報
信号により選択、多重化等の処置を施されまた伝送され
る０ 人力装置としては、手書き文字や図形を入力するための
複数の描画入力装置１００、会議前あるいは会議中に書
類原稿を入力するための静止画データ［２００，会議出
席者や会議場の背景の画像を入力するための動画入力装
置３００、および音声を入力する音声入力装置４００が
接続されている。

また出力装置としては、自端末や伝送されて来る描画系
、静止画系の入力情報を表示する複数の平面表示装置１
５０および図形表示装置（１）１６０、図形表示装置（
１）　１６０のコピーを取るハードコピー装置２６ｏ１
自端末や伝送されて来る動画系の入力情報を表示する図
形表示装置（２）　３５０、伝送されて来る音声系入力
情報を出力する音声出力装置４５０か接続されている。

また蓄積装置６００により、これらの入出力情報は記録
続出が行なわれる。そして伝送装置７００により遠隔地
の他の２つの会議ユニットシステムと接続されている。

以上の入出力情報は操作入力装置８５０、会議出席者の
離着席を検出する状態検出装置８００、会話者の音声か
ら発言者を判定する話者識別装置５１０などの装置から
の信号により情報の流れ先がコントロールされている。

以下本発明を構成する各装置についてさらに詳細に説明
する。

描画入力装置Ｚｏ。

第２図は、描画入力装置１００の一例を示すブロック図
である。

この描画入力装置１０１ｊ：、手書き図形の座標位置情
報を検出するもので、図示された筆記入力面に圧力が加
えられると、その圧力が加えられた点の座標データを出
力する圧力検出方式の描画入力部１０１と、この描画入
口部１０１に接続されたアナログ座標データをサンプリ
ングするサンプリング部１０３、およびベンタッチを検
出するベンタッチ検出部１０４と、サンプリング部１０
３に接続された入力処理部１０５と、描画データを符号
化する符号化部１０６と、この符号化された描画データ
をフレーム化する識別子付加部１０９とから構成されて
いる０なお入力ベン１０２は、上記描画入力部１０１の
筆記入力面に載せられた紙に図形を描画することにより
、Ｊｔ記入力面に圧力を加えるためのものである。

次にこの描画入力装置１００の動作を説明する０ まず描画入力部１０１の蔭記入力面に圧力が加えられる
（ベンタッチがある）と描画入力部１０１から出力され
る信号から、ベンタッチがあったことが検出される。ベ
ンタッチが検出されると、ベンタッチ検出部１０４は、
サンプリング１０３、および入力処理部１０５へ動作開
始を指示する制御信号を出力し、サンプリング部１０３
、および入力処理部１０５を動作可能な状態とする。

このサンプリング部１０３は描画入力部１０１から出力
されるアナログの座標データを所定の周期でサンプリン
グし、ディジタル化して入力処理部１０５へ出力する。

この入力処理部１０５は、サンプリング部１０３から出
力された座標データを受けて、この座標データが座標値
として適切なデータであるか否か等をチェックし、また
座標データが突然に離散した値になったときに、前の座
標データに基づき、その座標データを補正するスムージ
ング処理等を行なう。また、後述する入力分析部１０８
から部分消去の旨を示す命令による制御信号を与えられ
たときに、サンプリング部１０３から出力される閉曲線
の座標データに基づいて、この閉曲線で囲まれた後述す
るフレームメモリ部１５２内の領域の座標データを全て
論理ｒＯＪ　（ｒＯＪは表示される地色となるデータを
示す）に書き換えるためのものとなる描画データを作成
し、これを出力する。

次に符号化部１０６は、入力処理部１０５から出力され
た描画データを符号化して、識別子付加部１０９に出力
する。

さらに識別子付加部１０９は描画データであることを示
すフレーム識別子（ＦＩＤ）’ｉ描画データに付加し、
制御装置９００に出力する。

なお、符号１０７はスイッチ入力部を示し、オペレータ
は、このスイッチ入力部１０７によってカーソル表示、
部分消去、全面消去等の命令を入力することができる。

またスイッチ入力部１０７と接続された入力分析部１０
８は、スイッチ入力部１０７から出力されるデータを分
析して、いずれの命令を示すデータであるかを分析し、
分析結果に基づいて対応する制御信号を入力処理部１０
５、符号化部１０６へ出力する。

平面表示装置１５０ 第３図は平面表示装置１５０の一例を示すブロック図で
ある。

この平面表示装置１５０は描画データま之は静止画デー
タを表示するもので、Ｌ　ＣＤ　（Ｌｉｑｕｉｄ　Ｃｒ
７ｓｔａｌ−Ｄ　１ｓｐｌａｙ　）等から成る平面表示
部１５１と、画像データが記憶されるフレームメモリ部
１５２と、描画または静止画の再生を行う描画再生処理
部１５３および静止画再生処理部１５４と、画像情報に
よシ描画データま次は静止画データを復号する描画復号
化部１５５お゛よび静止画復号化部１５６と、制御情報
の識別を行う識別子検出部１５７とから構成されも以下
、この平面表示装置１５０の動作を説明する。

まず制御装置９００から、識別子検出部１５７に制御情
報と画像情報が送られる。

この制御情報は、フレーム識別子（ＦＩＤ）、装置アド
レス（ＳＡＤ）、ページ制御（ＰＡＧＥ）等よりな９、
画像情報には、描画データと静止画データとの２柚類が
ある。描画データには、たとえばカーソル移動などのコ
マンドが座標位置情報の中に組みこまれている。また静
止画データには、ランレングスを、例えばモディファイ
ドリード（ＭＲ）符号に用いる方式で圧縮したデータが
格納されている。

次に識別子検出部１５７において、制御情報のうちフレ
ーム識別子（ＦＩＤ）により、描画データか静止画デー
タかの判断がなされ、描画データは描画復号化部１５５
へ送られ、静止画データは静止画復号化部１５６へ送ら
れる。以後フレームメモリ部１５２までは２系統が同じ
ように処理されてゆく。

描画復号化部１５５で復号化された描画データは描画処
理部１５３に送出され、図形表示に必要な座標データの
補間処理が行われフレームメモリ部１５２に送出される
。

静止画復号化部１５６で復号化された静止画データは静
止画再生処理部１５４に送出され、図図形表示に必要な
綿密度変換、拡大、縮少等の画像処理が行われフレーム
メモリ部１５２に送出される。

フレームメモリ部１５２には、描画再生処理部１５３ま
たは静止画再生処理部１５４から出力された画像データ
が書き込まれる。フレームメモリ部１５２に格納された
画像データは、所定のサイクルで平面表示部１５１へ読
み出され表示される。

図形表示装置（１）１６０ 図形表示装置（１）　１６０の一例を第４図に示九この
図形表示部ｆ（１）　１６０は制御情報を識別する識別
子検出部１６１と、画像情報よシ描画データもしくは静
止画データを復号化する描画復号化部１６２ａおよび静
止画復号化部１６２ｂと、復号化された画像データに画
像処理を施す描画再生処理部１６３ａおよび静止画再生
処理部１６３ｂと、画像データが格納されるフレームメ
モリ部１６４と、この画像データが表示される図形表示
部（１）　１６５と、送出静止画データに画像処理を施
す静止画送出処理部１６６と、この送出静止画データを
符号化する静止画符号化部１６７と、符号化した送出静
止画データをフレーム化する識別子付加部１６８とから
構成される。

以下、この図形表示装置（１）　１６０の動作を説明す
る。

まず制御装置９００から識別子検出部１６１に制御情報
および画像情報が送られる。

この制御情報は、フレーム識別子（ＦＩＤ）、装置アド
レス（ＳＡＤ）、ページ制御（ＰＡＧＥ）等よりなり、
画像情報には描画データと静止画データの２種類がある
。

次に識別子検出部１６１においては、制御情報のうちの
フレーム識別子（ＦＩＤ）により描画データか静止画デ
ータかの判断がなされ、さらにページ制御（ＰＡＧＥ）
の内容により、後述する静止画データの送出要求か否か
が判断される。

さらにフレーム識別子（ＦＩＤ）により描画データと判
断された画像情報は、描画復号化部１６２ａへ送られ、
静止画データと判断された画像情報は静止画復号化部１
６２ｂへ送られる。

以後フレームメモリ部１６４までは２系列が同じように
処理されていく。

この描画復号化部１６２ａで復号化された描画データは
描画再生処理部１６３ａに送出され、図形表示に必要な
補間処理が行われ、フレームメモリ部１６４に送出され
る。

一方静止画復号化部１６２ｂで復号化された静止画デー
タは静止画再生処理部１６３ｂに送出され、図形表示に
必要な線密度変換、拡大、縮少等の画処理が行われ、フ
レームメモリ部１６４に送出される。

このようにフレームメモリ部１６４には、描画再生処理
部１６３ａまたは静止画再生処理部１６３ｂから出力さ
れた画像データが書込まれるＣフレームメモリ部１６４
に格納された画像データは、図形表示部（１）　１６５
に所定のサイクルで読み出され、図形表示部（１）　１
６５に表示される。

またページ制御（ＰＡＧＥ）により静止画データの送出
要求が指定されている場合は、フレームメモリ部１６４
から格納された画像データが読み出され、静止画送出処
理部１６６で綿密度変換、拡大、縮少等の画変換が行わ
れ、静止画符号化部１６７に送出される。

静止画符号化部１６７で符号化された静止画データは、
識別子付加部１６８においてフレーム識別子（ＦＩＤ）
が付加され、制御装置９００に送出される。

静止画入力装置２００ 静止画入力装置２００の一例を第５図に水先静止画入力
装置２００は電子会議システムにおいて会議資料等を前
記図形表示装置（１）　１６０に表示したり、相手端末
へ送出したシするｆＣｋ５゜会議資料等を光学的に読取
る入力装緩である。

この静止画入力装置２００は、原稿を光学的に読み取る
読取部２０１と、読み取られた静止画データを一時格納
するバッファ部２０２と、この静止画データを符号化す
る符号化部２０３と、フレーム識別子（ＦＩＤ）を付加
する識別子付加部２０４とから構成される装置 に接続されている。

以下、静止画入力装置２００の動作を説明する０ まず原稿の読取部２０１は図示しない操作入力手段によ
り読取動作、静止画サイズ、綿密度等が指示され、原稿
を読取り、バッファ部２０２に読取データを転送する。

次にバッファ部２０２は読取部２０１からの静止画デー
タの転送速度と符号化部２０３のデータ入力速度の違い
を収収するためと、読取部２０１からのデータの一部の
みを拡大したり、大きな文字の場合に線密度を荒くした
りして情報量を減らす画像変換を行う。

そして符号化部２０３は、読取データの符号化を行い、
符号化データを識別子付加部２０４に送出する。この符
号化データは１　６　ｋｂｐｓの速度で転送される。

ここでＡ４判の原稿を８ドット／ｌＩＩｘ７．７ライン
／履の線密度で読取ると約４８０にバイトのデータ量と
なり、転送時間は約２４０秒となるが、ファクシミリ等
で使用されているモディファイドハフマン（ＭＨ）方式
またはモディファイドリード（ＭＲ）方式等の冗長度抑
圧符号を用いるとデータ量は約３０にバイトとなり、転
送時間は約１５秒に圧縮される。

最後に識別子付加部２０４は、静止画データであること
を示すフレーム識別子（Ｆ’ＩＤ）を静止画データに付
加し、制御装置９００に送出する。

ハードコピー装置２６０ ハードコピー装置２６０の一例を第６図に示す。

ハードコピー装置２６０は前記図形表示装置（１）　１
　６　０に表示されている画面の／％ードコビーを取る
装置であり、記録方式はファクシミリ等で使用されてい
る感熱ヘッドと感、熱記録紙を用いた感熱記録方式を採
用している。

このハードコピー装置２６０は、制御情報を識別する識
別子検出部２６１と、静止画データを復号化する復号化
部２６２と、この静止画データを一時格納するバッファ
部２６３と、感熱ヘッドにより感熱記録紙に記録する記
録部２６４とから構成され、制御装置９００に接続され
ている。

以下、このハードコピー装置の動作を説明する。

まず制御装置９００から識別子検出部２６１に制御情報
および画像情報が送られる。

制御情報はフレーム識別子（Ｆ’ＩＤ）、装置アドレス
（ＳＡＤ）、ページ制御（　ＰＡＧＥ　）等よりなり、
画像情報は静止画データの１種類のみである。

次に識別子検出部２６１は制御情報のうちフレーム識別
子（ＦＩＤ）により静止画データであることを検出する
と、静止画データを復号化部２６２に送出する。

さらに復号化部２６２は静止画データを復号化し、復号
化データをバッファ部２６３へ転送する。

このバッファ部２６３は復号化部２６２からの復号化デ
ータの転送速度と記録部２６４への記録データの速度の
違いを吸収し、線密度変換、拡大、縮小等の画像処理を
行い記録部２６４に送出する。

最後に記録部２６４はバッファ部２６３からの記録デー
タにより、感熱ヘッドおよび駆動モータ等を動作させ、
感熱記録紙に記録する。

動画入力装置３００ 第７図は動画入力装置３００の一例を示すブロック図で
ある。

この動画入力装置３００は複数のテレビカメラにより発
言を映し、この中の所定のテレビカメラを選択して映さ
れた画像情報を制御装置９００に送るものである。

この動画入力装置３００は複数の動画入力部３１０　ａ
、　　３１０　ｂ、　　３１０　ｃ、　　３１０　ｄと
、制御装置９００からの送話者切替信号（Ｐ　Ｉ　Ｄ）
によりこれら複数の動画入力部から一つの動画入力部を
選択する動画セレクタ部３２０と、この選択された動画
入力信号（ＰＩＮ）を圧縮符号化する動画符号化部３３
０と、この符号化された動画データ（ＰＳＤ）にフレー
ム識別子（ＦＩＤ）と送話者切替信号（Ｐより）ｔ−付
加する識別子付加部３４０から構成される。

以下、この動画入力装置３００の動作を説明する。

会議出席者や会議場の背景等の動画像は複数の動画入力
部３１０　ａ、　３１０　ｂ、　３１０　ｃ。

３１０ｄによシミ気信号に変換され、動画セレクタ部３
２０に送出される。

回線の伝送容量を６４　ｋｂｐｓ　とし、この回線には
音声等のデータも送出しなければならないことを考える
と、同時に複数の動画入力は不可能である。そこで動画
セレクタ部３２０は、制御装置９００の送話者切替信号
（ＰＩＤ）により発信者を写すように該当する動画入力
部を１つ選択し、この動画入力信号（ＰＩＮ）’ｉ動画
符号化部３００に送出する。

なお、送話者切替信号（ＰＩＤ）により、会議途中の退
席者の動画入力部を切放すこともできる。

動画符号化部３３０は動画入力信号（ＰＩＮ）をフレー
ム駒落し方式による標本化処理、フレーム間符号化方式
による予測符号化処理、コサイン変換符号化方式による
直変換符号化処理などにより３２　ｋｂｐｓに圧縮符号
化し、動画データ（ＰＡＤ）として識別子付加部３４０
に送出する。

識別子付加部３４０は、動画データであることを示すフ
レーム識別子（Ｆ　Ｉ　Ｄ　）と、複数の動画入力部の
中からどの動画入力部を選択したかを示す送話者切替信
号（ＰＩＤ）とを動画データ（ＰＳＤ）に付加し、送信
データ（ＳＸＤ）として制御装置９００に送出する。

動画符号化部３３０ 動画符号化部３３０の一例を第８図に示す。

この動画符号化部３３０は入力処理ユニット３３１と、
送信メモリユニット３３２と、コサイン変換ユニット３
３３と、符号化ユニット３３４とよりなる。

以下、この動画符号化部３３０の動作を説明する。

まず動画セレクタ部３２０で選択された動画入力信号（
ＰＩＮ）は入力処理ユニット３３１に送出され、動画入
力信号からカラーバーストと同期信号が除去された後８
ビツトでＡ／Ｄ変換が行われる。さらに図示しないディ
ジタルフィルタによシ各フレームの画素数は２５６Ｘ２
５６から１２８Ｘ１２８へ、フレーム周波数も３０フレ
一ム／秒から１０フレ一ム／秒に減少される０ 次に入力処理された各フレームのデータは、送信メモリ
ユニット３３２に送出され、図示しない現フレームメモ
リに入れられる。一つ前の書き換え済フレームのデータ
は、図示しない参照フレームメモリに入れられており、
８×８画素のブロック単位で現フレームと参照フレーム
が比較され、書き換えるべきブロックが決められる。あ
るブロックが大きく変化していると参照メモリが書き直
されると共に、そのブロック情報がコサイン変換ユニッ
ト３３３に入力される。あまジ変化のないブロックは何
も処理されず書き直しもされない。

さらにコサイン変換ユニット３３３は、２次元コサイン
変換により画素間の相関性を取り除き、得られｔ変換係
数を符号化ユニット３３４に送出する。

この変換係数はゼロをとる係数が多いため、ビットＯの
長い列を送る代わりにランレングス符号化で圧縮する。

次に符号化ユニット３３４は、変換係数に対し画像の局
部エネルギーの予測に従ってハフマン符号化表中の実際
の符号を選択する。また、ブロックに関する情報も符号
化する。

この符号化データは図示しない送信バッファに入り、こ
こから所定の伝送速度で識別子付加部３４０に動画デー
タ（ＰＳＤ）として送出される。

また、符号化ユニット３３４は送信データのオーバフロ
ーや、アンダフローを防ぐため伝送レート制御を行う。

このように動画符号化部３３０ではスペクトル上、空間
上、時間上の三つの圧縮を組合せている。

すなわち、スペクトル上は色成分の冗長度に対し、色成
分のフィルタリングにサブサンプリングを行い、を間上
は輝度あるいは振幅における冗長度に対し水平・垂直両
方向でのサブサンプリングと画素間の相関性を除くため
の２次元コサイン変換符号化を行い、さらに時間上はフ
レーム間の値における冗長度に対しフレーム飛び越しと
内挿および条件付き書き換えを行っている。

図形表示装置（２）　３５０ 第９図は図形表示装置（２）　３５０の一例を示すブロ
ック構成図である。

この図形表示装置（２１３５０は自端末や伝送されてく
る動画系の入力情報を表示するもので、制御装置９００
から出力された受信データ（ＲＸＤ）から装置アドレス
（ＳＡＤ）、フレーム識別子（ＦＩＤ）および送話者切
替信号（ＰＩＤ）を検出するための識別子検出部３６０
と、動画データ（ＰＲＤ）の復号化を行う動画復号部３
７０ａ、３７０ｂと、復号化された動画信号（ＰＯＵＴ
）を一時記憶合成する几めのフレームメモリ部３８０と
、複数の動画および静止状態の動画を複数分割表示制御
する表示制御部３８５と、動画を表示する図形表示部３
９０から構成される。

以下、この図形表示装置（２）　３５０の動作を説明す
る。

制御装置９００から送出された受信データ（ＲＸＤ）は
制御情報と画像情報から構成され、制御情報にはフレー
ム識別子（ＦＩＤ）、装置アドレス（ＳＡＤ）、送話者
切替信号（Ｐ　Ｉ　Ｄ）等があり、画像情報は動画デー
タのみである。

まず識別子検出部３６０は、このフレーム識別子（ＦＩ
Ｄ）より動画データであることを検出し、つぎに装置ア
ドレス（ＳＡＤ）ｉ検出し、自端末か相手端末かを判定
する。さらに送話者切替信号（ＰＩＤ）よりどの動画入
力部からの動画データであるかを判定する。

次にフレーム識別子（Ｆ　Ｉ　Ｄ　）と、識別子検出部
３６０で装置アドレス（ＳＡｆ））および送話者切替信
号（ＰＩＤ）を除去された動画データ（ＰＲＤ）とは動
画復号化部３７０ａまたは３７０ｂに送出され、３２　
ｋｂｐｓ　に圧縮符号化された動画データの復号化が行
われる。

この動画復号化部３７０ａと３７０１）は装置アドレス
（ＳＡＤ）に対応して、自端末と相手端末、または相手
端末と相手端末が同時に入力しても遅延なく正しく復号
化を行うため同一構成のものを２系統備えている。

との復号化された動画信号（ＰＯＵＴ　）は、フレーム
メモリ部３８０の所定領域に一時記憶され、表示画面が
合成される。

なお識別子検出部３６０で検出された装置アドレス（５
ＡＤ）および送話者切替信号（ＰＩＤ）は表示制御部３
８５に送出され、フレームメモリ部３８０に対して同一
画面上に自端末と２つの相手端末のいずれか２端末の動
画および静止状態の動画を複数分割表示するための表示
制御が行われる。

そしてフレームメモリ部３８０から所定のサイクルで動
画信号が読出され、図形表示部３９０に表示される。

動画復号化部３７０ａ（３７０ｂ） 動画復号化部３７０ａの一例を第１０図に示す０ この動画復号化部３７０ａは、動画データをブロック単
位に復号化する復号化ユニ、）３７１と、この復号化さ
れた変換係数を逆コサイン変換する逆コサイン変換ユニ
ット３７２と、現フレームメモリと参照フレームメモリ
を有する受信メモリユニット３７３と、この現フレーム
メモリと参照フレームメモリから動画フレームを出力す
る出力処理ユニット３７４とから構成される。

以下、この動画復号化部３７０ａの動作を説明する。

まず識別子検出部３６０から出力された動画データ（Ｐ
ＲＤ）は復号化ユニット３７１の図示しない受信バッフ
ァに入れられる。つぎにブロック情報が復号化され、さ
らにハフマン符号化表と同じ表を利用して変換係数を得
るため復号化のステップサイズが決定されると共に、書
き換えるべきプロ、りの位置が決定される。

次に逆コサイン変換ユニッ）３７２ｔｄ、復号化ユニッ
ト３７１で再生された変換係数に２次元逆コサイン変換
を施し、ブロック単位のデータを出力する。

そして受信メモリユニット３７３は書き換えるべきブロ
ックの位置情報をもとに、８×８画素のブロック単位で
図示しない現フレームメモリの中の該当する領域を書き
直す。

また、図示しない参照フレームメモリには一つ前の書き
換え済のフレームのデータを入れておく。これは次にく
るフレームとの比較を行うために使用する。

さらに出力処理ユニット３７４は受信メモリユニット３
７３の現フレームメモリと参照フレームメモリを用いて
、フレーム周波数ｅ１０７レーム／秒から３０フレ一ム
／秒に戻したり、再生したフレームの中の画素レベルが
時間的に滑かに変化するように計算によってフレームの
内挿を行う。

最後に出力処理ユニット３７４で処理された動画信号（
ＰＯＵＴ）はフレームメモリ部３８０に送出される。

音声入力装置４００ 音声入力装置４００は会議出席者の音声を電気信号に変
換して電子会議システム内に取り入れるもので、第１１
図にその一例を示す。

同図に示されるようにこの音声入力装置４００は、出席
者全員の音声を集音可能なように配置された４本のマイ
クロホン４０２−１〜４０２−４、および会議出席者と
は異なる方向に指向性を向けて配置されたマイクロホン
４１１２−５と、マイクロホン４０２−１〜４０２−５
の出力信号を増幅するマイクアンプ（ＭＡＭＰ　）４０
３と、室雑音を除去する室雑音除去部（ＮＣＡＮ）４０
４と、残響を除去する残響除去部（ＥＣＡＮ）４０５、
話中でない話者のマイクから雑音を除去する可変利得部
（ＡＧＣ）４０６と、各マイクロホンの出力信号を合成
するミキサ部（ＶＭＩＸ）４０７と、音声の圧縮・符号
化を行う音声符号化部（ＶＣＯＤ）４０８とから構成さ
れる。

この４本のマイクロホン４０２−１〜４０２−４は出席
者全員の音声を集音可能な様に適切に指向性を考慮して
配置され、会議出席者の発する音声を拾う。またマイク
ロホン４０２−５は背景ノイズ信号を拾う。

マイクアンプ（ＭＡＭＰ　）４０３は各マイクロホンの
出力信号を適切なレベルに増幅する。

音声符号化部（ＶＣＯＤ　）　４０８ 第１２図は音声符号化部４０８の回路図である０ 音声符号化部（ＶＣＯＤ）４０８は、ミキサ部４０７の
出力信号Ｖに対して制御装置９００より送られる符号化
復号化アルゴリズムの選択信号Ｖ　ＲＵ　Ｌによシ伝送
速度に応じて圧縮、符号化を行ない、さらに識別子を付
加して制御装［９００に出力するものである。

同図に示されるようにこの音声符号化部４０８は、圧縮
アルゴリズムプログラムが記憶された圧縮アルゴリズム
記憶部４０８−１と、圧縮アルゴリズムを選択する選択
スイッチ４０８−２と、音声データを選択された圧縮ア
ルゴリズムにより圧縮、符号化する符号化部４０８−３
と制御情報を付加する識別子付加部４０８−４により構
成される。

この圧縮アルゴリズム記憶部４０８−１には、６４ＫＡ
ＤＰＣＭ符号化プログラム４０８−１ａ。

３２ＫＡＤＰＣＭ符号化プログラム４０８−１＼１６Ｋ
ＡＰＣＡＢ符号化プロゲラＡ４０８−１ｃＳおよび８Ｋ
ＡＰＣＡＢ符号化プログラム４０８−１ｄが記憶されて
いる。

まず選択スイッチ４０８−２は、制御装置９００から送
られる選択信号ＶＲＵＬに応じて前記王権アルゴリズム
記憶部４０８−１内の１つの符号化プログラムを選択す
る。

次に符号化部４０８−３は、前記選択スイッチ４０８−
２によって選択された符号化プログラムにより、ミキサ
部４０７の出力信号Ｖに対して符号化を行う。

そして識別子付加部４０８−４は、符号化された信号に
送話切替信号（ＴＩＤ）と装置アドレス（ＳＡＤ）ｋ付
加し、伝送信号ＶＴＸとして制御装置９００に出力する
。

音声出力装置４５０ 第１３図は音声出力装置の回路図である。

この音声出力装置４５０は電気信号をスピーカによって
音声信号に変換して出力するもの二同図に示すように、
制御情報ｔ−Ｍ別する識別子検出部４５１と、音声デー
タを復号化する音声復号化部（ＶＤＥＣ）４５２と、遅
延によりステレオ音声全出力するステレオ音声生成部（
ＳＴＧＥＮ）４５３と、右側音声を増幅、放音する右ア
ンプ（ＲＡＭＰ）４５４および右スピーカ４５５と、左
側音声を増幅、放音する左アンプ（ＬＡＭＰ）４５６、
および左スピーカ４５７とからなる。

この識別子検出部４５１ば、フレーム識別子Ｆ　Ｉ　Ｄ
から音声フレームを識別し、装置アドレスＳＡＤから相
手端末を識別する。

第１４図ｕ音声復号化部（ＶＤＥＣ）４５２の構成を示
すもので、同図に示されるようにこの音声復号化部４５
２は、復号化プログラムが記憶された圧縮アルゴリズム
記憶部４５８と、復号化プログラムを選択する選択スイ
ッチ４５９と、フレームを分解するフレーム分解部４６
０と、選択されたアルゴリズムで音声データを復号化す
る復号化部４６１と、端末に対応し念復号化データが格
納されたＲＡＭＩ４６２およびＲＡＭ１１４６３と、ス
イッチ４６４からなる。

この圧縮アルゴリズム記憶部４５８にハ、６４ＫＡＤＰ
ＣＭ復号化プログラム４５８−１．３２ＫＡＤＰＣＨ復
号化プログラム４５８−２．１６ＫＡＰＣＡＢ復号化プ
ロゲラ４５８−３．８ＫＡＰＣＡＢ復号化プログラム４
５８−４が記憶されている。

また選択スイッチ４５９ｆｌ、制御装＃９００より送ら
れてくる選択信号Ｖ　ＲＵ　Ｌに応じて、前記圧縮アル
ゴリズム記憶部４５８内の１つの復合化プログラムを選
択する。

ＲＡＭＩ４６２およびＲＡＭｌＩ４６３には、相手端末
に応じ之復号化に用いられるデータが記憶されている。

まずフレーム分解部４６０は、フレームを分解して相手
端末識別データＣＲｆ抽出し、これをスイッチ４６４に
出力する。

次にスイッチ４６４は相手端末識別データＣＲによりＲ
ＡＭＩ４６２およびＲＡＭｌＩ４６３のうちのいずれか
を選択し、復号化に用いるデータを復号化部４６１に出
力する。

さらに復号化部４６１は選択スイッチ４５９を介して選
択された圧縮アルゴリズム（即ち復号化プログラム）＆
こより復号化全行い音声データＶＲＸを生成し、ステレ
オ音声生成部４５３へ出力する。

さてステレオ音声生成部（Ｓ’ｌ’ＧＥＮ）４５３は、
音Ｐ倍号Ｖ　ＲＸよりステレオ音声信号Ｓ　Ｒ１５Ｌを
生成するものであり、第１５図にその構成を示す。同図
に示されるように、このステレオ音声生成部４５３は遅
延用シフトレジスタ４７０〜４７５、および遅延社を選
択するスイッチ４７６．４７７からなる。

この遅延用シフトレジスタ４７０〜４７５は音声イ６号
ＶＲＸを遅延する。またスイッチ４７６．４７７は：Ｍ
姑量の異なる音声信号を制御装置９００より送られてく
る話者識別信号ＴＩＤに応じて選択し左右の音声信号を
出力する。

そしてステレオ音声生成部４５３によって生成された左
右の音声信号ＳＬ、ＳＲは、第１７図に示すように左ア
ンプ（ＬＡＭＰ）４５６および右アンプ（ＲＡＭＰ）４
５４ｅ介してスピーカ４５Ｄ）、送話切替信号（ＴＩＤ
）や、回線の接続状態をモニタする。

制御装置９００ 第１６図は制御装置９００の構成を示す構成ブロック図
である。

各入力装置からのデータや各出力装置へのデータは内部
のデータバス９０１ｉ介して伝達される。

すなわち描画入力装！１ｅｌＯＯａ、ｂ・・・からの描
画データは多重化部９１１によシ多重化されて入力イン
ターフェース部９１２、データバッファ９１３ｉ介して
データバス９０１に送られる。ここでａ、ｂ・・・とア
ルファベットを付記したものは同一機能の装置が複数台
接続されていることを示すものである（以下同じ）。

静止画入力装置２００からの静止画データは入力インタ
ーフェース部９２２、データバッファ９２３を介してデ
ータバス９０１に送られる。

動画入力装置３００からの動画データは入力インターフ
ェース部９３２、データバッファ９３３を介してデータ
バス９０１に送られる。

音声入力装置４００からの音声データは入力インターフ
ェース部９４２、データバッファ９４３を介してデータ
バス９０１に送うれる。

これら入力データにはどの入力装置からのデータフレー
ムであるかを示すフレーム識別子（ＦＩＤ）が付加され
ている。

データ出力の方は、まず静止画データがデータバス９０
１から出力インタ−７エース部９２６を介してハードコ
ピー装置２６０へ送られる。

同様にして静止画、描画データがデータバス９０１から
出力インターフェース部９１６ｉ介して平面表示装置１
５０ａ、ｂ・・・へ送られ、また出力インターフェース
部９１７を介して図形表示装置（ｉ）　ｉ　６０へ送ら
れ、動画データが出力インターフェース部９３６を介し
て図形表示装置（２）　３５０へ送られ、音声データが
出力インターフェース部９４６を介して音声出力装ｆ＊
　４５０へ送られる。

さらに図形表示装置（１）　１６０からは入出力インタ
ー７エースｌ＃ｔｓ９１７１’ｉしてデータバス９０１
へ静止画、描画データを送ることもできる０ また蓄積装置６００からの蓄積データはファイルインタ
ーフェース９６１を介してデータバス９０１に送られ、
逆に蓄積するときはデータバス９０１からファイルイン
ターフェース９６１を介して蓄積装置６００へ送られる
。

これらのデータの伝送先の切換えやデータの選択、多重
化はフレームコントローラ９９０にて行われる。

このフレームコントローラ９９０にｆｉａ６うれたデー
タ群を回線に送出する場合は、伝送インターフェース９
７２を介して伝送装置７００に送られる。回巌から伝送
装置７００全介して送られて来たデータ群は伝送インタ
ーフェース９７２を介してフレームコントローラ９９０
に送られる。

ここでデータバッファ９１３．９２３．９３３、９４３
は、データの伝送先の切換えやデータの選択によりデー
タバスへの伝送が一時的に中断されたときや、多重化に
より伝送路容量を過渡的にオーバーしてるときなどにデ
ータを蓄えるためのものである。

そシテフレームコントローラ９９０を制御しているのは
会議支援部９９１である。会議支援部９９１は話者識別
装置５１０、状態検出装置８００、操作入力装置８５０
などからの信号によｐフレームコントローラ９９０に対
してデータの選択や送り先などの指示を行なう。

この制御装ｆ９００に入力されるデータ量は以下の通り
である。

まず描画人力製蓋１００ａ、ｂ・・・からの描画データ
は３００　ｂｐｓ程度の低速のため、これらは同時に複
数台人力してもデータ速度は１５　ｋｂｐｓ程度である
。従って描画データは同時に入力でき、多頁化部９１１
にて多重化されて取り込まれる。

また静止画入力装置２００からの静止画データ１６　ｋ
ｂｐθ程度である。動画入力装置３００からの動画デー
タは３２　ｋｂｐｓ程度であり、回転の伝送容量を６４
　ｋｂｐｅ程度とすると、回線に送出するには音声等地
データの伝送を考えると同時に複数台入力することは不
可能であり、会議支援部９９１からの送話者切替信号（
ＰＩＤ）によりどれか１つの選択される。

さらに音声入力装置４００からの音声データはμｍＬＡ
ＷＰＣＭ、ＡＤＰＣＭＳＡＰＣＡＢなどの方法によす６
４　ｋｂｐｓ〜８　ｋｂｐｓ　　と必要に応じて切替え
て使用される。切替えは会咳支援部９９１より音声符号
化ルール信号（Ｖ　ＲＵＬ）として音声入力装置４００
に指示される。

この信号は他のデータ量の具合により会議支援部９９１
が出力する。

ま７ｔ、ａ、ｔ＋・・・とアルファベットを付記した入
出力装置は会議出席者の手元にそれぞれ設置されている
。

伝送装置７００からのデータ群は伝送インターフェース
９７２を介してフレームコントローラ９９０に送られる
。ここで各データに応じて配分される。音声データは出
力インター７エース部９４６ｔ−介して音声出力装置４
５０へ送られ、描画データ、静子画データはともに出力
インターフェース部９１６を介して平面表示装置１５０
ａ、ｂ・・・と入出力インターフェース部９１７を介し
て図形表示装置（１）　１６０へ送られる。動画データ
は出力インターフェース部９３６を介して図形表示装置
（２）　３５０へ送られる。また蓄積指示の場合、静止
画データはファイルインターフェース９６１を介して蓄
積装置６００へ送られる。

さらに回線から伝送装置７００を介して送られて来るの
は上記データ群とともに、これらの制御に関する情報が
ある。制御情報は各データフレームの先頭に付けられて
おり、フレーム識別子（ＦＩＤ）、装置アドレス（ＳＡ
Ｄ）、ページ制御信号（、ＰＡＧＥ）、送話者切替信号
（ＰＩＤ）、音声符号化に−ｋｍ号（Ｖ　ＲＵ　Ｌ）、
送話切替信号（ＴＩＤ）などである。

第４７図は制御装置９００に入出力されるデータのフレ
ーム構成について示したものである。

データフレームには静止画フレーム（１）　９９２、静
止画フレーム（２）　９９３、描画フレーム９９４、動
画フレーム９９５、音声フレーム９９６の５種類がある
。各データフレームは先頭に制御情報、続いてデータと
いう構成になっている。

制御情報の先頭はフレーム識別子（ＦＩＤ）であり、各
入力装置にて付加されて制御装置９００に入力されて来
る。続く装置アドレス（ＳＡＤ）は各入力装置では付加
されず、この部分は空（ＮＵＬＬ）として送られて来て
、伝送するときにフレームコントローラ９９０により付
加される。３番目以降の制御情報は入力装置や制御装置
９００内で必要に応じて付加される。

以下各データフレームの構成をデータの流れとともに説
明する。

静止画フレーム（１）　９９２は静止画入力装置２００
からフレームコントローラ９９０を紅玉図形表示装置（
１１１６０と平面表示装置１５０　ａ。

ｂ・・・と蓄積装＃６００へ送られる。このときフレー
ムコントローラ９９０にてページ制御信号（）’ＡＧＥ
）が付加される。ページ制御信号（ＰＡＧＥ）は蓄積装
置６００に静止画データが書類原稿１ペ一ジ分蓄積され
るたびにページ数がインクリメントされる。同時に伝送
装置７００にて相手端末に送られる。相手端末では、送
られてきた静止画フレーム（１）　９９２は図形表示装
置（１）　１６０と平面表示装置１５０　ａ　ｙ　ｂ・
・・と蓄積装置６００へ送られる。

′＠槓しである静止画データを読み出して表示するとき
は、フレームコントローラ９９０より静止画フレーム（
２）　９９３　’ｉ蓄積装置６００へ送りデータの読出
を指示する。これによシ蓄積装置６００から該当する静
止画フレーム（１）　９９２が読出されて、フレームコ
ントローラ９９０を経て図形表示装置（１）　１６０と
平面表示装置１５０ａ、ｂ・・・へ送られる。このとき
装置アドレス（ＳＡＤ）とページ制御信号（ＰＡＧＥ　
）によりどの端末から入力された、どのページの静止画
データかを指示する。相手端末にも同じ表示をするため
に静止画フレーム（２１９９３は伝送装置７００ｔ−介
して送られる。

また図形表示装置（１）　１６０の表示内容を蓄積する
ときは静止画フレーム＜２）９９３’に図形表示装置（
１）　ｌ　６０へ送ジ、データの転送を指示すもこれに
より図形表示装置（１）　１６０の表示内容は静止画フ
レーム（１）　９９２としてフレームコントローラ９９
０に送られ、ここで装置アドレス（ＳＡＤ）、ページ制
御信号（ＰＡＧＥ　）を付加され、蓄積装置６００に送
られる。相手端末でも同様に蓄積するために静止画フレ
ーム（２）　９９３が伝送装置７００を介して伝送され
る。

図形表示装置（１）　１６０の表示内容ヲノ・−トコビ
ー装置２６０へ出力するときは、静止画フレーム（２）
　９９３にてデータの転送を指示する。これにより表示
内容は静止画フレーム（１）　９９２としてフレームコ
ントローラ９９０に送られ、ここからハードコピー装置
２６０へと転送される。

以上の場合ページ制御信号（ＰＡＧＥ）には静止画フレ
ーム（１）　９９２の蓄積装置６００への書き込み、読
み出し、図形表示装置（１）　１６０からの読み出し、
ページ数指示の４つの情報が含まれている。

描画フレーム９９４は描画入力装置ｌ　００　ａ。

ｂ・・・カラフレームコントは−２９９０を経て図形表
示装置（１）　１６０と平面表示装置１５０ａ。

ｂ・・・へ送られる。同時に伝送装置７００にて相手端
末に送られる。相手端末では送られて来た描画フレーム
９９４は図形表示装置（１）　１６０と平面表示装置１
５０ａ、ｂ・・・へ送られる。描画フレーム９９４のデ
ータ部分には座標とともに描画の処理内容を示すコマン
ドとして描画再生、カーソル、部分消去、全面消去が含
まれておりこのコマンドに従って表示再生が行なわれる
ことになる。

動画７レーム９９５は動画入力装置３００からフレーム
コントローラ９９０を経て図形表示装置（２）　３５０
へ送られ、同時に伝送装置７００を介して相手端末へ送
られる。動画フレーム９９５には発言者を示す送話者切
替信号（ＰＩＤ）が制御情報として付加されており、こ
の信号と装置アドレス（ＳＡＤ）とから表示内容の変更
個所が指示される。相手端末でも同様に図形表示装置（
２）　３５０に動画フレーム９９５が送られる。

音声フレーム９９６は音声入力装置４００からフレーム
コントローラ９９０、伝送装置７００を経て相手端末に
送られる。相手端末では、送られて来た音声フレーム９
９６を音声出力装置４５０へ送る。音声フレーム９９６
には発言者が誰であるかを示す話者識別信号（ＴＩＤ）
と、この音声フレームのデータがどの音声符号化方式で
符号化されているかを示す音声符号化ルール信号（ＶＲ
ＵＬ）が付加されている。相手端末の音声出力装置４５
０ではこれらの制御情報により音声再生時のステレオ音
源の位置感のコントロールや再生時の復号化方式の選択
を行なう。尚、会話中には通常会話者の様子と声を相手
に伝えるために動画情報と音声情報が伝送されており、
これらの情報だけでタイムスロットは全て埋められてい
る。音声はより品質の良いＡＤＰＣＭの方が選ばれてい
る。

この状態において静止画入力がなされると、静止画情報
が発生する。そこで操作入力によフ静止画入力が行なわ
れたと操作入力部９００ｂが判断すると音声入力装置４
００内の符号化手段をＡＤＰＣＭからＡＰＣＡＢに切替
を指示する。これにより音声情報量が３２　ｋｂｐｓか
ら１６に’ｂｐｓ　に減少するため、静止画情報を送る
ことが可能となる。静止画情報の伝送が終ると再び符号
化手段′ｆＩ：ＡＩ）ＰＣＭにもどす。

雫、ｍりしたように本発明の静止画情報伝送方式を用い
れば、会話中に会話者の様子を写す動画像や会話音声を
中断することなく静止画情報を送ることが可能となる。

又、会話音声は静止入力のときのみ圧縮効率の高い符号
化に切替ているので、ふだんは音質のよい会話が行なえ
かつ伝送効率の向上も図ることができる。

【図面の簡単な説明】

第１図は本発明の実施例の電子会議システムのブロック
図、第２図は描画入力装置のブロック図、第３図は平面
表示装置のブロック図、第４図は図形表示装置（１）の
プロ、り図、第５図は静止画入力装置のブロック図、第
６図はハードコピー装置のブロック図、第７図は動画入
力装置のブロック図、第８図は動画符号化部のブロック
図、第９図は図形表示装置（２）のブロック図、第１０
図は動画復号化部のブロック図、第１１図は音声入力装
置のブロック図、第１２図は音声符号化部のブロック図
、第１３図は音声出力装置のブロック図、第１４図は音
声復号化部のブロック図、第１５図はステレオ音声生成
部のプロ、り図、第１６図は制御装置のブロック図、第
１７図はデータのフレームフォーマット図、第１８図は
従来の電子会議システムのブロック図である。 １００・・・・・・・・・描画入力装置１５０・・・・
・・・・・平面表示装置１６０・・・・−・・・・図形
表示装置　（１）２００・・・・・・・・・静止画入力
装置２６０・・・・・・・・・ハードコピー装置３００
・・・・・・・・・動画入力装置３５０・・・・・・・
・・図形表示装置ｉｔ　　（２）４００・・・・・・・
・・音声入力装置４５０・・・・・・・・・音声出力装
置５１０・・・・・・・・・話者識別装置６００・・・
・・・・・・蓄積装置 ７００・・・・・・・・・伝送装置 ８００・・・・・・・・・状態検出製置８５０・・・・
・・・・・操作入力装置９００・・・・・・・・・制御
装置 代理人升埋士　　則　　近　　憲　　ＡｔＬ山　　　下
　　　　　　　　− 第４図 第７図 第θ図 第９区 第１１阻 第１３図 第１４図 Ｌ 垢Ｅ図 第１？図

Claims (1)

【特許請求の範囲】
1. （１）少なくとも静止画データ・可聴音データを入力す
   る入力系と、少なくとも静止画データ・可聴音データを
   出力する出力系と、遠隔地点との間でこれらのデータの
   伝送制御を行う伝送系と、前記入力系・出力系・伝送系
   の制御を行う制御系とからなる会議ユニットシステムを
   回線を介して複数個接続した電子会議システムにおいて
   、前記可聴音データの入力系に入力情報を符号化する圧
   縮率の異なる複数の符号化手段を設け、前記可聴音デー
   タの出力系に出力情報を復合化する前記符号化手段に対
   応する複数の復合化手段を各装置ごとに設けるとともに
   、可聴音データの伝送中に静止画データの伝送要求が生
   じた場合、可聴音データの符号化を圧縮率の高い符号化
   手段に切換えるようにし、可聴音データと静止画データ
   とを伝送するようにしたことを特徴とする電子会議シス
   テムにおける静止画情報伝送方式。