JPH0884326A

JPH0884326A - 通信表示方法、通信表示装置

Info

Publication number: JPH0884326A
Application number: JP6217516A
Authority: JP
Inventors: Hirotaka Obara; 広隆小原; Naoki Okita; 直樹置田; Kazuo Nakatani; 一夫中谷; Shinichi Hirata; 晋一平田
Original assignee: Kokusai Electric Corp
Current assignee: Kokusai Electric Corp
Priority date: 1994-09-12
Filing date: 1994-09-12
Publication date: 1996-03-26

Abstract

(57)【要約】【目的】１つの画面に表示するテキスト情報及び画像
情報の通信装置を簡略化し、又伝送効率を向上する。【構成】画像情報とテキスト情報を画面イメージ制御
手段１０３０により１つのイメージデータとし、これを
比較手段１０６０、圧縮手段１０５０により圧縮して送
信する。受信側では圧縮データを伸張手段１１１０及び
ビデオメモリ１１２０で伸張・復元し、その内のテキス
ト情報を文字認識手段１１３０で修正する。【効果】テキスト情報と画像情報を一緒にして圧縮、
送受信、伸張するから、通信装置の構成が簡単となり、
又テキスト情報の圧縮率も向上する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、通信表示方法及びその
装置に係わり、特にテキスト情報を含む静止画像または
動画像情報、またはテキスト情報のみの通信を効率よく
行う通信表示方法及びその装置に関する。

【０００２】

【従来の技術】テキスト情報と画像情報を送信して１つ
の表示器に表示するための従来の通信表示装置において
は、送信側での画像情報の圧縮処理やテキスト情報との
合成、受信側では画像情報とテキスト情報の分離、画像
情報の伸張処理、及び画像情報とテキスト情報の表示の
ための合成処理などが行われている。図２は、このよう
なシステムの従来例を示すブロック図で、画像を撮影す
るビデオカメラ３０、テキスト情報を入力するキーボー
ドなどの入力装置２０、入力した各情報を処理して表示
器４０へ表示したり、通信路１に情報を出力または入力
する制御器１００から成っており、送信側と受信側は同
一の構成である。

【０００３】図３は、制御器１００の構成を示すブロッ
ク図で、まず送信系統では、画像情報がビデオカメラ３
０で撮影され、信号処理手段１１０でディジタルデータ
に変換された後、ビデオメモリ１２０に格納される。こ
のデータは、例えば周知のＪＰＥＧやＭＰＥＧなどの方
法を用いた圧縮手段１３０によりデータ圧縮され、メモ
リ１４０に一時記憶される。又、テキスト情報はキーボ
ードなどの入力装置２０から入力され、データ入力手段
１６０でコード化され、テキストデータとしてメモリ１
７０に一時記憶される。メモリ１４０及び１７０に記憶
されている画像データとテキストデータは、送信電文編
集手段１５０により送信電文に編集され、通信制御手段
２４０により通信路１に送信される。

【０００４】表示系統では、自装置に取り込んだ画像情
報が、ビデオメモリ１２０から表示制御手段１８０によ
り読み出され、表示器４０に表示される。又テキスト情
報はメモリ１７０のデータが画面表示イメージに変換さ
れてビデオメモリ１７１へ転送され、表示制御手段１８
０により表示器４０に表示される。

【０００５】受信系統では、相手装置からのデータが通
信制御手段２４０により通信路１から受信され、受信電
文編集手段２３０により画像データはメモリ２２０へ、
テキストデータはメモリ２１０へ各々分けて格納され
る。受信したメモリ２２０の画像データは、伸張手段２
００により読み出され、データ伸張されてビデオメモリ
１９０に格納される。一方、メモリ２１０のテキストデ
ータは、画面表示イメージに変換され、ビデオメモリ２
１１に転送される。表示制御手段１８０は、ビデオメモ
リ１９０及びビデオメモリ２１１からデータを読み出
し、画像情報及びテキスト情報を表示器４０に表示す
る。

【０００６】図４は、上記従来システムにおける表示器
の表示例を示すもので、上段には相手側から送信されて
きた画像（例では男性の顔）と相手が入力しているテキ
ストデータを表示し、下段には自装置で取り込んだ画像
（例では女性の顔）と自分が入力しているテキスト情報
を表示している。

【０００７】

【発明が解決しようとする課題】上記した従来のシステ
ムにおいては、テキスト情報と画像情報を伝送するため
に、別々の独立した処理が必要なことから、ハードウェ
ア規模が大きくなることと、テキスト情報と画像情報の
２つを１つの通信路で重畳して送るための、複雑な通信
制御手段が必要であり、かつこれらの情報をリアルタイ
ムで通信するための高速な通信路が必要とされた。

【０００８】本発明の目的は、従来技術の問題点である
ハードウェア規模の増大と、複雑な通信制御手段及び高
速な通信路の必須条件を解決し、すくないハードウェア
規模、単純な通信制御手段、ならびに低速な通信路でも
通信が可能な、通信表示方法及びその装置を提供するに
ある。

【０００９】

【課題を解決するための手段】上記の目的は、テキスト
情報と、画像情報を画面表示用のイメージデータに合成
した後、イメージデータ圧縮用のアルゴリズムで圧縮し
て送信し、受信側では、送信されてきた情報を伸張し、
その内のテキスト情報に対して文字認識手段を用いてデ
ータ補正を行い、該補正を受けたテキスト情報と伸張さ
れた画像情報とを表示手段に表示することにより達成さ
れ、又、テキスト情報を画面表示用のイメージデータに
変換し、イメージデータ圧縮用のアルゴリズムで圧縮し
て送信し、受信側では、送信されてきた情報を伸張し、
該伸張したテキスト情報に対して文字認識手段を用いて
データ補正を行い、該補正を受けたテキスト情報を表示
手段に表示することにより達成される。

【００１０】

【作用】一般にテキスト情報をＪＰＥＧ、ＭＰＥＧなど
の画像圧縮方法を用いて圧縮・伸張した場合、圧縮によ
り欠落する情報量が多いため、元のきれいなテキスト情
報として表示できなくなる。このため、テキスト情報と
画像情報の圧縮処理を別に行うのが一般的であるが、そ
うすると従来技術に関して述べたような問題が発生す
る。しかし本発明では、テキスト情報と画像情報を同じ
画像圧縮手段により圧縮・伸張し、それからテキスト情
報を文字認識手段により修正して見やすくしている。こ
うして装置が簡略化されるとともに、きれいな文字情報
の表示が可能になる。又、画像情報がなくテキスト情報
のみの場合も、テキスト情報の効率よい通信が行える。

【００１１】

【実施例】以下、本発明を実施例により説明する。図１
は、本発明の特徴とする制御器１０００の一実施例を示
すブロック図で、図２の制御器１００に相当する。ま
ず、送信系統においては、画像情報がビデオカメラ３０
で撮影され、信号処理手段１０１０でディジタルデータ
に変換される。一方、テキスト情報はキーボードなどの
入力装置２０から入力され、データ入力処理手段１０２
０でコード化されたテキストデータに変換される。これ
ら２つのデータは、画面イメージ制御手段１０３０によ
って、実際に表示するイメージデータに変換された後、
ビデオメモリ１０４１または１０４２のいずれかに格納
される。ビデオメモリ１０４１、１０４２のいずれを選
択するかは、フレームスイッチ１０４０が画面１フレー
ムごとの切り替えを行うことにより決められる。これ
は、画面イメージ制御手段１０３０からの制御線１０４
５により制御されるもので、例えばビデオメモリ１０４
１に１フレーム前のイメージデータが格納されている場
合には、現在のフレームをビデオメモリ１０４２に格納
し、次のフレームはビデオメモリ１０４１へ格納する、
というようにフレーム単位に交互にビデオメモリを使用
するよう制御される。

【００１２】比較手段１０４３は、これら２つのビデオ
メモリに格納されたイメージデータを比較し、異なるイ
メージデータ、すなわち更新のあったイメージデータの
画面上の位置（アドレス情報）と更新後（最新）のイメ
ージデータを得る。更新後のイメージデータは圧縮手段
１０５０によって圧縮され、メモリ１０６０へ一時記憶
される。アドレス情報とメモリ１０６０に格納されてい
るイメージデータは、送信電文編集手段１０７０により
電文に編集され、通信制御手段１０８０により通信路１
を介して送信される。

【００１３】図１の表示系統では、ビデオメモリ１０４
１、１０４２に格納されているイメージデータの内、最
新の方がフレームスイッチ１０４４で選択され、表示制
御手段１１５０により自装置側の画像情報及びテキスト
情報として表示器４０に表示される。この場合のフレー
ムスイッチ１０４４の制御は、フレームスイッチ１０４
０と同様に、画面イメージ制御手段１０３０からの制御
線１０４５により行われる。

【００１４】次に、受信系統としては、相手側から送信
された電文が通信路１を介して通信制御手段１０８０に
受信され、受信電文編集手段１０９０により電文がアド
レス情報とイメージデータと、後述するテキスト情報の
表示位置に関する情報とに分離される。このうち、イメ
ージデータはメモリ１１００に格納されるが、これは最
新フレームの更新された部分がデータ圧縮されたもので
あるので、伸張手段１１１０にて伸張され、アドレス情
報に従った画面上の位置に相当するビデオメモリ１１２
０上の位置へ入力され、メモリ１１２０内のデータを更
新する。さらに、ビデオメモリ１１２０に格納されたデ
ータの内、テキストデータに関する部分が文字認識手段
１１３０により復元され、再びビデオメモリ１１２０に
戻される。これは、文字データも画像用のアルゴリズム
で圧縮・伸張したために生じる文字のひずみを修正する
ためである。ビデオメモリ１１２０に格納されたデータ
は、表示制御手段１１５０により読み出され、表示器４
０に表示される。

【００１５】ここで、文字認識手段１１３０により、テ
キストデータを復元する領域を規定する必要があるが、
その方法を図５を用いて説明する。図５に示したよう
に、使用者はあらかじめキーボードやポインティングデ
バイスなどの入力装置によって画面表示位置を指定して
おく。図５の例は、相手側テキスト領域２０１０、相手
側画像領域２０３０、自分側テキスト領域２０２０、自
分側画像領域２０４０としており、相手側テキスト領域
２０１０の開始点２０１１、同じく終了点２０１２、自
分側テキスト領域２０２０の開始点２０２１、同終了点
２０２２と指定した場合を示している。これらの開始点
・終了点は、画面イメージ制御手段１０３０に保持さ
れ、送信電文編集手段１０７０で電文に編集され、通信
制御手段１０８０により送信される。

【００１６】受信側では、通信制御手段１０８０にて受
信し、受信電文編集手段１０９０によって各開始点、終
了点を取りだし、これを文字認識手段１１３０に与える
ことにより、ビデオメモリ１１２０内のテキスト情報の
表示領域を知ることができる。又、自分側と相手側の表
示位置を変える場合には、表示制御手段１１５０内にて
表示器４０に表示する際に、表示相対位置を変換して表
示する。

【００１７】文字認識手段１１３０における文字認識の
方法としては、例えばテンプレートマッチング法があ
る。図６はその説明図で、入力されたテキスト情報の内
の１文字を入力パターンとして、あらかじめ用意した標
準パターン９００３に対して重ね合わせたパターン９０
０２を作成する。ここで重ね合わせというのは、一致し
た画素を空欄とし、不一致の画素に対して×印を割り付
ける。そして×印の数が最小となる標準パターンの文字
（例では“４”）が、入力されたテキスト情報の１文字
であると判定し、入力パターン９００１を標準パターン
９００３の“４”に該当するパターンで置き換えること
により、圧縮されたテキスト情報を復元する。

【００１８】本実施例によれば、テキスト情報と画像情
報を画面イメージで合成した後まとめて圧縮・送信する
ので、圧縮処理手段や通信制御装置が従来より簡単化さ
れ、又テキスト情報も大幅に圧縮されるので伝送情報量
が減少する。

【００１９】図７は、本発明の通信表示装置の別の実施
例を示すブロック図で、画像情報を伴わないテキスト情
報のみの通信に本発明を適用したものである。具体的な
使用例としては、株価情報やニュースなどの即応性が要
求されるテキスト情報を、無線や光通信路で伝送する場
合、特に低速な通信路を用いる場合に適している。

【００２０】図８はシステム構成を示したものであり、
ホストコンピュータなどの情報発生源から通信回線３０
００を介して送られるテキスト情報を、送信制御器４０
００で受信し、テキスト情報を加工した後、送信アンテ
ナ４００１より受信アンテナ５００１に伝送する。この
際の通信路３０１０はワイアレスの伝送路、すなわち無
線伝送路あるいは光伝送路である。受信アンテナにより
受信されたテキスト情報は、表示制御器５０００により
画面表示データに変換され、表示器６０００に表示され
る。

【００２１】図９は、表示器に表示される情報の例を示
しており、株価情報６００１、ニュース情報６００２を
表示している場合を示す。

【００２２】前記の図７は、図８の送信制御器４０００
及び受信制御器５０００の構成を示すブロック図で、ホ
ストコンピュータなどの情報発生源から通信回線３００
０を介して送られてくるテキスト情報は、受信制御手段
４０１０で受信され、受信電文編集手段４０２０にて電
文からテキストデータが抽出される。このテキストデー
タは、画面イメージ編集手段４０３０で画面に表示する
イメージデータに変換され、ビデオメモリ４０５０また
は４０６０のいずれかに格納される。このどちらにイメ
ージデータを格納するかは、図１の実施例の場合と同様
であり、制御線４０４１を参照してフレームスイッチ４
０４０により制御され、１フレームごとに切り替えられ
る。

【００２３】比較手段４０７０は、これら２つのイメー
ジデータを比較し、更新があった場所のアドレス情報と
更新後の最新イメージデータを得る。この更新イメージ
データは、圧縮手段４０８０により圧縮されてメモリ４
０９０に格納され、さらに電文編集手段４１００により
アドレス情報とともに送信電文に編集される。そして送
信制御手段４１１０により送信アンテナ４００１を介し
て通信路に送信される。

【００２４】一方、表示制御器５０００では、受信アン
テナ５００１を介して更新イメージデータとアドレス情
報の電文が受信制御手段５０１０にて受信され、受信電
文編集手段５０２０で各情報が取り出される。このうち
の更新イメージデータは、メモリ５０３０に一時記憶さ
れた後、伸張手段５０４０にてデータ伸張され、メモリ
５０５０上のアドレス情報で指定されたアドレスへ入力
される。メモリ５０５０では、１画面前の表示情報をす
でに持っており、入力された更新イメージデータを前の
画面データに重ね合わせることにより、メモリ５０５０
の内容が更新後の最新データとなる。次に、メモリ５０
５０に格納されているデータは、圧縮・伸張処理により
情報が失われていて、そのままでは見づらい文字になっ
ている可能性があるから、文字認識手段５０６０により
文字の復元が行われ、ビデオメモリ５０７０に格納さ
れ、表示制御手段５０８０により表示器６０００に表示
される。ここで、文字認識手段５０６０の例としては、
図１の実施例で示したものを用いればよい。

【００２５】本実施例によると、テキスト情報をイメー
ジデータとして圧縮・伝送することによって、装置の簡
単化、伝送効率の向上がはかれる。

【００２６】

【発明の効果】本発明によれば、テキスト情報と画像情
報を同じデータ圧縮・伸張の手法によって伝送・表示で
きるようになり、ハードウェア規模を小さくできる効果
がある。又、テキスト情報を文字認識手段により圧縮伸
張されたデータから復元することにより、画像情報とと
もに高圧縮率を達成できる。これにより、低速の伝送路
にてテキスト情報、画像情報を効率よく伝送できる通信
システムを構築することができる。

【図面の簡単な説明】

【図１】本発明の特徴とする制御器の一実施例を示すブ
ロック図である。

【図２】通信表示システムの構成図である。

【図３】図２のシステムにおける制御器の従来構成を示
すブロック図である。

【図４】表示器における表示例を示す図である。

【図５】テキスト及び画像の表示位置指定方法の説明図
である。

【図６】文字認識手段の動作説明図である。

【図７】本発明の別の実施例における制御器のブロック
図である。

【図８】通信表示システムの例を示す図である。

【図９】図８のシステムにおける表示器の表示例であ
る。

【符号の説明】

１通信路１０００制御器１０３０画面イメージ制御手段１０５０圧縮手段１０７０送信電文編集手段１０８０通信制御手段１０９０受信電文編集手段１１１０伸張手段１１３０文字認識手段１１５０表示制御手段３０１０通信路４０００送信制御器４０３０画面イメージ編集手段４０８０圧縮手段４１００送信電文編集手段４１１０送信制御手段５０００表示制御器５０２０受信電文編集手段５０４０伸張手段５０６０文字認識手段５０８０表示制御手段

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁶ 識別記号庁内整理番号ＦＩ技術表示箇所Ｇ０６Ｋ 9/00 Ｓ 9061−5ＨＧ０９Ｇ 5/00 ５１０Ｔ 9377−5Ｈ 5/40 9377−5ＨＨ０４Ｎ 5/765 7/24 Ｈ０４Ｎ 5/91 Ｌ 7/13 Ｚ (72)発明者平田晋一東京都中野区東中野三丁目14番20号国際電気株式会社内

Claims

【特許請求の範囲】

【請求項１】テキスト情報と、画像情報を画面表示用
のイメージデータに合成した後、イメージデータ圧縮用
のアルゴリズムで圧縮して送信し、受信側では、送信さ
れてきた情報を伸張し、その内のテキスト情報に対して
文字認識手段を用いてデータ補正を行い、該補正を受け
たテキスト情報と伸張された画像情報とを表示手段に表
示することを特徴とする通信表示方法。
【請求項２】テキスト情報を画面表示用のイメージデ
ータに変換し、イメージデータ圧縮用のアルゴリズムで
圧縮して送信し、受信側では、送信されてきた情報を伸
張し、該伸張したテキスト情報に対して文字認識手段を
用いてデータ補正を行い、該補正を受けたテキスト情報
を表示手段に表示することを特徴とする通信表示方法。
【請求項３】前記文字認識手段は、あらかじめ用意さ
れた標準パターンとのパターンマッチングにより文字認
識を行うことを特徴とする請求項１または２に記載の通
信制御方法。
【請求項４】入力された画像情報をディジタル画像デ
ータに変換する信号処理手段と、入力されたテキスト情
報をコード化してディジタルテキストデータに変換する
データ入力手段と、上記ディジタル画像データ及びディ
ジタルテキストデータを画面表示用のイメージデータに
編集制御する画面イメージ制御手段と、該手段により生
成された現時点及び１時点前のフレームのイメージデー
タを比較して更新箇所及び更新データを導出する比較手
段と、更新データを圧縮するためのデータ圧縮手段と、
該手段により生成された更新データと上記更新箇所を示
すアドレス情報とをまとめて通信用の電文を編集する送
信電文編集手段と、該手段により生成された電文を通信
路に送出し、又通信路を介して送信されてきた電文を受
信するための通信制御手段と、該手段が受信した電文か
ら上記更新データ及びアドレス情報を取り出す受信電文
編集手段と、該手段により取り出された更新データを伸
張するデータ伸張手段と、該手段により伸張された更新
データを上記取り出されたアドレス情報が示すアドレス
へ重ね合わせて上記イメージデータをその中に再生する
ビデオメモリと、該ビデオメモリに格納されたディジタ
ルテキストデータを修正するための文字認識手段と、該
手段により修正されたディジタルテキストデータを含む
イメージデータを上記ビデオメモリから読み出して表示
手段へ表示する表示制御手段とを備えたことを特徴とす
る通信表示装置。
【請求項５】入力されたテキスト情報をコード化して
ディジタルテキストデータに変換するデータ入力手段
と、上記ディジタルテキストデータを画面表示用のイメ
ージデータに編集制御する画面イメージ制御手段と、該
手段により生成された現時点及び１時点前のフレームの
イメージデータを比較して更新箇所及び更新データを導
出する比較手段と、更新データを圧縮するためのデータ
圧縮手段と、該手段により生成された更新データと上記
更新箇所を示すアドレス情報とをまとめて通信用の電文
を編集する送信電文編集手段と、該手段により生成され
た電文を通信路に送出し、又通信路を介して送信されて
きた電文を受信するための通信制御手段と、該手段が受
信した電文から上記更新データ及びアドレス情報を取り
出す受信電文編集手段と、該手段により取り出された更
新データを伸張するデータ伸張手段と、該手段により伸
張された更新データを上記取り出されたアドレス情報が
示すアドレスへ重ね合わせて上記イメージデータをその
中に再生するビデオメモリと、該ビデオメモリに格納さ
れたディジタルテキストデータを修正するための文字認
識手段と、該手段により修正されたディジタルテキスト
データを上記ビデオメモリから読み出して表示手段へ表
示する表示制御手段とを備えたことを特徴とする通信表
示装置。