JPH03177893A

JPH03177893A - マルチウィンドウ表示装置

Info

Publication number: JPH03177893A
Application number: JP1315433A
Authority: JP
Inventors: Yoshinori Kuno; 義徳久野; Hiroshi Mizoguchi; 溝口　博; Minoru Ishikawa; 実石川; Hiroaki Kubota; 浩明久保田; Kazuhiro Fukui; 和広福井; Kazunori Onoguchi; 一則小野口; Kyoichi Okamoto; 恭一岡本; Mutsumi Watanabe; 睦渡辺
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 1989-12-06
Filing date: 1989-12-06
Publication date: 1991-08-01
Also published as: US5430838A; DE69017379D1; EP0431618A2; EP0431618A3; EP0431618B1; DE69017379T2

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】［発明の目的］（産業上の利用分野）本発明は、ワークステーションのディスプレイに複数の
画面情報をウィンドウ（方形領域）を用いて表示するマ
ルチウィンドウ表示装置に関する。

（従来の技術）近年、ディスプレイ画面上に複数のウィンドウを取り、
必要に応じて各ウィンドウを、移動、拡大、縮小したり
、重ね合わせたりするマルチウィンドウ表示は、ワーク
ステーションを使い易くするものとして重要視されてい
る。

従来のマルチウィンドウ表示装置は、例えば第６図に示
すように構成されている。即ち、旧ｔｂ＋ｔ（ｂｉｔ　
ｂｌｏｃｋ　ｔｒａｎｓｆｅｒ）方式のグラフィックス
コントローラ１は、表示用アドレスを発生してビットマ
ツプメモリ（１画素の値を１ビツトあるいは複数ビット
で表示した表示用メモリ）２からビットマツプを読み出
してフレームバッファ３に転送し。

ＣＲＴ４に表示する。また、グラフィックスコントロー
ラ１は、ホスト・バスラを介してホストＣＰＵ６、主記
憶装置７、外部記憶装置８に接続されており、ホストＣ
ＰＵ６、主記憶装置７、外部記憶装置８は、直線描画な
どのコマンドをグラフィックスコントローラ１に出力す
る。また、グラフィックスコントローラ１には、ホスト
・バス５を介して入力装置であるマウス９、キーボード
１０が接続されている。

（発明が解決しようとする課題）ところで、前記したｂｉｔｂｌｔ方式によるマルチウィ
ンドウ表示装置では、ウィンドウの形は矩形に限られて
おり、ウィンドウの大きさの変更や文字のサイズの変更
等は可能であるが、ウィンドウを自由に操作できるよう
にはなっていない。また、ワークステーションで画像を
扱いたいことも多いが、画像についても矩形領域として
扱えるだけで、内容に応じた操作を行うことは困難であ
った。

このように、従来のマルチウィンドウ表示装置は、ウィ
ンドウの操作性に限定があり、操作時に利用していない
ウィンドウを、内容が思い起こし易いような形で縮小し
てディスプレイに表示したり、画像の内容に即して操作
の単位を決めて、例えば人間の画像であればその顔を操
作の単位として扱うというようなことが難しいという問
題があった。

本発明は上記した課題を解決する目的でなされ、ウィン
ドウ全体あるいはウィンドウの内容を画像として扱える
ようにして、操作性に優れたマルチウィンドウ表示装置
を提供しようとするものである。

［発明の購ａ］（課題を解決するための手段）前記した課題を解決するために本発明は、ビットマツプ
メモリ内のウィンドウを、グラフィックスコントローラ
内のｂｉｔｂ＋を回路を用いて表示画面に対応したフレ
ームバッファへ転送してディスプレイ画面に表示するマ
ルチウィンドウ表示装置において、前記ビットマツプメ
モリとグラフィックスコントローラ間に、前記ビットマ
ツプメモリ内のウィンドウ表示内容を画像と見なして操
作する画像処理手段を接続したことを特徴とする。

（作用）本発明によれば、ビットマツプメモリに接続した画像処
理手段により、ビットマツプメモリ内のウィンドウ表示
内容を画像と見なして操作することができるので、例え
ばウィンドウを縮小して表示する時や、画像処理により
主要な線分を取り出して表示するなどの操作を容易に、
且つ高速に行うことができる。

（実施例）以下、本発明を図示の実施例に基づいて詳細に説明する
。尚、従来と同一部分には同一符号を付して説明する。

第１図は、本発明に係るマルチウィンドウ表示装置を小
す構成図である。この図に示すように、ｂｉｔｂｌｔ回
路１１とテーブルルックアップ回路１２を有するグラフ
ィックスコントローラｌには、ホスト・バス５を介して
ホストＣＰＵ６、主記憶装置７、外部記憶装置８が接続
されており、ホストＣＰＵ６、主記憶装置７、外部記憶
装置８は、直線描画などのコマンドをグラフィックスコ
ントローラ１に出力する。これらの部分は、一般のワー
クステーションと同様である。また、グラフィックスコ
ントーラ１には、ホスト・バスラを介して入力装置であ
るマウス９、キーボード１０が接続されており、更に、
グラフィックスコントローラ１にはビットマツプメモリ
２が接続され、ゲラフックスコントローラ１とビットマ
ツプメモリ２間には、画像処理回路（画像処理手段）１
３が接続されている。尚、ビットマツプメモリ２の一部
をフレームバッファとして使用するようにしてもよいＯ画像処理回路１３は、ビットマツプメモリ２を画像用の
メモリと考え、一般の画像処理装置で実現されでいるよ
うな画像演算を実行する。また、画像処理回路１３は、
第２図に示すように、アフィン変換回路１４、濃度変換
回路１５、空間フィルタ回路１６、論理フィルタ回路１
７、ラベリング回路１８、ヒストグラム計算回路１９と
で構成されており、これらの回路は、バス２０を介して
ビットマツプメモリ２に接続されると共に、制御信号ラ
イン２１を介してグラフィックスコントローラ１に接続
されている。

そしＣ１画像処理回路１３がビットマツプメモリ２に対
して処理を行い（詳細は後述する）、グラフィックスコ
ントーラ１が表示に必要な部分を選び出し、ｂｌｔｂｌ
ｔ回路１１により必要部分をフレームバッファ３に転送
して、フレームバッファ３の内容がＣＲＴ４に表示され
る。

次に、本発明に係るマルチウィンドウ表示装置による処
理動作について説明する。本発明は、画像処理回路１３
の諸機能により、各種のウィンドウ操作を行うことがで
きる。以下、各種ウィンドウ操作を下記した（１）〜（
３）について説明する。

（１）　　＠６小表示の場合重ね合わせて使用するオーバーラツプ方式のマルチウィ
ンドウではたくさんのウィンドウが開けて便利であるが
、ウィンドウの数が多くなると、重なりの下のほうのウ
ィンドウの内容がすぐに思い出せなくなって不便なこと
もある。そこで、あまり使用しないウィンドウは縮小し
て周囲に表示しておくようにすれば良い。従来のワーク
ステーションでもウィンドウサイズを小さくして、使用
フォントを小さくすれば、ある程度実現できる。

しかしながら、これでは自由な大きさの変化や文字だけ
でなく画像や図表のある場合には対応できない。しかし
、本発明によれば画像処理回路１３のアフィン変換回路
１４によって、ビットマツプメモリ２上でウィンドウ全
体を適当な大きさまで縮小して、それをグラフィックス
コントローラ１、フレームバッファ３を通してＣＲＴ４
に表示することができる。また、文字が読みにくいほど
縮小されることになっても、文字の配列のパターンがキ
ーとなって、オペレータはこのウィンドウが何のウィン
ドウだったか思い出し易い。前記したような単純な処理
の場合は、ビットマツプメモリ２上に処理後の画像を作
らなくても、画像処理結果ヲクラフィックスコントロー
ラ１を通じて、直接フレームバッファ３に書き込むよう
にしてもよい。

また、縮小によって文字が読みにくい程小さくなった場
合には、ところどころの文字や行、あるいは数行おきに
ある大きさのフォントで読めるように書き込んでもよい
。

また、画像処理回路１３は、さらに複雑な処理を実行す
ることができる。例えば、画像や図表の場合、単純に縮
小しては内容が分かりにくくなる場合があるが、この場
合、ウィンドウの表示内容を画像と見なして処理を行う
。

第３図は、この時のフローチャートを示したものであり
、先ず、画像にソーベルオペレータなどのような空間フ
ィルタ（空間フィルタ回路１６）をかけ（ステップ５Ｔ
１）、その値の大きいところだけを２値化（濃度変換回
路１５）によって取り出す（ステップ５Ｔ２）。それに
、それらに連結頭載番号付け（ラベリング回路１８）を
行い（ステップ５Ｔ３）、各領域ごとに面積を計測しし
ヒストグラム計算回路１９）、面積の小さい部分を除く
　（ステップ５Ｔ４）。即ち、濃度変換回路１５により
面積の小さいラベルの部分を“０”にする。そして、そ
の結果に対して論理フィルタ（論理フィルタ回路１７）
を用いて図形を太らせる（ステップ５Ｔ５）。これは例
えば、“１°の画素があれば、その上下左右も“１″に
するというようなフィルタにより実現できる。このよう
に処理した結果を適当な大きさにアフィン変換（アフィ
ン変換回路１４）で縮小して表示する（ステップ５Ｔ６
）。前記した画像処理は、画像から主要な線を抽出して
表示するもので、ウィンドウが小さくなっても内容が分
かり易い。

（２）　　ビットマツプメモリ２のいくつかのビットを
図形として扱う方法ビットマツプメモリ２の各点に内容を表すビットの他に
、図形操作のためにいくつかのビットを割り当゛Ｃるこ
とにより、種々の表示が可能になる。

第４図は、文字パターン（図ではＡ）が書かれているビ
ットと、文字の領域を示すビットを示したものであり、
各画素のビット“１”のブレーンに文字（図ではＡ）が
格納され、ビット“０”のブレーンには、文字に対応す
る領域（斜線で示した部分）が格納されている。この文
字に対応する領域を示すのが図形操作ビットである。

そして、グラフィックスコントローラ１のテーブルルッ
クアップ回路１２が図形操作ビットの内容により、転送
を制御する。例えば、文字領域を示す図形操作ビットが
、ビット“１”の所だけそのビット“１”を除いたメモ
リ内容をフレームバッファ３に書き込む。また、図形操
作ビットで無視するように指定された部分（ｒ！！Ｊで
は文字領域以外の部分）は、すでにフレームバッファ７
に書かれている内容がそのまま残るようにする。従って
、ｂｉｔｂｉｔ回路１１は実際には矩形領域を扱ってい
るが、見かけ上、図形操作ビット°１°のところだけ転
送したようになる。

前記した動作では、表示を行う際の場合であったが、Ｌ
ブトマツプメモリ２の中でのウィンドウ操作も同様に図
形操作ビットにより制御することができる。これらの場
合について次に説明する。

く不定形・変形ウィンドウ〉ウィンドウの領域として、矩形をビットマツプメモリ２
上に確保しておき、図形操作用のビットに適当な値を書
き込むことにより、矩形以外の表示が可能になる。

く情報の無い部分を省いた表示〉ビットマツプメモリ２に文字を書き込む際、例えば第４
図に示したように、その文字（図ではＡ）を囲む矩形領
域部分の図形操作用のビットを立てる。そして、キャリ
ッジリターンは数個の文字性の矩形とし、フレームバッ
ファ３に転送する時このビットの立っている部分だけ書
き込むようにすれば、文字の無い部分は下のウィンドウ
の内容が見えるような表示が可能になる。また、図表の
場合もそれを含む領域のビットを立てればよい。ただし
、この場合、線の周囲に少しだけのビットを立てただけ
では、下のウィンドウの内容と（ｉなってしまい見にく
くなる。そこで、図形に連結領域の番号付けを施し、外
接長方形を求めてその部分のビットを立てたりする。こ
れらの図形操作は画像処理回路１３で実現される。

く矩形以外の形のウィンドウ〉この場合には、先ずビットマツプメモリ２上に矩形領域
を確保し、その中に所望する形の内部が塗り潰された図
形を書く（対応する部分の図形操作用ビットを立てる）
。そして、前記同様、このビットの立っている所だけ表
示されるようにすることによって矩形以外のウィンドウ
が可能になる。

この時のウィンドウの形としては、画像から画像処理回
路１３により切り出して得られるような任意の形を用い
ることもできる。このような変形ウィンドウに文字を書
いていく場合は、文字が図形操作ビットの立っていない
部分に来たら、次の行に変えるようにする。

くウィンドウの部分表示〉この場合には、任意の形に図形操作ビットを立てること
により、矩形ウィンドウのその部分の内容だけか表示さ
れるようにすることができる。

（３）　　ウィンドウの内容を画像と見なしての操作本
発明では、ウィンドウの内容を画像と見なして種々の画
像処理を行うことができる。また、ウィンドウの内容の
全部あるいは一部をある図形と見なし、それに対して移
動や変形等の操作を行うこともできる。

この場合の処理動作について説明すると、ウィンドウの
内容は文字、図形、画像、あるいはそれらの混合された
物など何でもよいが、本例では第５図（ｂ）に示すよう
に、雲ａ、人間ｂ１木Ｃを含んだ濃淡画像を採り上げる
。

ビットマツプメモリ２の各点には、第５図（υに示した
濃淡画像を格納するビットと、前記した図形操作ビット
にあたるラベル画像を格納するビットを設ける（第５図
像）参照）。

画像中の個々の物体に対してそれを移動したり、拡大・
縮小したり、濃淡や色を変える等の処理を行うためには
、それぞれの物体を分離しなければならない。この時、
前記物体同士が離れていて、ヒストグラム計算回路１９
で濃度のヒストグラムを求めた時に、背景と明るさが異
なっていれば、背景と分離できるしきい値をヒストグラ
ム計算結果から決めて、濃度変換回路１５によって物体
を２値化により背景から分離する。そして、この２値画
像をラベリング回路１８でラベリングし、ラベル画像を
得る。

また、他の方広としては、マウス９等のポインティング
デバイスで、対象物体の輪郭をトレースしてもよい。そ
して、トレースした輪郭線の内部を塗り潰し、適当なラ
ベル番号を決めて輪郭線およびその内部にその値を与え
たものを、ラベル画像として得ることができる。

また、前記対象物体の内部を塗り潰した２値画像を作り
、それをラベリング回路８でラベリングしてもよい。

また、前記した濃度変換回路１５によって物体を２値化
により背景から分離する方法において、うまく物体を分
離できない時に、この物体の輪郭線を人手でていねいに
辿るのも手間だという場合には、以下のような方法を用
いることができる。

先ず、マウスって対象物体（図では第５図（ｂ））に示
した木Ｃ）を囲む概略の線Ｍを指定する（第５図（Ｃ）
）。そして、線Ｍの内側のヒストグラムをヒストグラム
計算回路１９で求め、その結果から２値化しきい値を定
めて、濃度変換回路１５で２値化する。２値化の際に、
対象部分を“１”にするのでなくて、適当なラベル番号
に変換するようにしてラベル画像用のメモリ部分に書き
込む。

また、前記した方法以外にも、種々の対象物に対する２
値化結果全体に、ラベリング回路１８でラベリングする
方法でもよい。また、画像処理で物体の分離を行った場
合、結果が一部不満足の場合には、その部分を、マウス
９を用いて修正するようにしてもよい。

第５図（ｄ）は、上記したいずれかの方法によって物体
を分離して、第５図（ｂ）に示した雲ａ、人間ｂ、木Ｃ
にそれぞれ１．２．３のラベルを与えた場合を示した図
である。そして、このラベル画像（雲１、人間２、木３
）を前記した図形操作ビットと考えれば、個々のラベル
画像が、不定形のウィンドウと考えられるので、このウ
ィンドウに対する移動や変形等の種々の処理が実行でき
る。

また、第５図（ｅ）に示すように、画像を細かい領域（
図では雲上、人間２，４．５，６．８．９゜１０、木３
，７）に分けてラベル付けを行うことにより、さらに細
かい操作を行うことができる。

この処理は画像処理回路１３、あるいはマウス９て対話
的に分割することにより実行できる。

そしＣ１グラフィックスコントローラ１の中のテーブル
ルックアップ回路１２に、例えば表１に示すような、複
数レベルのテーブルをセットする。

そして、第５図（ｅ）に示した物体（ラベル）を操作す
る時、例えばレベル１を選べば個々のラベルごとの操作
が行える。また、レベル２を選べば、レベルｌよりも大
きいレベルで物体を扱える。即ち、レベル１では、例え
ば頭２、右腕４、胴５、左腕６は個々に扱っていたが、
レベル２では、それらを上半身として扱うことができる
。

（以下余白）表また、本例では、ｂｉｔｂｉｔ回路１１は、レベル２に
おいて、ラベル２．４．５．６を１つの物体として扱う
。即ち、この物体（この場合は人間の上半身）をユーザ
が選択した場合には、ラベル２゜４．５．６の各画素は
ｂｌｔｂｌｔ回路１１の転送対象になる。

また、本発明の画像処理回路１３は種々の画像処理機能
を持っているので、これを用いて当然ワークステーショ
ンで画像処理を行うことができるが、従来はこのような
画像処理を実現するには、画像処理装置をワークステー
ションに接続する必要があった。この場合、画像処理結
果をビットマツプディスプレイに表示するためには、画
像メモリからビットマツプメモリ２に画像データを転送
する必要があったが、本発明によればその必要がなく、
表示速度が向上し、また、画像データと文字テキストを
統合的に扱うことができる。

［発明の効果］以上、実施例に基づいて具体的に説明したように本発明
によれば、ビットマツプメモリに接続した画像処理手段
により、ビットマツプメモリ内のウィンドウ表示内容を
画像と見なして操作することができる。従って、ウィン
ドウの内容を画像処理して、その内容によってウィンド
ウの表示を操作することができ、例えば、ウィンドウ内
の情報の分かり易い縮小表示や、不定形のウィンドウあ
るいはウィンドウ内の構成要素ごとの操作等を、容易に
、且つ高速に実行することができる。

【図面の簡単な説明】

第１図は、本発明に係るマルチウィンドウ表示装置を示
す構成図、第２図は、画像処理回路を示す構成図、第３
図は、画像処理回路による縮小表示の処理動作を示すフ
ローチャート、第４図は、図形として扱われる場合のビ
ットプレーンを示す説明図、第５図は、画像を分割して
画像処理する場合の一例を示す説明図、第６図は、従来
のマルチウィンドウ表示装置を示す構成図である。１・・・グラフィックスコントローラ２・・・ビットマツプメモリ３・・・フレームバッファ４　・・・　ＣＲＴ９・・・マウスト・・ｂｉｔｂｌｔ回路３・・・画像処理回路５・・・ホスバス（画像処理手段）

Claims

【特許請求の範囲】

（１）ビットマップメモリ内のウィンドウを、グラフィ
ックスコントローラ内のｂｉｔｂｌｔ回路を用いて表示
画面に対応したフレームバッファへ転送してディスプレ
イ画面に表示するマルチウィンドウ表示装置において、
前記ビットマップメモリとグラフィックスコントローラ
間に、前記ビットマップメモリ内のウィンドウ表示内容
を画像と見なして操作する画像処理手段を接続したこと
を特徴とするマルチウィンドウ表示装置。
（２）請求項１記載のマルチウィンドウ表示装置におい
て、前記ビットマップメモリのいくつかのビットを、表
示内容の全体または一部分に対応した領域を示す図形を
表わすのに使用し、その図形を用いてその図形に対応す
るウィンドウの全体または一部分を画像と見なして操作
することを特徴とするマルチウィンドウ表示装置。