JPH10285587A

JPH10285587A - マルチウインドウ画像表示方式とこの方式を使用した遠隔検査システム

Info

Publication number: JPH10285587A
Application number: JP8163997A
Authority: JP
Inventors: Kensuke Uehara; 堅助上原
Original assignee: TSUSHIN HOSO KIKO; Toshiba Corp
Current assignee: TSUSHIN HOSO KIKO; Toshiba Corp
Priority date: 1997-03-31
Filing date: 1997-03-31
Publication date: 1998-10-23

Abstract

(57)【要約】【課題】複数の画像をマルチウインドウ表示する際
に、表示位置の設定操作を何ら行わなくても各画像を常
に適切な位置関係で表示できるようにし、これにより画
像の視認性の向上とユーザの操作性の向上を図る。【解決手段】患者側の端末装置１００Ａにおいて、患
部を撮像した静止画データに対しＤＣＴ計算を行ってそ
の計算結果を基に制御部１０３Ａでぼけ領域を検出し、
この検出データを医師側の端末装置３００Ａに通知して
いる。そして、医師側の端末装置３００Ａにおいて、制
御部３０２Ａが上記通知されたぼけ領域の検出データを
もとに患者側の端末装置１００Ａから伝送された静止画
データ中のぼけ領域を認識し、このぼけ領域に患者側の
端末装置１００Ａから伝送された患者の上半身を撮像し
た動画像を貼り付けて、表示装置３０５に表示するよう
にしたものである。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この本発明は、複数の画像を
共通の画面に重ねて表示するマルチウインドウ画像表示
方式と、この方式を適用した遠隔検査システムに関す
る。

【０００２】

【従来の技術】近年、遠隔地同士を通信回線を介して接
続して病気等の診断を行う遠隔検査システムが普及して
きている。この種のシステムは、例えば医師が駐在する
検査センタと、遠隔地にいる患者の自宅あるいはサービ
ス拠点との間を通信回線を介して接続し、医師と患者と
の間で映像および音声を伝送することにより医師が患者
の病気の診断や健康相談を行うものである。

【０００３】図１９は、この種のシステムの概略構成を
示すものである。同図において、患者側の端末装置１０
には患者の全体像または上半身像を撮像する第１のカメ
ラ１１と、患者の患部などの特定部位を高精細で撮像す
る第２のカメラ１２が設けられている。これらのカメラ
１１，１２により撮像された画像信号は、それぞれ動画
符号化部１３および静止画符号化部１４で符号化圧縮さ
れたのち、通信インタフェース（通信Ｉ／Ｆ）１６から
通信網２０を介して医師側の端末装置３０へ伝送され
る。

【０００４】医師側の端末装置３０では、上記患者側の
端末装置１０から伝送された符号化動画データおよび符
号化静止画データが通信インタフェース（通信Ｉ／Ｆ）
３１で受信されたのち、それぞれ動画復号化部３２およ
び静止画復号化部３３で復号伸張されて表示装置３４に
表示される。図２０および図２１はその表示例を示すも
ので、図２０では患者の上半身の動画像が表示され、ま
た図２１では患者の患部である足部を撮像した高精細の
静止画像が表示される。

【０００５】また医師側の端末装置３０にもカメラ３６
が設けられている。このカメラ３６により撮像された医
師の上半身画像は、動画符号化部３７で符号化圧縮され
たのち上記通信Ｉ／Ｆ３１から通信網２０を介して患者
側の端末装置１０に伝送される。そして、この患者側の
端末装置１０において、動画復号化部１７で復号伸張さ
れたのち表示装置１８に表示される。

【０００６】さらに患者側および医師側の各端末装置１
０，３０には、音声入出力部１９，３８と、スピーカ２
１ａ，３９ａおよびマイク２１ｂ，３９ｂとからなる通
話装置が設けられており、これらの通話装置を使用する
ことで患者と医師との間で通話が行える。

【０００７】このようなシステムを使用することで、医
師は遠隔地にいる患者からテレビ電話により患部の様態
を聞き、かつ高精細の静止画像で患部を詳細に観察する
ことにより、適切な診察を行うことができる。

【０００８】

【発明が解決しようとする課題】ところが、このような
システムでは、医師が患者の動画像と患部の静止画像を
それぞれ視認しようとすると、これらの画像を適宜切り
替えて表示装置３６に表示する必要があり、大変不便で
ある。そこで、最近では例えば図２２に示すように、患
者の動画像と患部の静止画像を表示装置３６の表示画面
上にマルチウインドウ表示することが試みられている。

【０００９】しかし、この種の従来の表示制御方式は、
患者の動画像の表示位置と患部の静止画像の表示位置を
それぞれ予め固定的に設定している。このため、これら
の表示位置の位置関係によっては、例えば図２３のよう
に患部の静止画像の一部が動画像に隠れてしまうといっ
た不具合を生じる。またこのような不具合をなくすため
に、例えば医師が表示画画上でマウス操作を行って患者
の人物画像の映像を図２４に示すように移動できるよう
にすることも考えられている。しかしこの方式では、患
部の映像に合わせてその都度手作業で動画像の表示位置
を移動させなければならず、操作が著しく面倒だった。

【００１０】この発明は上記事情に着目してなされたも
ので、その目的とするところは、複数の画像をマルチウ
インドウ表示する際に、表示位置の設定操作を何ら行わ
なくても各画像を常に適切な位置関係で表示できるよう
にし、これにより画像の視認性の向上とユーザの操作性
の向上を図り得るマルチウインドウ画像表示方式とこの
方式を使用した遠隔検査システムを提供することにあ
る。

【００１１】

【課題を解決するための手段】上記目的を達成するため
にこの発明は次のような手段を講じたものである。

【００１２】（１）一つの表示画面に、第１の画像と第
２の画像とをマルチウインドウ表示するマルチウインド
ウ画像表示方式において、前記表示画面に表示される第
１の画像中から精細度が所定レベルに満たない低精細領
域および精細度が所定レベル以上の高精細領域のうちの
少なくとも一方を検出し、その検出結果を基に第２の画
像を表示するに適当なぼけ領域を検出する検出手段と、
この検出手段により検出された前記第１の画像中のぼけ
領域に前記第２の画像を重ねて表示する表示制御手段と
を備えたことを特徴とするものである。

【００１３】一般に患部等を撮像した場合、その静止画
像は重要部分には焦点が合って高精細の画像となるが、
その他の部位では焦点が外れて画像にぼけが生じる傾向
がある。したがって、上記したように第１の画像中から
ぼけ領域を検出してこの領域に第２の画像を表示すれ
ば、第１の画像の重要部分を常に避けた状態で第２の画
像を表示することができる。

【００１４】すなわち、表示位置の設定操作を何ら行わ
なくても自動的に各画像を常に適切な位置関係で表示す
ることが可能となり、これにより画像の視認性の向上と
ユーザの操作性の向上をそれぞれ図ることができる。

【００１５】（２）上記検出手段は、第１の画像を直交
変換してこの変換後の多項式の高周波項をもとに精細度
の判定を行い、その判定結果からぼけ領域を検出するこ
とを特徴とする。

【００１６】（３）上記直交変換を用いてぼけ領域の検
出を行う際の具体的手法としては、第１の画像全体につ
いて所定の画素ブロックごとに離散コサイン変換を行っ
たのち、この変換により得られた複数の高周波項に重み
係数を乗じてその総和を求め、この総和を各画素ブロッ
クごとの精細度の判定基準とし、この判定基準をもとに
前記第１の画像の各画素ブロックごとにぼけ領域か否か
を判定するものがあげられる。

【００１７】（４）また、前記検出手段は、第１の画像
の輝度信号から画像の精細度を調べ、この精細度が所定
レベルに満たない領域をぼけ領域として検出することを
特徴とする。

【００１８】（５）さらに、前記検出手段は、第１の画
像がカラー画像である場合に、このカラー画像の特定の
色についてその精細度を調べ、この精細度が所定レベル
に満たない領域をぼけ領域として検出することを特徴と
する。

【００１９】（６）前記検出手段は、第１の画像を大き
さの等しい複数の単位領域に分け、これらの単位領域ご
とに精細度の判定を行ってその判定結果からぼけ領域を
検出することを特徴とする。

【００２０】（７）前記検出手段は、前記単位領域の大
きさおよび形状をを、第２の画像の大きさおよび第１の
画像中の重要部分の大きさに応じて動的に可変設定する
ことを特徴とする。

【００２１】（８）前記検出手段は、第１の画像中の四
隅に相当する領域を選択してこれらの領域について精細
度の判定を行い、その判定結果からぼけ領域を検出する
ことを特徴とする。

【００２２】（９）前記表示制御手段は、前記検出手段
により精細度が所定レベル未満のぼけ領域が複数検出さ
れた場合には、これらの検出された領域の中から任意の
領域を選択して、この選択した領域に第２の画像を重ね
て表示することを特徴とする。

【００２３】（１０）前記表示制御手段は、前記検出手
段により精細度が所定レベル未満のぼけ領域が複数検出
された場合には、これらの領域を操作者に知らせ、操作
者が上記複数の領域の中から一つを選択する操作を行っ
た場合に、この選択操作により指定された領域に第２の
画像を重ねて表示することを特徴とする。

【００２４】（１１）前記表示制御手段は、前記検出手
段によりぼけ領域が検出されなかった場合には、第２の
画像の表示を行わないことを特徴とする。

【００２５】（１２）前記検出手段は、ぼけ領域が検出
されなかった場合に、前記表示画面における第１の画像
の表示位置および第１の画像を撮像する際の撮像アング
ルのうちの少なくとも一方を変化させ、この変化後の第
１の画像中からぼけ領域を検出することを特徴とする。

【００２６】（１３）操作者が第２の画像の表示領域を
指定入力する操作手段をさらに備え、前記表示制御手段
は、前記検出手段によりぼけ領域が検出されなかった場
合にはその旨を操作者に知らせ、これに対し操作者が前
記操作手段により表示領域を指定する操作を行った場合
に、この操作により指定された領域に第２の画像を重ね
て表示することを特徴とする。

【００２７】（１４）操作者が第１の画像の表示位置お
よび大きさの少なくとも一方を可変する指示を入力する
ための操作手段をさらに備え、前記表示制御手段は、前
記操作手段により入力された指示内容および前記検出手
段の検出結果に基づいて第２の画像を表示する領域を決
定し、この決定した領域に第２の画像を重ねて表示する
ことを特徴とする。

【００２８】（１５）第１の端末装置と、この第１の端
末装置に対し通信回線を介して接続される第２の端末装
置とを備え、第１の端末装置で被検体を異なる複数のア
ングルでそれぞれ撮像して第１の画像および第２の画像
を得、これら第１および第２の画像を前記通信回線を介
して第２の端末装置に伝送して表示部にマルチウインド
ウ表示する遠隔検査システムにおいて、前記第１および
第２の画像をそれぞれ符号化圧縮して前記第１の端末装
置から第２の端末装置へ伝送する符号化送信手段と、前
記第１の画像中から精細度が所定レベルに満たないぼけ
領域および精細度が所定レベル以上の高精細領域のうち
の少なくとも一方を検出する検出手段と、前記第１の端
末装置から伝送された第１および第２の符号化画像を前
記第２の端末装置で復号伸張する受信復号手段と、この
受信復号手段により復号伸張された第１の画像を前記表
示部に表示するとともに、前記検出手段の検出結果をも
とに前記第１の画像中のぼけ領域を認識し、このぼけ領
域に前記受信復号手段により復号伸張された第２の画像
を重ねて表示する表示制御手段とを具備したことを特徴
とするものである。

【００２９】（１６）前記検出手段は、符号化送信手段
が第１の画像を非可逆圧縮方式により符号化圧縮して伝
送する場合には、第１の端末装置において符号化送信手
段による符号化圧縮前にぼけ領域あるいは高精細領域の
検出を行ってその検出結果を第２の端末装置へ伝送し、
前記表示制御手段は、前記第１の端末装置から伝送され
た検出結果をもとに第１の画像中のぼけ領域を認識し、
このぼけ領域に復号伸張された第２の画像を重ねて表示
することを特徴とする。

【００３０】（１７）前記検出手段は、符号化送信手段
が第１の画像を可逆圧縮方式により符号化圧縮して伝送
する場合には、第２の端末装置において受信復号手段に
より復号伸張された第１の画像からぼけ領域あるいは高
精細領域の検出を行ってその検出結果を表示制御手段に
与え、前記表示制御手段は、前記検出手段から与えられ
た検出結果をもとに第１の画像中のぼけ領域を認識し、
このぼけ領域に復号伸張された第２の画像を重ねて表示
することを特徴とする。

【００３１】

【発明の実施の形態】

（第１の実施の形態）図１は、この発明に係わる画像表
示方式を使用した遠隔検査システムの第１の実施形態を
示す回路ブロック図である。このシステムは、患者側の
端末装置１００Ａと医師側の端末装置３００ＡとをＩＳ
ＤＮ網からなる通信網２００を介して接続したものであ
る。

【００３２】まず患者側の端末装置１００Ａは、患者の
全体像あるいは上半身像を撮像する第１のカメラ１０１
と、患者の患部などの特定部位を高精細で撮像する第２
のカメラ１０５とを備えている。これらのカメラ１０
１，１０５は、ともに例えばＣＣＤカメラまたはＣＭＯ
Ｓカメラからなる。

【００３３】このうち第１のカメラ１０１により撮像さ
れた患者の全体像あるいは上半身像の撮像信号は、カメ
ラ１０１内でデジタル化されたのち動画符号化部１０２
に入力される。この動画符号化部１０２は、上記ディジ
タル撮像信号を動画として符号化圧縮する。動画圧縮方
式としては、例えばテレビ電話システムの符号化方式と
して多く使用されているＨ．２６１方式が使用される。

【００３４】これに対し第２のカメラ１０５は、患者の
患部を撮像してその静止画信号をディジタル化して出力
する。ＲＣＢ／ＹＩＱ変換部１０７は、上記第２のカメ
ラ１０５から出力されたディジタル静止画信号を、ＲＧ
Ｂ表示系から輝度信号を抽出するためにＹＩＱ表示系に
変換する。そして、この変換後の静止画信号をＪＰＥＧ
圧縮部１１０に入力する。

【００３５】ＪＰＥＧ圧縮部１１０は、上記ＹＩＱの各
信号に対応して３個の画素ブロック化部１１１，１１
３，１１４と、３個のＤＣＴ計算部１１２，１１５，１
１６とを有している。このうち画素ブロック化部１１
１，１１３，１１４はそれぞれ、上記静止画信号のうち
の輝度信号（Ｙ）、色差信号（Ｉ），（Ｑ）を所定の画
素単位でブロック化する。ＤＣＴ計算部１１２，１１
５，１１６はそれぞれ、上記画素ブ口ック化部１１１，
１１３，１１４から出力された信号に対し、画素ブロッ
クごとに離散コサイン変換（ＤＣＴ：Discrete Cosine
Transform ）のための演算を行う。そして、これらのＤ
ＣＴ計算部１１２，１１５，１１６により得られた輝度
信号（Ｙ）、色差信号（Ｉ），（Ｑ）のＤＣＴ計算結果
は、静止画符号化部１１７にそれぞれ入力され、ここで
符号化圧縮処理が行われる。圧縮方式としてはＪＰＥＧ
方式が使われる。

【００３６】制御部１０３Ａは、患者側の端末装置１０
０Ａ全体を制御する制御するもので、特に本発明に係わ
る静止画データのぼけ領域検出機能およびその検出デー
タを後述する医師側の端末装置３００Ａへ通知する機能
を有している。

【００３７】通信インタフェース（通信Ｉ／Ｆ）１０４
は、制御部１０３Ａの指示に従って通信網２００に対す
るアクセスを行うとともに、このアクセスにより医師側
の端末装置３００Ａとの間に形成された通信チャネルを
介して符号化画像データおよび音声データ等の送受信を
行う。

【００３８】一方、医師側の端末装置３００Ａは次のよ
うに構成される。すなわち、上記患者側の端末装置１０
０Ａから伝送された符号化動画データおよび符号化静止
画データを通信インタフェース（通信Ｉ／Ｆ）３０１で
受信する。そして、これらの符号化動画データおよび符
号化静止画データをそれぞれ動画復号化部３０３および
静止画復号化部３０４に入力する。動画復号化部３０３
は、上記符号化動画データをＨ．２６１方式により復号
伸張する。静止画復号化部３０４は、上記符号化静止画
データをＪＰＥＧ方式により復号伸張する。表示装置３
０５は、上記各復号化部３０３，３０４で復号伸張され
た動画データおよび静止画データを表示する。

【００３９】制御部１１３は、医師側の端末装置３００
Ａ全体を統括的に制御するもので、既存の制御機能に加
えてこの発明に係わる画像配置制御機能を有している。
この画像配置制御機能は、上記動画データと静止画デー
タを上記表示装置３０５にマルチウインドウ表示する際
に、患者側の端末装置１００Ａからの通知データに基づ
いて静止画データ中のぼけ領域を認識し、このぼけ領域
に動画データを重ねて表示するようにウインドウの配置
を決定する。

【００４０】なお、図１には示さなかったが、患者側お
よび医師側の各端末装置１００Ａ，３００Ａには、前記
図１９と同様に音声通話のための装置および医師の上半
身像を動画伝送して患者側の表示装置に表示する装置が
設けられている。

【００４１】次に、以上のように構成されたシステムの
動作を説明する。まず、患者側の端末装置１００Ａでは
各カメラ１０１，１０５のアングル調整が行われる。す
なわち、カメラ１０１は患者の人物画像を動画として撮
像するものであるため、アングルを細かく制御せず固定
的に患者に向ける。但し、医師側から見て患者の上半身
のアングルが適切でない場合には、医師側から音声通話
により患者あるいは家人に指示して、カメラ１０１のレ
ンズの方向等を変えて、最良な状態に固定させる。

【００４２】一方、患部はカメラ１０５で撮像される。
ここで、患者の家族あるいは患者本人は、カメラ１０５
の位置を患部近くで最適なアングルになるように予め設
定しておく。医師は、表示装置３０５に表示された患部
の静止画像を見ながら、端末装置３００Ａに設けられて
いる遠隔調整装置を操作することにより、患者側の端末
装置１００Ａへ操作制御データを送り、これによりカメ
ラ駆動部１０６を遠隔制御して、カメラ１０５の向きが
最良のアングルとなるように調整する。なお、カメラ駆
動部１０６ではカメラ１０５のズーミング、パンニン
グ、チルティングおよびフォーカシング等が制御でき
る。

【００４３】さて、以上のように各カメラ１０１，１０
５のアングル調整が終了すると、医師は遠隔操作により
診断のための患部の静止画撮影を開始する。この静止画
撮影は診断に最適な静止画像が得られるまで試行錯誤的
に複数回行われる。

【００４４】そうすると、撮影毎にカメラ１０５から出
力された患部のＲＧＢ信号は、ＲＧＢ／ＹＩＱ変換部１
０７でＹＩＱ信号に変換され、これにより輝度信号が抽
出される。そして、上記ＲＧＢ／ＹＩＱ変換部１０７か
ら出力された輝度信号（Ｙ）および各色差信号（Ｉ），
（Ｑ）は、それぞれ画素ブロック化部１１１，１１３，
１１４で所定の画素単位にブロック化されたのち、ＤＣ
Ｔ計算部１１２，１１５，１１６に入力されてここでＤ
ＣＴ計算される。

【００４５】これらの輝度信号に関するＤＣＴ計算値お
よび色差信号に関するＤＣＴ計算値はともに静止画符号
化部１１７に入力され、ここで静止画用のＪＰＥＧ圧縮
処理が行われる。そして、この圧縮された符号化静止画
データは、通信Ｉ／Ｆ１０４から通信網２００を介して
医師側の端末装置３００Ａに送られる。そうすると医師
側の端末装置３００Ａでは、上記符号化静止画データが
通信Ｉ／Ｆ０１で受信されたのち静止画復号化部３０４
に入力され、ここでＪＰＥＧ伸張されて表示装置３０５
に供給され静止画として表示される。

【００４６】ところで、上記静止画伝送のための処理と
並行して、患者側の端末装置１００Ａの制御部１０３Ａ
では、上記静止画データ中のぼけ領域を検出するための
処理が行われる。ここで、静止画データには上記したよ
うに色差信号と輝度信号が含まれているが、画面のぼけ
具合を検出するには輝度信号があれば十分である。そこ
で、制御部１０３Ａにはぼけ領域検出用として上記輝度
信号のＤＣＴ計算値が入力される。

【００４７】以下、このぼけ領域検出に係わる処理を詳
しく説明する。すなわち、画素ブロック化部１１１で
は、輝度データ（Ｙ）について画面全体にわたり例えば
図２に示すように８×８ビットの画素ブロックに分割さ
れる。そして、ＤＣＴ計算部１１２ではこの画素ブロッ
ク単位でＤＣＴ計算が行われる。このＤＣＴの計算式を
以下にに示す。

【数１】

【００４８】同式において、ａｘｙは図８に示すように
一つの画素ブロックにおける各画素の輝度を示してい
る。ＤＣＴブロックの各点のＤＣＴ値はｂｘｙで表さ
れ、このＤＣＴ値ｂｘｙは図８のようになる。ここで、
ｂｘｙにおいて、ｘｙが小さい領域は画像成分の低周波
項を示し、またｘｙが大きい領域は高周波項を示してい
る。

【００４９】ところで、静止画中のぼけの情報は特に高
周波項に現れる。そこで、図８では、網掛けで示したｂ
５６〜ｂ６４のどの項が画面の精細度に影響するかを評
価するために次式を定義している。

【数２】

【００５０】同式のβ１は、ｂ６４からｂ５６までの各
項の絶対値に、貢献度としての重みα１〜α９を乗じた
のち総和をとった値で、該当するブロックの高周波項の
大きさを示す評価値である。なお、α１〜α９の値は、
実際に現場で種々の静止画面をサンプル収集してｂ６４
からｂ５６の各値を計測することにより、最適な係数に
なるように決定される。また、複数個の画素ブロックで
構成された領域全体の高周波項の評価値は、

【数３】

【００５１】に示すように各画素ブロックのβ１をその
領域のブロック数で総和した値φ１で表される。図３
は、各ブロックの評価値φ１，φ２，…を図示したもの
である。そして、指定された領域のぼけ具合を検査する
場合には、

【数４】

【００５２】に示すようにφの値が予め決められたしき
い値Φ以下であるか否かを判定する。そして、φの値が
しきい値Φ以下であれば、その領域は他の領域よりぼけ
ているとみなされる。

【００５３】また、ＪＰＥＧ圧縮の場合、輝度信号と色
差信号についてＤＣＴ計算を行い、画質に大きな影響を
与えない高周波項を荒く量子化することにより、結果と
して圧縮の効果を上げている。このため、医師側の端末
装置３００Ａの静止画復号化部３０４で伸長した静止画
は、ＤＣＴ計算の際に高周波分が縮小あるいは削除され
ている。したがって、静止画のぼけ具合を検査するに
は、送信側の端末装置１００ＡにおいてＤＣＴ計算を行
ったのち量子化する前で行う必要がある。

【００５４】そこで、本実施形態では、送信側の端末装
置１００ＡのＤＣＴ計算部１１２において得られた計算
結果からぼけ領域を認識し、その領域情報を医師側の端
末装置３００Ａに通知する。そして、医師側の端末装置
３００Ａにおいて、通知された領域情報をもとに静止画
像中の該当する領域を特定して、この領域に患者側の端
末装置１００Ａから伝送された患者の動画像を張り付け
るようにしている。

【００５５】ちなみに、医師側の端末装置３００Ａにお
いて伝送された静止画データからぼけ領域を検出しよう
とすると、この伝送された静止画データの高周波成分は
先に述べたように患者側の端末装置１００ＡのＤＣＴ計
算により縮小または削除されているため、再度ＤＣＴ計
算を行っても高周波成分が小さくなり正確な検査を行え
ない。

【００５６】以上のようにこの実施形態では、患者側の
端末装置１００Ａにおいて、患部を撮像した静止画デー
タに対しＤＣＴ計算を行ってその計算結果を基に制御部
１０３Ａでぼけ領域を検出し、この検出データを医師側
の端末装置３００Ａに通知している。そして、医師側の
端末装置３００Ａにおいて、制御部３０２Ａが上記通知
されたぼけ領域の検出データをもとに患者側の端末装置
１００Ａから伝送された静止画データ中のぼけ領域を認
識し、このぼけ領域に患者側の端末装置１００Ａから伝
送された患者の上半身を撮像した動画像を貼り付けて、
表示装置３０５に表示するようにしている。

【００５７】したがって、患者の動画像を患部の静止画
像に重ねてマルチウインドウ表示する際に、動画像の表
示位置が静止画像の重要領域を除いた余白位置となるよ
うに自動的に最適位置に設定される。このため、医師は
動画像の表示位置を手操作で設定するといった面倒な操
作に煩わされることなく、常に最適な状態で静止画像と
動画像とをそれぞれ視認することができ、これにより患
者の顔の表情などを見ながら患部について正確な診断を
下すことができる。

【００５８】また、静止画データ中のぼけ領域の検出を
患者側の端末装置１００ＡのＪＰＥＧ圧縮前に行ってい
るので、ＪＰＥＧ圧縮方式として非可逆圧縮方式を使用
している場合でも、医師側の端末装置３００Ａにおいて
伝送後の静止画データから検出する場合に比べて、高精
度の検出を行うことができる。

【００５９】（他の実施形態）この発明の他の実施形態
としては、以下のような種々形態が考えられる。

【００６０】（１）静止画像中のぼけ領域を検出する場
合に、例えば図４に示すごとく画面を大きさの等しい複
数の単位領域に分け、これらの単位領域ごとにぼけ判定
を行ってぼけ領域か否かを決定するようにしてもよい。

【００６１】さらに、静止画像中の左上、右上、左下及
び右下の四隅に限定してこの４カ所についてぼけ判定を
行う。そして、これらの領域のうちで最もφの値が小さ
い領域を一つ選択して、この領域を表すデータを医師側
の端末装置３００Ａに通知し、医師側の端末装置３００
Ａで上記通知された領域に患者の動画像を貼り付けるよ
うにしてもよい。このようにすると、静止画像の全領域
についてぼけ検出を行う場合に比べて、少ない演算量で
短時間に検出を行うことができる。

【００６２】なお、上記四隅の各領域がいずれもぼけ領
域ではないと判定された場合には、静止画像の上記四隅
を除いた全領域についてぼけ判定を行い、その結果から
ぼけ領域を検出すればよい。

【００６３】（２）また、φの値がしきい値Φ以下とな
るぼけ領域を複数箇所検出できた場合には、これらの領
域を表すデータを医師側の端末装置３００Ａに通知し、
医師側の端末装置３００Ａにおいてこれらの領域を表示
装置３０５に表示して医師が任意に選択できるようにし
てもよい。

【００６４】（３）また、φの値がしきい値Φ以下とな
る条件の元で、できるだけ領域の面積を大きく確保でき
るように、画面全体にわたって領域の大きさを変えなが
らφの値を計算しながら探索するようにしてもよい。例
えば、図４ではぼけを検出するための単位領域を一定の
大きさに固定した場合を示したが、このようにせず単位
領域を動的に変化させることで、例えば図６および図７
に示すように動画像の貼り付け位置の大きさを動的に変
化させるようにしてもよい。

【００６５】（４）さらに、動画像の表示領域の形状は
長方形または正方形に固定せずに可変するようにしても
よい。例えば、動画像の表示領域の角が患部に触れてし
まう場合には、図６に示したように動画像の表示領域を
小さくせざるを得ない。しかし、例えば図８に示すよう
に動画像の表示領域の形状を方形としないで自由な形状
にすると、静止画像の患部部位を避けてできる限り大き
な動画像表示領域を確保できる。

【００６６】（５）また、動画像の表示領域の形状を方
形に固定する場合には、動画像表示領域を貼り付ける位
置に静止画の患部領域があっても、この患部領域の精細
度が所定レベル以下であれば、当該患部領域はそれほど
重要な部位ではないと判断して、この患部領域に上記動
画表示領域を重ねて表示するようにしてもよい。図９は
その表示例を示すものである。

【００６７】（６）さらに、静止画像の全領域を探索し
ても評価値φの値がしきい値Φ以下となる条件を満たす
領域が見つからなかった場合には、静止画像の全領域が
重要領域とみなして、動画像を貼り付けないようにする
とよい。

【００６８】なお、このように動画像表示領域を貼り付
けるための領域が見つからなかった場合には、その旨を
患者側の端末装置１００Ａから医師側の端末装置３００
Ａに伝送して医師に通知し、医師が表示画面を見ながら
手操作により任意の位置に動画像表示領域を設定できる
ようにしてもよい。

【００６９】（７）また、例えば図１０に示すように動
画像表示領域の貼り付け位置が静止画像の患部に接触す
る場合には、図１１に示すように医師が手操作で静止画
像の表示位置を移動させる。これによっても動画像表示
領域が静止画像の患部部位に接触しないようにできる。

【００７０】なお、静止画の表示位置を移動させる手法
としては、表示装置３０５における静止画像の表示位置
を移動させるもの以外に、医師の遠隔操作により患者側
の端末装置１００Ａのカメラ駆動部１０６を駆動させ、
これによりカメラ１０１の向きを変えて図１１に示した
アングルになるようにしてもよい。

【００７１】（８）また、図１に示した構成では、カメ
ラ１０１から出力されたＲＧＢ信号をＲＧＢ／ＹＩＱ変
換部１０７で輝度信号と色差信号に変換していたが、図
１２に示すようにＲＧＢ信号を直接利用してもよい。Ｒ
ＧＢ信号を直接利用することにより、特定の色について
画像の精細具合を調べることができる。例えば、患者の
患部を検査する場合には肌色を対象として、肌色の精細
具合を調べることにより、患部近傍を容易に探索するこ
とができる。

【００７２】すなわち、ＲＧＢの各信号はそれぞれ画素
ブ口ック化部１２１，１２２，１２３にそのまま入力さ
れ、ここで各々所定画素ずつにブロック化されたのちＤ
ＣＴ計算部１２４，１２５，１２６でＤＣＴ計算され
る。そして、そのＤＣＴ計算値は静止画符号化部１２７
に入力されて、ここでＪＰＥＧ圧縮される。

【００７３】またそれとともに上記各ＤＣＴ計算部１２
４，１２５，１２６により得られたＤＣＴ計算値は、ぼ
け領域の検出のために制御部１０３Ｂに入力される。制
御部１０３Ｂでは、Ｒ信号、Ｂ信号およびＧ信号の各画
素ブロックにおける精細度（ぼけ具合）をそれぞれ以下
に示す評価式により求める。

【数５】

【００７４】

【数６】

【００７５】

【数７】

【００７６】なお、上記各式における重み付け値α１〜
α９は、特定の色（例えば肌色）に対するＲＧＢ成分の
貢献具合を加味して、実験により最適な値が選ばれる。

【００７７】そして、

【数８】

【００７８】より、特定の色における対象調査領域の高
周波成分の評価値φが計算される。そして、この評価値
φが予め決められたしきい値Φを超えているか否かが

【数９】

【００７９】で表される判定式により判定され、超えて
いる場合にこの領域は肌色成分が多いと判定される。

【００８０】例えば、図１３において判定領域のうち、
斜線で表した領域が肌色について上記条件式を満足して
いる場合には、この領域が全画面において肌色について
ぼけの度合いが最も少なく、焦点が合っていることを示
している。

【００８１】そして、この領域をさらに見やすくするた
めに、上記判定領域を画面の端部から中央部に移動させ
る。この場合、移動方法には医師側の端末装置３００Ｂ
において表示装置３０５の表示画面上で画面全体を斜め
右上に移動する方法と、医師の操作により患者側の端末
装置１００Ｂのカメラ駆動部１０６を遠隔制御してカメ
ラ１０５のアングルを調整することで、患部が中央部に
位置するように表示位置を移動させる方法がある。

【００８２】（９）また、前記判定式による判定で一旦
選択領域が決まった後、この領域についてある特定の色
についての評価値φが最も大きくなるようにカメラ駆動
部１０６の焦点機構を調整し、この状態で患部をカメラ
１０５で撮像してその撮像画像データを評価するという
手順を繰り返すことにより、評価値φを最大にすること
ができる。すなわち、ある特定の色に関して該当する領
域内で最も鮮明な状態に追い込むことができる。（１
０）上記（８）および（９）では、患部の特定の色を対
象としてＲＧＢ信号の貢献度合いを評価の基準としてい
る。しかし、輝度信号により患部における精細度の評価
を行うことにより、精細領域またはそれ以外のぼけ領域
を検出してもよい。

【００８３】（１１）一般的に、ＪＰＥＧ圧縮は非可逆
圧縮で使用することが多く、画像を１０分の１、あるい
は２０分の１程度に圧縮することが可能である。しか
し、ＪＰＥＧ圧縮として可逆圧縮方式を使用してもよ
い。圧縮比率は２分の１あるいは３分の１程度で小さい
が、医師側の端末装置で画像を元の状態に完全に再現で
きる利点がある。

【００８４】図１５は、前述の可逆圧縮方式を本発明に
応用した場合のシステム構成を示すものである。患者側
の端末装置１００Ｃにおいて、カメラ１０５から出力さ
れたＲＧＢ信号は、ＲＧＢ／ＹＩＱ変換部１０７で輝度
信号と色差信号に変換されたのち、静止画符号化部１３
０に入力されてここでＪＰＥＧ可逆圧縮される。そし
て、この符号化画像データは、通信Ｉ／Ｆ１０４から通
信網２００を介して医師側の端末装置３００Ｃに伝送さ
れる。

【００８５】医師側の端末装置３００Ｃでは、上記符号
化画像データが通信Ｉ／Ｆ３０１で受信されたのち静止
画復号化部３０４でＪＰＥＧ伸長され、これにより元の
画像に再現される。そして、この再現された輝度信号と
色差償号は、ＹＩＱ／ＲＧＢ変換部３０９でＲＧＢ信号
に変換され、このＲＧＢ信号は表示装置３０５に入力さ
れて表示される。

【００８６】一方、上記静止画復号化部３０４から出力
された各信号のうちの輝度信号は、画素ブロック化部３
０６で所定画素単位で画素ブロック化されたのちＤＣＴ
計算部３０７でＤＣＴ計算され、その計算値が制御部３
０２Ｃに入力される。制御部３０２Ｃでは、上記ＤＣＴ
計算値をもとに評価値φが求められ、さらにこの評価値
φがしきい値Φ以下となるか否かが判定される。そし
て、この判定によりφ＜Φとなる領域が見つかった場合
に、この領域に動画像表示領域を設定してここに別途患
者側の端末装置１００Ｃから伝送された患者の動画像を
表示させる。

【００８７】この方式はＪＰＥＧ圧縮できる比率が小さ
いため、非可逆圧縮に比較すると通信量が大きくなる欠
点がある。このため、通信回線の伝送速度が大きい通信
網に適している。しかし、その反面患者側の端末装置１
００ＣにおいてＤＣＴ計算を行わないため、その計算量
を少なくすることができ、これによって患者側の端末装
置１００Ｃのハードウェアの小型化を図り、安価なシス
テムを提供することができる。この効果は、患者の負担
を軽減して、システムの普及を促進する上で極めて有効
である。

【００８８】（１２）上記図１５に示したシステムで
は、ＪＰＥＧ可逆圧縮方式を採用することで医師側の端
末装置３００Ｃで原画像を完全に再現し、この原画像に
ついてＤＣＴ計算を行ってその計算値から患者の動画像
を貼り付ける位置を決定するようにしていたが、図１６
に示すように静止画像を圧縮せずに患者側の端末装置１
００Ｄから医師側の端末装置３００Ｄへそのまま伝送す
る方式にしてもよい。この方式は、通信網２００が高速
回線からなり、静止画像を特に圧縮して伝送量を少なく
する必要がない場合に適用できる。

【００８９】すなわち、カメラ１０５から出力されたＲ
ＧＢ信号は、ＲＧＢ／ＹＩＱ変換部１０７で輝度償号と
色差信号に変換されたのち、そのまま通信Ｉ／Ｆ１０４
から通信網２００を介して医師側の端末装置３００Ｄへ
伝送される。

【００９０】これに対し医師側の端末装置３００Ｄで
は、上記患者側の端末装置１００Ｄから伝送された輝度
信号および色差信号が、通信Ｉ／Ｆ３０１で受信された
のちＹＩＱ／ＲＧＢ変換部３０９でＲＧＢ信号に変換さ
れ、そのまま表示装置３０５に入力されて表示される。

【００９１】また、上記受信された輝度信号は、画素ブ
ロック化部３０６で所定画素単位で画素ブロック化され
たのちＤＣＴ計算部３０７でＤＣＴ計算され、その計算
値が制御部３０２Ｄに入力される。制御部３０２Ｄで
は、上記ＤＣＴ計算値をもとに評価値が求められ、さら
にこの評価値φがしきい値Φ以下となるか否かが判定さ
れる。そして、この判定によりφ＜Φとなる領域が見つ
かった場合に、この領域に動画像表示領域を設定してこ
こに別途患者側の端末装置１００Ｄから伝送された患者
の動画像を表示させる。

【００９２】（１３）以上述べてきた各実施形態では、
患者の全体像または上半身の像をカメラ１０１で撮像し
て、これを動画として医師側の端末装置へ伝送すること
により、表示装置３０５において患部の静止画に重ね合
わせて表示していた。

【００９３】しかし、例えば図１７のように患者の人物
画像をカメラ１０１で撮像してこれを静止画符号化部１
０８で静止画として符号化したのち医師側の端末装置３
００Ｅに伝送し、医師側の端末装置３００Ｅにおいて上
記静止画として伝送された患者の人物像を患部の静止画
像のぼけた領域に重ね合わせて表示するようにしてもよ
い。

【００９４】人物画像に対する静止画符号化は、患部の
静止画符号化と同様にＪＰＥＧ圧縮を使用すればよい。
しかし、患者の人物像を符号化する場合には、患部の静
止画符号化のように高精細な符号化の必要はなく、人物
画像の概略が把握できる程度の低解像度の画像圧縮でよ
い。

【００９５】また、患者の人物画像と患部の画像をとも
に静止画像として患者側の端末装置１００Ｅから医師側
の端末装置３００Ｅへ伝送した後は、静止画の送り直し
などが行われない限り通信回線では大容量のデータ伝送
が行われない。このため、このほとんど空き状態となっ
ている通信回線を使用して、高品質の音声データなどを
伝送するとよい。

【００９６】（１４）さらに、以上述べた各実施形態で
は、カメラ１０５で撮像する対象はカメラ１０１で撮像
された人物の患部に限定されていたが、カメラ１０５の
撮像対象はカメラ１０１で撮像される患者とは別の人の
患部でもよい。例えば、カメラ１０５により患者の患部
を撮像し、カメラ１０１により患者を介護する介護士ま
たは家族を撮像する。この場合、介護士または家族は、
医師とテレビ電話で通話を行いながら、カメラ１０５を
最適なアングルで患者の患部を撮像できるように調節す
る。

【００９７】また、カメラ１０５の撮像対象は患者の患
部に限定する必要はなく、患者の顔であってもよい。こ
のようにすることで、医師は患者の表情や顔色などから
様態を診断することができる。

【００９８】さらに、患者の病状を測定した計測器（例
えば体温計や血圧計等）の表示値をカメラ１０５で接写
して撮像し、医師に静止画として伝送してもよく、遠隔
検査に係わり、撮影して医師に精細な画像を送る用途に
使用してもよい。

【００９９】（１５）さらに、以上述べた各実施形態で
は、患者側の端末装置に２台のカメラ１０１，１９５を
設け、これらのカメラ１０１，１０５によりそれぞれ患
者の人物像と患部の静止画像を撮像していた。しかし、
１台のカメラにより患者の人物像と患部の静止画像をそ
れぞれ撮像するようにしてもよい。

【０１００】図１８はその構成を示す回路ブロック図で
ある。このシステムを動作させる場合には、医師が遠隔
操作によりカメラ駆動部１０６を駆動して、これにより
まずカメラ１０５を患者の患部に向けて撮像する。そう
するとこの場合には、カメラ１０５から出力されたＲＧ
Ｂ信号がＲＧＢ／ＹＩＱ変換部１０７で輝度信号と色差
信号とに変換され、しかるのち画素ブロック化部１１
１，１１３，１１４でブロック化されたのちＤＣＴ計算
部１１２，１１５，１１６でＤＣＴが施される。そし
て、これらのＤＣＴ計算部１１２，１１５，１１６によ
り得られたＤＣＴ計算値は、静止画符号化部１１７でＪ
ＰＥＧ圧縮されて符号化静止画データとなったのち、通
信Ｉ／Ｆ１０４から医師側のの端末装置３００Ｆに向け
送出される。また、このとき制御部１０３Ｆでは、上記
輝度信号のＤＣＴ計算値を用いて静止画像中のぼけ領域
が検出され、その検出データも医師側の端末装置３００
Ｆへ送出される。

【０１０１】次に、同じくカメラ駆動部１０６を制御し
てカメラ１０５を患者の上半身に向けることで患者の人
物像を撮像させる。このときのカメラ１０５のアングル
は以後固定される。そうするとこの場合には、カメラ１
０５から出力されたＲＧＢ信号が解像度変換部１０９に
入力され、ここで動画伝送用の低解像度の信号に変換さ
れる。例えば、動画符号化方式としてＨ．２６１方式を
採用している場合には、画像の共通フォーマットは３２
５画素×２８８ライン×３０フィールドに変換される。
そして、この変換後の信号は動画符号化部１０２でＨ．
２６１方式により動画として符号化され、しかるのち通
信Ｉ／Ｆ１０４から医師側の端末装置３００Ｆに向け送
出される。

【０１０２】（１６）なお、以上述べた各実施形態で
は、患者の遠隔診断システムを例にとり説明したが、病
理検体や細菌、植物の組織、鉱物の組成等の検査対象物
の顕微鏡画像を撮像してこれを静止画像として伝送し、
かつこれと並行して上記検査対象物の全体像を撮像して
これを符号化して伝送するシステムに本発明を適用して
もよい。また容疑者の指紋を撮像してこれを静止画像と
して伝送するとともに、容疑者の顔を撮像してこれを符
号化して伝送し、これらを照合センタで表示装置にマル
チウインドウ表示するシステムに本発明を適用してもよ
い。

【０１０３】さらに、本発明の画像表示制御方式は、複
数の撮像画像を通信回線を介して伝送するシステム以外
に適用することもできる。例えば、検査対象物について
異なるアングルから撮像した複数の画像や、異なる対象
物をそれぞれ撮像した複数の画像を、その場で表示装置
にマルチウインドウ表示する装置に適用できる。

【０１０４】

【発明の効果】以上説明したようにこの発明では、一つ
の表示画面に、第１の画像と第２の画像とをマルチウイ
ンドウ表示する画像表示制御方式において、上記表示画
面に表示される第１の画像中から精細度が所定レベルに
満たない低精細領域および精細度が所定レベル以上の高
精細領域のうちの少なくとも一方を検出し、その検出結
果をもとに第２の画像を表示する上で適当なぼけ領域を
検出する検出手段と、この検出手段で検出された第１の
画像中のぼけ領域に上記第２の画像を重ねて表示する制
御手段とを備えたものである。

【０１０５】したがってこの発明によれば、複数の画像
をマルチウインドウ表示する際に、表示位置の設定操作
を何ら行わなくても各画像を常に適切な位置関係で表示
することができ、これにより画像の視認性の向上とユー
ザの操作性の向上を図り得るマルチウインドウ画像表示
方式とこの方式を使用した遠隔検査システムをを提供す
ることができる。

【図面の簡単な説明】

【図１】本発明に係る画像表示制御方式を採用した遠隔
検査シスデムの第１の実施形態を示す回路構成図。

【図２】静止画像中のぼけ領域を検出するための処理を
説明するための図。

【図３】ぼけ領域の検出単位を画面全体にわたって等分
に分割した場合を示す図。

【図４】ぼけ領域の検出単位を画面全体にわたって不均
等に分割した場合を示す図。

【図５】ぼけ領域を画面の四隅の領域のみを選択的に設
定する場合を示す図。

【図６】患部が大きく人物画像が小さく表示される場合
の例を示す図。

【図７】患部が小さく人物画像が大きく表示される場合
を示す図。

【図８】動画表示領域の形状を自由に設定した場合の例
を示す図。

【図９】患部の表示部位に動画表示領域の一部を重ねて
表示した場合の例を示す図。

【図１０】患部の表示部位に動画表示領域の一部が重な
って表示される場合の例を示す図。

【図１１】患部の表示位置を移動させた場合の表示例を
示す図。

【図１２】この発明に係わる画像表示制御方式を採用し
た遠隔検査システムの他の実施形態の第１の例を示す回
路ブロック図。

【図１３】静止画中の患部領域を画面下部から中央部へ
移動させる際の動作を説明するための図。

【図１４】図１３による移動の結果を示す図。

【図１５】この発明に係わる画像表示制御方式を採用し
た遠隔検査システムの他の実施形態の第２の例を示す回
路ブロック図。

【図１６】この発明に係わる画像表示制御方式を採用し
た遠隔検査システムの他の実施形態の第３の例を示す回
路ブロック図。

【図１７】この発明に係わる画像表示制御方式を採用し
た遠隔検査システムの他の実施形態の第４の例を示す回
路ブロック図。

【図１８】この発明に係わる画像表示制御方式を採用し
た遠隔検査システムの他の実施形態の第５の例を示す回
路ブロック図。

【図１９】従来の遠隔検査システムの構成の一例を示す
回路ブロック図。

【図２０】従来のシステムにおける患者の動画像の表示
結果を示す図。

【図２１】従来のシステムにおける患部の静止画像の表
示結果を示す図。

【図２２】従来のシステムにおける患者の動画像および
患部の静止画像をマルチウインドウ表示した例を示す
図。

【図２３】従来のシステムにおける画像表示方式の問題
点を説明するための図。

【図２４】従来のシステムにおける画像表示方式の他の
問題点を説明するための図。

【符号の説明】

１００Ａ，１００Ｂ，１００Ｃ，１００Ｄ，１００Ｅ，
１００Ｆ…患者側の端末装置１０１…動画撮像用のカメラ１０２…動画符号化部１０３Ａ，１０３Ｂ，１０３Ｃ，１０３Ｄ，１０３Ｅ，
１０３Ｆ…患者側端末装置の制御部１０４…通信インタフェース（通信Ｉ／Ｆ）１０５…静止画撮像用のカメラ１０６…カメラ駆動部１０７…ＲＧＢ／ＹＩＱ変換部１０８，１３０…静止画符号化部１０９…解像度変換部１１０，１２０…ＪＰＥＧ圧縮部１１１，１１３，１１４，１２１，１２２，１２３…画
素ブロック化部１１２，１１５，１１６，１２４，１２５，１２６…Ｄ
ＣＴ計算部１１７，１２７…静止画符号化部２００…通信網３００Ａ，３００Ｂ，３００Ｃ，３００Ｄ，３００Ｅ，
３００Ｆ…医師側の端末装置３０１…通信インタフェース（通信Ｉ／Ｆ）３０２Ａ，３０２Ｂ，３０２Ｃ，３０２Ｄ，３０２Ｅ，
３０２Ｆ…医師側端末装置の制御部３０３…動画復号化部３０４…静止画復号化部３０５…表示装置３０６…画素ブロック化部３０７…ＤＣＴ計算部３０９…ＹＩＱ／ＲＧＢ変換部

Claims

【特許請求の範囲】

【請求項１】一つの表示画面に、第１の画像と第２の
画像とをマルチウインドウ表示するマルチウインドウ画
像表示方式において、前記表示画面に表示される第１の画像中から精細度が所
定レベルに満たない低精細領域および精細度が所定レベ
ル以上の高精細領域のうちの少なくとも一方を検出し、
その検出結果を基に第２の画像を表示するに適当なぼけ
領域を検出する検出手段と、この検出手段により検出された前記第１の画像中のぼけ
領域に前記第２の画像を重ねて表示する表示制御手段と
を具備したことを特徴とするマルチウインドウ画像表示
方式。
【請求項２】前記検出手段は、第１の画像を直交変換
してこの変換後の多項式の高周波項をもとに精細度の判
定を行い、その判定結果からぼけ領域を検出することを
特徴とする請求項１記載のマルチウインドウ画像表示方
式。
【請求項３】前記検出手段は、第１の画像全体につい
て所定の画素ブロックごとに離散コサイン変換を行った
のち、この変換により得られた複数の高周波項に重み係
数を乗じてその総和を求め、この総和を各画素ブロック
ごとの精細度の判定基準とし、この判定基準をもとに前
記第１の画像の各画素ブロックごとにぼけ領域か否かを
判定することを特徴とする請求項１記載のマルチウイン
ドウ画像表示方式。
【請求項４】前記検出手段は、第１の画像の輝度信号
から画像の精細度を調べ、この精細度が所定レベルに満
たない領域をぼけ領域として検出することを特徴とする
請求項１記載のマルチウインドウ画像表示方式。
【請求項５】前記検出手段は、第１の画像がカラー画
像である場合に、このカラー画像の特定の色についてそ
の精細度を調べ、この精細度が所定レベルに満たない領
域をぼけ領域として検出することを特徴とする請求項１
記載のマルチウインドウ画像表示方式。
【請求項６】前記検出手段は、第１の画像を大きさの
等しい複数の単位領域に分け、これらの単位領域ごとに
精細度の判定を行ってその判定結果からぼけ領域を検出
することを特徴とする請求項１記載のマルチウインドウ
画像表示方式。
【請求項７】前記検出手段は、前記単位領域の大きさ
および形状をを、第２の画像の大きさおよび第１の画像
中の重要部分の大きさに応じて動的に可変設定すること
を特徴とする請求項６記載のマルチウインドウ画像表示
方式。
【請求項８】前記検出手段は、第１の画像中の四隅に
相当する領域を選択してこれらの領域について精細度の
判定を行い、その判定結果からぼけ領域を検出すること
を特徴とする請求項１記載のマルチウインドウ画像表示
方式。
【請求項９】前記表示制御手段は、前記検出手段によ
り精細度が所定レベル未満のぼけ領域が複数検出された
場合には、これらの検出された領域の中から任意の領域
を選択して、この選択した領域に第２の画像を重ねて表
示することを特徴とする請求項１記載のマルチウインド
ウ画像表示方式。
【請求項１０】前記表示制御手段は、前記検出手段に
より精細度が所定レベル未満のぼけ領域が複数検出され
た場合には、これらの領域を操作者に知らせ、操作者が
上記複数の領域の中から一つを選択する操作を行った場
合に、この選択操作により指定された領域に第２の画像
を重ねて表示することを特徴とする請求項１記載のマル
チウインドウ画像表示方式。
【請求項１１】前記表示制御手段は、前記検出手段に
よりぼけ領域が検出されなかった場合には、第２の画像
の表示を行わないことを特徴とする請求項１記載のマル
チウインドウ画像表示方式。
【請求項１２】前記検出手段は、ぼけ領域が検出され
なかった場合に、前記表示画面における第１の画像の表
示位置および第１の画像を撮像する際の撮像アングルの
うちの少なくとも一方を変化させ、この変化後の第１の
画像中からぼけ領域を検出することを特徴とする請求項
１記載のマルチウインドウ画像表示方式。
【請求項１３】操作者が第２の画像の表示領域を指定
入力する操作手段をさらに備え、前記表示制御手段は、前記検出手段によりぼけ領域が検
出されなかった場合にはその旨を操作者に知らせ、これ
に対し操作者が前記操作手段により表示領域を指定する
操作を行った場合に、この操作により指定された領域に
第２の画像を重ねて表示することを特徴とする請求項１
記載のマルチウインドウ画像表示方式。
【請求項１４】操作者が第１の画像の表示位置および
大きさの少なくとも一方を可変する指示を入力するため
の操作手段をさらに備え、前記表示制御手段は、前記操作手段により入力された指
示内容および前記検出手段の検出結果に基づいて第２の
画像を表示する領域を決定し、この決定した領域に第２
の画像を重ねて表示することを特徴とする請求項１記載
のマルチウインドウ画像表示方式。
【請求項１５】第１の端末装置と、この第１の端末装
置に対し通信回線を介して接続される第２の端末装置と
を備え、第１の端末装置で被検体を異なる複数のアング
ルでそれぞれ撮像して第１の画像および第２の画像を
得、これら第１および第２の画像を前記通信回線を介し
て第２の端末装置に伝送して表示部にマルチウインドウ
表示する遠隔検査システムにおいて、前記第１および第２の画像をそれぞれ符号化圧縮して前
記第１の端末装置から第２の端末装置へ伝送する符号化
送信手段と、前記第１の画像中から精細度が所定レベルに満たないぼ
け領域および精細度が所定レベル以上の高精細領域のう
ちの少なくとも一方を検出する検出手段と、前記第１の端末装置から伝送された第１および第２の符
号化画像を前記第２の端末装置で復号伸張する受信復号
手段と、この受信復号手段により復号伸張された第１の画像を前
記表示部に表示するとともに、前記検出手段の検出結果
をもとに前記第１の画像中のぼけ領域を認識し、このぼ
け領域に前記受信復号手段により復号伸張された第２の
画像を重ねて表示する表示制御手段とを具備したことを
特徴とする遠隔検査システム。
【請求項１６】前記検出手段は、符号化送信手段が第
１の画像を非可逆圧縮方式により符号化圧縮して伝送す
る場合には、第１の端末装置において符号化送信手段に
よる符号化圧縮前にぼけ領域あるいは高精細領域の検出
を行ってその検出結果を第２の端末装置へ伝送し、前記表示制御手段は、前記第１の端末装置から伝送され
た検出結果をもとに第１の画像中のぼけ領域を認識し、
このぼけ領域に復号伸張された第２の画像を重ねて表示
することを特徴とする請求項１５記載の遠隔検査システ
ム。
【請求項１７】前記検出手段は、符号化送信手段が第
１の画像を可逆圧縮方式により符号化圧縮して伝送する
場合には、第２の端末装置において受信復号手段により
復号伸張された第１の画像からぼけ領域あるいは高精細
領域の検出を行ってその検出結果を表示制御手段に与
え、前記表示制御手段は、前記検出手段から与えられた検出
結果をもとに第１の画像中のぼけ領域を認識し、このぼ
け領域に復号伸張された第２の画像を重ねて表示するこ
とを特徴とする請求項１５記載の遠隔検査システム。