JP3824116B2 - 顕微鏡画像遠隔制御システム - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、顕微鏡画像の静止画像取得システムに関し、特に、全体参照画像作成後、遠隔地にて前記全体参照画像上で注視位置を指定することによって当該注視位置を中心とする高倍率静止画像を遠隔地からでも取得することに適用して有効な技術に関するものである。
【０００２】
【従来の技術】
従来、この種の全体参照画像上を指定することによって表示したい位置の高倍率静止画像を取得する手段として、特願平４−１６２７１５号の技術を挙げることができる。この技術では標本の全体像を把握するために、プレパラートを顕微鏡のステージにセットする前に専用のマクロ撮影のスタンドにセットして固定のサイズの全体参照画像として撮影し、さらに、高倍率の画像の撮影に関しては、該全体参照画像をブロックに分割し、この分割したブロックを高倍率で撮影している。
【０００３】
【発明が解決しようとする課題】
前記の従来技術では、全体参照画像を取得するために、専用のマクロ撮影のスタンドと専用のカメラが必要であった。その結果、全体参照画像を取得するという目的のために、経済的負担を強いられるという問題があった。
【０００４】
全体参照画像は、プレパラートを専用のマクロ撮影のスタンドにセットして固定サイズの画像として取込まれるので、顕微鏡のステージ上にプレパラートをセットし直す必要があり、かつ、取込める標本の大きさに制限があった。
【０００５】
専用のマクロ撮影のスタンドから顕微鏡のステージへプレパラートをセットし直す結果、専用のマクロ撮影のスタンドにセットして撮影した画像上の座標と、顕微鏡のステージにセットして撮影した画像上の座標との対応をとるのに手間がかかると共に、熟練を要するという問題があった。
【０００６】
また、標本の大きさに制限がある結果、標本が大きいときには所定領域の全てを撮影することができない結果必要な部分が表示されない全体参照画像が作成される場合があり、また、標本が小さいときには所定領域が全体参照画像のほんの一部分になってしまい不必要な部分まで取込むという無駄が生じる場合があるという問題もあった。
【０００７】
また、高精細静止画像を倍率を変えながら取得するので、似たような画像を含むような部分領域が複数箇所に発生するような病理画像では、特に、全体参照画像中のどの部分領域を何倍の倍率で取得済みであるのかを病理医が覚えておくことが非常に困難である。
【０００８】
本発明の目的は、遠隔地からでも顕微鏡の自動移動式ステージに置かれた標本の所定領域の全体参照画像上の必要な部分の高精細画像の取得を効率的に行うことが可能な技術を提供することにある。
【０００９】
本発明の他目的は、専用のマクロ撮影のスタンドと専用のカメラを使用することなく元の標本に近い全体参照画像を取得することが可能な技術を提供することにある。
【００１０】
本発明の他の目的は、全体参照画像上の任意の位置の位置情報とステージ制御座標値との関連付けを容易にすることが可能な技術を提供することにある。
【００１１】
本発明の他の目的は、様々なサイズの全体参照画像を取得することが可能な技術を提供することにある。
【００１２】
本発明の他の目的は、受信装置（病理医）側が指定した位置が中心になるような高精細画像の取得を短時間で、かつ容易に行うことが可能な技術を提供することにある。
【００１３】
本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述及び添付図面によって明らかにする。
【００１４】
【課題を解決するための手段】
本願において開示される発明のうち代表的なものの概要を簡単に説明すれば、以下のとおりである。
【００１５】
（１）顕微鏡の自動移動式ステージに置かれた標本の所定領域の全体参照画像を取得して送信する送信装置と、前記送信された全体参照画像を遠隔地で受信し、その全体参照画像中の注視位置の情報である注視位置情報を送信装置側に送信し、前記注視位置情報に基づいた高倍率画像を要求する受信装置と、を有する顕微鏡画像遠隔制御システムであって、前記送信装置は、前記顕微鏡のステージ制御の方向が変化したかしないかによって画像合成に使用する重複領域の大きさを調整する手段と、前記顕微鏡の自動移動式ステージを前記重複領域があるように制御しながら所定倍率で前記標本の分割撮影を繰り返す手段と、この分割撮影により得られた複数枚の画像とその複数枚の画像それぞれに関する複数個のステージ制御座標値をメモリに取込む手段と、前記メモリ上で前記重複領域があるように分割撮影された複数枚の画像を平面的な位置関係に矛盾が生じないようにつなぎ合わせて前記全体参照画像を作成する手段と、前記複数個のステージ制御座標値を複数個のドット単位の平面座標値に変換する手段と、前記複数枚の画像をつなぎ合わせて作成された全体参照画像に前記複数個のドット単位の平面座標値を付加して前記受信装置に送信する手段と、前記受信装置から受信した前記注視位置情報に基づいて前記注視位置の高倍率画像を取得する手段と、前記高倍率画像を前記受信装置に送信する手段と、を有し、前記受信装置は、注視位置の指定を前記ドット単位の平面座標値により指定し、前記送信装置に注視位置情報を送信する手段を有することを特徴とする。
【００１７】
（２）前記（１）の顕微鏡画像遠隔制御システムにおいて、前記送信装置は、前記顕微鏡のステージ制御の方向によってステージ制御の誤差を計算し画像合成に使用する重複領域の大きさを最適にする手段を有することを特徴とする。
【００１８】
（３）前記（１）または（２）の顕微鏡画像遠隔制御システムにおいて、前記送信装置は、前記顕微鏡のステージに置かれた標本の所定領域をラインセンサカメラで全体参照画像を作成する手段を有することを特徴とする。
【００２１】
前述の手段によれば、顕微鏡の自動移動式ステージを制御しながら所定倍率で前記標本の分割撮影を繰り返し、この分割撮影により得られた画像群をメモリに取込み、該メモリ上で分割撮影された画像群の平面的な位置関係に矛盾が生じないようにつなぎ合わせることによって前記全体参照画像を合成するので、専用のマクロ撮影のスタンドと専用のカメラを用意し、マクロ撮影のスタンドにプレパラートをセットしなくても全体参照画像を取込むことができる。また、専用のマクロ撮影のスタンドを使用したら標本が大きすぎたり小さすぎたりして全体参照画像が適切に取得できなかったものでも、所定領域の全体参照画像を最も適した任意の大きさの画像として合成することができる。
【００２２】
また、合成された全体参照画像の任意の座標とステージ制御座標との対応付けがされているので、全体参照画像の任意の座標と顕微鏡のステージ制御座標との対応をとるのに熟練を必要としないし、手間もかからない。
【００２３】
また、全体参照画像の注視位置情報をその全体参照画像の座標値で指定し、次の送信画像を該注視位置を中心にその周辺部分を拡大して取得する手段の両方の手段によって次の送信画像の中心の位置を指定し、最も効率的な画像の取得ができる。
【００２４】
【発明の実施の形態】
以下、図面を参照して本発明の実施例を詳細に説明する。
【００２５】
（実施例１）
図１は本発明の顕微鏡画像遠隔制御システムを実現するためのハードウェア構成を示すブロック図であり、１はＣＣＤカメラ、２は顕微鏡、３は標本、４は自動移動式ステージ（以下、単にステージという）、５は送信装置（例えばパソコンを用いる：臨床側のパソコン）、５Ａは送信装置５の表示装置、６は通信回線、７は受信装置（例えばパソコン等を用いる：病理医側のパソコン）である。
【００２６】
本実施例１の顕微鏡画像遠隔制御システムは、図１に示すように、送信装置５とＣＣＤカメラ１は、ＳＣＳＩケーブルで接続され、送信装置５とステージ４は、ＲＳ−２３２Ｃケーブルで接続されている。送信装置５と受信装置７は通信回路６で接続されている。通信回路６としてはＩＳＤＮ回線、アナログ回線の他に、光ケーブル回線などを用いることもできる。
【００２７】
前記ＣＣＤカメラ１は顕微鏡２で拡大した標本３を静止画像として撮影する電子撮像装置であり、撮影した静止画像はＳＣＳＩ等の通信インタフェース経由で送信装置５のメモリに蓄積される。
【００２８】
ステージ４は、水平方向に移動させる手段と、動かない座標系であるステージ制御座標を顕微鏡２の上に持ち、送信装置５よりＲＳ−２３２Ｃ等の通信インタフェース経由での指示による基準点がステージ制御座標上の指定した点にくるように水平方向に自動的に移動させる手段と、現在のステージ位置の基準点がステージ制御座標のどこの座標値にあるかをＲＳ−２３２Ｃ等の通信インタフェース経由で送信装置５に取込む手段とを有している。
【００２９】
送信装置５は、ＣＣＤカメラ１で撮影した画像群をメモリ上に取込む手段と、前記画像群をメモリ上で平面的な位置関係に矛盾が生じないようにつなぎ合わせて全体参照画像を作成する手段と、メモリ上の静止画像を通信回線６を通して受信装置７に送信する手段と、ＣＣＤカメラ１で撮影した画像群及び全体参照画像を表示装置５Ａに表示する手段と、受信装置７との通信を開始する手段と、送信装置５からの通信を終了する手段と、ステージ４の制御位置を指定する手段とを有する。
【００３０】
受信装置７は、送信装置５から送信された静止画像を表示装置７Ａに表示する表示手段と、送信装置５との通信を開始する手段と、注視位置を指定する手段と、指定した位置情報を送信装置５に送信する手段と、送信装置５との通信を終了する手段とを有する。
【００３１】
通信回線６は診断作業中接続されていても構わないが、この実施例１では、データを送信するときのみに通信回線６を接続するように送信装置５及び受信装置７の通信を開始する手段と通信を終了する手段とを活用することとする。データを送信するときにのみ通信回線６を接続するようにすることによって、通信コストの削減を図ることができる。
【００３２】
図２は本実施例１の顕微鏡画像遠隔制御システムの動作を説明するためのフローチャート、図３は本実施例１の顕微鏡画像遠隔制御システムにおけるステージ制御フローチャートであり、本発明中の全体参照画像として取込みたい範囲の座標値に関してステージ４を制御するフローを示す。
【００３３】
図１及び図２を参照して送信装置５及び受信装置７内のソフトウェアの動作を以下に説明する。
【００３４】
実施例１を説明するために必要である前提条件を記述する。標本３はプレパラートの上に乗せられたもの全体であり、その標本３の中でも診断するために静止画像として受信装置（病理医側）７へ伝送したい部分領域を所定領域という。参照画像は次の送信画像を取得するために使用する画像であり、所定領域の全体参照画像とは所定の全体が含まれる参照画像である。注視位置とは高精細画像を取得したい領域の中心の位置である。
【００３５】
顕微鏡２にＣＣＤカメラ１を接続して顕微鏡２で拡大した画像をＣＣＤカメラ１で撮影し、送信装置５に標本３の画像を取込むためには、接眼レンズの代わりにリレーレンズを使用する。対物レンズの倍率、リレーレンズの倍率、それらのレンズを使用したときのＣＣＤカメラ１で取込む画像の実際のサイズとの関係の例を表１に示し、この例を使用して以降の実施例１を説明する。
【００３６】
【表１】

【００３７】
今、ＣＣＤカメラ１で取込んだ画像の顕微鏡２のステージ制御座標は、画像の中央位置のステージ制御座標であるように設定してある。また、顕微鏡１のステージ制御座標はミクロンメートル（μｍ）単位の値で与えられる。１倍のリレーレンズと４倍の対物レンズを使用してＣＣＤカメラ１で取込んだ静止画像の左上の角の位置のステージ制御座標から中心位置のステージ制御座標へ向かうベクトルをＰと定義する。
【００３８】
まず、標本３を低倍率レンズでの取込み可能領域で分割してメモリに取込む方法を説明する。この方法は、全体参照画像として取込みたい範囲のステージ制御座標値をメモリに取込む手段と、メモリに取込んだステージ制御座標値に関してステージを制御しながら画像をメモリに取込む手段とに分けられる。
【００３９】
以下に、全体参照画像として取込みたい範囲のステージ制御座標値をメモリに取込む手段を説明する。
【００４０】
顕微鏡２のステージ４に標本３がセットしてあり、対物レンズは４倍、リレーレンズは１倍になっている。まず、全体参照画像として取込みたい範囲が含まれるような長方形領域の左上の角が取込み可能領域の中央より右下になるような位置でその顕微鏡２のステージ制御座標を取込む。
【００４１】
次に、全体参照画像として取込みたい範囲が含まれるような長方形領域の右下の角が取込み可能領域の中心より左上になるような位置でその顕微鏡のステージ制御座標を取込む。全体参照画像の左上のステージ制御座標と右下のステージ制御座標の取込みは、右上のステージ制御座標と左下のステージ制御座標の取込みに置き換えてもよい。
【００４２】
図２及び図３を参照して、メモリに取込んだステージ制御座標値に関してステージを制御しながら画像をメモリに取込む手段を説明する。左上のステージ制御座標値を（ｘ１，ｙ１）、右下のステージ制御座標値を（ｘ２，ｙ２）とする。ただし、ｘ１＜ｘ２，ｙ１＜ｙ２である。また、ｘ１，ｙ１、ｘ２，ｙ２の単位はミクロンメートルである。｜ｘ１−ｘ２｜／２２１０≦ｋ１となる最小の自然数ｋ１と、｜ｙ１−ｙ２｜／１６５０≦ｋ２となる最小の自然数ｋ２を計算する（Ｓ３０１）。ステージ４を、顕微鏡２の視野の中心が（ｘ１，ｙ１）＋Ｐのステージ制御座標値になるよう制御する（Ｓ３０２）。
【００４３】
Ｐはメモリへの１回の静止画像取込みサイクルにおいて該画像の中心位置を示す（ｘ１，ｙ１）からの相対座標である。分割撮影する静止画像それぞれに１つのＰの値が定まる。その位置で１つの分割された３２０＊２４０ドットの静止画像として顕微鏡画像をメモリに取込み、同時に分割撮影した画像の中心の位置であるステージ制御座標値（ｘ１，ｙ１）＋Ｐをそれぞれの分割画像に対応するよう記録する（Ｓ２０１，Ｓ３０３）。
【００４４】
自動移動式ステージ４を取込み可能領域が右方向になるように２２１０ミクロンメートル移動するように制御し（Ｓ３０４）、顕微鏡画像を３２０＊２４０ドットの静止画像としてメモリ上に取込み、同時に分割撮影した画像の中心の位置であるステージ制御座標値（ｘ１＋２２１０，ｙ１）＋Ｐを記録する（Ｓ３０７）。これを（ｋ１−１）回繰り返したら、今度はステージを取込み可能領域が下方向になるように１６５０ミクロンメートル制御し（Ｓ３０９）、同様に３２０＊２４０ドットの静止画像としてメモリ上に取込み、同時に撮影画像の中心の位置のステージ制御座標値を記録する（Ｓ３１２）。さらに、ステージを取込み可能領域が左方向になるように２２１０ミクロンメートル制御し（Ｓ３１３）、３２０＊２４０ドットの静止画像としてメモリ上に取込み、同時に撮影画像の中心の位置のステージ制御座標値を記録する（Ｓ３１６）。同様にステージの制御を行い（Ｓ３１８）、（ｋ１＊ｋ２）枚の静止画像のメモリ上への取込みと、それぞれの静止画像の中心の位置のステージ制御座標値の記録を行う（Ｓ２０２，Ｓ３２１）。
【００４５】
次に、図２を参照して、メモリに取込んだ３２０＊２４０ドットの静止画像群をメモリ上で平面的な位置関係に矛盾が生じないようにつなぎ合わせて全体参照画像を作成する方法を説明する。
【００４６】
メモリに取込んだ３２０＊２４０ドットの静止画像群をメモリ上で平面的な位置関係に矛盾が生じないようにつなぎ合わせて全体参照画像を作成するために、分割撮影された静止画像の中心の位置に記録された顕微鏡のステージ制御座標値をドット単位の平面座標値に変換する（Ｓ２０３）。
【００４７】
変換の方法としては、中心の位置に記録されたステージ制御座標値（ｘｉ，ｙｉ）（単位はミクロンメートル）を平面座標値（（ｘｉ−ｘ１）／６．９＋１６０，（ｙｉ−ｙ１）／６．９＋１２０）＝（ｘ，ｙ）（単位はドット）（６．９＝３２０／２２１０）に変換する方法を採用する。この方法を採用することによって、顕微鏡のステージ制御座標を撮影された画像上の位置を示すドット単位の平面座標に変換することができ、かつ画像の左上の角の平面座標値を（０，０）とすることができる。
【００４８】
メモリ上に記録されている（ｋ１＊ｋ２）枚の３２０＊２４０の静止画像を、それぞれの画像の中心の位置として記録されている平面座標値に基づいて平面座標軸上に順番に配置することによって、画像をつなぎ合わせて、全体参照画像を作成する（Ｓ２０４）。ここで、画像を見やすくするためにシームレス処理を行ったり、３２０＊２４０の静止画像群に発生する輝度のむらをなくすための画像処理を行っても良い。
【００４９】
受信装置７との通信を開始する手段で回線を接続する。ドット単位の平面座標値が（ｋ１＊ｋ２）箇所に記録された全体参照画像を受信装置７に送信する（Ｓ２０５）。全体参照画像送信終了時に受信装置７のパソコンとの通信を終了する手段で回線を切断する。
【００５０】
受信装置７ではドット単位の平面座標値が（ｋ１＊ｋ２）箇所に記録された全体参照画像を受信し、表示装置（ディスプレイ）７Ａに表示する。
【００５１】
次に、注視位置を指定し、この指定された注視位置の平面座標値を取得する方法について説明する。
【００５２】
受信したドット単位の平面座標値が記録された全体参照画像上で、高精細静止画像を取得したい注視位置を指定する。全体参照画像の左上の角の平面座標値が（０，０）であることから前記指定した注視位置のドット単位の平面座標値を計算する。あるいは、前記指定した注視位置の平面座標値と（ｋ１＊ｋ２）個の全体参照画像上に記録されている平面座標値との距離を計算して、距離の値が最も小さい全体参照画像上の位置と平面座標値を認識し、その位置から何ドットずつ離れているか計算して指定した注視位置の平面座標値を求めてもよい（Ｓ２０６）。
【００５３】
以上の方法で指定した注視位置の平面座標値を求めたら、送信装置５のとの通信を開始する手段で通信回線６を接続し、指定した注視位置のドット単位の平面座標値を送信装置５に送信する（Ｓ２０７）。座標値送信終了時に送信装置５との通信を終了する手段で通信回線６を切断する。
【００５４】
受信した平面座標値を顕微鏡２上のミクロンメートル単位のステージ制御座標に変換する（Ｓ２０８）。変換の方法としてはドット単位の平面座標値を（ｘ，ｙ）としたとき、ステージ制御座標値（ｘｉ，ｙｉ）＝（（ｘ−１６０）＊６．９＋ｘ１，（ｙ−１２０）＊６．９＋ｙ１）を採用する。この座標値の変換については、受信装置７で座標データの送信をする前に行って、ミクロンメートル単位の顕微鏡２のステージ制御座標値を送信装置５に送信しても良い。
【００５５】
受信装置７で座標データの送信をする前に行って、ミクロンメートル単位の顕微鏡２のステージ制御座標値を送信装置５に送信しても良い。
【００５６】
受信装置７が指定した注視位置を次の送信画像の中心とするために、ステージ制御座標値が（（ｘ−１６０）＊６．９＋ｘ１，（Ｙ−１２０）＊６．９＋ｙ１）になるようにステージを制御する（Ｓ２０９）。高倍率の対物レンズで、高精細静止画像としてメモリに取込む。
【００５７】
高精細静止画像としてメモリに取込んだら、受信装置７との通信を開始する手段で通信回線６を接続する。該高精細静止画像を受信装置７に送信する（Ｓ２１０）。該高精細静止画像送信終了時に受信装置７との通信を終了する手段で通信回線６を切断する。
【００５８】
以上の本実施例１の説明では、全体参照画像を４倍の対物レンズで作成すること、リレーレンズが１倍であることを前提に述べたが、勿論、その他の倍率でも構わない。その場合は、その倍率の対物レンズ、リレーレンズで拡大したときの取込んだ画像の実際のサイズから計算式を算出し直す。
【００５９】
また、データ送信時に通信回線６を切断し、データ送信終了時に通信回線６を切断する実施例について述べたが、送信装置５及び受信装置７のどちらかの手段として通信回線６が接続されている場合、例えば、１５秒以上データが送信されてこなかったら自動的に通信回線６を切断するような手段を持たせてもよい。
【００６０】
本実施例１の顕微鏡画像遠隔制御システムの用途として遠隔病理診断について説明する。
【００６１】
まず、送信装置（臨床側）５は標本３を顕微鏡２のステージ４にセットし、対物レンズを４倍にする。全体参照画像として取得する範囲を決定しその範囲が含まれるような長方形領域を決める。その長方形領域の左上の角が取込み可能領域の中心より右下にくるようにステージ４を制御する。その位置の顕微鏡２のステージ制御座標を取込む。さらに、前記長方形領域の右下の角が取込み可能領域の中心より左下にくるようにステージ４を制御する。その位置の顕微鏡のステージ制御座標を取込む。
【００６２】
前記ステージ座標群を基に、送信装置（臨床側）５のパソコンの「ステージ４を制御しながら画像をメモリに取込む手段」及び「メモリに取込んだ静止画像群をメモリ上でつなぎ合わせて全体参照画像を作成する手段」が働き、全体参照画像が作成され、表示装置５Ａに表示される。
【００６３】
全体参照画像を受信装置（病理医側）７に送信する。対物レンズを高倍率に換えておく。
【００６４】
受信装置７は受信した全体参照画像を見て、注視位置をクリックするなどして指定する。受信装置７の「指定した位置の平面座標値を取得する手段」及び「指定した位置の平面座標値を送信装置へ送信する手段」が働き、指定した注視位置の平面座標値が送信装置５へ送信される。
【００６５】
送信装置５はその送信を受信し、送信装置５の「受信した平面座標値をステージ制御座標に変換する手段」及び「該ステージ制御座標値が画像の中心の位置のステージ制御座標値と同一になるようにステージを制御する手段」が働き、高倍率の高精細静止画像が作成され、表示装置５Ａに表示される。前記高精細静止画像を受信装置７のパソコンに送信する。
【００６６】
受信装置７では前記高精細静止画像を表示装置７Ａに表示し、診断を下す。他の注視位置の高精細静止画像を取得したいときは、再度全体参照画像上で注視位置を指定することによって、同様に取得する。
【００６７】
以上の説明からわかるように、本実施例１によれば、顕微鏡２のステージ４を制御しながら所定倍率で標本３の分割撮影を繰り返し、この分割撮影により得られた画像群をメモリに取込み、該メモリ上で分割撮影された画像群の平面的な位置関係に矛盾が生じないようにつなぎ合わせることによって全体参照画像を作成するので、専用のマクロ撮影のスタンドと専用のカメラを用意し、マクロ撮影のスタンドにプレパラートをセットしなくても全体参照画像を取込むことができる。また、専用のマクロ撮影のスタンドを使用したら標本が大きすぎたり小さすぎたりして全体参照画像が適切に取得できなかったものでも、所定領域の全体参照画像を最も適した任意の大きさの画像として作成することができる。
【００６８】
また、作成された全体参照画像の任意の座標とステージ制御座標との対応付けがされているので、全体参照画像の任意の座標と顕微鏡のステージ制御座標との対応をとるのに熟練を必要としないし、手間もかからない。
【００６９】
また、全体参照画像の注視位置情報をその全体参照画像の座標値で指定し、次の送信画像を該注視位置を中心にその周辺部分を拡大して取得する手段の両方の手段によって次の送信画像の中心の位置を指定し、最も効率的な画像の取得ができる。
【００７０】
（実施例２）
前記実施例１では送信装置５及び受信装置７のパソコン上で指定したステージ制御座標値とメモリに取込んだ画像の中心の位置の実際のステージ制御座標値とが完全に一致することを前提として説明したが、顕微鏡２のステージ制御の精度によって受信装置７のパソコン上で指定したステージ制御座標値とメモリに取込んだ画像の中心の位置の実際のステージ制御座標値とが異なっている場合がある。それ故、前記実施例１に従って全体参照画像を作成すると所定領域中に全体参照画像上に表示されないような部分画像領域が発生してしまう可能性がある。
【００７１】
その問題を解決するためには、以下のことを行う。
【００７２】
図４は本発明の実施例２のステージを制御しながら画像を取込む手段を説明するための図である。図４中の実線の四角はＣＣＤカメラ１で撮影しメモリに取込む画像を示し、点線の四角は実線の四角のうち全体参照画像を作成するためにメモリに取込む画像を示し、矢印はステージの移動を示している。
【００７３】
本実施例２でも前記実施例１と同様に標本３をメモリへの取込み可能領域で分割して、その後その分割に基づいてステージ４を制御しメモリに取込む。さらにメモリに取込んだ画像をつなぎ合わせて全体参照画像を作成するという方法をとる。しかし、本実施例２では前記実施例１と異なり、図４に示すように、画像が重複するようにステージ４を制御し画像をメモリに取込む。そして、その重複領域中の同一の大きさの長方形画像同士の差を求めることによってその差がもっと小さくなるように画像をつなぎ合わせる位置を決める方法を採用する。
【００７４】
前記長方形画像は、例えば１枚目にメモリに取込んだ画像と２枚目のメモリに取込んだ画像の重複領域の長方形部分領域、２枚目にメモリに取込んだ画像と３枚目にメモリに取込んだ画像の重複領域の長方形部分領域といったように、ステージ４を制御するその前後の画像の重複領域の長方形部分領域とする。つなぎ合わせる隣接する２枚の画像に対して顕微鏡２のステージ制御誤差が生じなかった場合重なって取込まれる領域を重複領域とする。
【００７５】
図５はステージ制御前の重複領域中の小領域を示す図、図６は隣接する画像の重複領域の大きさを求める処理手順を示すフローチャート、図７はメモリ上で平面的な位置関係に矛盾が生じないようにつなぎ合わせる処理手順を示すフローチャートである。
【００７６】
図４、図５、図６、図７を参照して、本実施例２の送信装置５内のソフトウェアの動作を次に説明する。
【００７７】
この実施例２では顕微鏡２のステージ制御の精度が１０ミクロンメートル以下であることを前提とする。また、２つの画像をつなぎ合わせるために必要な２つの画像の重なり合った長方形部分画像領域の短いほうの一辺の画素数を適当に決める。数値が大きければつなぎ合わせの精度は高くなるが処理に時間がかかるし、数値が小さければ処理にかかる時間が少なくてすむが精度が下がることを考慮して、適当な数値を設定する。本実施例２では２０ドットと定める。
【００７８】
機器の構成や機能、レンズの倍率による画像の実際のサイズ等の前提条件は、前記実施例１と同様とする。また、以下の説明では、全体参照画像は前記実施例１と同様に４倍の対物レンズ、１倍のリレーレンズを使用する。
【００７９】
図６を参照して、あらかじめ、つなぎ合わせる二つの画像の重複領域の短いほうの一辺の大きさを求めておく（Ｓ６０１）。これは｛（つなぎ合わせに必要な画素数）ドット＋（ステージ制御の最大誤差）ドット×２｝をミクロンメートル単位に計算しなおすことによって求める（Ｓ６０２）。これは対物レンズとリレーレンズの倍率に依存する。なぜならば、ステージ制御最大誤差１０ミクロンメートルがその倍率で拡大したとき何ドットに相当するかが変わってくるからである。
【００８０】
対物レンズの倍率が４倍でリレーレンズが１倍の場合、ステージ制御の最大誤差１０ミクロンメートルは、１０＊３２０／２２１０＝１．４より、ステージ制御の最大誤差は２ドットと計算できる。｛（ステージ制御の最大誤差）ドット×２＋（つなぎ合わせに必要な画素数）ドット｝＝２＊２＋２０＝２４となり、２４ドット必要という結果になる。２４ドットは２４＊２２１０／３２０＝１６５．８となり、この場合２つの画像の重複領域の短いほうの一辺は標本３の実際の大きさで１６６ミクロンメートル必要と計算できる（Ｓ６０３）。
【００８１】
以上の計算より、全体参照画像を作成するためにメモリに取込む部分はメモリに取込んだ画像の上下左右端から１６６／２＝８３ミクロンメートル分、２４／２＝１２ドットずつを取り除いた部分領域を中心にステージ制御の最大誤差である２ドットを限界に上下左右にずらした２５通りの部分領域画像のうちのいづれかということになる。その部分領域画像の大きさは図４の点線の四角で示したように、２２１０−１６６＝２０４４、１６５０−１６６＝１４８４より２０４４＊１４８４（ミクロンメートル）である。
【００８２】
次に、標本を低倍率レンズでの取込み可能領域で分割してメモリに取込む方法を説明する。この方法は、全体参照画像として取込みたい範囲のステージ制御座標値をメモリに取込む手段と、メモリに取込んだステージ制御座標値に関してステージ制御座標値をメモリに取込む手段と、メモリに取込んだステージ制御座標値に関してステージを制御しながら画像をメモリに取込む手段とに分けられる。
【００８３】
全体参照画像として取込みたい範囲のステージ制御座標値をメモリに取込む手段については前記実施例１のとおりとする。
【００８４】
図４を参照してメモリに取込んだステージ制御座標値に関してステージを制御しながら画像をメモリに取込む機能を説明する。この手段はほとんど前記実施例１の手段と同様であるので、前記実施例１と違う点だけを述べる。
【００８５】
メモリに取込む部分領域画像の大きさが２０４４＊１４８４（ミクロンメートル）であるので、ｋ１，ｋ２を求める計算式は（｜ｘ１−ｘ２｜）／２０４４≦ｋ１、（｜ｙ１−ｙ２｜）／１４８４≦ｋ２である。最初にステージを制御するステージ制御座標値は（ｘ１−８３，ｙ１−８３）＋Ｐであり、最初に記録するステージを制御座標値も（ｘ１−８３，ｙ１−８３）＋Ｐである。ステージの制御については、左右方向は２０４４ミクロンメートル、下方向は１４８４ミクロンメートル制御する。
【００８６】
図７を参照して、メモリに取込んだ３２０＊２４０の静止画像群をメモリ上で平面的な位置関係に矛盾が生じないようにつなぎ合わせて全体参照画像を作成する方法を説明する。この方法は、ステージ制御前の重複領域中の小領域を指定する方法と、相関係数を計算して合成位置を決定し画像をつなぎ合わせる方法とに分けられ、両方法を組み合わせて全体参照画像を作成する。
【００８７】
まず、一枚目の静止画像をメモリに取込む。取込む画像は３２０＊２４０で取込んだ画像のうち、上下左右１２ドットずつを取り除いた２９６＊２１６の画像とする。
【００８８】
図５を参照しながらステージ制御前の重複領域中の小領域を指定する方法を説明する。ステージ制御によって移動する方向の端から２４ドットの領域をステージ制御前の重複領域とする（Ｓ７０１）。ステージを左右に制御するときは２４＊２４０の静止画像であり、ステージを下方向に制御するときは３２０＊２４の静止画像である。ここではステージを左右に制御するときを説明する。ｘ座標方向の２４ドットのうち両端の２ドットずつ、合計４ドットと、ｙ座標方向の２４０ドットのうち両端の２ドットずつ、合計４ドットはステージ制御の誤差を考慮するとメモリに取込まれていない可能性があるので、２４＊２４０の画像の端から２ドットずつ切り取った２０＊２３６の画像Ａをステージ制御前の重複領域中の小領域と指定する（Ｓ７０２）。
【００８９】
相関係数を計算して合成位置を決定し画像をつなぎ合わせる方法を説明する。ステージ制御後の静止画像中でステージ制御前の画像と重なると計算される部分の２４＊２４０の静止画像Ｂを考える（Ｓ７０３）。２４＊２４０の静止画像の中には２０＊２３６の静止画像が２５通り考えられる。これらを任意にＢ１〜Ｂ２５とする（Ｓ７０４）。Ｎを１〜２５の自然数とする。Ｆ（ｉ，ｊ）を画像Ａの画素（ｉ，ｊ）の画素値、ＧＮ（ｉ，ｊ）を画像ＢＮの画素（ｉ，ｊ）の画素値とする。ここで画素値とは画素の特徴量であり、同一画像の同一画素で比較した場合同一値となり、異なった画像の任意の画素同士を比較した場合異なった値を示すものである。また、画像Ｂの画素（１，１）から画像ＢＮの画素（１，１）へ向かうベクトルをＰＮ（ＰＮｘ，ＰＮｙ）とする（Ｓ７０５）。画像Ａと画像ＢＮの差をとる。計算式としては、ｘ≧０のときｆ（ｘ）が０以上でかつ単調増となるようなｆにおいて、ＨＮ＝ΣΣｆ（｜Ｆ（ｉ，ｊ）−ＧＮ（ｉ，ｊ）｜）（ｉ＝１，２，３，…２０，ｊ＝１，２，３，…２３６）を採用する（Ｓ７０６）。例えば、ｆ（ｘ）＝ｘ²などが考えられる。ＨＮが最も小さくなるＮの値を求める（Ｓ７０７）。Ｎが一意に決まらない場合（Ｓ７０８）は、その中でもＰＮが（２，２）に最も近いものを選択する（Ｓ７０９）。それでも一意に決まらなければ、例えばＮの値が最も小さいものを採用するといったルールを決めておく（Ｓ７１０，Ｓ７１１）。ステージ制御後の画像のうち左上の画素が（１０＋ＰＮｘ，１０＋ＰＮｙ）であるような２９６＊２１６の静止画像をメモリに取込む（Ｓ７１２）。これを（ｋ１＊ｋ２−１）回繰り返し（ｋ１＊ｋ２）枚の静止画像をメモリに取込むことによって、全体参照画像を作成する。
【００９０】
静止画像の中心の位置に記録された顕微鏡のステージ制御座標をドット単位の平面座標値に変換する。変換の方法としては、前記実施例１と同様に中心の位置に記録されたステージ制御座標値（ｘｉ，ｙｉ）を平面座標値（（ｘｉ−ｘ１）／６．９＋１６０，（ｙｉ−ｙ１）／６．９＋１２０）に変換する方法を採用する。
【００９１】
受信装置（病理側）７のパソコンとの通信を開始する機能で回線を接続する。ドット単位の平面座標値が（ｋ１＊ｋ２）箇所に記録された全体参照画像を病理側に送信する。全体参照画像送信終了時に受信装置（病理側）７のパソコンとの通信を終了する手段で通信回線６を切断する。
【００９２】
受信装置（病理側）７ではドット単位の平面座標値が（ｋ１＊ｋ２）箇所に記録された全体参照画像を受信し、表示装置（ディスプレイ）７Ａに表示する。
【００９３】
注視位置を指定し、該注視位置の平面座標値を取得する方法について説明する。受信したドット単位の平面座標値が記録された全体参照画像上で、高精細静止画像を取得したい注視位置を指定する。指定した注視位置との距離がもっとも小さくなるような位置を（ｋ１＊ｋ２）個の平面座標値の記録されている位置の中から求め、その位置から何ドットずつ離れているかを計算して前記求めた静止画像の中心位置の平面座標値と合わせ、指定した注視位置の平面座標値を求める。
【００９４】
以上の方法で指定した注視位置の平面座標値を求めたら、残りの説明は前記実施例１と同様である。
【００９５】
本実施例２ではステージ制御の誤差と、画像をつなぎ合わせるために必要な２つの画像の重なり合った長方形部分画像領域の大きさを決めて、その値に従って画像が重複するようにメモリに取込む。そのため、所定領域中に全体参照画像上に表示されないような部分領域が発生することがないという効果が得られる。また、画像をつなぎ合わせる位置を計算してつなぎ合わせるので、実際の標本と同一又はそれに近い全体参照画像が作成できるという効果も得られる。
【００９６】
また、全体参照画像に（ｋ１＊ｋ２）個の平面座標値を付加して送信し、注視位置の指定を当該平面座標により指定することにより、静止画像の画素の精度よりステージ制御座標の精度の方が良いという条件、例えば、静止画像の画素の精度は１ドット６．９ミクロンメートルであり、ステージ制御座標の精度は１ミクロンメートルである場合、全体参照画像の注視位置を指定したときの目的とするステージ制御座標値の取得の精度を高めることができる。
【００９７】
前記（ｋ１＊ｋ２）個の平面座標値を付加しなかった場合、重ね合わせの際にサブピクセルの誤差が生じる。重ね合わせを繰り返すと誤差は重畳する。重畳された誤差は、全体参照画像上で位置を指定した際のステージ制御の誤差にそのまま反映される。これに対して、本実施例１の方法では、（ｋ１＊ｋ２）個の平面座標値を付加しているので、合成時にサブピクセルがずれていようが、その誤差が重畳されようが、指定した位置の位置情報は最も近い（ｋ１＊ｋ２）個の平均座標値の中の値からの距離として計算されるので、指定した目的とするステージ制御座標値に近い値を取得することができる。
【００９８】
これにより全体参照画像の作成において、個々の分割画像の位置がずれたとしても当該分割画像の中心位置は分割画像と一体的にずれるため当該中心位置から求めた注視位置の位置ずれは発生しない。
【００９９】
（実施例３）
前記実施例２では顕微鏡ステージ制御の誤差の最大値から重複領域の大きさを計算し顕微鏡２のステージ４を制御した。それ故、前記実施例２に従って全体参照画像を作成すると重複領域が必要以上に大きくなってしまう箇所が発生する。その問題を解決するためには、以下のことを行う。
【０１００】
ステージ制御時の誤差の特徴として同一の方向に制御させたときの誤差は少なく、ステージ制御の方向を変えたときの誤差は大きいということがいえる。従って、本実施例３では前記実施例２とは異なり、ステージ制御の方向が変化したかしなかったかによって、つなぎ合わせる二つの画像の重複領域の短いほうの一辺の大きさを調整する。
【０１０１】
本実施例３では顕微鏡のステージ制御の誤差の最大値は１０ミクロンメートルであり、ステージ制御の方向が直前にステージを制御した方向と同一であればその場合の顕微鏡のステージ制御の誤差の最大値は５ミクロンメートルであると定める。
【０１０２】
図６を参照して、あらかじめ、つなぎ合わせる二つの画像の重複領域の短いほうの一辺の大きさを求めておく。ステージ制御の方向が直前のステージ制御の方向と変化する場合は、前記実施例２と同様に二つの画像の重複領域の短いほうの一辺は標本の実際の大きさで１６６ミクロンメートルと計算できる。
【０１０３】
また、ステージ制御の方向が直前のステージ制御の方向と同一の場合についても計算する。５＊３２０／２２１０＝０．７より、ステージ制御の最大誤差は１ドットである。｛（ステージ制御の最大誤差）ドット×２＋（つなぎ合わせに必要な画素数）｝＝１＊２＋２０＝２２（ドット）は２２＊２２１０／３２０＝１５１．９（ミクロンメートル）であり、この場合、二つの画像の重複領域の短いほうの一辺は標本３の実際の大きさで１５２ミクロンメートル必要であると計算できる。
【０１０４】
以上の計算より、全体参照画像を作成するためにメモリに取込む部分はメモリに取込んだ画像の上下端から１２ドットずつ、左右端からはステージ制御の方向によって１２ドットあるいは１１ドットそれぞれ取り除いた部分領域を中心に、１６６ミクロンメートル重複するようにメモリに取込んだ後の画像はステージ最大誤差である２ドットを限界に上下左右にずらした２５通りの部分領域画像のうちのいづれか、１５２ミクロンメートル重複するようにメモリに取込んだ後の画像はステージ最大誤差である１ドットを限界に上下左右にずらした９通りの部分領域画像のうちいづれかということになる。
【０１０５】
図８はステージを制御しながら画像をメモリに取り込む手段を説明するための図である。図８を参照してメモリに取込んだステージ制御座標値に関してステージを制御しながら画像をメモリに取込む手段を説明する。｜ｘ１−ｘ２｜≦２２１０＊ｋ１−１６６＊２−１５２（ｋ１−２）より、ｋ１を求める計算式はｋ１≧（｜ｘ１−ｘ２｜＋２８）／２０５８である。ｋ２を求める計算式は変わらない。
【０１０６】
ステージ４を１６６ミクロンメートル重複するように制御する前の画像Ａの指定の方法、及びステージ制御後の画像とのつなぎ合わせの方法は、前記実施例２と同様であるので、ステージ４を１５２ミクロンメートル制御するときのステージ制御の画像Ａの指定方法、及びステージ制御後の画像とのつなぎ合わせの方法について説明する。
【０１０７】
まず、ステージ制御前の重複領域中の小領域を指定する方法を説明する。
【０１０８】
ステージ制御によって移動する方向の端から２２ドットの領域をステージ制御前の重複領域とする。ステージは左右に制御されるので、２２＊２４０の静止画像である。ｘ座標方向の２２ドットのうち両端の１ドットずつ、合計２ドットと、ｙ座標方向の２４０ドットのうち両端の１ドットずつ合計２ドットは、ステージ制御の誤差を考慮すると、メモリに取込まれない可能性があるので、２２＊２４０の画像の端から１ドットずつを切りとった２０＊２３８の画像Ａをステージ制御前の重複領域中の小領域と指定する。
【０１０９】
相関係数を計算して合成位置を決定し画像をつなぎ合わせる方法を説明する。ステージ制御後の静止画像中でステージ制御前の画像と重なると計算される部分の２２＊２４０の静止画像を考える。２２＊２４０の静止画像中には２０＊２３８の静止画像が９通り考えられる。これらを任意にＢ１〜Ｂ９とする。Ｎを１〜９の自然数とする。Ｆ（ｉ，ｊ）、ＧＮ（ｉ，ｊ）、ＰＮ、ＨＮを前記実施例２と同様に定義する。前記実施例２と同様にＨＮが最小になるＮの値を求める。Ｎが一意に決まらなければ、その中でもＰＮが（１，１）に最も近いものを選択する。ステージ制御後の画像のうち左上の画素が（１０＋ＰＮｘ，１０＋ＰＮｙ）であるような２９８＊２１８の静止画像をメモリに取込む。（ｋ１＊ｋ２）枚の静止画像をメモリに取込むことによって全体参照画像を作成する。
【０１１０】
本実施例３ではステージ制御の方向によって、適用する２つの画像の重なり合った長方形部分画像領域の大きさを決定する。そのため、静止画像としてメモリに取込む画像の枚数が減少するので、取込みにかかる時間が短縮できるという効果が得られる。また、重複領域を小さく設定できるので、２つの画像の合成にかかる時間も短縮できるという効果も得られる。取込みにかかる時間と画像の合成にかかる時間の両方が短縮できることによって、全体参照画像作成にかかる時間は大きく短縮できる。
【０１１１】
（実施例４）
前述の実施例１，２，３ではＣＣＤカメラ１で取込んだ静止画像を合成することによって全体参照画像を作成した。それ故、前述の実施例１，２，３に従って全体参照画像を作成すると輝度にむらができる結果、画像をつなぎ合わせた個所が目立ってしまい、実際の標本とは異なった画像として全体参照画像が作成されてしまうという問題があった。
【０１１２】
この問題を解決するためには、以下のことを行う。静止画像をＣＣＤカメラ１で取込むため輝度にむらが生じる。従って、本実施例４では前述の実施例１，２，３とは異なり、全体参照画像を作成するためにラインセンサカメラを使用することによって輝度のむらを軽減する。
【０１１３】
図９は本発明の実施例４の全体参照画像を作成する手段を説明するための図であり、１はラインセンサカメラである。
【０１１４】
ラインセンサの仕様によるが、本実施例４でのラインセンサカメラ１Ａの画素数は１０２４画素、１画素サイズは１４＊１４ミクロンメートル（μｍ）であるとする。また、ステージ制御の最大誤差は１０ミクロンメートルであり、２つの画像をつなぎ合わせるのに必要な２つの画像の重なり合った長方形部分画像領域の短いほうの一辺の画素数を２０ドットとする。
【０１１５】
図９を参照してステージを制御しながらラインセンサで全体参照画像を作成する手段を説明する。図６を参照して、あらかじめ、つなぎ合わせる二つの画像の重複領域の短いほうの一辺の大きさを求めておく。ステージ制御の最大誤差１０ミクロンメートルは１ドットであるので、２つの画像の重複領域の短いほうの一辺の大きさは２２ドット、２２＊１４＝３０８ミクロンメートル必要と計算できる。前述の実施例１，２，３と同様の方法で全体参照画像として取込みたい範囲のステージ制御座標を取込む。｜ｙ１−ｙ２｜／１４０２８≦ｋ２となる最小の自然数ｋ２を計算する。ラインセンサカメラ１Ａで取込むラインの一番上のステージ制御座標値が（ｘ１−１５４，ｙ１−１５４）になるように制御する。ステージを右方向にｘ座標値が（ｘ２＋１５４）になるまで制御し、画像をメモリに取込み左上の位置にステージ制御座標値（ｘ１−１５４，ｙ１−１５４）を記録する。メモリに取込まれた静止画像のｘ座標方向の大きさは（ｘ２−ｘ１＋３０８）／１４ドットである。ラインセンサで取込むラインの一番上のステージ制御座標値が（ｘ１−１５４，ｙ１＋１３８７４）になるように制御する。同様にステージ４を右方向にｘ座標値が（ｘ２＋１５４）になるまで制御し、画像をメモリに取込み左上の位置にステージ制御座標値（ｘ１−１５４，ｙ１＋１３８７４）を記録する。これを（ｋ２−１）回繰り返し、ｋ２枚の静止画像のメモリへの取込みと左上の位置のステージ制御座標値の記録を行う。
【０１１６】
一枚目の静止画像をメモリに取込む。取込む画像は｛（ｘ２−ｘ１＋３０８）／１４｝＊１０２４で取込んだ画像のうち、上下左右１１ドットずつを取り除いた静止画像である。
【０１１７】
次の画像との重複領域中の小領域を指定する方法を説明する。次の画像との重複領域は静止画像中の下端から２２ドットにあたる部分である｛（ｘ２−ｘ１＋３０８）／１４｝＊２２の静止画像であり、ステージ制御の最大誤差は１ドットであるので、前述の実施例１，２，３と同様に計算すると、重複領域中の小領域Ａは、［｛（ｘ２−ｘ１＋３０８）／１４｝−２］＊２０の上下左右端から１ドットずつを切り取ったものである。
【０１１８】
相関係数を計算して合成位置を決定し画像をつなぎ合わせる方法を説明する。次の画像中で前の画像と重なると計算される静止画像中の上端から２２ドットにあたる部分である｛（ｘ２−ｘ１＋３０８）／１４｝＊２２の静止画像を画像Ｂとする。画像Ｂの中には〔｛（ｘ２−ｘ１＋３０８）／１４｝−２〕＊２０の静止画像が９通り考えられる。これらを任意にＢ１〜Ｂ９とし、以降の全体参照画像の作成の方法は前記実施例３と同様とする。
【０１１９】
本実施例４によれば、一枚の静止画像が前述の実施例１，２，３で得られる静止画像と比較して大きいため全体参照画像を取込む枚数が少なくて済み、その結果、画像合成を行う回数を削減することができる。画像合成を行う回数が削減できることにより、合成にかかる時間が短縮できるという効果が得られるとともに、実際の標本と同一の全体参照画像が作成されやすいという効果が得られる。
【０１２０】
また、顕微鏡のステージに置かれた標本の所定領域の全体参照画像を、顕微鏡のステージを制御しながらラインセンサでスキャンし、該画像群をメモリに取込み、該メモリ上で平面的な位置関係に矛盾が生じないようにつなぎ合わせることによって合成する手段により、専用のマクロ撮影のスタンドを用意し、該マクロ撮影のスタンドにプレパラートをセットしなくても、全体参照画像を取込むことができる。
【０１２１】
また、平面で撮影するＣＣＤカメラでは一枚の静止画像中で画像の中心と端とでは輝度が違うので、つなぎ合わせたときにつなぎ目が顕著になってしまうが、ラインセンサでスキャンすることにより、横にスキャンすれば縦方向の、縦にスキャンすれば横方向のつなぎ目が発生しないので、その分元の標本３と近い画像を作成することができる。これにより、前述の実施例１，２，３ほど頻繁に輝度によって合成位置が顕著になる部分のない全体参照画像が作成できるという効果が得られる。
【０１２２】
（実施例５）
前述の実施例１では全体参照画像上の注視位置を受信装置（病理医側）７が指定することによって、前記注視位置を中心とする静止画像を取得した。しかし、似たような画像を含むような部分領域が複数箇所に発生するような病理画像では特に、全体参照画像中のどの部分領域を何倍の倍率で取得済みであるのか病理医が覚えておくことは困難である。そのため、同一の注視位置の静止画像を複数枚取得してしまうことがあり得る。また、取得済みの静止画像と大半の部分が重複するような静止画像を取得してしまうことがあり得る。
【０１２３】
この問題を解決するために、受信装置７が取得した画像の位置情報を受信装置７が保持し、同一の個所の画像や、大部分が同一になるような個所の画像を取得するのを防止する。
【０１２４】
本実施例５では受信装置７が取得済みの画像と同一の画像や、大部分が同一になるような画像の取得を防止する方法を説明する。全体参照画像は対物レンズ４倍で作成されているとする。
【０１２５】
受信装置７が全体参照画像を取得し、注視位置を指定するまでの実施例は前述の実施例１〜４と同様とする。
【０１２６】
あらかじめ、対物レンズを指定したときのその倍率での全体参照画像として取込まれる静止画像の範囲が全体参照画像中の何ドット四方になるかを計算する。例えば、高精細画像を１０倍の対物レンズで取得すると、例えば表１により、取得される標本３の実際の大きさは９００＊６９０ミクロンメートルになる。９００＊６９０ミクロンメートルは全体参照画像上においては、１３０＊１００の画像が高精細静止画像として取得される。対物レンズが２０倍、４０倍の場合もあらかじめ同様の方法で計算しておく。
【０１２７】
受信装置７が取得した画像の静止画像の位置情報を視覚的に全体参照画像上に表示する方法を説明する。まず、高精細静止画像を取得する対物レンズの倍率を合わせ、その倍率データをパソコンに持たせる。本実施例５では対物レンズを１０倍とする。対物レンズ１０倍は全体参照画像上の１３０＊１００の静止画像に相当する。
【０１２８】
受信装置７が注視位置を指定すると同時にその注視位置が中心になるような１３０＊１００の静止画像を四角の点線で囲む。高精細静止画像を取得する部分領域がその位置でよければ、例えば、「高精細画像取得」ボタンを押下する等の合図をすることによって、全体参照画像上に表示した点線の四角を実線の四角に置き換える。さらに、前述の実施例と同様に当該注視位置の平面座標値を取得し、以降も前述の実施例１〜４と同様に受信装置７は目的の高精細静止画像を取得する。
【０１２９】
さらに、高精細静止画像を取得するときは、高精細静止画像を取得する対物レンズの倍率を合わせ、その倍率データをパソコンに持たせる。以降同様に高精細静止画像を取得する部分領域を点線で囲み、その位置でよいかどうかを確認して、点線の四角を実線の四角に置き換え、さらに病理側は高精細静止画像を取得する。
【０１３０】
四角の大きさの大小でレンズの倍率を推測することはできるが、例えば、対物レンズの倍率が４倍だったら赤の点線で表示し、高精細静止画像として取得したら赤の実線の四角を表示、また、対物レンズの倍率が１０倍だったら青の点線で表示し、高精細静止画像として取得したら青の実線の四角を表示するというように倍率によって色分けをしたら、受信装置７が全体参照画像を見たときにどの部分領域を何倍の対物レンズの高精細静止画像として取得したか一目瞭然である。
【０１３１】
本実施例５では、すでに高精細静止画像として取得した部分領域の画像を再度高精細静止画像として取得するかどうかを確認しながら高精細静止画像の取得を行うことができるので、不必要な画像の取得を行う時間を削減できるという効果が得られる。
【０１３２】
以上、本発明者によってなされた発明を、前記実施例に基づき具体的に説明したが、本発明は、前記実施例に限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能であることは勿論である。
【０１３３】
【発明の効果】
以上説明したように、本発明によれば、以下の効果が得られる。
【０１３４】
（１）従来のように専用のマクロ撮影のスタンドと専用のカメラを使用することなく全体参照画像を取得することができるという効果に加え、プレパラートを２つのステージにわたって移動させる必要がないため全体参照画像上の所定の位置の位置情報とステージ制御座標値との関連付けが容易にできる。
【０１３５】
（２）全体参照画像を作成する範囲を指定することによって効率よく、様々なサイズの全体参照画像が取得できる。
【０１３６】
（３）全体参照画像上で注視位置を指定し、該注視位置のステージ制御座標値にステージを自動制御することによって、受信装置側（病理医側）が指定した位置が中心になるような高精細画像の取得を短時間で、かつ容易に行うことができる。
【０１３７】
（４）顕微鏡の誤差を考慮して重複するように静止画像を取得することによって、より元の標本に近い全体参照画像を取得することができる。
【０１３８】
（５）輝度差がより顕著にならないラインセンサを使用して静止画像を取得することによって、より元の標本に近い全体参照画像を取得することができる。
【０１３９】
（６）受信装置側（病理医側）が高精細静止画像を取得した場所を全体参照画像上に視覚的に表示することによって、同一個所の高精細静止画像あるいは大半が重複するような高精細静止画像を取得することを防止することによって、必要な部分の高精細画像の取得を効率的に行うことができる。
【図面の簡単な説明】
【図１】本発明の実施例１の顕微鏡画像遠隔制御システムを実現するためのハードウェア構成を示すブロック構成図である。
【図２】本実施例１の顕微鏡画像遠隔制御システムの動作を説明するためのフローチャートである。
【図３】本実施例１の顕微鏡画像遠隔制御システムを実現するための処理フローを示す図である。
【図４】本発明の実施例２のステージを制御しながら画像をメモリに取込む手段を説明するための図である。
【図５】本実施例２のステージ制御前の重複領域中の小領域を示す図である。
【図６】本実施例２の隣接する２つの画像の重複領域の大きさを求める処理手順のフローチャートである。
【図７】本実施例２のメモリ上で平面的な位置関係に矛盾が生じないようにつなぎ合わせる処理手順のフローチャートである。
【図８】本発明の実施例３のステージを制御しながら画像をメモリに取込む手段を説明するための図である。
【図９】本発明の実施例４のステージを制御しながらラインセンサカメラで全体参照画像を作成する手段を説明するための図である。
【図１０】本発明の実施例５の全体の参照画像上に高精細静止画像取得位置情報を表示する手段を説明するための図である。
【符号の説明】
１…ＣＣＤカメラ、１Ａ…ラインセンサカメラ、２…顕微鏡、３…標本、４…自動移動式ステージ、５…送信装置（臨床側のパソコン）、５Ａ…送信装置の表示装置、６…通信回線、７…受信装置（病理医側のパソコン）。

Claims (3)

1. 顕微鏡の自動移動式ステージに置かれた標本の所定領域の全体参照画像を取得して送信する送信装置と、前記送信された全体参照画像を遠隔地で受信し、その全体参照画像中の注視位置の情報である注視位置情報を送信装置側に送信し、前記注視位置情報に基づいた高倍率画像を要求する受信装置と、を有する顕微鏡画像遠隔制御システムであって、
   前記送信装置は、前記顕微鏡のステージ制御の方向が変化したかしないかによって画像合成に使用する重複領域の大きさを調整する手段と、前記顕微鏡の自動移動式ステージを前記重複領域があるように制御しながら所定倍率で前記標本の分割撮影を繰り返す手段と、この分割撮影により得られた複数枚の画像とその複数枚の画像それぞれに関する複数個のステージ制御座標値をメモリに取込む手段と、前記メモリ上で前記重複領域があるように分割撮影された複数枚の画像を平面的な位置関係に矛盾が生じないようにつなぎ合わせて前記全体参照画像を作成する手段と、前記複数個のステージ制御座標値を複数個のドット単位の平面座標値に変換する手段と、前記複数枚の画像をつなぎ合わせて作成された全体参照画像に前記複数個のドット単位の平面座標値を付加して前記受信装置に送信する手段と、前記受信装置から受信した前記注視位置情報に基づいて前記注視位置の高倍率画像を取得する手段と、前記高倍率画像を前記受信装置に送信する手段と、を有し、
   前記受信装置は、注視位置の指定を前記ドット単位の平面座標値により指定し、前記送信装置に注視位置情報を送信する手段を有する
   ことを特徴とする顕微鏡画像遠隔制御システム。
2. 前記送信装置は、前記顕微鏡のステージ制御の方向によってステージ制御の誤差を計算し画像合成に使用する重複領域の大きさを最適にする手段を有することを特徴とする請求項１に記載の顕微鏡画像遠隔制御システム。
3. 前記送信装置は、前記顕微鏡のステージに置かれた標本の所定領域をラインセンサカメラで全体参照画像を作成する手段を有することを特徴とする請求項１または２に記載の顕微鏡画像遠隔制御システム。

Images