JP4878914B2 - 顕微鏡システム、顕微鏡の制御方法、及びプログラム - Google Patents

Description

本発明は、顕微鏡の技術に関し、特に、顕微鏡での観察に要する作業負担を軽減させる技術に関する。

顕微鏡は、生物分野や工業分野における研究や検査等において広く利用されている。顕微鏡を使用して行う検査では、一般に拡大倍率の異なる複数の対物レンズを顕微鏡に備えておき、対物レンズからの観察光路と直交する平面内で観察試料を移動させる電動ステージを操作して観察し検査を行う。このような観察では、まず対物レンズを低倍にセットして観察試料全体を洩れのないようにスクリーニングする。そして、その後に、その観察試料のうち異常が発見されたポイントや記録を残したいポイントへ戻り、高倍率の対物レンズへと切換えてこれらのポイントを詳細に検査し、観察データの記録を行う。

このような観察に適した顕微鏡に関し、例えば特許文献１には、注目領域の画像は動画像を表示し、当該注目領域を含むその周辺領域の画像は静止画を表示して観察することのできる顕微鏡画像遠隔観察装置が開示されている。

また、例えば特許文献２には、静止画像である顕微鏡画像を取得したときに顕微鏡に設定されていた内容を、後で確実に再現することのできる顕微鏡装置が開示されている。
また、例えば特許文献３には、煩雑な調整作業を繰り返すことなく、各部の設定状態を容易に再現することのできる顕微鏡システムが開示されている。
特開平７−３３３５２２号公報 特開２００２−１４２８８号公報 特開２００４−３０９７６８号公報

前述したようなスクリーニング作業において、低倍率の対物レンズにて試料全体のスクリーニング観察を行った後に、その観察試料における高倍率の対物レンズによる観察記録を残したいポイントへ戻るには、再度顕微鏡システムを操作してそのポイントを探し出さなければならない。例えばこのようなポイントが複数存在したことにより、その中から記録に残すポイントを選択する場合には、顕微鏡の操作は作業者にとって大きな負担となる。特に、迅速な判断が要求させる場合や、一度に多くの標本を観察しなければならない場合には、迅速且つ容易にそのポイントの記録を残せることが重要となる。

本発明は上述した問題に鑑みてなされたものであり、その解決しようとする課題は、細胞診断スクリーニング等において、詳細観察ポイントの再現作業の速度を向上させつつ、作業者の負担を軽減させることである。

本発明の態様のひとつである顕微鏡システムは、観察体の顕微鏡画像を取得する顕微鏡と、当該顕微鏡画像の取得時の当該顕微鏡の観察状態を取得する観察状態取得手段と、時系列の当該顕微鏡画像から動画像のデータを生成する動画像データ生成手段と、当該動画像のデータに対し、当該動画像を構成している顕微鏡画像と当該顕微鏡画像を取得したときにおける当該顕微鏡の観察状態とを対応付ける情報を付加する対応付け手段と、当該動画像のデータ及び当該データに対応付けられている当該顕微鏡の観察状態を記録する記録手段と、当該記録手段に記録されている当該動画像のデータに基づいて当該動画像を再生して当該顕微鏡画像を表示する表示手段と、当該観察状態を当該顕微鏡に再現させる指示を取得する再現指示取得手段と、当該顕微鏡を制御して、当該再現の指示を取得したときに当該表示手段に表示されていた顕微鏡画像が取得されたときの当該観察状態を当該顕微鏡に再現させる顕微鏡制御手段と、を有することを特徴とするものであり、この特徴によって前述した課題を解決する。

なお、上述した本発明に係る顕微鏡システムにおいて、当該観察状態は、当該顕微鏡に備えられており当該観察体が載置される移動自在なステージの位置を含むように構成することもできる。

なお、このとき、当該動画像データ生成手段は、当該ステージの移動開始から移動終了までの間に取得された当該顕微鏡画像から当該動画像のデータを生成するように構成することもできる。

また、前述した本発明に係る顕微鏡システムにおいて、当該観察状態は、当該顕微鏡画像の取得時に当該顕微鏡において使用されていた対物レンズの倍率、当該顕微鏡画像の取得時に当該観察体に光を照射していた光源の明るさ、及び、当該顕微鏡画像の取得時において当該顕微鏡で行われていた検鏡法のうちの少なくとも１以上を含むように構成することもできる。

なお、このとき、時系列の当該顕微鏡画像のうちの幾つかにフラグ情報を付加するフラグ付加手段と、当該フラグ情報が付加されている顕微鏡画像を表示させる指示を取得する表示指示取得手段と、を更に有し、当該表示手段は、当該表示指示取得手段が当該指示を取得したときには、当該フラグ情報が付加されている顕微鏡画像を表示するように構成することもできる。
ここで、当該フラグ付加手段は、当該顕微鏡に備えられており当該観察体が載置される移動自在なステージの移動速度が所定値以下となったときに当該顕微鏡が取得していた顕微鏡画像に当該フラグ情報を付加するように構成することもできる。

また、ここで、当該フラグ付加手段は、当該顕微鏡において使用されていた対物レンズがより高倍のものへと切り換えられたときに当該顕微鏡が取得していた顕微鏡画像に当該フラグ情報を付加するように構成することもできる。

また、このとき、当該記録手段は、当該観察状態の再現がされた後の当該顕微鏡で新たに取得された顕微鏡画像を更に記録し、当該再現の指示を取得したときに当該表示手段に表示されていた顕微鏡画像と当該観察状態の再現がされた後の当該顕微鏡で新たに取得された顕微鏡画像とを関連付ける情報を当該動画像のデータに対して付加する関連付け手段を更に有するように構成することもできる。

また、本発明の別の態様のひとつである顕微鏡の制御方法は、顕微鏡を用いて取得された観察体の顕微鏡画像の取得時における当該顕微鏡の観察状態を取得し、時系列の当該顕微鏡画像から動画像のデータを生成し、当該動画像のデータに対し、当該動画像を構成している顕微鏡画像と当該顕微鏡画像を取得したときにおける当該顕微鏡の観察状態とを対応付ける情報を付加し、当該動画像のデータ及び当該データに対応付けられている当該顕微鏡の観察状態を記録部に記録し、当該記録部に記録されている当該動画像のデータに基づいて当該動画像を再生して当該顕微鏡画像を表示部に表示し、当該観察状態を当該顕微鏡に再現させる指示を取得し、当該顕微鏡を制御して、当該再現の指示を取得したときに当該表示部に表示されていた顕微鏡画像が取得されたときの当該観察状態を当該顕微鏡に再現させることを特徴とするものであり、この特徴によって前述した課題を解決する。

また、本発明の更なる別の態様のひとつであるプログラムは、顕微鏡を用いて取得された観察体の顕微鏡画像の取得時における当該顕微鏡の観察状態を取得する処理と、時系列の当該顕微鏡画像から動画像のデータを生成する処理と、当該動画像のデータに対し、当該動画像を構成している顕微鏡画像と当該顕微鏡画像を取得したときにおける当該顕微鏡の観察状態とを対応付ける情報を付加する処理と、当該動画像のデータ及び当該データに対応付けられている当該顕微鏡の観察状態を記録部に記録させる処理と、当該記録部に記録されている当該動画像のデータに基づいて当該動画像を再生して当該顕微鏡画像を表示部に表示する処理と、当該観察状態を当該顕微鏡に再現させる指示を取得する処理と、当該顕微鏡を制御して、当該再現の指示を取得したときに当該表示部に表示されていた顕微鏡画像が取得されたときの当該観察状態を当該顕微鏡に再現させる処理と、をコンピュータに行わせるためのものであり、このプログラムをコンピュータで実行することによって前述した課題が解決される。

本発明によれば、以上のようにすることにより、細胞診断スクリーニング等において、詳細観察ポイントの再現作業の速度が向上しつつ、作業者の負担が軽減するという効果を奏する。

以下、本発明の実施の形態を図面に基づいて説明する。
図１は本発明を実施する顕微鏡システムの構成を示している。
図１において、顕微鏡装置１に接続されたホストシステム２は、顕微鏡装置１の制御を行うと共に、観察体１９の動画データと顕微鏡装置１の観察状態と観察体１９の座標とを同期して記録を行う。ビデオカメラ３は顕微鏡装置１を用いて取得される観察体１９の顕微鏡画像の撮影を行う。ホストシステム２に接続されたモニタ５は各種の画像の表示を行う。

顕微鏡装置１には透過観察用光学系と落射観察光学系とが備えられている。ここで、透過観察用光学系としては、透過照明用光源６と、透過照明用光源６の照明光を集光するコレクタレンズ７と、透過用フィルタユニット８と、透過視野絞り９と、透過開口絞り１０と、コンデンサ光学素子ユニット１１と、トップレンズユニット１２とが備えられている。また、落射観察光学系としては、落射照明用光源１３と、落射照明用光源１３の照明光を集光するコレクタレンズ１４と、落射用フィルタユニット１５と、落射シャッタ１６と、落射視野絞り１７と、落射開口絞り１８とが備えられている。

また、これらの透過観察用光学系と落射観察光学系との光路が重なる観察光路上には、観察体１９が載置され、上下左右の各方向に移動自在な電動ステージ２０が備えられている。電動ステージ２０の移動の制御はステージＸ−Ｙ駆動制御部２１とステージＺ駆動制御部２２とによって行われる。なお、電動ステージ２０は不図示の原点センサによる原点検出機能を備えており、電動ステージ２０に載置されている観察体１９の座標検出及び座標指定による移動制御を行うことができる。

また、観察光路上には、複数装着された対物レンズ２３ａ、２３ｂ、…（以下、必要に応じて「対物レンズ２３」と総称することとする）から観察に使用するものを回転動作により選択するレボルバ２４と、検鏡法を切り替えるキューブユニット２５と、観察光路を接眼レンズ２６側とビデオカメラ３側とに分岐するビームスプリッタ２７とが備えられている。また、微分干渉観察のために備えられているポラライザ２８、ＤＩＣ（Differential Interference Contrast）プリズム２９、及びアナライザ３０は、必要に応じて観察光路に挿入可能となっている。なお、これらの各ユニットは電動化されており、その動作は顕微鏡コントローラ３１によって制御される。

ホストシステム２に接続された顕微鏡コントローラ３１は、顕微鏡装置１全体の動作を制御する顕微鏡制御手段としての機能を有しており、上述した制御に加え、ホストシステム２からの制御信号に応じ、検鏡法の変更や、透過照明光源６及び落射照明用光源１３の調光を行う。また、顕微鏡コントローラ３１は、顕微鏡装置１による現在の検鏡状態をホストシステム２へ通知する機能も有している。更に、顕微鏡コントローラ３１はステージＸ−Ｙ駆動制御部２１及びステージＺ駆動制御部２２とも接続されており、電動ステージ２０の制御もホストシステム２から行うことができる。

顕微鏡操作部３４は、顕微鏡装置１に対する動作指示の入力をホストシステム２と共に取得するための各種入力部を備えたハンドスイッチであり、これに備えられている不図示のジョイスティックやエンコーダを操作することにより、電動ステージ２０の操作も行えるものとなっている。

ビデオカメラ３によって撮像された観察体１９の顕微鏡画像は、ビデオボード３２を介してホストシステム２に取り込まれる。ホストシステム２は、ビデオカメラ３に対して、自動ゲイン制御のＯＮ／ＯＦＦ、ゲイン設定、自動露出制御のＯＮ／ＯＦＦ、及び露光時間の設定を、カメラコントローラ３３を介して行うことができる。また、ホストシステム２は、ビデオカメラ３から送られてきた観察体１９の顕微鏡画像を、動画像データ及び静止画データとしてデータ記録部４に保存することができる。データ記録部４に記録された動画データ及び静止画データはホストシステム２によって読み出され、画像表示部であるモニタ５で表示させることができる。

更に、ホストシステム２は、ビデオカメラ３で撮像された顕微鏡画像のコントラストに基づいて合焦動作を行う、いわゆるビデオＡＦ（Auto Focus）機能も提供する。
なお、ホストシステム２は、ごく標準的な構成のコンピュータであり、制御プログラムの実行によって顕微鏡システム全体の動作制御を司るＣＰＵ（中央演算装置）、このＣＰＵが必要に応じてワークメモリとして使用するメインメモリ、マウスやキーボードなどといったユーザからの各種の指示を取得するための入力部、この顕微鏡システムの各構成要素との間で各種データの授受を管理するインタフェースユニット、及び、各種のプログラムやデータを記憶しておく例えばハードディスク装置なとの補助記憶装置を有している。

以下、この顕微鏡システムの動作を、本発明の第一の実施形態として説明する。
まず、スクリーニング作業時の動作について説明する。図２は、ホストシステム２によって行われる、スクリーニング作業時における動画データの記録処理の処理内容の第一の例をフローチャートで示したものである。この処理は、図１に示した顕微鏡システムで観察体１９に対するスクリーニングを行ったときの動画データを取得するための処理であり、ホストシステム２のＣＰＵが所定の制御プログラムを実行することによって実現される。

図３は、観察体１９に対するスクリーニングの経路の第一の例を示している。同図において、二点鎖線で示した曲線は低倍率の対物レンズ２３によるスクリーニングの経路を示しており、破線の四角で示した領域はこの低倍率の対物レンズ２３における視野範囲を現している。なお、ここでは、透過明視野観察によりスクリーニングを行うものとする。

図２において、まず、Ｓ１０１では、観察体１９の電動ステージ２０へのセット作業を行うために電動ステージ２０を所定の位置に移動させる処理が行われる。
観察体１９のセットを完了すると処理はＳ１０２に進み、顕微鏡装置１を制御して、透過明視野観察に使用する各種光学素子の切換えの処理、及び、スクリーニングに使用する低倍率の対物レンズ２３の切換えの処理が行われる。

Ｓ１０３では、顕微鏡操作部３４に備えられているジョイスティックやエンコーダに対するユーザの操作内容を取得し、取得した操作内容に応じて電動ステージ２０を移動させる処理が開始される。図３の例に二点鎖線で示されているＡ点からＥ点への経路は、このときにユーザが指示したスクリーニングの経路である。

電動ステージ２０の移動が開始されると、Ｓ１０４において、ビデオカメラ３にて時系列に撮像された観察体１９の顕微鏡画像から動画像データを生成してデータ記録部４へ記録する録画処理が開始され、続くＳ１０５からＳ１１０の処理の繰り返しによって、観察体１９の動画像の録画が行われる。

Ｓ１０５及びＳ１０６では、観察体１９の顕微鏡画像の取得時における顕微鏡装置１の観察状態を取得する観察状態取得手段としてホストシステム２を機能させるための処理が行われる。すなわち、Ｓ１０５では、観察体１９の現在位置を示す電動ステージ２０の座標データを、顕微鏡コントローラ３１を介して取得する処理が行われ、続くＳ１０６では、現在使用中の対物レンズ２３を特定する対物レンズ情報、透過照明用光源６の明るさを示す調光値情報、検鏡法を示す検鏡情報といった、顕微鏡装置１の現在の観察状態を示している顕微鏡情報を取得する処理が行われる。

Ｓ１０７からＳ１０９にかけての処理では、撮像された観察体１９の顕微鏡画像と顕微鏡画像の取得時における顕微鏡装置１の観察状態とを対応付けてデータ記録部４に記録させる対応付け手段及び記録手段としてホストシステム２を機能させるための処理が行われる。すなわち、Ｓ１０７では、観察体１９の現在の顕微鏡画像（動画像データにおける１フレーム分の画像）のデータをデータ記録部４へ記録する処理が行われ、続くＳ１０８では、Ｓ１０５の処理によって取得した座標データを、Ｓ１０７の処理で記録した顕微鏡画像データに付加してデータ記録部４へ記録する処理が行われる。更に、続くＳ１０９では、Ｓ１０６の処理によって取得した顕微鏡情報を、Ｓ１０７の処理で記録した顕微鏡画像データに付加してデータ記録部４へ記録する処理が行われる。

上述したＳ１０７からＳ１０９の処理により、例えば、図３におけるＢ点における顕微鏡画像データには、観察体１９におけるＢ点の位置を示す座標データ（Ｂ＿ｘ，Ｂ＿ｙ，Ｂ＿ｚ）と、対物レンズ情報（Ｂ＿ｏｂ）、調光値情報（Ｂ＿ｂｒｉｇｈｔ）、及び検鏡情報（Ｂ＿ｐｏｓｉ）等の顕微鏡情報とが付加され、動画像データに関連付けられてデータ記録部４に記録される。

なお、本実施形態においては、動画像データに対する座標データや顕微鏡情報の付加は一定の時間間隔で行うものとするが、例えば、電動ステージ２０の移動速度に応じて変化させるように構成してもよい。また、顕微鏡情報の付加を一定の時間間隔で行う代わりに、情報の内容に変更が生じた場合にのみ更新情報を付加するように構成してもよい。

Ｓ１１０では、スクリーニング経路の終点（図３の例ではＥ点）までの移動が終了し、観察が終了したか否かを判定する処理が行われる。ここで、観察が終了したと判定したとき（判定結果がＹｅｓのとき）には、Ｓ１１１において、Ｓ１０４の処理により開始された録画処理を終了させる処理が行われ、この後は、この図２に示した動画データの記録処理が終了する。一方、観察が未だ終了していないと判定したとき（判定結果がＮｏのとき）には、Ｓ１０５へと処理を戻して上述した処理が繰り返される。

上述した処理が以上のように行われることにより、スクリーニング経路に沿って観察体１９を観察して得られた動画データの記録に同期して、その経路上の各位置における観察体１９の座標データと顕微鏡情報とが併せて記録される。

次に、低倍率の対物レンズ２３による観察体１９に対するスクリーニングが終了した後に、記録された観察体１９の動画像から詳細な観察を行うポイントを探し出し、そのポイントを観察したときの顕微鏡装置１の観察状態を再現すると共に、高倍率の対物レンズ２３でそのポイントを詳細観察して観察データの記録を行う動作について説明する。

まず図４を説明する。同図は、ホストシステム２に接続されているモニタ５で、データ記録部４に動画像データが記録されている観察体１９の画像表示を行うときの画面表示の第一の例を示している。

図４において、再生ウィンドウ３５はスクリーニング作業によって取得された観察体１９の画像の表示再生画面や、その再生表示に対する操作指示を行うための操作部などを備えている。ここで、操作部として表示されている各種のボタンは、例えば不図示のマウス装置等のポインティングデバイスに対する、指標カーソルの当該ボタン上への移動操作とクリック操作とによって操作することができる。

表示ウィンドウ３６は、データ記録部４に記録されている動画像を再生して観察体１９の顕微鏡画像を表示する表示手段として機能する表示ウィンドウであり、ビデオカメラ３で撮像している観察体１９の現在の画像（ライブ画像）を表示させることもできる。図４においては、図３におけるＢ点の画像を表示ウィンドウ３６に表示している例を示している。なお、ライブ画像と記録されている動画像との切り換えは、ライブ画像表示切り換えボタン５１若しくは５２を操作することで行われる。

座標表示ウィンドウ３７、３８、及び３９は、表示ウィンドウ３６で動画像を表示中の観察体１９の表示部位の位置を示すＸ、Ｙ、Ｚの各座標を表示するウィンドウである。
検鏡法ウィンドウ４０、対物レンズウィンドウ４１、及び調光値ウィンドウ４２は、表示ウィンドウ３６で表示中の画像を取得したときの顕微鏡情報をそれぞれ表示するウィンドウであり、検鏡法ウィンドウ４０は検鏡方法を、対物レンズウィンドウ４１は対物レンズ２３の倍率を、そして、調光値ウィンドウ４２は透過照明用光源６の調光値を、それぞれ表示する。

再生ボタン４７は観察体１９の動画像の表示再生の開始を指示するボタンであり、再生終了ボタン４６はその表示再生の終了を指示するボタンであり、一時停止ボタン４５は再生中の動画像の一時停止及び一時停止からの復帰を指示するボタンである。また、記録ボタン４３は、ビデオカメラ３で撮像されている観察体１９の画像の記録を指示するボタンである。更に、巻き戻しボタン４４及び早送りボタン４８は、それぞれ表示ウィンドウ３６で表示中の観察体１９の動画像の逆回し及び早回しを指示するボタンである。

再生バー５４は、表示ウィンドウ３６で表示中の画像の動画像全体に対する再生位置を相対的に表すものである。動画像の再生に応じて再生バー５４上を移動する再生位置表示カーソル５５をスライド操作すると、表示ウィンドウ３６での表示画像を、スライド後の再生位置表示カーソル５５で表される再生位置の画像へと切り換えることができる。

再現ボタン５３は、表示ウィンドウ３６で表示中の顕微鏡画像が取得されたときの顕微鏡装置１の観察状態を再現する指示を取得する再現指示取得手段として機能するボタンである。

詳細表示ボタン５０は、表示ウィンドウ３６での表示画像を、動画像から高倍率の対物レンズ２３を用いて撮影された詳細静止画像へと切り換える指示を取得するためのボタンであり、動画表示ボタン４９は、表示ウィンドウ３６での表示画像を、当該詳細静止画像から動画像へと切り換える指示を行うためのボタンである。

次に図５について説明する。同図は、ホストシステム２によって行われる、データ記録部４に動画像データが記録されている観察体１９の画像表示のための制御処理の処理内容をフローチャートで示したものである。この処理も、ホストシステム２のＣＰＵが所定の制御プログラムを実行することによって実現される。

図５の制御処理が開始されると、図４に示した再生ウィンドウ３５をモニタ５に表示させた後、まず、Ｓ２０１において、再生ウィンドウ３５の操作部に対するユーザによる各種の再生操作の内容を取得し、表示ウィンドウ３６で当該内容に応じた表示再生の処理が行われる。

Ｓ２０２では、データ記録部４に記録されている観察体１９の動画像データを読み出す処理が行われ、続くＳ２０３において、読み出された動画像データで表されている観察体１９の動画像の１フレーム分を表示ウィンドウ３６に表示させる処理が行われる。

Ｓ２０４では、観察体１９の動画像データに関連付けられてデータ記録部４に記録されている、表示ウィンドウ３６に表示中の画像の観察体１９上の位置を示す座標データ、及び当該表示中の画像を取得したときの顕微鏡情報を読み出す処理が行われ、続くＳ２０５において、読み出された座標データ及び顕微鏡情報を、座標表示ウィンドウ３７、３８、及び３９並びに検鏡法ウィンドウ４０、対物レンズウィンドウ４１、及び調光値ウィンドウ４２にそれぞれ表示させる処理が行われる。

Ｓ２０６では、観察終了の指示を取得したか否かを判定する処理が行われ、当該指示を取得したと判定したとき（判定結果がＹｅｓのとき）には、この図５の制御処理を終了する。一方、当該指示を未だ取得していないと判定したとき（判定結果がＮｏのとき）には、Ｓ２０７に処理を進める。

上述したＳ２０１からＳ２０５の処理の具体例を説明する。
例えば、図４のように、観察体１９におけるＢ点の画像を表示ウィンドウ３６で表示中の場合には、観察体１９におけるＢ点の位置を示す座標（Ｂ＿ｘ，Ｂ＿ｙ，Ｂ＿ｚ）が座標表示ウィンドウ３７、３８、及び３９に表示されると共に、当該画像を取得したときの対物レンズ情報（Ｂ＿ｏｂ）、調光値情報（Ｂ＿ｂｒｉｇｈｔ）、及び検鏡情報（Ｂ＿ｐｏｓｉ）がそれぞれ対物レンズウィンドウ４１、調光値ウィンドウ４２、及び検鏡法ウィンドウ４０にそれぞれ表示される。

また、例えば、図６のように、観察体１９におけるＣ点の位置を示す座標（Ｃ＿ｘ，Ｃ＿ｙ，Ｃ＿ｚ）が座標表示ウィンドウ３７、３８、及び３９に表示されると共に、当該画像を取得したときの対物レンズ情報（Ｃ＿ｏｂ）、調光値情報（Ｃ＿ｂｒｉｇｈｔ）、及び検鏡情報（Ｃ＿ｐｏｓｉ）がそれぞれ対物レンズウィンドウ４１、調光値ウィンドウ４２、及び検鏡法ウィンドウ４０にそれぞれ表示される。

このような再生ウィンドウ３５が表示されている状態で、Ｓ２０１の処理により、再生ウィンドウ３５の操作部に対するユーザによる操作内容に応じた表示再生の処理が行われる。

例えば、早送りボタン４８に対する操作が取得された場合には、表示ウィンドウ３６で表示中の観察体１９の動画像の早回し表示再生処理が行われ、巻き戻しボタン４４に対する操作が取得された場合には、表示ウィンドウ３６で表示中の観察体１９の動画像の逆戻し表示再生処理が行われる。なお、本実施形態においては、早送りボタン４８及び巻き戻しボタン４４に対する押下操作の回数に応じ、その動画像の早回し表示再生及び逆戻し表示再生の再生速度が２倍、４倍、８倍、…と増加する。

また、例えば一時停止ボタン４５に対する操作が取得された場合には、表示ウィンドウ３６で表示再生されている観察体１９の動画像が表示されたまま一時停止される。この一時停止の状態で、再生バー５４の再生位置表示カーソル５５をスライドさせると、スライド後の再生位置表示カーソル５５で表される再生位置の画像が一時停止の状態のまま表示ウィンドウ３６に表示される。

ユーザは、このような各種の再生操作を駆使して観察体１９の動画像を表示ウィンドウ３６に表示させることで、観察体１９の動画像から詳細な観察を行うポイントを探し出す作業を行う。

例えば、ここで、詳細な観察を行うポイントとして、図３におけるＢ点における画像を選択する場合には、観察体１９におけるＢ点の位置を示す座標（Ｂ＿ｘ，Ｂ＿ｙ，Ｂ＿ｚ）が座標表示ウィンドウ３７、３８、及び３９に表示され、更に、当該画像を取得したときの対物レンズ情報（Ｂ＿ｏｂ）、調光値情報（Ｂ＿ｂｒｉｇｈｔ）、及び検鏡情報（Ｂ＿ｐｏｓｉ）がそれぞれ対物レンズウィンドウ４１、調光値ウィンドウ４２、及び検鏡法ウィンドウ４０にそれぞれ表示されているときに再現ボタン５３の押下操作を行う。この押下操作の有無は、Ｓ２０７の処理によって判定される。

図５のＳ２０７以降の処理を説明する。
Ｓ２０７では、再現ボタン５３の押下操作により、表示ウィンドウ３６で表示中の画像を取得したときの顕微鏡装置１の観察状態を再現する指示を取得したか否かを判定する処理が行われる。ここで、当該指示を取得したと判定したとき（判定結果がＹｅｓのとき）にはＳ２０８に処理を進める。一方、当該指示を取得してないと判定したとき（判定結果がＮｏのとき）にはＳ２０１へと処理を戻して上述した処理が繰り返される。

Ｓ２０８及びＳ２０９では、顕微鏡装置１を制御して、再現ボタン５３が操作されたときに表示ウィンドウ３６で表示されていた顕微鏡画像が取得されたときの観察状態を顕微鏡装置１に再現させる処理が行われる。すなわち、まず、Ｓ２０８において、座標表示ウィンドウ３７、３８、及び３９に表示されている座標を顕微鏡コントローラ３１に通知して電動ステージ２０を当該座標で表される位置に移動させる処理が行われ、続くＳ２０９において、対物レンズウィンドウ４１、調光値ウィンドウ４２、及び検鏡法ウィンドウ４０にそれぞれ表示されている各種情報を顕微鏡コントローラ３１に通知して、対物レンズ２３の切り換え、透過照明用光源６の調光、及び、検鏡方法の切り替えを行わせる処理が行われる。

例えば、図３におけるＢ点における画像が表示されている状態で再現ボタン５３の押下操作を取得した場合には、観察体１９におけるＢ点の位置を示す座標（Ｂ＿ｘ，Ｂ＿ｙ，Ｂ＿ｚ）が顕微鏡コントローラ３１に通知されて、当該座標で表される位置に電動ステージ２０を移動させると共に、当該画像を取得したときの顕微鏡情報である、対物レンズ情報（Ｂ＿ｏｂ）、調光値情報（Ｂ＿ｂｒｉｇｈｔ）、及び検鏡情報（Ｂ＿ｐｏｓｉ）が顕微鏡コントローラ３１に通知されて、対物レンズ２３の切り換え、透過照明用光源６の調光、及び、検鏡方法の切り替えが行われる。

Ｓ２１０では、表示ウィンドウ３６で表示中の画像を取得したときの観察状態が再現された顕微鏡装置１による、詳細観察（ライブ画像の表示処理）が開始され、Ｓ２１１において、顕微鏡装置１に対する操作指示を取得する処理が行われ、高倍率の対物レンズ２３に切り換えての詳細観察が行われる。

図４に示した画面例（観察体１９のＢ点における画像を表示中）において、高倍率の対物レンズ２３に切り換えて行われた詳細観察により、ビデオカメラ３よりの観察体１９のより詳細な画像が表示ウィンドウ３６に表示させた状態を図７に示す。同図の表示ウィンドウ３６には、図４の表示ウィンドウ３６に示されている観察体１９のＢ点の拡大画像が表示されている。

Ｓ２１２では、記録ボタン４３の押下操作による、表示ウィンドウ３６に現在表示中の観察体１９の詳細画像（拡大画像）の記録指示を取得したか否かを判定する処理が行われる。ここで、当該記録指示を取得したと判定したとき（判定結果がＹｅｓのとき）にはＳ２１４に処理を進め、当該記録指示を取得しなかったと判定したとき（判定結果がＮｏのとき）には、Ｓ２１３に処理を進める。

Ｓ２１３では、動画表示ボタン４９の押下操作による、表示ウィンドウ３６の表示を元の動画像表示へと戻す指示を取得したか否かを判定する処理が行われる。ここで、当該指示を取得したと判定したとき（判定結果がＹｅｓのとき）にはＳ２０１へと処理を戻して上述した処理が繰り返される。一方、当該指示を取得しなかったと判定したとき（判定結果がＮｏのとき）には、Ｓ２１０へと処理を戻し、観察体１９の詳細画像の表示を継続する。

Ｓ２１４では、観察体１９の現在位置を示す座標データを電動ステージ２０より顕微鏡コントローラ３１を介して取得する処理が行われ、続くＳ２１５では、現在使用中の対物レンズ２３を特定する対物レンズ情報、透過照明用光源６の明るさを示す調光値情報、検鏡方法を示す検鏡情報等の、顕微鏡装置１の現在の観察状態を示している顕微鏡情報を取得する処理が行われる。そして、Ｓ２１６では、表示ウィンドウ３６に現在表示されている、観察状態再現後に新たに取得された観察体１９の詳細顕微鏡画像（拡大静止画像）のデータを、動画像データの再生位置に関連付けて（リンクさせて）データ記録部４へ記録する処理が行われ、その後はＳ２１３の判定処理へ処理を進める。

以上のＳ２１２からＳ２１６の処理の具体例を説明する。
図７に示す画面がモニタ５に表示されているときに、記録ボタン４３の押下操作が取得されると、ホストシステム２は、再現ボタン５３が操作されたときに表示ウィンドウ３６で表示されていた顕微鏡画像と、観察状態再現後に新たに取得された観察体１９の詳細顕微鏡画像（拡大静止画像）とを関連付ける情報を表示ウィンドウ３６で表示させていた動画像のデータに対して付加すると共に、当該詳細顕微鏡画像のデータをデータ記録部４へ記録する。

こうして観察体１９の詳細画像を記録した後に、動画表示ボタン４９の押下操作がなされて観察体１９の動画像を表示ウィンドウ３６で表示再生するときには、図８の画面例に示すように、リンクさせた詳細静止画像の存在位置において、破線の矩形Ｓ１により詳細静止画像が存在することを表示する。

この後に行われるＳ２０１の処理では、ポインティングデバイス等の操作によるこの領域Ｓ１の選択操作、若しくは、詳細表示ボタン５０の押下操作が取得されたときには、図７の画面例のように、高倍率の対物レンズ２３を用いて撮影された詳細静止画像を表示ウィンドウ３６に表示させる。また、この詳細静止画像が表示されているときに動画表示ボタン４９の押下操作がなされたときには、図８の画面例に示すような、詳細静止画像の存在位置の表示を含む動画像の表示再生が表示ウィンドウ３６で行われる。

以上のように、本実施形態に係る顕微鏡システムでは、観察体１９のスクリーニング中に行う観察体１９の動画像の記録に同期させて観察体１９の座標や顕微鏡装置１の観察状態を自動的に記録する。こうすることにより、詳細観察を行うポイントを容易に探し出すことが可能となり、更に、スクリーニングを既に終えた後に表示再生を行った動画像を観察した時点で始めて詳細な観察を所望するようになったスクリーニング経路上のいかなるポイントであっても、そのポイントのスクリーニング時における顕微鏡装置１の観察状態の再現が可能となる。これにより、詳細観察データの記録作業の時間が短縮化されるので、ユーザの負担が大きく低減する。

なお、本実施形態では、観察体１９の位置の再現のために、動画像の各フレームに対応付けられて記録されている座標データを直接読み出すようにしていた。ここで、例えば、図９に示すように、スクリーニングの軌跡上における黒丸の各位置のみで座標データが記録されている構成とした場合に、座標データが記録されていない白丸の位置の再現を行うことが指示されたときには、当該白丸の前後の黒丸位置である、ｂ及びｃの各座標に基づいた補間演算、若しくはａ、ｂ、ｃ、及びｄの各座標に基づいた補間演算により当該白丸の座標を算出し、この算出結果に基づいて観察体１９の位置の再現を行うようにすることもできる。また、当該白丸の前後の黒丸ｂ及びｃのうち、位置が当該白丸に近い方の座標を用いて観察体１９の位置の再現を行うようにすることもできる。

なお、本実施形態においては、動画データと共に記録する顕微鏡情報として、対物レンズ情報、調光値情報、及び検鏡情報を例にして説明したが、これらのうちの少なくとも１以上を記録するように構成してもよく、また、顕微鏡情報として、この他に、フィルタや絞り等の情報を記録するようにしてもよい。

また、本実施形態においては、顕微鏡装置１で再現させる顕微鏡情報として、対物レンズ情報、調光値情報、検鏡情報を例にして説明したが、再現させる顕微鏡情報をユーザが任意に選択する構成とすることも可能であり、更には、例えば、観察体１９のＸ−Ｙ方向の位置情報のみを再現させるといった指定ができる構成とすることも可能である。

次に、本発明の第二の実施形態として、図１に示した顕微鏡システムの動作のうちのスクリーニング作業時の動作の別の例を説明する。これより説明するスクリーニング作業時の動作では、観察体１９のスクリーニング中に行う動画像の記録時に、後に詳細観察を行うポイントを手動若しくは自動で指定することができるようにして、後に行われる詳細観察ポイントの探索を更に容易にするものである。

図１０を説明する。同図は、ホストシステム２によって行われる、スクリーニング作業時における動画データの記録処理の処理内容の第二の例をフローチャートで示したものである。この処理は、図５に示した第一の例と同様、図１に示した顕微鏡システムで観察体１９に対するスクリーニングを行ったときの動画データを取得するための処理であり、ホストシステム２のＣＰＵが所定の制御プログラムを実行することによって実現される。

図１１は、観察体１９に対するスクリーニングの経路の第二の例を示している。同図において、二点鎖線で示した曲線は低倍率の対物レンズ２３によるスクリーニングの経路を示しており、破線の四角で示した領域はこの低倍率の対物レンズ２３における視野範囲を現している。なお、ここでは、透過明視野観察によりスクリーニングを行うものとする。

図１０において、まず、Ｓ３０１では、観察体１９の電動ステージ２０へのセット作業を行うために電動ステージ２０を所定の位置に移動させる処理が行われる。
観察体１９のセットが完了すると処理はＳ３０２に進み、顕微鏡装置１を制御して、透過明視野観察に使用する各種光学素子の切換えの処理、及び、スクリーニングに使用する低倍率の対物レンズ２３の切換えの処理が行われる。

Ｓ３０３では、顕微鏡操作部３４に備えられているジョイスティックやエンコーダに対するユーザの操作内容を取得し、取得した操作内容に応じて電動ステージ２０を移動させる処理が開始される。図１１の例に二点鎖線で示されているａ点からｅ点への経路は、このときにユーザが指示したスクリーニングの経路である。

電動ステージ２０の移動が開始されると、Ｓ３０４において、ビデオカメラ３にて時系列に撮像された観察体１９の顕微鏡画像から動画像データを生成してデータ記録部４へ記録する録画処理が開始され、続くＳ３０５からＳ３１６の処理の繰り返しによって、観察体１９の動画像の録画が行われる。

Ｓ３０５及びＳ３０６では、観察体１９の顕微鏡画像の取得時における顕微鏡装置１の観察状態を取得する観察状態取得手段としてホストシステム２を機能させるための処理が行われる。すなわち、Ｓ３０５では、観察体１９の現在位置を示す電動ステージ２０の座標データを、顕微鏡コントローラ３１を介して取得する処理が行われ、続くＳ３０６では、現在使用中の対物レンズ２３を特定する対物レンズ情報、透過照明用光源６の明るさを示す調光値情報、検鏡方法を示す検鏡情報といった、顕微鏡装置１の現在の観察状態を示している顕微鏡情報を取得する処理が行われる。

Ｓ３０７からＳ３０９にかけての処理では、撮像された観察体１９の顕微鏡画像と顕微鏡画像の取得時における顕微鏡装置１の観察状態とを対応付けてデータ記録部４に記録させる対応付け手段及び記録手段としてホストシステム２を機能させるための処理が行われる。すなわち、Ｓ３０７では、観察体１９の現在の顕微鏡画像（動画像データにおける１フレーム分の画像）のデータをデータ記録部４へ記録する処理が行われ、続くＳ３０８では、Ｓ３０５の処理によって取得した座標データを、Ｓ３０７の処理で記録した顕微鏡画像に付加してデータ記録部４へ記録する処理が行われる。更に、続くＳ３０９では、Ｓ３０６の処理によって取得した顕微鏡情報を、Ｓ３０７の処理で記録した顕微鏡画像に付加してデータ記録部４へ記録する処理が行われる。

上述したＳ３０７からＳ３０９の処理により、図２に示した第一の例と同様に、例えば、図１１におけるｂ点における画像データには、観察体１９におけるｂ点の位置を示す座標データ（ｂ＿ｘ，ｂ＿ｙ，ｂ＿ｚ）と、対物レンズ情報（ｂ＿ｏｂ）、調光値情報（ｂ＿ｂｒｉｇｈｔ）、及び検鏡情報（ｂ＿ｐｏｓｉ）等の顕微鏡情報とが付加され、動画像データに関連付けられてデータ記録部４に記録される。

ここで、ユーザによる観察ポイントの設定について説明する。
観察ポイントとは観察体１９の動画像の記録時に設定するものであり、データ記録部４に記録した観察体１９の動画像を後で再生する際に、当該動画像のうちの１フレームに対して指定しておいた観察ポイントを開始位置として動画像の再生を行うことができる。

本実施形態においては、観察ポイントの設定法として、ユーザによる設定、電動ステージ２０の移動速度に基づいた設定、及び、対物レンズ２３の切り換えに基づいた設定の３種類の方法が提供される。Ｓ３１０からＳ３１５にかけての処理は、これらの設定法に基づいた観察ポイントの設定を行うための処理であり、観察体１９の動画像を構成している時系列の顕微鏡画像のうちの幾つかにフラグ情報を付加するフラグ付加手段としてホストシステム２を機能させるための処理である。

Ｓ３１０では、観察ポイントを設定するユーザからの指示を取得したか否かを判定する処理が行われる。ここで、当該指示を取得したと判定したとき（判定結果がＹｅｓのとき）には、Ｓ３１１において、「観察ポイントフラグ１」をＳ３０７の処理で記録した顕微鏡画像に付加する処理が行われ、その後はＳ３１６に処理を進める。「観察ポイントフラグ１」は、ユーザにより観察ポイントの設定がなされたときに動画像のうちの１フレームに付加されるフラグ情報である。

一方、Ｓ３１０の処理において、当該指示を取得しなかったと判定したとき（判定結果がＮｏのとき）には、Ｓ３１２において、電動ステージ２０の移動速度が所定速度以下となったか否かを判定する処理が行われる。ここで、当該移動速度が所定速度以下となったと判定したとき（判定結果がＹｅｓのとき）には、そのときに観察されていた観察体１９のポイントはユーザが詳細な観察を望んでいるポイントであると推定し、Ｓ３１３において、「観察ポイントフラグ２」をＳ３０７の処理で記録した顕微鏡画像に付加する処理が行われ、その後はＳ３１６に処理を進める。「観察ポイントフラグ２」は、電動ステージ２０の移動速度が所定値以下となったときに動画像のうちの１フレームに自動的に付加されるフラグ情報である。

一方、Ｓ３１２の処理において、当該指示を取得しなかったと判定したとき（判定結果がＮｏのとき）には、Ｓ３１４において、それまで観察に使用されていた対物レンズ２３をより高倍のものへと切り換える動作が顕微鏡装置１で行われたか否かを判定する処理が行われる。ここで、当該切り換え動作が行われたと判定したとき（判定結果がＹｅｓのとき）には、そのときに観察されていた観察体１９のポイントはユーザが詳細な観察を望んでいるポイントであると推定し、Ｓ３１５において、「観察ポイントフラグ３」をＳ３０７の処理で記録した顕微鏡画像に付加する処理が行われ、その後はＳ３１６に処理を進める。「観察ポイントフラグ３」は、対物レンズ２３を高倍のものへと切り換える動作が顕微鏡装置１で行われたときに動画像のうちの１フレームに自動的に付加されるフラグ情報である。

以上のＳ３１１からＳ３１５の処理の具体例を説明する。
例えば、図１１の例におけるｂ点のポイントに対し、ユーザが観察ポイントの設定指示を行うと、Ｓ３１０の判定結果がＹｅｓとなってＳ３１１の処理が行われ、動画像データにおけるｂ点のポイントの画像データに、前述した顕微鏡情報に加えて、「観察ポイントフラグ１」が付加される。

このように、ユーザは、スクリーニング作業中においても、任意のポイントで観察ポイントを設定することができる。なお、図１１の例では、ｂ点、ｃ点、ｄ点、及びｉ点の各ポイントで、観察ポイントをユーザが設定したものとする。

また、例えば、図１１の例におけるｅ点のポイントにおいて、電動ステージ２０の移動速度が所定の速度以下になった場合には、Ｓ３１２の判定結果がＹｅｓとなってＳ３１３の処理が行われ、動画像データにおけるｅ点のポイントの画像データに、前述した顕微鏡情報に加えて、「観察ポイントフラグ２」が付加される。

すなわち、スクリーニング作業中における観察体１９の観察時に、電動ステージ２０の移動速度を遅くして慎重な観察を行うと、その観察ポイントに「観察ポイントフラグ２」が自動的に付加される。なお、図１１の例では、ｅ点、ｆ点、ｇ点、及びｊ点に対して、電動ステージ２０の移動速度に基づいた「観察ポイントフラグ２」が設定されたものとする。

また、例えば、図１１の例におけるｈ点のポイントにおいて、対物レンズ２３が高倍のものに切り換えられた場合には、Ｓ３１４の判定結果がＹｅｓとなってＳ３１５の処理が行われ、動画像データにおけるｈ点のポイントの画像データに、前述した顕微鏡情報に加えて、「観察ポイントフラグ３」が付加される。

すなわち、スクリーニング作業中における観察体１９の観察時に、対物レンズ２３を高倍のものに切り換えて慎重な観察を行うと、その観察ポイントに「観察ポイントフラグ３」が自動的に付加される。

図１０の説明に戻る。
Ｓ３１６では、スクリーニング経路の終点（図１１の例ではｋ点）までの移動が終了し、観察が終了したか否かを判定する処理が行われる。ここで、観察が終了したと判定したとき（判定結果がＹｅｓのとき）には、Ｓ３１７において、Ｓ３０４の処理により開始された録画処理を終了させる処理が行われ、この後は、この図１０に示した動画データの記録処理が終了する。一方、観察が未だ終了していないと判定したとき（判定結果がＮｏのとき）には、Ｓ３０５へと処理を戻して上述した処理が繰り返される。

上述した処理が以上のように行われることにより、スクリーニング経路に沿って観察体１９を観察して得られた動画データの記録に同期して、その経路上の各位置における観察体１９の座標データと顕微鏡情報とが併せて記録され、更に、観察ポイントフラグも併せて記録される。

次に、観察体１９に対するスクリーニングが終了した後に、記録された観察体１９の動画像から詳細な観察を行うポイントを探し出し、そのポイントを観察したときの顕微鏡装置１の観察状態を再現すると共に、高倍率の対物レンズ２３でそのポイントを詳細観察して観察データの記録を行う動作について説明する。

まず図１２を説明する。同図は、ホストシステム２に接続されているモニタ５で、データ記録部４に動画像データが記録されている観察体１９の画像表示を行うときの画面表示の別の例を示している。なお、同図において、図４に示した第一の例と同一の構成要素には同一の符号を付しており、その説明は省略する。

データ記録部４に動画像データが記録されている観察体１９の画像表示のためにホストシステム２によって行われる制御処理の処理内容は、図５に示したものと同様である。ここでは、図１２に示した再生ウィンドウ３５が表示されている状態で、キャプチャ表示ボタン５４又はスキップボタン５５若しくは５６が操作された場合におけるＳ２０１の表示再生の処理について説明する。

まず、キャプチャ表示ボタン５４の押下操作が取得されると、データ記録部４に記録されている観察体１９の動画像データより、観察ポイントフラグが付加されている画像の検索を行い、観察ポイントフラグが付加されていた全ての画像（キャプチャ画像）を縮小して表示ウィンドウ３６に一覧表示させる処理が行われる。図１２の画面例は、この処理によってキャプチャ画像が一覧表示されている様子を表しており、図１１に示した観察体１９におけるｂ点、ｃ点、ｄ点、ｅ点、ｆ点、ｇ点、ｈ点、ｉ点、及びｊ点の各ポイントのキャプチャ画像が表示ウィンドウ３６に表示されている。

この図１２の画面において、ポインティングデバイス等の操作によるｃ点のキャプチャ画像の選択が取得されると、図１３に示すような、ポイントｃにおける観察体１９の画像を表示ウィンドウ３６に表示させる処理が行われる。なお、このとき、観察体１９の動画データよりｃ点に関する各種のデータを読み出し、観察体１９におけるｃ点の位置を示す座標データ（ｃ＿ｘ，ｃ＿ｙ，ｃ＿ｚ）、対物レンズ情報（ｃ＿ｏｂ）、調光値情報（ｃ＿ｂｒｉｇｈｔ）、及び検鏡情報（ｃ＿ｐｏｓｉ）を併せて座標表示ウィンドウ３７、３８、及び３９、対物レンズウィンドウ４１、調光値ウィンドウ４２、並びに検鏡法ウィンドウ４０にそれぞれ表示する処理が行われる。

なお、この図１３の画面が表示されている状態で再現ボタン５３の押下操作を取得した場合には、図５に示したＳ２０８以降の処理が同様に行われる。すなわち、観察体１９におけるｃ点の位置を示す座標（ｃ＿ｘ，ｃ＿ｙ，ｃ＿ｚ）を顕微鏡コントローラ３１に通知し、当該座標で表される位置に電動ステージ２０を移動させると共に、当該画像を取得したときの顕微鏡情報である、対物レンズ情報（ｃ＿ｏｂ）、調光値情報（ｃ＿ｂｒｉｇｈｔ）、及び検鏡情報（ｃ＿ｐｏｓｉ）を顕微鏡コントローラ３１に通知して、対物レンズ２３の切り換え、透過照明用光源６の調光、及び、検鏡方法の切り替えを行わせる処理が行われる。この結果、表示ウィンドウ３６で表示中の画像を取得したときの観察状態が再現された顕微鏡装置１による詳細観察が開始され、高倍率の対物レンズ２３に切り換えての詳細観察が行われる。

一方、スキップボタン５５若しくは５６の押下操作が取得された場合には、表示ウィンドウ３６での観察体１９の動画像の表示再生を一旦停止し、当該動画像においてその時点で表示していた画像の再生位置の前後で観察ポイントフラグが付加されている画像の位置からの動画像の表示再生を再開する処理が行われる。

例えば、観察体１９の動画像におけるｅ点のポイントの画像が表示ウィンドウ３６に表示されている時に、スキップボタン５６の押下操作が行われると、当該動画像におけるｆ点からの表示再生が行われる。ここで、更に、スキップボタン５６の押下操作が繰り返されると、押下操作の度に表示再生の開始位置が、ｇ点、ｈ点、…と順次切り替わる。また、観察体１９の動画像におけるｅ点のポイントの画像が表示ウィンドウ３６に表示されている時に、スキップボタン５５の押下操作が行われると、押下操作の度に表示再生の開始位置がｄ点、ｃ点、…と順次切り替わる。

このように、ホストシステム２は、表示指示取得手段であるキャプチャ表示ボタン５４又はスキップボタン５５若しくは５６に対する操作を取得すると、観察ポイントフラグが付加されている顕微鏡画像を表示ウィンドウ３６に表示させる。

また、この状態で再現ボタン５３の押下操作を取得した場合には、図５に示したＳ２０８以降の処理が同様に行われる。すなわち、その時点で表示ウィンドウ３６に表示されている観察体１９のポイントの座標を顕微鏡コントローラ３１に通知し、当該座標で表される位置に電動ステージ２０を移動させると共に、当該画像を取得したときの顕微鏡情報を顕微鏡コントローラ３１に通知して、対物レンズ２３の切り換え、透過照明用光源６の調光、及び、検鏡方法の切り替えを行わせる処理が行われる。この結果、表示ウィンドウ３６で表示中の画像を取得したときの観察状態が再現された顕微鏡装置１による詳細観察が開始され、高倍率の対物レンズ２３に切り換えての詳細観察が行われる。

以上のように、本実施形態に係る顕微鏡システムでは、観察体１９のスクリーニング中に行う動画像の記録に同期させて観察体１９の座標や顕微鏡装置１の観察状態を記録することに併せて、後に詳細観察を行うポイントを手動若しくは自動で指定することができる。こうすることにより、詳細観察を行うポイントを後で容易に探し出すことが容易となる。更に、そのポイントの観察時における顕微鏡装置１の観察状態の再現が可能であるので、詳細観察データの記録作業の時間が短縮化され、ユーザの負担が大きく低減する。

なお、本実施形態においては、キャプチャ表示ボタン５４の押下操作が取得されると、データ記録部４に記録されている観察体１９の動画像データにおいて観察ポイントフラグが付加されていた全ての画像を表示ウィンドウ３６に一覧表示させるようにしていた。この代わりに、データ記録部４に記録されている観察体１９の動画像データにおいて、ユーザが設定指示した観察ポイントを示す「観察ポイントフラグ１」が付加されていた全ての画像を表示ウィンドウ３６に一覧表示させるように構成することもできる。図１４は、「観察ポイントフラグ１」が付加されていた全ての画像を表示ウィンドウ３６に一覧表示させた画面例である。

また、この代わりに、電動ステージ２０の移動速度に基づいた観察ポイントを示す「観察ポイントフラグ２」や、観察に使用した対物レンズ２３の倍率に基づいた観察ポイントを示す「観察ポイントフラグ３」が付加されていた全ての画像を表示ウィンドウ３６に一覧表示させるように構成することもできる。更には、これらの一覧表示を選択できるように構成することもできる。

また、本実施形態においては、電動ステージ２０の移動速度や観察に使用した対物レンズ２３の倍率に基づいて観察ポイントの設定フラグを動画像データに自動的に付加するようにしていたが、この他にも、顕微鏡の他の設定の状態や、これらの組み合わせに基づいて観察ポイントの設定フラグを動画像データに自動的に付加するように構成することもできる。

ところで、図２、図５、及び図１０にフローチャートで示した処理をホストシステム２で行わせるためには、前述したような標準的な構成のコンピュータのＣＰＵに行わせるための制御プログラムを作成してコンピュータ読み取り可能な記録媒体に記録させておき、そのプログラムを記録媒体からコンピュータに読み込ませてＣＰＵで実行させるようにすればよい。

記録させた制御プログラムをコンピュータで読み取ることのできる記録媒体としては、例えば、コンピュータに内蔵若しくは外付けの付属装置として備えられるＲＯＭやハードディスク装置などの記憶装置や、コンピュータに備えられる媒体駆動装置へ挿入することによって記録された制御プログラムを読み出すことのできるフレキシブルディスク、ＭＯ（光磁気ディスク）、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭなどといった携帯可能記録媒体などが利用できる。

また、記録媒体は、通信回線を介してコンピュータと接続される、プログラムサーバとして機能するコンピュータシステムが備えている記憶装置であってもよい。この場合には、制御プログラムを表現するデータ信号で搬送波を変調して得られる伝送信号を、プログラムサーバから伝送媒体である通信回線を通じてコンピュータへ伝送するようにし、コンピュータでは、受信した伝送信号を復調して制御プログラムを再生することでこの制御プログラムをコンピュータのＣＰＵで実行できるようになる。

以上のように、本発明の各実施形態に係る顕微鏡システムを使用する場合には、まず、対物レンズからの観察光路と直交する平面内で観察試料を移動できる電動ステージを操作し、対物レンズを低倍にセットして試料全体をもれのないような操作でスクリーニングする。その後、その観察試料の中で異常部位が発見されたポイントや記録に残したいポイントに戻り、対物レンズを高倍率の対物レンズへと切換えて異常部位を更に詳細に検査する。すると、このときに、スクリーニングの動画像が記録されると共に、それに同期して観察試料の座標や顕微鏡の状態が記録される。これらの記録を用いることにより、詳細な観察を望むポイントの検索が可能となり、更に、スクリーニングにおいてそのポイントを観察したときの顕微鏡システムの状態を再現させることが可能となる。この結果、詳細データの記録作業の時間が短縮され、ユーザの負担が大きく低減する。

以上、本発明の各実施形態を説明したが、本発明は、上述した各実施形態に限定されることなく、本発明の要旨を逸脱しない範囲内で種々の改良・変更が可能である。
例えば、上述した各実施形態に係る顕微鏡システムにおいては、顕微鏡装置１として正立頭微鏡装置を採用していたが、その代わりに、倒立顕微鏡装置を採用することももちろん可能であり、また、顕微鏡装置を組み込んだライン装置といった各種システムにおいて本実施形態を適用することも可能である。

また、図３及び図１１に示した観察体１９全体のマクロ画像をまず撮影し、得られたマクロ画像上に、軌跡と現在の再生位置を表示させるようにして、現在の再生位置を容易に認識できるようにしてもよい。また、当該マクロ画像上に動画像の再生開始位置の指定を行えるようにしてもよい。更には、ユーザが任意に電動ステージ２０を操作して行っていたスクリーニング作業を、予め設定した経路に沿ってホストシステム２が自動的に行うようにし、ユーザは、得られた観察体１９の動画再生画像に対して詳細観察ポイントを設定するようにしてもよい。

は本発明を実施する顕微鏡システムの構成を示す図である。 スクリーニング作業時における動画データの記録処理の処理内容の第一の例をフローチャートで示した図である。 観察体に対するスクリーニングの経路の第一の例を示す図である。 データ記録部に動画像データが記録されている観察体の画像表示を行うときの画面表示の第一の例を示す図である。 データ記録部に動画像データが記録されている観察体の画像表示のための制御処理の処理内容をフローチャートで示した図である。 データ記録部に動画像データが記録されている観察体の画像表示を行うときの画面表示の第二の例を示す図である。 データ記録部に動画像データが記録されている観察体の画像表示を行うときの画面表示の第三の例を示す図である。 データ記録部に動画像データが記録されている観察体の画像表示を行うときの画面表示の第四の例を示す図である。 補間演算による観察体の位置を示す座標の算出を説明する図である。 スクリーニング作業時における動画データの記録処理の処理内容の第二の例をフローチャートで示した図である。 観察体に対するスクリーニングの経路の第二の例を示す図である。 データ記録部に動画像データが記録されている観察体の画像表示を行うときの画面表示の第五の例を示す図である。 データ記録部に動画像データが記録されている観察体の画像表示を行うときの画面表示の第六の例を示す図である。 データ記録部に動画像データが記録されている観察体の画像表示を行うときの画面表示の第七の例を示す図である。

符号の説明

１ 顕微鏡装置
２ ホストシステム
３ ビデオカメラ
４ データ記録部
５ モニタ
６ 透過照明用光源
７ コレクタレンズ
８ 透過用フィルタユニット
９ 透過視野絞り
１０ 透過開口絞り
１１ コンデンサ光学素子ユニット
１２ トップレンズユニット
１３ 落射照明用光源
１４ コレクタレンズ
１５ 落射用フィルタユニット
１６ 落射シャッタ
１７ 落射視野絞り
１８ 落射開口絞り
１９ 観察体
２０ 電動ステージ
２１ ステージＸ−Ｙ駆動制御部
２２ ステージＺ駆動制御部
２３、２３ａ、２３ｂ 対物レンズ
２４ レボルバ
２５ キューブユニット
２６ 接眼レンズ
２７ ビームスプリッタ
２８ ポラライザ
２９ ＤＩＣプリズム
３０ アナライザ
３１ 顕微鏡コントローラ
３２ ビデオボード
３３ カメラコントローラ
３４ 顕微鏡操作部

Claims (10)

1. 観察体の顕微鏡画像を取得する顕微鏡と、
   前記顕微鏡画像の取得時の前記顕微鏡の観察状態を取得する観察状態取得手段と、
   時系列の前記顕微鏡画像から動画像のデータを生成する動画像データ生成手段と、
   前記動画像のデータに対し、当該動画像を構成している顕微鏡画像と当該顕微鏡画像を取得したときにおける前記顕微鏡の観察状態とを対応付ける情報を付加する対応付け手段と、
   前記動画像のデータ及び当該データに対応付けられている前記顕微鏡の観察状態を記録する記録手段と、
   前記記録手段に記録されている前記動画像のデータに基づいて当該動画像を再生して前記顕微鏡画像を表示する表示手段と、
   前記観察状態を前記顕微鏡に再現させる指示を取得する再現指示取得手段と、
   前記顕微鏡を制御して、前記再現の指示を取得したときに前記表示手段に表示されていた顕微鏡画像が取得されたときの前記観察状態を当該顕微鏡に再現させる顕微鏡制御手段と、
   を有することを特徴とする顕微鏡システム。
2. 前記観察状態は、前記顕微鏡に備えられており前記観察体が載置される移動自在なステージの位置を含むことを特徴とする請求項１に記載の顕微鏡システム。
3. 前記動画像データ生成手段は、前記ステージの移動開始から移動終了までの間に取得された前記顕微鏡画像から前記動画像のデータを生成することを特徴とする請求項２に記載の顕微鏡システム。
4. 前記観察状態は、前記顕微鏡画像の取得時に前記顕微鏡において使用されていた対物レンズの倍率、当該顕微鏡画像の取得時に前記観察体に光を照射していた光源の明るさ、及び、当該顕微鏡画像の取得時において当該顕微鏡で行われていた検鏡法のうちの少なくとも１以上を含むことを特徴とする請求項１から３のうちのいずれか一項に記載の顕微鏡システム。
5. 時系列の前記顕微鏡画像のうちの幾つかにフラグ情報を付加するフラグ付加手段と、
   前記フラグ情報が付加されている顕微鏡画像を表示させる指示を取得する表示指示取得手段と、
   を更に有し、
   前記表示手段は、前記表示指示取得手段が前記指示を取得したときには、前記フラグ情報が付加されている顕微鏡画像を表示する、
   ことを特徴とする請求項１から４のうちのいずれか一項に記載の顕微鏡システム。
6. 前記フラグ付加手段は、前記顕微鏡に備えられており前記観察体が載置される移動自在なステージの移動速度が所定値以下となったときに当該顕微鏡が取得していた顕微鏡画像に前記フラグ情報を付加することを特徴とする請求項５に記載の顕微鏡システム。
7. 前記フラグ付加手段は、前記顕微鏡において使用されていた対物レンズがより高倍のものへと切り換えられたときに当該顕微鏡が取得していた顕微鏡画像に前記フラグ情報を付加することを特徴とする請求項５又は６に記載の顕微鏡システム。
8. 前記記録手段は、前記観察状態の再現がされた後の前記顕微鏡で新たに取得された顕微鏡画像を更に記録し、
   前記再現の指示を取得したときに前記表示手段に表示されていた顕微鏡画像と前記観察状態の再現がされた後の前記顕微鏡で新たに取得された顕微鏡画像とを関連付ける情報を前記動画像のデータに対して付加する関連付け手段を更に有する、
   ことを特徴とする請求項１から７のうちのいずれか一項に記載の顕微鏡システム。
9. 顕微鏡を用いて取得された観察体の顕微鏡画像の取得時における当該顕微鏡の観察状態を取得し、
   時系列の前記顕微鏡画像から動画像のデータを生成し、
   前記動画像のデータに対し、当該動画像を構成している顕微鏡画像と当該顕微鏡画像を取得したときにおける前記顕微鏡の観察状態とを対応付ける情報を付加し、
   前記動画像のデータ及び当該データに対応付けられている前記顕微鏡の観察状態を記録部に記録し、
   前記記録部に記録されている前記動画像のデータに基づいて当該動画像を再生して前記顕微鏡画像を表示部に表示し、
   前記観察状態を前記顕微鏡に再現させる指示を取得し、
   前記顕微鏡を制御して、前記再現の指示を取得したときに前記表示部に表示されていた顕微鏡画像が取得されたときの前記観察状態を当該顕微鏡に再現させる、
   ことを特徴とする顕微鏡の制御方法。
10. 顕微鏡を用いて取得された観察体の顕微鏡画像の取得時における当該顕微鏡の観察状態を取得する処理と、
    時系列の前記顕微鏡画像から動画像のデータを生成する処理と、
    前記動画像のデータに対し、当該動画像を構成している顕微鏡画像と当該顕微鏡画像を取得したときにおける前記顕微鏡の観察状態とを対応付ける情報を付加する処理と、
    前記動画像のデータ及び当該データに対応付けられている前記顕微鏡の観察状態を記録部に記録させる処理と、
    前記記録部に記録されている前記動画像のデータに基づいて当該動画像を再生して前記顕微鏡画像を表示部に表示する処理と、
    前記観察状態を前記顕微鏡に再現させる指示を取得する処理と、
    前記顕微鏡を制御して、前記再現の指示を取得したときに前記表示部に表示されていた顕微鏡画像が取得されたときの前記観察状態を当該顕微鏡に再現させる処理と、
    をコンピュータに行わせるためのプログラム。